Glossaire IA
Le dictionnaire complet de l'Intelligence Artificielle
242
catégories
3 353
sous-catégories
40 780
termes
termes
Key-Query-Value (KQV)
Triple de vecteurs projetés à partir de l'entrée d'un mécanisme d'attention, où les clés et les requêtes calculent les poids d'attention et les valeurs sont agrégées selon ces poids.
termes
Relative Positional Attention
Mécanisme d'attention qui incorpore directement les distances relatives entre les positions dans le calcul des scores d'attention, offrant une meilleure généralisation aux longueurs de séquence variables.
🔍