Attention par Produits Scalaires

Poids d'Attention

Coefficients normalisés par softmax indiquant l'importance relative de chaque élément pour la génération de la sortie.

← Tillbaka