Cross-Attention

Cross-Attention Gradient Flow

Propagation du gradient à travers la matrice d'attention pendant la rétropropagation, essentielle pour l'apprentissage des poids d'attention.

← 뒤로