Seq2Seq (Sequence-to-Sequence)

Masking

Procédure consistant à masquer certaines positions des séquences pour éviter que le modèle ne traite des informations non pertinentes ou futures. Le masking est essentiel pour gérer les séquences de longueurs variables et empêcher la triche lors de l'entraînement auto-régressif.

← Retour