Auto-supervision Générationnelle

Bidirectional Encoder

Composant utilisant le contexte passé et futur pour encoder les tokens, crucial pour les tâches de masquage en auto-supervision générative.

← Retour