Słownik AI
Kompletny słownik sztucznej inteligencji
162
kategorie
2 032
podkategorie
23 060
pojęcia
pojęcia
Token
L'unité de base de texte ou de séquence sur laquelle opère un Transformer, résultant d'un processus de tokenisation qui segmente les données brutes en morceaux significatifs.
pojęcia
Résiduel Connection
Un raccourci qui permet de contourner une ou plusieurs couches dans un réseau de neurones, utilisé dans les Transformers pour faciliter l'entraînement de modèles très profonds.
pojęcia
Pré-entraînement
La phase initiale d'entraînement d'un grand modèle Transformer sur un vaste corpus de données non étiquetées, visant à apprendre des représentations linguistiques générales avant un affinage spécifique.
🔍