Traduction automatique

Byte-Pair Encoding (BPE)

Algorithme de compression de données adapté pour la tokenisation en sous-mots, créant un vocabulaire optimal en fusionnant itérativement les paires de symboles les plus fréquentes.

← Retour