Tokenization Subword

BPE Dropouts

Técnica de regularización que introduce aleatoriedad en el proceso de tokenización BPE ignorando ciertas fusiones durante el entrenamiento, mejorando la robustez y la generalización del modelo.

← Volver