Tokenização Subword

BPE Dropouts

Técnica de regularização que introduz aleatoriedade no processo de tokenização BPE, ignorando algumas fusões durante o treinamento, melhorando a robustez e a generalização do modelo.

← Voltar