自動翻訳

バイトペアエンコーディング（BPE）

データ圧縮アルゴリズムをサブワードトークン化に適用したもので、最も頻度の高い記号ペアを反復的にマージして最適な語彙を作成します。

← 戻る