サブワードトークナイゼーション

形態素解析

単語内の形態素と文法構造を特定するプロセスで、言語の形態論的規則性を自然に捉えるサブワードトークナイザーによって最適化されます。

← 戻る