AI用語集
人工知能の完全辞典
ニューラル機械翻訳 (NMT)
深層ニューラルネットワークを使用して言語間の対応関係をモデル化する機械翻訳のアプローチであり、現代のクロスリンガルQAシステムの基礎を構成する。
多言語表現
異なる言語の単語やフレーズが同じ意味空間に射影される共有ベクトル空間であり、言語間での知識転送を可能にする。
言語間アライメント
QAシステムにおける情報転送を容易にするために、異なる言語間の言語的および意味的構造を対応させるプロセス。
言語射影
単一言語QAシステムを適用する前に、質問または文書のみを共通のピボット言語に翻訳する手法。
多言語トークン化
複数の言語の形態的および統語的特異性を同時に考慮しながら、テキストを基本単位(トークン)に分割するプロセス。
クロスリンガル・ファインチューニング
1つまたは複数の対象言語におけるQAタスク固有のデータを使用して、事前学習済みの多言語モデルを適応させる段階。
言語シフト (Language Shift)
クロスリンガルQAシステムにおいて、高リソース言語から低リソース言語へ移行する際にモデルのパフォーマンスが低下する現象。
多言語コンテキスト埋め込み
文脈に基づいて単語の意味を捉える動的なベクトル表現であり、より良い意味理解のために複数の言語間で共有される。
逆翻訳
テキストを対象言語に翻訳し、その後元の言語に再翻訳して合成トレーニングデータを生成するデータ拡張手法。
言語重み付け
データ量の多い言語による支配を避けるために、各言語の貢献度を均衡させることを目的としたトレーニングデータのサンプリング戦略。
言語検出
入力された質問の言語を自動的に識別し、適切な処理へと誘導する、クロスリンガルQAシステムの不可欠な構成要素。
クロスリンガル正規化
言語間のテキスト表現を標準化し、言語的変動を減らしてQAシステムの堅牢性を向上させるプロセス。
ユニバーサル言語モデル
すべての人間の言語に共通する言語的規則性を捉えるように設計されたモデルで、真に多言語なQAシステムの基盤となるもの。
コードスイッチング適応
自然な多言語環境で一般的に見られる、複数の言語が混在する質問を処理するQAシステムの能力。
クロスリンガル評価
XNLIやMLQAなどの指標を含め、言語ペア間でのQAシステムのパフォーマンスを測定するための特定の方法論。