マルチモーダル解釈可能性

モーダル表現整合

モデルが共有埋め込み空間内で異なるモダリティの表現を意味的にどのように整合させるかを分析する解釈手法。クロスモーダルモデルにおけるモーダル間翻訳メカニズムの理解に重要。

← 戻る