マルチモーダルトランスフォーマー

モダリティギャップ

異なるモダリティの表現空間間に存在する構造的・意味的な差異で、マルチモーダルモデルでは特定のアライメントメカニズムが必要となります。

← 戻る