モーダルアライメント

自己教師ありマルチモーダル学習

モデルが注釈のないモダリティ間の自然な相関を活用して自動的に整列を学習するパラダイム。データのマルチモーダル構造から内在的な学習信号を生成する。

← 戻る