AI用語集

📖

用語

クロスモーダル融合

異なるモダリティから得られた特徴を共通の表現空間に統合し、データタイプ間の一貫した相互作用を可能にするプロセス

📖

用語

マルチヘッドTransformerアーキテクチャ

共有潜在空間内で異なるモダリティ間の関係を同時に処理するために、並列アテンション機構を使用するニューラル構造

📖

用語

共創的生成

複数のモダリティが相互依存的に同時生成され、それぞれがリアルタイムで互いに影響を与え合うアプローチ

📖

用語

統合拡散パイプライン

すべてのモダリティが同じ拡散・ノイズ除去プロセスに従い、中間ステップを共有することで一貫性を向上させる統合アーキテクチャ

📖

用語

マルチモーダルアテンション機構

コンテキストと条件付き入力に基づいて、生成時に異なるモダリティの重要性を動的に重み付けするモデルシステム

📖

用語

ユニバーサルベースモデル

複数のモダリティで事前学習され、特定の学習を必要とせずに様々なマルチモーダル生成タスクの基盤として機能するアーキテクチャ

📖

用語

テキストガイド拡散

テキスト記述が拡散プロセスを導き、視覚、聴覚、または映像モダリティにおいて対応する一貫した出力を生成する技術

📖

用語

モーダル投影

異なるモダリティの表現を共通の潜在空間にマッピングしながら、それらの特定の特徴を保存する数学的変換

📖

用語

ゼロショット生成

マルチモーダルモデルが、モーダル間の関係性の理解を通じて、学習中に見たことのないモダリティの組み合わせを生成する能力

📖

用語

モーダルゲート機構

生成および拡散プロセスにおいて、異なるモダリティ間の情報フローを選択的に制御するニューラル制御システム

📖

用語

階層的特徴融合

低レベル意味から高レベル概念まで、異なる抽象度レベルでマルチモーダル特徴を組み合わせる戦略