AI用語集
人工知能の完全辞典
236
カテゴリ
3,245
サブカテゴリ
39,334
用語
用語
エンコーダーデコーダーアーキテクチャ
トランスフォームモデルの基本的な構造で、入力シーケンスを処理・理解するエンコーダーと、自己回帰的に出力シーケンスを生成するデコーダーを組み合わせたもの。
用語
エンコーダースタック
マルチヘッドアテンションとフィードフォワードネットワークを組み合わせた同一のエンコーダー層を複数重ねたもので、入力表現を段階的により豊かな抽象表現に変換する。
用語
デコーダースタック
出力シーケンスをトークンごとに生成するデコーダー層の重ねで、マスク付き自己アテンションとクロスアテンションの両方を統合して時間的依存関係と入出力関係をモデル化する。
用語
トランスフォーマーブロック
マルチヘッドアテンション、残差接続、層正規化、フィードフォワードネットワークを組み合わせた基本的な計算単位で、エンコーダーとデコーダーの基礎を構成する。
🔍