エンコーダー・デコーダー・アーキテクチャ
トランスフォーマーブロック
マルチヘッドアテンション、残差接続、層正規化、フィードフォワードネットワークを組み合わせた基本的な計算単位で、エンコーダーとデコーダーの基礎を構成する。
← 戻るマルチヘッドアテンション、残差接続、層正規化、フィードフォワードネットワークを組み合わせた基本的な計算単位で、エンコーダーとデコーダーの基礎を構成する。
← 戻る