ポジショナルエンコーディング

Positional Bias

アテンションメカニズムにおいて、トークン間の位置関係を考慮するためにアテンションスコアに適用される加法的または乗法的な項。

← 戻る