Масштабирование внимания

Нормализация размерности эмбеддингов

Техника нормализации, основанная на размерности эмбеддингов, для обеспечения сопоставимой величины векторных представлений в пространстве внимания.

← Назад