Оптимизация трансформеров

Обратимые слои

Слои Transformer, разработанные для восстановления активаций из выходных данных, устраняющие необходимость хранения промежуточных активаций.

← Назад