Нормализация слоя

Распределение активаций

Распределение значений активаций в слое, которое нормализация слоя поддерживает постоянным, облегчая сходимость и оптимизацию сетей трансформеров.

← Назад