Сворачивание пакетной нормализации

Оптимизация, применяемая после обучения, которая интегрирует параметры слоя пакетной нормализации (среднее значение и дисперсию) в веса и смещения предыдущего сверточного или линейного слоя, устраняя необходимость вычислять нормализацию во время вывода и снижая задержку.

← Назад