RMSprop

Затухание веса

Техника регуляризации, которая штрафует большие веса, добавляя член регуляризации L2 к функции потерь. Она помогает предотвратить переобучение и способствует созданию более простых моделей с меньшими весами.

← Назад