Momentum

Momentum cyclique

Variation périodique du facteur de momentum synchronisée avec les cycles d'apprentissage pour échapper aux minima locaux et explorer l'espace des solutions. Cette approche est souvent combinée avec des taux d'apprentissage cycliques pour une optimisation globale améliorée.

← Geri