Momentum

Inertie dans l'optimisation

Phénomène physique analogique où les mises à jour de paramètres conservent une partie de leur élan précédent, permettant de franchir les plateaux et les minima locaux peu profonds. L'inertie est particulièrement efficace pour naviguer dans les paysages de perte complexes et non convexes.

← Retour