Online Learning Optimization

Mini-batch SGD

Compromis entre SGD et gradient batch, utilisant de petits sous-ensembles de données pour estimer les gradients, offrant un meilleur équilibre entre vitesse de convergence et stabilité numérique.

← Terug