Second-order Stochastic Methods

L-BFGS (Limited-memory BFGS)

Variante quasi-Newton qui approxime la matrice Hessienne inverse en utilisant uniquement les dernières m itérations, réduisant drastiquement la complexité mémoire tout en conservant les avantages d'ordre deux.

← Terug