Técnicas de Reducción de Varianza

Mini-lote

Subconjunto de tamaño intermedio del conjunto de datos completo utilizado para calcular estimaciones de gradiente en cada iteración. Los mini-lotes reducen la varianza en comparación con el SGD puro, siendo a la vez más eficientes que los gradientes completos.

← Volver