Técnicas de Reducción de Varianza

Varianza del gradiente

Medida de la variabilidad de las estimaciones de gradiente estocásticas debido al muestreo aleatorio de los datos. La reducción de esta varianza es el objetivo principal de las técnicas SVRG y SAGA para mejorar la convergencia.

← Volver