Técnicas de Reducción de Varianza

Complejidad de memoria

Espacio de memoria requerido por el algoritmo para almacenar la información necesaria para los cálculos. SAG y SAGA requieren O(n) de memoria para almacenar los gradientes históricos, mientras que SVRG solo requiere O(1) de memoria adicional.

← Volver