AdamW

Momento de segunda ordem

Média móvel exponencial dos quadrados dos gradientes que estima a variância para adaptar a taxa de aprendizado de acordo com a curvatura local.

← Voltar