Seq2Seq (Secuencia a Secuencia)

Teacher Forcing

Estrategia de entrenamiento donde el decodificador recibe los verdaderos valores anteriores como entrada en lugar de sus propias predicciones, acelerando la convergencia. Esta técnica estabiliza el aprendizaje pero puede crear una divergencia entre entrenamiento e inferencia conocida como exposure bias.

← Volver