Arquitectura Codificador-Decodificador

Mecanismo Clave-Valor-Petición

Abstracción fundamental del mecanismo de atención donde cada token se proyecta en tres vectores: la petición (lo que busco), la clave (lo que tengo) y el valor (lo que devuelvo), para calcular los pesos de atención.

← Volver