Arquitectura Transformer

Codificación Posicional Sinusoidal

Método de codificación posicional que utiliza funciones sinusoidales de diferentes frecuencias, permitiendo al modelo extrapolar a longitudes de secuencia no vistas.

← Volver