Mecanismo de Atenção

Normalização Softmax

Função de ativação aplicada aos escores de atenção para convertê-los em distribuição de probabilidades, garantindo que a soma dos pesos seja igual a 1.

← Voltar