Layer Normalization

RMS Normalization

Variante efficace de la normalisation de couche utilisant uniquement la racine carrée moyenne des activations, réduisant la complexité computationnelle tout en maintenant les performances.

← Retour