Glossaire IA
Le dictionnaire complet de l'Intelligence Artificielle
Calibration Per-Batch
Processus d'ajustement des paramètres de quantification échelle et zéro-point pour chaque lot de données, optimisant la précision de représentation en temps réel.
Échelle Dynamique
Paramètre de quantification variable qui adapte le facteur de conversion entre nombres flottants et entiers selon la distribution statistique du batch courant.
Zéro-Point Dynamique
Valeur d'offset ajustée dynamiquement pour garantir que la valeur zéro en virgule flottante soit représentée exactement après quantification, variant selon le batch.
Min-Max Dynamique
Algorithme de calibration qui détermine les bornes de quantification en calculant les valeurs min et max de chaque activation batch par batch.
Entropie Dynamique
Méthode de calibration basée sur la minimisation de l'entropie de KL divergence, recalculée dynamiquement pour optimiser la distribution quantifiée.
KL-Divergence Dynamique
Technique de calibration mesurant la divergence entre distributions originales et quantifiées, ajustée dynamiquement pour minimiser la perte d'information.
Quantification Post-Entraînement Dynamique
Approche de quantification appliquée après l'entraînement du modèle, utilisant des statistiques d'exécution pour déterminer les paramètres optimaux de quantification.
Calibration Adaptative
Mécanisme d'ajustement continu des paramètres de quantification basé sur les caractéristiques évolutives des données d'entrée en production.
Facteur de Quantification Dynamique
Coefficient multiplicatif variable appliqué lors de la conversion des activations, optimisé dynamiquement selon l'amplitude des valeurs du batch.
Précision Dynamique
Capacité d'un système de quantification à maintenir une précision optimale en adaptant continuellement les paramètres aux variations de distribution des données.
Reconstruction d'Erreur Dynamique
Technique évaluant et minimisant l'erreur de quantification en temps réel, ajustant les paramètres pour optimiser la fidélité de reconstruction.
Optimisation Dynamique de Bits
Stratégie adaptant le nombre de bits de quantification par couche ou par batch en fonction de la sensibilité et des caractéristiques des activations.
Quantification Hybride Dynamique
Combination de statique et dynamique où certains poids sont quantifiés statiquement tandis que les activations utilisent une calibration dynamique batch par batch.
Calibration Actif-Passif
Méthode hybride alternant entre calibration active (recalcul fréquent) et passive (mise en cache) pour optimiser performances et précision.
Seuillage Dynamique
Technique adaptant les seuils de saturation et de troncature de la quantification selon les caractéristiques statistiques évolutives des activations.