Glosario IA
El diccionario completo de la Inteligencia Artificial
Embedding Queue
FIFO (First In First Out) maintenue dynamiquement pour stocker et réutiliser les embeddings récents comme échantillons négatifs.
Negative Sampling Strategy
Méthode de sélection d'échantillons négatifs depuis la memory bank pour assurer diversité et pertinence lors de l'entraînement.
Feature Bank
Repository de caractéristiques extraites précédemment utilisées pour améliorer la stabilité et la consistance des représentations apprises.
MoCo Architecture
Framework Momentum Contrast utilisant une queue dynamique et un encodeur momentum pour maintenir un large dictionnaire de négatives.
Queue-based Learning
Paradigme d'apprentissage utilisant des structures de queue pour maintenir un ensemble dynamique d'exemples négatifs pendant l'entraînement.
Dictionary Size
Dimension de la memory bank déterminant le nombre total d'embeddings négatifs disponibles pour la comparaison contrastive.
Feature Momentum Update
Mécanisme de mise à jour progressive des embeddings dans la memory bank pour garantir stabilité et cohérence temporelle.
Cross-batch Memory
Technique permettant l'accès aux embeddings de batches précédents pour enrichir le pool de négatives au-delà du batch courant.
Prototype Memory
Stockage de représentations prototypes au lieu d'embeddings individuels pour réduire la mémoire et améliorer la généralisation.
Decoupled Memory Update
Stratégie séparant la mise à jour des poids du réseau de celle des embeddings dans la memory bank pour optimiser l'entraînement.
Memory Bank Decay
Mécanisme de décroissance progressive de l'influence des anciens embeddings pour maintenir la pertinence temporelle des négatives.
Hierarchical Memory
Structure multi-niveaux de memory banks organisant les embeddings par similarité ou temporalité pour un accès efficace.
Distributed Memory Bank
Architecture partitionnant la memory bank sur plusieurs dispositifs pour scalabilité dans les entraînements à grande échelle.