Knowledge Distillation

Relational Knowledge Distillation

Approche où le student apprend les relations structurelles entre les échantillons d'entraînement préservées par le teacher, au-delà des prédictions individuelles.

← Retour