Qu’est-ce que la distillation de modèles ? Comment les grands modèles d’IA enseignent aux plus petits
La distillation de modèles transfère le comportement d’un enseignant, plus grand ou plus performant, vers un modèle élève plus petit, à l’aide des sorties de l’enseignant,...
