Apprendre Actus Outils Emplois Mission

Terme du glossaire IA

Qu’est-ce que Distillation ?

Définition

Compression des connaissances d'un grand modèle d'enseignant dans un modèle d'étudiant plus petit.

Parcourez le glossaire complet de l'IA Explorez tous les guides gratuits sur l'IA

Distillation des connaissancesEntraîner un modèle plus petit pour imiter les résultats d'un modèle plus grand.Apprentissage continuDes approches de formation qui permettent à un modèle de continuer à apprendre de nouvelles données sans oublier les connaissances antérieures.RAG (génération augmentée par récupération)Une méthode qui récupère des connaissances externes et les intègre à la génération au moment de l'inférence.RécupérationRecherche de documents ou d'enregistrements pertinents à partir d'une source de connaissances pour une requête.Lignée des donnéesUn enregistrement indiquant d'où proviennent les données, comment elles ont été transformées et où elles sont utilisées.Confidentialité différentielleUne technique de confidentialité qui ajoute du bruit statistique afin que les enregistrements individuels ne puissent pas être déduits de manière fiable des résultats.

Apprenez-en davantage dans nos guides gratuits

DINO Self-Distillation DreamFusion and Score Distillation Sampling Knowledge Distillation Adversarial Diffusion Distillation and Turbo Models

Voir aussi

Diffusion Model Domain Adaptation Deep Learning Embedding Decision Tree Encoder Decision Boundary Ensemble