Terme du glossaire IA

Qu’est-ce que GSM8K ?

Définition

Une référence de problèmes de mots mathématiques à l'école primaire utilisée pour évaluer le raisonnement étape par étape dans les modèles de langage.

Parcourez le glossaire complet de l'IAExplorez tous les guides gratuits sur l'IA

Termes associés

HumanEvalUn benchmark des problèmes de programmation Python utilisé pour mesurer l'exactitude de la génération de code via des tests unitaires.Vérité terrainÉtiquettes de référence fiables utilisées pour entraîner ou évaluer les sorties du modèle.AnnotationsÉtiquettes ou métadonnées ajoutées par l’homme utilisées pour entraîner ou évaluer des modèles d’apprentissage automatique.Intelligence artificielle (IA)Le vaste domaine de la construction de systèmes qui exécutent des tâches nécessitant une reconnaissance de formes, un raisonnement, un langage ou une prise de décision.RéférenceUn test ou un ensemble de données standardisé utilisé pour mesurer et comparer les performances du modèle.Graphique des connaissancesUne structure graphique d'entités et de relations utilisée pour le raisonnement ou la récupération.

Voir aussi

FactualityMMLUCitationsPass@kWatermarkingLLM-as-JudgeMid-trainingBi-Encoder