Qu'est-ce que GSM8K?

Un benchmark des problèmes de programmation Python utilisé pour mesurer l'exactitude de la génération de code via des tests unitaires.

Étiquettes de référence fiables utilisées pour entraîner ou évaluer les sorties du modèle.

Étiquettes ou métadonnées ajoutées par l’homme utilisées pour entraîner ou évaluer des modèles d’apprentissage automatique.

Le vaste domaine de la construction de systèmes qui exécutent des tâches nécessitant une reconnaissance de formes, un raisonnement, un langage ou une prise de décision.

Un test ou un ensemble de données standardisé utilisé pour mesurer et comparer les performances du modèle.

Une structure graphique d'entités et de relations utilisée pour le raisonnement ou la récupération.