Wat is GSM8K?

Een benchmark van Python-programmeerproblemen die wordt gebruikt om de correctheid van het genereren van code te meten via unit-tests.

Betrouwbare referentielabels die worden gebruikt om modeluitvoer te trainen of evalueren.

Door mensen toegevoegde labels of metagegevens die worden gebruikt om machine learning-modellen te trainen of evalueren.

Het brede veld van het bouwen van systemen die taken uitvoeren die patroonherkenning, redenering, taal of besluitvorming vereisen.

Een gestandaardiseerde test of dataset die wordt gebruikt om de prestaties van modellen te meten en te vergelijken.

Een grafiekstructuur van entiteiten en relaties die wordt gebruikt voor redeneren of ophalen.