Mi az Benchmark?

Ha benchmark tesztpéldák vagy közeli változatok jelennek meg a betanítási adatokban, ez megnöveli a jelentett teljesítményt.

Kinyújtott adatkészlet, amelyet a modell minőségének mérésére használnak edzés után.

A Python programozási problémák referenciaértéke, amelyet a kódgenerálás helyességének mérésére használnak egységteszteken keresztül.

Egy egyszerű referenciamodell annak összehasonlítására, hogy az összetettebb megközelítések valóban javítják-e az eredményeket.

Strukturált vagy strukturálatlan példák gyűjteménye képzéshez, érvényesítéshez vagy teszteléshez.

A fejlesztés során a modellek hangolására és a túlillesztés megelőzésére használt adatkészlet.