Wat is Benchmark?

Wanneer benchmarktestvoorbeelden of sterk gelijkende varianten aanwezig zijn in trainingsgegevens, worden de gerapporteerde prestaties verhoogd.

Een vastgehouden dataset die wordt gebruikt om de modelkwaliteit na training te meten.

Een benchmark van Python-programmeerproblemen die wordt gebruikt om de correctheid van het genereren van code te meten via unit-tests.

Een eenvoudig referentiemodel dat wordt gebruikt om te vergelijken of complexere benaderingen daadwerkelijk de resultaten verbeteren.

Een verzameling gestructureerde of ongestructureerde voorbeelden die worden gebruikt voor training, validatie of testen.

Een dataset die tijdens de ontwikkeling wordt gebruikt om modellen af te stemmen en overfitting te voorkomen.