Muda wa Kamusi ya AI

HumanEval ni nini?

Ufafanuzi

Kigezo cha matatizo ya programu ya Python kinachotumika kupima usahihi wa uundaji wa msimbo kupitia majaribio ya kitengo.

Vinjari Kamusi kamili ya AIGundua miongozo yote ya bure ya AI

Masharti yanayohusiana

KiwangoJaribio sanifu au seti ya data inayotumika kupima na kulinganisha utendakazi wa muundo.GSM8KKigezo cha matatizo ya neno la hesabu la shule ya sekondari kinachotumiwa kutathmini hoja za hatua kwa hatua katika miundo ya lugha.Seti ya TathminiSeti ya data iliyosimamishwa inayotumika kupima ubora wa kielelezo baada ya mafunzo.Kokotoo la Muda wa MtihaniKokotoo la ziada la uelekezaji linalotumika wakati wa kutoa majibu ili kuboresha ubora au hoja.Pass@kKipimo cha tathmini ya msimbo kinachopima uwezekano kwamba angalau sampuli moja kati ya k iliyozalishwa itafaulu majaribio.Utawala wa AISera, viwango, na taratibu za uangalizi zinazoongoza jinsi AI inavyotengenezwa na kutumika katika jamii.

Tazama pia

MMLUFactualityLLM-as-JudgeCitationsBi-EncoderWatermarkingCross-EncoderMid-training