ما هو HumanEval?

اختبار موحد أو مجموعة بيانات تستخدم لقياس ومقارنة أداء النموذج.

معيار للمشاكل اللفظية الرياضية في المدارس الابتدائية يستخدم لتقييم التفكير خطوة بخطوة في نماذج اللغة.

مجموعة بيانات محفوظة تستخدم لقياس جودة النموذج بعد التدريب.

حساب الاستدلال الإضافي المستخدم أثناء إنشاء الاستجابة لتحسين الجودة أو الاستدلال.

مقياس تقييم الكود الذي يقيس فرصة اجتياز واحدة على الأقل من العينات المولدة k للاختبارات.

السياسات والمعايير وآليات الرقابة التي توجه كيفية تطوير الذكاء الاصطناعي واستخدامه في المجتمع.