Istilah Glosarium AI

Apa itu Evaluasi Manusia?

Definisi

Tolok ukur masalah pemrograman Python yang digunakan untuk mengukur kebenaran pembuatan kode melalui pengujian unit.

Jelajahi Glosarium AI selengkapnyaJelajahi semua panduan AI gratis

Istilah terkait

Tolok ukurTes atau kumpulan data standar yang digunakan untuk mengukur dan membandingkan kinerja model.GSM8KTolok ukur soal cerita matematika sekolah dasar yang digunakan untuk mengevaluasi penalaran langkah demi langkah dalam model bahasa.Kumpulan EvaluasiKumpulan data yang digunakan untuk mengukur kualitas model setelah pelatihan.Perhitungan Waktu TesPerhitungan inferensi tambahan yang digunakan selama pembuatan respons untuk meningkatkan kualitas atau penalaran.Lulus@kMetrik evaluasi kode yang mengukur kemungkinan setidaknya satu dari k sampel yang dihasilkan lulus pengujian.Tata Kelola AIKebijakan, standar, dan mekanisme pengawasan yang memandu bagaimana AI dikembangkan dan digunakan di masyarakat.

Lihat juga

MMLUFactualityLLM-as-JudgeCitationsBi-EncoderWatermarkingCross-EncoderMid-training