Istilah Glosarium AI

Apa itu MMLU?

Definisi

Sebuah tolok ukur yang menguji model bahasa di 57 mata pelajaran akademik dan profesional menggunakan pertanyaan pilihan ganda.

Jelajahi Glosarium AI selengkapnyaJelajahi semua panduan AI gratis

Istilah terkait

LLM-sebagai-HakimMenggunakan model bahasa untuk menilai atau membandingkan keluaran dari model lain selama evaluasi.GSM8KTolok ukur soal cerita matematika sekolah dasar yang digunakan untuk mengevaluasi penalaran langkah demi langkah dalam model bahasa.Memori (Memori Agen)Konteks tersimpan yang digunakan agen AI di seluruh langkah atau sesi untuk meningkatkan kontinuitas.Model MultimodaModel yang dapat memproses atau menghasilkan beberapa tipe data seperti teks, gambar, dan audio.Registri ModelKatalog pusat untuk pembuatan versi, persetujuan, dan pelacakan model di seluruh lingkungan.AGI (Kecerdasan Umum Buatan)Sistem AI hipotetis yang dapat melakukan sebagian besar tugas intelektual pada tingkat manusia di banyak domain.

Lihat juga

Pass@kHumanEvalBi-EncoderFactualityCross-EncoderCitationsHybrid SearchWatermarking