Nedir MMLU?

Değerlendirme sırasında diğer modellerin çıktılarını puanlamak veya karşılaştırmak için bir dil modelinin kullanılması.

Dil modellerinde adım adım akıl yürütmeyi değerlendirmek için kullanılan ilkokul matematik kelime problemlerinin bir ölçütü.

Bir AI aracısının sürekliliği artırmak için adımlar veya oturumlar boyunca kullandığı kayıtlı bağlam.

Metin, resim ve ses gibi birden fazla veri türünü işleyebilen veya üretebilen bir model.

Modellerin ortamlar arasında sürümlendirilmesi, onaylanması ve izlenmesi için merkezi bir katalog.

Birçok alanda insan düzeyinde çoğu entelektüel görevi yerine getirebilen varsayımsal bir yapay zeka sistemi.