Co jest MMLU?

Używanie modelu językowego do oceniania lub porównywania wyników innych modeli podczas ewaluacji.

Test porównawczy problemów tekstowych z matematyki w szkole podstawowej, używany do oceny rozumowania krok po kroku w modelach językowych.

Przechowywany kontekst, którego agent AI używa na różnych etapach lub sesjach, aby poprawić ciągłość.

Model, który może przetwarzać lub generować wiele typów danych, takich jak tekst, obraz i dźwięk.

Centralny katalog do wersjonowania, zatwierdzania i śledzenia modeli w różnych środowiskach.

Hipotetyczny system sztucznej inteligencji, który może wykonywać większość zadań intelektualnych na poziomie człowieka w wielu dziedzinach.