Termin ze słownika AI

Czym jest MMLU?

Definicja

Test porównawczy testujący modele językowe z 57 przedmiotów akademickich i zawodowych za pomocą pytań wielokrotnego wyboru.

Przejrzyj pełny słownik AIPrzeglądaj wszystkie bezpłatne przewodniki AI

Powiązane terminy

LLM jako sędziaUżywanie modelu językowego do oceniania lub porównywania wyników innych modeli podczas ewaluacji.GSM8KTest porównawczy problemów tekstowych z matematyki w szkole podstawowej, używany do oceny rozumowania krok po kroku w modelach językowych.Pamięć (pamięć agenta)Przechowywany kontekst, którego agent AI używa na różnych etapach lub sesjach, aby poprawić ciągłość.Model multimodalnyModel, który może przetwarzać lub generować wiele typów danych, takich jak tekst, obraz i dźwięk.Rejestr modeliCentralny katalog do wersjonowania, zatwierdzania i śledzenia modeli w różnych środowiskach.AGI (sztuczna inteligencja ogólna)Hipotetyczny system sztucznej inteligencji, który może wykonywać większość zadań intelektualnych na poziomie człowieka w wielu dziedzinach.

Zobacz także

Pass@kHumanEvalBi-EncoderFactualityCross-EncoderCitationsHybrid SearchWatermarking