Термін глосарію AI

Що таке MMLU?

Визначення

Еталонний тест, який тестує мовні моделі з 57 академічних і професійних предметів за допомогою питань із варіантами відповідей.

Перегляньте повний Глосарій ШІПерегляньте всі безкоштовні посібники зі штучного інтелекту

Споріднені терміни

LLM-як-суддяВикористання мовної моделі для оцінки або порівняння результатів інших моделей під час оцінювання.GSM8KТест початкових шкільних математичних текстових задач, які використовуються для оцінки покрокових міркувань у мовних моделях.Пам'ять (Пам'ять агента)Збережений контекст агент штучного інтелекту використовує на етапах або сеансах для покращення безперервності.Мультимодальна модельМодель, яка може обробляти або генерувати кілька типів даних, таких як текст, зображення та аудіо.Реєстр моделейЦентральний каталог для версії, затвердження та відстеження моделей у різних середовищах.AGI (загальний штучний інтелект)Гіпотетична система ШІ, яка може виконувати більшість інтелектуальних завдань на рівні людини в багатьох сферах.

Дивіться також

Pass@kHumanEvalBi-EncoderFactualityCross-EncoderCitationsHybrid SearchWatermarking