Термін глосарію AI

Що є MMLU?

Визначення

Еталонний тест, який тестує мовні моделі з 57 академічних і професійних предметів за допомогою питань із варіантами відповідей.

Споріднені терміни

LLM-як-суддя
Використання мовної моделі для оцінки або порівняння результатів інших моделей під час оцінювання.
GSM8K
Тест початкових шкільних математичних текстових задач, які використовуються для оцінки покрокових міркувань у мовних моделях.
Пам'ять (Пам'ять агента)
Збережений контекст агент штучного інтелекту використовує на етапах або сеансах для покращення безперервності.
Мультимодальна модель
Модель, яка може обробляти або генерувати кілька типів даних, таких як текст, зображення та аудіо.
Реєстр моделей
Центральний каталог для версії, затвердження та відстеження моделей у різних середовищах.
AGI (загальний штучний інтелект)
Гіпотетична система ШІ, яка може виконувати більшість інтелектуальних завдань на рівні людини в багатьох сферах.

See also

Pass@kHumanEvalBi-EncoderFactualityCross-EncoderCitationsHybrid SearchWatermarking
Перегляньте повний Глосарій ШІПерегляньте всі безкоштовні посібники зі штучного інтелекту