Термін глосарію AI

Що таке Pass@k?

Визначення

Показник оцінки коду, який вимірює ймовірність того, що принаймні один із k згенерованих зразків пройде тести.

Перегляньте повний Глосарій ШІПерегляньте всі безкоштовні посібники зі штучного інтелекту

Споріднені терміни

PerplexityПоказник мовної моделі, який вимірює, наскільки модель здивована справжніми наступними токенами.Крос-кодувальникМодель, яка оцінює запит і документ разом за один прохід для високоточного оцінювання релевантності.HumanEvalЕталонний тест проблем програмування на Python, який використовується для вимірювання правильності генерації коду за допомогою модульних тестів.API (інтерфейс прикладного програмування)Структурований спосіб для однієї програмної системи надсилати запити до іншої системи та отримувати відповіді від неї.КласифікаціяЗавдання, у якому модель призначає вхідні дані одній або кільком попередньо визначеним категоріям.Адаптація доменуМетоди, які передають модель, навчену в одному домені, для кращої роботи в іншому домені.

Дізнайтеся більше в наших безкоштовних посібниках

Dense Passage RetrievalPass@k Metric ExplainedGenerative AI for First-Pass Document ReviewAI for Leveled Reading Passages

Дивіться також

LLM-as-JudgeMMLUBi-EncoderGSM8KHybrid SearchFactualityRerankerCitations