Термин от речника на AI

Какво е Pass@k?

Определение

Показател за оценка на кода, измерващ шанса поне една от k генерирани проби да премине тестовете.

Разгледайте пълния AI речникРазгледайте всички безплатни ръководства за AI

Свързани термини

PerplexityПоказател на езиков модел, измерващ колко изненадан е моделът от истинските следващи токени.Кръстосан енкодерМодел, който оценява заявка и документ заедно с едно преминаване за преценки за уместност с висока точност.HumanEvalЕталон на проблеми с програмирането на Python, използвани за измерване на коректността на генериране на код чрез тестове на единици.API (интерфейс за програмиране на приложения)Структуриран начин за една софтуерна система да изпраща заявки до и да получава отговори от друга система.КласификацияЗадача, при която модел присвоява вход към една или повече предварително дефинирани категории.Адаптиране на домейнаМетоди, които прехвърлят модел, обучен в един домейн, за да се представя по-добре в друг домейн.

Научете повече в нашите безплатни ръководства

Dense Passage RetrievalPass@k Metric ExplainedGenerative AI for First-Pass Document ReviewAI for Leveled Reading Passages

Вижте също

LLM-as-JudgeMMLUBi-EncoderGSM8KHybrid SearchFactualityRerankerCitations