AI Ordliste Term

Hva er Pass@k?

Definisjon

En kodeevalueringsmetrikk som måler sjansen for at minst én av k genererte sampler består testene.

Relaterte vilkår

Perplexity
En språkmodellmåling som måler hvor overrasket modellen er over sanne neste tokens.
Krysskoder
En modell som skårer en spørring og et dokument sammen i ett pass for høy nøyaktige relevansvurderinger.
HumanEval
En benchmark av Python-programmeringsproblemer som brukes til å måle kodegenereringskorrekthet via enhetstester.
API (Application Programming Interface)
En strukturert måte for ett programvaresystem å sende forespørsler til og motta svar fra et annet system.
Klassifikasjon
En oppgave der en modell tilordner en inngang til én eller flere forhåndsdefinerte kategorier.
Domenetilpasning
Metoder som overfører en modell som er trent i ett domene for å yte bedre i et annet domene.

Lær mer i våre gratis guider

Dense Passage Retrieval

Se også

LLM-as-JudgeMMLUBi-EncoderGSM8KHybrid SearchFactualityRerankerCitations
Bla gjennom hele AI-ordlistenUtforsk alle gratis AI-guider