KI-Glossarbegriff

Was ist Pass@k?

Definition

Eine Code-Bewertungsmetrik, die die Wahrscheinlichkeit misst, dass mindestens eine von k generierten Stichproben die Tests besteht.

Durchsuchen Sie das vollständige KI-GlossarEntdecken Sie alle kostenlosen KI-Anleitungen

Verwandte Begriffe

PerplexityEine Sprachmodellmetrik, die misst, wie überrascht das Modell von echten nächsten Token ist.Cross‑EncoderEin Modell, das eine Abfrage und ein Dokument in einem Durchgang bewertet, um hochpräzise Relevanzbeurteilungen zu ermöglichen.HumanEvalEin Benchmark für Python-Programmierprobleme, mit dem die Korrektheit der Codegenerierung mithilfe von Komponententests gemessen wird.API (Anwendungsprogrammierschnittstelle)Eine strukturierte Möglichkeit für ein Softwaresystem, Anfragen an ein anderes System zu senden und Antworten von diesem zu empfangen.KlassifizierungEine Aufgabe, bei der ein Modell eine Eingabe einer oder mehreren vordefinierten Kategorien zuordnet.DomänenanpassungMethoden, die ein in einer Domäne trainiertes Modell übertragen, um in einer anderen Domäne eine bessere Leistung zu erzielen.

Erfahren Sie mehr in unseren kostenlosen Ratgebern

Dense Passage RetrievalPass@k Metric ExplainedGenerative AI for First-Pass Document ReviewAI for Leveled Reading Passages

Siehe auch

LLM-as-JudgeMMLUBi-EncoderGSM8KHybrid SearchFactualityRerankerCitations