KI-Glossarbegriff

Was ist Benchmark-Leakage?

Definition

Wenn Benchmark-Testbeispiele oder ähnliche Varianten in Trainingsdaten vorhanden sind, erhöht sich die gemeldete Leistung.

Durchsuchen Sie das vollständige KI-GlossarEntdecken Sie alle kostenlosen KI-Anleitungen

Verwandte Begriffe

BenchmarkEin standardisierter Test oder Datensatz zum Messen und Vergleichen der Modellleistung.DatenerweiterungTechniken, die modifizierte Trainingsbeispiele erstellen, um die Modellverallgemeinerung zu verbessern.ÜberanpassungWenn ein Modell Trainingsdaten speichert und bei unsichtbaren Eingaben eine schlechte Leistung erbringt.Algorithmische TransparenzWie klar die Logik, Datenquellen und Einschränkungen eines KI-Systems dokumentiert und verständlich sind.Kontinuierliches LernenTrainingsansätze, die es einem Modell ermöglichen, kontinuierlich aus neuen Daten zu lernen, ohne Vorkenntnisse zu vergessen.DatendriftEine Verschiebung der realen Eingabedaten im Laufe der Zeit, die die Modellleistung beeinträchtigen kann.

Erfahren Sie mehr in unseren kostenlosen Ratgebern

AI BenchmarksBenchmark ContaminationSWE-bench and Coding Agent BenchmarksIFEval and Instruction-Following Benchmarks

Siehe auch

Alignment TaxCausal InferenceAI ActConfidence IntervalAgentic WorkflowConstitutional AIZero-Shot LearningData Lineage