Nauka Wiadomości Narzędzia Oferty pracy Misja

Termin ze słownika AI

Czym jest Wyciek benchmarku?

Definicja

Gdy w danych szkoleniowych znajdują się przykłady testów porównawczych lub zbliżone warianty, co zawyża raportowaną wydajność.

Przejrzyj pełny słownik AI Przeglądaj wszystkie bezpłatne przewodniki AI

Punkt odniesieniaStandaryzowany test lub zbiór danych używany do pomiaru i porównania wydajności modelu.Rozszerzanie danychTechniki tworzenia zmodyfikowanych przykładów szkoleniowych w celu poprawy generalizacji modelu.Nadmierne dopasowanieKiedy model zapamiętuje dane szkoleniowe i słabo radzi sobie z niewidocznymi danymi wejściowymi.Przejrzystość algorytmicznaJak jasno logika, źródła danych i ograniczenia systemu AI są udokumentowane i zrozumiałe.Ciągła naukaPodejścia szkoleniowe, które pozwalają modelowi uczyć się na nowych danych, nie zapominając o wcześniejszej wiedzy.Dryf danychZmiana rzeczywistych danych wejściowych w czasie, która może obniżyć wydajność modelu.

Dowiedz się więcej z naszych bezpłatnych przewodników

AI Benchmarks Benchmark Contamination SWE-bench and Coding Agent Benchmarks IFEval and Instruction-Following Benchmarks

Zobacz także

Alignment Tax Causal Inference AI Act Confidence Interval Agentic Workflow Constitutional AI Zero-Shot Learning Data Lineage