Termin ze słownika AI

Czym jest Punkt odniesienia?

Definicja

Standaryzowany test lub zbiór danych używany do pomiaru i porównania wydajności modelu.

Przejrzyj pełny słownik AIPrzeglądaj wszystkie bezpłatne przewodniki AI

Powiązane terminy

Wyciek benchmarkuGdy w danych szkoleniowych znajdują się przykłady testów porównawczych lub zbliżone warianty, co zawyża raportowaną wydajność.Zestaw ewaluacyjnyPrzetrzymywany zbiór danych używany do pomiaru jakości modelu po szkoleniu.HumanEvalTest porównawczy problemów programistycznych w języku Python używany do pomiaru poprawności generowania kodu za pomocą testów jednostkowych.Model bazowyProsty model referencyjny używany do porównania, czy bardziej złożone podejścia faktycznie poprawiają wyniki.Zbiór danychZbiór ustrukturyzowanych i nieustrukturyzowanych przykładów używanych do szkolenia, walidacji lub testowania.Zestaw walidacyjnyZbiór danych używany podczas programowania w celu dostrojenia modeli i zapobiegania nadmiernemu dopasowaniu.

Dowiedz się więcej z naszych bezpłatnych przewodników

AI BenchmarksBenchmark ContaminationSWE-bench and Coding Agent BenchmarksIFEval and Instruction-Following Benchmarks

Zobacz także

BiasBackpropagationBig DataAutonomous SystemBlack-Box ModelAttention MechanismCalibrationArtificial Intelligence (AI)