학습 뉴스 도구 채용 미션

AI 용어집

벤치마크 누출(이)란?

정의

벤치마크 테스트 예시나 유사 변형이 학습 데이터에 있으면 보고된 성능이 부풀려집니다.

전체 AI 용어집 찾아보기 무료 AI 가이드 모두 살펴보기

벤치마크모델 성능을 측정하고 비교하는 데 사용되는 표준화된 테스트 또는 데이터 세트입니다.데이터 증대모델 일반화를 개선하기 위해 수정된 훈련 예제를 생성하는 기술.과적합모델이 훈련 데이터를 기억하고 보이지 않는 입력에 대해 제대로 수행되지 않는 경우.알고리즘 투명성AI 시스템의 논리, 데이터 소스 및 제한 사항이 얼마나 명확하게 문서화되고 이해되는지.지속적인 학습모델이 사전 지식을 잊지 않고 새로운 데이터로부터 계속 학습할 수 있도록 하는 훈련 접근 방식입니다.데이터 드리프트시간에 따른 실제 입력 데이터의 변화로 인해 모델 성능이 저하될 수 있습니다.

무료 가이드에서 자세히 알아보세요

AI Benchmarks Benchmark Contamination SWE-bench and Coding Agent Benchmarks IFEval and Instruction-Following Benchmarks

또한보십시오

Alignment Tax Causal Inference AI Act Confidence Interval Agentic Workflow Constitutional AI Zero-Shot Learning Data Lineage