Термин от речника на AI

Какво е Бенчмарк?

Определение

Стандартизиран тест или набор от данни, използвани за измерване и сравняване на ефективността на модела.

Разгледайте пълния AI речникРазгледайте всички безплатни ръководства за AI

Свързани термини

Изтичане на бенчмаркКогато в данните за обучение присъстват примери за сравнителен тест или близки варианти, завишаване на отчетената производителност.Комплект за оценкаЗадържан набор от данни, използван за измерване на качеството на модела след обучение.HumanEvalЕталон на проблеми с програмирането на Python, използвани за измерване на коректността на генериране на код чрез тестове на единици.Базов моделПрост референтен модел, използван за сравнение дали по-сложните подходи наистина подобряват резултатите.Набор от данниКолекция от структурирани или неструктурирани примери, използвани за обучение, валидиране или тестване.Комплект за валидиранеНабор от данни, използван по време на разработката за настройка на модели и предотвратяване на пренастройване.

Научете повече в нашите безплатни ръководства

AI BenchmarksBenchmark ContaminationSWE-bench and Coding Agent BenchmarksIFEval and Instruction-Following Benchmarks

Вижте също

BiasBackpropagationBig DataAutonomous SystemBlack-Box ModelAttention MechanismCalibrationArtificial Intelligence (AI)