Викторина, связанная с руководством · Средний Уровень
Ошибки в маркировке в тесте Vision Benchmarks
Проверьте ошибки тестовых меток, недостающие поля, судебные решения, изменения показателей и рейтинга, контрольные версии и двусмысленность в переполненных изображениях.
Вопрос 1 из 8
Записанная категория тестового изображения неверна. Что может произойти с правильным предсказанием модели?
Предварительный просмотр каждого вопроса8 вопросы
Ответы и пояснения появляются по мере прохождения теста.
- Записанная категория тестового изображения неверна. Что может произойти с правильным предсказанием модели?
- The evaluator automatically corrects the target
- It may be scored as an error against the flawed label
- The model necessarily changes its prediction
- The wrong label cannot alter any metric
- Детектор находит реальный объект, для которого нет аннотационной рамки. Как бенчмарк может посчитать его ошибочно?
- As a true positive despite no matching box
- As a false negative for the same detection
- As an apparent false positive
- As a corrected category without review
- Модель не согласна с тестовой меткой. Какой следующий шаг лучше всего избегает круговой аргументации?
- Trust the highest-confidence model prediction
- Change the label whenever the current winner disagrees
- Delete all disputed images without a rule
- Have independent reviewers adjudicate the image under documented rules
- Почему версия исправила метки контрольной точки?
- Results can be tied to a specific rule and dataset release
- To make model weights improve automatically
- To guarantee old and new results are identical
- To remove the need to record annotation rules
- Два объекта явно видны, но задача заставляет объединять их в один класс. Что должны проверить сначала поддерживающие?
- Whether the model confidence is highest for one object
- Whether the annotation rule actually defines which object is the target
- Whether the image file format favors one class
- Whether one object has brighter colors
- A ranking reverses after independently confirmed label corrections. What does that show?
- The unchanged model became worse in deployment
- The corrected set covers all environments
- The model weights changed during rescoring
- The original comparison was sensitive to test-label quality
- What distinction matters when interpreting label errors?
- Training errors can affect learning; test errors directly affect reported evaluation
- Training labels are used only after deployment
- Test labels cannot be erroneous
- Wrong test labels cannot change score counts
- What claim cannot be made from a higher score after fixing a test file alone?
- That scores used a revised label version
- That particular reference targets were corrected
- That the unchanged model became better in real-world use
- That earlier results used an older benchmark version