Викторина, связанная с руководством · Средний Уровень

Ошибки в маркировке в тесте Vision Benchmarks

Проверьте ошибки тестовых меток, недостающие поля, судебные решения, изменения показателей и рейтинга, контрольные версии и двусмысленность в переполненных изображениях.

Связанные направляющие путиОшибки маркировки в тестах Vision
Вопрос 1 из 8

Записанная категория тестового изображения неверна. Что может произойти с правильным предсказанием модели?

Предварительный просмотр каждого вопроса8 вопросы

Ответы и пояснения появляются по мере прохождения теста.

  1. Записанная категория тестового изображения неверна. Что может произойти с правильным предсказанием модели?
    • The evaluator automatically corrects the target
    • It may be scored as an error against the flawed label
    • The model necessarily changes its prediction
    • The wrong label cannot alter any metric
  2. Детектор находит реальный объект, для которого нет аннотационной рамки. Как бенчмарк может посчитать его ошибочно?
    • As a true positive despite no matching box
    • As a false negative for the same detection
    • As an apparent false positive
    • As a corrected category without review
  3. Модель не согласна с тестовой меткой. Какой следующий шаг лучше всего избегает круговой аргументации?
    • Trust the highest-confidence model prediction
    • Change the label whenever the current winner disagrees
    • Delete all disputed images without a rule
    • Have independent reviewers adjudicate the image under documented rules
  4. Почему версия исправила метки контрольной точки?
    • Results can be tied to a specific rule and dataset release
    • To make model weights improve automatically
    • To guarantee old and new results are identical
    • To remove the need to record annotation rules
  5. Два объекта явно видны, но задача заставляет объединять их в один класс. Что должны проверить сначала поддерживающие?
    • Whether the model confidence is highest for one object
    • Whether the annotation rule actually defines which object is the target
    • Whether the image file format favors one class
    • Whether one object has brighter colors
  6. A ranking reverses after independently confirmed label corrections. What does that show?
    • The unchanged model became worse in deployment
    • The corrected set covers all environments
    • The model weights changed during rescoring
    • The original comparison was sensitive to test-label quality
  7. What distinction matters when interpreting label errors?
    • Training errors can affect learning; test errors directly affect reported evaluation
    • Training labels are used only after deployment
    • Test labels cannot be erroneous
    • Wrong test labels cannot change score counts
  8. What claim cannot be made from a higher score after fixing a test file alone?
    • That scores used a revised label version
    • That particular reference targets were corrected
    • That the unchanged model became better in real-world use
    • That earlier results used an older benchmark version