Викторина, связанная с руководством · Жесткий Уровень

Тест на компромисс между объяснимостью и точностью

Поймите, когда интерпретируемость и точность могут конфликтовать, как проверять и то, и другое, и почему NIST рассматривает надежность как контекстно-зависимую.

Вопрос 1 из 8

Как NIST описывает возможные компромиссы между интерпретируемостью и предсказательной точностью?

Предварительный просмотр каждого вопроса8 вопросы

Ответы и пояснения появляются по мере прохождения теста.

  1. Как NIST описывает возможные компромиссы между интерпретируемостью и предсказательной точностью?
    • They may arise in some contexts, but are not inevitable
    • Interpretability always reduces accuracy
    • Accuracy proves interpretability
    • The two terms mean the same thing
  2. Почему команде следует измерять эффективность как по релевантным группам, так и в целом?
    • Group metrics always increase accuracy
    • NIST requires identical results for every person
    • An aggregate can hide different error rates or failures across populations
    • It replaces testing on deployment data
  3. Что само по себе устанавливает объяснение из пост-хок инструмента?
    • It proves the prediction is correct
    • It offers a model-dependent account that needs validation, not proof of causality or fairness
    • It guarantees equal outcomes
    • It reveals every fact about the training data
  4. Какой набор качеств NIST рассматривает как отдельные характеристики надёжности?
    • Accuracy and interpretability only
    • Transparency as a substitute for fairness
    • One universal trust score
    • Validity/reliability, explainability/interpretability, privacy, and fairness among others
  5. Что должно определять приемлемый баланс между точностью и качеством объяснения?
    • A vendor slogan
    • The use context, risks, affected people, and measured performance
    • The model’s parameter count alone
    • An assumption that the simplest model is always best
  6. Which statement describes the status of the NIST AI RMF?
    • A US federal statute imposing one required metric
    • An EU regulation
    • Voluntary risk-management guidance
    • A model certification label
  7. What can a transparent model still do?
    • Be inaccurate, biased, or poorly validated
    • Guarantee fair results
    • Eliminate uncertainty
    • Replace human judgment in every context
  8. When should a team revisit the tradeoff assessment?
    • Only before the first training run
    • Never, once accuracy is measured
    • Only when a vendor changes its logo
    • After updates, shifts in the population, or changes in use context