Викторина, связанная с руководством · Средний Уровень

Очевидно, искусственный интеллект для мониторинга моделей с открытым исходным кодом

Узнайте, что можно проверить в отчетах Evidently, как эталонные наборы данных влияют на результаты отклонения и почему отчеты без меток не могут доказать точность.

Связанные направляющие путиОчевидно, мониторинг модели ИИ
Вопрос 1 из 8

Что сравнивает отчет о отклонении опорного значения от текущего?

Предварительный просмотр каждого вопроса8 вопросы

Ответы и пояснения появляются по мере прохождения теста.

  1. Что сравнивает отчет о отклонении опорного значения от текущего?
    • Selected data distributions across two periods or datasets
    • Model accuracy without target labels
    • Only the training loss curve
    • The deployment and source-code branches
  2. Почему в отчете необходимо записывать справочное окно и выбор функций?
    • They determine the model's hidden layers
    • Those choices affect which changes are measured and how results are interpreted
    • They ensure every drift score is a p-value
    • They eliminate sample-size effects
  3. Что может установить немаркированный отчет о дрейфе?
    • That the model is unfair
    • That prediction accuracy has declined
    • A change in selected data distributions under configured methods
    • That the new data are incorrect
  4. Какие ожидания проверяет тест контракта данных?
    • Whether labels arrive immediately
    • Whether every model output is correct
    • Whether drift is always harmful
    • Whether inputs satisfy specified schema or quality expectations
  5. Почему строгий порог дрейфа может вызывать шумные оповещения?
    • The library ignores all features
    • Expected seasonality or sampling variation can trigger a change signal
    • Drift reports include ground truth automatically
    • Reference data are never needed
  6. How should delayed target labels be used in monitoring?
    • Use unlabeled inputs as a substitute for outcome truth
    • Treat missing recent labels as incorrect predictions
    • Join them to predictions with matching model version and outcome window
    • Drop all historical predictions
  7. Why version the report configuration and library version?
    • It changes the reference distribution
    • It guarantees the same input data forever
    • It removes the need for labels
    • Defaults and methods can change, affecting reproducibility
  8. How should a team respond to a failed data-quality test?
    • Investigate whether the input violates a meaningful contract or reflects an expected change
    • Automatically retrain on the data
    • Ignore the test for every future run
    • Declare the model inaccurate without labels