Викторина, связанная с руководством · Средний Уровень
Очевидно, искусственный интеллект для мониторинга моделей с открытым исходным кодом
Узнайте, что можно проверить в отчетах Evidently, как эталонные наборы данных влияют на результаты отклонения и почему отчеты без меток не могут доказать точность.
Вопрос 1 из 8
Что сравнивает отчет о отклонении опорного значения от текущего?
Предварительный просмотр каждого вопроса8 вопросы
Ответы и пояснения появляются по мере прохождения теста.
- Что сравнивает отчет о отклонении опорного значения от текущего?
- Selected data distributions across two periods or datasets
- Model accuracy without target labels
- Only the training loss curve
- The deployment and source-code branches
- Почему в отчете необходимо записывать справочное окно и выбор функций?
- They determine the model's hidden layers
- Those choices affect which changes are measured and how results are interpreted
- They ensure every drift score is a p-value
- They eliminate sample-size effects
- Что может установить немаркированный отчет о дрейфе?
- That the model is unfair
- That prediction accuracy has declined
- A change in selected data distributions under configured methods
- That the new data are incorrect
- Какие ожидания проверяет тест контракта данных?
- Whether labels arrive immediately
- Whether every model output is correct
- Whether drift is always harmful
- Whether inputs satisfy specified schema or quality expectations
- Почему строгий порог дрейфа может вызывать шумные оповещения?
- The library ignores all features
- Expected seasonality or sampling variation can trigger a change signal
- Drift reports include ground truth automatically
- Reference data are never needed
- How should delayed target labels be used in monitoring?
- Use unlabeled inputs as a substitute for outcome truth
- Treat missing recent labels as incorrect predictions
- Join them to predictions with matching model version and outcome window
- Drop all historical predictions
- Why version the report configuration and library version?
- It changes the reference distribution
- It guarantees the same input data forever
- It removes the need for labels
- Defaults and methods can change, affecting reproducibility
- How should a team respond to a failed data-quality test?
- Investigate whether the input violates a meaningful contract or reflects an expected change
- Automatically retrain on the data
- Ignore the test for every future run
- Declare the model inaccurate without labels