Викторина, связанная с руководством · Средний Уровень
Петли обратной связи в системах машинного обучения. Викторина
Проследите, как действия модели влияют на наблюдаемые результаты и будущие данные обучения, а также определите меры защиты от систематической ошибки выбора и воздействия.
Вопрос 1 из 8
Как рекомендатель может создать цикл обратной связи?
Предварительный просмотр каждого вопроса8 вопросы
Ответы и пояснения появляются по мере прохождения теста.
- Как рекомендатель может создать цикл обратной связи?
- Its exposure choices affect clicks that later become training evidence
- Its predictions are never stored
- Its model weights are fixed
- Its users cannot respond to recommendations
- Почему результаты найма могут отсутствовать для кандидатов, отобранных с помощью модели?
- Their labels are always negative
- They do not receive the downstream opportunity that generates an outcome
- The model stores every outcome automatically
- The feature schema removes labels
- Что помогает отличить запись показанных предметов?
- A GPU failure from an API timeout
- Training data from model parameters
- Exposure opportunity from user preference evidence
- A label from a feature name
- Когда оценка обратной склонности может быть ненадежной?
- When the target policy matches the logging policy
- When all propensities are recorded correctly
- When randomized experiments have enough data
- When the new policy chooses actions with no support in logged data
- Зачем отслеживать охват этикетки по баллам или группам?
- Coverage proves the model is fair
- Observation rates may differ because the model routes cases differently
- Scores are always outcomes
- Every group must have identical labels
- Which data-collection strategy can reveal outcomes for less-shown alternatives?
- Remove the need for logging
- Guarantee every recommendation is relevant
- Gather evidence about alternatives that a deterministic policy rarely shows
- Make all users receive identical items
- Why might more training data fail to remove feedback-loop bias?
- Bias is always random
- Larger datasets cannot contain labels
- Training never uses user interactions
- New data may be generated by the same selective policy
- What kind of system property is a feedback loop?
- A property of the deployed sociotechnical process and its data collection
- Only a gradient calculation
- A model architecture name
- A feature scaling method