Викторина, связанная с руководством · Средний Уровень

Тест на важность функции перестановки

Протестируйте изменения оценок на основе перетасовки, ошибки коррелированных функций и пределы причинно-следственных связей при интерпретации важности перестановок.

Связанные направляющие путиВажность функции перестановки
Вопрос 1 из 8

Оценка «чем выше, тем лучше» падает с 0,82 до 0,70 после перетасовки одного входного сигнала. Какое значение важности следует за этим?

Предварительный просмотр каждого вопроса8 вопросы

Ответы и пояснения появляются по мере прохождения теста.

  1. Оценка «чем выше, тем лучше» падает с 0,82 до 0,70 после перетасовки одного входного сигнала. Какое значение важности следует за этим?
    • 0,12
    • 0,70
    • 0,82
    • 1,52
  2. Какая часть набора данных намеренно переставляется во время базового теста важности перестановок?
    • Все столбцы функций и результаты вместе
    • Значения параметров подобранной модели
    • Значения одного признака в строках оценки
    • Обозначаются только метки результатов, а все входные данные остаются фиксированными.
  3. Каждая из двух почти идентичных колонок датчиков имеет низкую индивидуальную важность перестановки. Какое объяснение соответствует руководству?
    • Ни один из датчиков не может содержать полезную информацию.
    • Все функции низкой важности должны быть немедленно удалены.
    • Метрика обязательно рассчитывается в обратном направлении
    • Модель может использовать один датчик, когда другой перетасовывается.
  4. Почему аналитик должен повторять тасование для каждого ввода?
    • Переобучить модель для каждой перестановки
    • Изучить вариации, вызванные различными случайными перестановками.
    • Чтобы гарантировать, что сумма значений важности равна одному
    • Заставить каждый ввод иметь положительное значение
  5. Чем важность перестановки отличается от подгонки новой модели после удаления признака?
    • Важность перестановки сохраняет неизменной существующую подобранную модель.
    • Важность перестановки всегда меняет метки результатов.
    • Удаление функции не может повлиять на прогнозируемую производительность.
    • Удаление функций и перетасовка математически идентичны.
  6. Входные данные имеют отрицательную важность перестановки при некоторых перетасовках. Что произошло в ходе этих измерений?
    • Базовый балл обязательно был отрицательным.
    • Эта функция не была коррелирована со всеми остальными входными данными.
    • Перетасованный балл был выше базового балла.
    • Вместо ее знака рассчитывалась абсолютная величина значимости.
  7. Функция имеет высокий рейтинг в отчете о перестановках. Какое утверждение превысит то, что установлено тестом?
    • Оценка подобранной модели упала, когда функция была перетасована.
    • Результат зависит от выбранной метрики
    • Рейтинг следует интерпретировать с учетом данных оценки.
    • Изменение этой функции в реальном мире должно привести к изменению результата.
  8. Прежде чем рассматривать рейтинг перестановок как полезное доказательство, какую проверку рекомендует руководство?
    • Подтвердите, что точность обучающего набора сама по себе высока.
    • Подтвердите, что подобранная модель дает полезные прогнозы на основе данных оценки.
    • Подтвердите, что каждая важность больше нуля
    • Подтвердите, что сумма отдельных важностей равна единице.