ДалееСледующее руководство
Дисбаланс классов и повторная выборка
Технический
Техническое РУКОВОДСТВО
Бутстрап-повторная выборка оценивает неопределенность путем многократного получения новых выборок с заменой из наблюдаемых вами данных и пересчета статистики.
Прослушайте это руководствоОзвучено ИИ · ~3 min
Это может помочь описать, как варьируется среднее значение или показатель оценки модели, при условии, что дизайн повторной выборки соответствует тому, как связаны наблюдения.
Статистика, рассчитанная на основе одного набора данных, является лишь приблизительной. Другая выборка из той же совокупности может дать другое среднее значение, корреляцию или оценку. Бутстрап аппроксимирует аспекты этой вариации выборки, используя уже доступные наблюдения. В обычном непараметрическом бутстрапе для независимых наблюдений нарисуйте выборку исходного размера с заменой. Каждый розыгрыш может снова выбрать любое исходное наблюдение, поэтому некоторые наблюдения появляются более одного раза, а другие опускаются. Рассчитайте статистику по этой выборке. Повторите этот процесс много раз, чтобы получить распределение статистики начальной загрузки. Для арифметической иллюстрации значения 2, 4 и 9 имеют среднее значение, равное пяти. Возможная повторная выборка — 2, 2 и 9, среднее значение которых составляет около 4,33. Одна повторная выборка не устанавливает интервал неопределенности. Различия между многими правильно построенными повторными выборками делают эту процедуру полезной. Процентильный интервал берет конечные точки из процентилей бутстрап-распределения. Другие методы, включая метод с коррекцией смещения и ускоренный метод, поддерживаемый SciPy, настраивают конструкцию по-другому. Выбранный метод и его допущения имеют значение, особенно для небольших выборок или сложных статистических данных. Для парных данных сохраните парность. При сравнении прогнозов модели для одних и тех же случаев повторите выборку каждого случая с его результатом и обоими прогнозами. Разрыв этих отношений меняет оцениваемый вопрос. Бутстрап не может создать доказательства о людях или условиях, отсутствующих в исходной выборке. Он также не корректирует автоматически систематическую ошибку отбора или зависимость между наблюдениями. Повторные измерения могут потребовать групп повторной выборки; временные ряды могут потребовать подходящего блочного метода. Прежде чем интерпретировать кажущуюся точность, выберите единицу повторной выборки, чтобы отразить процесс генерации данных.
Начиная с иллюстративных значений 2, 4 и 9, одна бутстреп-выборка может иметь значения 2, 2 и 9. Она имеет тот же размер, что и исходная выборка, включает повторное наблюдение и имеет среднее значение 13, разделенное на три.
Чтобы сравнить две модели в одних и тех же тестовых случаях, аналитик выполняет повторную выборку идентификаторов случаев и объединяет прогнозы обеих моделей и истинный результат. Каждая повторная выборка дает разницу в их оценках.
В исследовании имеется несколько записей на каждого участника. Аналитик рассматривает возможность повторной выборки всех участников, а не рассматривать каждую запись как независимую.
Команда использует scipy.stats.bootstrap для оценки неопределенности статистики. Он записывает интервальный метод и случайное начальное значение и проверяет, достаточно ли стабилен полученный интервал для использования по назначению.
Отчеты об оценке могли бы стать более полезными, если бы вместе с результирующими границами были записаны единица повторной выборки, интервальный метод и масштаб неопределенности. Читатель должен быть в состоянии определить, описывает ли интервал фиксированную модель в новых случаях или процесс, включающий переоснащение. Команды также могут сохранять индексы с повторной выборкой и версии программного обеспечения, когда воспроизводимость имеет значение. Следующим улучшением часто является улучшение оценочной выборки, а не увеличение количества повторений начальной загрузки. Понимание того, какие источники неопределенности включены, делает интервал более практичным, чем представление узких границ без их допущений.
Бесплатная рассылка
Три проверенных AI-истории каждое утро буднего дня, написанные простым английским. Бесплатно навсегда, без рекламы.
Одно электронное письмо каждый будний день. Отписаться в один клик. Мы никогда не продаем и не передаем ваш адрес.
Проверьте себя
Мгновенная обратная связь по каждому ответу и общий сертификат с проверяемым идентификатором после прохождения курса.
Поддержите бесплатное образование в области искусственного интеллекта. AI Understanding — это некоммерческая организация 501(c)(3). Никакой рекламы и платного доступа. Сделать пожертвование
Бутстрап-повторная выборка оценивает неопределенность путем многократного получения новых выборок с заменой из наблюдаемых вами данных и пересчета статистики. Это может помочь описать, как варьируется среднее значение или показатель оценки модели, при условии, что дизайн повторной выборки соответствует тому, как связаны наблюдения.
Бутстрап-выборка имеет исходный размер и рисуется с заменой, что позволяет проводить повторные наблюдения.
Сумма трех пересчитанных значений равна 13, поэтому их среднее значение равно 13, разделенному на три, примерно 4,33.
Сохранение пары на уровне случаев позволяет по разнице оценок после повторной выборки сравнивать прогнозы для одних и тех же наблюдений.
Метод процентилей использует квантили повторно выбранной статистики, при этом в каждом хвосте для этого интервала остается 2,5%.
Большее количество повторений делает моделирование более стабильным, но не обеспечивает новых независимых наблюдений и не устраняет проблемы с выборкой.
Продолжайте учиться
Другие руководства, выбранные по этой теме
ДалееСледующее руководство
Дисбаланс классов и повторная выборка
Технический