DalšíDalší průvodce
Nerovnováha tříd a převzorkování
Technický
Technický PRŮVODCE
Bootstrap resampling odhaduje nejistotu opakovaným kreslením nových vzorků s výměnou z dat, která jste pozorovali, a přepočítáváním statistiky.
Poslechněte si tento návodAI-vyprávěný · ~3 min
Může pomoci popsat, jak se mění průměr nebo metrika hodnocení modelu, za předpokladu, že návrh převzorkování odpovídá tomu, jak spolu pozorování souvisí.
Statistika vypočítaná z jednoho souboru dat je pouze odhad. Jiný vzorek ze stejné populace by mohl poskytnout jiný průměr, korelaci nebo skóre hodnocení. Bootstrap aproximuje aspekty této variace vzorkování pomocí již dostupných pozorování. V běžném neparametrickém bootstrapu pro nezávislá pozorování nakreslete vzorek původní velikosti s náhradou. Každé losování může znovu vybrat libovolné původní pozorování, takže některá pozorování se objeví vícekrát a jiná jsou vynechána. Vypočítejte statistiku tohoto vzorku. Opakujte tento proces mnohokrát, abyste vytvořili distribuci statistik bootstrap. Pro aritmetické znázornění mají hodnoty 2, 4 a 9 průměr pět. Možný převzorek je 2, 2 a 9, jejichž průměr je asi 4,33. Jeden převzorek nestanoví interval nejistoty. Rozdíl mezi mnoha vhodně zkonstruovanými resamply je to, co dělá tento postup užitečným. Percentilový interval bere koncové body z percentilů distribuce bootstrap. Jiné metody, včetně metody korekce zkreslení a zrychlené metody podporované SciPy, upravují konstrukci odlišně. Na zvolené metodě a jejích předpokladech záleží zejména u malých vzorků nebo obtížných statistik. U spárovaných dat zachovejte párování. Při porovnávání modelových předpovědí na stejných případech převzorkujte každý případ s jeho výsledkem a obě předpovědi. Rozbití těchto vztahů mění hodnocenou otázku. Bootstrap nemůže vytvořit důkaz o lidech nebo podmínkách chybějících v původním vzorku. Rovněž automaticky neopravuje výběrové zkreslení nebo závislost mezi pozorováními. Opakovaná měření mohou vyžadovat převzorkování skupin; časové řady mohou vyžadovat vhodnou blokovou metodu. Před interpretací zdánlivé přesnosti zvolte jednotku převzorkování tak, aby odrážela proces generování dat.
Vycházíme-li z ilustrativních hodnot 2, 4 a 9, jeden bootstrap vzorek může být 2, 2 a 9. Má stejnou velikost jako původní vzorek, zahrnuje opakované pozorování a má průměr 13 dělený třemi.
Aby porovnal dva modely na stejných testovacích případech, analytik převzorkuje identifikátory případů a nese předpovědi obou modelů a skutečný výsledek společně. Každý převzorek přináší rozdíl v jejich skóre.
Studie má několik záznamů na účastníka. Analytik zvažuje převzorkování celých účastníků spíše než považovat každý záznam za nezávislý.
Tým používá scipy.stats.bootstrap k odhadu nejistoty ve statistice. Zaznamenává intervalovou metodu a náhodné semeno a kontroluje, zda je výsledný interval dostatečně stabilní pro zamýšlené použití.
Hodnotící zprávy by se mohly stát užitečnějšími tím, že by vedle výsledných mezí zaznamenávaly jednotku převzorkování, intervalovou metodu a rozsah nejistoty. Čtenář by měl být schopen říci, zda interval popisuje fixní model na nových případech nebo proces, který zahrnuje opětovné seřízení. Týmy mohou také zachovat převzorkované indexy a verze softwaru, pokud záleží na reprodukovatelnosti. Další vylepšení je často lepším zkušebním vzorkem než více opakování bootstrapu. Pochopení toho, které zdroje nejistoty jsou zahrnuty, činí interval akčnějším než uvádění úzkých hranic bez jejich předpokladů.
Newsletter zdarma
Tři ověřené příběhy ze světa AI každý všední den ráno, psané srozumitelnou angličtinou. Navždy zdarma, bez reklam.
Jeden e-mail každý všední den. Odhlásit se můžete jedním kliknutím. Vaši adresu nikdy neprodáváme ani nesdílíme.
Otestujte se
Okamžitá zpětná vazba ke každé odpovědi a sdílitelný certifikát s ověřitelným ID po absolvování kurzu.
Podpořte bezplatnou AI vzdělávání. AI Understanding je nezisková organizace 501(c)(3) — žádné reklamy, žádná platba za přístup, nikdy. Darujte
Bootstrap resampling odhaduje nejistotu opakovaným kreslením nových vzorků s výměnou z dat, která jste pozorovali, a přepočítáváním statistiky. Může pomoci popsat, jak se mění průměr nebo metrika hodnocení modelu, za předpokladu, že návrh převzorkování odpovídá tomu, jak spolu pozorování souvisí.
Vzorek bootstrapu má původní velikost a je nakreslen s náhradou, což umožňuje opakované pozorování.
Součet tří převzorkovaných hodnot je 13, takže jejich průměr je 13 děleno třemi, přibližně 4,33.
Zachování párování na úrovni případu umožňuje rozdílu převzorkovaného skóre porovnat předpovědi pro stejná pozorování.
Percentilová metoda používá kvantily převzorkovaných statistik, přičemž v každém konci pro tento interval zbývá 2,5 %.
Více opakování dělá simulaci stabilnější, ale nepřináší nová nezávislá pozorování nebo opravuje problémy se vzorkováním.
Učte se dál
Pro toto téma bylo vybráno více průvodců
DalšíDalší průvodce
Nerovnováha tříd a převzorkování
Technický