Kvíz spojený s průvodcem · Střední úroveň

Kvíz důležitosti permutačních funkcí

Změny skóre založené na náhodném pořadí testů, úskalí souvisejících funkcí a limity kauzálních tvrzení při interpretaci důležitosti permutace.

Související vodicí cestyDůležitost permutační funkce
Otázka 1 z 8

Skóre vyšší je lepší klesá z 0,82 na 0,70 po zamíchání jednoho vstupu. Jaká hodnota důležitosti následuje?

Náhled každé otázky8 otázky

Odpovědi a vysvětlení se zobrazují, jak budete v kvízu.

  1. Skóre vyšší je lepší klesá z 0,82 na 0,70 po zamíchání jednoho vstupu. Jaká hodnota důležitosti následuje?
    • 0.12
    • 0.70
    • 0.82
    • 1.52
  2. Která část datového souboru je během základního testu důležitosti permutace záměrně přeskupena?
    • Všechny sloupce funkcí a výsledky dohromady
    • Hodnoty parametrů přizpůsobeného modelu
    • Hodnoty jedné funkce napříč řádky hodnocení
    • Pouze štítky výsledků, zatímco všechny vstupy zůstávají pevné
  3. Každý ze dvou téměř identických sloupců senzorů má nízkou individuální permutační důležitost. Které vysvětlení je v souladu s návodem?
    • Žádný z čidel nemůže obsahovat užitečné informace
    • Všechny funkce s nízkým významem musí být okamžitě odstraněny
    • Metoda byla nutně vypočítána zpětně
    • Model může použít jedno čidlo, když je druhé zaměněno
  4. Proč by měl analytik opakovat míchání pro každý vstup?
    • Znovu trénovat model na každé permutaci
    • Zkoumat variaci způsobenou různými náhodnými přeuspořádáními
    • Zajistit, aby se součet hodnot významu rovnal jedné
    • Vynutit, aby každý vstup měl kladný význam
  5. Jak se liší důležitost permutace od přizpůsobení nového modelu po odebrání prvku?
    • Permutační význam ponechává existující natrénovaný model beze změny
    • Permutační význam vždy mění štítky výstupu
    • Odstranění vlastnosti nemůže změnit predikční výkon
    • Odstranění vlastnosti a zamíchání jsou matematicky identické
  6. Vstup má negativní permutační význam u některých zamíchání. Co se stalo v těchto měřeních?
    • Základní skóre bylo nutně záporné
    • Vlastnost nebyla korelována s žádným jiným vstupem
    • Skóre po zamíchání bylo vyšší než základní skóre
    • Byla vypočtena absolutní velikost významu místo jeho znaménka
  7. V permutační zprávě má vlastnost vysoké hodnocení. Které tvrzení by překročilo to, co test stanoví?
    • Skóre natrénovaného modelu kleslo, když byla vlastnost zamíchána
    • Výsledek závisí na zvoleném měřítku
    • Hodnocení by mělo být interpretováno s ohledem na data z hodnocení
    • Změna této funkce ve skutečném světě musí způsobit změnu výsledku
  8. Předtím, než se permutační hodnocení považuje za užitečný důkaz, jakou kontrolu doporučuje průvodce?
    • Potvrďte, že přesnost tréninkové sady sama o sobě je vysoká
    • Potvrďte, že vyfitovaný model předpovídá užitečně na datech z hodnocení
    • Potvrďte, že každá důležitost je větší než nula
    • Potvrďte, že součet jednotlivých důležitostí je jeden