Gids-gekoppelde quiz · Middelmatig Niveau
Permutatie Functie Belang Quiz
Test op shuffle gebaseerde scorewijzigingen, valkuilen met gecorreleerde functies en de grenzen van causale claims bij het interpreteren van het belang van permutatie.
Vraag 1 van 8
Een hogere-is-beter-score daalt van 0,82 naar 0,70 nadat één invoer is geschud. Welke belangrijkheidswaarde volgt?
Bekijk elke vraag8 vragen
Antwoorden en uitleg verschijnen terwijl je de quiz doet.
- Een hogere-is-beter-score daalt van 0,82 naar 0,70 nadat één invoer is geschud. Welke belangrijkheidswaarde volgt?
- 0.12
- 0.70
- 0.82
- 1.52
- Welk deel van de dataset wordt tijdens een fundamentele permutatie-belangtest opzettelijk herschikt?
- All feature columns and outcomes together
- The fitted model's parameter values
- One feature's values across evaluation rows
- Only the outcome labels while all inputs stay fixed
- Twee vrijwel identieke sensorkolommen hebben elk een laag individueel permutatiebelang. Welke uitleg komt overeen met de gids?
- Neither sensor can contain useful information
- All low-importance features must be deleted immediately
- The metric has necessarily been calculated backward
- The model can use one sensor when the other is shuffled
- Waarom zou een analist de shuffle voor elke invoer moeten herhalen?
- To retrain the model on every permutation
- To examine variation caused by different random rearrangements
- To ensure importance values sum to one
- To force every input to have positive importance
- Hoe verschilt het belang van permutatie van het aanpassen van een nieuw model na het verwijderen van een feature?
- Permutation importance keeps the existing fitted model fixed
- Permutation importance always changes the outcome labels
- Feature removal cannot change predictive performance
- Feature removal and shuffling are mathematically identical
- An input has negative permutation importance across some shuffles. What happened in those measurements?
- The baseline score was necessarily negative
- The feature was uncorrelated with every other input
- The shuffled score was higher than the baseline score
- The absolute magnitude of the importance was calculated instead of its sign
- A feature ranks highly in a permutation report. Which claim would exceed what the test establishes?
- The fitted model's score dropped when the feature was shuffled
- The result depends on the chosen metric
- The ranking should be interpreted with the evaluation data
- Changing that feature in the real world must cause the outcome to change
- Before treating a permutation ranking as useful evidence, which check does the guide recommend?
- Confirm that training-set accuracy alone is high
- Confirm that the fitted model predicts usefully on evaluation data
- Confirm that every importance is greater than zero
- Confirm that individual importances sum to one