แบบทดสอบที่เชื่อมโยงกับคำแนะนำ · ปานกลาง ระดับ
แบบทดสอบความสำคัญของคุณลักษณะการเรียงสับเปลี่ยน
ทดสอบการเปลี่ยนแปลงคะแนนตามการสับเปลี่ยน ข้อผิดพลาดของคุณลักษณะที่สัมพันธ์กัน และขีดจำกัดของการอ้างสิทธิ์เชิงสาเหตุ เมื่อตีความความสำคัญของการเรียงสับเปลี่ยน
คำถาม 1 ของ 8
คะแนนที่สูงกว่าดีกว่าจะตกจาก 0.82 เป็น 0.70 หลังจากสลับอินพุตหนึ่งรายการแล้ว ค่าความสำคัญใดต่อไปนี้?
ดูตัวอย่างทุกคำถาม8 คำถาม
คำตอบและคำอธิบายจะปรากฏขึ้นเมื่อคุณทำแบบทดสอบ
- คะแนนที่สูงกว่าดีกว่าจะตกจาก 0.82 เป็น 0.70 หลังจากสลับอินพุตหนึ่งรายการแล้ว ค่าความสำคัญใดต่อไปนี้?
- 0.12
- 0.70
- 0.82
- 1.52
- ในระหว่างการทดสอบความสำคัญการเรียงสับเปลี่ยนขั้นพื้นฐาน ส่วนใดของชุดข้อมูลที่ถูกจงใจจัดเรียงใหม่
- All feature columns and outcomes together
- The fitted model's parameter values
- One feature's values across evaluation rows
- Only the outcome labels while all inputs stay fixed
- คอลัมน์เซ็นเซอร์สองคอลัมน์ที่เกือบจะเหมือนกันแต่ละคอลัมน์ได้รับความสำคัญในการเปลี่ยนลำดับต่ำ คำอธิบายใดสอดคล้องกับคำแนะนำ
- Neither sensor can contain useful information
- All low-importance features must be deleted immediately
- The metric has necessarily been calculated backward
- The model can use one sensor when the other is shuffled
- เหตุใดนักวิเคราะห์จึงควรสุ่มซ้ำสำหรับแต่ละอินพุต
- To retrain the model on every permutation
- To examine variation caused by different random rearrangements
- To ensure importance values sum to one
- To force every input to have positive importance
- ความสำคัญของการเรียงสับเปลี่ยนแตกต่างจากการปรับโมเดลใหม่ให้เหมาะสมหลังจากลบฟีเจอร์อย่างไร
- Permutation importance keeps the existing fitted model fixed
- Permutation importance always changes the outcome labels
- Feature removal cannot change predictive performance
- Feature removal and shuffling are mathematically identical
- An input has negative permutation importance across some shuffles. What happened in those measurements?
- The baseline score was necessarily negative
- The feature was uncorrelated with every other input
- The shuffled score was higher than the baseline score
- The absolute magnitude of the importance was calculated instead of its sign
- A feature ranks highly in a permutation report. Which claim would exceed what the test establishes?
- The fitted model's score dropped when the feature was shuffled
- The result depends on the chosen metric
- The ranking should be interpreted with the evaluation data
- Changing that feature in the real world must cause the outcome to change
- Before treating a permutation ranking as useful evidence, which check does the guide recommend?
- Confirm that training-set accuracy alone is high
- Confirm that the fitted model predicts usefully on evaluation data
- Confirm that every importance is greater than zero
- Confirm that individual importances sum to one