แบบทดสอบที่เชื่อมโยงกับคำแนะนำ · ปานกลาง ระดับ

แบบทดสอบความสำคัญของคุณลักษณะการเรียงสับเปลี่ยน

ทดสอบการเปลี่ยนแปลงคะแนนตามการสับเปลี่ยน ข้อผิดพลาดของคุณลักษณะที่สัมพันธ์กัน และขีดจำกัดของการอ้างสิทธิ์เชิงสาเหตุ เมื่อตีความความสำคัญของการเรียงสับเปลี่ยน

คำถาม 1 ของ 8

คะแนนที่สูงกว่าดีกว่าจะตกจาก 0.82 เป็น 0.70 หลังจากสลับอินพุตหนึ่งรายการแล้ว ค่าความสำคัญใดต่อไปนี้?

ดูตัวอย่างทุกคำถาม8 คำถาม

คำตอบและคำอธิบายจะปรากฏขึ้นเมื่อคุณทำแบบทดสอบ

  1. คะแนนที่สูงกว่าดีกว่าจะตกจาก 0.82 เป็น 0.70 หลังจากสลับอินพุตหนึ่งรายการแล้ว ค่าความสำคัญใดต่อไปนี้?
    • 0.12
    • 0.70
    • 0.82
    • 1.52
  2. ในระหว่างการทดสอบความสำคัญการเรียงสับเปลี่ยนขั้นพื้นฐาน ส่วนใดของชุดข้อมูลที่ถูกจงใจจัดเรียงใหม่
    • All feature columns and outcomes together
    • The fitted model's parameter values
    • One feature's values across evaluation rows
    • Only the outcome labels while all inputs stay fixed
  3. คอลัมน์เซ็นเซอร์สองคอลัมน์ที่เกือบจะเหมือนกันแต่ละคอลัมน์ได้รับความสำคัญในการเปลี่ยนลำดับต่ำ คำอธิบายใดสอดคล้องกับคำแนะนำ
    • Neither sensor can contain useful information
    • All low-importance features must be deleted immediately
    • The metric has necessarily been calculated backward
    • The model can use one sensor when the other is shuffled
  4. เหตุใดนักวิเคราะห์จึงควรสุ่มซ้ำสำหรับแต่ละอินพุต
    • To retrain the model on every permutation
    • To examine variation caused by different random rearrangements
    • To ensure importance values sum to one
    • To force every input to have positive importance
  5. ความสำคัญของการเรียงสับเปลี่ยนแตกต่างจากการปรับโมเดลใหม่ให้เหมาะสมหลังจากลบฟีเจอร์อย่างไร
    • Permutation importance keeps the existing fitted model fixed
    • Permutation importance always changes the outcome labels
    • Feature removal cannot change predictive performance
    • Feature removal and shuffling are mathematically identical
  6. An input has negative permutation importance across some shuffles. What happened in those measurements?
    • The baseline score was necessarily negative
    • The feature was uncorrelated with every other input
    • The shuffled score was higher than the baseline score
    • The absolute magnitude of the importance was calculated instead of its sign
  7. A feature ranks highly in a permutation report. Which claim would exceed what the test establishes?
    • The fitted model's score dropped when the feature was shuffled
    • The result depends on the chosen metric
    • The ranking should be interpreted with the evaluation data
    • Changing that feature in the real world must cause the outcome to change
  8. Before treating a permutation ranking as useful evidence, which check does the guide recommend?
    • Confirm that training-set accuracy alone is high
    • Confirm that the fitted model predicts usefully on evaluation data
    • Confirm that every importance is greater than zero
    • Confirm that individual importances sum to one