Bài kiểm tra có liên kết hướng dẫn · Trung bình Cấp độ
Bài kiểm tra về số liệu xếp hạng và NDCG
Chọn số liệu xếp hạng theo nhiệm vụ, tính toán độ chính xác và thu hồi ở k, đồng thời giải thích mức độ liên quan được phân loại và giảm thứ hạng trong NDCG.
Câu hỏi 1 của 8
Two relevant items appear in the top five. What is precision@5?
Xem trước mọi câu hỏi8 câu hỏi
Câu trả lời và giải thích xuất hiện khi bạn làm bài kiểm tra.
- Two relevant items appear in the top five. What is precision@5?
- 2/5
- 2 divided by all relevant candidates
- 5/2
- The rank of the first relevant item
- Two of three relevant candidates appear in the top five. What is recall@5?
- 2/5
- 2/3
- 3/2
- 5/3
- Which metric emphasizes the rank of the first relevant result?
- Precision@k
- Recall@k
- MRR
- NDCG only at the last position
- What does the logarithmic discount in DCG do?
- Normalizes by the number of queries
- Increases credit as rank moves down the list
- Removes relevance grades
- Reduces credit for relevant items at lower ranks
- How does ideal DCG contribute to normalized DCG?
- Convert graded labels into binary labels
- Scale ranking quality relative to the best ordering for that query
- Measure the fraction of candidates retrieved
- Find the first relevant rank only
- Which task best matches MRR?
- Measuring only class calibration
- Retrieving every relevant candidate equally
- Finding the first useful result as high as possible
- Ranking all results by predicted probability but ignoring position
- What can NDCG represent that binary precision@k may not?
- The first relevant result rank only
- The exact probability a user is satisfied
- The fraction of all relevant candidates found
- Graded relevance combined with position discount
- Why report cutoff and relevance conventions with a ranking score?
- They affect the metric definition and resulting value
- They are required only for regression metrics
- They never change NDCG
- They reveal whether candidate items were causal