Bài kiểm tra có liên kết hướng dẫn · Trung bình Cấp độ
Câu hỏi về chất lượng truy xuất
Kiểm tra mức độ liên quan của việc truy xuất, thu hồi và độ chính xác ở mức giới hạn, xếp hạng, bằng chứng hiện tại, quyền, truy vấn không thể trả lời và hỗ trợ bị thiếu.
Câu hỏi 1 của 8
Recall@k đo lường điều gì đối với hệ thống truy xuất?
Xem trước mọi câu hỏi8 câu hỏi
Câu trả lời và giải thích xuất hiện khi bạn làm bài kiểm tra.
- Recall@k đo lường điều gì đối với hệ thống truy xuất?
- Vị trí xếp hạng của tài liệu liên quan đầu tiên được trả về
- Tỷ lệ của k kết quả hàng đầu thực sự có liên quan
- Chia sẻ tất cả các tài liệu liên quan có trong top k
- Thời gian hệ thống trả về k kết quả
- A retrieval evaluation cares whether the best evidence appears near the top. What kind of metric addresses that concern?
- A rank-aware metric
- A server uptime metric
- A count of stored files
- A tokenizer vocabulary size
- An exact order code is missed by semantic search, while a paraphrased question is missed by keyword search. What should the team inspect?
- Only the number of documents stored
- Whether every user asked the same question
- The appearance of the search button
- Each retrieval method’s blind spots on fixed examples
- A team adds hybrid retrieval and reranking. How should it judge whether the change helped?
- Compare only the highest similarity score after the change
- Evaluate both versions on the same fixed labeled examples
- Assume more retrieved passages always improve answers
- Count the number of model parameters rather than results
- A retrieved passage loses the sentence that qualifies its claim. What failure pattern should the reviewer flag?
- The source document was necessarily false
- The user must have asked an unanswerable question
- A passage was cut away from its qualification
- The search system returned too few languages
- In the guide’s constructed example, five passages are returned and three are relevant. What is precision at five?
- Three out of five, or 60%
- Three out of four, or 75%
- Five out of four, or 125%
- One out of five, or 20%
- Why should retrieval tests include access restrictions and unanswerable queries?
- To increase the average similarity score
- To check that the system avoids unauthorized evidence and unsupported answers
- To ensure every query returns a document
- To replace relevance labels
- A passage is about the right product but describes an older version. What does this show?
- The passage must rank first because it shares keywords
- The query has no retrieval requirements
- A high similarity score proves the answer
- Topical relevance alone may not provide evidence for the specific version or date in the question