แบบทดสอบที่เชื่อมโยงกับคำแนะนำ · ปานกลาง ระดับ

แบบทดสอบการจัดอันดับโมเดลใหม่

ทดสอบบทบาทของตัวดึงข้อมูลและตัวจัดอันดับใหม่ เปรียบเทียบตัวเข้ารหัสข้ามกับตัวเข้ารหัสคู่ และตรวจสอบการจัดอันดับชุดตัวเลือกตามลำดับรายการ

เส้นทางแนะนำที่เกี่ยวข้องการจัดอันดับโมเดลใหม่
คำถาม 1 ของ 8

ในไปป์ไลน์การดึงข้อมูลแบบสองขั้นตอนทั่วไป หน้าที่ของผู้จัดอันดับใหม่คืออะไร?

ดูตัวอย่างทุกคำถาม8 คำถาม

คำตอบและคำอธิบายจะปรากฏขึ้นเมื่อคุณทำแบบทดสอบ

  1. ในไปป์ไลน์การดึงข้อมูลแบบสองขั้นตอนทั่วไป หน้าที่ของผู้จัดอันดับใหม่คืออะไร?
    • เพื่อให้คะแนนใหม่และเรียงลำดับรายชื่อผู้สมัครที่เกี่ยวข้องอีกครั้ง
    • เพื่อดึงผู้สมัครเบื้องต้นจากเอกสารนับล้าน
    • เพื่อจัดเก็บเอกสารในฐานข้อมูล
    • เพื่อสร้างคำตอบสุดท้ายเป็นภาษาธรรมชาติ
  2. Besides MS MARCO, on which dataset did Nogueira and Cho report strong results for their BERT passage reranker?
    • อิมเมจเน็ต
    • TREC-CAR
    • LibriSpeech
    • SQuAD only
  3. เหตุใดจึงไม่สามารถใช้การจัดเรียงข้อมูลข้ามตัวเข้ารหัสเพื่อค้นหาเอกสารนับล้านโดยตรงได้
    • มันใช้งานได้กับภาพเท่านั้น
    • มันอ่านข้อความไม่ได้
    • คะแนนจะต้องคำนวณใหม่สำหรับคู่เอกสารการสืบค้นแต่ละคู่ ซึ่งช้าเกินไปในขนาด
    • มันไม่จำเป็นต้องคำนวณเลย
  4. ข้อได้เปรียบหลักของ Bi-encoder เหนือ Cross-encoder คืออะไร?
    • มีความแม่นยำมากกว่าในความเกี่ยวข้องแบบละเอียด
    • มันจะเรียงลำดับผลลัพธ์ใหม่อย่างสมบูรณ์แบบเสมอ
    • ไม่ต้องการข้อมูลการฝึกอบรม
    • การฝังเอกสารสามารถคำนวณล่วงหน้าได้ ทำให้สามารถดึงข้อมูลได้อย่างรวดเร็วและปรับขนาดได้
  5. How can a reranker affect context quality in a retrieval-augmented generation pipeline?
    • It can move more relevant retrieved candidates higher in the context shortlist, but does not guarantee correctness
    • It ensures every retrieved passage is factually correct
    • It creates missing documents in the corpus
    • It removes the need to evaluate retrieval
  6. In listwise reranking, what does the model consider together?
    • Only one document with no query
    • A query and a set of candidate documents when deciding their ordering
    • Each document embedding before any candidate retrieval
    • A single relevance label for the full training corpus
  7. What should a team verify before interpreting reranker scores as probabilities?
    • Whether every score is above zero
    • Whether the first-stage retriever was removed
    • Whether the scores have been calibrated and evaluated for that use
    • Whether the model has more parameters than the retriever
  8. What limitation does a reranker inherit from the first-stage retrieval system?
    • It always returns a calibrated probability
    • It removes the need for retrieval
    • It guarantees a correct generated answer
    • It cannot promote a relevant document that was never included in the candidate set