แบบทดสอบที่เชื่อมโยงกับคำแนะนำ · ยาก ระดับ
แบบทดสอบการถอดรหัสความเสี่ยง Bayes ขั้นต่ำ
ทดสอบยูทิลิตี้ที่คาดหวัง ตัวอย่างการอ้างอิงหลอก การเปรียบเทียบตัวเลือกกำลังสอง ขีดจำกัดเมตริก และข้อจำกัดของตัวเลือกและพูลของการถอดรหัส MBR
คำถาม 1 ของ 8
การถอดรหัส MBR เลือกอะไรแทนลำดับที่เป็นไปได้มากที่สุดเพียงลำดับเดียว
ดูตัวอย่างทุกคำถาม8 คำถาม
คำตอบและคำอธิบายจะปรากฏขึ้นเมื่อคุณทำแบบทดสอบ
- การถอดรหัส MBR เลือกอะไรแทนลำดับที่เป็นไปได้มากที่สุดเพียงลำดับเดียว
- ผู้สมัครที่มีคุณสมบัติอรรถประโยชน์ที่คาดหวังสูงสุดเทียบกับผลลัพธ์อื่นๆ ที่เป็นไปได้
- ลำดับที่สั้นที่สุด
- ตัวอย่างแบบสุ่ม
- ลำดับที่ยาวที่สุด
- เนื่องจากไม่มีการอ้างอิงที่แท้จริง MBR จะใช้อะไรเป็นการอ้างอิงหลอก
- คลังข้อมูลภายนอกคงที่
- กลุ่มของผลลัพธ์ของผู้สมัครตัวอย่างที่ถูกสุ่มตัวอย่างออกมาเอง
- คำอธิบายประกอบของมนุษย์
- ชุดฝึกซ้อม
- เหตุใดการคำนวณ MBR แบบไร้เดียงสาจึงมีราคาแพง
- มันต้องมีการฝึกโมเดลใหม่
- มันต้องการคำศัพท์ที่ใหญ่กว่า
- การเปรียบเทียบแบบคู่ของผู้สมัคร N คือการเรียกเมตริก O(N กำลังสอง)
- มันไม่ใช้ GPU
- What has COMET been used for in minimum Bayes risk machine-translation experiments?
- As a universal guarantee of better translation quality
- As a tokenizer for the candidate pool
- As an exact reference translation available at inference
- As a learned utility metric in evaluated translation settings
- ความสม่ำเสมอในการให้เหตุผลเกี่ยวข้องกับ MBR เนื่องจาก:
- สุ่มตัวอย่างโซ่จำนวนมากและเลือกคำตอบที่ตกลงกันไว้มากที่สุด
- จะใช้คำตอบตัวอย่างแรกเสมอ
- ใช้การค้นหาลำแสงภายใน
- ละเว้นการกระจายของโมเดล
- How is risk generally expressed in minimum Bayes risk decision-making?
- Always one minus a normalized similarity score
- Expected loss under a chosen loss function and reference distribution
- The model’s parameter count divided by accuracy
- The number of candidates sampled
- If the chosen utility metric disagrees with human judgments, what will MBR primarily optimize?
- Human preference automatically overrides the metric
- The model’s raw next-token likelihood
- The expected utility under that selected metric
- The shortest candidate in the pool
- If a high-quality answer is missing from the sampled candidate pool, what can MBR do?
- It guarantees the missing answer is generated
- It changes the model weights to add the answer
- It replaces the utility metric with a human reference
- It can only select or rerank candidates that are in the pool