แบบทดสอบที่เชื่อมโยงกับคำแนะนำ · ปานกลาง ระดับ

แบบทดสอบการเพิ่มประสิทธิภาพการตั้งค่าอัตราส่วนราคาต่อรอง

อธิบายวัตถุประสงค์การตั้งค่าแบบไม่มีแบบจำลองอ้างอิงของ ORPO การลงโทษอัตราส่วนอัตราต่อรอง และการฝึกอบรมแบบมีการดูแลและการตั้งค่าแบบรวม

คำถาม 1 ของ 8

ข้อได้เปรียบเชิงปฏิบัติหลักของ ORPO เหนือวิธีการเช่น DPO คืออะไร

ดูตัวอย่างทุกคำถาม8 คำถาม

คำตอบและคำอธิบายจะปรากฏขึ้นเมื่อคุณทำแบบทดสอบ

  1. ข้อได้เปรียบเชิงปฏิบัติหลักของ ORPO เหนือวิธีการเช่น DPO คืออะไร
    • ทำให้ไม่ต้องใช้โมเดลอ้างอิงแยกต่างหาก
    • มันไม่จำเป็นต้องมีข้อมูลการฝึกอบรมเลย
    • ใช้ได้กับโมเดลรูปภาพเท่านั้น
    • รับประกันภาพหลอนเป็นศูนย์
  2. 'อัตราส่วนอัตราต่อรอง' ใน ORPO เปรียบเทียบอะไร
    • ความเร็วการฝึกอบรมกับความแม่นยำ
    • อัตราต่อรองของคำตอบที่เลือกเทียบกับคำตอบที่ถูกปฏิเสธ
    • อัตราการเรียนรู้ที่แตกต่างกันสองแบบ
    • ขนาดโมเดลเทียบกับขนาดชุดข้อมูล
  3. What form does an ORPO preference example contain?
    • Only a single unlabeled response
    • A prompt with two identical completions
    • A prompt with one chosen response and one disfavored response
    • A reward score with no associated responses
  4. How does ORPO convert a response probability p into odds?
    • One minus p divided by p
    • The square root of p
    • The logarithm of the prompt length
    • p divided by one minus p
  5. การสูญเสีย ORPO อธิบายได้ดีที่สุดว่าเป็นค่าผสมใด
    • SFT cross-entropy บวกกับข้อกำหนดการกำหนดลักษณะอัตราส่วนอัตราต่อรองแบบถ่วงน้ำหนัก
    • มีเพียงคะแนนแบบจำลองรางวัลเท่านั้น
    • ผลตอบแทนการเรียนรู้การเสริมกำลังที่บริสุทธิ์
    • การฉีดเสียงรบกวนแบบสุ่ม
  6. Which response receives the supervised fine-tuning component of ORPO?
    • Only the rejected response
    • The chosen or preferred response
    • A response sampled after deployment
    • No response; ORPO has no language-modeling term
  7. Which parameter controls the weight of ORPO’s preference term relative to the supervised loss?
    • ขนาดคำศัพท์โทเค็น
    • จำนวนหัวความสนใจ
    • The preference-loss coefficient
    • The prompt’s character count
  8. Why should an ORPO result report its preference data and evaluation setup?
    • ORPO results are identical across datasets
    • The objective removes the need for evaluation
    • The number of model layers determines every preference
    • Outcomes depend on the dataset, coefficient, base model, and evaluation