Kuis Peningkatan Output Iteratif Perbaiki Sendiri

Jawaban dan penjelasan muncul saat Anda mengikuti kuis.

1. Apa tiga peran yang dimainkan oleh satu model dalam loop Self-Refine?
   • Generator, kritikus, dan revisi
   • Pelatih, penguji, penerapan
   • Encoder, decoder, pengklasifikasi
   • Perencana, aktor, pencetak gol
2. Apa yang dibutuhkan Self-Refine selain dorongan untuk bekerja?
   • Model penghargaan yang dilatih secara terpisah
   • Tidak ada tambahan; tidak memerlukan pelatihan tambahan atau model penghargaan
   • Peninjau manusia selalu memantau
   • Jaringan kritikus yang telah disesuaikan
3. Mengapa menghasilkan masukan secara terpisah dari pembuatan draf bermanfaat?
   • Itu menyembunyikan draf dari model
   • Ini mengurangi jumlah token
   • Hal ini memungkinkan model mengevaluasi dari kerangka baru alih-alih mempertahankan upaya pertamanya
   • Ini menonaktifkan memori model
4. Umpan balik seperti apa yang membuat langkah penyempurnaan menjadi paling efektif?
   • Dorongan yang tidak jelas seperti 'membuatnya lebih baik'
   • Skor numerik sederhana tanpa detail
   • Saran acak
   • Umpan balik yang spesifik dan dapat ditindaklanjuti menunjukkan kelemahan nyata
5. Kapan Self-Refine cenderung gagal meningkatkan output?
   • Jika model tidak dapat mendeteksi kekurangannya, maka model tersebut perlu diperbaiki
   • Ketika tugasnya singkat
   • Saat perintahnya dalam bahasa Inggris
   • Ketika suhu diatur ke nol
6. Bagaimana loop biasanya memutuskan untuk berhenti?
   • Itu selalu berjalan tepat 100 kali
   • Ini berhenti ketika model menilai keluarannya cukup baik atau mencapai batas langkah
   • Itu berhenti hanya ketika manusia menyetujuinya
   • Itu tidak pernah berhenti dengan sendirinya
7. What information does Self-Refine feed into later refinement rounds?
   • Only the final token of the original prompt
   • A reward model's parameters
   • The draft together with the feedback history
   • A new human-written answer with no prior context
8. In the guide's coding example, what might the critic flag before a revision?
   • An incorrect microphone sample rate
   • A ship arriving outside its port window
   • A mismatch between image and audio codecs
   • Missing edge-case handling