Samodoskonalący się iteracyjny quiz dotyczący poprawy wyników

Odpowiedzi i wyjaśnienia pojawiają się w miarę rozwiązywania quizu.

1. Jakie trzy role odgrywa pojedynczy model w pętli Self-Refine?
   • Generator, krytyk i weryfikator
   • Trener, tester, wdrożeniowiec
   • Koder, dekoder, klasyfikator
   • Planista, aktor, strzelec
2. Czego wymaga Samodoskonalenie poza zachęcaniem do pracy?
   • Oddzielnie przeszkolony model nagrody
   • Nic ekstra; nie wymaga dodatkowego szkolenia ani modelu nagrody
   • Recenzenci ludzcy w pętli
   • Dostrojona sieć krytyków
3. Dlaczego generowanie opinii w osobnym monitie od generowania wersji roboczej jest pomocne?
   • Ukrywa przeciąg przed modelem
   • Zmniejsza liczbę tokenów
   • Pozwala modelowi ocenić na podstawie świeżego kadrowania, zamiast bronić swojej pierwszej próby
   • Wyłącza pamięć modelu
4. Jaki rodzaj informacji zwrotnej sprawia, że ​​etap udoskonalania jest najbardziej skuteczny?
   • Niejasne zachęty, takie jak „ulepsz to”
   • Prosty wynik liczbowy bez szczegółów
   • Losowe sugestie
   • Konkretna, praktyczna informacja zwrotna wskazująca na konkretne wady
5. Kiedy funkcja Self-Refine zwykle nie poprawia wyników?
   • Kiedy model nie jest w stanie wykryć wady, należy ją naprawić
   • Gdy zadanie jest krótkie
   • Gdy monit jest w języku angielskim
   • Gdy temperatura jest ustawiona na zero
6. W jaki sposób pętla zazwyczaj decyduje się zatrzymać?
   • Zawsze uruchamia się dokładnie 100 razy
   • Zatrzymuje się, gdy model uzna, że wynik jest wystarczająco dobry lub osiągnie limit kroku
   • Zatrzymuje się dopiero wtedy, gdy człowiek to zatwierdzi
   • Nigdy nie zatrzymuje się samoistnie
7. What information does Self-Refine feed into later refinement rounds?
   • Only the final token of the original prompt
   • A reward model's parameters
   • The draft together with the feedback history
   • A new human-written answer with no prior context
8. In the guide's coding example, what might the critic flag before a revision?
   • An incorrect microphone sample rate
   • A ship arriving outside its port window
   • A mismatch between image and audio codecs
   • Missing edge-case handling