Gids-gekoppelde quiz · Middelmatig Niveau

Processupervisie voor quiz over wiskundig redeneren

Onderzoek proces- en uitkomstfeedback met PRM800K-labels, kandidaatselectie, Math-Shepherd-supervisie en aggregatie van stappenscores.

Vraag 1 van 8

Where does process supervision provide feedback compared with outcome supervision?

Bekijk elke vraag8 vragen

Antwoorden en uitleg verschijnen terwijl je de quiz doet.

  1. Where does process supervision provide feedback compared with outcome supervision?
    • Only at the physical GPU temperature
    • At intermediate reasoning steps rather than only the final result
    • Only at the document filename
    • Only at an increased vocabulary size
  2. Waarom kan resultaatgericht toezicht misleidend zijn bij rekenproblemen?
    • Het is te traag om te berekenen
    • Het kan niet overweg met decimalen
    • Voor elk probleem zijn menselijke beoordelaars nodig
    • Een model kan tot het juiste antwoord komen via foutieve stappen die toevallig teniet worden gedaan
  3. Wat heeft OpenAI uitgebracht naast het werk 'Let's Verify Step by Step'?
    • PRM800K, een dataset van ~800.000 labels op stapniveau
    • Een nieuwe GPU-architectuur
    • De GSM8K-testset
    • Een schaakengine
  4. In best-of-N math selection with a process reward model, what does the verifier do?
    • Guarantees that a correct candidate was generated
    • Changes every tokenizer token into a proof axiom
    • Scores generated candidate solutions under the chosen aggregation rule
    • Replaces the original problem with a translation
  5. Welke aanpak vermindert de behoefte aan dure menselijke staplabels?
    • Het beloningsmodel volledig uitschakelen
    • Implementaties van Monte Carlo die de waarde van elke stap automatisch schatten (bijvoorbeeld Math-Shepherd)
    • Gebruik alleen het definitieve antwoord
    • Training in meer talen
  6. What can low step-level verifier scores usefully indicate to someone reviewing a solution?
    • Steps that merit closer inspection
    • An infallible location of the first actual error
    • A mathematical proof that all other steps are correct
    • The exact temperature used to sample every token
  7. For step scores 0.9 and 0.8, what is the solution score under a product aggregation rule?
    • 0.8
    • 0.85
    • 1.7
    • 0.72
  8. Which data-selection strategy did Let’s Verify Step by Step study to improve labeling efficiency?
    • Choosing examples only by alphabetical filename order
    • Removing every incorrect-answer candidate from the labeling pool
    • Active learning that selected informative candidate solutions
    • Using an unlabeled test answer as the final human label