Gids-gekoppelde quiz · Middelmatig Niveau
Processupervisie voor quiz over wiskundig redeneren
Onderzoek proces- en uitkomstfeedback met PRM800K-labels, kandidaatselectie, Math-Shepherd-supervisie en aggregatie van stappenscores.
Vraag 1 van 8
Where does process supervision provide feedback compared with outcome supervision?
Bekijk elke vraag8 vragen
Antwoorden en uitleg verschijnen terwijl je de quiz doet.
- Where does process supervision provide feedback compared with outcome supervision?
- Only at the physical GPU temperature
- At intermediate reasoning steps rather than only the final result
- Only at the document filename
- Only at an increased vocabulary size
- Waarom kan resultaatgericht toezicht misleidend zijn bij rekenproblemen?
- Het is te traag om te berekenen
- Het kan niet overweg met decimalen
- Voor elk probleem zijn menselijke beoordelaars nodig
- Een model kan tot het juiste antwoord komen via foutieve stappen die toevallig teniet worden gedaan
- Wat heeft OpenAI uitgebracht naast het werk 'Let's Verify Step by Step'?
- PRM800K, een dataset van ~800.000 labels op stapniveau
- Een nieuwe GPU-architectuur
- De GSM8K-testset
- Een schaakengine
- In best-of-N math selection with a process reward model, what does the verifier do?
- Guarantees that a correct candidate was generated
- Changes every tokenizer token into a proof axiom
- Scores generated candidate solutions under the chosen aggregation rule
- Replaces the original problem with a translation
- Welke aanpak vermindert de behoefte aan dure menselijke staplabels?
- Het beloningsmodel volledig uitschakelen
- Implementaties van Monte Carlo die de waarde van elke stap automatisch schatten (bijvoorbeeld Math-Shepherd)
- Gebruik alleen het definitieve antwoord
- Training in meer talen
- What can low step-level verifier scores usefully indicate to someone reviewing a solution?
- Steps that merit closer inspection
- An infallible location of the first actual error
- A mathematical proof that all other steps are correct
- The exact temperature used to sample every token
- For step scores 0.9 and 0.8, what is the solution score under a product aggregation rule?
- 0.8
- 0.85
- 1.7
- 0.72
- Which data-selection strategy did Let’s Verify Step by Step study to improve labeling efficiency?
- Choosing examples only by alphabetical filename order
- Removing every incorrect-answer candidate from the labeling pool
- Active learning that selected informative candidate solutions
- Using an unlabeled test answer as the final human label