Gids-gekoppelde quiz · Middelmatig Niveau
Bradley-Terry beloningsmodelleringsquiz
Begrijp hoe Bradley-Terry paarsgewijze keuzes omzet in scores, beloningsmodellering ondersteunt en zich verhoudt tot algemene classificatiesystemen.
Vraag 1 van 8
Wat wordt door het Bradley-Terry-model omgezet in numerieke scores?
Bekijk elke vraag8 vragen
Antwoorden en uitleg verschijnen terwijl je de quiz doet.
- Wat wordt door het Bradley-Terry-model omgezet in numerieke scores?
- Paarsgewijze vergelijkingen van welk item de voorkeur heeft
- Absolute beoordelingen van 1 tot 10
- Ruwe pixelwaarden
- Tijdreeksmetingen
- Waarvan is volgens Bradley-Terry de kans dat A verslaat B een functie?
- Het product van hun scores
- De logistiek van het verschil tussen hun scores
- De verhouding van hun token telt
- Een vaste 50 procent, ongeacht de scores
- Waarom zijn Bradley-Terry-beloningen alleen identificeerbaar tot op basis van een additieve constante?
- Omdat scores opgeteld tot één moeten komen
- Omdat mensen niet kunnen tellen
- Omdat het verlies alleen afhankelijk is van scoreverschillen
- Omdat het sigmoïd alle informatie verwijdert
- Wat is het standaardverlies voor een enkele voorkeursvergelijking bij beloningsmodellering?
- Gemiddelde kwadratische fout ten opzichte van een label van 1 op 10
- Cross-entropie over de volledige woordenschat
- Absoluut verschil in tokenlengtes
- Negatieve log-sigmoïde van (beloning van gekozen minus beloning van afgewezen)
- Welke methode slaat een afzonderlijk beloningsmodel over door de Bradley-Terry-doelstelling rechtstreeks op het beleid te optimaliseren?
- Directe voorkeursoptimalisatie (DPO)
- Proximale beleidsoptimalisatie (PPO)
- Batch-normalisatie
- Verloop knippen
- Wat is een belangrijke beperking van de aanname van Bradley-Terry?
- Er zijn GPU's nodig om te kunnen rekenen
- Er wordt uitgegaan van één enkele, consistente, transitieve rangschikking die kan breken wanneer voorkeuren cyclussgewijs verlopen
- Het werkt alleen op afbeeldingen
- Het kan niet meer dan drie items tegelijk verwerken
- Why can pairwise judgments be easier to collect than absolute quality scores?
- Pairwise choices never contain disagreement
- Absolute scores cannot be used for training
- A rater can compare two candidates directly without calibrating a numeric scale
- A pairwise label reveals every feature of the reward model
- Which familiar ranking system is mathematically related to Bradley-Terry-style pairwise scoring?
- PageRank for web pages
- TF-IDF for document terms
- A Fourier transform for audio
- Elo ratings