Gids-gekoppelde quiz · Middelmatig Niveau

Bradley-Terry beloningsmodelleringsquiz

Begrijp hoe Bradley-Terry paarsgewijze keuzes omzet in scores, beloningsmodellering ondersteunt en zich verhoudt tot algemene classificatiesystemen.

Vraag 1 van 8

Wat wordt door het Bradley-Terry-model omgezet in numerieke scores?

Bekijk elke vraag8 vragen

Antwoorden en uitleg verschijnen terwijl je de quiz doet.

  1. Wat wordt door het Bradley-Terry-model omgezet in numerieke scores?
    • Paarsgewijze vergelijkingen van welk item de voorkeur heeft
    • Absolute beoordelingen van 1 tot 10
    • Ruwe pixelwaarden
    • Tijdreeksmetingen
  2. Waarvan is volgens Bradley-Terry de kans dat A verslaat B een functie?
    • Het product van hun scores
    • De logistiek van het verschil tussen hun scores
    • De verhouding van hun token telt
    • Een vaste 50 procent, ongeacht de scores
  3. Waarom zijn Bradley-Terry-beloningen alleen identificeerbaar tot op basis van een additieve constante?
    • Omdat scores opgeteld tot één moeten komen
    • Omdat mensen niet kunnen tellen
    • Omdat het verlies alleen afhankelijk is van scoreverschillen
    • Omdat het sigmoïd alle informatie verwijdert
  4. Wat is het standaardverlies voor een enkele voorkeursvergelijking bij beloningsmodellering?
    • Gemiddelde kwadratische fout ten opzichte van een label van 1 op 10
    • Cross-entropie over de volledige woordenschat
    • Absoluut verschil in tokenlengtes
    • Negatieve log-sigmoïde van (beloning van gekozen minus beloning van afgewezen)
  5. Welke methode slaat een afzonderlijk beloningsmodel over door de Bradley-Terry-doelstelling rechtstreeks op het beleid te optimaliseren?
    • Directe voorkeursoptimalisatie (DPO)
    • Proximale beleidsoptimalisatie (PPO)
    • Batch-normalisatie
    • Verloop knippen
  6. Wat is een belangrijke beperking van de aanname van Bradley-Terry?
    • Er zijn GPU's nodig om te kunnen rekenen
    • Er wordt uitgegaan van één enkele, consistente, transitieve rangschikking die kan breken wanneer voorkeuren cyclussgewijs verlopen
    • Het werkt alleen op afbeeldingen
    • Het kan niet meer dan drie items tegelijk verwerken
  7. Why can pairwise judgments be easier to collect than absolute quality scores?
    • Pairwise choices never contain disagreement
    • Absolute scores cannot be used for training
    • A rater can compare two candidates directly without calibrating a numeric scale
    • A pairwise label reveals every feature of the reward model
  8. Which familiar ranking system is mathematically related to Bradley-Terry-style pairwise scoring?
    • PageRank for web pages
    • TF-IDF for document terms
    • A Fourier transform for audio
    • Elo ratings