Útmutatóhoz kapcsolódó kvíz · Közepes Szint

Odds Arány Preferencia Optimalizálási Kvíz

Explains ORPO’s reference-model-free preference objective, odds-ratio penalty, and combined supervised and preference training.

Kapcsolódó útmutató utakOdds Arány Preferencia Optimalizálás
kérdés 1 -ból 8

Mi az ORPO fő gyakorlati előnye a DPO-hoz hasonló módszerekkel szemben?

Tekintse meg az összes kérdést8 kérdéseket

A válaszok és magyarázatok megjelennek a kvíz kitöltésekor.

  1. Mi az ORPO fő gyakorlati előnye a DPO-hoz hasonló módszerekkel szemben?
    • Ezáltal nincs szükség külön referenciamodellre
    • Egyáltalán nem igényel edzési adatokat
    • Csak képmodelleken működik
    • Garantálja, hogy nulla hallucináció
  2. Mihez viszonyít az ORPO-ban az esélyhányados?
    • Az edzés sebessége kontra pontosság
    • A választott válasz esélye az elutasított válaszra
    • Két különböző tanulási arány
    • A modell mérete az adatkészlet méretével szemben
  3. What form does an ORPO preference example contain?
    • Only a single unlabeled response
    • A prompt with two identical completions
    • A prompt with one chosen response and one disfavored response
    • A reward score with no associated responses
  4. How does ORPO convert a response probability p into odds?
    • One minus p divided by p
    • The square root of p
    • The logarithm of the prompt length
    • p divided by one minus p
  5. Az ORPO vesztesége melyik kombinációval írható le legjobban?
    • SFT keresztentrópia plusz egy súlyozott esélyarány preferencia kifejezés
    • Csak egy jutalommodell pontszám
    • Tiszta megerősítés-tanulás hozam
    • Véletlenszerű zajinjektálás
  6. Which response receives the supervised fine-tuning component of ORPO?
    • Only the rejected response
    • The chosen or preferred response
    • A response sampled after deployment
    • No response; ORPO has no language-modeling term
  7. Which parameter controls the weight of ORPO’s preference term relative to the supervised loss?
    • A tokenizátor szókincsének mérete
    • A figyelemfejek száma
    • The preference-loss coefficient
    • The prompt’s character count
  8. Why should an ORPO result report its preference data and evaluation setup?
    • ORPO results are identical across datasets
    • The objective removes the need for evaluation
    • The number of model layers determines every preference
    • Outcomes depend on the dataset, coefficient, base model, and evaluation