Útmutatóhoz kapcsolódó kvíz · Közepes Szint
Odds Arány Preferencia Optimalizálási Kvíz
Explains ORPO’s reference-model-free preference objective, odds-ratio penalty, and combined supervised and preference training.
kérdés 1 -ból 8
Mi az ORPO fő gyakorlati előnye a DPO-hoz hasonló módszerekkel szemben?
Tekintse meg az összes kérdést8 kérdéseket
A válaszok és magyarázatok megjelennek a kvíz kitöltésekor.
- Mi az ORPO fő gyakorlati előnye a DPO-hoz hasonló módszerekkel szemben?
- Ezáltal nincs szükség külön referenciamodellre
- Egyáltalán nem igényel edzési adatokat
- Csak képmodelleken működik
- Garantálja, hogy nulla hallucináció
- Mihez viszonyít az ORPO-ban az esélyhányados?
- Az edzés sebessége kontra pontosság
- A választott válasz esélye az elutasított válaszra
- Két különböző tanulási arány
- A modell mérete az adatkészlet méretével szemben
- What form does an ORPO preference example contain?
- Only a single unlabeled response
- A prompt with two identical completions
- A prompt with one chosen response and one disfavored response
- A reward score with no associated responses
- How does ORPO convert a response probability p into odds?
- One minus p divided by p
- The square root of p
- The logarithm of the prompt length
- p divided by one minus p
- Az ORPO vesztesége melyik kombinációval írható le legjobban?
- SFT keresztentrópia plusz egy súlyozott esélyarány preferencia kifejezés
- Csak egy jutalommodell pontszám
- Tiszta megerősítés-tanulás hozam
- Véletlenszerű zajinjektálás
- Which response receives the supervised fine-tuning component of ORPO?
- Only the rejected response
- The chosen or preferred response
- A response sampled after deployment
- No response; ORPO has no language-modeling term
- Which parameter controls the weight of ORPO’s preference term relative to the supervised loss?
- A tokenizátor szókincsének mérete
- A figyelemfejek száma
- The preference-loss coefficient
- The prompt’s character count
- Why should an ORPO result report its preference data and evaluation setup?
- ORPO results are identical across datasets
- The objective removes the need for evaluation
- The number of model layers determines every preference
- Outcomes depend on the dataset, coefficient, base model, and evaluation