Rehber bağlantılı sınav · Orta Seviye
Oran Oranı Tercih Optimizasyonu Testi
ORPO'nun referans modelden bağımsız tercih hedefini, olasılık oranı cezasını ve birleşik denetimli ve tercih eğitimini açıklar.
Soru 1 arasında 8
ORPO'nun DPO gibi yöntemlere göre temel pratik avantajı nedir?
Her soruyu önizleyin8 sorular
Testi çözdüğünüzde cevaplar ve açıklamalar görünür.
- ORPO'nun DPO gibi yöntemlere göre temel pratik avantajı nedir?
- Ayrı bir referans model ihtiyacını ortadan kaldırır
- Hiçbir eğitim verisine ihtiyaç duymaz
- Yalnızca görüntü modellerinde çalışır
- Sıfır halüsinasyonu garanti eder
- ORPO'daki 'olasılık oranı' neyi karşılaştırır?
- Eğitim hızına karşı doğruluk
- Seçilen yanıtın reddedilen yanıta oranı
- İki farklı öğrenme oranı
- Model boyutu ve veri kümesi boyutu
- What form does an ORPO preference example contain?
- Only a single unlabeled response
- A prompt with two identical completions
- A prompt with one chosen response and one disfavored response
- A reward score with no associated responses
- How does ORPO convert a response probability p into odds?
- One minus p divided by p
- The square root of p
- The logarithm of the prompt length
- p divided by one minus p
- ORPO kaybı en iyi şekilde hangi kombinasyonla tanımlanır?
- SFT çapraz entropi artı ağırlıklı olasılık oranı tercih terimi
- Yalnızca ödül modeli puanı
- Saf bir takviye-öğrenme dönüşü
- Rastgele gürültü enjeksiyonu
- Which response receives the supervised fine-tuning component of ORPO?
- Only the rejected response
- The chosen or preferred response
- A response sampled after deployment
- No response; ORPO has no language-modeling term
- Which parameter controls the weight of ORPO’s preference term relative to the supervised loss?
- Tokenizer kelime boyutu
- Dikkat kafalarının sayısı
- The preference-loss coefficient
- The prompt’s character count
- Why should an ORPO result report its preference data and evaluation setup?
- ORPO results are identical across datasets
- The objective removes the need for evaluation
- The number of model layers determines every preference
- Outcomes depend on the dataset, coefficient, base model, and evaluation