Idanwo ti o sopọ mọ itọsọna · Alabọde Ipele

Idanwo Imudara Iyanju Taara

Ṣe atunwo awọn orisii yiyan DPO, ilana itọkasi, awọn ere ti ko tọ, beta, awọn iyatọ, ati awọn opin ikẹkọ yiyan taara.

Jẹmọ itọsọna awọn ọnaImudara Iyanju Taara
Ibeere 1 ti 8

Kini DPO imukuro ni akawe si RLHF ibile?

Awotẹlẹ gbogbo ibeere8 ibeere

Awọn idahun ati awọn alaye han bi o ṣe n mu ibeere naa.

  1. Kini DPO imukuro ni akawe si RLHF ibile?
    • Awoṣe ẹsan lọtọ ati lupu ikẹkọ imuduro
    • Iwulo fun eyikeyi data ayanfẹ eniyan
    • Awọn mimọ pretrained ede awoṣe
    • Awọn lilo ti log-probabilities
  2. Awọn data wo ni apẹẹrẹ ikẹkọ DPO kan ni ninu?
    • Iyara ati Dimegilio ere nomba kan
    • Itọkasi pẹlu yiyan ati esi ti a kọ
    • Itọkasi ati idahun ti o tọ kan
    • Nikan ere awoṣe ká o wu
  3. Ipa wo ni awoṣe itọkasi ṣe ni DPO?
    • O ṣe ipilẹṣẹ awọn idahun ti a kọ silẹ
    • O ṣe ikun awọn idahun pẹlu awọn ere ti o fojuhan
    • O jẹ ipilẹ ti o tutunini eto imulo ti wọn lodi si lati fi opin si fiseete
    • O rọpo data ikẹkọ
  4. Bawo ni pipadanu DPO ṣe nlo bata ayanfẹ ti a samisi?
    • O ṣe atunṣe awọn idahun mejeeji si ibi-afẹde iwọn kanna
    • O ṣe ikẹkọ alariwisi iye lọtọ lati ṣe asọtẹlẹ awọn ipadabọ ipele-ami
    • O maximizes awọn ti ao esi lai itọkasi
    • O ṣe alekun eto imulo-idasi-itọkasi-ipin-itọkasi idahun ti o yan
  5. Kini paramita beta (iwọn otutu) ni iṣakoso DPO?
    • Bawo ni agbara eto imulo ti wa ni isunmọ si awoṣe itọkasi
    • Oṣuwọn ẹkọ ti oluṣeto
    • Awọn nọmba ti ààyò orisii
    • Awọn fokabulari iwọn
  6. Idi titete wo ni o le kọ ẹkọ lati awọn esi alakomeji pe abajade jẹ iwunilori tabi ko fẹ?
    • PPO, eyiti o nilo alariwisi iye fun gbogbo aami
    • KTO, ibi-afẹde-ijinlẹ fun awọn esi ifẹ alakomeji
    • DARTS, eyiti o ṣawari awọn sẹẹli nẹtiwọọki iyatọ
    • Wiwa Beam, eyiti o yipada awọn iwuwo awoṣe lati awọn ipo
  7. Ninu apẹẹrẹ yiyan DPO boṣewa, esi wo ni o fẹ?
    • Idahun pẹlu awọn ami diẹ sii nipasẹ asọye
    • Idahun pẹlu iṣeeṣe itọkasi ti o kere julọ
    • Idahun ti a yan nipasẹ aami iyanfẹ fun itọsi ti a fifun
    • Idahun laileto ti ko ni ibatan si tọ
  8. Ninu DPO, ikosile wo ni o nṣe iranṣẹ bi ẹsan alaiṣedeede fun idahun kan, titi di igbagbogbo ti o gbẹkẹle titẹ sii?
    • A lọtọ oṣiṣẹ scalar ere-awoṣe ori
    • Dimegilio aaye kikọ eniyan fun ami-ami kọọkan
    • Awọn apapọ ọkọọkan ipari ti ààyò data
    • Beta igba ni eto imulo/itọkasi log-iṣeeṣe ipin