Kvíz spojený s průvodcem · Střední úroveň

Optimalizační kvíz Kahneman-Tversky

Kontroluje binární zpětnou vazbu KTO ohledně potřebnosti, motivaci prospektivní teorie, odměny za referenční body a limity napříč nastaveními.

Související vodicí cestyOptimalizace Kahneman Tversky
Otázka 1 z 8

Jaké údaje KTO vyžaduje?

Náhled každé otázky8 otázky

Odpovědi a vysvětlení se zobrazují, jak budete v kvízu.

  1. Jaké údaje KTO vyžaduje?
    • Binární žádoucí/nežádoucí popisky na jednotlivých výstupech
    • Seřazené dvojice vybraných a odmítnutých odpovědí
    • Pouze neoznačený text
    • Číselné skóre odměn od 0 do 100
  2. KTO je inspirováno kterým dílem?
    • Einsteinova relativita
    • Kahnemanova a Tverského prospektová teorie
    • Darwinova evoluce
    • Shannonova informační teorie
  3. Co je to „averze ke ztrátě“, jak se používá v KTO?
    • Úplné zamezení jakékoli ztrátové funkce
    • Odmítání trénovat na ztráty
    • Ostřeji penalizovat nežádoucí výstupy než odměňovat žádoucí
    • Míra učení je záporná
  4. What kind of feedback can KTO learn from without requiring paired comparisons?
    • Only a ranked list of five outputs
    • Only a reference translation
    • Only a token-level grammar mask
    • A binary label indicating whether an individual output is desirable
  5. V KTO se odchylky měří vzhledem k čemu?
    • Referenční bod nebo základní úroveň odměny
    • Celkový počet parametrů
    • Teplota GPU
    • Velikost slovní zásoby
  6. What does the KTO reference point help define?
    • The number of transformer layers
    • Whether an output’s implicit reward is above or below a baseline
    • A fixed translation in another language
    • The model’s maximum context length
  7. Does KTO’s use of binary desirability feedback prove it will outperform preference-pair methods?
    • Yes, binary feedback is always superior
    • Yes, it eliminates the need to train a model
    • No; performance depends on the model, data, and evaluation setting
    • No, because binary feedback cannot be used for language models
  8. Which behavioral-economics framework motivates KTO?
    • Classical signal detection theory
    • Bayesian network structure learning
    • The efficient-market hypothesis
    • Kahneman and Tversky’s prospect theory