Kvíz spojený s průvodcem · Střední úroveň
Optimalizační kvíz Kahneman-Tversky
Kontroluje binární zpětnou vazbu KTO ohledně potřebnosti, motivaci prospektivní teorie, odměny za referenční body a limity napříč nastaveními.
Otázka 1 z 8
Jaké údaje KTO vyžaduje?
Náhled každé otázky8 otázky
Odpovědi a vysvětlení se zobrazují, jak budete v kvízu.
- Jaké údaje KTO vyžaduje?
- Binární žádoucí/nežádoucí popisky na jednotlivých výstupech
- Seřazené dvojice vybraných a odmítnutých odpovědí
- Pouze neoznačený text
- Číselné skóre odměn od 0 do 100
- KTO je inspirováno kterým dílem?
- Einsteinova relativita
- Kahnemanova a Tverského prospektová teorie
- Darwinova evoluce
- Shannonova informační teorie
- Co je to „averze ke ztrátě“, jak se používá v KTO?
- Úplné zamezení jakékoli ztrátové funkce
- Odmítání trénovat na ztráty
- Ostřeji penalizovat nežádoucí výstupy než odměňovat žádoucí
- Míra učení je záporná
- What kind of feedback can KTO learn from without requiring paired comparisons?
- Only a ranked list of five outputs
- Only a reference translation
- Only a token-level grammar mask
- A binary label indicating whether an individual output is desirable
- V KTO se odchylky měří vzhledem k čemu?
- Referenční bod nebo základní úroveň odměny
- Celkový počet parametrů
- Teplota GPU
- Velikost slovní zásoby
- What does the KTO reference point help define?
- The number of transformer layers
- Whether an output’s implicit reward is above or below a baseline
- A fixed translation in another language
- The model’s maximum context length
- Does KTO’s use of binary desirability feedback prove it will outperform preference-pair methods?
- Yes, binary feedback is always superior
- Yes, it eliminates the need to train a model
- No; performance depends on the model, data, and evaluation setting
- No, because binary feedback cannot be used for language models
- Which behavioral-economics framework motivates KTO?
- Classical signal detection theory
- Bayesian network structure learning
- The efficient-market hypothesis
- Kahneman and Tversky’s prospect theory