Rehber bağlantılı sınav · Sert Seviye
Spekülatif Örnekleme Doğrulama Sınavı
Kesin spekülatif örneklemeyi, kabul ve düzeltme olasılıklarını, taslak maliyetlerini ve performans iddialarına ilişkin kısıtlamaları test eder.
Soru 1 arasında 8
Spekülatif örneklemenin ardındaki temel fikir nedir?
Her soruyu önizleyin8 sorular
Testi çözdüğünüzde cevaplar ve açıklamalar görünür.
- Spekülatif örneklemenin ardındaki temel fikir nedir?
- Büyük bir modelin paralel olarak doğruladığı birden fazla token önermek için küçük bir taslak model kullanın
- Katmanları dinamik olarak atlamak için dev bir modeli eğitin
- Mümkün olan her cümleyi önceden önbelleğe alın
- Zamandan tasarruf etmek için örneklemeyi açgözlü kod çözme ile değiştirin
- Spekülatif örnekleme neden çıktı kalitesini düşürmüyor?
- Çünkü taslak model her zaman doğrudur
- Çünkü doğrulama kuralı nihai dağılımı saf hedef örneklemeyle aynı hale getirir.
- Çünkü yalnızca kısa istemlerde çalışır
- Çünkü iki modelin çıktılarının ortalamasını alır
- In exact speculative sampling, what happens when a drafted token is rejected?
- It outputs the rejected draft token unchanged
- It discards the entire conversation and restarts
- The algorithm samples from a corrected residual distribution at that position
- It permanently changes the target model
- Under exact speculative sampling, what is guaranteed about the output distribution?
- It is always deterministic
- It matches the draft model’s distribution instead
- It is more diverse than every target-model output
- It matches the target model’s sampling distribution
- What information does the target verification pass provide in exact speculative sampling?
- Target probabilities for proposed positions, used for acceptance tests and residual resampling
- A guarantee that no target-model computation is needed
- Only the draft model’s next-token distribution
- A corrected token sequence without any sampling
- Which description correctly distinguishes two self-speculative approaches?
- Both use only an unrelated small draft model
- Medusa adds prediction heads, while EAGLE uses feature-space proposals
- Medusa is a tokenizer and EAGLE is a reward model
- Both remove the target model from decoding
- The draft assigns probability 0.8 to a token and the target assigns 0.4. What is the speculative acceptance probability?
- 0.2
- 0.4
- 0,5
- 1.0
- What most limits speculative sampling’s realized speedup?
- The color of the model’s interface
- The target model’s name length
- Whether the prompt contains punctuation
- The draft-model cost and how much proposed work the target accepts