ROUGE ve BLEU Değerlendirme Metrikleri Testi

Testi çözdüğünüzde cevaplar ve açıklamalar görünür.

1. Hangi metrik başlangıçta makine çevirisi için tasarlanmıştı ve kesinliği vurguluyordu?
   • MAVİ
   • ALLIK
   • BERTS Skoru
   • Yalnızca F1
2. ROUGE öncelikli olarak neye odaklanıyor?
   • Hassasiyet
   • Geri çağırma
   • Gecikme
   • Modeli boyutu
3. BLEU'nun kısalık cezası neyi önler?
   • Aşırı uzun çıktılar üretmek
   • Nadir kelimeleri kullanma
   • Çok kısa çıktılarla skoru oynama
   • Aynı kelimeyi tekrarlamak
4. ROUGE-L neyi ölçer?
   • Çıktıdaki harf sayısı
   • Milisaniye cinsinden gecikme
   • Kullanılan en büyük öğrenme oranı
   • Aday ve referans arasındaki en uzun ortak alt dizi
5. Hem BLEU hem de ROUGE'un ortak önemli sınırlaması nedir?
   • Yalnızca yüzeydeki n-gram örtüşmesini ölçerler ve açıklamayı veya anlamı kaçırırlar
   • Hesaplama için GPU'lara ihtiyaç duyarlar
   • İngilizce metni işleyemezler
   • Referans metnine ihtiyaçları yok
6. BLEU bir sistemin yüksek frekanslı bir n-gramı tekrarlayarak skorla oynamasını nasıl önler?
   • Tekrarlanan tüm kelimeleri yok sayar
   • Her adayın n-gram sayısını referanslardaki maksimum sayısına kadar keser
   • Sadece ilk cümleyi sayar
   • Herhangi bir tekrarı sıfıra kadar cezalandırır
7. When does BLEU’s brevity penalty reduce a candidate’s score?
   • When the candidate includes a unigram match
   • When the reference contains more than four words
   • When the candidate is shorter than the reference length
   • When the candidate uses a paraphrase
8. Why does BLEU take a geometric mean across n-gram precisions?
   • It converts precision into a confidence interval
   • It guarantees semantic equivalence
   • It removes the need for reference text
   • A low score at one n-gram order can substantially lower the combined score