Kuiz berkaitan panduan · Sederhana Tahap
Kuiz Metrik Penilaian ROUGE dan BLEU
Menyemak ketepatan dan keratan BLEU, ingatan semula ROUGE dan pertindihan jujukan, dan sebab metrik n-gram terlepas parafrasa yang sah secara semantik.
soalan 1 daripada 8
Metrik manakah yang pada asalnya direka untuk terjemahan mesin dan menekankan ketepatan?
Pratonton setiap soalan8 soalan
Jawapan dan penjelasan muncul semasa anda mengambil kuiz.
- Metrik manakah yang pada asalnya direka untuk terjemahan mesin dan menekankan ketepatan?
- BLEU
- ROUGE
- BERTScore
- F1 sahaja
- Apakah yang diorientasikan terutamanya oleh ROUGE?
- Ketepatan
- Ingat kembali
- Latensi
- Saiz model
- Apakah yang dihalang oleh penalti singkat BLEU?
- Menghasilkan output yang terlalu panjang
- Menggunakan perkataan yang jarang berlaku
- Permainan skor dengan output yang sangat singkat
- Mengulang perkataan yang sama
- Apakah ukuran ROUGE-L?
- Bilangan huruf dalam output
- Latensi dalam milisaat
- Kadar pembelajaran terbesar digunakan
- Susunan sepunya terpanjang antara calon dan rujukan
- Apakah had bersama utama BLEU dan ROUGE?
- Mereka hanya mengukur pertindihan n-gram permukaan dan terlepas parafrasa atau makna
- Mereka memerlukan GPU untuk mengira
- Mereka tidak boleh mengendalikan teks bahasa Inggeris
- Mereka tidak memerlukan teks rujukan
- Bagaimanakah BLEU menghalang sistem daripada mempermainkan skor dengan mengulangi n-gram frekuensi tinggi?
- Ia mengabaikan semua perkataan yang diulang
- Ia menjepit setiap kiraan n-gram calon kepada kiraan maksimumnya dalam rujukan
- Ia hanya mengira ayat pertama
- Ia menghukum sebarang pengulangan kepada sifar
- When does BLEU’s brevity penalty reduce a candidate’s score?
- When the candidate includes a unigram match
- When the reference contains more than four words
- When the candidate is shorter than the reference length
- When the candidate uses a paraphrase
- Why does BLEU take a geometric mean across n-gram precisions?
- It converts precision into a confidence interval
- It guarantees semantic equivalence
- It removes the need for reference text
- A low score at one n-gram order can substantially lower the combined score