引導式測驗 · 中等 等級

ROUGE 和 BLEU 評估指標測驗

檢查 BLEU 精度和剪輯、ROUGE 召回率和序列重疊,以及為什麼 n-gram 指標會錯過語義上有效的釋義。

相關引導路徑紅色和藍色評估指標
問題 1 的 8

哪一個指標最初是為機器翻譯設計的並且強調精確度?

預覽每個問題8 問題

當您參加測驗時,就會出現答案和解釋。

  1. 哪一個指標最初是為機器翻譯設計的並且強調精確度?
    • 藍線
    • 胭脂
    • BERT評分
    • 僅限 F1
  2. ROUGE主要面向什麼?
    • 精確度
    • 召回
    • 延遲
    • 型號尺寸
  3. BLEU 的簡潔懲罰會阻止什麼?
    • 產生過長的輸出
    • 使用生僻字詞
    • 用非常短的輸出來計算分數
    • 重複同一個字
  4. ROUGE-L 測量什麼?
    • 輸出中的字母數
    • 延遲(以毫秒為單位)
    • 所使用的最大學習率
    • 候選和參考之間最長的公共子序列
  5. BLEU 和 ROUGE 的主要共同限制是什麼?
    • 它們僅測量表面 n 元語法重疊,而忽略釋義或含義
    • 它們需要 GPU 來計算
    • 他們無法處理英文文本
    • 他們不需要參考文本
  6. BLEU 如何防止系統透過重複高頻 n 元語法來玩弄分數?
    • 它忽略所有重複的單詞
    • 它將每個候選 n-gram 計數限制為其參考文獻中的最大計數
    • 只計算第一句話
    • 它將任何重複懲罰為零
  7. When does BLEU’s brevity penalty reduce a candidate’s score?
    • When the candidate includes a unigram match
    • When the reference contains more than four words
    • When the candidate is shorter than the reference length
    • When the candidate uses a paraphrase
  8. Why does BLEU take a geometric mean across n-gram precisions?
    • It converts precision into a confidence interval
    • It guarantees semantic equivalence
    • It removes the need for reference text
    • A low score at one n-gram order can substantially lower the combined score