Kuiz berkaitan panduan · Sederhana Tahap

BERTScore dan Kuiz Penilaian Semantik

Menyemak padanan token kontekstual, ketepatan dan arah ingat, pemberat IDF dan penskalaan semula garis dasar dalam penilaian teks semantik.

Laluan panduan yang berkaitanBertscore Dan Penilaian Semantik
soalan 1 daripada 8

Apakah kelemahan teras BLEU dan ROUGE yang ditangani oleh BERTScore?

Pratonton setiap soalan8 soalan

Jawapan dan penjelasan muncul semasa anda mengambil kuiz.

  1. Apakah kelemahan teras BLEU dan ROUGE yang ditangani oleh BERTScore?
    • Mereka menghukum parafrasa yang sah yang menggunakan perkataan yang berbeza
    • Mereka berjalan terlalu perlahan pada dokumen panjang
    • Mereka memerlukan anotasi manusia untuk setiap skor
    • Mereka hanya bekerja pada terjemahan, bukan ringkasan
  2. Bagaimanakah BERTScore memutuskan bahawa dua token adalah serupa?
    • Dengan mengira aksara yang dikongsi
    • Dengan persamaan kosinus daripada benam kontekstual mereka
    • Dengan menyemak sama ada ia muncul dalam entri kamus yang sama
    • Dengan padanan rentetan yang tepat
  3. Apakah yang dimaksudkan bahawa pembenaman BERTScore adalah 'kontekstual'?
    • Mereka dikira sekali sahaja bagi setiap perkataan perbendaharaan kata
    • Mereka mengabaikan perkataan sekeliling sepenuhnya
    • Perkataan yang sama mendapat vektor berbeza bergantung pada ayatnya
    • Ia adalah berdasarkan kiraan kekerapan perkataan
  4. Tiga nilai yang manakah biasanya dilaporkan oleh BERTScore?
    • BLEU, ROUGE dan METEOR
    • Ketepatan, ingatan dan kebingungan
    • Bias, varians dan kerugian
    • Ketepatan, ingat semula dan F1
  5. Apakah tujuan pemberat IDF pilihan dalam BERTScore?
    • Untuk menurunkan berat perkataan yang sangat biasa, kurang bermaklumat
    • Untuk mempercepatkan pengiraan benam
    • Untuk menukar markah kepada peratusan
    • Untuk menterjemah teks sebelum membuat markah
  6. Mengapakah penskalaan semula garis dasar kadangkala digunakan pada BERTScore?
    • Untuk mengalih keluar keperluan untuk teks rujukan
    • Untuk membuat skor mentah tersebar merentasi julat yang lebih boleh ditafsir
    • Untuk menukarnya kepada BLEU sebagai perbandingan
    • Untuk menghapuskan model benam sepenuhnya
  7. In BERTScore, which direction corresponds to recall?
    • For each candidate token, find its best-matching reference token
    • Compare sentence lengths only
    • For each reference token, find its best-matching candidate token
    • Count exact matching n-grams
  8. Why can IDF weighting change BERTScore’s token contribution?
    • It replaces contextual embeddings with word counts
    • It removes the reference text
    • It forces every token to have identical similarity
    • Common words receive less weight than more informative words