Test legat de ghid · Mediu Nivel

Test BERTScore și evaluare semantică

Verifică potrivirea token-ului contextual, precizia și direcția de reamintire, ponderarea IDF și redimensionarea liniei de bază în evaluarea textului semantic.

Căi de ghidare aferenteBertscore și evaluare semantică
Întrebare 1 de 8

Ce puncte slabe de bază ale BLEU și ROUGE abordează BERTScore?

Previzualizează fiecare întrebare8 întrebări

Răspunsurile și explicațiile apar pe măsură ce susțineți testul.

  1. Ce puncte slabe de bază ale BLEU și ROUGE abordează BERTScore?
    • Ei penalizează parafrazele valide care folosesc cuvinte diferite
    • Ele rulează prea încet pe documente lungi
    • Au nevoie de adnotatori umani pentru fiecare scor
    • Funcționează doar la traducere, nu la rezumat
  2. Cum decide BERTScore că două jetoane sunt similare?
    • Prin numărarea caracterelor partajate
    • Prin asemănarea cosinus a înglobărilor lor contextuale
    • Prin verificarea dacă apar în aceeași intrare din dicționar
    • Prin potrivirea exactă a șirurilor
  3. Ce înseamnă că înglobările BERTScore sunt „contextuale”?
    • Ele sunt calculate o singură dată pentru fiecare cuvânt de vocabular
    • Ei ignoră în întregime cuvintele din jur
    • Același cuvânt primește vectori diferiți în funcție de propoziție
    • Ele se bazează pe frecvența cuvintelor
  4. Care trei valori raportează de obicei BERTScore?
    • BLEU, ROUGE și METEOR
    • Acuratețe, reamintire și perplexitate
    • Prejudecăți, varianță și pierdere
    • Precizie, rechemare și F1
  5. Care este scopul ponderării opționale IDF în BERTScore?
    • Pentru a reduce cuvintele foarte comune, mai puțin informative
    • Pentru a accelera calculul de încorporare
    • Pentru a converti scorurile în procente
    • Pentru a traduce textul înainte de a nota
  6. De ce se aplică uneori redimensionarea liniei de bază la BERTScore?
    • Pentru a elimina necesitatea unui text de referință
    • Pentru a face scorurile brute răspândite într-un interval mai interpretabil
    • Pentru a-l converti în BLEU pentru comparație
    • Pentru a elimina complet modelul de încorporare
  7. In BERTScore, which direction corresponds to recall?
    • For each candidate token, find its best-matching reference token
    • Compare sentence lengths only
    • For each reference token, find its best-matching candidate token
    • Count exact matching n-grams
  8. Why can IDF weighting change BERTScore’s token contribution?
    • It replaces contextual embeddings with word counts
    • It removes the reference text
    • It forces every token to have identical similarity
    • Common words receive less weight than more informative words