Quiz collegato alla guida · Medio Livello

BERTScore e quiz di valutazione semantica

Controlla la corrispondenza contestuale dei token, la precisione e la direzione del richiamo, la ponderazione IDF e il ridimensionamento della linea di base nella valutazione semantica del testo.

Percorsi guida correlatiBertscore e valutazione semantica
Domanda 1 di 8

Quale debolezza fondamentale di BLEU e ROUGE affronta BERTScore?

Anteprima di ogni domanda8 domande

Le risposte e le spiegazioni vengono visualizzate mentre rispondi al quiz.

  1. Quale debolezza fondamentale di BLEU e ROUGE affronta BERTScore?
    • Penaliscono le parafrasi valide che utilizzano parole diverse
    • Funzionano troppo lentamente su documenti lunghi
    • Richiedono annotatori umani per ogni punteggio
    • Funzionano solo sulla traduzione, non sul riassunto
  2. In che modo BERTScore decide che due token sono simili?
    • Contando i caratteri condivisi
    • Per somiglianza coseno dei loro incorporamenti contestuali
    • Controllando se compaiono nella stessa voce del dizionario
    • Per corrispondenza esatta della stringa
  3. Cosa significa che gli incorporamenti di BERTScore sono "contestuali"?
    • Vengono calcolati una sola volta per ogni parola del vocabolario
    • Ignorano completamente le parole circostanti
    • La stessa parola assume vettori diversi a seconda della frase
    • Si basano sul conteggio della frequenza delle parole
  4. Quali tre valori riporta tipicamente BERTScore?
    • BLEU, ROUGE e METEOR
    • Precisione, ricordo e perplessità
    • Distorsione, varianza e perdita
    • Precisione, richiamo e F1
  5. Qual è lo scopo della ponderazione IDF opzionale nel BERTScore?
    • Per ridimensionare le parole molto comuni e meno informative
    • Per accelerare il calcolo dell'incorporamento
    • Convertire i punteggi in percentuali
    • Per tradurre il testo prima del punteggio
  6. Perché a volte viene applicato il riscalamento della linea di base al BERTScore?
    • Per eliminare la necessità di un testo di riferimento
    • Per diffondere i punteggi grezzi in un intervallo più interpretabile
    • Per convertirlo in BLEU per il confronto
    • Per eliminare completamente il modello di incorporamento
  7. In BERTScore, which direction corresponds to recall?
    • For each candidate token, find its best-matching reference token
    • Compare sentence lengths only
    • For each reference token, find its best-matching candidate token
    • Count exact matching n-grams
  8. Why can IDF weighting change BERTScore’s token contribution?
    • It replaces contextual embeddings with word counts
    • It removes the reference text
    • It forces every token to have identical similarity
    • Common words receive less weight than more informative words