Cuestionario vinculado a una guía · Medio Nivel
BERTScore y cuestionario de evaluación semántica
Comprueba la coincidencia de tokens contextuales, la precisión y la dirección de recuperación, la ponderación IDF y el cambio de escala de referencia en la evaluación de texto semántico.
Pregunta 1 de 8
¿Qué debilidad central de BLEU y ROUGE aborda BERTScore?
Vista previa de cada pregunta8 preguntas
Las respuestas y explicaciones aparecen a medida que realiza el cuestionario.
- ¿Qué debilidad central de BLEU y ROUGE aborda BERTScore?
- Penalizan paráfrasis válidas que utilizan palabras diferentes
- Funcionan demasiado lento en documentos largos.
- Requieren anotadores humanos para cada partitura
- Solo trabajan en traducción, no en resumen.
- ¿Cómo decide BERTScore que dos tokens son similares?
- Contando caracteres compartidos
- Por similitud coseno de sus incrustaciones contextuales
- Comprobando si aparecen en la misma entrada del diccionario.
- Por coincidencia exacta de cadenas
- ¿Qué significa que las incorporaciones de BERTScore son "contextuales"?
- Se calculan sólo una vez por palabra de vocabulario.
- Ignoran por completo las palabras circundantes.
- La misma palabra obtiene diferentes vectores dependiendo de su frase.
- Se basan en recuentos de frecuencia de palabras.
- ¿Qué tres valores suele informar BERTScore?
- AZUL, ROJO y METEOR
- Precisión, recuerdo y perplejidad
- Sesgo, variación y pérdida
- Precisión, recuperación y F1
- ¿Cuál es el propósito de la ponderación IDF opcional en BERTScore?
- Reducir el peso de palabras muy comunes y menos informativas.
- Para acelerar el cálculo de incorporación
- Para convertir puntuaciones en porcentajes
- Para traducir el texto antes de puntuar
- ¿Por qué a veces se aplica un cambio de escala de referencia a BERTScore?
- Para eliminar la necesidad de un texto de referencia
- Hacer que las puntuaciones brutas se distribuyan en un rango más interpretable
- Para convertirlo a BLEU para comparar
- Para eliminar el modelo de incrustación por completo
- In BERTScore, which direction corresponds to recall?
- For each candidate token, find its best-matching reference token
- Compare sentence lengths only
- For each reference token, find its best-matching candidate token
- Count exact matching n-grams
- Why can IDF weighting change BERTScore’s token contribution?
- It replaces contextual embeddings with word counts
- It removes the reference text
- It forces every token to have identical similarity
- Common words receive less weight than more informative words