Questionário vinculado ao guia · Médio Nível
Questionário de resposta a perguntas
Revise o controle de qualidade extrativo e generativo, evidências externas, fundamentação de recuperação, limites de resposta, abstenção, avaliação de sobreposição e testes de paráfrase.
Pergunta 1 de 8
O que um sistema extrativo de resposta a perguntas faz?
Visualize cada pergunta8 perguntas
As respostas e explicações aparecem conforme você responde ao teste.
- O que um sistema extrativo de resposta a perguntas faz?
- Seleciona a extensão exata do texto em uma passagem que responde à pergunta
- Escreve uma resposta totalmente nova com suas próprias palavras
- Traduz a pergunta para outro idioma
- Classifica as páginas da web por popularidade
- Que distinção de acesso a evidências separa o controle de qualidade de livro fechado de um ambiente de controle de qualidade de livro aberto?
- Open-book systems are forbidden to read documents
- Closed-book systems must always be more accurate
- Closed-book uses model parameters without external lookup; open-book can use supplied or retrieved documents
- Open-book systems cannot include a language model
- Como a geração aumentada de recuperação pode apoiar uma resposta de controle de qualidade?
- By guaranteeing every retrieved passage is correct
- By eliminating the need to interpret any passage
- By automatically proving every output claim true
- By providing retrieved passages as evidence for generation
- Quais pontuações de limite um cabeçote de controle de qualidade extrativo pode produzir ao selecionar uma extensão de resposta?
- Only a translation score for French output
- Scores for possible answer-start and answer-end positions
- Only a grammatical noun-or-verb label
- Only the alphabetical rank of each word
- Qual é o sinal de um sistema de controle de qualidade bem projetado quando a passagem não tem resposta?
- De qualquer maneira, ele inventa uma resposta que parece plausível
- Ele retorna a passagem inteira
- Ele reconhece que a pergunta é irrespondível e diz isso
- Ele trava
- How does generative QA differ from requiring an extractive source span?
- It produces answer text rather than requiring an exact span from the passage
- It is restricted to one yes-or-no label in every task
- It never outputs any words present in a source
- It must output only a highlighted passage boundary
- In SQuAD-style QA evaluation, what can token-overlap F1 provide that exact match alone does not?
- Proof that every claimed fact is true
- Partial credit for answer words overlapping a reference
- A guarantee that no answer was copied
- The measured power usage of a server
- Why evaluate a QA system on paraphrased questions that preserve the intended meaning?
- To guarantee that every new paraphrase has a different answer
- To remove all passage evidence from every evaluation
- To replace answer quality with filename length
- To test sensitivity to changes in question wording