Questionário de reclassificação de recuperação

As respostas e explicações aparecem conforme você responde ao teste.

1. Qual é o papel de um reclassificador em um pipeline de recuperação?
   • Para reavaliar um pequeno conjunto de candidatos para que os resultados mais relevantes cheguem ao topo
   • Para digitalizar todo o corpus do zero
   • Para gerar documentos totalmente novos
   • Para compactar o índice de pesquisa
2. O que distingue um codificador cruzado de um codificador duplo?
   • Um codificador cruzado incorpora consulta e documento separadamente
   • Um codificador cruzado alimenta consulta e documento juntos para que a atenção os compare em conjunto
   • Um codificador cruzado não pode usar transformadores
   • Um codificador cruzado só funciona em imagens
3. Por que os codificadores cruzados são usados para reclassificação em vez de recuperação de primeiro estágio?
   • Eles são imprecisos
   • Eles lidam apenas com um documento
   • Eles são muito lentos para percorrer um corpus inteiro porque os vetores do documento não podem ser pré-computados
   • Eles não requerem cálculo
4. Para que o recuperador de primeiro estágio normalmente otimiza?
   • Precisão apenas na classificação 1
   • Gerando respostas em linguagem natural
   • Reordenando exatamente cinco documentos
   • Recuperação e velocidade em todo o corpus
5. How can a reranker affect a RAG candidate set, and what can it not guarantee?
   • It can reorder retrieved candidates, but cannot add a missing passage or verify generated claims
   • It guarantees the most relevant source is present and every generated claim is correct
   • It replaces the first-stage retriever and searches the entire corpus
   • It makes retrieval precision and recall perfect
6. Qual destas é uma abordagem emergente de reclassificação?
   • Excluindo o recuperador e adivinhando as respostas
   • Usando LLMs como reclassificadores de lista que raciocinam sobre todo o conjunto de candidatos
   • Revertendo apenas para codificação manual de palavras-chave
   • Substituindo transformadores com pontuação aleatória
7. Which metric can assess whether the first-stage retriever includes relevant passages before reranking?
   • Image resolution of the generated answer
   • BLEU score of an unrelated translation
   • Recall of relevant candidates in the retrieved set
   • Number of model parameters in the reranker
8. Which metric did the Passage Re-ranking with BERT paper report a 27% relative improvement on for MS MARCO?
   • BLEU-4
   • ImageNet top-1 accuracy
   • Erro absoluto médio
   • MRR@10