Quiz połączony z przewodnikiem · Średni Poziom

Quiz dotyczący ponownego rankingu odzyskiwania

Sprawdź, jak osoby zajmujące się ponownym rankingiem zmieniają kolejność pobranego zestawu kandydatów, dlaczego kodery krzyżowe są wolniejsze i jak przypominanie na pierwszym etapie ogranicza ostateczne wyniki.

Powiązane ścieżki prowadzącePonowne rankingowanie pobierania
Pytanie 1 z 8

Jaka jest rola osoby rerankingującej w procesie pobierania?

Podgląd każdego pytania8 pytania

Odpowiedzi i wyjaśnienia pojawiają się w miarę rozwiązywania quizu.

  1. Jaka jest rola osoby rerankingującej w procesie pobierania?
    • Aby ponownie ocenić mały zestaw kandydatów, tak aby najbardziej odpowiednie wyniki znalazły się na górze
    • Aby zeskanować cały korpus od zera
    • Aby wygenerować zupełnie nowe dokumenty
    • Aby skompresować indeks wyszukiwania
  2. Co odróżnia cross-enkoder od bi-enkodera?
    • Koder krzyżowy osadza zapytanie i dokument oddzielnie
    • Koder krzyżowy łączy zapytanie i dokument, dzięki czemu uwaga porównuje je łącznie
    • Koder krzyżowy nie może używać transformatorów
    • Koder krzyżowy działa tylko na obrazach
  3. Dlaczego kodery krzyżowe są używane do zmiany rankingu, a nie do wyszukiwania w pierwszym etapie?
    • Są niedokładne
    • Zawsze zajmują się tylko jednym dokumentem
    • Są zbyt wolne, aby objąć cały korpus, ponieważ nie można wstępnie obliczyć wektorów dokumentu
    • Nie wymagają obliczeń
  4. Do czego zazwyczaj optymalizuje się retriever pierwszego stopnia?
    • Precyzja tylko na poziomie 1
    • Generowanie odpowiedzi w języku naturalnym
    • Zmiana kolejności dokładnie pięciu dokumentów
    • Przypomnienie i prędkość w całym korpusie
  5. How can a reranker affect a RAG candidate set, and what can it not guarantee?
    • It can reorder retrieved candidates, but cannot add a missing passage or verify generated claims
    • It guarantees the most relevant source is present and every generated claim is correct
    • It replaces the first-stage retriever and searches the entire corpus
    • It makes retrieval precision and recall perfect
  6. Które z nich jest nowym podejściem do zmiany rankingu?
    • Usuwanie retrievera i zgadywanie odpowiedzi
    • Używanie LLM jako listowych rerankerów, które uzasadniają cały zestaw kandydatów
    • Wracam tylko do ręcznego tagowania słów kluczowych
    • Wymiana transformatorów z losową punktacją
  7. Which metric can assess whether the first-stage retriever includes relevant passages before reranking?
    • Image resolution of the generated answer
    • BLEU score of an unrelated translation
    • Recall of relevant candidates in the retrieved set
    • Number of model parameters in the reranker
  8. Which metric did the Passage Re-ranking with BERT paper report a 27% relative improvement on for MS MARCO?
    • BLEU-4
    • ImageNet top-1 accuracy
    • Średni błąd bezwzględny
    • MRR@10