Тест, свързан с ръководство · Среден Ниво

Тест за прекласиране при извличане

Прегледайте как пренареждащите пренареждат извлечен набор от кандидати, защо кръстосаните енкодери са по-бавни и как припомнянето на първия етап ограничава крайните резултати.

Свързани ръководни пътекиПрекласиране при извличане
Въпрос 1 на 8

Каква е ролята на реранкера в конвейера за извличане?

Визуализирайте всеки въпрос8 въпроси

Отговорите и обясненията се появяват, докато отговаряте на теста.

  1. Каква е ролята на реранкера в конвейера за извличане?
    • За повторно оценяване на малък набор от кандидати, така че най-подходящите резултати да се изкачат на върха
    • За сканиране на целия корпус от нулата
    • За генериране на чисто нови документи
    • За компресиране на индекса за търсене
  2. Какво отличава кръстосания енкодер от би-енкодера?
    • Кръстосан енкодер вгражда заявка и документ отделно
    • Кръстосан енкодер захранва заявка и документ заедно, така че вниманието ги сравнява съвместно
    • Кръстосан енкодер не може да използва трансформатори
    • Кръстосаният енкодер работи само върху изображения
  3. Защо кръстосаните енкодери се използват за прекласиране, а не за извличане на първи етап?
    • Те са неточни
    • Те обработват само един документ
    • Те са твърде бавни, за да работят върху цял корпус, тъй като векторите на документи не могат да бъдат предварително изчислени
    • Те не изискват изчисления
  4. За какво обикновено оптимизира ретривърът от първи етап?
    • Точност само при ранг 1
    • Генериране на отговори на естествен език
    • Пренареждане на точно пет документа
    • Припомнете и ускорете целия корпус
  5. How can a reranker affect a RAG candidate set, and what can it not guarantee?
    • It can reorder retrieved candidates, but cannot add a missing passage or verify generated claims
    • It guarantees the most relevant source is present and every generated claim is correct
    • It replaces the first-stage retriever and searches the entire corpus
    • It makes retrieval precision and recall perfect
  6. Кой от тях е нововъзникващ подход за прекласиране?
    • Изтриване на ретривъра и отгатване на отговори
    • Използване на LLM като прекласатори по списък, които обмислят целия набор от кандидати
    • Връщане само към ръчно маркиране на ключови думи
    • Замяна на трансформатори с произволно точкуване
  7. Which metric can assess whether the first-stage retriever includes relevant passages before reranking?
    • Image resolution of the generated answer
    • BLEU score of an unrelated translation
    • Recall of relevant candidates in the retrieved set
    • Number of model parameters in the reranker
  8. Which metric did the Passage Re-ranking with BERT paper report a 27% relative improvement on for MS MARCO?
    • BLEU-4
    • ImageNet top-1 accuracy
    • Средна абсолютна грешка
    • MRR@10