Викторина, связанная с руководством · Средний Уровень

Викторина по изменению рейтинга поиска

Узнайте, как программы реранжирования меняют порядок полученного набора кандидатов, почему кросс-кодировщики работают медленнее и как отзыв на первом этапе ограничивает окончательные результаты.

Связанные направляющие путиПоисковое переранжирование
Вопрос 1 из 8

Какова роль реранкера в конвейере поиска?

Предварительный просмотр каждого вопроса8 вопросы

Ответы и пояснения появляются по мере прохождения теста.

  1. Какова роль реранкера в конвейере поиска?
    • Чтобы повторно оценить небольшой набор кандидатов, чтобы наиболее релевантные результаты оказались наверху.
    • Сканировать весь корпус с нуля
    • Для создания совершенно новых документов
    • Сжатие индекса поиска
  2. Что отличает кросс-энкодер от би-энкодера?
    • Кросс-кодировщик встраивает запрос и документ отдельно.
    • Кросс-кодер объединяет запрос и документ, поэтому внимание сравнивает их вместе.
    • Кросс-энкодер не может использовать преобразователи.
    • Кросс-кодер работает только с изображениями.
  3. Почему кросс-кодировщики используются для переранжирования, а не для поиска на первом этапе?
    • Они неточны
    • Они обрабатывают только один документ
    • Они слишком медленны, чтобы обрабатывать весь корпус, поскольку векторы документов не могут быть предварительно вычислены.
    • Они не требуют вычислений
  4. Для чего обычно оптимизируется ретривер первой ступени?
    • Точность только на 1 ранге
    • Генерация ответов на естественном языке
    • Изменение порядка ровно пяти документов
    • Запоминание и скорость по всему корпусу
  5. How can a reranker affect a RAG candidate set, and what can it not guarantee?
    • It can reorder retrieved candidates, but cannot add a missing passage or verify generated claims
    • It guarantees the most relevant source is present and every generated claim is correct
    • It replaces the first-stage retriever and searches the entire corpus
    • It makes retrieval precision and recall perfect
  6. Что из этого представляет собой новый подход к изменению рейтинга?
    • Удаление ретривера и угадывание ответов
    • Использование LLM в качестве списковых средств изменения рейтинга, которые анализируют весь набор кандидатов.
    • Возврат только к ручной разметке ключевых слов
    • Замена трансформаторов на случайный подсчет очков
  7. Which metric can assess whether the first-stage retriever includes relevant passages before reranking?
    • Image resolution of the generated answer
    • BLEU score of an unrelated translation
    • Recall of relevant candidates in the retrieved set
    • Number of model parameters in the reranker
  8. Which metric did the Passage Re-ranking with BERT paper report a 27% relative improvement on for MS MARCO?
    • BLEU-4
    • ImageNet top-1 accuracy
    • Средняя абсолютная ошибка
    • MRR@10