Вікторина, пов’язана з посібником · Середній Рівень

Переставлення моделей. Тест

Перевірте роль ретриверів і реранжерів, порівняйте перехресні кодери з двокодувальниками та вивчіть спискове ранжування наборів кандидатів.

Пов'язані напрямні шляхиПереранжування моделей
Питання 1 з 8

У типовому двоетапному конвеєрі пошуку, що таке робота реранжера?

Перегляньте кожне запитання8 запитання

Відповіді та пояснення з’являються під час виконання тесту.

  1. У типовому двоетапному конвеєрі пошуку, що таке робота реранжера?
    • Повторно оцінити та змінити список кандидатів на релевантність
    • Витягти початкових кандидатів із мільйонів документів
    • Зберігати документи в базі даних
    • Щоб створити остаточну відповідь природною мовою
  2. Окрім MS MARCO, на якому наборі даних Ногейра та Чо повідомили про високі результати для свого реранжера проходження BERT?
    • ImageNet
    • TREC-CAR
    • LibriSpeech
    • Тільки SQUAD
  3. Чому крос-кодувальник не може бути використаний для прямого пошуку мільйонів документів?
    • Він працює лише на зображеннях
    • Він не може читати текст
    • Його бали потрібно обчислювати заново для кожної пари запит-документ, що надто повільно в масштабі
    • Це не вимагає жодних обчислень
  4. У чому головна перевага бікодера над кроскодувальником?
    • Це точніше при детальній релевантності
    • Це завжди ідеально впорядковує результати
    • Для цього не потрібні навчальні дані
    • Його вбудовані документи можна попередньо обчислити, що робить пошук швидким і масштабованим
  5. Як реранжер може вплинути на якість контексту в конвеєрі генерації, доповненого пошуком?
    • Це може перемістити релевантніших отриманих кандидатів вище в короткому списку контексту, але не гарантує правильності
    • Це гарантує, що кожен відновлений уривок є фактично правильним
    • Він створює відсутні документи в корпусі
    • Це усуває необхідність оцінювати пошук
  6. Що разом враховує модель під час переранжування за списками?
    • Лише один документ без запиту
    • Запит і комплект документів-кандидатів при вирішенні питання про їх замовлення
    • Кожне вбудовування документа перед будь-яким пошуком кандидата
    • Єдина позначка релевантності для повного навчального корпусу
  7. Що повинна перевірити команда перед тим, як інтерпретувати оцінки реранжера як ймовірності?
    • Чи кожен бал вище нуля
    • Чи було видалено ретривер першої стадії
    • Чи були відкалібровані та оцінені бали для цього використання
    • Чи має модель більше параметрів, ніж ретривер
  8. Які обмеження успадковує реранжер від системи пошуку першого етапу?
    • Він завжди повертає відкалібровану ймовірність
    • Це усуває потребу в пошуку
    • Це гарантує правильну згенеровану відповідь
    • Він не може рекламувати відповідний документ, який ніколи не входив до набору кандидатів