Вікторина, пов’язана з посібником · Середній Рівень
BM25 та лексична вікторина
Дослідіть рідкість термінів BM25, частотну насиченість, засоби керування довжиною документів, інвертовані індекси та їх роль у видобутку жорстких негативів для щільних ретриверів.
Питання 1 з 8
Що в основному використовує BM25 для ранжирування документів?
Перегляньте кожне запитання8 запитання
Відповіді та пояснення з’являються під час виконання тесту.
- Що в основному використовує BM25 для ранжирування документів?
- Щільні смислові вкладення
- Частота термінів, зворотна частота документа та довжина документа
- Дата публікації кожного документа
- Лише історія переходів користувачів
- Яку роль відіграє інверсна частота документа (IDF) у BM25?
- Він посилює дуже поширені слова, як-от "the"
- Він вимірює довжину кожного документа
- Це надає більшої ваги більш рідкісним, більш характерним термінам
- Враховується лише загальна кількість документів
- Чому BM25 застосовує нормалізацію довжини документа (параметр b)?
- Щоб довгі документи не надавалися несправедливо переваги лише тому, що містять більше слів
- Щоб кожен документ був однакової довжини
- Щоб видалити короткі документи
- Для перекладу документів на стандартну мову
- Ключовою особливістю обробки термінів і частот BM25 є те, що він:
- Лінійно збільшується назавжди з кожним повторенням
- Повністю ігнорує частоту термінів
- Подвоює оцінку за кожне повторене слово
- Насичує, тож зайві повтори зменшують релевантність
- Яка структура даних робить BM25 швидким у масштабі?
- Перевернутий індекс, який відображає терміни на документи, що їх містять
- Нейронна мережа
- Єдиний відсортований масив усього тексту
- Графічна база даних цитувань
- У сучасних пошукових системах BM25 часто використовується для:
- Повністю замінити всі нейронні моделі
- Виконуйте функцію швидкого ретривера першої стадії перед нейронним реранжуванням або об’єднуйтеся з щільними балами
- Створюйте абсолютно нові документи
- Зашифрувати пошуковий індекс
- In the standard BM25 formula, what effect does setting b to zero have?
- It removes all inverse-document-frequency weights
- It makes every matching term contribute zero
- It changes the index from lexical terms to dense vectors
- It disables document-length normalization in the term-frequency denominator
- When BM25 is used to mine DPR training negatives, what makes a retrieved nonanswer passage a hard negative?
- It has no words in common with any document
- It is automatically the positive passage because its lexical score is high
- It looks relevant through term overlap but does not support the question's answer
- It contains no readable text and is never retrieved