Rehber bağlantılı sınav · Orta Seviye
BM25 ve Sözcük Erişim Sınavı
BM25 teriminin nadirliğini, frekans doygunluğunu, belge uzunluğu kontrollerini, ters çevrilmiş dizinlerini ve yoğun alıcılar için zor negatiflerin araştırılmasındaki rolünü keşfedin.
Soru 1 arasında 8
BM25 belgeleri sıralamak için öncelikle neyi kullanıyor?
Her soruyu önizleyin8 sorular
Testi çözdüğünüzde cevaplar ve açıklamalar görünür.
- BM25 belgeleri sıralamak için öncelikle neyi kullanıyor?
- Yoğun anlamsal yerleştirmeler
- Dönem sıklığı, ters belge sıklığı ve belge uzunluğu
- Her belgenin yayın tarihi
- Yalnızca kullanıcı tıklama geçmişi
- BM25'te ters belge sıklığının (IDF) rolü nedir?
- 'The' gibi çok yaygın kelimeleri güçlendirir
- Her belgenin ne kadar uzunlukta olduğunu ölçer
- Daha nadir, daha belirgin terimlere daha fazla ağırlık verir
- Yalnızca toplam belge sayısını sayar
- BM25 neden belge uzunluğu normalizasyonunu (b parametresi) uyguluyor?
- Uzun belgelerin sırf daha fazla kelime içermesi nedeniyle haksız yere tercih edilmemesi için
- Her belgeyi aynı uzunlukta yapmak için
- Kısa belgeleri silmek için
- Belgeleri standart bir dile çevirmek için
- BM25'in terim frekansı işlemesinin önemli bir özelliği şudur:
- Her tekrarda doğrusal olarak sonsuza kadar artar
- Terim sıklığını tamamen göz ardı eder
- Tekrarlanan her kelimenin puanı iki katına çıkar
- Doyur, dolayısıyla ekstra tekrarlar alaka düzeyini azaltır
- Hangi veri yapısı BM25'i geniş ölçekte hızlı kılıyor?
- Ters çevrilmiş dizin, terimleri bunları içeren belgelerle eşleştirir
- Bir sinir ağı
- Tüm metnin tek sıralı dizisi
- Alıntılardan oluşan bir grafik veritabanı
- Modern arama sistemlerinde BM25 sıklıkla şu amaçlarla kullanılır:
- Tüm sinir modellerini tamamen değiştirin
- Sinirsel yeniden sıralamadan önce hızlı bir birinci aşama geri getirici olarak hizmet edin veya yoğun puanlarla birleşin
- Yepyeni belgeler oluşturun
- Arama dizinini şifrele
- In the standard BM25 formula, what effect does setting b to zero have?
- It removes all inverse-document-frequency weights
- It makes every matching term contribute zero
- It changes the index from lexical terms to dense vectors
- It disables document-length normalization in the term-frequency denominator
- When BM25 is used to mine DPR training negatives, what makes a retrieved nonanswer passage a hard negative?
- It has no words in common with any document
- It is automatically the positive passage because its lexical score is high
- It looks relevant through term overlap but does not support the question's answer
- It contains no readable text and is never retrieved