Luqadda AI HAGAHA

BM25 iyo Dib u soo Celinta Qaamuuska

BM25 waa shaqada darajaynta ereyada muhiimka ah ee caadiga ah taaso keenta dukumeentiyada inta jeer ee ereyada weydiiyadu soo baxaan, lagu hagaajiyo ereyga naadir iyo dhererka dukumeentiga.

Dhageyso hagahanAI-waa laga sheekeeyay · ~2 min

Boggaan2 daqiiqo akhri
  1. Dulmar
  2. quusid qoto dheer
  3. Dhaqangelinta Adduunka-dhabta ah
  4. Mustaqbalka BM25 iyo Soo Celinta Lexical
  5. Ku dhaqangelinta
  6. Sii wad Sahaminta
  7. Su'aalaha soo noqnoqda

Dulmar

Tobaneeyo sano jirsaday, waxa ay ahaanaysaa saldhig si cajiib ah u xoogan oo meel walba laga raadinayo.

quusid qoto dheer

BM25 (Best Matching 25) waa shaqada darajada shandad ereyada laga soo qaatay qaabka Okapi ee suurtogalka ah ee 1990-meeyadii. Eray kasta oo su'aal ah waxa uu isku daraa saddex calaamadood: inta jeer ee ereygu ka soo baxo dukumeentiga, oo soo celinta yaraynaysaa ay maamusho halbeegyada k1), soo noqnoqoshada dukumeentiga (ereyada dhifka ah ee ururinta oo dhan ayaa tiro badan), iyo dhererka dhererka caadiga ah (parameter b, markaa dukumentiyada dhaadheer si xaq darro ah looma jeclayn). Isku soo wada duub dhibcahan xilli kasta oo waxaad helaysaa darajada dukumeentiga. Uma baahna tabobar waxayna si xawli ah ugu socotaa iyada oo loo marayo tusmooyin rogan, taas oo ah sababta makiinadaha raadinta sida Elasticsearch iyo Lucene ay si caadi ah u isticmaalaan. In kasta oo ay kor u kacday dib u soo celinta neerfaha, BM25 ayaa wali ku guulaysata ama ku xidhadheysa jaangooyooyin badan, gaar ahaan ereyo naadir ah, aqoonsiyo sax ah, iyo waydiimo ka baxsan goobta.

Dhaqangelinta Adduunka-dhabta ah

Qiimaynta ku habboonaanta asalka ah ee Elasticsearch, OpenSearch, iyo Apache Lucene/Solr

Soo celinta musharraxa heerka koowaad ee quudinaysa dib-u-dejiyeyaasha neerfaha ee gaabis ah ee raadinta laba-marxale ah

kood ka raadi log iyo log halkaas oo aqoonsiga saxda ah iyo koodka khaladku ay tahay inay si sax ah u waafaqaan

Macdanta tusaalooyin taban oo adag si loo tababaro soo-dejiyayaal cufan sida DPR

Mustaqbalka BM25 iyo Soo Celinta Lexical

BM25 uma badna inay meesha ka baxdo; Taa beddelkeeda waxa si sii kordheysa loogu lamaaniyaa hababka neerfaha ee soo celinta isku-dhafka ah, halkaas oo buundooyinka qaamuuska iyo cufan la isku daray (badanaa iyada oo loo marayo isku-dhafka darajada is-dhaafsiga). Moodooyinka yaryar ee la baray sida SPLADE waxay isku daraan nooca BM25-ka yar ee miisaanka ereyada neerfaha, iyo BM25 waxay had iyo jeer u adeegtaa sidii marxaladda koowaad ee soo-celinta ka hor kuwa beddelaya neerfaha. Xawaaraheeda, tarjumaaddeeda, iyo kharashka tababarka eber ayaa dammaanad qaadaya door waara oo raadinta wax soo saarka.

Ku dhaqangelinta

Maxay muhiim u tahay

  • Xawaaraha iyo miisaanka. Socodka shaqada luqaddu si dhakhso leh ayay u socon kartaa iyada oo aan la hurayn joogteynta.
  • Helitaanka iyo gaarsiinta. Waxay balaadhisaa gelitaanka luqadaha iyo qaababka isgaarsiinta.
  • Go'aamo cad. Kooxuhu waxay waqti badan ku qaadan karaan xukunka halka otomaatiggu uu qabanayo ku celcelinta.

Iska ilaali

  • Xaqiiqooyinka dhalanteed waxay si deggan u geli karaan warbixinnada, taageerada socodka, ama natiijooyinka cilmi-baarista.
  • Dareenka degdega ahi wuxuu abuuri karaa natiijooyin aan iswaafaqayn codsiyada la midka ah.
  • Xogta qoraalka xasaasiga ah ayaa laga yaabaa in la kashifo haddii kontaroolada gelitaanka ay daciif yihiin.

Tallaabooyinka xiga

  1. Qeex qaabka wax soo saarka, codka, iyo heerarka tayada ka hor inta aan la baahin.
  2. Jawaabaha salka ku haya ilo lagu kalsoon yahay mar kasta oo saxnidu ay muhiim tahay.
  3. Hayso isbaarada dib u eegista bini aadamka ee wax soo saarka sare.
  4. Lasoco qaababka guuldarada oo dib u leyli dardargelinta ama socodka shaqada si joogto ah.

Sii wad Sahaminta

Warqad bilaash ah

Hel warbixinta maalinlaha ah ee AI

Saddex sheeko oo la xaqiijiyay oo AI ah maalin kasta oo shaqo ah, oo lagu qoray Ingiriis fudud. Bilaash had iyo jeer, aan xayaysiis lahayn.

Hal iimayl maalin kasta oo shaqo ah. Ka bax hal gujin. Marna ma iibinno ama ma wadaagno ciwaankaaga.

Is tijaabi

Take the BM25 and Lexical Retrieval quiz

Fikrad degdeg ah oo ku saabsan jawaab kasta, iyo shahaado la wadaajin karo oo leh aqoonsi la xaqiijin karo markaad ka gudubto koorso.

Bilow kedis

Taageer waxbarashada AI bilaashka ah. AI Understanding waa 501(c)(3) aan faa'iido doon ahayn — xayaysiis la'aan, albaab lacag ah ma jiro, had iyo jeer. Samee deeq

Su'aalaha soo noqnoqda

Waa maxay BM25 iyo Lexical Retrieval?

BM25 waa shaqada darajaynta ereyada muhiimka ah ee caadiga ah taaso keenta dukumeentiyada inta jeer ee ereyada weydiiyadu soo baxaan, lagu hagaajiyo ereyga naadir iyo dhererka dukumeentiga. Tobaneeyo sano jirsaday, waxa ay ahaanaysaa saldhig si cajiib ah u xoog badan oo meel walba laga raadinayo.

Maxay BM25 ugu horayn u isticmaashaa darajaynta dukumentiyada?

BM25 waxay isku daraysaa soo noqnoqoshada ereyga, soo noqnoqoshada dukumeenti rogan ah (erey naadir), iyo dhererka dukumeentiga caadiga ah ee dhibcaha khuseeya.

Doorkee ayuu ka ciyaaraa inta jeer ee dukumeenti ka soo horjeeda (IDF) ee BM25?

IDF waxa ay abaalmarisaa ereyo dhif iyo naadir ku ah guud ahaan ururinta waxayna hoos u dhigtaa ereyada caadiga ah, maadaama kulammada dhifka ah ay xog badan yihiin.

Waa maxay sababta BM25 ay u dabaqdo ka-yeelaynta dhererka dukumeentiga (beegyada b)?

Caadiyan la'aanteed, dukumeenti dheer ayaa ururin doona tartamo ka badan; halbeegga b wuxuu hagaajiyaa dhererka si isbarbardhiggu uu noqdo mid cadaalad ah.

Qaab dhismeedka xogta ee BM25 ka dhigaya mid si degdeg ah miisaanka?

Tusmada la rogay ayaa u ogolaanaysa BM25 inay dhaliso kaliya dukumentiyada ay ku jiraan ereyada weydiinta, taasoo ka dhigaysa soo celinta mid hufan.

In the standard BM25 formula, what effect does setting b to zero have?

b controls the strength of length normalization; zero removes that adjustment while other scoring components remain.