Xiga xigaHagaha xiga
Soo Celinta Is-dhexgalka dambe ee ColBERT
Luuqadda AI
Luqadda AI HAGAHA
BM25 waa shaqada darajaynta ereyada muhiimka ah ee caadiga ah taaso keenta dukumeentiyada inta jeer ee ereyada weydiiyadu soo baxaan, lagu hagaajiyo ereyga naadir iyo dhererka dukumeentiga.
Dhageyso hagahanAI-waa laga sheekeeyay · ~2 min
Tobaneeyo sano jirsaday, waxa ay ahaanaysaa saldhig si cajiib ah u xoogan oo meel walba laga raadinayo.
BM25 (Best Matching 25) waa shaqada darajada shandad ereyada laga soo qaatay qaabka Okapi ee suurtogalka ah ee 1990-meeyadii. Eray kasta oo su'aal ah waxa uu isku daraa saddex calaamadood: inta jeer ee ereygu ka soo baxo dukumeentiga, oo soo celinta yaraynaysaa ay maamusho halbeegyada k1), soo noqnoqoshada dukumeentiga (ereyada dhifka ah ee ururinta oo dhan ayaa tiro badan), iyo dhererka dhererka caadiga ah (parameter b, markaa dukumentiyada dhaadheer si xaq darro ah looma jeclayn). Isku soo wada duub dhibcahan xilli kasta oo waxaad helaysaa darajada dukumeentiga. Uma baahna tabobar waxayna si xawli ah ugu socotaa iyada oo loo marayo tusmooyin rogan, taas oo ah sababta makiinadaha raadinta sida Elasticsearch iyo Lucene ay si caadi ah u isticmaalaan. In kasta oo ay kor u kacday dib u soo celinta neerfaha, BM25 ayaa wali ku guulaysata ama ku xidhadheysa jaangooyooyin badan, gaar ahaan ereyo naadir ah, aqoonsiyo sax ah, iyo waydiimo ka baxsan goobta.
Qiimaynta ku habboonaanta asalka ah ee Elasticsearch, OpenSearch, iyo Apache Lucene/Solr
Soo celinta musharraxa heerka koowaad ee quudinaysa dib-u-dejiyeyaasha neerfaha ee gaabis ah ee raadinta laba-marxale ah
kood ka raadi log iyo log halkaas oo aqoonsiga saxda ah iyo koodka khaladku ay tahay inay si sax ah u waafaqaan
Macdanta tusaalooyin taban oo adag si loo tababaro soo-dejiyayaal cufan sida DPR
BM25 uma badna inay meesha ka baxdo; Taa beddelkeeda waxa si sii kordheysa loogu lamaaniyaa hababka neerfaha ee soo celinta isku-dhafka ah, halkaas oo buundooyinka qaamuuska iyo cufan la isku daray (badanaa iyada oo loo marayo isku-dhafka darajada is-dhaafsiga). Moodooyinka yaryar ee la baray sida SPLADE waxay isku daraan nooca BM25-ka yar ee miisaanka ereyada neerfaha, iyo BM25 waxay had iyo jeer u adeegtaa sidii marxaladda koowaad ee soo-celinta ka hor kuwa beddelaya neerfaha. Xawaaraheeda, tarjumaaddeeda, iyo kharashka tababarka eber ayaa dammaanad qaadaya door waara oo raadinta wax soo saarka.
Warqad bilaash ah
Saddex sheeko oo la xaqiijiyay oo AI ah maalin kasta oo shaqo ah, oo lagu qoray Ingiriis fudud. Bilaash had iyo jeer, aan xayaysiis lahayn.
Hal iimayl maalin kasta oo shaqo ah. Ka bax hal gujin. Marna ma iibinno ama ma wadaagno ciwaankaaga.
Is tijaabi
Fikrad degdeg ah oo ku saabsan jawaab kasta, iyo shahaado la wadaajin karo oo leh aqoonsi la xaqiijin karo markaad ka gudubto koorso.
Taageer waxbarashada AI bilaashka ah. AI Understanding waa 501(c)(3) aan faa'iido doon ahayn — xayaysiis la'aan, albaab lacag ah ma jiro, had iyo jeer. Samee deeq
BM25 waa shaqada darajaynta ereyada muhiimka ah ee caadiga ah taaso keenta dukumeentiyada inta jeer ee ereyada weydiiyadu soo baxaan, lagu hagaajiyo ereyga naadir iyo dhererka dukumeentiga. Tobaneeyo sano jirsaday, waxa ay ahaanaysaa saldhig si cajiib ah u xoog badan oo meel walba laga raadinayo.
BM25 waxay isku daraysaa soo noqnoqoshada ereyga, soo noqnoqoshada dukumeenti rogan ah (erey naadir), iyo dhererka dukumeentiga caadiga ah ee dhibcaha khuseeya.
IDF waxa ay abaalmarisaa ereyo dhif iyo naadir ku ah guud ahaan ururinta waxayna hoos u dhigtaa ereyada caadiga ah, maadaama kulammada dhifka ah ay xog badan yihiin.
Caadiyan la'aanteed, dukumeenti dheer ayaa ururin doona tartamo ka badan; halbeegga b wuxuu hagaajiyaa dhererka si isbarbardhiggu uu noqdo mid cadaalad ah.
Tusmada la rogay ayaa u ogolaanaysa BM25 inay dhaliso kaliya dukumentiyada ay ku jiraan ereyada weydiinta, taasoo ka dhigaysa soo celinta mid hufan.
b controls the strength of length normalization; zero removes that adjustment while other scoring components remain.
Sii wad waxbarashada
Tilmaamayaal badan ayaa loo doortay mawduucan
Xiga xigaHagaha xiga
Soo Celinta Is-dhexgalka dambe ee ColBERT
Luuqadda AI