MemUse waxay ogaataa in wada hadalka AI xusuusta ay u shaqeyso si ka duwan sidii ay soo jeedin lahaayeen imtixaanada xusuusta

Maxaa dhacay

Cilmi baadhayaashu waxay soo bandhigeen MemUse, qaab qiimayneed oo loogu talagalay xusuusta AI wada-hadalka muddada-dheer kaas oo cabbiraya in nidaamyadu si dabiici ah u dhexgalaan faahfaahinta la xidhiidha jawaabaha halkii ay ka soo saari lahaayeen oo keliya xaqiiqooyinka marka si toos ah loo weydiiyo.

Wargeysku waxa uu ka warbixiyey hawlgelin afar bilood ah oo ay ku lug lahaayeen isticmaalayaasha 40, kalfadhiyada 1,872 iyo todoba xaaladood oo xusuusta ah. Cilmi-baadhayaashu waxay barbardhigeen tijaabada tooska ah ee QA ee caadiga ah - weydiinaya nidaamka AI si ay u soo ceshadaan xaqiiqo gaar ah oo ka timid is-weydaarsi hore - oo ay la socdaan waxa ay ugu yeeraan Isku-dhafka Dabiiciga ah: aqoonsiga marka faahfaahinta la xasuusto ay khusayso oo lagu daro si dabiici ah jawaabta. Meelahan isbarbardhigga ah ayaa keenay dib-u-soo-noqosho iyo isticmaalka wada-sheekeysiga caadiga ah ee dhinac-dhinac isla qaab-dhismeedka qiimaynta.

Toddobada shuruudood, waxqabadka tooska ah ee QA wuxuu u dhexeeyay 19.7% ilaa 70.1%, laakiin cilmi-baarayaashu waxay sheegeen in ku qanacsanaanta isticmaaluhu aanay isbeddelin. Fasiradoodu waa in bartilmaameedka iyo isticmaalayaashu ay cabbirayeen awoodo kala duwan. Tooska ah QA waxa ay tijaabisaa in nidaamku soo ceshan karo xaqiiqda marka la sheego; wada hadalka caadiga ah waxa kale oo uu u baahan yahay in la go'aamiyo in xaqiiqadu ay wakhtigaas tahay iyo sida loo isticmaalo iyada oo aan jawaabtu dareemin in la qasbay. Kala soocida ayaa haddaba khusaysa wakhtiga iyo ku habboonaanta wada hadalka, maahan kaliya in macluumaadka la heli karo.

Cilmi-baarayaashu waxay MemUse ka abuureen waqtiyo xusuusta dhabta ah ee isticmaale-ku-jiidashada. Daqiiqadahan waxa lagu dhaliyay go'aan is-dhexgal-ogyahay oo ku saabsan jawaabta wada hadalka ee nidaamka. Qaabka iyo macnaha guud ee la hayo, isla nidaamkan ayaa dhaliyay 78.8% Direct QA laakiin waxa loo tixraacay 7.9% oo keliya xaqiiqooyinka la xidhiidha inta lagu jiro wada hadalka. Warqaddu waxay tani ku qeexday farqiga 71-dhibcood ee u dhexeeya dib-u-soo-celinta la ogaaday iyo isticmaalka la arkay. Natiijadu waxay muujinaysaa sababta jawaabta nidaamka ee su'aasha xusuusta ee cad ay ugu ekaan karto mid ka xoog badan hab-dhaqankiisa sarrifka ku xeeran.

Wargeysku wuxuu sheegay in Is-dhexgalka Dabiiciga ah uu la xiriiro ku qanacsanaanta isticmaalaha waqtiyadan xusuusta, halka Direct QA uusan ahayn. Qorayaashu waxay kaloo sheegeen inay sii daynayaan kooxda geynta, MemUse, xukunnada iyo dhiirigelinta dhibcaha. Isha ayaa tilmaameysa shaqada sidii loo aqbalay EMNLP 2026, laakiin aan la taaban karin ma bixinayso tafaasiil ku saabsan qaabka, deegaanka geynta, tirada daqiiqadaha xusuusta ama habka dhibcaha saxda ah. Maqnaanshahaas ayaa qeexaya xadka waxa laga qiyaasi karo hawlgelinta la sheegay iyo isbarbardhigga labada cabbir.

Faahfaahinta isha: arxiv.org ↗

Maxay muhiim u tahay

Natiijooyinka waxay soo jeedinayaan in bartilmaameedyada xusuusta ee sida caadiga ah loo isticmaalo ay cabbiri karaan awood muhiim ah laakiin aan dhammaystirnayn. Nidaamku si sax ah ayuu u soo celin karaa macluumaadka oo weli wuu ku guul darraystay inuu aqoonsado marka macluumaadkaas uu leeyahay wadahadal socda.

Xusuusta muddada-dheer waxay faa'iido leedahay kaliya haddii nidaamka AI uu ku dabaqi karo macluumaadka xusuusta waqtiga saxda ah. Nidaamka si sax ah uga jawaaba su'aasha dib u celinta tooska ah ayaa laga yaabaa inuu weli soo saaro jawaab celin guud marka dookh, yool ama gabal macnaha guud uu ka dhigi lahaa beddelka mid faa'iido leh. MemUse waxay diiradda saartaa qiimaynta is dhexgalka wax ku oolka ah halkii ay ahayd in dib loogu yeero si gooni ah. Sidaa darteed xooga saarashadu waa ka gudbida macluumaadka la kaydiyay una gudubtay isticmaalka macnaha guud marka wada hadalka lagu jiro.

Natiijooyinka la soo sheegay waxay caqabad ku yihiin male fudud oo ah in buundooyinka xusuusta ee wanaagsan ay si toos ah u tarjumaan khibrado wada hadal oo wanaagsan. Daraasaddan, kala duwanaanshiyaha weyn ee waxqabadka tooska ah ee QA ee dhammaan xaaladaha xusuusta lama socon isbeddellada ku qanacsanaanta. Taasi ma muujinayso in dib u soo celinta aysan muhiim ahayn; waxay muujinaysaa, sida laga soo xigtay warqadda, in dib-u-celinta kaligeed aysan ahayn wakiil lagu kalsoonaan karo oo loogu talagalay isticmaalayaasha khibradda leh ee lagu soo warramey geyntan. Helitaanka waxay ka tagtaa dib u soo celinta qayb ka mid ah kartida iyada oo la waydiinayo inay u istaagi karto dhammaan khibradaha isticmaalaha.

Farqiga u dhexeeya 78.8% waxqabadka tooska ah ee QA iyo 7.9% tixraaca wada hadalka ayaa si gaar ah u saamaynaya horumariyayaasha go'aaminta sida loo hagaajiyo nidaamka xusuusta. Wanaajinta soo celinta waxay kordhin kartaa dhibcaha bartilmaameedka iyada oo aan horumarinayn marka macluumaadka la soo saaro, sida loo odhaahdo ama haddii isticmaalkeedu uu dareemayo mid khuseeya. Qiimaynta ay ku jirto wada sheekeysiga dabiiciga ah waxay daaha ka qaadi kartaa guul-darrooyinkaas hore. Waxay ka dhigi doontaa hab-dhaqanka nidaamka mid ka muuqda goobta meesha faahfaahinta la xasuusto laga filayo inay ku caawiso.

Natiijooyinka ayaa sidoo kale tilmaamaya is-dhaafsi ganacsi oo aan la taaban karin xalin. Isdhexgalka soo noqnoqda ee tafaasiisha la xasuusto maahan mid wanaagsan haddii tixraacyadu ay yihiin kuwo aan khusayn, la yaab leh ama aan raaxo lahayn. Isha ayaa dhistay xiriir ka dhexeeya is-dhexgalka dabiiciga ah iyo qanacsanaanta, laakiin ma dejiso in kordhinta tixraacyada kaligeed ay keento qanacsanaanta sare ama in habka uu yahay mid badbaado leh marka loo eego xaaladaha xasaasiga ah. Isticmaal kasta oo wax ku ool ah oo mitirka ah waa in ay tixgelisaa labadaba ku darida habboon iyo xakamaynta habboon.

Maxaa la daawan doona xiga

Tijaabada xigta waa in MemUse ay ka kooban tahay meel ka baxsan geyntan iyo haddii hagaajinta is dhexgalka dabiiciga ah ay wanaajiso waayo-aragnimada isticmaale iyada oo aan loo baahnayn tixraacyo aan la rabin ama faragelin wada-sheekeysi hore.

Ku-noqoshada waxay noqon doontaa muhiim. Daraasadu waxay isticmaashay hal afar bilood ah oo ay la socdaan 40 isticmaale iyo todoba xaaladood oo xusuusta ah, markaa isha ma cadda sida ay natiijooyinka u kala duwanaan karaan dadka, luqadaha, qaababka wada sheekaysiga, moodooyinka ama naqshadaha xusuusta. Qalabka la sii daayay iyo dhibcaha dhibcaha ayaa laga yaabaa inay u oggolaadaan cilmi-baarayaasha kale inay tijaabiyaan in isla kala soocida u dhexeeya dib-u-celinta iyo is-dhexgalka ay ka muuqato meelo kale. Tijaabada noocan oo kale ah waxay tusi doontaa haddii xidhiidhka la soo sheegay uu yahay sifada qaab-dhismeedka ama u gaarka ah geyntan.

Furaha aan la garanayn waa sida MemUse u qeexdo tixraac dabiici ah oo guuleysta. Isha ayaa sheegaysa in daqiiqadaha la dhaliyay iyadoo la adeegsanayo go'aannada is-dhexgalka-oggolaanshaha iyo in dhibcaha dhibcaha la sii daayo, laakiin aan la taaban karin ma sheegayo in xukunku ka yimid aadanaha, qiimeeyaal otomaatig ah ama isku-dar, mana soo sheegaan heshiis, hubanti la'aan ama muhiimadda tirakoobka. Faahfaahintaasi waxay saameyn doontaa sida kalsoonida leh ee cabbirka loo isticmaali karo. Waxay sidoo kale muhiim u yihiin tarjumaadda waxa dhibcuhu u taagan yahay marka jawaabtu ay ku jirto, ka tagto ama diido isticmaalka faahfaahin la xasuusto.

Qiimaynta mustaqbalka waxay u baahan doontaa in la cabbiro faa'iidada iyo xakamaynta labadaba. Nidaamku waa inuu aqoonsadaa macnaha hore ee khuseeya, laakiin sidoo kale waa inuu ka fogaadaa gelinta macluumaadka shakhsiyeed kaliya sababtoo ah wuu soo celin karaa. Qoraalku ma soo sheego dhacdooyinka gaarka ah, cabashooyinka isticmaalaha, tixraacyada aan loo baahnayn ama waxqabadka wada sheekaysiga xasaasiga ah, taasoo ka tagaysa khatarahaas wax ku oolka ah ee aan la xallin. Isla su'aasha qiimeynta ayaa markaa leh laba dhinac: haddii nidaamku isticmaalo xusuusta ku habboon iyo haddii ay ka fogaato inay xasuustu dareento faragelin.

Tijaabada ugu saamaynta badan ee warqaddu waxay noqon doontaa faragelin: wanaaji nidaamka adoo isticmaalaya MemUse ama halbeegga is dhexgalka la midka ah, ka dibna cabbir haddii ku qanacsanaanta, dhamaystirka hawsha ama isbeddelada sii hayntu ee hawlgelinta cusub. Ilaa inta caddayntaas laga helayo, daraasaddu waxay taageertaa daaweynta tooska ah ee QA sida ogaanshaha aan dhammaystirnayn halkii lagu beddeli lahaa cabbir qeexan oo xusuusta wada hadalka ah.

Tilmaamaha la xidhiidha & su'aalaha