Me ya faru
Masu bincike sun kimanta manyan nau'ikan harshe guda 53 a cikin ma'ajin bayanai guda 11 da aka tsara cikin nau'ikan aminci guda huɗu. Sun gwada ƙira a cikin saitunan gaggawa-kawai da saitunan amsawa gaggautuwa, suna nazarin yadda manufa ta gaba ɗaya da na musamman ke sarrafa nau'ikan abun ciki masu cutarwa.
Takardar, mai taken "Babu Wani Samfuran da Ya Kama Kowacce Cutar: Benchmarking Content Moderation Across Safety Scenarios," an ƙaddamar da shi zuwa arXiv a ranar 22 ga Agusta, 2026. Mawallafinta sun bayyana tsarin kimantawa na 53 samfurori a cikin 11 datasets, wanda suke tsarawa zuwa nau'i daban-daban na aminci. Madogarar tana gabatar da aikin azaman ƙima na iyawar aminci na ƙirar harshe maimakon azaman ƙaddamar da sabon samfuri ko samfurin daidaitawa.
Ƙimar tana amfani da saituna biyu: gwaje-gwajen gaggawa-kawai da gwaje-gwajen amsa gaggawa. Majiyar ba ta bayyana bambancin aiki tsakanin waɗancan saitunan dalla-dalla ba, amma bambancin ya nuna cewa binciken yana nazarin halayen ƙirar biyu don amsa abubuwan da suka shafi aminci da ingancin daidaitawa ko hukunci lokacin da aka yi la'akari da gaggawa da amsawar da aka samar tare. Ƙididdigar ta tsara haɗarin da aka gwada gabaɗaya, yana ambaton ɓangarorin ɓatanci waɗanda ke ƙetare matattara masu aminci da tsattsauran ƙiyayya waɗanda za su iya guje wa ganowa.
Marubuta sun ba da rahoton manyan sakamako guda uku. Na farko, manyan samfuran kan iyaka waɗanda ke jagorantar rukuni ɗaya na iya faɗuwa sosai a bayan ƙananan ƙwararrun hanyoyin wasu. Na biyu, babu wani samfuri ɗaya da ke kama kowane nau'i na abun ciki mai cutarwa akai-akai. Na uku, marubutan sun ce amincin zance na zahiri ya kasance ba a warware shi ba a cikin iyalai masu ƙima. Ƙididdigar ƙima ta kira ƙima mafi girma har zuwa yau, amma wannan fasalin shine da'awar marubuta; Madogararsa baya bayar da kwatancen kowane maƙasudin farko ko isassun bayanai na dabara don tabbatar da kansa daga rubutun da aka kawo.
Me ya sa yake da mahimmanci
Takardar ta ƙalubalanci zato cewa samfura mafi girma ko mafi girma na iyakoki sune zaɓi mafi aminci ta atomatik. Babban bincikensa shine samfurin da ke jagorantar rukuni ɗaya na iya yin muni da yawa fiye da ƙarami, ƙwararrun madadin a wani, yin jigilar aminci ya zama zaɓi-samfuri da matsala-tsara.
Ma'anar aiki ita ce, ba za a iya tantance aminci daga babban suna, girman, ko aikin samfurin a gwaji ɗaya ba. Ƙungiya da ke zaɓen tsaka-tsaki na iya buƙatar daidaita tsarin zuwa takamaiman haɗari, amfani da ɓangarorin na musamman da yawa, ko ƙara bita na ɗan adam da sauran sarrafawa. Bambance-bambancen da aka ba da rahoton takarda a cikin nau'ikan yana nufin cewa maki guda ɗaya na kanun labarai na iya ɓoye mahimman gazawar musamman nau'ikan abun ciki mai cutarwa.
Sakamakon binciken kuma yana da mahimmanci ga yadda ake fassara ƙimar amincin AI. Idan saitunan gaggawa-kawai da saurin amsawa suna samar da sakamako daban-daban, to samfurin da ya bayyana abin dogaro a ƙarƙashin ƙunƙuntaccen gwajin gaggawa na iya zama daban lokacin da dole ne ya tantance ainihin amsar da aka samar. Majiyar ba ta ba da maki ko bayyana ainihin aikin gwajin ba, don haka ba zai yiwu a tantance girman girman waɗannan bambance-bambancen ba. Duk da haka, ƙirar binciken yana ɗaukar mahallin kimantawa kamar yadda ya dace maimakon ɗauka cewa tsarin gwaji ɗaya yana wakiltar duk yanayin turawa.
Ga jama'a, batun yana da tasiri saboda ana ƙara amfani da ƙirar harshe a cikin tsarin da ke samarwa, tacewa, ko matsayi abun ciki. Rashin gano tsattsauran ƙiyayya, cin nasara yantad, ko amsa mara lafiya na iya shafar masu amfani koda lokacin da tsarin yayi kyau akan wasu nau'ikan aminci. Takardar ba ta tattara takamaiman abin da ya faru na ainihin duniya ko ƙididdige cutarwa ga masu amfani ba, kuma ba ta tabbatar da cewa kowane samfurin da aka kimanta ba shi da aminci a kowane turawa. Gudunmawarta a maimakon haka gargaɗi ne game da ɗaukar jagorancin maƙasudi a matsayin shaidar cikakkiyar kariya.
Ingantacciyar hanyar sadarwa: Yadda A zahiri yake Aiki
Bincika fasahar da ke bayan wannan ci gaban ta hanyar mu'amala.
Which component of an AI application is the machine-learning model itself?
Abin kallo na gaba
Madogararsa baya gano nau'ikan nau'ikan mutum ɗaya, saitin bayanai, ma'anar rukuni, maki, faɗakarwa, ko matsayin sakin don kayan kimantawa. Ya kamata aikin da ya biyo baya ya gwada ko gibin da aka ruwaito ya ci gaba da wanzuwa a cikin harsuna, sabbin samfura, ayyukan daidaitawa, da ma'amalar abokan gaba a wajen yanayin ma'auni.
Shaida mai mahimmanci na gaba zai zama cikakkun bayanan kima na takarda. Shafin arXiv da aka kawo yana ba da ƙidayar ƙirar, ƙidayar bayanan bayanai, tsarin rukuni huɗu, da saitunan gwaji guda biyu, amma ba sunayen ƙira ko bayanan bayanai ba, ma'anar rukunoni, faɗakarwa, ƙa'idodin ƙididdigewa, ko girman gibin da aka ruwaito. Idan ba tare da waɗannan cikakkun bayanai ba, masu karatu ba za su iya tantance ko kwatancen ya ƙunshi tsarin da aka fi turawa ba ko kuma bayanan bayanan suna wakiltar amfanin yanzu. Don haka tushen ya kafa iyakokin kimantawa, amma ya bar abubuwan kwatancen da ba a fayyace su ba. Wannan iyaka yana da mahimmanci yayin karanta sakamakon: ƙarshen da aka ruwaito yana bayyana yanayin yanayin da aka gwada da saituna, yayin da rubutun da aka kawo baya goyan bayan ƙarin ƙarami na yadda samfuran suka yi a cikin su.
Maimaitawa kuma zai zama mahimmanci. Takardar siffa ce ta riga-kafi, kuma rubutun tushen bai bayyana ingantaccen inganci ba, lambar da aka fitar, bayanan gwaji da aka fitar, ko bitar sakamakon da ya wuce jera EMNLP 2026 Main Track a cikin metadata. Masu bincike yakamata su gwada ƙarshe akan sabbin nau'ikan samfuri, harsuna daban-daban, abubuwan shigar da abubuwa da yawa, da tattaunawa waɗanda ke buɗewa akan juyi da yawa. Hakanan ya kamata su bincika ko fa'idodin ƙirar ƙira suna riƙe lokacin da aka auna latency, farashi, tabbataccen ƙarya, da rashin ƙarfi na ƙarya tare.
Masu turawa yakamata su kalli shaida game da haɗin matakin-tsari maimakon ƙididdigan ƙira kaɗai. Bibiya mai fa'ida zai kwatanta ƙirar manufa ɗaya ta gaba ɗaya tare da gaurayawan ƙwararrun masu daidaitawa, ƙa'idodin haɓakawa, da bitar ɗan adam ƙarƙashin ingantattun ayyuka. Majiyar ba ta ce an ƙididdige ƙirar ƙira ko ƙirar ɗan adam ba, don haka har yanzu ba a san tasirin su ba. Har ila yau, ba a san yadda kyakkyawan aikin ma'auni ke annabta ɗabi'a a cikin al'ummomin rayuwa ba, inda masu amfani suka saba da tacewa da canje-canjen abun ciki mai cutarwa kan lokaci. Wadancan abubuwan da ba a san su ba suna iyakance yadda kai tsaye sakamakon da aka bayar zai iya jagorantar yanke shawarar samarwa, amma suna ƙarfafa ainihin taka tsantsan na takarda: da'awar aminci na buƙatar takamaiman game da yanayin da ake gwadawa.