Kini o ṣẹlẹ
Atẹjade tẹlẹ arXiv ṣe afihan HIRA, laisi ikẹkọ, eto AI lori ile-ile fun tito awọn iwe aṣẹ ni awọn ile-iṣẹ ilana. O ṣajọpọ igbapada ọrọ-ọrọ lati ọrọ OCR, awọn ifibọ ọrọ ipon ati awọn aṣoju ipele aworan, lẹhinna lo awoṣe ede ti a gbalejo lati rii daju awọn ọran ti ko ni idaniloju ṣaaju gbigbe wọn ga si awọn oluyẹwo eniyan. Awọn onkọwe ṣe ijabọ awọn abajade lori ikọkọ 80-kilasi iṣowo-inawo koposi ati ipilẹ taba-3482 ti a ṣe atunṣe.
Iwe naa ṣapejuwe HIRA gẹgẹbi ikẹkọ laisi idanileko, ibi-pada-pada-ile ti a ṣe afikun kasikedi fun iyasọtọ iwe. Ipele akọkọ rẹ ṣajọpọ awọn ifihan agbara mẹta: wiwa BM25 lori ọrọ OCR, awọn ifibọ ọrọ ipon ati awọn aṣoju ipele-aworan. Awọn ifihan agbara wọnyi jẹ idapọ pẹlu lilo afọwọsi-iwọn iwọn-iwọn idapada-ipo. Eto naa ṣe ipinlẹ awọn iwe aṣẹ taara nigbati igbẹkẹle igbapada ga. Awọn iwe aṣẹ ti a ṣe idajọ aidaniloju tabi oju riru ni a kọja si oludari awoṣe ede nla ti agbegbe ti gbalejo, eyiti o gba ọrọ OCR, awọn apẹẹrẹ ti a gba pada, awọn apejuwe aami ati awọn ofin ti o ni nkan ṣe pẹlu awọn rudurudu ti o ṣeeṣe. Ti oludaniloju ba wa ni idaniloju, a fi iwe ranṣẹ si oluyẹwo eniyan.
Awọn onkọwe sọ pe awọn atunṣe eniyan ti wa ni idaduro bi awọn apẹẹrẹ imupadabọ iwọn ala kuku ju lilo lati ṣe imudojuiwọn awọn paramita awoṣe. Awọn atunṣe yẹn tun ṣe imudojuiwọn aworan idarudapọ Dirichlet kan, eyiti o pinnu lati ṣe iranlọwọ fun kasikedi lati mu awọn ambiguities isọdi loorekoore. Ni awọn ofin iṣe, apẹrẹ ti a royin ṣe iyipada aṣamubadọgba lati atunṣe awoṣe kan lati ṣe imudojuiwọn iranti igbapada ti eto ati aṣoju rẹ ti awọn rudurudu ti o wọpọ. Orisun naa ṣafihan eyi bi ọna lati koju awọn aami ibẹrẹ tutu-opin ati agbara atunyẹwo aipe ni awọn imuṣiṣẹ ilana, ṣugbọn áljẹbrà ko pese alaye to lati ṣe ayẹwo ẹru imuse tabi ilana iṣakoso.
Lori koposi iṣowo-inawo-kilasi aladani 80, iwe naa ṣe ijabọ ṣiṣiṣẹ ṣiṣan iṣelọpọ iwe-aṣẹ 30,233 lakoko ti o beere fun atunṣe eniyan fun awọn iwe aṣẹ 1,945, tabi 6.4% ti ṣiṣan naa. O ṣe ijabọ pe Makiro-F1 pọ lati 0.6218 si 0.8548. Lori aami Taba-3482 ti a ṣe atunṣe, a royin HIRA ṣaṣeyọri Macro-F1 kan ti 0.9423 nigba lilo oluṣedari ti agbegbe DeepSeek-R1-Distill-Qwen-32B. Iwe naa sọ pe eyi jẹ awọn aaye ida ọgọrun 17.4 loke ipilẹ awoṣe ede-shot, lakoko ti o pe oludaniloju fun bii 40% ti awọn iwe aṣẹ ati lapapọ awọn ipe awoṣe ede ṣubu nipasẹ isunmọ 60%. Orisun naa n ṣe idanimọ iṣẹ naa gẹgẹbi ẹya arXiv ti a fi silẹ ni Oṣu Kẹjọ 22, 2026 ati awọn atokọ CIKM 2026 ninu awọn asọye rẹ; ko ṣe apejuwe ipo atunyẹwo ẹlẹgbẹ tabi afọwọsi ita.
Awọn alaye orisun: arxiv.org ↗
Kini idi ti o ṣe pataki
Iwe naa n ṣalaye iṣoro imuṣiṣẹ imuṣiṣẹ ti o wulo: awọn ajo ti a ṣe ilana le ni awọn aami ti o ni opin, gbigbe data ihamọ, awọn oluyẹwo ti o ṣọwọn ati awọn ilana iṣakoso awoṣe idiyele. Awọn abajade ijabọ rẹ daba pe iranti igbapada ati esi eniyan yiyan le ṣe ilọsiwaju isọdi laisi iyipada awọn iwuwo awoṣe leralera. Awọn awari naa wa awọn ẹtọ lati atẹjade tẹlẹ arXiv ati pe ko fi idi rẹ mulẹ pe HIRA yoo ṣe bakanna ni gbogbo awọn ajọ miiran, awọn iru iwe tabi awọn ipo iṣẹ.
Itumọ iṣe ti aarin ni pe awọn ajo le ma nilo lati fi gbogbo iwe ranṣẹ nipasẹ awoṣe ede nla kan tabi tun ṣe atunṣe ikawe leralera lati mu ilọsiwaju ṣiṣẹ lori awọn ọran gigun. HIRA ká royin kasikedi ni ẹtọ diẹ gbowolori tabi atunwo-lekoko igbesẹ fun awọn iwe aṣẹ ti o han soro. Ti awọn abajade ba ṣakopọ, iyẹn le dinku iye awọn ohun elo ifura ti a ṣe ilana nipasẹ awoṣe ede, fi opin si awọn ila atunwo ki o jẹ ki ilọsiwaju afikun rọrun lati ṣe igbasilẹ. Iyẹn jẹ awọn ilolu agbara ti apẹrẹ ti a royin, kii ṣe awọn abajade ti a fi idi mulẹ ni ominira.
Eto eniyan-ni-loop tun ṣe pataki fun iṣiro. Eto naa ko ṣe itọju awoṣe ede bi aṣẹ ikẹhin ni gbogbo ọran ti ko ni idaniloju: awọn ọran ti ko yanju ti pọ si atunyẹwo eniyan, ati pe awọn atunṣe yẹn di apakan ti iranti igbapada. Lori adagun Tobacco-3482, iwe naa ṣe ijabọ pe awọn atunṣe eniyan 518, ti o jẹ aṣoju 24.8% ti adagun-odo, ti to fun HIRA lati baramu ọrọ-ọrọ adagun adagun-omi ti o ni aami ni kikun ninu eyiti gbogbo awọn iwe aṣẹ 2,086 ti ni atọka pẹlu awọn aami-otitọ ilẹ. Abajade yii ni imọran pe awọn esi yiyan le pese pupọ julọ iye ti isamisi pipe ninu idanwo yẹn, botilẹjẹpe lafiwe da lori iwe-ọrọ ti o yan ati iṣeto igbelewọn.
Iṣẹ naa ṣe pataki si awọn eto ilana nitori awọn onkọwe ṣe apẹrẹ ni gbangba ni ayika ibugbe data ati alejo gbigba agbegbe. Oludaniloju agbegbe le jẹ ki diẹ ninu awọn eto imuṣiṣẹ rọrun ju fifiranṣẹ awọn iwe aṣẹ lọ si iṣẹ ita, ṣugbọn orisun ko ṣe agbekalẹ ibamu ofin, aabo, imunadoko iṣakoso wiwọle tabi atako si jijo data. O tun ko ṣe afihan pe eto naa yọkuro abosi tabi awọn aṣiṣe ipin. Macro-F1 ṣe akopọ iṣẹ ṣiṣe kọja awọn kilasi, nitorinaa kii ṣe funrararẹ ṣafihan iru awọn ẹka iwe ti o jẹ alailagbara, boya awọn kilasi to ṣọwọn ni ilọsiwaju, tabi boya awọn aṣiṣe ni awọn abajade aidogba. Awọn idiwọn wọnyẹn ṣe pataki nigbati awọn ipinya ba kan sisẹ owo, atunyẹwo ibamu tabi awọn ṣiṣan iṣẹ ṣiṣe miiran.
Ibaraẹnisọrọ Mechanism: Bii O Ṣe Nṣiṣẹ Lootọ
Ṣawari imọ-ẹrọ abẹlẹ lẹhin idagbasoke yii ni ibaraenisọrọ.
Which component of an AI application is the machine-learning model itself?
Kini lati wo tókàn
Atẹle ti o ṣe pataki julọ ni idanwo ominira lori awọn ikojọpọ iwe-aṣẹ afikun, pẹlu ijabọ ti o han gbangba lori awọn aṣiṣe, lairi, idiyele iṣẹ, awọn iṣakoso ikọkọ ati iṣẹ atunwo. Orisun naa ko ṣe afihan apẹrẹ eto ni kikun, pinpin awọn aami ati awọn aṣiṣe, tabi bii iṣẹ ṣe yipada nigbati awọn iwe aṣẹ ba yatọ si awọn apẹẹrẹ ti o fipamọ sinu iranti igbapada. Ko tun fi idi rẹ mulẹ boya a ti gbe ọna naa ni agbegbe iṣelọpọ ilana ti o kọja ṣiṣan iṣelọpọ ti a royin.
Atunse olominira yẹ ki o ṣe idanwo boya awọn anfani ti o royin wa laaye ni ita ṣiṣan iṣowo-owo ikọkọ ti awọn onkọwe ati ala titọ Taba-3482. Awọn oniyipada pataki pẹlu didara iwe, awọn aṣiṣe OCR, aiṣedeede kilasi, awọn ayipada ninu awọn awoṣe iwe, ohun elo ede pupọ ati awọn ẹka ti a ko rii tẹlẹ. Orisun naa ko sọ iye awọn apẹẹrẹ ti o wa ṣaaju ki esi bẹrẹ, bawo ni data ijẹrisi ṣe yapa kuro ninu adagun igbapada, tabi boya jijo alaye eyikeyi le ti kan awọn abajade ala-ilẹ naa. Awọn alaye wọnyẹn yoo jẹ pataki lati ṣe idajọ bawo ni awọn nọmba ṣe lo gbooro.
Ijabọ iṣẹ jẹ ibeere ṣiṣi miiran. Afoyemọ naa funni ni ipin awọn iwe aṣẹ ti a firanṣẹ fun atunṣe eniyan ati idinku ninu awọn ipe awoṣe-ede, ṣugbọn ko pese lairi opin-si-opin, awọn ibeere iṣiro, idagbasoke ibi ipamọ, akoko oluyẹwo fun ọran tabi idiyele lapapọ. Ko tun ṣe afiwe kasikedi pẹlu awọn eto imupadabọ ti o rọrun, awọn ikasi abojuto ti aṣa tabi awọn awoṣe ede agbegbe yiyan. Nitoripe HIRA tọju awọn atunṣe bi awọn apẹẹrẹ igbapada, awọn igbelewọn ọjọ iwaju yẹ ki o ṣayẹwo boya awọn aṣiṣe kutukutu tabi awọn aami aiṣedeede le ṣe afihan leralera ati fikun, ati bii awọn alaṣẹ ṣe yọkuro awọn apẹẹrẹ ti igba atijọ tabi ti ko tọ.
Awọn iṣeduro iṣakoso iwe naa tun nilo idanwo to wulo. Ifilọlẹ ti ofin yoo nilo awọn igbasilẹ ti ẹri eyiti o ṣe atilẹyin isọdi kọọkan, idi ti iwe kan ti pọ si, kini oludaniloju dahun ati bii atunṣe eniyan ṣe yipada awọn ipinnu nigbamii. Orisun naa sọ pe HIRA nlo igbẹkẹle, awọn ofin idamu-pato ati ipadabọ atunyẹwo eniyan, ṣugbọn ko sọ bi a ṣe yan awọn ipilẹ igbẹkẹle, bii igbagbogbo awọn oluyẹwo ṣe bori eto naa, tabi kini o ṣẹlẹ nigbati ẹri igbapada ba tako pẹlu oluṣeto. Titi di idahun awọn ibeere wọnyẹn ti awọn abajade yoo tun ṣe, ipari atilẹyin ti o lagbara julọ ni opin: iwe atẹjade iṣaaju yii ṣe ijabọ igbelewọn yiyan-awotẹlẹ ati awọn abajade idaran lori awọn eto igbelewọn meji ti a sọ, kii ṣe ojuutu gbogbogbo ti a fihan fun isọdi iwe aṣẹ.