Kini o ṣẹlẹ
Awọn oniwadi ṣe ayẹwo boya awọn awoṣe ede nla le lo alaye nipa awọn igbagbọ awọn oṣere miiran ati awọn ero lati ṣe itọsọna awọn ipinnu. Wọn ṣe idanwo awọn aṣoju 2,099 kọọkan lati awọn idile awoṣe mẹrin-DeepSeek, GPT-4.1, GPT-5 ati Gemini 2.0 Flash-ni awọn ere aje meji ti o lodi si awọn alatako pẹlu awọn ipele ti o yatọ, lẹhinna ṣe afiwe awọn esi pẹlu awọn alabaṣepọ eniyan 251.
Atẹjade, ti a fi silẹ si arXiv ni Oṣu Kẹjọ. Ibeere iwadii naa dín ju boya awọn awoṣe ni aiji eniyan tabi oye ti ara ẹni: o beere boya awọn ipinnu wọn ṣe afihan ihuwasi ati awọn ibuwọlu iṣiro ni ibamu pẹlu lilo awọn aṣoju ti awọn ipinlẹ ọpọlọ ti awọn aṣoju miiran.
Awọn oniwadi naa lo awọn ere ọrọ-aje meji ati awoṣe iṣiro oye lati ṣe iwadi awọn ilana wiwaba lẹhin awọn ipinnu awoṣe. Wọn ṣe idanwo awọn aṣoju kọọkan lati awọn idile awoṣe mẹrin-DeepSeek, GPT-4.1, GPT-5 ati Gemini 2.0 Filaṣi-lodi si awọn alatako ti a ṣapejuwe ninu áljẹbrà bi nini oriṣiriṣi sophistication. Apapọ apẹẹrẹ awoṣe jẹ awọn aṣoju 2,099. Ifiwera ọtọtọ kan pẹlu awọn olukopa eniyan 251.
Iwadi na tun ṣe agbeyẹwo ilana imuniyanju ti a pinnu lati gbe awọn ero ero imọ-jinlẹ diẹ sii. Gẹgẹbi áljẹbrà naa, itusilẹ ilana gbogbogbo ni ilọsiwaju iṣẹ ṣiṣe, botilẹjẹpe iwọn anfani naa yatọ laarin awọn ere meji. Nitorina awọn onkọwe ṣe jabo ipa kan lori awọn abajade mejeeji ati ilana ero ero, dipo ilọsiwaju iṣọkan ni gbogbo awọn eto.
Abajade awoṣe pato ti o han julọ ti o kan GPT-5. Awọn onkọwe sọ pe awọn aṣoju GPT-5 ni irọrun ṣe atunṣe ijinle isọdọtun ti ero wọn bi awọn alatako ti di fafa diẹ sii ati ṣaṣeyọri iṣẹ to dara julọ ju awọn olukopa eniyan ninu awọn ere wọnyi. Afoyemọ naa ko sọ awọn nọmba nọmba, ala ti iyatọ, awọn idamọ tabi awọn ẹya ti awọn eto idanwo ti o kọja awọn akole ti a ṣe akojọ, tabi bii awọn olukopa eniyan ṣe gba iṣẹ ati ikẹkọ.
Awọn alaye orisun: arxiv.org ↗
Kini idi ti o ṣe pataki
Iwadi na n ṣalaye ibeere aarin kan nipa awọn eto AI ti o ṣepọ pẹlu eniyan: boya ihuwasi ti o jọra iṣẹ ṣiṣe-ero le ṣe atilẹyin ilana imudọgba. Awọn abajade rẹ daba pe awọn awoṣe le ṣafihan oriṣiriṣi, awọn ọna iwọnwọn ti iṣaro, lakoko ti o nfihan idi ti o han gbangba pe awọn awoṣe ede ti o jọra ko yẹ ki o ṣe itọju bi isọparọ oye.
Iṣiro-ọkan jẹ pataki si awọn eto AI ti o gbọdọ dahun si eniyan, awọn oludije tabi awọn aṣoju sọfitiwia miiran. Eto ti o le ṣe iṣiro ohun ti ẹgbẹ miiran mọ, gbagbọ tabi awọn ipinnu le ṣe awọn ipinnu oriṣiriṣi lati ọkan ti o baamu awọn ilana dada nikan ni ọrọ. Ipilẹṣẹ iwadi naa ni lati ṣe fireemu agbara yii bi nkan ti o le ṣe iwọn nipasẹ awọn yiyan ati awọn awoṣe iširo, kii ṣe nipasẹ awọn idahun ibaraẹnisọrọ nikan si awọn ibeere ero-ti-ọkan.
Awọn iyatọ ti a royin laarin awọn olupese awoṣe ati awọn iwọn jẹ pataki nitori pe wọn koju imọran pe abajade to lagbara lori idanwo ero-awujọ kan ṣe apejuwe gbogbo awọn awoṣe ede nla. Awọn áljẹbrà sọ pé awọn ọna šiše fihan "ko o iwa ati iširo ibuwọlu" ti opolo, sugbon ti awon ibuwọlu yato fihan kọja awọn olupese ati awọn iwọn awoṣe. Ni igbelewọn iṣe, eyi tọka si idanwo awọn awoṣe kan pato labẹ awọn ipo ibaraenisepo kan dipo gbigbekele aami itetisi gbogbogbo kan.
Abajade itusilẹ ni opin diẹ sii ṣugbọn iwulo. Béèrè awoṣe kan lati ṣe alabapin ninu ero ero le mu ihuwasi rẹ dara si ni awọn eto diẹ, ṣugbọn awọn ipa aiṣedeede kọja awọn ere meji tọkasi pe titan kii ṣe igbesoke agbara gbogbo agbaye. Awọn anfani iṣẹ ṣiṣe le dale lori iṣẹ-ṣiṣe, alatako ati ọna ti ero ero awoṣe. Orisun naa ko fi idi rẹ mulẹ pe awọn ilana inu inu awọn awoṣe di diẹ sii bi eniyan; o Ijabọ ayipada ninu ihuwasi ati computationally infered nwon.Mirza.
Abajade GPT-5 ti o royin le ṣe pataki fun iwadii lori idunadura, isọdọkan ati awọn eto aṣoju-pupọ, ṣugbọn ko yẹ ki o ka bi ẹri pe GPT-5 dara julọ ju eniyan lọ ni ero awujọ. Ifiwewe naa ni opin si awọn ere eto-ọrọ aje meji, ati pe orisun ko funni ni ẹri nipa awọn ibatan ojoojumọ, awọn ipinnu giga-giga, ẹtan, iyatọ aṣa tabi ibaraenisepo gidi-aye. Tabi ko fi idi rẹ mulẹ pe aṣeyọri ninu awọn ere wọnyi n gbe lọ si ailewu tabi ihuwasi igbẹkẹle ni ita iwadii naa.
Ibaraẹnisọrọ Mechanism: Bii O Ṣe Nṣiṣẹ Lootọ
Ṣawari imọ-ẹrọ abẹlẹ lẹhin idagbasoke yii ni ibaraenisọrọ.
Which component of an AI application is the machine-learning model itself?
Kini lati wo tókàn
Iwe naa jẹ iwe-tẹlẹ arXiv, ati pe oju-iwe orisun n pese áljẹbrà dipo awọn ipele ipele-ṣiṣe, aidaniloju iṣiro, awọn itusilẹ tabi awọn alaye ilana ni kikun nilo lati ṣe ayẹwo awọn awari ni pẹkipẹki. Iṣẹ ṣiṣe atẹle yẹ ki o ṣe idanwo boya awọn ilana ti a royin ṣe gbogbogbo kọja awọn ere iṣakoso ati boya wọn ṣe afihan ero ti o lagbara ju awọn ilana ikẹkọ ti o baamu awọn ami-ami pato.
Ibeere lẹsẹkẹsẹ julọ ni boya iwe kikun n pese awọn alaye ilana to lati ṣe iṣiro lafiwe naa. Alaye pataki ti o padanu lati orisun pẹlu awọn ofin awọn ere, awọn ipele sophistication ti a yàn si awọn alatako, awọn itọsi gangan, nọmba awọn idanwo fun aṣoju, awọn eto iṣapẹẹrẹ awoṣe, awọn ilana igbelewọn ati awọn iṣiro aidaniloju. Awọn alaye wọnyẹn pinnu boya abajade naa logan tabi ifarabalẹ si apẹrẹ ala.
Atunse kọja awọn igbelewọn awoṣe ominira yoo ṣe iranlọwọ idanwo boya awọn awari duro kọja awọn imudojuiwọn awoṣe ati awọn ipo iraye si oriṣiriṣi. Orisun n ṣe idanimọ GPT-4.1, GPT-5 ati Gemini 2.0 Flash, ṣugbọn ko ṣe pato awọn eto imuṣiṣẹ, awọn ilana eto tabi awọn ọjọ wiwọle. Nitoripe ihuwasi awoṣe le yipada pẹlu itasi, iṣapẹẹrẹ ati iṣeto ọja, awọn ijinlẹ nigbamii yẹ ki o ṣe akosile awọn oniyipada wọnyẹn ki o lo awọn ilana igbelewọn iṣaaju ti o ba ṣeeṣe.
Awọn oniwadi yẹ ki o tun ṣe ayẹwo boya awọn ero isọdọtun ti a sọ asọtẹlẹ ihuwasi ni awọn iṣẹ ṣiṣe ti ko mọ. Awoṣe le ṣe daradara ni ere kan nitori data ikẹkọ rẹ tabi igbekalẹ iyara ṣe atilẹyin ilana ti o faramọ, laisi nini aṣoju gbigbe lọpọlọpọ ti awọn ọkan miiran. Awọn amugbooro to wulo yoo pẹlu awọn ere tuntun, awọn ẹgbẹ awoṣe eniyan ti o dapọ, awọn alatako ti o huwa airotẹlẹ, ati awọn eto nibiti awọn ifẹnukonu awujọ ko pe tabi ṣinilọna.
Aala ilowo si maa wa aidaniloju. Atẹwe iṣaaju yii ko ṣe idanwo ọja ti a fi ranṣẹ, ṣeduro lilo eto AI ni awọn ipinnu ti o wulo tabi wiwọn awọn ipalara. Ṣaaju lilo iru awọn awari si idunadura, eto-ẹkọ, atilẹyin ilera ọpọlọ tabi awọn lilo ti nkọju si eniyan, awọn oluyẹwo yoo nilo ẹri nipa igbẹkẹle, isọdiwọn, ododo laarin awọn olugbe, resistance si ifọwọyi ati awọn ipo ikuna nigbati awọn arosinu awoṣe nipa eniyan miiran jẹ aṣiṣe.