Kini o ṣẹlẹ
HackerNoon ṣe ijabọ pe ẹlẹrọ sọfitiwia Prajwal S. Venkateshmurthy ṣe TeXFix-Bench, ipilẹ kan fun idanwo boya awọn ọna ṣiṣe AI ti bajẹ LaTeX, Typst ati Markdown awọn iwe aṣẹ laisi iyipada itumọ wọn. Ijabọ naa sọ pe ṣajọ aṣeyọri nikan ni o ṣe awọn ipo ti ko tọ.
HackerNoon ṣe ijabọ pe Venkateshmurthy ṣẹda TeXFix-Bench lẹhin ipari pe “ṣe akopọ yii” jẹ iwọn ti ko pe ti atunṣe iwe. Aṣepari naa n beere lọwọ awọn awoṣe lati da faili orisun ti a ṣatunṣe pipe pada, laisi idamo aṣiṣe tabi pese awọn irinṣẹ, ati lẹhinna ṣe iṣiro abajade ni agbegbe. Ibi-afẹde ti a royin ni lati ṣe iyatọ iwe ti o kan kọ lati ọkan ti o tọju akoonu iwe atilẹba naa.
Gẹgẹbi HackerNoon, ala-ilẹ naa ni awọn iṣẹ ṣiṣe atunṣe iṣakoso 10,437 kọja LaTeX, Typst ati Markdown. Awọn iṣẹ-ṣiṣe naa ni ipilẹṣẹ lati ori-ori ti o da lori awọn aṣiṣe LaTeX jamba lile 168 ti a ti rii daju pejọ lati TeX Stack Exchange, awọn iṣẹ GitHub ati iwe package. Ijabọ naa sọ pe ile-ikawe iyipada DocMut ti o yọrisi ni awọn oniṣẹ oye sintasi 48 kọja awọn ọna kika mẹta ati lo awọn irugbin ipinnu, awọn ẹnu-ọna ẹrọ ati ṣayẹwo iyatọ-iyipada.
HackerNoon ṣe ijabọ pe lafiwe akọkọ lo awọn awoṣe meje kọja iwọntunwọnsi 6,613-apeere matrix, ti n ṣe awọn igbiyanju akọkọ 46,291. Pẹlu afikun awọn igbiyanju ti o gbasilẹ, package iwadii ni awọn ibeere 48,651 ninu. Igbelewọn naa ka awọn idahun ofo, awọn abajade gige, awọn akoko ipari, awọn ikuna gbigbe ati awọn opin oṣuwọn bi awọn ikuna. Awọn abajade tun ṣayẹwo ni agbegbe pẹlu Tectonic 0.17.0 fun LaTeX, Typst 0.15.1 ati Pandoc 3.10.1 fun Markdown, pẹlu ọrọ PDF ti a fa jade ti a lo fun igbelewọn imupadabọ.
Ijabọ naa sọ pe awoṣe pẹlu iwọn akopọ ipo ti o ga julọ, Qwen3.7-Max ni 94.4%, ni oṣuwọn akopọ ipari-si-opin ti 56.7% nitori pe o da idahun ohun elo pada nikan 60.1% ti akoko naa. Grok-4.3 royin pe o ṣajọ 84.2% ti gbogbo awọn igbiyanju, lakoko ti GLM-5.2 ṣe akopọ 64.9% opin si ipari laibikita oṣuwọn ipo ipo 93.8%. HackerNoon tun ṣe ijabọ pe 13.6% si 18.5% ti iṣakojọpọ awọn atunṣe ti ohun elo yi iwe pada, ati pe Qwen3.7-Max ni iṣiro iwọn-pada sipo ti o ga julọ nigba ti Llama-4 Maverick ni igbasilẹ imupadabọ alailagbara julọ.
Awọn alaye orisun: hackernoon.com ↗
Kini idi ti o ṣe pataki
Aṣepari naa n ṣalaye ipo ikuna ti o wulo ni kikọ AI ati awọn irinṣẹ ifaminsi: iwe kan le ṣajọ ni aṣeyọri lẹhin atunko ibinu ti o yọkuro tabi yi akoonu pada ni ipalọlọ. Ọna rẹ le ṣe iranlọwọ fun awọn ẹgbẹ ọja ṣe iṣiro awọn eto atunṣe iwe-ipamọ nipa lilo igbẹkẹle-han olumulo ati itọju, dipo ami ayẹwo alawọ ewe kan.
Wiwa aarin ti HackerNoon ni pe akopọ ati atunṣe otitọ jẹ awọn iṣẹ ṣiṣe oriṣiriṣi. Eto kan le da iwe-ipamọ kekere pada ti o n ṣajọ nigbagbogbo lakoko sisọ iwe olumulo silẹ, tabi o le tun kọ asọtẹlẹ kan, ara iwe-kika, tabili tabi paragirafi ni awọn ọna ti ko han gbangba lati PDF ti abajade. Ijabọ naa sọ pe 3.7% ti awọn oludije ti o gba jẹ awọn iyipada gangan, afipamo pe eto naa yanju apẹẹrẹ nipa yiyọ aṣiṣe abẹrẹ kuku ju ṣe afihan atunṣe gbogbogbo diẹ sii.
Awọn abajade jẹ pataki fun awọn irinṣẹ kikọ AI nitori awọn olumulo ni iriri ti kii ṣe ifijiṣẹ bi ikuna. HackerNoon ṣe ijabọ itankale 27.5-ojuami laarin awọn oṣuwọn akopọ ipari-si-opin ti o dara julọ ati ti o buru julọ ati jiyan pe pupọ ninu iyatọ wa lati ṣiṣe igbẹkẹle kuku ju agbara awoṣe lọ. Iyatọ yẹn ṣe pataki ni iṣẹ: imudara wiwa olupese, awọn opin ipari ati ipa-ọna le ṣe iranlọwọ fun awọn olumulo diẹ sii ju yiyipada awoṣe ti o wa ni abẹlẹ, lakoko ti iṣakojọpọ-nikan le fi awọn ikuna iṣẹ wọnyẹn pamọ.
Ijabọ naa tun daba pe ọna kika iwe ati iru aṣiṣe ni ipa lori iṣẹ ṣiṣe. HackerNoon sọ pe aṣeyọri akojọpọ ipari-si-opin jẹ nipa 74.2% fun LaTeX, 60.3% fun Typst ati 90.2% fun Markdown. Igbekale ati awọn iṣoro ti o ni ibatan si igbẹkẹle, pẹlu gbigbewọle Typst, awọn ibeere abayo-ikarahun LaTeX ati iṣiro ti ko tii, ti a royin le ni lile ju awọn aṣẹ aṣẹ agbegbe lọ. Awọn awari wọnyi le ṣe iranlọwọ fun awọn olupilẹṣẹ ṣe apẹrẹ awọn iwadii ibi-afẹde ati atunyẹwo ṣiṣan iṣẹ.
HackerNoon ṣe ijabọ pe awọn aṣiṣe sintetiki ti o wa lori ipilẹ-ori jẹ 5.6 si 9.2 ogorun awọn aaye lile ju awọn iyipada ti o da lori ilana kọja awọn idile awoṣe mẹta. Ninu iwadi ọran ti o yatọ, awoṣe ti o lagbara julọ ti a royin ṣe atunṣe 67.0% ti 88 awọn ipadanu eniyan gidi ti o ni idiyele, ni akawe pẹlu 81.3% lori ṣeto lile sintetiki ati 90.5% lori awọn iyipada ti o da lori ilana. Nkan naa ṣafihan eyi bi ẹri pe awọn idanwo sintetiki ti ilẹ le jẹ ojulowo diẹ sii ju awọn atunṣe ad hoc, kii ṣe bii iṣiro olugbe ti iṣẹ ṣiṣe gidi-aye.
Ibaraẹnisọrọ Mechanism: Bii O Ṣe Nṣiṣẹ Lootọ
Ṣawari imọ-ẹrọ abẹlẹ lẹhin idagbasoke yii ni ibaraenisọrọ.
Which component of an AI application is the machine-learning model itself?
Kini lati wo tókàn
Ijabọ naa sọ pe iṣẹ iwaju yoo ṣe idanwo awọn atunṣe kọja awọn ẹrọ TeX pupọ, ṣafikun awọn awoṣe pipade aala ati awọn iwadii aisan, ati kọ iwe-aṣẹ, orin aṣiṣe gidi-aye ti o tun ṣe. Awọn awari ala-ilẹ naa jẹ eyiti o royin nipasẹ onkọwe HackerNoon ati pe a ko fi idi rẹ mulẹ ni ominira nibi.
Atẹle to ṣe pataki julọ ni boya awọn ipo ti o royin ye awọn idanwo gbooro. HackerNoon sọ pe iṣẹ lọwọlọwọ ko ṣe agbekalẹ ipo awoṣe agbaye fun gbogbo LaTeX, ati pe iṣayẹwo wiwo rẹ ni opin nitori imupadabọsipo jẹ iwọn nipasẹ ọrọ ti a fa jade kuku ju wiwo kikun tabi ibaramu akọkọ. Nitoribẹẹ atunṣe le ṣe itọju ọrọ lakoko ti o n yipada eto oju-iwe, titọpa akoonu tabi igbejade ni awọn ọna ti o wulo.
Ijabọ naa sọ pe idanwo iwaju yoo ṣe ayẹwo boya awọn atunṣe ti o ṣiṣẹ labẹ Tectonic tun ṣiṣẹ labẹ pdfLaTeX, XeLaTeX ati LuaLaTeX. Iyẹn ṣe pataki nitori awọn iyatọ engine le ni ipa lori gbigbe. HackerNoon tun ṣe idanimọ awọn awoṣe pipade aala ati ipo iwadii-ni-kia bi nsọnu lati inu nronu lọwọlọwọ, nitorinaa awọn abajade ibọn odo ti o royin ko yẹ ki o ṣe itọju bi iwọn pipe ti kini awọn irinṣẹ iṣowo ti iranlọwọ le ṣe.
Ibeere ṣiṣi si siwaju sii ni boya ala-ilẹ le ṣe agbekalẹ orin-aye gidi ti o tun ṣe. HackerNoon sọ pe orin-aye gidi ti o tutuni lọwọlọwọ ko ni awọn iṣẹlẹ ti o gba nitori onkọwe nilo iwe-aṣẹ ti o ni idaniloju, iṣafihan ati ẹda. Idiwọn yẹn ni itumọ: ṣeto sintetiki ni ọrọ-ọrọ ti o han gbangba, ṣugbọn ko sibẹsibẹ ṣafihan bii igbagbogbo awọn aṣiṣe onkọwe ti n waye nipa ti ara tabi bii awọn iwe aṣẹ awọn olumulo ṣe huwa ninu ṣiṣan iṣẹ laaye.
Apewọn ilowo ti a dabaa nipasẹ ijabọ naa ni lati ṣe atẹjade ifijiṣẹ, akopọ, imupadabọsipo, satunkọ iwonba ati isọdọtun lọtọ, pẹlu awọn iyeida ti a sọ. Awọn igbese wọnyẹn le jẹ alaye diẹ sii ju oṣuwọn iwọle ẹyọkan lọ, ṣugbọn HackerNoon ko ṣe idasile ominira iru awọn ala ti o yẹ ki o ṣe akoso imuṣiṣẹ. Nkan naa ni pataki sọ pe ko si iloro ibajọra ọrọ kan ṣoṣo ti o le jẹri atunṣe to pe, nitorinaa atunyẹwo eniyan ati awọn sọwedowo atunmọ gbooro ko wa ni ipinnu.