Lu xew
arXiv preprint defar na benn kadre geometrik bu am yaatuwaayu àpp ngir jàngat njubluwaay spectral buñ tànnee ci reso neuronal yu xóot yi. Dafay natt jaxasoo bi am ci digganté buntu yi, kowarians bi diisaay bi defar, sensitiwite yi ci ginaaw, produit yi ci biti yu am degrade moyen ak matris yu am màndarga neuronal yuy jëfandikoo commutateur yi. Këyit dafay wax ci misaali jàngat ak jàngat ci nimero ci dem ak dikk, desekilibre ak fomm jëmmal jëmmal ci diisaay ak balans.
Këyit dañu ko jox arXiv ci 24 ut 2026, di jàngat geometrie bi ci biir reso neuronal yu xóot yi. Li gëna am solo ci mbir mi mooy commutateur bi: nattukaay bu math buy wane ñàkka méngoo gi am ci diggante structure yu mëna baña méngoo wala bokk jëm kanam. Auteur yi dañu jëfandikoo xalaat bii ci ñatti lëkkaloo: buntu yi am kovariance, sensitiwite yu dellu ginaaw ak kovariance, ak produit yu biti yu am moyen ak matris yu am màndarga neuronal. Luñu bëgga wax mooy leeral ni ñuy amalee ay geometri yuñ jàng, yóbbu leen ci ay diisaay, ba noppi tànnee leen ci diiru tàggat bi.
Benn dàntite ci wàllu layer ci këyit bi dafay xaaj commutateur sensitivite–covariance ci ñeenti balluwaay: dem bi ci suuf, desekilibre ci diggante layer yi ci wetam, coppite ci sensitivite ak jaxasoo ci diggante buntu yi amul ligne ak covariance. Decomposition bii dafay tàqale mecanisme yi mën feeñ ñoom ñaar ci nattug agrégat yi. Këyit dafay leeral itam commutateur AGOP-NFM ni transport bu am benn valeur pondéré ci commutateur bi ci biir, te bindkat yi neena ñu leeral lu tax alignment bi ñuy gis ci wàllu màndarga bi ci boppam mënul xàmmee geometrie bi ci biir bi ko defar.
Këyit dafay yokk buffer energies lokalisé ngir saafara jaxaso ci digganté covariance subspaces tàqaloo ak fësal xayma yu jëm ci bërëbi spectral, jëm kanam projecteur ak dakkal. Dafay formule ay sàrti Lyapunov yu mëna jur yàqu-yàqu sudee njuumte geometrik bu leer wala xalaati amortissement intrinsèque dañu am. Résumé bi dafa wax ni anam yooyu nekkul ci flow bi kese. Ci misaali jàngat ak jàngat ci xayma, bindkat yi dañu wax ci factorisasioŋ bi am ci digganté geometrie spectral ak activation, màgg gu gàtt ak fomm ci diggante balluwaay yu amul benn. Ci biir jekkal yi ñu natt ci diir bu mujj, neena ñu ab jaxasoo bu baaxul ci diggante dem bi ak dikk bi moo jiite fomm bi ci xóotaayu xóotaayu, yaatuwaayu ak ñaari référence yu régression.
Ay leeral ci cosaan: arxiv.org ↗
Lu tax mu am solo
Liggéey bi dafay werante xalaat biy wax ni tàggat bu baax wala wàññi risku wax luy waaja am dafay jur gis-gis bu yomb te méngoo ci biir. Sudee kaadar bi dafa weesu jekkal yiñ natt, mën na jox gëstukat yi anam wu gëna leer ngir saytu ni ñuy amalee ak yóbbu màndarga neuronal yi ci diiru tàggat, ci noonu lañuy artu ci jëfandikoo màndarga yiñ seetlu ni firnde ci benn jumtukaay bu nekk ci biir.
Li gëna am solo ci liggéey bi mooy benn kaada ngir laaj laaj bu gëna jëm ci ndax reso bi mingi jàng: ban structure interne mooy nekk compatible, fan, ak ci ban mecanisme? Taxawaay boobu amna solo ndax ñaari xeetu mën nañu yegg ci risk bu noonu boole ci defar ay geometri interne yu wuute. Këyit dafa leer ni wàññi risk mënul tekki ni commutator dafa daanu, kon njuumte ci wax lu gëna ndaw waru ñu ko jàppee ni firnde ni komponent yi ci biir reso bi dañu nekk ñu méngoo.
Kadar bi mën na am njariñ ci gëstukat yiy jàngat njariñ, jëmmal ak mëna tekki. Tàqale dem bi ak dikk bi, desekilibraasu couche bi ci wetam, coppite ci sensitivite ak jaxasoo ci buntu–covariance bu amul rëdd mën nañu jàppale ci ràññee li waral benn yoon bu nuru di màgg, di taxaw wala di dellu ginaaw. Waxtaan bu këyit bi ci gap spectral ak evolution projector itam dafay wane ci anam yi subspaces mëna des di wuute wala stabilise. Lii ay anam yu mëna xew la, te balluwaay bi moo leen di fësal, duñu firndeel kàttan liggéey wala jumtukaay yuñ gëm.
Resultaa bi itam dafay tënk waxtaan yu yaatu yi ci wàllu tàggat reso neuronal. Source bi joxeewul benn loi universel bu bépp reso bu xóot topp, te mujjentalam dafa leer ci ay sart: dañuy wax ni alignment dafay aju ci couche ak ci échelle bi, te dafay aju ci transport, interaction, annulation ak damping bu mëna am. Boobu xam-xam amna solo ci gëstu IA ndax natt yi ci biir mën nañu aju ci arsitektiir bi, eskaal bi, etaapu taggat bi ak tanneef bi ñuy wane. Kon seetlu ci wàllu man-man mën na nekk lu am njariñ te du doon nettali bu mat sëkk ci dinaamiku biir reso bi.
Mekanism buy weccoo xalaat: naka lay doxee
Saytu xarala yu bees yi ci ginaaw yokkute bii ci anam wu weccoo xalaat.
Which component of an AI application is the machine-learning model itself?
Li nga wara seetaan ci topp
Laaj bi gëna am solo mooy ndax kaadar bi ak jafe-jafe yi mu xamle ci fomm dañu ëpp misaali analytik yu këyit bi, regime yu am àpp ak ñaari benchmarks regression. Baamtu yu moom seen bopp, méngale ak pexe jàngat-representation yi fi nekk, ak jàngat ci model yu gëna mag wala yu bari liggéey dina ñu soxla ngir mëna yegg ci jëfandikoo gi. Ibnu bi ab arXiv version 1 preprint la te du taxawal xoolaat ci ay moroom, disponibilite kode, eskaalu référence, wala dayo effet yi.
Li gëna am solo ci wax ji ñu natt mooy liñu wax ni dafay wéy di fomm, te loolu dafay aju ci interaction bu baaxul diggante transport–désequilibre ci xóotaayu, yaatuwaayu ak ñaari référence yu régression. Source bi joxeewul tur yi, dayo done yi, configurations model yi, jekkal tàggat yi wala dayo effet numérique yi ci bind biñ joxe. Detay yooyu ñooy wane ni ñu mëna tekki li ñu gis ci anam wu yaatu, ak ndax jaxasoo bi ñu wax dafa am doole wala dafa jëm ci regime biñ natt.
Liggéey bu moom boppam war na xool ndax kaadar bi dafay wéy di am njariñ ci xaaj, misaali làkk, misaali gis-gis, architecture yu lalu ci bàyyi xel ak doxalinu tàggat yu wuute ak jekkal yi ñu jëfandikoo ci këyit bi. Dafa wara méngale nattukaayi commutateur yi ak diagnostic yi fi nekk ci nuru représentation, transport man-man ak dinaamiku optimisation. Résumé bi dafay leeral xayma ak jàngat yuñ def ci jàngat, waaye firndewul ni limu ñu nara def dafay gëna baaxal wax luy waaja am, debugging wala jëmmal model ci sistem biy doxal.
Source bi dafa xamme këyit bi ni arXiv: 2608.22910, version 1, benn bindkat buñ lim moo ko joxe ci Aug. 24. Waxul ni liggéey bi jaar na ci jàngat ci ay moroom, te xët wiñ joxe waxul ni amna kode wala jàngat bu mat sëkk. Kon ñiy jàng dañu wara jàppee conclusion yi ni ay waxtaani gëstu yu xaar ñu gëna firndeel ko. Li gëna doywaat ci saasi mooy siiwal kaadar bi ak ay test yu njëkk; njariñam ci jëfandikoo gi mingi aju ci baamtu, gëna leer ci rapoor yi ñuy xalaat ak firnde ni nattukaay yi dañuy ëpp luñu rapoor ci jàngat yiñ def ci diir bu gàtt.