Lu xew
Gëstukat yi dugal nañu MC-CXR, muy benn référence buñ defar ngir saytu ndax modelu làkku gis-gis yi dañuy tëye tekki bu jaar yoon ci rayon X sudee xibaar bi nekk ci biir nataal bi mënul ànd ak nataal bi. bi dafa yaatal 240 cases ci 2,522 instances yuñ boole ak bind bu wóor te réer ak contexte rayon X bu njëkk.
Boroom bi mooy ab dokimaa arXiv ngir MC-CXR, ab këyit buñu joxe ci 25 août 2026, te ñu xamme ni nangu nañu ko ci li EMNLP 2026 gis. Bindkat yi dañu wax ni liggéey bi dafay màndargaal jafe-jafe yi juddoo ci lakk yi, ci anam yi ñuy gisee, wala ci model yi. Focus bi mooy barabu klinik bu mën jëfandikoo: mën nañu tekki rayon X ci dënn bi ci wetu rapoor yiñ jëlee, notu njëkk yi, wala nataal yu njëkk yi moo gën ñu ko def ci boppam.
MC-CXR mingi tàmbali ci 240 mbir ba noppi yokk leen ba 2,522 mbir. Cas bumu ci mëna doon, dafay tëye nataal bi fi nekk ak liñu ci wut, ci noonu muy wane contexte bu wóor te réerloo nit. Kontekst bi mën nekk mbind wala nataal, boole ci rayon X bu njëkk ci dënn bi, ak ay mbir yuñ mëna gis fépp fuñu ko mëna gis. Design bu ñaar bii dafa bëgga xàjjale ndax contexte biñ yokk dafay soppi dogal bi model bi jël, du natt rek ndax model bi mën na tontu benn laaj ci noonu rek.
Këyit dafay fësal ñatti famiy liggéey ak ñaari nattukaay yuñ boole: tolluwaayu coppite ci njuumte ak tolluwaayu njuumte bu méngoo ak muy tekki. Auteur yi jàngat nañu fukki VLM yu lalu ci sistem général yu ubbeeku, sistem domaine medikaal, ak sistem yu tëju. Seen rapoor ci tolluwaayu coppite mingi tollu ci diggante 45.6% ba 78.1% ci balluwaayi bind yu réer ak diggante 35.7% ba 61.7% ci balluwaayi gis-gis yu réer. Lii mooy njariñu jàngat bi bindkat yi joxe; source excerpt bi xamul model yi benn-benn wala joxe seeni poñ yu wuute.
Benn ci njariñ yi mooy wuute gi nekk ci digganté distraction texte ak distraction visuel. Ci biir waxtaan yi soppeeku, 74.6% méngoo nañu ak etiketu réer bi muy réer sudee muy xëccoo mbind, buñu ko méngale ak 17.6% sudee muy gis-gis. Auteur yi dañu wax ni amna diggante bu tollu ci 57.0 poñ, ak diggante wóolu bu 95% diggante 50.9 ba 62.8, ci li ñuy woowe protocolu tontu bu jub buñ yamale. Done yi dañu leen jàppee ni am nañu ci PhysioNet.
Ay leeral ci cosaan: arxiv.org ↗
Lu tax mu am solo
Gëstu bi dafa wane anam wu jaarul yoon, te test yi ñuy jëfandikoo ci nataal kese ñoo ko mëna ñàkk. Benn model mën na def liggéey bu jaar yoon ci rayon X buñ tàqale waaye soppi tontu am suñu ko joxee ay nota yu gëm waaye yuy réer wala nataal yu njëkk, muy risk ci liggéeyu klinik yi boole nataal yi ak dokimaa yuñ jëlee.
Jafe-jafe bi am solo mooy ndax model bi mën na xàmmee lu jaarul yoon ci rayon X bi ci dënn bi. Mooy ndax xeetu mbir mi mën na tëye àtte boobu sudee xibaar bi ko wër mën nañu ko gëm waaye du dëgg. Ci liggéey bu boole ay nataal ak ay notu wala ay dokimaa yuñ jëlee, sistem bu topp benn etiketu bind bu njuumte mën na joxe tontu bu wóolu bu gëna fësal muy tekki nataal bi.
Referanse bi dafay wane itam li waral njubteg boppu xibaar bi mën na baña mat. Nataal kese mooy gëna jub, buñu sukkandikoo ci këyit bi, waaye doyul ngir jàngat sistem klinik yu bari. Benn model mën na nuru lu mëna liggéey suñu ko natt ci nataal yu wuute, fekk mingi wéy di ñàkka wóor ci ay dugal yu wuute. MC-CXR moo tax dafay soppi bàyyi xel ci njubte gi nekk ci dëgër ci coppite yu méngoo ci xibaar yiñ jox sistem bi.
Asymétrie bind-visuel biñ wax mën na am njariñ ci wàllu kaaraange. Resultaa yi ci këyit bi dañuy wane ni làkk wu réer mën na gëna réer ci contexte visuel ngir génne tontu buñ soppi ci etiket bu dul dëgg. Loolu firndewul lu waral wuute gi am, te firndewul ni bind mooy gëna am loraange saa yu nekk. Dafay wane ni jàngat yi dañu wara natt njeextalu chaine bu nekk ci boppam, duñu jàppee bépp contexte ni luy méngoo.
Ngir doktër yi, institision yi, ak developpeur yi, li ñuy tekki ci saasi mooy ñu natt sistem multimodal yi ci anam wi ñu leen di jëfandikoo. Lu ci melni notu yu wuute, rapoor yuñ jëlee, ak nataal yu njëkk, ak jàngat bu lalu ci ndax sistem bi gis na ay jafe-jafe wala mu soppi doggal bi te amul firnde yu doy. Source bi waxul benn deployment clinique, résultat malade, dogal buy yamale, wala ñu wane ni dafay wàññi, kon jafe-jafe yooyu dañuy des ci ëlëg, duñu am njeexte yuñ taxawal.
Mekanism buy weccoo xalaat: naka lay doxee
Saytu xarala yu bees yi ci ginaaw yokkute bii ci anam wu weccoo xalaat.
crm_get_transaction(id='4092').Which component of an AI application is the machine-learning model itself?
Li nga wara seetaan ci topp
Referanse bi mooy jàngat gëstu bi, du firnde ni benn sistem klinik dafa gaañ malaad bi. Yokkug saytu dafa wara xoolaat fukki xeetu jàngat yi benn-benn, tabax ak dëggantaanu muy tekki, liggéey ci done klinik yu gëna yaatu, ak ndax xeetu liggéey yi wala liggéey yi mën nañu gis ak baña nangu njuumte yooyu juddoo ci muy tekki.
Laaj bi am solo bi ci topp mooy naka la fukki sistem yi di wuutee. Abstract bi dafay joxe ay rang ak agrégat yuñ méngale waaye du joxe tur ci sistem yi, xamme seeni version, wala wane ndax xeetu open-source, domaine médical, ak source-closed yi dañuy tontu ci anam wu wuute. Ay detay yooyu dina tax ñu xam ndax jafe-jafe bi dafa tasaaroo, dafa nekk ci yenn xeeti model, wala dafay aju ci tànneefi jëfandikoo gi.
Gëstukat yi ak jàngat yi dañu wara xoolaat itam ni ñu boolee 240 mbir yi ak seeni mbir yu réerloo nit ñi. Source bi dafa wane ni bi dafay jëfandikoo mbind yu wóor te réer ak ay rayon X yu njëkk, waaye excerpt bi leeralul askanu source bi, anam wi ñuy etiketee, bariwaayu li ñu gis, wala ni perturbations yi di nuru dokimaa klinik yu dëggu yi. Faktër yooyu dina ñu am njeexital ci ni tolluwaayu rapoor yi di jaar ba weesu benchmark bi.
Baamtu ci done klinik yu moom seen bopp dina am solo, ni ko test yi di may model yi ñu laaj leeral, fësal lu wóorul, joxe firnde nataal, wala ñu toxal ko nit ku koy jàng. Resultaa yi MC-CXR xamle dañuy jëfandikoo protokol tontub direct buñ yamale, suko defee performance mën na soppiku ci yeneen jëmmal. Woykat bi waxul ndax amna ay kaaraange yu mel noonu yuñ jàngat.
Disponibilite bu done yi ci PhysioNet dafay may yeneen gëstukat ñu defaraat jàngat biñ boole ba noppi méngale pexe yu ñuy wàññi. Firnde yu am njariñ yi ci topp ñooy resultaa yi ci model bu nekk, jàngat njuumte yi, def ci gis-gis yu wuute ak xeeti muy tekki, ak jàngat ci wàllu liggéey. Ba résultaa yi am, MC-CXR dañu ko wara jàng ni firnde ci vulnérabilité benchmarked ci doxalinu VLM biñ natt, te baña nekk natt risku malaad ci wàllu faju.