Résumé
MaskGIT dafay defar ay nataal ci di wax luy waaja am ci token yu bari benn yoon, ba noppi njëkka def ci ñi gëna wóolu seen bopp, mu wecci xeetu cammoy-ndeyjoor bu yeex bi ak ay jéego yu gaaw yu paralel.
MaskGIT Parallel Token Decoding bokk na ci liggéey yi ordinatër di def ngir tekki wala defar ay mejaa yuñ mëna gis ngir jàngat, liggéey ak sos lu bees.
Plongeur bu xóot
MaskGIT (Transformatëru Nataal buy Defar Maske), daale ko ci Google ci 2022, xalaataat ni ñuy dekode xeetu nataal yu lalu ci token. Transformatër yu njëkk ya melni VQGAN dañu daan defar ay token ci seen bopp, benn-benn ci rang raster, te loolu lu yeex la te wuute na ak nataali 2D yi. MaskGIT lu moy loolu dafay tàggat ak benn mébetu modeling bu maske bu melni BERT: ay subsets yu bari ci token nataal yi dañu nëbbu te model bi dafay jàng xam leen ñépp ci benn yoon jëfandikoo bàyyi xel ci ñaari yoon. Ci jamonoy defar dafay tàmbali ci griy buñ maskeer bu baax ba noppi dekode ci limu iterasioŋ yuñ tëral (dafay faral di nekk 8 ba 12). Jéego bu nekk dafay wax luy waaja am ci bépp token buñ maske, ba noppi denc li gëna am wóolu, ba noppi maskewaat ñeneen ñi ngir turne bi ci topp. Loolu dafay defar nataal yu baax ci diggante magnitude bu néew jéego yu gëna néew ci dekodage autorégresif.
Gis-gis xarala
Li gëna am solo mooy kalendriye maskeer bi lalu ci wóolu sa bopp. Jadwalu cosinus mooy wane ñaata jeton lañu wara wane iteration bu nekk, di tàmbali ndànk ba noppi di gaaw. Ndax bàyyi xel dafa am ñaari yoon, token bu nekk dafay gis nataalu wàll wi yépp, kon def waxtaan yu gëna wóolu njëkk may jéego yu ci topp ñu nekk ci anam wu dëgër, lu melni saafara wàll yu yomb yi ci benn puzzle balaa ñi leerul.
Dekodage token paralel MaskGIT
MaskGIT dafay defar ay nataal ci di wax luy waaja am ci token yu bari benn yoon, ba noppi njëkka def ci ñi gëna wóolu seen bopp, mu wecci xeetu cammoy-ndeyjoor bu yeex bi ak ay jéego yu gaaw yu paralel. MaskGIT Parallel Token Decoding bokk na ci liggéey yi ordinatër di def ngir tekki wala defar ay mejaa yuñ mëna gis ngir jàngat, liggéey ak sos lu bees. Ngir tabax xam-xam bu xóot, jàppal MaskGIT Parallel Token Decoding ni xeetu liggéey, du benn man-man: leeral njariñ yi nga bëgg, leeral xalaat yi, ak tàqale li sistem bi mëna def ci anam wu wóor ak li ba leegi soxla àtteb kàngam.
Ci jëf, ekip yu am doole yiy jëfandikoo MaskGIT Parallel Token Decoding dañuy méngale njubte gi ak dëggantaanu liggéey bi, lu ci melni kalite done, faraata leeral, ak méngoo etiketu. Dañuy bind kritër yu leer ngir am ndam, natt leen ci done yu dëggu ak def liggéey, ba noppi ñu baamtu ci anamu ñàkka mëna seetlu, du ci benn yoon benchmark wins. Mooy barab bi xam-xam theorie bi di soppiku nekk kàttan buy yàgg ci produit yi, ci politik yi ak ci liggéey yi.
Visual IA mën na otomatise saytu, gis ak etiketu liggéey ci eskaal. Ci jamano jooju, yelleefi nataal ak nangu mën na nekk risku yoon sudee fimu bawoo leerul. Xeetu jëf bi gëna dëgër mooy boole gaawaayu jàngat ak disipline nguur: doxal pilote, jàpp firnde, siiwal dogal yi, ak wéy di yeesal kaaraange gi ci anam wi ñuy doxalee, li jëfandikukat bi di xaar, ak sàrti sàrt yi di jëm kanam.
njeextalu pexe
Visual IA mën na otomatise saytu, gis ak etiketu liggéey ci eskaal.
Visual IA mën na otomatise saytu, gis ak etiketu liggéey ci eskaal. Ci jëfandikoo yu am kalite bu kawe, loolu dañu koy tekki ci sàrti liggéey yuñ mëna natt, ay peggu boroom, ak ay xew-xewu xoolaat yu bari suko defee ekip yi mëna yokk wóolu seen bopp ci barabu yokk lu jaxasoo.
Ekipu kreatif yi mën nañu defar konsept yu gëna gaaw te duñu def lu bari ci loxo.
Ekipu kreatif yi mën nañu defar konsept yu gëna gaaw te duñu def lu bari ci loxo. Ci jëfandikoo yu am kalite bu kawe, loolu dañu koy tekki ci sàrti liggéey yuñ mëna natt, ay peggu boroom, ak ay xew-xewu xoolaat yu bari suko defee ekip yi mëna yokk wóolu seen bopp ci barabu yokk lu jaxasoo.
Liggéeyukaay yi mën nañu jëfandikoo siñaal nataal wala wideo yu jafewoon lool ci liggéey.
Liggéeyukaay yi mën nañu jëfandikoo siñaal nataal wala wideo yu jafewoon lool ci liggéey. Ci jëfandikoo yu am kalite bu kawe, loolu dañu koy tekki ci sàrti liggéey yuñ mëna natt, ay peggu boroom, ak ay xew-xewu xoolaat yu bari suko defee ekip yi mëna yokk wóolu seen bopp ci barabu yokk lu jaxasoo.
Doxal ci àdduna dëgg
Defar ab nataal bu mat sëkk ci lu tollu ci 8 ba 12 jéego yu paralel ci barabu téemeeri token autoregressive
Pentire ab gox bu maske ci ab nataal di wax luy waaja am ci token yu nëbbu yi ak muy wër
Nataalu synthese bu lalu ci sart ci kaw ImageNet ci kalite bu méngoo ak model yu gëna néew doole
Dafay nekk yaxu dekodaas ngir sistemu bind-ci-nataal yu melni Google's MUSE yi soxla defar ci lu gaaw
Modèlu jëfandikoo
Dekodage jeton paralel MaskGIT ci jëf
Defar nataal bu mat sëkk ci lu tollu ci 8 ba 12 jéego yu paralel ci barabu téemeeri token autoregressif.
Defar nataal bu mat sëkk ci lu tollu ci 8 ba 12 jéego yu paralel ci barabu téemeeri token autoregressive yi Teams yi dañuy faral di am njariñ yu gëna baax suñu leeralee threshold yu baax ci kanam, tëye yoonu escalation nit ngir jafe-jafe yi, ba noppi topp njariñu produit ak njëgu njuumte ci diir bi.
Dekodage jeton paralel MaskGIT ci jëf
Inpainting ab gox bu maske ci ab nataal ci di wax luy waaja am ci token yu nëbbu yi ak contexte bi ko wër.
Inpainting benn gox bu maskeer ci benn foto ci di wax luy waaja am ci token yu nëbbu yi ak contexte bi ko wër. Ekip yi dañuy faral di am njariñ yu gëna baax suñu joxee thresholds yu baax ci kanam, tëye yoonu escalation nit ngir mbir yu am solo, ba noppi topp njariñu produit ak njëgu njuumte ci diir bi.
Dekodage jeton paralel MaskGIT ci jëf
Synthese nataal bu lalu ci sartu klaas ci ImageNet ci kalite buy joŋante ak model yu gëna yeex.
Class-conditional image synthesis ci ImageNet ci kalite buy joŋante ak xeetu model yu gëna yeex. Ekip yi dañuy faral di am njariñ yu gëna baax suñu joxee threshold yu kalite ci kanam, tëye yoonu escalation nit ngir jafe-jafe yi, ba noppi topp njariñu produit ak njëgu njuumte ci diir bi.
Dekodage jeton paralel MaskGIT ci jëf
Dafay nekk yaxu dekodaas ngir sistemu bind-ci-nataal yu melni Google's MUSE yu soxla defar ci lu gaaw.
Liggéeyukaay ni yaxu dekodaas ngir sistemu bind-ci-nataal yu melni Google's MUSE yu soxla generasioŋ bu gaaw. Ekip yi dañuy faral di am njariñ yu gëna baax suñu joxee threshold yu baax ci kanam, tëye yoonu eskalaasioŋ nit ngir jafe-jafe yi, ba noppi topp njariñu produit yi ci diir bi ak e.
Risk yi ak balustrade yi
Yelleefi nataal ak nangu mën na nekk risku yoon sudee fi ñu bawoo leerul.
Performance model bi mën na wuute ci leeraay bi, demographie bi ak environmaa bi.
Njuumteg positive yi mën nañu dem te kenn duko seetlu fileek xool wuñu buntu wóolu sa bopp.
Roadmap ngir samp gi
Mandargal kritërium nangug njub, woowaat ak njëgu njuumte.
Mandargal kritërium nangug njub, woowaat ak njëgu njuumte. Japp jéego bu nekk ni buntu firnde: sudee mattul kritër yi, noppali génne gi, tëj bërëb bi, suko defee nga yaatal jëfandikoo gi.
Saytu ak done yu méngoo ak anam yi ñuy liggéeyee dëgg.
Saytu ak done yu méngoo ak anam yi ñuy liggéeyee dëgg. Japp jéego bu nekk ni buntu firnde: sudee mattul kritër yi, noppali génne gi, tëj bërëb bi, suko defee nga yaatal jëfandikoo gi.
Yokk jàngat nit ngir xam fu wóorul dara wala am njeexital yu rëy.
Yokk jàngat nit ngir xam fu wóorul dara wala am njeexital yu rëy. Japp jéego bu nekk ni buntu firnde: sudee mattul kritër yi, noppali génne gi, tëj bërëb bi, suko defee nga yaatal jëfandikoo gi.
Toppal model drift bi nga baaxal ko ginaaw bi kamera bi wala done yi soppeekoo.
Toppal model drift bi nga baaxal ko ginaaw bi kamera bi wala done yi soppeekoo. Japp jéego bu nekk ni buntu firnde: sudee mattul kritër yi, noppali génne gi, tëj bërëb bi, suko defee nga yaatal jëfandikoo gi.