Résumé
GLIGEN (Grounded-Language-to-Image Generation) daf lay may nga xool fi mbir yi di feeñ ci nataal biñ defar, ci joxe model bi ay boîte ak etiket yu nekk ci wetu bind bi. Dafay soppi bind-ci-nataal bu leerul nekk synthese bu leer, buñu mëna saytu jëmmal.
GLIGEN Grounded Generation bokk na ci liggéey yiy wane ordinatër, di tekki wala di defar ay mejaa yuñ mëna gis ngir jàngat, liggéey ak sos lu bees.
Plongeur bu xóot
Xeetu bind-à-nataal yiñ miin dañuy xeex ngir saytu barab bi: laajal 'muus ci cammoy xaj' te barina luñu lay juum ci plasement bi. GLIGEN, biñu dugal ci 2023, dafay saafara jafe-jafe yii ci yokk ay dugal yu am suuf, lu ci melni boyet yuy tënk yuñ boole ak mbind wala entite nataal, poñ yu am solo, wala nataali royuwaay. Lu gëna am solo mooy, dafay gelé diisaayu modelu diffusion biñ njëkka tàggat, ba noppi dugal ay couche self-attention yu bees yuñ mëna tàggat, yuy xëcci jetons yi ci suuf. Loolu dafay tekki ni dafay tabax ci kaw xeetu Stable Diffusion te du yàq xam-xam bimu jàng, ba noppi gating bi dafay tàmbali ci wetu zero suko defee xeetu base bi dafay wéy di am ci tàggat bi. Resultaa bi mooy generation grounded bu àdduna bi ubbeeku: mën nga def mbir yuñ leeral ci barab yuñ la wax, te dafay yamale konsept yi ak layout yi nga gisul ci diiru tàggat grounding.
Gis-gis xarala
GLIGEN dafay màndargaal bépp entite bu nekk ci suuf ni token buy boole bindam wala nataalam ak ay leeral ci barab bi, lu melni ñeenti coordonnées yu benn boîte de bounding buñ kodee ci man-mani Fourier. Yii jetons grounding duggu ci diffusion U-Net frozen jaaraleko ci ay couche self-attention yuñ dugal ci digganté bloc self-attention ak cross-attention yi fi nekk. Benn buntu buñu mëna jàng, buñu tàmbalee ci zero, mooy saytu ni grounding bi di amee ci generation, kon yokk njiit dafay yàqu bu baax, tàggat yaram dafay des ci anam wu dëgër.
GLIGEN
GLIGEN (Grounded-Language-to-Image Generation) daf lay may nga xool fi mbir yi di feeñ ci nataal biñ defar, ci joxe model bi ay boîte ak etiket yu nekk ci wetu bind bi. Dafay soppi bind-ci-nataal bu leerul nekk synthese bu leer, buñu mëna saytu jëmmal. GLIGEN Grounded Generation bokk na ci liggéey yiy wane ordinatër, di tekki wala di defar ay mejaa yuñ mëna gis ngir jàngat, liggéey ak sos lu bees. Ngir tabax xam-xam bu xóot, jàppal GLIGEN Grounded Generation ni xeetu liggéey, du benn man-man: fësal njariñ yi nga bëgg, leeral xalaat yi, ak tàqale li sistem bi mëna def ci anam wu wóor ak li ba leegi soxla àtteb kàngam.
Ci jëf, ekip yu am doole yiy jëfandikoo GLIGEN Grounded Generation dañuy méngale njubte gi ak dëggantaanu liggéey bi, lu ci melni kalite done, wuute leeral, ak méngoo etiketu. Dañuy bind kritër yu leer ngir am ndam, natt leen ci done yu dëggu ak def liggéey, ba noppi ñu baamtu ci anamu ñàkka mëna seetlu, du ci benn yoon benchmark wins. Mooy barab bi xam-xam theorie bi di soppiku nekk kàttan buy yàgg ci produit yi, ci politik yi ak ci liggéey yi.
Visual IA mën na otomatise saytu, gis ak etiketu liggéey ci eskaal. Ci jamano jooju, yelleefi nataal ak nangu mën na nekk risku yoon sudee fimu bawoo leerul. Xeetu jëf bi gëna dëgër mooy boole gaawaayu jàngat ak disipline nguur: doxal pilote, jàpp firnde, siiwal dogal yi, ak wéy di yeesal kaaraange gi ci anam wi ñuy doxalee, li jëfandikukat bi di xaar, ak sàrti sàrt yi di jëm kanam.
njeextalu pexe
Visual IA mën na otomatise saytu, gis ak etiketu liggéey ci eskaal.
Visual IA mën na otomatise saytu, gis ak etiketu liggéey ci eskaal. Ci jëfandikoo yu am kalite bu kawe, loolu dañu koy tekki ci sàrti liggéey yuñ mëna natt, ay peggu boroom, ak ay xew-xewu xoolaat yu bari suko defee ekip yi mëna yokk wóolu seen bopp ci barabu yokk lu jaxasoo.
Ekipu kreatif yi mën nañu defar konsept yu gëna gaaw te duñu def lu bari ci loxo.
Ekipu kreatif yi mën nañu defar konsept yu gëna gaaw te duñu def lu bari ci loxo. Ci jëfandikoo yu am kalite bu kawe, loolu dañu koy tekki ci sàrti liggéey yuñ mëna natt, ay peggu boroom, ak ay xew-xewu xoolaat yu bari suko defee ekip yi mëna yokk wóolu seen bopp ci barabu yokk lu jaxasoo.
Liggéeyukaay yi mën nañu jëfandikoo siñaal nataal wala wideo yu jafewoon lool ci liggéey.
Liggéeyukaay yi mën nañu jëfandikoo siñaal nataal wala wideo yu jafewoon lool ci liggéey. Ci jëfandikoo yu am kalite bu kawe, loolu dañu koy tekki ci sàrti liggéey yuñ mëna natt, ay peggu boroom, ak ay xew-xewu xoolaat yu bari suko defee ekip yi mëna yokk wóolu seen bopp ci barabu yokk lu jaxasoo.
Doxal ci àdduna dëgg
Teg benn logo wala produit ci gox bu gëna jub ci piblisite biñ defar, jëfandikoo benn boyet buy tënk
Defar seen yu jaffe di leeral fi personage wala mbir bu nekk wara toog balaa ngay render
Defar ay done di tàggat ngir gis mbir ak barabi boyet dëgg-ci suuf
Defar ab mbir buñu leeral ci gox bu jëfandikukat bi desine ci ab nataal bu fi nekk
Modèlu jëfandikoo
GLIGEN Generation bu am suuf ci jëf
Teg benn logo wala produit ci gox bu gëna jub ci piblisite biñ defar, jëfandikoo benn boyet buy tënk.
Teg benn logo wala produit ci gox bu gëna jubal ci benn piblisite buñ defar, jëfandikoo benn boyet buy tënk. Ekip yi dañuy faral di am njariñ yu gëna baax suñu joxee ay threshold yu baax ci kanam, tëye yoonu escalation nit ngir jafe-jafe yi, ba noppi topp njariñu produit ak njëgu njuumte ci diir bu gàtt.
GLIGEN Generation bu am suuf ci jëf
Defar seen yu jaffe ci leeral fi personage wala mbir bu nekk wara toog balaa ngay render.
Defar ay seen yu jafee xam, di leeral fi personage bu nekk wala mbir mu wara toog balaa ñuy render. Ekip yi dañuy faral di am njariñ yu gëna baax suñu joxee ay threshold yu baax ci kanam, tëye yoonu escalation nit ngir jafe-jafe yi, ba noppi topp njariñu produit yi ak njëgu njuumte yi ci diir bi.
GLIGEN Generation bu am suuf ci jëf
Defar ay done di tàggat ngir gis mbir yu am barabu boyet bu dëgg buñ xamee ci suuf.
Defar ay done tàggat ngir gis mbir ak barabi boyet dëgg-dëgg xam-xam Teams yi dañuy faral di am njariñ yu gëna baax suñu joxee thresholds kalite ci kanam, tëye yoonu escalation nit ngir jafe-jafe yi, ba noppi topp njariñu produit ak njëgu njuumte ci diir bi.
GLIGEN Generation bu am suuf ci jëf
Defar ab mbir buñu leeral ci gox bu jëfandikukat bi desine ci ab nataal bu fi nekk.
Inpainting ab mbir buñu leeral ci benn gox bu jëfandikukat bi desine ci benn foto bu nekk Teams yi dañuy faral di am njariñ yu gëna baax suñu joxee ay threshold yu baax ci kanam, tëye yoonu escalation nit ngir jafe-jafe yi, ba noppi topp njariñu produit yi ak njëgu njuumte yi ci diir bi.
Risk yi ak balustrade yi
Yelleefi nataal ak nangu mën na nekk risku yoon sudee fi ñu bawoo leerul.
Performance model bi mën na wuute ci leeraay bi, demographie bi ak environmaa bi.
Njuumteg positive yi mën nañu dem te kenn duko seetlu fileek xool wuñu buntu wóolu sa bopp.
Roadmap ngir samp gi
Mandargal kritërium nangug njub, woowaat ak njëgu njuumte.
Mandargal kritërium nangug njub, woowaat ak njëgu njuumte. Japp jéego bu nekk ni buntu firnde: sudee mattul kritër yi, noppali génne gi, tëj bërëb bi, ba noppi nga yaatal jëfandikoo gi.
Saytu ak done yu méngoo ak anam yi ñuy liggéeyee dëgg.
Saytu ak done yu méngoo ak anam yi ñuy liggéeyee dëgg. Japp jéego bu nekk ni buntu firnde: sudee mattul kritër yi, noppali génne gi, tëj bërëb bi, ba noppi nga yaatal jëfandikoo gi.
Yokk jàngat nit ngir xam fu wóorul dara wala am njeexital yu rëy.
Yokk jàngat nit ngir xam fu wóorul dara wala am njeexital yu rëy. Japp jéego bu nekk ni buntu firnde: sudee mattul kritër yi, noppali génne gi, tëj bërëb bi, ba noppi nga yaatal jëfandikoo gi.
Toppal model drift bi nga baaxal ko ginaaw bi kamera bi wala done yi soppeekoo.
Toppal model drift bi nga baaxal ko ginaaw bi kamera bi wala done yi soppeekoo. Japp jéego bu nekk ni buntu firnde: sudee mattul kritër yi, noppali génne gi, tëj bërëb bi, ba noppi nga yaatal jëfandikoo gi.