GUIDE IA visuel

DragGAN Soppali weccoo xalaat

DragGAN daf lay may nga soppali nataal ci diri ay poñ: jàpp benn barab nga diri ko ci target bi, nataal bi dafay soppiku ci anam wu dëggu, di soppi pose, forme, wala expression.

Résumé

DragGAN daf lay may nga soppali nataal ci diri ay poñ: jàpp benn barab nga diri ko ci target bi, nataal bi dafay soppiku ci anam wu dëggu, di soppi pose, forme, wala expression. Dafa am solo ndax dafay tax ñu mëna jëfandikoo nataal bu leer te yomb te du soxla ay gliiseur, ay mask wala ay mbind.

DragGAN Interactive Editing bokk na ci liggéey yi ordinatër di def ngir tekki wala defar ay mejaa yuñy xool ngir jàngat, liggéey ak sos lu bees.

Plongeur bu xóot

DragGAN, bu bawoo ci Pan, Tewari, Leimkuhler ak ay naataango ci Max Planck ak ay naataango (SIGGRAPH 2023), dugal nañu soppali nataal yu GAN defar ci poñ yi. Jëfandikukat bi dafay def benn wala ñaari poñ 'jëfandikoo' ci kaw nataal bi ak poñ 'target' yi ko méngoo ci barab bi ñu wara toxu. DragGAN dafay nudge kode latent bi suko defee ëmbiit li ci suufu handle bu nekk di gliise ci mébet bi ci diir bi yeneen nataal yi di des coherent. Mën nga guddal tànki baayima, fexe ba nit muuñ, wëlbati oto, wala soppi kontuuru paysage, lépp danga koy diri. Li gëna am solo mooy coppite yi dañuy sargal manifold nataal biñ jàng, suko defee resultaa yi nekk yu dëggu, duñu yàq pixel yi. Mask buñu mëna tànn mooy tënk gox yiñ may ñu toxu, loolu mooy tax ñu mëna doxal seen bopp ci gox bi.

Gis-gis xarala

DragGAN dafay liggéey ci barabu GAN buñ tàggat bu njëkk. Dafay jëfandikoo ñaari jéego yuy wuutale: di wottu yëngu, biy soppi kodu nëbbu bi suko defee màndarga yi ci wetu jàppukaay bu nekk dem ci yoon wiñ ko bëgga, ak toppu poñ, biy toxal jàppukaay bi ngir topp màndarga biñ ko ancre ci jëfandikoo seetug dëkkandoo bi gëna jege ci kàrtu màndarga yi. Baamtu jéego yooyu dafay dox nataal bi ci GAN manifold bi, defar deformation yu nooy te dëggu.

Xam soppali weccoo xalaat ci DragGAN

DragGAN daf lay may nga soppali nataal ci diri ay poñ: jàpp benn barab nga diri ko ci target bi, nataal bi dafay soppiku ci anam wu dëggu, di soppi pose, forme, wala expression. Dafa am solo ndax dafay tax ñu mëna jëfandikoo nataal bu leer te yomb te du soxla ay gliiseur, ay mask wala ay mbind. DragGAN Interactive Editing bokk na ci liggéey yi ordinatër di def ngir tekki wala defar ay mejaa yuñy xool ngir jàngat, liggéey ak sos lu bees. Ngir tabax xam-xam bu xóot, jàppal DragGAN Interactive Editing ni xeetu liggéey, du benn man-man: leeral njariñ yi nga bëgg, leeral xalaat yi, ak tàqale li sistem bi mëna def ci anam wu wóor ak li ba leegi soxla àtteb kàngam.

Ci jëf, ekip yu am doole yiy jëfandikoo DragGAN Interactive Editing dañuy méngale njubte gi ak dëggantaanu liggéey bi, lu ci melni kalite done yi, faraasu leeraay bi, ak méngoo etiketu. Dañuy bind kritër yu leer ngir am ndam, natt leen ci done yu dëggu ak def liggéey, ba noppi ñu baamtu ci anamu ñàkka mëna seetlu, du ci benn yoon benchmark wins. Mooy barab bi xam-xam theorie bi di soppiku nekk kàttan buy yàgg ci produit yi, ci politik yi ak ci liggéey yi.

Visual IA mën na otomatise saytu, gis ak etiketu liggéey ci eskaal. Ci jamano jooju, yelleefi nataal ak nangu mën na nekk risku yoon sudee fimu bawoo leerul. Xeetu jëf bi gëna dëgër mooy boole gaawaayu jàngat ak disipline nguur: doxal pilote, jàpp firnde, siiwal dogal yi, ak wéy di yeesal kaaraange gi ci anam wi ñuy doxalee, li jëfandikukat bi di xaar, ak sàrti sàrt yi di jëm kanam.

njeextalu pexe

Visual IA mën na otomatise saytu, gis ak etiketu liggéey ci eskaal.

Visual IA mën na otomatise saytu, gis ak etiketu liggéey ci eskaal. Ci jëfandikoo yu am kalite bu kawe, loolu dañu koy tekki ci sàrti liggéey yuñ mëna natt, ay peggu boroom, ak ay xew-xewu xoolaat yu bari suko defee ekip yi mëna yokk wóolu seen bopp ci barabu yokk lu jaxasoo.

Ekipu kreatif yi mën nañu defar konsept yu gëna gaaw te duñu def lu bari ci loxo.

Ekipu kreatif yi mën nañu defar konsept yu gëna gaaw te duñu def lu bari ci loxo. Ci jëfandikoo yu am kalite bu kawe, loolu dañu koy tekki ci sàrti liggéey yuñ mëna natt, ay peggu boroom, ak ay xew-xewu xoolaat yu bari suko defee ekip yi mëna yokk wóolu seen bopp ci barabu yokk lu jaxasoo.

Liggéeyukaay yi mën nañu jëfandikoo siñaal nataal wala wideo yu jafewoon lool ci liggéey.

Liggéeyukaay yi mën nañu jëfandikoo siñaal nataal wala wideo yu jafewoon lool ci liggéey. Ci jëfandikoo yu am kalite bu kawe, loolu dañu koy tekki ci sàrti liggéey yuñ mëna natt, ay peggu boroom, ak ay xew-xewu xoolaat yu bari suko defee ekip yi mëna yokk wóolu seen bopp ci barabu yokk lu jaxasoo.

Ëlëgu soppali weccoo xalaat bu DragGAN

DragGAN moo jur liggéey bu gaaw ci topp, indi njiitu drag ci xeetu diffusion (lu melni DragDiffusion ak FreeDrag), yuy jëfandikoo nataal yu dëggu ak ëmbiit yu baaxul yu gëna am doole GANs kese. Xaarandil ni soppali drag nekk jumtukaay buñ miin ci losisel yiy sos mbir, boole ci mbind ak doxalinu gox, ba noppi yokk ko ci wideo ak 3D suko defee jëfandikukat yi mëna pose mbir ci kaadar yi wala ñu soppi jëmmu mbaal yi ci anam wu weccoo xalaat, lépp boole ci baña yàq fotorealism.

Doxal ci àdduna dëgg

Defar melokaanu kanam gi, wàllu xool bi, wala kawar gi sooy siiwal tombi kanam gi

Soppi pose ak jubluwaayu baayima wala oto, lu melni wëlbati oto wala soppali boppu gaynde

Xeetu nataali produit yi (guddaay, yaatal, wala dakkal mbir yi) ngir maquette jëmmal

Defar nataali paysage wala modd ci diri ay contour, lu ci melni soppi jëmmu tundu wala yéere yu méngoo

Modèlu jëfandikoo

DragGAN Soppali weccoo xalaat ci jëf

Soo bëggee soppali melokaanu nataal bi, wàll wi ngay xoole, wala kawar gi ngay siiwal poñ yi ci kanam gi.

Defar melokaanu nataal, xool yoon, wala kawar ci sëgg poñ kanam yi Ekip yi dañuy faral di am njariñ yu gëna baax suñu joxee threshold yu baax ci kanam, tëye yoonu escalation nit ngir jafe-jafe yi, ba noppi topp benefiis yi ak njuumte yi ci diir bi.

DragGAN Soppali weccoo xalaat ci jëf

Soppi pose ak jubluwaayu baayima wala oto, lu melni wëlbati oto wala soppali boppu gaynde gi.

Soppi pose ak jubluwaayu baayima wala oto, lu melni wëlbati oto wala defaraat boppu gaynde. Ekip yi dañuy faral di am njariñ yu gëna baax suñu joxee threshold yu baax ci kanam, tëye yoonu escalation nit ngir jafe-jafe yi, ba noppi topp njariñu produit yi ak njëgu njuumte yi ci diir bu gàtt.

DragGAN Soppali weccoo xalaat ci jëf

Soppali nataali produit yi (guddaay, yaatal, wala dakkal mbir yi) ngir maquette jëmmal.

Reshaping nataali produit (guddaay, yaatu, wala reposing mbir) ngir defar mockups Ekip yi dañuy faral di am njariñ yu gëna baax suñu joxee thresholds kalite ci kanam, tëye yoonu escalation nit ngir cases yu boor, ak topp njuréefi produit ak njëgu njuumte ci diir bi.

DragGAN Soppali weccoo xalaat ci jëf

Defar nataali paysage wala modd ci diri ay contour, lu ci melni soppi jëmmu tundu wala yéere yu méngoo.

Fine-tuning paysage wala nataali modd ci sëggal contour, lu melni soppi jëmmu tundu wala yéere fit Ekip yi dañuy faral di am njariñ yu gëna baax suñu joxee threshold yu baax ci kanam, tëye yoonu escalation nit ngir mbir yu am solo, ak topp njariñu produit ak njëgu njuumte ci diir bi.

Risk yi ak balustrade yi

!

Yelleefi nataal ak nangu mën na nekk risku yoon sudee fi ñu bawoo leerul.

!

Performance model bi mën na wuute ci leeraay bi, demographie bi ak environmaa bi.

!

Njuumteg positive yi mën nañu dem te kenn duko seetlu fileek xool wuñu buntu wóolu sa bopp.

Roadmap ngir samp gi

1

Mandargal kritërium nangug njub, woowaat ak njëgu njuumte.

Mandargal kritërium nangug njub, woowaat ak njëgu njuumte. Japp jéego bu nekk ni buntu firnde: sudee mattul kritër yi, noppali génne gi, tëj bërëb bi, ba noppi nga yaatal jëfandikoo gi.

2

Saytu ak done yu méngoo ak anam yi ñuy liggéeyee dëgg.

Saytu ak done yu méngoo ak anam yi ñuy liggéeyee dëgg. Japp jéego bu nekk ni buntu firnde: sudee mattul kritër yi, noppali génne gi, tëj bërëb bi, ba noppi nga yaatal jëfandikoo gi.

3

Yokk jàngat nit ngir xam fu wóorul dara wala am njeexital yu rëy.

Yokk jàngat nit ngir xam fu wóorul dara wala am njeexital yu rëy. Japp jéego bu nekk ni buntu firnde: sudee mattul kritër yi, noppali génne gi, tëj bërëb bi, ba noppi nga yaatal jëfandikoo gi.

4

Toppal model drift bi nga baaxal ko ginaaw bi kamera bi wala done yi soppeekoo.

Toppal model drift bi nga baaxal ko ginaaw bi kamera bi wala done yi soppeekoo. Japp jéego bu nekk ni buntu firnde: sudee mattul kritër yi, noppali génne gi, tëj bërëb bi, ba noppi nga yaatal jëfandikoo gi.

Weyal di banneexu