Visual AI Itọsọna

DragGAN Ṣiṣatunkọ Ibanisọrọ

DragGAN jẹ ki o ṣatunkọ aworan kan nipa fifa awọn aaye gangan: gba aaye kan ki o fa si ibi ibi-afẹde kan, ati pe aworan naa bajẹ ni otitọ, iyipada iduro, apẹrẹ, tabi ikosile.

Gbọ si itọsọna yiiAI-ṣe afihan · ~2 min

Lori iwe yi2 min ka
  1. Akopọ
  2. Jin Dive
  3. Real-World imuse
  4. Ojo iwaju ti DragGAN Interactive Editing
  5. Fifi o sinu iwa
  6. Tesiwaju Ṣiṣawari
  7. Awọn ibeere ti a beere nigbagbogbo

Akopọ

O ṣe pataki nitori pe o jẹ ki kongẹ, ifọwọyi aworan ogbon inu ṣee ṣe laisi awọn ifaworanhan, awọn iboju-boju, tabi awọn itọnisọna ọrọ.

Jin Dive

DragGAN, lati Pan, Tewari, Leimkuhler ati awọn ẹlẹgbẹ ni Max Planck ati awọn alabaṣepọ (SIGGRAPH 2023), ṣe afihan iṣatunṣe ibaraẹnisọrọ ti o da lori aaye ti awọn aworan ti ipilẹṣẹ GAN. Olumulo naa gbe ọkan tabi diẹ sii awọn aaye 'mu' sori aworan ati awọn aaye 'afojusun' ti o baamu nibiti wọn yẹ ki o gbe. DragGAN lẹhinna nudgely koodu wiwaba ki akoonu ti o wa labẹ imudani kọọkan ṣe kikọja si ibi-afẹde rẹ nigba ti iyoku aworan naa duro ni ibamu. O le fa ẹsẹ ẹranko gigun, jẹ ki eniyan rẹrin musẹ, yi ọkọ ayọkẹlẹ kan, tabi yi awọn ibi-agbegbe ala-ilẹ, gbogbo rẹ nipasẹ fifa. Ni pataki, awọn atunṣe bọwọ fun ọpọlọpọ aworan ti o kọ ẹkọ, nitorinaa awọn abajade wa ni ojulowo kuku ju smearing awọn piksẹli. Boju-boju iyan ṣe ihamọ awọn agbegbe wo ni o gba ọ laaye lati gbe, fifun iṣakoso agbegbe to dara.

Real-World imuse

Ṣatunṣe ikosile aworan kan, itọsọna wiwo, tabi irundidalara nipasẹ fifa awọn aaye oju

Yiyipada iduro ẹranko tabi ọkọ ati iṣalaye, bii yiyi ọkọ ayọkẹlẹ kan tabi yiyi ori kiniun kan pada

Atunse awọn fọto ọja (gigun, fifẹ, tabi awọn nkan ti o tun pada) fun awọn ẹlẹgàn apẹrẹ

Ilẹ-ilẹ ti o dara julọ tabi awọn aworan aṣa nipasẹ fifa awọn ibi-afẹde, gẹgẹbi iyipada awọn apẹrẹ oke tabi ibamu aṣọ

Ojo iwaju ti DragGAN Interactive Editing

DragGAN tan iṣẹ ṣiṣe atẹle ni iyara ti n mu iṣakoso ti o da lori fa si awọn awoṣe itankale (bii DragDiffusion ati FreeDrag), eyiti o mu awọn fọto gidi ati akoonu lainidii mu ni agbara diẹ sii ju awọn GAN nikan lọ. Reti ṣiṣatunṣe fifa lati di ohun elo boṣewa ni sọfitiwia ẹda, ni idapo pẹlu ọrọ ati awọn iṣakoso agbegbe, ati gbooro si fidio ati 3D ki awọn olumulo le gbe awọn nkan han kọja awọn fireemu tabi tun ṣe awọn meshes ni ibaraenisepo, gbogbo lakoko ti o tọju fọtorealism.

Fifi o sinu iwa

Kini idi ti o ṣe pataki

  • Iyara ati iwọn. Visual AI le ṣe adaṣe adaṣe, wiwa, ati awọn iṣẹ ṣiṣe taagi ni iwọn.
  • Kọ awọn yiyan. Awọn ẹgbẹ ẹda le ṣe apẹrẹ awọn imọran yiyara pẹlu awọn atunyẹwo afọwọṣe diẹ.
  • Ẹgbẹ ati ṣiṣan iṣẹ. Awọn iṣẹ ṣiṣe le lo aworan ati awọn ifihan agbara fidio ti o nira tẹlẹ lati ṣiṣẹ.

Ṣọra fun

  • Awọn ẹtọ aworan ati igbanilaaye le di awọn eewu labẹ ofin ti o ba jẹ afihan.
  • Iṣe awoṣe le yatọ kọja ina, awọn ẹda eniyan, ati awọn agbegbe.
  • Awọn idaniloju eke le ma ṣe akiyesi ayafi ti a ba ṣe abojuto awọn ala igbẹkẹle.

Next awọn igbesẹ

  1. Ṣetumo awọn ibeere gbigba fun pipe, iranti, ati awọn idiyele aṣiṣe.
  2. Ṣe idanwo pẹlu data ti o baamu awọn ipo iṣelọpọ gidi.
  3. Ṣafikun atunyẹwo eniyan fun igbẹkẹle kekere tabi awọn asọtẹlẹ ipa-giga.
  4. Tọpinpin awoṣe ki o ṣe tunṣe lẹhin kamẹra tabi awọn ayipada datasetto.

Tesiwaju Ṣiṣawari

Ìwé ìròyìn ọfẹ

Gba ìkànìyàn AI ojoojúmọ́

Ìtàn AI mẹta tó jẹ́rìí ní gbogbo owurọ́ ọjọ́ iṣẹ́, kọ́wé ní Gẹ̀ẹ́sì tó rọrùn. Ọfẹ́ fún gbogbo àkókò, kò sí ìpolówó.

Ìmeèlì kan ní gbogbo ọjọ́ iṣẹ́. Yọkúrò ní ìkànìyàn ní ìkànìyàn kan. A kò ta tàbí pín àdírẹ́sì rẹ.

Ṣe idanwo fun ara rẹ

Take the DragGAN Interactive Editing quiz

Ìdáhùn lẹ́sẹ̀kẹsẹ̀ lórí gbogbo ìdáhùn, àti iwe-ẹ̀rí tó lè pin pẹ̀lú ID tó lè jẹ́rìí lẹ́yìn tí o bá kọ́ ẹ̀kọ́.

Bẹrẹ adanwo

Ṣe àtìlẹ́yìn ẹ̀kọ́ AI ọfẹ́. AI Understanding jẹ́ àjọ àìní èrè 501(c)(3) — kò sí ìpolówó, kò sí àkúnya owó, ní gbogbo àkókò. Ṣe ẹbun kan

Awọn ibeere ti a beere nigbagbogbo

Kini DragGAN Interactive Ṣiṣatunkọ?

DragGAN jẹ ki o ṣatunkọ aworan kan nipa fifa awọn aaye gangan: gba aaye kan ki o fa si ibi ibi-afẹde kan, ati pe aworan naa bajẹ ni otitọ, iyipada iduro, apẹrẹ, tabi ikosile. O ṣe pataki nitori pe o jẹ ki kongẹ, ifọwọyi aworan ogbon ṣee ṣe laisi awọn yiyọ, awọn iboju iparada, tabi awọn ifọrọranṣẹ.

Bawo ni olumulo kan ṣe ṣatunkọ aworan ni DragGAN?

Awọn atunṣe DragGAN ṣiṣẹ nipa gbigbe awọn aaye mimu ati fifa wọn si awọn ipo ibi-afẹde, sisọ aworan ni ibamu.

Kini awọn igbesẹ pataki meji ti DragGAN?

DragGAN ṣe abojuto iṣakoso išipopada miiran (awọn ẹya gbigbe si awọn ibi-afẹde) ati ipasẹ aaye (awọn ọwọ ibi-iṣatunṣe), aṣetunṣe titi o fi ṣe.

Kini idi ti awọn atunṣe DragGAN dabi ojulowo kuku ju smeared?

Nitori ifọwọyi ṣẹlẹ ni aaye wiwaba ti GAN ti a ti kọkọ tẹlẹ, awọn abajade wa lori ọpọlọpọ awọn aworan ojulowo.

Kini iboju iyan ni iṣakoso DragGAN?

Iboju-boju jẹ ki awọn olumulo ni ihamọ awọn atunṣe si awọn agbegbe ti a yan nitoribẹẹ iyokù aworan naa wa titi.

DragGAN ṣe afihan ni pataki ni ibi isere wo ni 2023?

DragGAN ni a tẹjade ni SIGGRAPH 2023, apejọ awọn aworan kọnputa oludari kan.