Visual AI Itọsọna

DragGAN Interactive Editing

DragGAN jẹ ki o ṣatunkọ aworan kan nipa fifa awọn aaye gangan: gba aaye kan ki o fa si ibi ibi-afẹde kan, ati pe aworan naa bajẹ ni otitọ, iyipada iduro, apẹrẹ, tabi ikosile.

Akopọ

DragGAN jẹ ki o ṣatunkọ aworan kan nipa fifa awọn aaye gangan: gba aaye kan ki o fa si ibi ibi-afẹde kan, ati pe aworan naa bajẹ ni otitọ, iyipada iduro, apẹrẹ, tabi ikosile. O ṣe pataki nitori pe o jẹ ki kongẹ, ifọwọyi aworan ogbon ṣee ṣe laisi awọn yiyọ, awọn iboju iparada, tabi awọn ifọrọranṣẹ.

Ṣiṣatunṣe Ibanisọrọ DragGAN jẹ ti awọn ṣiṣan iṣẹ-iriran kọnputa ti o tumọ tabi ṣe ipilẹṣẹ media wiwo fun itupalẹ, awọn iṣẹ ṣiṣe, ati ẹda.

Jin Dive

DragGAN, lati Pan, Tewari, Leimkuhler ati awọn ẹlẹgbẹ ni Max Planck ati awọn alabaṣepọ (SIGGRAPH 2023), ṣe afihan iṣatunṣe ibaraẹnisọrọ ti o da lori aaye ti awọn aworan ti ipilẹṣẹ GAN. Olumulo naa gbe ọkan tabi diẹ sii awọn aaye 'mu' sori aworan ati awọn aaye 'afojusun' ti o baamu nibiti wọn yẹ ki o gbe. DragGAN lẹhinna nudgely koodu wiwaba ki akoonu ti o wa labẹ imudani kọọkan ṣe kikọja si ibi-afẹde rẹ nigba ti iyoku aworan naa duro ni ibamu. O le fa ẹsẹ ẹranko gigun, jẹ ki eniyan rẹrin musẹ, yi ọkọ ayọkẹlẹ kan, tabi yi awọn ibi-agbegbe ala-ilẹ, gbogbo rẹ nipasẹ fifa. Ni pataki, awọn atunṣe bọwọ fun ọpọlọpọ aworan ti o kọ ẹkọ, nitorinaa awọn abajade wa ni ojulowo kuku ju smearing awọn piksẹli. Boju-boju iyan ṣe ihamọ awọn agbegbe wo ni o gba ọ laaye lati gbe, fifun iṣakoso agbegbe to dara.

Imọ-imọ-ẹrọ

DragGAN n ṣiṣẹ ni wiwakọ GAN ti a ti kọkọ tẹlẹ ati aaye ẹya. O nlo awọn igbesẹ yiyan meji: abojuto išipopada, eyiti o yi koodu wiwaba pada ki awọn ẹya ti o sunmọ mimu kọọkan gbe lọ si itọsọna ibi-afẹde, ati ipasẹ aaye, eyiti o tun mu mimu naa pada lati tẹle ẹya ti o ti daduro si lilo wiwa aladugbo ti o sunmọ ni awọn maapu ẹya. Tunṣe awọn igbesẹ wọnyi nrin aworan naa lẹgbẹẹ ọpọlọpọ GAN, ti n ṣe agbejade didan, awọn abuku ojulowo.

Mastering DragGAN Interactive Editing

DragGAN jẹ ki o ṣatunkọ aworan kan nipa fifa awọn aaye gangan: gba aaye kan ki o fa si ibi ibi-afẹde kan, ati pe aworan naa bajẹ ni otitọ, iyipada iduro, apẹrẹ, tabi ikosile. O ṣe pataki nitori pe o jẹ ki kongẹ, ifọwọyi aworan ogbon ṣee ṣe laisi awọn yiyọ, awọn iboju iparada, tabi awọn ifọrọranṣẹ. Ṣiṣatunṣe Ibanisọrọ DragGAN jẹ ti awọn ṣiṣan iṣẹ-iriran kọnputa ti o tumọ tabi ṣe ipilẹṣẹ media wiwo fun itupalẹ, awọn iṣẹ ṣiṣe, ati ẹda. Lati kọ oye ti o jinlẹ, tọju DragGAN Interactive Editing bi awoṣe iṣẹ, kii ṣe ẹya ẹyọkan: ṣalaye awọn abajade ti o fẹ, ṣe alaye awọn arosọ, ati ya sọtọ ohun ti eto le ṣe ni igbẹkẹle lati ohun ti o tun nilo idajọ amoye.

Ni iṣe, awọn ẹgbẹ ti o lagbara ni lilo deede iwọntunwọnsi Iṣatunṣe Ibanisọrọ DragGAN pẹlu awọn otitọ ṣiṣe bi didara data, iyatọ ina, ati isamisi aitasera. Wọn ṣe akọsilẹ awọn ibeere aṣeyọri ti o fojuhan, idanwo lodi si data ojulowo ati ṣiṣan iṣẹ, ati atunbere ti o da lori awọn ilana ikuna ti a ṣakiyesi dipo awọn bori ala-akoko kan. Eyi ni ibiti oye imọ-jinlẹ yipada si agbara ti o tọ kọja ọja, eto imulo, ati awọn iṣẹ ṣiṣe.

Visual AI le ṣe adaṣe adaṣe, wiwa, ati awọn iṣẹ ṣiṣe taagi ni iwọn. Ni akoko kanna, Awọn ẹtọ aworan ati ifọkansi le di awọn eewu labẹ ofin ti o ba jẹ afihan. Ọna resilient julọ julọ ni lati darapọ iyara idanwo pẹlu ibawi ijọba: ṣiṣe awọn awakọ awakọ, mu ẹri mu, ṣe atẹjade awọn iwe ipinnu, ati imudojuiwọn awọn aabo nigbagbogbo bi ihuwasi awoṣe, awọn ireti olumulo, ati awọn ibeere ilana ti dagbasoke.

Ipa Ilana

Visual AI le ṣe adaṣe adaṣe, wiwa, ati awọn iṣẹ ṣiṣe taagi ni iwọn.

Visual AI le ṣe adaṣe adaṣe, wiwa, ati awọn iṣẹ ṣiṣe taagi ni iwọn. Ni awọn imuṣiṣẹ ti o ni agbara giga, eyi ni a tumọ si awọn ofin iṣiṣẹ wiwọn, awọn aala nini, ati awọn ilana atunyẹwo loorekoore ki awọn ẹgbẹ le ṣe iwọn igbẹkẹle dipo iwọn aibikita.

Awọn ẹgbẹ ẹda le ṣe apẹrẹ awọn imọran yiyara pẹlu awọn atunyẹwo afọwọṣe diẹ.

Awọn ẹgbẹ ẹda le ṣe apẹrẹ awọn imọran yiyara pẹlu awọn atunyẹwo afọwọṣe diẹ. Ni awọn imuṣiṣẹ ti o ni agbara giga, eyi ni a tumọ si awọn ofin iṣiṣẹ wiwọn, awọn aala nini, ati awọn ilana atunyẹwo loorekoore ki awọn ẹgbẹ le ṣe iwọn igbẹkẹle dipo iwọn aibikita.

Awọn iṣẹ ṣiṣe le lo aworan ati awọn ifihan agbara fidio ti o nira tẹlẹ lati ṣiṣẹ.

Awọn iṣẹ ṣiṣe le lo aworan ati awọn ifihan agbara fidio ti o nira tẹlẹ lati ṣiṣẹ. Ni awọn imuṣiṣẹ ti o ni agbara giga, eyi ni a tumọ si awọn ofin iṣiṣẹ wiwọn, awọn aala nini, ati awọn ilana atunyẹwo loorekoore ki awọn ẹgbẹ le ṣe iwọn igbẹkẹle dipo iwọn aibikita.

Ojo iwaju ti DragGAN Interactive Editing

DragGAN tan iṣẹ ṣiṣe atẹle ni iyara ti n mu iṣakoso ti o da lori fa si awọn awoṣe itankale (bii DragDiffusion ati FreeDrag), eyiti o mu awọn fọto gidi ati akoonu lainidii mu ni agbara diẹ sii ju awọn GAN nikan lọ. Reti ṣiṣatunṣe fifa lati di ohun elo boṣewa ni sọfitiwia ẹda, ni idapo pẹlu ọrọ ati awọn iṣakoso agbegbe, ati gbooro si fidio ati 3D ki awọn olumulo le gbe awọn nkan han kọja awọn fireemu tabi tun ṣe awọn meshes ni ibaraenisepo, gbogbo lakoko ti o tọju fọtorealism.

Real-World imuse

Ṣatunṣe ikosile aworan kan, itọsọna wiwo, tabi irundidalara nipasẹ fifa awọn aaye oju

Yiyipada iduro ẹranko tabi ọkọ ati iṣalaye, bii yiyi ọkọ ayọkẹlẹ kan tabi yiyi ori kiniun kan pada

Atunse awọn fọto ọja (gigun, fifẹ, tabi awọn nkan ti o tun pada) fun awọn ẹlẹgàn apẹrẹ

Ilẹ-ilẹ ti o dara julọ tabi awọn aworan aṣa nipasẹ fifa awọn ibi-afẹde, gẹgẹbi iyipada awọn apẹrẹ oke tabi ibamu aṣọ

Awọn Ilana imuse

DragGAN Interactive Editing ni iwa

Ṣatunṣe ikosile aworan kan, itọsọna wiwo, tabi irundidalara nipasẹ fifa awọn aaye oju.

Ṣatunṣe ikosile aworan kan, itọsọna wiwo, tabi irundidalara nipasẹ fifa awọn aaye oju Awọn ẹgbẹ nigbagbogbo gba awọn abajade to dara julọ nigbati wọn ba ṣalaye awọn ilodi didara ni iwaju, tọju ọna igbega eniyan fun awọn ọran eti, ati tọpa awọn anfani iṣelọpọ mejeeji ati awọn idiyele aṣiṣe lori akoko.

DragGAN Interactive Editing ni iwa

Yiyipada iduro ẹranko tabi ọkọ ati iṣalaye, bii yiyi ọkọ ayọkẹlẹ kan tabi yiyi ori kiniun pada.

Yiyipada iduro ti ẹranko tabi ọkọ ati iṣalaye, bii yiyi ọkọ ayọkẹlẹ kan tabi yipo ori kiniun kan Awọn ẹgbẹ nigbagbogbo gba awọn abajade to dara julọ nigbati wọn ṣalaye awọn ilodi didara ni iwaju, tọju ọna igbega eniyan fun awọn ọran eti, ati tọpa mejeeji awọn anfani iṣelọpọ ati awọn idiyele aṣiṣe lori akoko.

DragGAN Interactive Editing ni iwa

Atunse awọn fọto ọja (gigun, fifẹ, tabi awọn nkan ti o tun pada) fun awọn ẹlẹgàn apẹrẹ.

Ṣiṣe atunṣe awọn fọto ọja (figun, fifẹ, tabi awọn nkan isọdọtun) fun awọn ẹlẹgàn apẹrẹ Awọn ẹgbẹ nigbagbogbo gba awọn abajade ti o dara julọ nigbati wọn ṣalaye awọn ilodiwọn didara ni iwaju, tọju ọna imudara eniyan fun awọn ọran eti, ati tọpa mejeeji awọn anfani iṣelọpọ ati awọn idiyele aṣiṣe lori akoko.

DragGAN Interactive Editing ni iwa

Ilẹ-ilẹ ti o dara-tuntun tabi awọn aworan aṣa nipasẹ fifa awọn ibi-afẹde, gẹgẹbi iyipada awọn apẹrẹ oke tabi ibamu aṣọ.

Ilẹ-ilẹ ti o dara-tuntun tabi awọn aworan aṣa nipasẹ fifa awọn ibi-afẹde, gẹgẹbi iyipada awọn apẹrẹ oke tabi ibamu aṣọ Awọn ẹgbẹ nigbagbogbo gba awọn abajade to dara julọ nigbati wọn ṣalaye awọn ilodi didara ni iwaju, tọju ọna igbega eniyan fun awọn ọran eti, ati tọpa mejeeji awọn anfani iṣelọpọ ati awọn idiyele aṣiṣe lori akoko.

Awọn ewu & Awọn ọna iṣọ

!

Awọn ẹtọ aworan ati igbanilaaye le di awọn eewu labẹ ofin ti o ba jẹ afihan.

!

Iṣe awoṣe le yatọ kọja ina, awọn ẹda eniyan, ati awọn agbegbe.

!

Awọn idaniloju eke le ma ṣe akiyesi ayafi ti a ba ṣe abojuto awọn ala igbẹkẹle.

Ilana Ilana imuse

1

Ṣetumo awọn ibeere gbigba fun pipe, iranti, ati awọn idiyele aṣiṣe.

Ṣetumo awọn ibeere gbigba fun pipe, iranti, ati awọn idiyele aṣiṣe. Ṣe itọju igbesẹ kọọkan bi ẹnu-ọna ẹri: ti awọn ibeere ko ba ni ibamu, daduro yiyọ kuro, pa aafo naa, ati lẹhinna faagun lilo.

2

Ṣe idanwo pẹlu data ti o baamu awọn ipo iṣelọpọ gidi.

Ṣe idanwo pẹlu data ti o baamu awọn ipo iṣelọpọ gidi. Ṣe itọju igbesẹ kọọkan bi ẹnu-ọna ẹri: ti awọn ibeere ko ba ni ibamu, daduro yiyọ kuro, pa aafo naa, ati lẹhinna faagun lilo.

3

Ṣafikun atunyẹwo eniyan fun igbẹkẹle kekere tabi awọn asọtẹlẹ ipa-giga.

Ṣafikun atunyẹwo eniyan fun igbẹkẹle kekere tabi awọn asọtẹlẹ ipa-giga. Ṣe itọju igbesẹ kọọkan bi ẹnu-ọna ẹri: ti awọn ibeere ko ba ni ibamu, daduro yiyọ kuro, pa aafo naa, ati lẹhinna faagun lilo.

4

Tọpinpin awoṣe ki o ṣe tunṣe lẹhin kamẹra tabi awọn ayipada datasetto.

Tọpinpin awoṣe ki o ṣe tunṣe lẹhin kamẹra tabi awọn ayipada datasetto. Ṣe itọju igbesẹ kọọkan bi ẹnu-ọna ẹri: ti awọn ibeere ko ba ni ibamu, daduro yiyọ kuro, pa aafo naa, ati lẹhinna faagun lilo.

Tesiwaju Ṣiṣawari