Visual AI Itọsọna

DragGAN Ṣiṣatunkọ Ibanisọrọ

DragGAN jẹ ki o ṣatunkọ aworan kan nipa fifa awọn aaye gangan: gba aaye kan ki o fa si ibi ibi-afẹde kan, ati pe aworan naa bajẹ ni otitọ, iyipada iduro, apẹrẹ, tabi ikosile.

2 min kakẹhin imudojuiwọn

Akopọ

O ṣe pataki nitori pe o jẹ ki kongẹ, ifọwọyi aworan ogbon inu ṣee ṣe laisi awọn ifaworanhan, awọn iboju-boju, tabi awọn itọnisọna ọrọ.

Jin Dive

DragGAN, lati Pan, Tewari, Leimkuhler ati awọn ẹlẹgbẹ ni Max Planck ati awọn alabaṣepọ (SIGGRAPH 2023), ṣe afihan iṣatunṣe ibaraẹnisọrọ ti o da lori aaye ti awọn aworan ti ipilẹṣẹ GAN. Olumulo naa gbe ọkan tabi diẹ sii awọn aaye 'mu' sori aworan ati awọn aaye 'afojusun' ti o baamu nibiti wọn yẹ ki o gbe. DragGAN lẹhinna nudgely koodu wiwaba ki akoonu ti o wa labẹ imudani kọọkan ṣe kikọja si ibi-afẹde rẹ nigba ti iyoku aworan naa duro ni ibamu. O le fa ẹsẹ ẹranko gigun, jẹ ki eniyan rẹrin musẹ, yi ọkọ ayọkẹlẹ kan, tabi yi awọn ibi-agbegbe ala-ilẹ, gbogbo rẹ nipasẹ fifa. Ni pataki, awọn atunṣe bọwọ fun ọpọlọpọ aworan ti o kọ ẹkọ, nitorinaa awọn abajade wa ni ojulowo kuku ju smearing awọn piksẹli. Boju-boju iyan ṣe ihamọ awọn agbegbe wo ni o gba ọ laaye lati gbe, fifun iṣakoso agbegbe to dara.

Imọ-imọ-ẹrọ

DragGAN n ṣiṣẹ ni wiwakọ GAN ti a ti kọkọ tẹlẹ ati aaye ẹya. O nlo awọn igbesẹ yiyan meji: abojuto išipopada, eyiti o yi koodu wiwaba pada ki awọn ẹya ti o sunmọ mimu kọọkan gbe lọ si itọsọna ibi-afẹde, ati ipasẹ aaye, eyiti o tun mu mimu naa pada lati tẹle ẹya ti o ti daduro si lilo wiwa aladugbo ti o sunmọ ni awọn maapu ẹya. Tunṣe awọn igbesẹ wọnyi nrin aworan naa lẹgbẹẹ ọpọlọpọ GAN, ti n ṣe agbejade didan, awọn abuku ojulowo.

Ipa Ilana

Iyara ati iwọn

Visual AI le ṣe adaṣe adaṣe, wiwa, ati awọn iṣẹ ṣiṣe taagi ni iwọn.

Kọ awọn yiyan

Awọn ẹgbẹ ẹda le ṣe apẹrẹ awọn imọran yiyara pẹlu awọn atunyẹwo afọwọṣe diẹ.

Ẹgbẹ ati ṣiṣan iṣẹ

Awọn iṣẹ ṣiṣe le lo aworan ati awọn ifihan agbara fidio ti o nira tẹlẹ lati ṣiṣẹ.

Ojo iwaju ti DragGAN Interactive Editing

DragGAN tan iṣẹ ṣiṣe atẹle ni iyara ti n mu iṣakoso ti o da lori fa si awọn awoṣe itankale (bii DragDiffusion ati FreeDrag), eyiti o mu awọn fọto gidi ati akoonu lainidii mu ni agbara diẹ sii ju awọn GAN nikan lọ. Reti ṣiṣatunṣe fifa lati di ohun elo boṣewa ni sọfitiwia ẹda, ni idapo pẹlu ọrọ ati awọn iṣakoso agbegbe, ati gbooro si fidio ati 3D ki awọn olumulo le gbe awọn nkan han kọja awọn fireemu tabi tun ṣe awọn meshes ni ibaraenisepo, gbogbo lakoko ti o tọju fọtorealism.

Real-World imuse

Ṣatunṣe ikosile aworan kan, itọsọna wiwo, tabi irundidalara nipasẹ fifa awọn aaye oju

Yiyipada iduro ẹranko tabi ọkọ ati iṣalaye, bii yiyi ọkọ ayọkẹlẹ kan tabi yiyi ori kiniun kan pada

Atunse awọn fọto ọja (gigun, fifẹ, tabi awọn nkan ti o tun pada) fun awọn ẹlẹgàn apẹrẹ

Ilẹ-ilẹ ti o dara julọ tabi awọn aworan aṣa nipasẹ fifa awọn ibi-afẹde, gẹgẹbi iyipada awọn apẹrẹ oke tabi ibamu aṣọ

Awọn ewu & Awọn ọna iṣọ

Awọn ẹtọ aworan ati igbanilaaye le di awọn eewu labẹ ofin ti o ba jẹ afihan.

Iṣe awoṣe le yatọ kọja ina, awọn ẹda eniyan, ati awọn agbegbe.

Awọn idaniloju eke le ma ṣe akiyesi ayafi ti a ba ṣe abojuto awọn ala igbẹkẹle.

Ilana Ilana imuse

1

Ṣetumo awọn ibeere gbigba fun pipe, iranti, ati awọn idiyele aṣiṣe.

2

Ṣe idanwo pẹlu data ti o baamu awọn ipo iṣelọpọ gidi.

3

Ṣafikun atunyẹwo eniyan fun igbẹkẹle kekere tabi awọn asọtẹlẹ ipa-giga.

4

Tọpinpin awoṣe ki o ṣe tunṣe lẹhin kamẹra tabi awọn ayipada datasetto.

Tesiwaju Ṣiṣawari

Free newsletter

Get the daily AI briefing

Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.

One email each weekday. Unsubscribe in one click. We never sell or share your address.

Test yourself

Take the DragGAN Interactive Editing quiz

Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.

Bẹrẹ adanwo

Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation

Itọsọna atẹle

Tune-A-Video Ọkan-Shot Ṣatunkọ

Awọn ibeere ti a beere nigbagbogbo

Kini DragGAN Interactive Ṣiṣatunkọ?

DragGAN jẹ ki o ṣatunkọ aworan kan nipa fifa awọn aaye gangan: gba aaye kan ki o fa si ibi ibi-afẹde kan, ati pe aworan naa bajẹ ni otitọ, iyipada iduro, apẹrẹ, tabi ikosile. O ṣe pataki nitori pe o jẹ ki kongẹ, ifọwọyi aworan ogbon ṣee ṣe laisi awọn yiyọ, awọn iboju iparada, tabi awọn ifọrọranṣẹ.

Bawo ni olumulo kan ṣe ṣatunkọ aworan ni DragGAN?

Awọn atunṣe DragGAN ṣiṣẹ nipa gbigbe awọn aaye mimu ati fifa wọn si awọn ipo ibi-afẹde, sisọ aworan ni ibamu.

Kini awọn igbesẹ pataki meji ti DragGAN?

DragGAN ṣe abojuto iṣakoso išipopada miiran (awọn ẹya gbigbe si awọn ibi-afẹde) ati ipasẹ aaye (awọn ọwọ ibi-iṣatunṣe), aṣetunṣe titi o fi ṣe.

Kini idi ti awọn atunṣe DragGAN dabi ojulowo kuku ju smeared?

Nitori ifọwọyi ṣẹlẹ ni aaye wiwaba ti GAN ti a ti kọkọ tẹlẹ, awọn abajade wa lori ọpọlọpọ awọn aworan ojulowo.

Kini iboju iyan ni iṣakoso DragGAN?

Iboju-boju jẹ ki awọn olumulo ni ihamọ awọn atunṣe si awọn agbegbe ti a yan nitoribẹẹ iyokù aworan naa wa titi.

DragGAN ṣe afihan ni pataki ni ibi isere wo ni 2023?

DragGAN ni a tẹjade ni SIGGRAPH 2023, apejọ awọn aworan kọnputa oludari kan.