Visual AI Itọsọna

CycleGAN Itumọ Ailokun

CycleGAN kọ ẹkọ lati tumọ awọn aworan laarin awọn ibugbe wiwo meji (gẹgẹbi awọn ẹṣin si awọn abila, tabi awọn fọto si awọn kikun) lai nilo ibaamu ṣaaju-ati-lẹhin apẹẹrẹ awọn orisii.

2 min kakẹhin imudojuiwọn

Akopọ

It matters because collecting paired training data is often impossible, and CycleGAN unlocks style transfer for messy real-world datasets.

Jin Dive

Ti ṣe afihan ni ọdun 2017 nipasẹ Zhu, Park, Isola, ati Efros, CycleGAN koju itumọ aworan-si-aworan ti a ko so pọ. Pupọ julọ awọn ọna iṣaaju (bii pix2pix) nilo awọn orisii deede: iwoye kanna bi fọto ati bi aworan afọwọya kan. CycleGAN yọ ibeere yẹn kuro ni lilo awọn olupilẹṣẹ meji (G ṣe iyipada ašẹ A si B, F ṣe iyipada B pada si A) ati awọn iyasoto meji ti o ṣe idajọ otitọ ni agbegbe kọọkan. Aṣeyọri ni pipadanu aitasera ọmọ: ti o ba tumọ fọto ẹṣin si abila kan ti o tumọ rẹ pada, o yẹ ki o gba ẹṣin atilẹba pada. Ihamọra yii da olupilẹṣẹ duro lati dida awọn abajade lainidii ati ipa ti o nilari, awọn maapu ti n tọju akoonu. O jẹ olokiki yi awọn iwoye igba ooru si igba otutu, awọn aworan Monet sinu awọn fọto, ati awọn apples sinu awọn ọsan, gbogbo wọn kọ ẹkọ lati awọn akopọ aworan meji ti ko ni ibatan.

Imọ-imọ-ẹrọ

CycleGAN daapọ ipadanu ọta pẹlu ipadanu aitasera iyipo. Olupilẹṣẹ kọọkan dojukọ iyasoto PatchGAN ti o ṣe iyasọtọ awọn abulẹ aworan agbekọja bi gidi tabi iro kuku ju ṣe idajọ gbogbo aworan naa. Pipadanu ọmọ n fi agbara mu F (G (x)) nipa x ati G (F (y)) nipa y ni lilo ijiya atunkọ L1 kan. Pipadanu idanimọ yiyan ṣe itọju awọ nigbati aworan kan ti jẹ ti agbegbe ibi-afẹde. Awọn olupilẹṣẹ mejeeji ṣe ikẹkọ ni igbakanna, kọ ẹkọ awọn maapu onidakeji ti o jẹ ki eto wa mule.

Ipa Ilana

Iyara ati iwọn

Visual AI le ṣe adaṣe adaṣe, wiwa, ati awọn iṣẹ ṣiṣe taagi ni iwọn.

Kọ awọn yiyan

Awọn ẹgbẹ ẹda le ṣe apẹrẹ awọn imọran yiyara pẹlu awọn atunyẹwo afọwọṣe diẹ.

Ẹgbẹ ati ṣiṣan iṣẹ

Awọn iṣẹ ṣiṣe le lo aworan ati awọn ifihan agbara fidio ti o nira tẹlẹ lati ṣiṣẹ.

Ọjọ iwaju ti Itumọ Ailẹgbẹ CycleGAN

Ero pataki ti CycleGAN, aitasera iyika, n gbe laaye ni iṣẹ itumọ alaiṣẹpọ ode oni, pẹlu awọn ọna ti o da lori kaakiri ti o paarọ awọn ẹhin GAN fun sisọ awọn awoṣe pẹlu didan, awọn abajade oniruuru diẹ sii. Awọn oniwadi ni bayi lo itumọ ti a ko so pọ si aworan iṣoogun (awọn ọna ṣiṣe ọlọjẹ), aṣamubadọgba agbegbe fun kikopa ti ara ẹni-si-gbigbe gidi, ati imudara data. Reti iṣakoso wiwọ lori kini iyipada dipo ohun ti o wa titi, pẹlu awọn isunmọ arabara ti o dapọ awọn ihamọ ọmọ-ọwọ pẹlu ṣiṣatunṣe itọka ọrọ.

Real-World imuse

Yipada awọn fọto sinu ara kikun ti Monet, Van Gogh, tabi Cezanne laisi awọn apẹẹrẹ kikun fọto.

Yiyipada awọn fọto ala-ilẹ ooru sinu awọn iwoye igba otutu (ati ni idakeji) fun fiimu ati ẹda dukia ere

Itumọ awọn iwoye MRI si awọn aworan bi CT ninu iwadii iṣoogun nibiti awọn ọlọjẹ alaisan ti o so pọ ko si

Yiyipada aworan awakọ-simulator sintetiki lati wo ojulowo ojulowo fun ikẹkọ akiyesi ọkọ ayọkẹlẹ adase

Awọn ewu & Awọn ọna iṣọ

Awọn ẹtọ aworan ati igbanilaaye le di awọn eewu labẹ ofin ti o ba jẹ afihan.

Iṣe awoṣe le yatọ kọja ina, awọn ẹda eniyan, ati awọn agbegbe.

Awọn idaniloju eke le ma ṣe akiyesi ayafi ti a ba ṣe abojuto awọn ala igbẹkẹle.

Ilana Ilana imuse

1

Ṣetumo awọn ibeere gbigba fun pipe, iranti, ati awọn idiyele aṣiṣe.

2

Ṣe idanwo pẹlu data ti o baamu awọn ipo iṣelọpọ gidi.

3

Ṣafikun atunyẹwo eniyan fun igbẹkẹle kekere tabi awọn asọtẹlẹ ipa-giga.

4

Tọpinpin awoṣe ki o ṣe tunṣe lẹhin kamẹra tabi awọn ayipada datasetto.

Tesiwaju Ṣiṣawari

Free newsletter

Get the daily AI briefing

Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.

One email each weekday. Unsubscribe in one click. We never sell or share your address.

Test yourself

Take the CycleGAN Unpaired Translation quiz

Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.

Bẹrẹ adanwo

Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation

Itọsọna atẹle

Itumọ Aworan-si-Aworan Pix2Pix

Awọn ibeere ti a beere nigbagbogbo

What is CycleGAN Unpaired Translation?

CycleGAN kọ ẹkọ lati tumọ awọn aworan laarin awọn ibugbe wiwo meji (gẹgẹbi awọn ẹṣin si awọn abila, tabi awọn fọto si awọn kikun) lai nilo ibaamu ṣaaju-ati-lẹhin apẹẹrẹ awọn orisii. O ṣe pataki nitori gbigba data ikẹkọ isọpọ nigbagbogbo ko ṣee ṣe, ati pe CycleGAN ṣii gbigbe ara fun awọn ipilẹ data gidi-aye idoti.

Iṣoro bọtini wo ni CycleGAN yanju ti awọn ọna iṣaaju bii pix2pix ko le?

Idasi akọkọ ti CycleGAN jẹ itumọ aisọpọ, kikọ awọn aworan aworan laarin awọn agbegbe lati awọn akojọpọ aworan meji ti ko ni ibatan dipo awọn orisii gangan.

Kini isonu-aitasera ipadanu ṣe?

Iduroṣinṣin ọmọ tumọ si F(G(x)) yẹ ki o dọgba x: ẹṣin ti o yipada si abila ati ẹhin yẹ ki o dabi ẹṣin atilẹba.

Awọn olupilẹṣẹ melo ni CycleGAN boṣewa nlo?

CycleGAN nlo awọn olupilẹṣẹ meji, ọkan fun itọsọna itumọ kọọkan (A si B ati B si A), pẹlu awọn iyasọtọ meji.

Iru iyasoto wo ni CycleGAN maa n lo?

CycleGAN nlo iyasoto PatchGAN kan ti o ṣe idajọ awọn abulẹ agbekọja bi gidi tabi iro, ti n ṣe iyanju otitọ agbegbe.

Kini idi ti pipadanu idanimọ jẹ afikun nigbakan ni CycleGAN?

Pipadanu idanimọ jẹ ijiya awọn ayipada ti ko wulo nigbati aworan kan wa tẹlẹ ni agbegbe ibi-afẹde, ṣe iranlọwọ lati tọju awọn awọ ati tint.