Overview
CycleGAN inodzidza kushandura mifananidzo pakati pezvikamu zviviri zvinoonekwa (semabhiza kuenda kumbizi, kana mafoto kumifananidzo) pasina kumboda akafananidzwa pamberi-uye-pashure pemuenzaniso peya. Izvo zvine basa nekuti kuunganidza paired dzidziso data kazhinji hazvigoneke, uye CycleGAN inovhura dhizaini yekuchinjisa kune yakashata-yepasirese dataset.
CycleGAN Unpaired Dudziro ndeyekombuta-yekuona workflows inodudzira kana kugadzira midhiya yekuona yekuongorora, mashandisirwo, uye kugadzira.
Deep Dive
Yakaunzwa muna 2017 naZhu, Park, Isola, uye Efros, CycleGAN inobata shandurudzo isina kupetwa yemufananidzo-ku-mufananidzo. Nzira dzekutanga (senge pix2pix) dzaida mapeya chaiwo: chiitiko chimwe chete semufananidzo uye se sketch. CycleGAN inobvisa icho chinodiwa uchishandisa majenareta maviri (G inoshandura domain A kuenda kuB, F inoshandura B kudzokera kuA) uye vasarura vaviri vanotonga huchokwadi mune imwe neimwe dura. Iko kubudirira ndiko kurasikirwa-kutenderera kurasikirwa: kana iwe ukashandura mufananidzo webhiza kune zebra uye woushandura uchidzoka, unofanirwa kudzoreredza bhiza rekutanga. Izvi zvinomisa jenareta kubva pakugadzira zvisina tsarukano zvinobuda uye zvinomanikidza zvine musoro, zvinochengetedza-zvinochengetedza mepu. Iyo ine mukurumbira inoshandura nzvimbo dzezhizha kuita nguva yechando, Monet pendi kuita mafoto, uye maapuro kuita maranjisi, zvese zvakadzidzwa kubva kune maviri asina hukama mapikicha.
Technical Insight
CycleGAN inosanganisa kurasikirwa kwemhandu nekutenderera-kusagadzikana kurasikirwa. Jenareta yega yega inotarisana nePatchGAN kusarura iyo inorongedza mapeji emifananidzo anopindirana seachokwadi kana emanyepo pane kutonga mufananidzo wese. Kurasikirwa kwekutenderera kunomanikidza F(G(x)) ingangoita x uye G(F(y)) ingangoita y uchishandisa mutongo wekuvaka patsva weL1. Kurasika kwekuzvisarudzira kunochengetedza ruvara kana mufananidzo watova wenzvimbo inotarirwa. Majenareta ese ari maviri anodzidzisa panguva imwe chete, achidzidzira mamepu anotenderedza anochengeta chimiro chakasimba.
Mastering CycleGAN Unpaired Dudziro
CycleGAN inodzidza kushandura mifananidzo pakati pezvikamu zviviri zvinoonekwa (semabhiza kuenda kumbizi, kana mafoto kumifananidzo) pasina kumboda akafananidzwa pamberi-uye-pashure pemuenzaniso peya. Izvo zvine basa nekuti kuunganidza paired dzidziso data kazhinji hazvigoneke, uye CycleGAN inovhura dhizaini yekuchinjisa kune yakashata-yepasirese dataset. CycleGAN Unpaired Dudziro ndeyekombuta-yekuona workflows inodudzira kana kugadzira midhiya yekuona yekuongorora, mashandisirwo, uye kugadzira. Kuti uvake kunzwisisa kwakadzama, bata CycleGAN Unpaired Translation semuenzaniso wekushandisa, kwete chinhu chimwe chete: tsanangura zvinodiwa, kujekesa fungidziro, uye patsanura zvinogona kuitwa nehurongwa hwakavimbika kubva pane zvichiri kuda kutonga kwenyanzvi.
Mukuita, zvikwata zvakasimba zvinoshandisa CycleGAN Unpaired Translation chiyero chechokwadi nemashandiro anoita semhando yedata, kusiyana kwemwenje, uye kuenderana kwemazita. Ivo vanonyora zvakajeka maitiro ebudiriro, bvunzo vachipokana ne data rechokwadi uye mafambiro ebasa, uye iterate zvichibva pane zvakacherechedzwa maitiro ekutadza kwete kuhwina-nguva imwe chete yebhenji. Apa ndipo apo kunzwisisa kwe theoretical kunoshanduka kuve kugona kwakasimba pane chigadzirwa, mutemo, uye mashandiro.
Visual AI inogona kuita otomatiki yekuongorora, yekuona, uye yekumaka mabasa pachiyero. Panguva imwecheteyo, kodzero dzeMufananidzo uye kubvumirwa kunogona kuve njodzi dzepamutemo kana hunhu husina kujeka. Nzira yakatsiga ndeyekubatanidza kukurumidza kuyedza nekutonga: mhanyisa vatyairi vendege, tora humbowo, buritsa matanda esarudzo, uye urambe uchivandudza chengetedzo semaitiro emuenzaniso, zvinotarisirwa nemushandisi, uye zvinodikanwa zvekutonga.
Strategic Impact
Visual AI inogona kuita otomatiki yekuongorora, yekuona, uye yekumaka mabasa pachiyero.
Visual AI inogona kuita otomatiki yekuongorora, yekuona, uye yekumaka mabasa pachiyero. Mukutumirwa kwemhando yepamusoro, izvi zvinoshandurirwa kuita mitemo inoyerwa yekushanda, miganhu yevaridzi, uye tsika dzekudzokorora dzinodzokororwa kuitira kuti zvikwata zvikwire kuvimba pane kukwidza kusajeka.
Zvikwata zvekugadzira zvinogona prototype pfungwa nekukurumidza nekudzokororwa kwemaoko mashoma.
Zvikwata zvekugadzira zvinogona prototype pfungwa nekukurumidza nekudzokororwa kwemaoko mashoma. Mukutumirwa kwemhando yepamusoro, izvi zvinoshandurirwa kuita mitemo inoyerwa yekushanda, miganhu yevaridzi, uye tsika dzekudzokorora dzinodzokororwa kuitira kuti zvikwata zvikwire kuvimba pane kukwidza kusajeka.
Mashandisirwo anogona kushandisa masaini emifananidzo nemavhidhiyo ayo aimbove akaoma kugadzirisa.
Mashandisirwo anogona kushandisa masaini emifananidzo nemavhidhiyo ayo aimbove akaoma kugadzirisa. Mukutumirwa kwemhando yepamusoro, izvi zvinoshandurirwa kuita mitemo inoyerwa yekushanda, miganhu yevaridzi, uye tsika dzekudzokorora dzinodzokororwa kuitira kuti zvikwata zvikwire kuvimba pane kukwidza kusajeka.
Real-World Implementation
Kushandura mafoto kuita dhizaini yekupenda yeMonet, Van Gogh, kana Cezanne pasina mienzaniso yependi yemifananidzo.
Kushandura mapikicha emamiriro echirimo kuita zviitiko zvechando (uye zvakapesana) zvemufirimu uye kugadzira asset yemutambo
Kushandura MRI scans kune CT-yakafanana mifananidzo mukutsvagisa kwekurapa uko varwere vakapetwa scans asipo.
Kugadzirisa yekugadzira kutyaira-simulator tsoka kuti itaridzike photorealistic yekudzidzira inozvimiririra yekuona mota
Maitiro Ekuita
CycleGAN Unpaired Dudziro mukuita
Kushandura mafoto kuita dhizaini yekupenda yeMonet, Van Gogh, kana Cezanne pasina mienzaniso yependi yemifananidzo.
Kushandura mafoto kuita dhizaini yekupenda yeMonet, Van Gogh, kana Cezanne pasina akapetwa mienzaniso yekupenda mapikicha Matimu anowanzo kuwana mibairo iri nani kana achinge atsanangura zvikumbaridzo zvemhando yepamusoro kumberi, chengetedza nzira yekukwira kwevanhu yemakesi emupendero, uye kuteedzera zvese zvakawanikwa zvechigadzirwa nemitengo yekukanganisa nekufamba kwenguva.
CycleGAN Unpaired Dudziro mukuita
Kushandura mapikicha emamiriro echirimo kuita zviitiko zvechando (uye zvakapesana) zvemufirimu uye kugadzira asset yemutambo.
Kushandura mafoto emamiriro ezhizha kuita zviitiko zvechando (uye zvinopesana) zvemufirimu nekugadzira zvinhu zvemitambo Matimu anowanzo kuwana mhedzisiro iri nani kana achinge atsanangura hunhu hwepamberi, chengetedza nzira yekukwira kwevanhu yemakesi ekumucheto, uye kuteedzera zvese zvakawanikwa mukubudirira uye kukanganisa mutengo nekufamba kwenguva.
CycleGAN Unpaired Dudziro mukuita
Kuturikira MRI scans kuenda kuCT-like mifananidzo mutsvakurudzo yezvokurapa uko kusingawanikwe varwere vakapetwa.
Kushandura MRI scans kune CT-semifananidzo mukutsvaga kwezvokurapa uko kusingawanikwe murwere anoongorora Matimu anowanzo kuwana mibairo iri nani kana achinge atsanangura hunhu hwepamusoro kumberi, chengetedza nzira yekukwira kwevanhu yemakesi emupendero, uye kuteedzera zvese zvakawanikwa mukubudirira uye kukanganisa mutengo nekufamba kwenguva.
CycleGAN Unpaired Dudziro mukuita
Kugadzirisa yekugadzira kutyaira-simulator tsoka kuti itaridzike photorealistic yekudzidzira inozvimiririra yekuona mota.
Kugadziridza yekugadzira yekutyaira-simulator tsoka kuti itaridzike fotorealistic yekudzidzira inozvimiririra yekuona mota Matimu anowanzo kuwana mhedzisiro iri nani kana achinge atsanangura emhando yepamusoro kumberi, chengetedza nzira yekukwira kwevanhu yemakesi ekumucheto, uye kuteedzera zvese zvakawanikwa zvechigadzirwa nemitengo yekukanganisa nekufamba kwenguva.
Njodzi & Guardrails
Kodzero dzemifananidzo uye kubvumirwa kunogona kuve njodzi dzepamutemo kana provenance isina kujeka.
Kuita kwemuenzaniso kunogona kusiyanisa kupenya, huwandu hwevanhu, uye nharaunda.
Manyepo enhema anogona kusacherechedzwa kunze kwekunge zvikumbaridzo zvekuvimba zvikatariswa.
Implementation Roadmap
Tsanangura maitiro ekugamuchirwa echokwadi, kurangarira, uye mutengo wekukanganisa.
Tsanangura maitiro ekugamuchirwa echokwadi, kurangarira, uye mutengo wekukanganisa. Bata nhanho yega yega segedhi rehumbowo: kana maitiro asina kusangana, imbomira kuburitsa, vhara gaka, uye wobva wawedzera kushandiswa.
Edzai nedata rinoenderana nemamiriro chaiwo ekugadzira.
Edzai nedata rinoenderana nemamiriro chaiwo ekugadzira. Bata nhanho yega yega segedhi rehumbowo: kana maitiro asina kusangana, imbomira kuburitsa, vhara gaka, uye wobva wawedzera kushandiswa.
Wedzera ongororo yemunhu kune yakaderera-kusavimbika kana yakakwirira-inokanganisa kufanotaura.
Wedzera ongororo yemunhu kune yakaderera-kusavimbika kana yakakwirira-inokanganisa kufanotaura. Bata nhanho yega yega segedhi rehumbowo: kana maitiro asina kusangana, imbomira kuburitsa, vhara gaka, uye wobva wawedzera kushandiswa.
Tevera modhi kudonha uye simbisa mushure mekuchinja kwekamera kana dataset.
Tevera modhi kudonha uye simbisa mushure mekuchinja kwekamera kana dataset. Bata nhanho yega yega segedhi rehumbowo: kana maitiro asina kusangana, imbomira kuburitsa, vhara gaka, uye wobva wawedzera kushandiswa.