Mwongozo wa AI unaoonekana

Tafsiri ya Picha kwa Picha ya Pix2Pix

Pix2Pix ni GAN ya masharti ambayo hujifunza kutafsiri aina moja ya picha hadi nyingine, kama vile kugeuza mchoro kuwa picha au ramani kuwa mwonekano wa setilaiti.

Sikiliza mwongozo huuInaonyeshwa na AI · ~2 min

Katika ukurasa huudk 2 kusoma
  1. Muhtasari
  2. Dive ya kina
  3. Utekelezaji wa Ulimwengu Halisi
  4. Mustakabali wa Tafsiri ya Picha kwa Picha ya Pix2Pix
  5. Kuiweka katika vitendo
  6. Endelea Kuchunguza
  7. Maswali yanayoulizwa mara kwa mara

Muhtasari

Ilianzisha kichocheo cha jumla cha kazi zilizooanishwa za utafsiri wa picha hadi picha.

Dive ya kina

Ilianzishwa na Isola na wenzake mnamo 2017, Pix2Pix inachukulia tafsiri kama kizazi cha masharti: picha ya ingizo yenyewe ndio sharti. Jenereta yake ni U-Net, encoder-decoder yenye miunganisho ya kuruka ambayo hubeba maelezo ya kiwango cha chini kama kingo moja kwa moja kutoka kwa ingizo hadi pato. Kibaguzi ni PatchGAN ambayo inahukumu uhalisia katika sehemu ndogo za ndani badala ya taswira nzima, ambayo inanoa unamu. Mafunzo huchanganya hasara ya kimaadili na hasara ya L1 (tofauti ya pikseli) ili matokeo yawe ya kweli na ya uaminifu kwa lengo. Jambo linalovutia ni kwamba Pix2Pix inahitaji data iliyooanishwa ya mafunzo, kumaanisha mifano ya matokeo ya pembejeo inayolingana, ambayo ilihamasisha ufuatiliaji kama vile CycleGAN ambao hujifunza kutokana na mikusanyo ambayo haijaoanishwa.

Utekelezaji wa Ulimwengu Halisi

Kubadilisha michoro ya ukingo inayochorwa kwa mkono kuwa vitu vya picha halisi kama vile mikoba au viatu

Kugeuza ramani za lebo za kisemantiki kuwa matukio halisi ya mitaani kwa muundo na uigaji

Kuweka rangi kwa picha nyeusi na nyeupe kiotomatiki

Kutafsiri vigae vya ramani za angani kuwa taswira ya setilaiti na nyuma

Mustakabali wa Tafsiri ya Picha kwa Picha ya Pix2Pix

Pix2Pix ilithibitisha kuwa usanifu mmoja unaweza kushughulikia matatizo mengi ya utafsiri, na wazo hilo hudumu. Ukoo hupitia ujifunzaji ambao haujaoanishwa wa CycleGAN, warithi wa azimio la juu kama vile pix2pixHD, na mfumo wa leo wa uenezaji na ControlNet unakaribia hali hiyo kwenye kingo, kina, au ramani za sehemu. Miundo inapopata vipaumbele zaidi, mahitaji ya data zilizooanishwa hulegea na tafsiri zinakuwa na uaminifu wa hali ya juu na kudhibitiwa zaidi, lakini Pix2Pix inasalia kuwa msingi wazi na mwepesi kwa kazi zilizooanishwa.

Kuiweka katika vitendo

Kwa nini ni muhimu

  • Kasi na kiwango. Visual AI inaweza kufanya ukaguzi, ugunduzi na kazi za kuweka lebo kiotomatiki kwa kiwango.
  • Tengeneza chaguzi. Timu bunifu zinaweza kuiga dhana kwa haraka zaidi na masahihisho machache ya mikono.
  • Timu na mtiririko wa kazi. Uendeshaji unaweza kutumia ishara za picha na video ambazo hapo awali zilikuwa ngumu kuchakata.

Jihadharini na

  • Haki za picha na idhini zinaweza kuwa hatari za kisheria ikiwa asili haiko wazi.
  • Utendaji wa muundo unaweza kutofautiana katika mwangaza, idadi ya watu na mazingira.
  • Chanya za uwongo zinaweza kutotambuliwa isipokuwa viwango vya uaminifu vifuatiliwe.

Hatua zinazofuata

  1. Bainisha vigezo vya kukubalika vya usahihi, kumbukumbu na gharama za makosa.
  2. Jaribu kwa kutumia data inayolingana na hali halisi ya uzalishaji.
  3. Ongeza ukaguzi wa kibinadamu kwa utabiri wa chini au utabiri wa athari kubwa.
  4. Fuatilia mtindo wa kuteleza na uthibitishe upya baada ya mabadiliko ya kamera au mkusanyiko wa data.

Endelea Kuchunguza

Jarida halali

Pata taarifa ya kila siku ya AI

Hadithi tatu za AI zilizothibitishwa kila asubuhi ya wiki, zimetengenezwa kwa Kiingereza rahisi. Bila malipo daima, hakuna matangazo.

Barua pepe moja kila siku ya wiki. Jiondoe kwa bonyeza moja. Hatutauza au kushiriki anwani yako.

Jijaribu mwenyewe

Take the Pix2Pix Image-to-Image Translation quiz

Maoni ya haraka juu ya kila jibu, na cheti kinachoweza kushirikishwa na kitambulisho kinachoweza kuthibitishwa baada ya kupita kozi.

Anza chemsha bongo

Changia elimu ya AI bila malipo. AI Understanding ni 501(c)(3) isiyo na faida — hakuna matangazo, hakuna kizuizi cha malipo, daima. Toa mchango

Maswali yanayoulizwa mara kwa mara

Tafsiri ya Picha hadi Picha ya Pix2Pix ni nini?

Pix2Pix ni GAN ya masharti ambayo hujifunza kutafsiri aina moja ya picha hadi nyingine, kama vile kugeuza mchoro kuwa picha au ramani kuwa mwonekano wa setilaiti. Ilianzisha kichocheo cha jumla cha kazi zilizooanishwa za kutafsiri picha-kwa-picha.

Je, Pix2Pix inahitaji aina gani ya data ya mafunzo?

Pix2Pix inahitaji jozi zinazolingana (k.m., mchoro na picha yake inayolingana), ndiyo maana CycleGAN iliundwa baadaye kwa data ambayo haijaoanishwa.

Je, Pix2Pix hutumia usanifu gani wa jenereta?

Pix2Pix hutumia programu ya kusimba ya U-Net ambayo miunganisho yake ya kuruka hupitisha maelezo ya kiwango cha chini moja kwa moja kutoka kwa ingizo hadi pato.

Je, kibaguzi wa PatchGAN katika Pix2Pix anatathmini nini?

PatchGAN inahukumu uhalisia kwa kiraka, ambayo inahimiza maumbo makali zaidi, yanayolingana ndani ya nchi.

Kwa nini Pix2Pix inaongeza upotezaji wa L1 kando ya upotezaji wa adui?

The paired L1 term anchors pixelwise or low-frequency correctness; the PatchGAN adversarial objective encourages realistic high-frequency texture.

Kwa nini miunganisho ya ruka ya U-Net inasaidia haswa kwa kazi za utafsiri?

Ingizo na pato mara nyingi hushiriki mpangilio na kingo, kwa hivyo ruka miunganisho hubeba maelezo hayo badala ya kuifinya kupitia kizuizi.