InstructPix2Pix Tifaftirka Tilmaamaha
InstructPix2Pix wuxuu kuu ogolaanayaa inaad wax ka beddesho sawirka adigoo ku qoraya amar cad sida 'ka dhig jiilaalka' ama 'bisadda u rogo eey', majiro ama qalab doorasho looma baahna.
Dulmar
It taught a diffusion model to follow editing instructions directly.
quusid qoto dheer
InstructPix2Pix (Brooks et al., 2023) waa nooc faafin ah oo si fiican loo habeeyey si loo qaato sawir gelin iyo tilmaam qoraal ah oo soo saarta sawirka la tafatiray hal baas oo hore ah. Xeeladdeeda xariifnimada leh waa xogta tababarka: qorayaashu waxay adeegsadeen GPT-3 si ay u abuuraan lammaane qoraal ah ka hor iyo ka dib, ka dibna waxay isticmaaleen Degdega-To-Degdag leh Faafinta Deggan si ay u soo saaraan isbarbardhigga ka hor iyo ka dib lammaanaha sawirka. Taasi waxay siisay xog-ururin weyn oo ah (sawir asal ah, tilmaamid, sawir la tafatiray) oo saddex laab ah si ay ugu tababaraan, dhammaan iyaga oo aan lahayn sumadeynta gacanta. Sababtoo ah tilmaamuhu waxay qeexayaan isbeddelka halkii ay ka ahaan lahaayeen muuqaal buuxa, qaabku wuxuu ilaaliyaa qaybaha aan la xusin ee sawirka. Waxay isticmaashaa laba miisaan oo hagitaan ah, mid sida ugu dhow ee ay u raacayso tilmaamaha iyo mid sida daacadda ah ay ugu dheggan tahay sawirka asalka ah, taas oo u oggolaanaysa isticmaalayaasha inay ka beddelaan awoodda wax ka beddelka daacadnimada.
Aragtida Farsamada
Shuruudaha moodeelka ee sawirka isha iyo tilmaamaha labadaba, iyadoo la adeegsanayo hagitaan bilaash ah oo kala soocida oo ay la socdaan laba faas. Hal miisaan ayaa miisaamaya tilmaanta qoraalka, kan kalena waxa uu miisaamaa sawirka gelinta. Kor u qaadista miisaanka sawirku waxay ilaalinaysaa in badan oo asalka ah, halka sare u qaadida miisaanka qoraalka ay ka dhigayso tafatirka mid dagaal badan. Tilmaantan laba-geesoodka ah ayaa ah ta u oggolaanaysa hal tilmaamid guud si la isku halleyn karo u beddelo hal dhinac inta ka hadhaysa sawirka intiisa kale mid la aqoonsan karo.
Saamaynta Istiraatijiyadeed
Xawaaraha iyo miisaanka
Visual AI wuxuu si otomaatig ah u samayn karaa baadhista, ogaanshaha, iyo sumadaynta hawlaha miisaanka.
Xulashada dhismayaasha
Kooxaha hal-abuurka leh waxay hindise karaan fikradaha si dhakhso leh iyagoo leh dib-u-eegis buugeed yar.
Kooxda iyo socodka shaqada
Hawlgalladu waxay isticmaali karaan calaamadaha muuqaalka iyo muuqaalka kuwaas oo markii hore adkeyd in la farsameeyo.
Mustaqbalka InstructPix2Pix Tifaftirka Tilmaamaha
Tafatirka ku saleysan tilmaamaha ayaa noqonaya is-dhexgalka caadiga ah ee aaladaha sawirka, hadda lagu dubay abka caadiga ah iyo kuwa ku guulaysta sida MagicBrush iyo tifaftirayaasha-rogadka badan ee soo baxaya. Filo in si fiican loo xafido tafaasiisha wanaagsan, maaraynta la isku halayn karo ee tilmaamaha meelaha sida 'ka dhaqaaq laambada bidix', iyo fidinta fiidyaha aan kala go 'lahayn, halkaas oo hal amar uu tafatiro clip dhan. Isku-xidhka moodooyinkan iyo wakiilada luqadda waxay kuu ogolaan kartaa inaad si wada jir ah u sharaxdo fadhi tafatir buuxa.
Dhaqangelinta Adduunka-dhabta ah
Blogger-ku wuxuu noocyadiisa 'ku dar caleenta dayrta' si uu dib ugu mariyo sawirka muuqaalka xagaaga ee boostada xilliyeedka.
Iibiyaha e-commerce wuxuu farayaa 'midabka shaadhka u beddel badda' si ay u soo saaraan noocyo kala duwanaansho midab leh oo hal tallaal ah.
Macallinku wuxuu wax ka beddelaa sawir taariikhi ah oo leh 'midab ka dhig kan' si uu sawirka kaydka madow iyo caddaan uga dhigo mid cad oo cashar ah.
Hal-abuuraha meme wuxuu amar ku bixiyaa 'eyga saar muraayadaha qorraxda' iyada oo aan gacanta lagu qarin wejiga eyga.
Khatarta & Dariiqyada Ilaalada
Xuquuqda sawirka iyo ogolaanshaha waxay noqon kartaa khataro sharci ah haddii caddayntu aanay caddayn.
Waxqabadka moodeelku wuu ku kala duwanaan karaa iftiinka, tirakoobka, iyo deegaanka.
Wanaagga beenta ah waxa laga yaabaa inaan la dareemin ilaa xadka kalsoonida aan la kormeerin.
Qorshe Hawleedka Dhaqangelinta
Qeex shuruudaha aqbalida ee saxnaanta, dib u celinta, iyo kharashyada khaladka.
Ku tijaabi xogta ku habboon xaaladaha wax soo saarka dhabta ah.
Ku dar dib u eegis bini'aadamka si aad u hesho kalsoonida hoose ama saameeynta sare.
Lasoco moodeel dhaqaaqa oo dib u cusboonaysii kamarada ama xogta kaydinta ka dib.
Sii wad Sahaminta
Free newsletter
Get the daily AI briefing
Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.
One email each weekday. Unsubscribe in one click. We never sell or share your address.
Test yourself
Take the InstructPix2Pix Instruction Editing quiz
Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.
Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation
Hagaha xiga
DragGAN Tafatirka Isdhexgalka
Su'aalaha soo noqnoqda
What is InstructPix2Pix Instruction Editing?
InstructPix2Pix wuxuu kuu ogolaanayaa inaad wax ka beddesho sawirka adigoo ku qoraya amar cad sida 'ka dhig jiilaalka' ama 'bisadda u rogo eey', majiro ama qalab doorasho looma baahna. Waxay baray qaabka fidinta inuu si toos ah u raaco tilmaamaha tafatirka.
Sideed ugu sheegtaa InstructPix2Pix waxa la bedelayo?
Waxaad si fudud u qori kartaa tilmaanta sida 'ka dhig jiilaalka'; looma baahna waji-xidho ama doorasho gobol.
Sidee loo abuuray xogta tababarka InstructPix2Pix?
Qorayaashu waxay isku dareen GPT-3-soo saaray lammaane qoraal ah oo leh muuqaal degdeg ah oo degdeg ah si ay si toos ah u dhisaan saddex laab.
Maxay InstructPix2Pix labada miisaan hagitaan gacanta ku hayaan?
Hal miisaan ayaa xukumaya sida adag ee wax ka beddelku u raaco tilmaamaha; kan kale ayaa xukuma inta sawirka isha la xafiday.
Muxuu moodelku u janjeeraa inuu ka tago qaybaha aan la xusin ee sawirka oo keliya?
Wax-baridku waxay bartilmaameedsanayaan isbeddel gaar ah, markaa moodalku wuxuu ilaalinayaa gobollada waxbarashadu ma xusin.
Immisa baas oo hore ayuu InstructPix2Pix u baahan yahay si uu wax uga beddelo?
Waa hal nooc oo fidin shuruudeed ah kaas oo sawirka iyo tilmaamaha wada qaada oo soo saara tafatirka.