InayofuataMwongozo unaofuata
Uhariri wa Picha wa Mazungumzo kwa Miundo ya Multimodal
AI ya kuona
Mwongozo wa AI unaoonekana
Uhariri wa Maagizo ya InstructPix2Pix
InstructPix2Pix hukuruhusu kuhariri picha kwa kuandika amri rahisi kama vile 'fanya iwe msimu wa baridi' au 'geuza paka kuwa mbwa', hakuna barakoa au zana za kuchagua zinazohitajika.
Sikiliza mwongozo huuInaonyeshwa na AI · ~2 min
Katika ukurasa huudk 2 kusoma
Muhtasari
Ilifundisha muundo wa uenezaji kufuata maagizo ya uhariri moja kwa moja.
Dive ya kina
InstructPix2Pix is a diffusion model conditioned on an input image and an editing instruction. Its authors constructed synthetic training pairs by using GPT-3 to generate instructions and Prompt-to-Prompt with Stable Diffusion to create edited image examples. They report that the trained model can apply user-written instructions to real images without per-example fine-tuning or inversion. This does not mean inference is a single network evaluation: diffusion sampling still uses iterative denoising. Two guidance scales trade instruction adherence against similarity to the source image, and the model can alter details beyond the requested edit, so review remains necessary.
Utekelezaji wa Ulimwengu Halisi
Mwanablogu anaandika 'ongeza majani ya msimu wa joto' ili kurudisha picha ya mandhari ya majira ya kiangazi kwa chapisho la msimu.
Muuzaji wa biashara ya mtandaoni anaagiza 'badilisha rangi ya shati iwe jeshi la baharini' ili kutoa lahaja za rangi za bidhaa kutoka kwa risasi moja.
Mwalimu anahariri picha ya kihistoria kwa 'kupaka rangi hii' ili kufanya picha ya kumbukumbu nyeusi na nyeupe iwe wazi kwa somo.
Mtayarishi wa meme anaamuru 'mweke mbwa miwani ya jua' bila kuficha uso wa mbwa mwenyewe.
Mustakabali wa Uhariri wa Maagizo ya InstructPix2Pix
Instruction-based editing can make image changes easier to request, but generative outputs still need review for unintended alterations, missing details, and unsupported historical claims.
Kuiweka katika vitendo
Kwa nini ni muhimu
- Kasi na kiwango. Visual AI inaweza kufanya ukaguzi, ugunduzi na kazi za kuweka lebo kiotomatiki kwa kiwango.
- Tengeneza chaguzi. Timu bunifu zinaweza kuiga dhana kwa haraka zaidi na masahihisho machache ya mikono.
- Timu na mtiririko wa kazi. Uendeshaji unaweza kutumia ishara za picha na video ambazo hapo awali zilikuwa ngumu kuchakata.
Jihadharini na
- Haki za picha na idhini zinaweza kuwa hatari za kisheria ikiwa asili haiko wazi.
- Utendaji wa muundo unaweza kutofautiana katika mwangaza, idadi ya watu na mazingira.
- Chanya za uwongo zinaweza kutotambuliwa isipokuwa viwango vya uaminifu vifuatiliwe.
Hatua zinazofuata
- Bainisha vigezo vya kukubalika vya usahihi, kumbukumbu na gharama za makosa.
- Jaribu kwa kutumia data inayolingana na hali halisi ya uzalishaji.
- Ongeza ukaguzi wa kibinadamu kwa utabiri wa chini au utabiri wa athari kubwa.
- Fuatilia mtindo wa kuteleza na uthibitishe upya baada ya mabadiliko ya kamera au mkusanyiko wa data.
Endelea Kuchunguza
Jarida halali
Pata taarifa ya kila siku ya AI
Hadithi tatu za AI zilizothibitishwa kila asubuhi ya wiki, zimetengenezwa kwa Kiingereza rahisi. Bila malipo daima, hakuna matangazo.
Barua pepe moja kila siku ya wiki. Jiondoe kwa bonyeza moja. Hatutauza au kushiriki anwani yako.
Jijaribu mwenyewe
Take the InstructPix2Pix Instruction Editing quiz
Maoni ya haraka juu ya kila jibu, na cheti kinachoweza kushirikishwa na kitambulisho kinachoweza kuthibitishwa baada ya kupita kozi.
Changia elimu ya AI bila malipo. AI Understanding ni 501(c)(3) isiyo na faida — hakuna matangazo, hakuna kizuizi cha malipo, daima. Toa mchango
Maswali yanayoulizwa mara kwa mara
Uhariri wa Maagizo ya InstructPix2Pix ni nini?
InstructPix2Pix hukuruhusu kuhariri picha kwa kuandika amri rahisi kama vile 'fanya iwe msimu wa baridi' au 'geuza paka kuwa mbwa', hakuna barakoa au zana za kuchagua zinazohitajika. Ilifundisha muundo wa uenezaji kufuata maagizo ya uhariri moja kwa moja.
Unaiambiaje InstructPix2Pix nini cha kubadilisha?
Unaandika tu maagizo kama 'ifanye iwe msimu wa baridi'; hakuna barakoa au uteuzi wa eneo unaohitajika.
Data ya mafunzo ya InstructPix2Pix iliundwaje?
Waandishi walichanganya jozi za nukuu zinazozalishwa na GPT-3 na usanisi wa picha wa Prompt-to-Prompt ili kuunda mara tatu kiotomatiki.
Je, mizani miwili ya mwongozo ya InstructPix2Pix inadhibiti nini?
Kiwango kimoja husimamia jinsi hariri inavyofuata maagizo; nyingine inasimamia ni kiasi gani cha picha chanzo kimehifadhiwa.
Kwa nini kielelezo huwa na kuacha sehemu ambazo hazijatajwa za picha pekee?
Maagizo yanalenga mabadiliko maalum, kwa hivyo mfano huhifadhi maeneo ambayo maagizo hayajataja.
Does InstructPix2Pix require separate per-image fine-tuning or inversion before applying an edit?
The paper describes applying the trained model to an image and instruction without per-example fine-tuning or inversion. The diffusion model still performs iterative denoising during inference.
Endelea kujifunza
Miongozo inayohusiana
Miongozo zaidi imechaguliwa kwa mada hii