PANDUAN AI Visual

Penyuntingan Interaktif DragGAN

DragGAN membolehkan anda mengedit imej dengan menyeret titik secara literal: ambil tempat dan seretnya ke sasaran, dan gambar berubah bentuk secara realistik, menukar pose, bentuk atau ekspresi.

Dengar panduan iniAI-diceritakan · ~2 min

Pada halaman ini2 min dibaca
  1. Gambaran keseluruhan
  2. Menyelam dalam
  3. Pelaksanaan Dunia Sebenar
  4. Masa Depan Penyuntingan Interaktif DragGAN
  5. Mempraktikkannya
  6. Teruskan Meneroka
  7. Soalan lazim

Gambaran keseluruhan

It matters because it makes precise, intuitive image manipulation possible without sliders, masks, or text prompts.

Menyelam dalam

DragGAN, daripada Pan, Tewari, Leimkuhler dan rakan sekerja di Max Planck dan rakan kongsi (SIGGRAPH 2023), memperkenalkan pengeditan interaktif berasaskan titik bagi imej janaan GAN. Pengguna meletakkan satu atau lebih mata 'pemegang' pada imej dan titik 'sasaran' yang sepadan di mana mereka harus bergerak. DragGAN kemudiannya menggeser kod pendam secara berulang supaya kandungan di bawah setiap pemegang meluncur ke arah sasarannya manakala imej yang lain kekal koheren. Anda boleh memanjangkan kaki haiwan, membuat seseorang tersenyum, memutarkan kereta atau menukar kontur landskap, semuanya dengan menyeret. Yang penting, suntingan menghormati manifold imej yang dipelajari, jadi hasil tetap realistik daripada memburukkan piksel. Topeng pilihan mengehadkan kawasan mana yang dibenarkan untuk bergerak, memberikan kawalan setempat yang baik.

Pelaksanaan Dunia Sebenar

Melaraskan ekspresi potret, arah pandangan atau gaya rambut dengan menyeret mata muka

Menukar pose dan orientasi haiwan atau kenderaan, seperti memutarkan kereta atau mengubah kedudukan kepala singa

Membentuk semula foto produk (memanjangkan, melebarkan atau meletakkan semula objek) untuk mockup reka bentuk

Memperhalusi imej landskap atau fesyen dengan menyeret kontur, seperti mengubah bentuk gunung atau pakaian yang sesuai

Masa Depan Penyuntingan Interaktif DragGAN

DragGAN mencetuskan kerja susulan pantas yang membawa kawalan berasaskan seretan kepada model penyebaran (seperti DragDiffusion dan FreeDrag), yang mengendalikan foto sebenar dan kandungan sewenang-wenangnya dengan lebih mantap daripada GAN sahaja. Jangkakan pengeditan seretan menjadi alat standard dalam perisian kreatif, digabungkan dengan kawalan teks dan rantau serta diperluaskan kepada video dan 3D supaya pengguna boleh menimbulkan objek merentasi bingkai atau membentuk semula jejaring secara interaktif, sambil mengekalkan fotorealisme.

Mempraktikkannya

Mengapa ia penting

  • Kelajuan dan skala. Visual AI boleh mengautomasikan tugas pemeriksaan, pengesanan dan penandaan pada skala.
  • Pilihan binaan. Pasukan kreatif boleh membuat prototaip konsep dengan lebih pantas dengan lebih sedikit semakan manual.
  • Pasukan dan aliran kerja. Operasi boleh menggunakan isyarat imej dan video yang sebelum ini sukar diproses.

Berhati-hati untuk

  • Hak imej dan persetujuan boleh menjadi risiko undang-undang jika asalnya tidak jelas.
  • Prestasi model boleh berbeza mengikut pencahayaan, demografi dan persekitaran.
  • Positif palsu mungkin tidak disedari melainkan ambang keyakinan dipantau.

Langkah seterusnya

  1. Tentukan kriteria penerimaan untuk ketepatan, ingatan semula dan kos ralat.
  2. Uji dengan data yang sepadan dengan keadaan pengeluaran sebenar.
  3. Tambahkan semakan manusia untuk ramalan keyakinan rendah atau berimpak tinggi.
  4. Jejaki hanyut model dan sahkan semula selepas perubahan kamera atau set data.

Teruskan Meneroka

Newsletter percuma

Dapatkan taklimat AI harian

Tiga cerita AI yang disahkan setiap pagi hari bekerja, ditulis dalam Bahasa Inggeris biasa. Percuma selamanya, tiada iklan.

Satu e-mel setiap hari bekerja. Berhenti melanggan dalam satu klik. Kami tidak pernah menjual atau berkongsi alamat anda.

Uji diri anda

Take the DragGAN Interactive Editing quiz

Maklum balas segera pada setiap jawapan, dan sijil yang boleh dikongsi dengan ID yang boleh disahkan sebaik sahaja anda lulus kursus.

Mulakan kuiz

Sokong pendidikan AI percuma. AI Understanding ialah pertubuhan bukan keuntungan 501(c)(3) — tiada iklan, tiada bayaran dinding, selamanya. Buat derma

Soalan lazim

What is DragGAN Interactive Editing?

DragGAN membolehkan anda mengedit imej dengan menyeret titik secara literal: ambil tempat dan seretnya ke sasaran, dan gambar berubah bentuk secara realistik, menukar pose, bentuk atau ekspresi. Ia penting kerana ia membolehkan manipulasi imej yang tepat dan intuitif tanpa peluncur, topeng atau gesaan teks.

Bagaimanakah pengguna mengedit imej dalam DragGAN?

Suntingan DragGAN berfungsi dengan meletakkan mata pemegang dan menyeretnya ke lokasi sasaran, mengubah bentuk imej dengan sewajarnya.

Apakah dua langkah teras berselang-seli DragGAN?

DragGAN menggantikan penyeliaan gerakan (ciri bergerak ke arah sasaran) dan penjejakan titik (penangan mencari semula), berulang sehingga selesai.

Mengapakah suntingan DragGAN kelihatan realistik dan bukannya dicalit?

Oleh kerana manipulasi berlaku dalam ruang terpendam GAN yang telah dilatih, output kekal pada manifold imej realistik.

Apakah yang dikawal oleh topeng pilihan dalam DragGAN?

Topeng membenarkan pengguna mengehadkan pengeditan pada kawasan yang dipilih supaya imej yang lain kekal tetap.

DragGAN telah dipersembahkan di tempat mana pada tahun 2023?

DragGAN telah diterbitkan di SIGGRAPH 2023, persidangan grafik komputer terkemuka.