Görsel Yapay Zeka KILAVUZU

DragGAN Etkileşimli Düzenleme

DragGAN, noktaları kelimenin tam anlamıyla sürükleyerek bir görüntüyü düzenlemenize olanak tanır: bir noktayı yakalayın ve onu bir hedefe sürükleyin; resim gerçekçi bir şekilde deforme olur, pozu, şekli veya ifadeyi değiştirir.

Bu kılavuzu dinleyinAI tarafından anlatılan · ~2 min

Bu sayfada2 dakika okuma
  1. Genel Bakış
  2. Derin Dalış
  3. Gerçek Dünya Uygulaması
  4. DragGAN Etkileşimli Düzenlemenin Geleceği
  5. Uygulamaya koymak
  6. Keşfetmeye Devam Edin
  7. Sık sorulan sorular

Genel Bakış

It matters because it makes precise, intuitive image manipulation possible without sliders, masks, or text prompts.

Derin Dalış

Pan, Tewari, Leimkuhler ve Max Planck'taki meslektaşları ve ortaklarından (SIGGRAPH 2023) DragGAN, GAN tarafından oluşturulan görüntülerin nokta tabanlı etkileşimli düzenlemesini tanıttı. Kullanıcı, bir görüntünün üzerine bir veya daha fazla 'tutma yeri' noktası ve bunların hareket etmesi gereken yere karşılık gelen 'hedef' noktaları yerleştirir. DragGAN daha sonra gizli kodu yinelemeli olarak iter, böylece her bir tutamacın altındaki içerik hedefine doğru kayarken görüntünün geri kalanı tutarlı kalır. Sürükleyerek bir hayvanın bacaklarını uzatabilir, bir insanı gülümsetebilir, bir arabayı döndürebilir veya bir manzaranın hatlarını değiştirebilirsiniz. Düzenlemelerin öğrenilen görüntü manifolduna saygı göstermesi çok önemlidir, böylece sonuçlar pikselleri lekelemek yerine gerçekçi kalır. İsteğe bağlı bir maske, hangi bölgelerin hareket etmesine izin verildiğini kısıtlayarak hassas yerel kontrol sağlar.

Gerçek Dünya Uygulaması

Yüz noktalarını sürükleyerek bir portrenin ifadesini, bakış yönünü veya saç stilini ayarlama

Bir arabayı döndürmek veya bir aslanın kafasını yeniden konumlandırmak gibi bir hayvanın veya aracın pozunu ve yönünü değiştirmek

Tasarım maketleri için ürün fotoğraflarını yeniden şekillendirme (nesneleri uzatma, genişletme veya yeniden konumlandırma)

Dağ şekillerini veya giysi uyumunu değiştirmek gibi konturları sürükleyerek manzara veya moda görüntülerine ince ayar yapma

DragGAN Etkileşimli Düzenlemenin Geleceği

DragGAN, gerçek fotoğrafları ve rastgele içeriği tek başına GAN'lardan daha güçlü bir şekilde işleyen difüzyon modellerine (DragDiffusion ve FreeDrag gibi) sürükleme tabanlı kontrol getiren hızlı takip çalışmasını ateşledi. Sürükleyerek düzenlemenin yaratıcı yazılımda standart bir araç haline gelmesini, metin ve bölge kontrolleriyle birleştirilmesini ve video ve 3D'ye genişletilmesini bekliyoruz; böylece kullanıcılar, fotogerçekçiliği korurken çerçeveler arasında nesneleri pozlayabilir veya kafesleri etkileşimli olarak yeniden şekillendirebilir.

Uygulamaya koymak

Neden önemli?

  • Hız ve ölçek. Visual AI, inceleme, algılama ve etiketleme görevlerini geniş ölçekte otomatikleştirebilir.
  • Yapı seçimleri. Yaratıcı ekipler, daha az manuel revizyonla konseptleri daha hızlı prototipleyebilir.
  • Ekip ve iş akışı. Operasyonlar, daha önce işlenmesi zor olan görüntü ve video sinyallerini kullanabilir.

Dikkat edin

  • Kaynağın belirsiz olması durumunda görüntü hakları ve rıza yasal risk haline gelebilir.
  • Model performansı aydınlatma, demografik özellikler ve ortamlara göre değişiklik gösterebilir.
  • Güven eşikleri izlenmediği sürece yanlış pozitifler fark edilmeyebilir.

Sonraki adımlar

  1. Kesinlik, geri çağırma ve hata maliyetlerine ilişkin kabul kriterlerini tanımlayın.
  2. Gerçek üretim koşullarıyla eşleşen verilerle test edin.
  3. Düşük güvenirliğe sahip veya yüksek etkili tahminler için gerçek kişi tarafından yapılan incelemeyi ekleyin.
  4. Model kaymasını izleyin ve kamera veya veri kümesi değişikliklerinden sonra yeniden doğrulayın.

Keşfetmeye Devam Edin

Ücretsiz bülten

Günlük AI brifingini alın

Hafta içi her sabah sade İngilizce yazılmış, doğrulanmış üç yapay zeka hikayesi. Sonsuza kadar ücretsiz, reklam yok.

Hafta içi her gün bir e-posta. Tek tıklamayla aboneliğinizi iptal edin. Adresinizi asla satmayız veya paylaşmayız.

Kendinizi test edin

Take the DragGAN Interactive Editing quiz

Her yanıtla ilgili anında geri bildirim ve bir kursu geçtiğinizde doğrulanabilir bir kimliğe sahip paylaşılabilir bir sertifika.

Testi başlat

Ücretsiz AI eğitimini destekleyin. AI Understanding, bir 501(c)(3) kâr amacı gütmeyen kuruluştur; hiçbir zaman reklam yoktur, ödeme duvarı yoktur. Bağış yap

Sık sorulan sorular

What is DragGAN Interactive Editing?

DragGAN, noktaları kelimenin tam anlamıyla sürükleyerek bir görüntüyü düzenlemenize olanak tanır: bir noktayı yakalayın ve onu bir hedefe sürükleyin; resim gerçekçi bir şekilde deforme olur, pozu, şekli veya ifadeyi değiştirir. Kaydırıcılar, maskeler veya metin istemleri olmadan hassas, sezgisel görüntü manipülasyonunu mümkün kıldığı için önemlidir.

Bir kullanıcı DragGAN'da bir görüntüyü nasıl düzenler?

DragGAN, tutma noktalarını yerleştirerek ve bunları hedef konumlara sürükleyerek görüntüyü buna göre deforme ederek işi düzenler.

DragGAN'ın iki alternatif temel adımı nedir?

DragGAN, hareket denetimini (özelliklerin hedeflere doğru taşınması) ve nokta takibini (tutamaçların yeniden konumlandırılması) dönüşümlü olarak gerçekleştirir ve tamamlanana kadar yinelenir.

DragGAN düzenlemeleri neden bulanık değil de gerçekçi görünüyor?

Manipülasyon önceden eğitilmiş bir GAN'ın gizli alanında gerçekleştiğinden, çıktılar gerçekçi görüntülerin manifoldunda kalır.

DragGAN'daki isteğe bağlı maske neyi kontrol eder?

Maske, kullanıcıların düzenlemeleri seçilen bölgelerle sınırlandırmasını sağlar, böylece görüntünün geri kalanı sabit kalır.

DragGAN 2023'te özellikle hangi mekanda tanıtıldı?

DragGAN, önde gelen bilgisayar grafikleri konferansı SIGGRAPH 2023'te yayınlandı.