SıradakiSonraki rehber
Pix2Pix Görüntüden Görüntüye Çeviri
Görsel Yapay Zeka
Görsel Yapay Zeka KILAVUZU
CycleGAN Eşlenmemiş Çeviri
CycleGAN, eşleşen öncesi ve sonrası örnek çiftlerine ihtiyaç duymadan, görüntüleri iki görsel alan (atlardan zebralara veya fotoğraflardan resimlere) çevirmeyi öğrenir.
Bu kılavuzu dinleyinAI tarafından anlatılan · ~2 min
Bu sayfada2 dakika okuma
Genel Bakış
It matters because collecting paired training data is often impossible, and CycleGAN unlocks style transfer for messy real-world datasets.
Derin Dalış
2017 yılında Zhu, Park, Isola ve Efros tarafından tanıtılan CycleGAN, eşleşmemiş görüntüden görüntüye çeviriyi ele alıyor. Daha önceki yöntemlerin çoğu (pix2pix gibi) tam çiftlere ihtiyaç duyuyordu: fotoğrafla aynı sahne ve eskiz. CycleGAN, iki jeneratör (G, A alanını B'ye dönüştürür, F, B'yi tekrar A'ya dönüştürür) ve her alanda gerçekçiliği değerlendiren iki ayırıcı kullanarak bu gereksinimi ortadan kaldırır. Önemli olan döngü tutarlılığı kaybıdır: Bir at fotoğrafını zebraya çevirip geri çevirirseniz, orijinal atı kurtarmalısınız. Bu kısıtlama, oluşturucunun keyfi çıktılar icat etmesini engeller ve anlamlı, içeriği koruyan eşlemeleri zorlar. Yaz manzaralarını kışa, Monet resimlerini fotoğraflara ve elmaları portakallara dönüştürmesi meşhurdur; bunların hepsi birbiriyle ilgisiz iki görüntü yığınından öğrenilmiştir.
Gerçek Dünya Uygulaması
Eşleştirilmiş fotoğraf boyama örnekleri olmadan fotoğrafları Monet, Van Gogh veya Cezanne'ın resim stiline dönüştürmek
Film ve oyun öğeleri oluşturmak için yaz manzara fotoğraflarını kış manzaralarına (ve tam tersi) dönüştürme
Eşleştirilmiş hasta taramalarının kullanılamadığı tıbbi araştırmalarda MRI taramalarını CT benzeri görüntülere çevirme
Otonom araç algısını eğitmek için sentetik sürüş simülatörü görüntülerinin fotogerçekçi görünecek şekilde uyarlanması
CycleGAN Eşleştirilmemiş Çevirinin Geleceği
CycleGAN'ın temel fikri olan döngü tutarlılığı, daha keskin, daha çeşitli çıktılara sahip modelleri gürültüden arındırmak için GAN omurgalarını değiştiren difüzyon tabanlı yöntemler de dahil olmak üzere modern eşleştirilmemiş çeviri çalışmalarında varlığını sürdürmektedir. Araştırmacılar artık eşleştirilmemiş çeviriyi tıbbi görüntülemeye (tarama yöntemlerinin sentezlenmesi), kendi kendine sürüş simülasyonundan gerçek transfere yönelik alan uyarlamasına ve veri artırmaya uyguluyor. Nelerin değişip nelerin sabit kaldığı konusunda daha sıkı kontrole sahip olmanın yanı sıra döngü kısıtlamalarını metin koşullu dağılım düzenlemeyle harmanlayan hibrit yaklaşımlar bekleyebilirsiniz.
Uygulamaya koymak
Neden önemli?
- Hız ve ölçek. Visual AI, inceleme, algılama ve etiketleme görevlerini geniş ölçekte otomatikleştirebilir.
- Yapı seçimleri. Yaratıcı ekipler, daha az manuel revizyonla konseptleri daha hızlı prototipleyebilir.
- Ekip ve iş akışı. Operasyonlar, daha önce işlenmesi zor olan görüntü ve video sinyallerini kullanabilir.
Dikkat edin
- Kaynağın belirsiz olması durumunda görüntü hakları ve rıza yasal risk haline gelebilir.
- Model performansı aydınlatma, demografik özellikler ve ortamlara göre değişiklik gösterebilir.
- Güven eşikleri izlenmediği sürece yanlış pozitifler fark edilmeyebilir.
Sonraki adımlar
- Kesinlik, geri çağırma ve hata maliyetlerine ilişkin kabul kriterlerini tanımlayın.
- Gerçek üretim koşullarıyla eşleşen verilerle test edin.
- Düşük güvenirliğe sahip veya yüksek etkili tahminler için gerçek kişi tarafından yapılan incelemeyi ekleyin.
- Model kaymasını izleyin ve kamera veya veri kümesi değişikliklerinden sonra yeniden doğrulayın.
Keşfetmeye Devam Edin
Ücretsiz bülten
Günlük AI brifingini alın
Hafta içi her sabah sade İngilizce yazılmış, doğrulanmış üç yapay zeka hikayesi. Sonsuza kadar ücretsiz, reklam yok.
Hafta içi her gün bir e-posta. Tek tıklamayla aboneliğinizi iptal edin. Adresinizi asla satmayız veya paylaşmayız.
Kendinizi test edin
Take the CycleGAN Unpaired Translation quiz
Her yanıtla ilgili anında geri bildirim ve bir kursu geçtiğinizde doğrulanabilir bir kimliğe sahip paylaşılabilir bir sertifika.
Ücretsiz AI eğitimini destekleyin. AI Understanding, bir 501(c)(3) kâr amacı gütmeyen kuruluştur; hiçbir zaman reklam yoktur, ödeme duvarı yoktur. Bağış yap
Sık sorulan sorular
What is CycleGAN Unpaired Translation?
CycleGAN, eşleşen öncesi ve sonrası örnek çiftlerine ihtiyaç duymadan, görüntüleri iki görsel alan (atlardan zebralara veya fotoğraflardan resimlere) çevirmeyi öğrenir. Bu önemlidir çünkü eşleştirilmiş eğitim verilerinin toplanması çoğu zaman imkansızdır ve CycleGAN, karmaşık gerçek dünya veri kümeleri için stil aktarımının kilidini açar.
CycleGAN, pix2pix gibi daha önceki yöntemlerin çözemediği hangi önemli sorunu çözüyor?
CycleGAN'ın ana katkısı, tam çiftler yerine iki ilgisiz görüntü koleksiyonundan alanlar arasındaki eşlemeleri öğrenerek eşleştirilmemiş çeviridir.
Döngü tutarlılığı kaybı neyi zorunlu kılar?
Döngü tutarlılığı, F(G(x))'in x'e eşit olması gerektiği anlamına gelir: Zebraya dönüşen bir atın sırtı orijinal ata benzemelidir.
Standart bir CycleGAN kaç jeneratör kullanır?
CycleGAN, her çeviri yönü için bir tane (A'dan B'ye ve B'den A'ya) artı iki ayırıcı olmak üzere iki jeneratör kullanır.
CycleGAN genellikle ne tür bir ayırıcı kullanır?
CycleGAN, örtüşen yamaları gerçek veya sahte olarak değerlendiren ve yerel gerçekçiliği teşvik eden bir PatchGAN ayırıcı kullanır.
CycleGAN'a neden bazen kimlik kaybı ekleniyor?
Kimlik kaybı, bir görüntü zaten hedef alanda olduğunda gereksiz değişiklikleri cezalandırarak renklerin ve renk tonunun korunmasına yardımcı olur.
Öğrenmeye devam et
İlgili kılavuzlar
Bu konu için daha fazla rehber seçildi