LaMa Çözünürlüğü-Sağlam İç Boyama
LaMa (Büyük Maske iç boyama), delik çok büyük olduğunda bile görüntünün eksik veya kaldırılmış bölgelerini temiz bir şekilde dolduran hızlı, hafif bir sinir ağıdır.
Genel Bakış
It matters because it produces convincing fills at resolutions far higher than it was trained on, making professional object removal accessible to anyone.
Derin Dalış
Samsung AI araştırmacıları tarafından 2021'de tanıtılan LaMa, uzun süredir devam eden bir sorunu çözüyor: çoğu iç boyama modeli, büyük maskeleri veya tuğla duvarlar ve fayans zeminler gibi tekrarlayan dokuları doldurması istendiğinde lekeleniyor veya bulanıklaşıyor. Onun çığır açıcı özelliği, düzinelerce yığılmış evrişime ihtiyaç duymak yerine ağa tek bir katmanda küresel bir alıcı alan sağlayan Hızlı Fourier Evrişimlerini (FFC'ler) kullanmasıdır. Bu, LaMa'nın tüm görüntüyü aynı anda 'görmesine' ve periyodik yapıları tutarlı bir şekilde sürdürmesine olanak tanır. Kendisi geniş alıcı alanları kullanan bir ağa dayalı olarak, düşmanca kayıp ve algısal kaybın bir kombinasyonu ile eğitilir. Sonuç oldukça iyi bir genelleme yapıyor ve genellikle 2K görüntüleri yalnızca daha küçük mahsuller üzerinde eğitimden sonra temiz bir şekilde iç boyama yapıyor.
Teknik Bilgi
Anahtar bileşen Hızlı Fourier Evrişimidir. Normal bir evrişim yalnızca küçük bir yerel yamaya bakar, dolayısıyla uzun menzilli yapıyı yakalamak çok derin bir ağ gerektirir. FFC, özellik haritasının bir kısmını frekans alanına dönüştürür, burada bir evrişim uygular ve ardından geri dönüştürür. Frekans alanı işlemleri doğası gereği küresel olduğundan, tek bir FFC katmanı tüm görüntüdeki bilgileri karıştırarak LaMa'nın dokuları tekrarlamasına ve duvar kenarları gibi küresel geometriye saygı duymasına yardımcı olur.
Stratejik Etki
Speed and scale
Visual AI, inceleme, algılama ve etiketleme görevlerini geniş ölçekte otomatikleştirebilir.
Build choices
Yaratıcı ekipler, daha az manuel revizyonla konseptleri daha hızlı prototipleyebilir.
Ekip ve iş akışı
Operasyonlar, daha önce işlenmesi zor olan görüntü ve video sinyallerini kullanabilir.
LaMa Çözünürlüğün Geleceği - Sağlam İç Boyama
LaMa güçlü, verimli bir temel olmaya devam ediyor ve devasa bir yayılma modeli olmadan mütevazı bir donanım üzerinde hızlı çalıştığı için ücretsiz araçlara ve açık kaynaklı fotoğraf düzenleyicilere geniş ölçüde yerleştirilmiştir. Trend hibrit boru hatlarıdır: Anlık yapısal dolgular ve kaba taslaklar için LaMa'yı kullanın, ardından isteğe bağlı olarak ayrıntıları bir difüzyon modeliyle iyileştirin. Fourier evrişimi fikrinin, hızın ve düşük belleğin en önemli olduğu gerçek zamanlı düzenleme, video karesi onarımı ve cihaz içi mobil fotoğraf temizlemede görünmeye devam etmesini bekleyin.
Gerçek Dünya Uygulaması
Arka plan duvarını veya gökyüzünü kusursuz tutarken turistleri veya fotoğraf bombacılarını seyahat fotoğraflarından çıkarma
Meşru restorasyon çalışmaları için resimlerden filigranların, zaman damgalarının veya logoların silinmesi
Emlak listeleme fotoğraflarından elektrik hatlarını ve sokak tabelalarını silme
Çizikleri, yırtıkları ve eksik köşeleri doldurarak eski veya hasar görmüş taranmış fotoğrafları geri yükleme
Riskler ve Korkuluklar
Kaynağın belirsiz olması durumunda görüntü hakları ve rıza yasal risk haline gelebilir.
Model performansı aydınlatma, demografik özellikler ve ortamlara göre değişiklik gösterebilir.
Güven eşikleri izlenmediği sürece yanlış pozitifler fark edilmeyebilir.
Uygulama Yol Haritası
Kesinlik, geri çağırma ve hata maliyetlerine ilişkin kabul kriterlerini tanımlayın.
Gerçek üretim koşullarıyla eşleşen verilerle test edin.
Düşük güvenirliğe sahip veya yüksek etkili tahminler için gerçek kişi tarafından yapılan incelemeyi ekleyin.
Model kaymasını izleyin ve kamera veya veri kümesi değişikliklerinden sonra yeniden doğrulayın.
Keşfetmeye Devam Edin
Free newsletter
Get the daily AI briefing
Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.
One email each weekday. Unsubscribe in one click. We never sell or share your address.
Test yourself
Take the LaMa Resolution-Robust Inpainting quiz
Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.
Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation
Next guide
CodeFormer Sağlam Yüz Kurtarma
Sık sorulan sorular
What is LaMa Resolution-Robust Inpainting?
LaMa (Büyük Maske iç boyama), delik çok büyük olduğunda bile görüntünün eksik veya kaldırılmış bölgelerini temiz bir şekilde dolduran hızlı, hafif bir sinir ağıdır. Bu önemlidir çünkü eğitildiğinden çok daha yüksek çözünürlüklerde ikna edici dolgular üretir ve profesyonel nesne kaldırma işleminin herkes tarafından erişilebilir olmasını sağlar.
LaMa'ya bir görüntüye küresel bakış açısı kazandıran imza niteliğindeki mimari bileşen nedir?
LaMa, tek bir katmanda küresel bir alıcı alan sağlamak için kısmen frekans alanında çalışan Hızlı Fourier Evrişimlerini (FFC'ler) kullanır.
LaMa neden büyük maskeleri önceki birçok iç boyama modelinden daha iyi kullanıyor?
FFC'ler görüntünün tamamını aynı anda gördüğü için LaMa, çok büyük eksik bölgelerde bile dokuları ve geometriyi tutarlı bir şekilde sürdürebilir.
LaMa'nın dikkate değer bir gücü, görüntüleri ne tür bir çözünürlükte boyama yeteneğidir?
LaMa, eğitim sırasında görülenlerden daha yüksek çözünürlüklere iyi bir şekilde genelleme yapar; bu nedenle buna çözünürlük açısından sağlam denir.
LaMa, frekans alanı işlemesi sayesinde özellikle ne tür dokuları iyi işliyor?
Frekans alanı kıvrımları periyodik desenlere çok uygundur, bu nedenle LaMa tuğla duvarlar ve fayanslı zeminler gibi dokuları temiz bir şekilde tekrarlamaya devam eder.
Hangi kayıp LaMa'nın bulanık ortalamalar yerine gerçekçi görünen dolgular üretmesine yardımcı olur?
LaMa, düşmanca ve algısal kayıpları birleştirerek bulanık ortalama pikseller yerine keskin, makul dokuları teşvik eder.