SıradakiSonraki rehber
Gizli Difüzyon Modelleri
Görsel Yapay Zeka
Görsel Yapay Zeka KILAVUZU
GLIDE, istemlerin yanı sıra 'sınıflandırıcısız yönlendirmenin' daha önceki GAN tabanlı sistemleri yenebileceğini gösteren eski bir OpenAI metinden görüntüye yayılma modeliydi.
Bu kılavuzu dinleyinAI tarafından anlatılan · ~2 min
DALL-E 2'ye giden yolda önemli bir basamaktı.
Released by OpenAI in late 2021, GLIDE (Guided Language to Image Diffusion for Generation and Editing) demonstrated that diffusion models guided by text could produce photorealistic, prompt-faithful images. Its biggest contribution was comparing two ways to steer generation: CLIP guidance versus classifier-free guidance. The team found classifier-free guidance produced more realistic and better-aligned images, a result that shaped nearly every text-to-image model since. GLIDE also supported text-driven inpainting, letting users edit part of an image with a new prompt. It used a 3.5-billion-parameter diffusion model plus an upsampler. OpenAI released a smaller, filtered version publicly while withholding the full model over misuse concerns, and the DALL-E 2 research paper describes an unCLIP decoder that modifies the GLIDE architecture to accept CLIP-image conditioning.
Tanımlanan bir sahne gibi bir cümleden, erkenden hızlı ve sadık bir sentez sergileyen bir görüntü oluşturma
Metin odaklı iç boyama: fotoğrafın bir kısmını maskelemek ve onu kelimelerle tanımlanan yeni bir nesneyle doldurmak
Takip istemi yoluyla öğe ekleyerek veya değiştirerek mevcut bir görüntüyü düzenleme
Sınıflandırıcısız rehberliğin hizalama için CLIP rehberliğinden üstün olduğunu kanıtlayan bir araştırma temeli olarak hizmet etmek
GLIDE'ın kendisi büyük ölçüde tarihseldir ve yerini DALL-E 2, Imagen ve Stable Diffusion almıştır, ancak fikirleri her yerde varlığını sürdürmektedir. Sınıflandırıcısız rehberlik, aslına uygunluk ve çeşitlilikten ödün vermek için varsayılan düğme olmaya devam ediyor ve metin odaklı iç boyama artık standart. Gelecekteki sistemler rehberlik programlarını iyileştirmeye, güçlü rehberlik nedenlerini azaltmaya ve aynı ilkeleri video ve 3D yayılımına genişletmeye devam ediyor, böylece GLIDE'ın etkisi modelden daha uzun ömürlü olacak.
Ücretsiz bülten
Hafta içi her sabah sade İngilizce yazılmış, doğrulanmış üç yapay zeka hikayesi. Sonsuza kadar ücretsiz, reklam yok.
Hafta içi her gün bir e-posta. Tek tıklamayla aboneliğinizi iptal edin. Adresinizi asla satmayız veya paylaşmayız.
Kendinizi test edin
Her yanıtla ilgili anında geri bildirim ve bir kursu geçtiğinizde doğrulanabilir bir kimliğe sahip paylaşılabilir bir sertifika.
Ücretsiz AI eğitimini destekleyin. AI Understanding, bir 501(c)(3) kâr amacı gütmeyen kuruluştur; hiçbir zaman reklam yoktur, ödeme duvarı yoktur. Bağış yap
GLIDE, istemlerin yanı sıra 'sınıflandırıcısız yönlendirmenin' daha önceki GAN tabanlı sistemleri yenebileceğini gösteren eski bir OpenAI metinden görüntüye yayılma modeliydi. Bu, DALL-E 2'ye giden yolda önemli bir basamaktı.
GLIDE, sınıflandırıcısız rehberliğin CLIP rehberliğine göre daha gerçekçi ve daha uyumlu sonuçlar verdiğini gösterdi.
The full research model used a 3.5-billion-parameter base diffusion model with a separate upsampling stage.
Model, hem gerçek hem de boş istemler üzerinde eğitim alarak koşullu ve koşulsuz oluşturmayı öğrenir ve ardından örnekleme sırasında bunlar arasında tahminde bulunur.
The paper describes adding CLIP-image conditioning to a modified GLIDE architecture for its unCLIP decoder; this is a concrete architectural relationship.
OpenAI, yanlış kullanım endişeleri nedeniyle tam modeli sakladı ve bunun yerine filtrelenmiş, daha küçük bir varyantı yayınladı.
Öğrenmeye devam et
Bu konu için daha fazla rehber seçildi
SıradakiSonraki rehber
Gizli Difüzyon Modelleri
Görsel Yapay Zeka