التاليالدليل التالي
نماذج الانتشار الكامن
الذكاء الاصطناعي البصري
دليل الذكاء الاصطناعي المرئي
كان GLIDE نموذجًا مبكرًا لنشر OpenAI من النص إلى الصورة والذي أظهر أن المطالبات بالإضافة إلى "التوجيه الخالي من المصنفات" يمكن أن يتفوق على الأنظمة السابقة المستندة إلى GAN.
استمع إلى هذا الدليلرواه الذكاء الاصطناعي · ~2 min
It was a key stepping stone on the path to DALL-E 2.
Released by OpenAI in late 2021, GLIDE (Guided Language to Image Diffusion for Generation and Editing) demonstrated that diffusion models guided by text could produce photorealistic, prompt-faithful images. Its biggest contribution was comparing two ways to steer generation: CLIP guidance versus classifier-free guidance. The team found classifier-free guidance produced more realistic and better-aligned images, a result that shaped nearly every text-to-image model since. GLIDE also supported text-driven inpainting, letting users edit part of an image with a new prompt. It used a 3.5-billion-parameter diffusion model plus an upsampler. OpenAI released a smaller, filtered version publicly while withholding the full model over misuse concerns, and the DALL-E 2 research paper describes an unCLIP decoder that modifies the GLIDE architecture to accept CLIP-image conditioning.
إنشاء صورة من جملة مثل المشهد الموصوف، مما يدل على التوليف السريع والإخلاص المبكر
الرسم الداخلي المبني على النص: إخفاء جزء من الصورة وملئه بكائن جديد موصوف بالكلمات
تحرير صورة موجودة عن طريق إضافة عناصر أو استبدالها عبر مطالبة المتابعة
بمثابة خط أساس بحثي أثبت أن التوجيه الخالي من المصنف يتفوق على توجيه CLIP للمحاذاة
تعتبر GLIDE نفسها تاريخية إلى حد كبير، حيث حلت محلها DALL-E 2 وImagen وStable Diffusion، لكن أفكارها لا تزال موجودة في كل مكان. يبقى التوجيه الخالي من المصنف هو المقبض الافتراضي للتداول بين الإخلاص والتنوع، وأصبح الرسم الداخلي المبني على النص هو المعيار الآن. تستمر الأنظمة المستقبلية في تحسين جداول التوجيه، وتقليل أسباب التوجيه القوية، وتوسيع نفس المبادئ لتشمل الفيديو والنشر ثلاثي الأبعاد، لذا فإن تأثير GLIDE يتجاوز النموذج.
رسالة إخبارية مجانية
ثلاث قصص تم التحقق منها بواسطة الذكاء الاصطناعي كل صباح من أيام الأسبوع، مكتوبة باللغة الإنجليزية البسيطة. مجاني للأبد، بدون إعلانات.
بريد إلكتروني واحد كل يوم من أيام الأسبوع. إلغاء الاشتراك بنقرة واحدة. نحن لا نبيع أو نشارك عنوانك أبدًا.
اختبر نفسك
تعليقات فورية على كل إجابة، وشهادة قابلة للمشاركة مع معرف يمكن التحقق منه بمجرد اجتياز الدورة التدريبية.
دعم تعليم الذكاء الاصطناعي المجاني. AI Understanding هي منظمة 501(c)(3) غير ربحية - لا إعلانات ولا نظام حظر الاشتراك غير المدفوع على الإطلاق. قم بالتبرع
كان GLIDE نموذجًا مبكرًا لنشر OpenAI من النص إلى الصورة والذي أظهر أن المطالبات بالإضافة إلى "التوجيه الخالي من المصنفات" يمكن أن يتفوق على الأنظمة السابقة المستندة إلى GAN. لقد كانت نقطة انطلاق رئيسية على الطريق إلى DALL-E 2.
أظهر GLIDE أن التوجيهات الخالية من المصنفات أعطت نتائج أكثر واقعية وأفضل محاذاة من توجيهات CLIP.
The full research model used a 3.5-billion-parameter base diffusion model with a separate upsampling stage.
من خلال التدريب على كل من المحفزات الحقيقية والفارغة، يتعلم النموذج التوليد المشروط وغير المشروط، ثم يقوم بالاستقراء بينهما عند أخذ العينات.
The paper describes adding CLIP-image conditioning to a modified GLIDE architecture for its unCLIP decoder; this is a concrete architectural relationship.
OpenAI قامت بحجب النموذج الكامل بسبب مخاوف تتعلق بسوء الاستخدام وأصدرت نسخة أصغر تمت تصفيتها بدلاً من ذلك.
استمر في التعلم
تم اختيار المزيد من الأدلة لهذا الموضوع
التاليالدليل التالي
نماذج الانتشار الكامن
الذكاء الاصطناعي البصري