دليل الذكاء الاصطناعي المرئي

نموذج نشر الإنزلاق

كان GLIDE نموذجًا مبكرًا لنشر OpenAI من النص إلى الصورة والذي أظهر أن المطالبات بالإضافة إلى "التوجيه الخالي من المصنفات" يمكن أن يتفوق على الأنظمة السابقة المستندة إلى GAN.

استمع إلى هذا الدليلرواه الذكاء الاصطناعي · ~2 min

في هذه الصفحةقراءة لمدة دقيقتين
  1. نظرة عامة
  2. الغوص العميق
  3. التنفيذ في العالم الحقيقي
  4. مستقبل نموذج نشر GLIDE
  5. وضعها موضع التنفيذ
  6. استمر في الاستكشاف
  7. الأسئلة المتداولة

نظرة عامة

It was a key stepping stone on the path to DALL-E 2.

الغوص العميق

Released by OpenAI in late 2021, GLIDE (Guided Language to Image Diffusion for Generation and Editing) demonstrated that diffusion models guided by text could produce photorealistic, prompt-faithful images. Its biggest contribution was comparing two ways to steer generation: CLIP guidance versus classifier-free guidance. The team found classifier-free guidance produced more realistic and better-aligned images, a result that shaped nearly every text-to-image model since. GLIDE also supported text-driven inpainting, letting users edit part of an image with a new prompt. It used a 3.5-billion-parameter diffusion model plus an upsampler. OpenAI released a smaller, filtered version publicly while withholding the full model over misuse concerns, and the DALL-E 2 research paper describes an unCLIP decoder that modifies the GLIDE architecture to accept CLIP-image conditioning.

التنفيذ في العالم الحقيقي

إنشاء صورة من جملة مثل المشهد الموصوف، مما يدل على التوليف السريع والإخلاص المبكر

الرسم الداخلي المبني على النص: إخفاء جزء من الصورة وملئه بكائن جديد موصوف بالكلمات

تحرير صورة موجودة عن طريق إضافة عناصر أو استبدالها عبر مطالبة المتابعة

بمثابة خط أساس بحثي أثبت أن التوجيه الخالي من المصنف يتفوق على توجيه CLIP للمحاذاة

مستقبل نموذج نشر GLIDE

تعتبر GLIDE نفسها تاريخية إلى حد كبير، حيث حلت محلها DALL-E 2 وImagen وStable Diffusion، لكن أفكارها لا تزال موجودة في كل مكان. يبقى التوجيه الخالي من المصنف هو المقبض الافتراضي للتداول بين الإخلاص والتنوع، وأصبح الرسم الداخلي المبني على النص هو المعيار الآن. تستمر الأنظمة المستقبلية في تحسين جداول التوجيه، وتقليل أسباب التوجيه القوية، وتوسيع نفس المبادئ لتشمل الفيديو والنشر ثلاثي الأبعاد، لذا فإن تأثير GLIDE يتجاوز النموذج.

وضعها موضع التنفيذ

لماذا يهم

  • السرعة والحجم. يمكن للذكاء الاصطناعي المرئي أتمتة مهام الفحص والكشف ووضع العلامات على نطاق واسع.
  • خيارات البناء. يمكن للفرق الإبداعية إنشاء نماذج أولية للمفاهيم بشكل أسرع مع عدد أقل من المراجعات اليدوية.
  • الفريق وسير العمل. يمكن أن تستخدم العمليات إشارات الصور والفيديو التي كان من الصعب معالجتها في السابق.

احترس من

  • يمكن أن تصبح حقوق الصور والموافقة مخاطر قانونية إذا كان المصدر غير واضح.
  • يمكن أن يختلف أداء النموذج عبر الإضاءة والتركيبة السكانية والبيئات.
  • قد تمر الإيجابيات الكاذبة دون أن يلاحظها أحد ما لم تتم مراقبة عتبات الثقة.

الخطوات التالية

  1. تحديد معايير القبول لتكاليف الدقة والاستدعاء والخطأ.
  2. اختبار مع البيانات التي تتوافق مع ظروف الإنتاج الحقيقية.
  3. أضف مراجعة بشرية للتنبؤات منخفضة الثقة أو عالية التأثير.
  4. تتبع انحراف النموذج وإعادة التحقق من صحته بعد تغيير الكاميرا أو مجموعة البيانات.

استمر في الاستكشاف

رسالة إخبارية مجانية

احصل على الإحاطة اليومية لمنظمة العفو الدولية

ثلاث قصص تم التحقق منها بواسطة الذكاء الاصطناعي كل صباح من أيام الأسبوع، مكتوبة باللغة الإنجليزية البسيطة. مجاني للأبد، بدون إعلانات.

بريد إلكتروني واحد كل يوم من أيام الأسبوع. إلغاء الاشتراك بنقرة واحدة. نحن لا نبيع أو نشارك عنوانك أبدًا.

اختبر نفسك

Take the GLIDE Diffusion Model quiz

تعليقات فورية على كل إجابة، وشهادة قابلة للمشاركة مع معرف يمكن التحقق منه بمجرد اجتياز الدورة التدريبية.

ابدأ الاختبار

دعم تعليم الذكاء الاصطناعي المجاني. AI Understanding هي منظمة 501(c)(3) غير ربحية - لا إعلانات ولا نظام حظر الاشتراك غير المدفوع على الإطلاق. قم بالتبرع

الأسئلة المتداولة

What is GLIDE Diffusion Model?

كان GLIDE نموذجًا مبكرًا لنشر OpenAI من النص إلى الصورة والذي أظهر أن المطالبات بالإضافة إلى "التوجيه الخالي من المصنفات" يمكن أن يتفوق على الأنظمة السابقة المستندة إلى GAN. لقد كانت نقطة انطلاق رئيسية على الطريق إلى DALL-E 2.

ما هي طريقة التوجيه التي وجدتها GLIDE لإنتاج صور أفضل وأكثر دقة؟

أظهر GLIDE أن التوجيهات الخالية من المصنفات أعطت نتائج أكثر واقعية وأفضل محاذاة من توجيهات CLIP.

What size did the published full GLIDE base diffusion model have, before counting its upsampler?

The full research model used a 3.5-billion-parameter base diffusion model with a separate upsampling stage.

كيف يعمل التوجيه الخالي من المصنف أثناء التدريب؟

من خلال التدريب على كل من المحفزات الحقيقية والفارغة، يتعلم النموذج التوليد المشروط وغير المشروط، ثم يقوم بالاستقراء بينهما عند أخذ العينات.

Which later system describes its diffusion decoder as modifying the GLIDE architecture in the DALL-E 2 research paper?

The paper describes adding CLIP-image conditioning to a modified GLIDE architecture for its unCLIP decoder; this is a concrete architectural relationship.

لماذا أصدرت OpenAI فقط نسخة أصغر ومفلترة من GLIDE للعامة؟

OpenAI قامت بحجب النموذج الكامل بسبب مخاوف تتعلق بسوء الاستخدام وأصدرت نسخة أصغر تمت تصفيتها بدلاً من ذلك.