دليل الذكاء الاصطناعي المرئي

بحث متعدد الوسائط

يقوم البحث متعدد الوسائط باسترداد المعلومات عبر النماذج مثل النصوص والصور والصوت والفيديو.

استمع إلى هذا الدليلرواه الذكاء الاصطناعي · ~2 min

في هذه الصفحةقراءة لمدة دقيقتين
  1. نظرة عامة
  2. النقاط الرئيسية
  3. الغوص العميق
  4. تحقق من الطريقة التي تدعم الاستعلام
  5. التنفيذ في العالم الحقيقي
  6. وضعها موضع التنفيذ
  7. المصادر ومزيد من القراءة
  8. استمر في الاستكشاف
  9. الأسئلة المتداولة

نظرة عامة

قد يسترد الاستعلام النصي صورة، أو قد تعثر الصورة على مستندات ذات صلة. يجب أن يتم تمثيل الطرائق بطرق متوافقة، ولا يزال التشابه بحاجة إلى التقييم مقابل مهمة المستخدم.

النقاط الرئيسية

  1. تحديد الأدلة المطلوبة حسب الطريقة.
  2. استخدام تمثيلات متوافقة.
  3. الحفاظ على المصدر والأذونات عبر الأصول المشتقة.

الغوص العميق

اختر ما يعنيه كل استعلام ونتيجة. يختلف البحث عن منتج مشابه من الناحية المرئية عن العثور على مقطع فيديو يحتوي على عبارة منطوقة. قد لا يدعم النموذج الذي تم تدريبه لمحاذاة التسميات التوضيحية والصور كل مهمة صوتية أو مؤقتة. الحفاظ على البيانات الوصفية والأصول الأصلية. يمكن أن يساعد المصدر والنطاق الزمني والأذونات والنص الوصفي في الترتيب والتحقق. قد يؤدي التضمين وحده إلى فقدان المعرفات الدقيقة أو النفي أو التفاصيل التي تهم الاستعلام. الجمع بين الإشارات حيثما كان ذلك مناسبا. يمكن أن تدعم مطابقة الكلمات الرئيسية الأسماء الدقيقة، بينما تدعم التمثيلات المستفادة العلاقات الدلالية أو المرئية. قم بتقييم عملية الدمج والتصنيف بناءً على أمثلة واقعية بدلاً من افتراض أن إضافة الطرائق تعمل دائمًا على تحسين الملاءمة. اختبار الفروق الصعبة: كائنات متشابهة المظهر ولكنها مختلفة، وصور تحتوي على نص مهم، ومقاطع فيديو يتطابق مظهرها ولكن الصوت لا يتطابق معها، والاستعلامات التي تتضمن غيابًا أو علاقات مكانية. حافظ على اتساق عناصر التحكم في الوصول عبر التضمينات المشتقة والصور المصغرة والنصوص والملفات الأصلية.

04عملت المثال

تحقق من الطريقة التي تدعم الاستعلام

  1. استخدم الاستعلام المخترع "كلب ينبح" مقابل مجموعة مقاطع فيديو.

  2. قد تقوم أداة المطابقة المرئية بإرجاع مقطع صامت يظهر كلبًا. قم بتأكيد ما إذا كانت المهمة تتطلب الصوت أو الإجراء المرئي أو أيًا منهما.

  3. قم بتقييم النتائج باستخدام الأدلة المطلوبة بدلاً من قبول مطابقة الصور ذات الصلة على نطاق واسع.

ما يظهر

يفصل المثال الذي تم إنشاؤه التشابه الموضعي عن تلبية استعلام متعدد الوسائط.

التنفيذ في العالم الحقيقي

ابحث عن صورة المنتج المعتمدة من خلال استعلام نصي وصفي.

ابحث في مجموعة مقاطع فيديو باستخدام النص النصي والأدلة المرئية.

وضعها موضع التنفيذ

لماذا يهم

  • السرعة والحجم. يمكن للذكاء الاصطناعي المرئي أتمتة مهام الفحص والكشف ووضع العلامات على نطاق واسع.
  • خيارات البناء. يمكن للفرق الإبداعية إنشاء نماذج أولية للمفاهيم بشكل أسرع مع عدد أقل من المراجعات اليدوية.
  • الفريق وسير العمل. يمكن أن تستخدم العمليات إشارات الصور والفيديو التي كان من الصعب معالجتها في السابق.

احترس من

  • يمكن أن تصبح حقوق الصور والموافقة مخاطر قانونية إذا كان المصدر غير واضح.
  • يمكن أن يختلف أداء النموذج عبر الإضاءة والتركيبة السكانية والبيئات.
  • قد تمر الإيجابيات الكاذبة دون أن يلاحظها أحد ما لم تتم مراقبة عتبات الثقة.

الخطوات التالية

  1. تحديد معايير القبول لتكاليف الدقة والاستدعاء والخطأ.
  2. اختبار مع البيانات التي تتوافق مع ظروف الإنتاج الحقيقية.
  3. أضف مراجعة بشرية للتنبؤات منخفضة الثقة أو عالية التأثير.
  4. تتبع انحراف النموذج وإعادة التحقق من صحته بعد تغيير الكاميرا أو مجموعة البيانات.

المصادر ومزيد من القراءة

  1. Radford and colleaguesتعلم النماذج المرئية القابلة للتحويل من خلال الإشراف على اللغة الطبيعية

استمر في الاستكشاف

رسالة إخبارية مجانية

ثلاث قصص تم التحقق منها بواسطة الذكاء الاصطناعي كل صباح من أيام الأسبوع، مكتوبة باللغة الإنجليزية البسيطة. مجاني للأبد، بدون إعلانات.

بريد إلكتروني واحد كل يوم من أيام الأسبوع. إلغاء الاشتراك بنقرة واحدة. نحن لا نبيع أو نشارك عنوانك أبدًا.

اختبر نفسك

تعليقات فورية على كل إجابة، وشهادة قابلة للمشاركة مع معرف يمكن التحقق منه بمجرد اجتياز الدورة التدريبية.

ابدأ الاختبار

دعم تعليم الذكاء الاصطناعي المجاني. AI Understanding هي منظمة 501(c)(3) غير ربحية - لا إعلانات ولا نظام حظر الاشتراك غير المدفوع على الإطلاق. قم بالتبرع

الأسئلة المتداولة

هل يمكن مقارنة أي تضمينات للصور والنصوص مباشرة؟

ليس بأمان عن طريق الافتراض. إنهم بحاجة إلى تمثيلات متوافقة أو طريقة محاذاة مناسبة عبر الوسائط.

استمر في التعلم

أدلة ذات صلة

تم اختيار المزيد من الأدلة لهذا الموضوع

احصل على شهادة الذكاء الاصطناعي المجانيةدورة مجانية قصيرة واختبار. لا تكلفة ولا بطاقة. حوالي 2.5 ساعة.ابدأ مجانًا →