دليل الأساسيات

كشف الشذوذ

اكتشاف الحالات الشاذة هو ممارسة لتعليم الآلات كيفية تحديد نقاط البيانات التي تنحرف بشكل حاد عن الأنماط العادية.

استمع إلى هذا الدليلرواه الذكاء الاصطناعي · ~2 min

في هذه الصفحةقراءة لمدة دقيقتين
  1. نظرة عامة
  2. الغوص العميق
  3. التنفيذ في العالم الحقيقي
  4. مستقبل الكشف عن الشذوذ
  5. وضعها موضع التنفيذ
  6. استمر في الاستكشاف
  7. الأسئلة المتداولة

نظرة عامة

الأمر مهم لأن الأحداث النادرة وغير المتوقعة — الاحتيال، أعطال المعدات، التسلل — غالبا ما تختبئ في محيطات من البيانات الروتينية التي لا يستطيع البشر مسحها يدويا.

الغوص العميق

يحدد اكتشاف الحالات الشاذة الملاحظات التي لا تتوافق مع السلوك المتوقع، والتي تسمى غالبًا القيم المتطرفة أو المستجدات أو الاستثناءات. تتعلم معظم الأساليب أولًا كيف يبدو الوضع "العادي"، ثم تسجل بيانات جديدة حسب مدى انحرافها. تشير الأساليب الإحصائية إلى نقاط تتجاوز بعض الانحرافات المعيارية؛ الأساليب القائمة على المسافة مثل نقاط تحديد الجيران الأقرب إلى أماكن بعيدة عن أقرانهم؛ طرق الكثافة مثل نقاط علم العامل الخارجي المحلي في المناطق المتناثرة. يضيف التعلم الآلي غابات العزلة، التي تستغل حقيقة أنه من السهل عزل الحالات الشاذة مع عدد قليل من الانقسامات العشوائية، وأجهزة التشفير التلقائي، التي تعيد بناء البيانات العادية بشكل جيد ولكنها تفشل في الأمور غير العادية. ويتمثل التحدي الأساسي في أن الحالات الشاذة نادرة وغالباً ما تكون غير مصنفة، لذا يجب أن تتعلم النماذج في الغالب من الأمثلة العادية وتتسامح مع التعريفات الغامضة والمتطورة لـ "العادي".

التنفيذ في العالم الحقيقي

تقوم شبكات بطاقات الائتمان بالإبلاغ عن معاملة في بلد أجنبي بعد ثوانٍ من استخدام البطاقة محليًا، مما يؤدي إلى تجميد الاحتيال المحتمل قبل الشراء.

تكتشف أجهزة استشعار المصنع اهتزازًا غير طبيعي أو درجة حرارة غير طبيعية في المحرك، وتتنبأ بفشل المحمل قبل أيام من توقف العطل عن الخط.

تكتشف أدوات الأمن السيبراني خادمًا يرسل فجأة غيغابايت إلى عنوان IP غير معروف في الساعة 3 صباحًا، مما يشير إلى احتمال تسرب البيانات.

يرصد مراقبو المستشفيات عدم انتظام ضربات القلب في بيانات مخطط كهربية القلب المستمرة، لتنبيه الأطباء إلى تطور عدم انتظام ضربات القلب.

مستقبل الكشف عن الشذوذ

يتجه الاكتشاف نحو البث في الوقت الفعلي على الأجهزة الطرفية، لذا تظهر الحالات الشاذة خلال أجزاء من الثانية بدلاً من تحليلها دفعة واحدة. يلتقط التعلم العميق والشبكات العصبية الرسومية بشكل متزايد أنماطًا دقيقة ومتعددة المتغيرات مثل حلقات الاحتيال المنسقة. تعد النماذج الخاضعة للإشراف الذاتي والأساسية بأنظمة تتكيف مع الانجرافات "العادية" بمرور الوقت، مما يقلل من إعادة الضبط اليدوي. تعد قابلية التفسير أيضًا من الأولويات: فالفرق تريد نماذج لا تشير فقط إلى أن شيئًا ما هو أمر شاذ، بل أيضًا ما هي الميزات التي أثارت التنبيه، حتى يتمكن المحللون من التصرف بثقة.

وضعها موضع التنفيذ

لماذا يهم

  • قرارات أوضح. يساعدك على فصل المطالبات الفنية الواضحة عن لغة التسويق.
  • التكلفة والميزانية. يمكنك طرح أسئلة تنفيذ أفضل قبل إنفاق المال أو الوقت.
  • الفريق وسير العمل. تتخذ الفرق ذات الفهم المشترك قرارات أفضل بشأن المنتجات والسياسات والتعلم.

احترس من

  • قد تستخدم الفرق المختلفة نفس المصطلح بشكل مختلف، لذا حدد النطاق مبكرًا.
  • يمكن أن تبدو المعايير قوية بينما يكون الأداء في العالم الحقيقي غير متساوٍ.
  • غالبًا ما يؤدي تجاهل جودة البيانات وخطط التقييم إلى نتائج هشة.

الخطوات التالية

  1. ابدأ بتعريف لغة واضحة للنتيجة التي تحتاجها.
  2. اختر مقياس نجاح واحد وحالة فشل واحدة قبل الاختبار.
  3. قم بتشغيل برنامج تجريبي صغير يحتوي على بيانات تمثيلية، وليس مجموعة تجريبية مصقولة.
  4. قم بالتوثيق حيث يساعد اكتشاف الحالات الشاذة وأين تكون الطرق الأبسط أفضل.

استمر في الاستكشاف

رسالة إخبارية مجانية

احصل على الإحاطة اليومية لمنظمة العفو الدولية

ثلاث قصص تم التحقق منها بواسطة الذكاء الاصطناعي كل صباح من أيام الأسبوع، مكتوبة باللغة الإنجليزية البسيطة. مجاني للأبد، بدون إعلانات.

بريد إلكتروني واحد كل يوم من أيام الأسبوع. إلغاء الاشتراك بنقرة واحدة. نحن لا نبيع أو نشارك عنوانك أبدًا.

اختبر نفسك

أخذ اختبار اكتشاف الشذوذ

تعليقات فورية على كل إجابة، وشهادة قابلة للمشاركة مع معرف يمكن التحقق منه بمجرد اجتياز الدورة التدريبية.

ابدأ الاختبار

دعم تعليم الذكاء الاصطناعي المجاني. AI Understanding هي منظمة 501(c)(3) غير ربحية - لا إعلانات ولا نظام حظر الاشتراك غير المدفوع على الإطلاق. قم بالتبرع

الأسئلة المتداولة

ما هو كشف الشذوذ؟

اكتشاف الحالات الشاذة هو ممارسة لتعليم الآلات كيفية تحديد نقاط البيانات التي تنحرف بشكل حاد عن الأنماط العادية. وهذا مهم لأن الأحداث النادرة وغير المتوقعة - مثل الاحتيال، وتعطل المعدات، والاختراقات - غالبًا ما تختبئ في محيطات من البيانات الروتينية التي لا يستطيع البشر مسحها يدويًا.

لماذا يتم تدريب نماذج الكشف عن الحالات الشاذة غالبًا على البيانات "العادية" بدلاً من الحالات الشاذة المصنفة؟

ونظرًا لأن الحالات الشاذة الحقيقية نادرة ويصعب تصنيفها، فإن النماذج عادةً ما تتعلم الشكل الطبيعي وتضع علامة على الانحرافات عنه.

كيف تحدد الغابة المعزولة الشذوذ؟

من السهل فصل القيم المتطرفة عن بقية البيانات، لذلك يتم عزلها بأقسام أقل، مما ينتج عنه متوسط ​​طول مسار قصير.

عندما يتم استخدام جهاز التشفير التلقائي للكشف عن الشذوذ، ما الذي يشير إلى وجود شذوذ؟

بعد تدريبه على البيانات العادية، يقوم جهاز التشفير التلقائي بإعادة بناء المدخلات العادية بشكل جيد ولكنه ينتج خطأ كبير في إعادة البناء في المدخلات غير العادية.

ما الذي تعتمد عليه طريقة العامل الخارجي المحلي بشكل أساسي؟

تشير أعلام LOF إلى وجود مناطق متفرقة ومنخفضة الكثافة بالنسبة لجيرانها باعتبارها حالات شاذة.

ما هو التحدي الواقعي الذي يواجه أنظمة الكشف عن الحالات الشاذة المنتشرة؟

يتطور السلوك، لذا فإن ما يعتبر تحولات طبيعية، يجب أن تتكيف النماذج أو يتم إعادة تدريبها لتجنب الإنذارات الكاذبة.