كشف الشذوذ
اكتشاف الحالات الشاذة هو ممارسة لتعليم الآلات كيفية تحديد نقاط البيانات التي تنحرف بشكل حاد عن الأنماط العادية.
نظرة عامة
الأمر مهم لأن الأحداث النادرة وغير المتوقعة — الاحتيال، أعطال المعدات، التسلل — غالبا ما تختبئ في محيطات من البيانات الروتينية التي لا يستطيع البشر مسحها يدويا.
الغوص العميق
يحدد اكتشاف الحالات الشاذة الملاحظات التي لا تتوافق مع السلوك المتوقع، والتي تسمى غالبًا القيم المتطرفة أو المستجدات أو الاستثناءات. تتعلم معظم الأساليب أولًا كيف يبدو الوضع "العادي"، ثم تسجل بيانات جديدة حسب مدى انحرافها. تشير الأساليب الإحصائية إلى نقاط تتجاوز بعض الانحرافات المعيارية؛ الأساليب القائمة على المسافة مثل نقاط تحديد الجيران الأقرب إلى أماكن بعيدة عن أقرانهم؛ طرق الكثافة مثل نقاط علم العامل الخارجي المحلي في المناطق المتناثرة. يضيف التعلم الآلي غابات العزلة، التي تستغل حقيقة أنه من السهل عزل الحالات الشاذة مع عدد قليل من الانقسامات العشوائية، وأجهزة التشفير التلقائي، التي تعيد بناء البيانات العادية بشكل جيد ولكنها تفشل في الأمور غير العادية. ويتمثل التحدي الأساسي في أن الحالات الشاذة نادرة وغالباً ما تكون غير مصنفة، لذا يجب أن تتعلم النماذج في الغالب من الأمثلة العادية وتتسامح مع التعريفات الغامضة والمتطورة لـ "العادي".
البصيرة الفنية
يتم تدريب العديد من الأنظمة فقط على البيانات العادية - والتي تسمى التعلم من فصل واحد أو التعلم شبه الخاضع للإشراف - لأن الحالات الشاذة المصنفة نادرة. على سبيل المثال، يقوم جهاز التشفير التلقائي بضغط المدخلات إلى عنق الزجاجة الصغير وإعادة بنائها؛ تم تدريبه على عينات عادية، مما أدى إلى حدوث خطأ كبير في إعادة بناء الحالات الشاذة التي لم يسبق له مثيل. تعمل الغابات المعزولة بشكل مختلف: التقسيم العشوائي يعزل القيم المتطرفة في عدد أقل من الانقسامات، وبالتالي فإن متوسط طول المسار الأقصر يشير إلى وجود حالة شاذة. كلاهما يحول "الغرابة" إلى درجة رقمية ذات عتبة.
التأثير الاستراتيجي
قرارات أوضح
يساعدك على فصل المطالبات الفنية الواضحة عن لغة التسويق.
التكلفة والميزانية
يمكنك طرح أسئلة تنفيذ أفضل قبل إنفاق المال أو الوقت.
الفريق وسير العمل
تتخذ الفرق ذات الفهم المشترك قرارات أفضل بشأن المنتجات والسياسات والتعلم.
مستقبل الكشف عن الشذوذ
يتجه الاكتشاف نحو البث في الوقت الفعلي على الأجهزة الطرفية، لذا تظهر الحالات الشاذة خلال أجزاء من الثانية بدلاً من تحليلها دفعة واحدة. يلتقط التعلم العميق والشبكات العصبية الرسومية بشكل متزايد أنماطًا دقيقة ومتعددة المتغيرات مثل حلقات الاحتيال المنسقة. تعد النماذج الخاضعة للإشراف الذاتي والأساسية بأنظمة تتكيف مع الانجرافات "العادية" بمرور الوقت، مما يقلل من إعادة الضبط اليدوي. تعد قابلية التفسير أيضًا من الأولويات: فالفرق تريد نماذج لا تشير فقط إلى أن شيئًا ما هو أمر شاذ، بل أيضًا ما هي الميزات التي أثارت التنبيه، حتى يتمكن المحللون من التصرف بثقة.
التنفيذ في العالم الحقيقي
تقوم شبكات بطاقات الائتمان بالإبلاغ عن معاملة في بلد أجنبي بعد ثوانٍ من استخدام البطاقة محليًا، مما يؤدي إلى تجميد الاحتيال المحتمل قبل الشراء.
تكتشف أجهزة استشعار المصنع اهتزازًا غير طبيعي أو درجة حرارة غير طبيعية في المحرك، وتتنبأ بفشل المحمل قبل أيام من توقف العطل عن الخط.
تكتشف أدوات الأمن السيبراني خادمًا يرسل فجأة غيغابايت إلى عنوان IP غير معروف في الساعة 3 صباحًا، مما يشير إلى احتمال تسرب البيانات.
يرصد مراقبو المستشفيات عدم انتظام ضربات القلب في بيانات مخطط كهربية القلب المستمرة، لتنبيه الأطباء إلى تطور عدم انتظام ضربات القلب.
المخاطر والدرابزين
قد تستخدم الفرق المختلفة نفس المصطلح بشكل مختلف، لذا حدد النطاق مبكرًا.
يمكن أن تبدو المعايير قوية بينما يكون الأداء في العالم الحقيقي غير متساوٍ.
غالبًا ما يؤدي تجاهل جودة البيانات وخطط التقييم إلى نتائج هشة.
خارطة طريق التنفيذ
ابدأ بتعريف لغة واضحة للنتيجة التي تحتاجها.
اختر مقياس نجاح واحد وحالة فشل واحدة قبل الاختبار.
قم بتشغيل برنامج تجريبي صغير يحتوي على بيانات تمثيلية، وليس مجموعة تجريبية مصقولة.
قم بالتوثيق حيث يساعد اكتشاف الحالات الشاذة وأين تكون الطرق الأبسط أفضل.
استمر في الاستكشاف
Free newsletter
Get the daily AI briefing
Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.
One email each weekday. Unsubscribe in one click. We never sell or share your address.
Test yourself
Take the Anomaly Detection quiz
Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.
Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation
الدليل التالي
كشف الشذوذ بالذكاء الاصطناعي
الأسئلة المتداولة
ما هو كشف الشذوذ؟
اكتشاف الحالات الشاذة هو ممارسة لتعليم الآلات كيفية تحديد نقاط البيانات التي تنحرف بشكل حاد عن الأنماط العادية. وهذا مهم لأن الأحداث النادرة وغير المتوقعة - مثل الاحتيال، وتعطل المعدات، والاختراقات - غالبًا ما تختبئ في محيطات من البيانات الروتينية التي لا يستطيع البشر مسحها يدويًا.
لماذا يتم تدريب نماذج الكشف عن الحالات الشاذة غالبًا على البيانات "العادية" بدلاً من الحالات الشاذة المصنفة؟
ونظرًا لأن الحالات الشاذة الحقيقية نادرة ويصعب تصنيفها، فإن النماذج عادةً ما تتعلم الشكل الطبيعي وتضع علامة على الانحرافات عنه.
كيف تحدد الغابة المعزولة الشذوذ؟
من السهل فصل القيم المتطرفة عن بقية البيانات، لذلك يتم عزلها بأقسام أقل، مما ينتج عنه متوسط طول مسار قصير.
عندما يتم استخدام جهاز التشفير التلقائي للكشف عن الشذوذ، ما الذي يشير إلى وجود شذوذ؟
بعد تدريبه على البيانات العادية، يقوم جهاز التشفير التلقائي بإعادة بناء المدخلات العادية بشكل جيد ولكنه ينتج خطأ كبير في إعادة البناء في المدخلات غير العادية.
ما الذي تعتمد عليه طريقة العامل الخارجي المحلي بشكل أساسي؟
تشير أعلام LOF إلى وجود مناطق متفرقة ومنخفضة الكثافة بالنسبة لجيرانها باعتبارها حالات شاذة.
ما هو التحدي الواقعي الذي يواجه أنظمة الكشف عن الحالات الشاذة المنتشرة؟
يتطور السلوك، لذا فإن ما يعتبر تحولات طبيعية، يجب أن تتكيف النماذج أو يتم إعادة تدريبها لتجنب الإنذارات الكاذبة.