Tiếp theoHướng dẫn tiếp theo
Phát hiện bất thường AI
Ứng dụng
HƯỚNG DẪN cơ bản
Phát hiện bất thường là phương pháp dạy máy đánh dấu các điểm dữ liệu có sai lệch rõ rệt so với mô hình thông thường.
Nghe hướng dẫn nàyAI thuật lại · ~2 min
Điều này quan trọng vì các sự kiện hiếm gặp, bất ngờ — gian lận, hỏng thiết bị, xâm nhập — thường ẩn giấu trong đại dương dữ liệu thông thường mà con người không thể quét bằng tay.
Phát hiện bất thường xác định các quan sát không phù hợp với hành vi dự kiến, thường được gọi là các ngoại lệ, mới lạ hoặc ngoại lệ. Hầu hết các phương pháp tiếp cận trước tiên đều tìm hiểu xem 'bình thường' trông như thế nào, sau đó tính điểm dữ liệu mới theo mức độ sai lệch của nó. Các phương pháp thống kê đánh dấu các điểm vượt quá một vài độ lệch chuẩn; các phương pháp dựa trên khoảng cách như k-hàng xóm gần nhất gắn cờ các điểm cách xa các điểm ngang hàng của họ; các phương pháp mật độ như điểm cờ Yếu tố ngoại lệ cục bộ ở các vùng thưa thớt. Học máy bổ sung thêm Rừng cách ly, khai thác thực tế là các điểm bất thường rất dễ bị cô lập với một vài phần tách ngẫu nhiên và bộ mã hóa tự động, giúp tái tạo tốt dữ liệu bình thường nhưng không thành công ở những điểm bất thường. Thách thức cốt lõi là các điểm bất thường rất hiếm và thường không được gắn nhãn, vì vậy các mô hình phải học chủ yếu từ các ví dụ thông thường và chấp nhận các định nghĩa mơ hồ, ngày càng phát triển về 'bình thường'.
Mạng lưới thẻ tín dụng đánh dấu một giao dịch ở nước ngoài vài giây sau khi thẻ được sử dụng trong nước, ngăn chặn khả năng gian lận trước khi mua hàng.
Cảm biến của nhà máy phát hiện độ rung hoặc nhiệt độ bất thường trong động cơ, dự đoán số ngày hỏng vòng bi trước khi sự cố làm dừng dây chuyền.
Các công cụ an ninh mạng phát hiện một máy chủ đột nhiên gửi hàng gigabyte đến một IP không xác định vào lúc 3 giờ sáng, báo hiệu có thể bị rò rỉ dữ liệu.
Máy theo dõi của bệnh viện ghi lại nhịp tim không đều trong dữ liệu ECG liên tục, cảnh báo các bác sĩ lâm sàng về tình trạng rối loạn nhịp tim đang phát triển.
Việc phát hiện đang chuyển sang phát trực tiếp theo thời gian thực trên các thiết bị biên, do đó, các điểm bất thường sẽ xuất hiện trong vòng một phần nghìn giây thay vì sau khi phân tích hàng loạt. Mạng lưới thần kinh đồ thị và học sâu ngày càng nắm bắt được các mô hình tinh vi, đa biến như các vòng gian lận phối hợp. Các mô hình nền tảng và tự giám sát hứa hẹn các hệ thống sẽ thích ứng như những biến động 'bình thường' theo thời gian, giảm việc điều chỉnh thủ công. Khả năng giải thích cũng là một ưu tiên: các nhóm muốn các mô hình không chỉ cho biết có điều gì đó bất thường mà còn cho biết tính năng nào đã kích hoạt cảnh báo, để các nhà phân tích có thể tự tin hành động.
Bản tin miễn phí
Ba câu chuyện AI đã được xác minh vào mỗi buổi sáng các ngày trong tuần, được viết bằng tiếng Anh đơn giản. Miễn phí mãi mãi, không có quảng cáo.
Một email mỗi ngày trong tuần. Hủy đăng ký trong một cú nhấp chuột. Chúng tôi không bao giờ bán hoặc chia sẻ địa chỉ của bạn.
Tự kiểm tra
Phản hồi tức thì về mọi câu trả lời và chứng chỉ có thể chia sẻ với ID có thể xác minh sau khi bạn vượt qua khóa học.
Hỗ trợ giáo dục AI miễn phí. AI Understanding là tổ chức phi lợi nhuận 501(c)(3) — không bao giờ có quảng cáo, không có tường phí. Hãy quyên góp
Phát hiện bất thường là phương pháp dạy máy đánh dấu các điểm dữ liệu có sai lệch rõ rệt so với mô hình thông thường. Điều này quan trọng vì các sự kiện hiếm gặp, bất ngờ — gian lận, lỗi thiết bị, xâm nhập — thường ẩn giấu trong đại dương dữ liệu thông thường mà con người không thể quét bằng tay.
Bởi vì các dị thường thực sự không thường xuyên và khó gắn nhãn nên các mô hình thường tìm hiểu xem bình thường trông như thế nào và đánh dấu các sai lệch so với nó.
Các ngoại lệ rất dễ tách khỏi phần còn lại của dữ liệu, do đó chúng bị cô lập với ít phân vùng hơn, tạo ra độ dài đường dẫn trung bình ngắn.
Được đào tạo trên dữ liệu thông thường, bộ mã hóa tự động tái tạo tốt các đầu vào bình thường nhưng tạo ra lỗi tái tạo lớn đối với các đầu vào bất thường.
Cờ LOF chỉ ra các điểm nằm ở các vùng thưa thớt, mật độ thấp so với các vùng lân cận là điểm bất thường.
Hành vi phát triển, do đó, những thay đổi được coi là bình thường và các mô hình phải thích ứng hoặc được đào tạo lại để tránh cảnh báo sai.
Tiếp tục học hỏi
Đã chọn thêm hướng dẫn cho chủ đề này
Tiếp theoHướng dẫn tiếp theo
Phát hiện bất thường AI
Ứng dụng