HƯỚNG DẪN cơ bản

Hồi quy logistic

Hồi quy logistic dự đoán xác suất một nội dung nào đó thuộc về một lớp, chẳng hạn như thư rác hoặc không phải thư rác, bằng cách nén một tổng có trọng số thông qua một đường cong hình chữ S.

Nghe hướng dẫn nàyAI thuật lại · ~2 min

Trên trang nàyĐọc trong 2 phút
  1. Tổng quan
  2. Lặn sâu
  3. Triển khai trong thế giới thực
  4. Tương lai của hồi quy logistic
  5. Đưa nó vào thực tế
  6. Tiếp tục khám phá
  7. Câu hỏi thường gặp

Tổng quan

It matters as the foundational, highly interpretable algorithm for classification.

Lặn sâu

Bất chấp tên gọi của nó, hồi quy logistic là một phương pháp phân loại, không phải là phương pháp hồi quy. Nó tính tổng có trọng số của các đặc điểm đầu vào, sau đó chuyển giá trị đó thông qua hàm sigmoid (hậu cần), hàm này ánh xạ bất kỳ số nào tới xác suất trong khoảng từ 0 đến 1. Nếu xác suất vượt qua ngưỡng, thường là 0,5, thì điểm đó được gắn nhãn dương. Mô hình tìm hiểu trọng số của nó bằng cách giảm thiểu mất log (entropy chéo), điều này sẽ phạt nặng những dự đoán sai tự tin. Điểm mạnh chính là khả năng diễn giải: mỗi trọng số cho bạn biết cách một tính năng thay đổi tỷ lệ log của kết quả, do đó bạn có thể biết yếu tố nào đẩy dự đoán lên hoặc xuống. Các phiên bản nhiều lớp mở rộng nó bằng hàm softmax.

Triển khai trong thế giới thực

Lọc thư rác qua email: ước tính xác suất thư là thư rác từ các tính năng từ và người gửi.

Chấm điểm tín dụng: dự đoán khả năng người nộp đơn xin vay sẽ vỡ nợ, với mức đóng góp minh bạch.

Dự đoán rủi ro y tế: ước tính khả năng bệnh nhân mắc bệnh từ các giá trị và triệu chứng xét nghiệm.

Mô hình rời bỏ tiếp thị: dự báo liệu khách hàng có hủy đăng ký vào tháng tới hay không.

Tương lai của hồi quy logistic

Hồi quy logistic tồn tại lâu dài vì nó nhanh, minh bạch và là đường cơ sở mạnh mẽ để đo lường các mô hình phức tạp hơn. Trong các lĩnh vực được quản lý như tài chính và y học, khả năng diễn giải của nó giúp nó được sử dụng tích cực ở những nơi các mô hình hộp đen phải đối mặt với sự giám sát chặt chẽ. Nó cũng tồn tại bên trong các mạng nơ-ron hiện đại: lớp phân loại cuối cùng có sigmoid hoặc softmax về cơ bản là hồi quy logistic, vì vậy hiểu được nó là cánh cổng dẫn đến học sâu.

Đưa nó vào thực tế

Tại sao nó quan trọng

  • Quyết định rõ ràng hơn. Nó giúp bạn tách biệt các tuyên bố kỹ thuật rõ ràng khỏi ngôn ngữ tiếp thị.
  • Chi phí và ngân sách. Bạn có thể đặt các câu hỏi triển khai tốt hơn trước khi chi tiền hoặc thời gian.
  • Nhóm và quy trình làm việc. Các nhóm có sự hiểu biết chung sẽ đưa ra các quyết định về sản phẩm, chính sách và học tập tốt hơn.

coi chừng

  • Các nhóm khác nhau có thể sử dụng cùng một thuật ngữ một cách khác nhau, vì vậy hãy sớm xác định phạm vi.
  • Điểm chuẩn có thể trông mạnh mẽ trong khi hiệu suất trong thế giới thực không đồng đều.
  • Việc bỏ qua các kế hoạch đánh giá và chất lượng dữ liệu thường tạo ra những kết quả mong manh.

Các bước tiếp theo

  1. Bắt đầu với một định nghĩa đơn giản về kết quả bạn cần.
  2. Chọn một số liệu thành công và một điều kiện thất bại trước khi thử nghiệm.
  3. Chạy một thử nghiệm nhỏ với dữ liệu đại diện chứ không phải một bản demo bóng bẩy.
  4. Tài liệu về nơi hồi quy logistic hữu ích và nơi các phương pháp đơn giản hơn sẽ tốt hơn.

Tiếp tục khám phá

Bản tin miễn phí

Nhận bản tóm tắt AI hàng ngày

Ba câu chuyện AI đã được xác minh vào mỗi buổi sáng các ngày trong tuần, được viết bằng tiếng Anh đơn giản. Miễn phí mãi mãi, không có quảng cáo.

Một email mỗi ngày trong tuần. Hủy đăng ký trong một cú nhấp chuột. Chúng tôi không bao giờ bán hoặc chia sẻ địa chỉ của bạn.

Tự kiểm tra

Take the Logistic Regression quiz

Phản hồi tức thì về mọi câu trả lời và chứng chỉ có thể chia sẻ với ID có thể xác minh sau khi bạn vượt qua khóa học.

Bắt đầu bài kiểm tra

Hỗ trợ giáo dục AI miễn phí. AI Understanding là tổ chức phi lợi nhuận 501(c)(3) — không bao giờ có quảng cáo, không có tường phí. Hãy quyên góp

Câu hỏi thường gặp

What is Logistic Regression?

Hồi quy logistic dự đoán xác suất một nội dung nào đó thuộc về một lớp, chẳng hạn như thư rác hoặc không phải thư rác, bằng cách nén một tổng có trọng số thông qua một đường cong hình chữ S. Nó quan trọng như là thuật toán cơ bản, có khả năng diễn giải cao để phân loại.

Bất chấp tên gọi của nó, hồi quy logistic thực sự được sử dụng để làm gì?

Hồi quy logistic đưa ra một xác suất và được sử dụng để phân loại các mục thành các lớp riêng biệt, chẳng hạn như thư rác và không phải thư rác.

Hàm sigmoid (hậu cần) làm gì trong mô hình?

Sigmoid nén điểm tuyến tính thành phạm vi từ 0 đến 1 để có thể đọc kết quả đầu ra dưới dạng xác suất.

Hàm mất mát nào mà hồi quy logistic giảm thiểu trong quá trình đào tạo?

Hồi quy logistic được đào tạo bằng cách giảm thiểu entropy chéo, điều này gây thiệt hại nặng nề cho các ước tính xác suất tự tin nhưng sai.

Tại sao hồi quy logistic được đánh giá cao về khả năng diễn giải?

Các hệ số đã học có ý nghĩa rõ ràng: mỗi hệ số phản ánh sự thay đổi về tỷ lệ logarit trên mỗi đơn vị tính năng của nó, thường được biểu thị dưới dạng tỷ lệ chênh lệch.

Làm thế nào để hồi quy logistic thường biến xác suất thành nhãn lớp?

Nếu xác suất dự đoán vượt quá ngưỡng (thường là 0,5), điểm đó được gắn nhãn dương; ngược lại là tiêu cực.