HƯỚNG DẪN cơ bản

AI & Dữ liệu

Dữ liệu là thông tin được ghi lại mà hệ thống máy học học được hoặc xử lý.

Nghe hướng dẫn nàyAI thuật lại · ~2 min

Trên trang nàyĐọc trong 2 phút
  1. Tổng quan
  2. Những điểm chính rút ra
  3. Lặn sâu
  4. Tìm rò rỉ trong tập dữ liệu hủy bỏ
  5. Triển khai trong thế giới thực
  6. Đưa nó vào thực tế
  7. Nguồn tham khảo và đọc thêm
  8. Tiếp tục khám phá
  9. Câu hỏi thường gặp

Tổng quan

Tính hữu dụng của nó phụ thuộc vào mức độ liên quan, chất lượng đo lường, quyền và mức độ bao phủ của nhiệm vụ dự định. Nhiều bản ghi hơn không tự động sửa các lỗi hệ thống hoặc các quần thể bị thiếu.

Những điểm chính rút ra

  1. Xác định đơn vị của một ví dụ
  2. Chỉ sử dụng thông tin có sẵn tại thời điểm dự đoán.
  3. Theo dõi nguồn gốc dữ liệu, sự thiếu hụt và mức độ bao phủ của nhóm con.

Lặn sâu

Bắt đầu bằng việc xác định một ví dụ đại diện cho điều gì. Một hàng có thể mô tả một khách hàng, một giao dịch, một bức ảnh hoặc một khoảnh khắc trong chuỗi thời gian. Các đơn vị đó xác định cách thức hoạt động của các bản sao, nhãn và phân chia đánh giá. Mười phép đo từ một thiết bị không nhất thiết phải là mười thiết bị độc lập. Các tính năng là đầu vào có sẵn cho mô hình. Nhãn là kết quả mục tiêu được sử dụng trong học tập có giám sát. Kiểm tra thời điểm mỗi tính năng có sẵn: lý do hủy được ghi lại sau khi khách hàng rời đi không thể dự đoán trước một cách chính xác việc khởi hành đó. Đây là một dạng rò rỉ ngay cả khi trường có vẻ mang tính dự đoán cao. Kiểm tra các giá trị bị thiếu, sự bất đồng về chú thích, phạm vi bất thường và những thay đổi trong phương pháp thu thập. Thiếu thông tin có thể mang ý nghĩa; thay thế mọi giá trị còn thiếu bằng số 0 có thể kết hợp một đại lượng chưa biết với số 0 thực. Ghi lại cách xử lý và thử nghiệm nó trên các ví dụ đại diện. Ghi lại các quy tắc xuất xứ và truy cập cùng với tập dữ liệu. Chỉ riêng URL công khai không thiết lập được quyền sử dụng lại mọi mục cho mọi mục đích. Chỉ thu thập thông tin cần thiết cho nhiệm vụ và xác định thủ tục lưu giữ và xóa. Đánh giá riêng biệt các nhóm hoặc điều kiện mà nếu không thì sai số sẽ biến mất bên trong mức trung bình tổng thể.

04Ví dụ hoạt động

Tìm rò rỉ trong tập dữ liệu hủy bỏ

  1. Hãy tưởng tượng các bản ghi có ngày đăng ký, mức sử dụng hàng tháng, ngày hủy và lý do hủy.

  2. Để dự đoán số lượt hủy vào đầu tháng 6, hãy cố định mọi thông tin đầu vào vào ngày đó. Xóa lý do và ngày được ghi sau thời gian dự đoán.

  3. Hãy đào tạo vào những khoảng thời gian trước đó và kiểm tra ở những khoảng thời gian chưa được chạm tới sau đó. So sánh kết quả có và không có trường bị rò rỉ.

Những gì nó cho thấy

Bài tập thiết kế giả định này xác định một lối tắt không hợp lệ trước khi điểm số tâng bốc trở thành quyết định triển khai.

Triển khai trong thế giới thực

Tách nhiều ảnh của cùng một đối tượng trước khi tách tập dữ liệu nhận dạng.

Gắn cờ kết quả đọc của cảm biến nằm ngoài phạm vi hợp lý về mặt vật lý để xem xét.

Đưa nó vào thực tế

Tại sao nó quan trọng

  • Quyết định rõ ràng hơn. Nó giúp bạn tách biệt các tuyên bố kỹ thuật rõ ràng khỏi ngôn ngữ tiếp thị.
  • Chi phí và ngân sách. Bạn có thể đặt các câu hỏi triển khai tốt hơn trước khi chi tiền hoặc thời gian.
  • Nhóm và quy trình làm việc. Các nhóm có sự hiểu biết chung sẽ đưa ra các quyết định về sản phẩm, chính sách và học tập tốt hơn.

coi chừng

  • Các nhóm khác nhau có thể sử dụng cùng một thuật ngữ một cách khác nhau, vì vậy hãy sớm xác định phạm vi.
  • Điểm chuẩn có thể trông mạnh mẽ trong khi hiệu suất trong thế giới thực không đồng đều.
  • Việc bỏ qua các kế hoạch đánh giá và chất lượng dữ liệu thường tạo ra những kết quả mong manh.

Các bước tiếp theo

  1. Bắt đầu với một định nghĩa đơn giản về kết quả bạn cần.
  2. Chọn một số liệu thành công và một điều kiện thất bại trước khi thử nghiệm.
  3. Chạy một thử nghiệm nhỏ với dữ liệu đại diện chứ không phải một bản demo bóng bẩy.
  4. Tài liệu nơi AI & Dữ liệu trợ giúp và nơi các phương pháp đơn giản hơn sẽ tốt hơn.

Nguồn tham khảo và đọc thêm

  1. GoogleĐặc điểm tập dữ liệu

Tiếp tục khám phá

Bản tin miễn phí

Nhận bản tóm tắt AI hàng ngày

Ba câu chuyện AI đã được xác minh vào mỗi buổi sáng các ngày trong tuần, được viết bằng tiếng Anh đơn giản. Miễn phí mãi mãi, không có quảng cáo.

Một email mỗi ngày trong tuần. Hủy đăng ký trong một cú nhấp chuột. Chúng tôi không bao giờ bán hoặc chia sẻ địa chỉ của bạn.

Tự kiểm tra

Take the AI & Data quiz

Phản hồi tức thì về mọi câu trả lời và chứng chỉ có thể chia sẻ với ID có thể xác minh sau khi bạn vượt qua khóa học.

Bắt đầu bài kiểm tra

Hỗ trợ giáo dục AI miễn phí. AI Understanding là tổ chức phi lợi nhuận 501(c)(3) — không bao giờ có quảng cáo, không có tường phí. Hãy quyên góp

Câu hỏi thường gặp

Một tập dữ liệu lớn vẫn có thể kém?

Đúng. Các bản ghi trùng lặp, dán nhãn sai, không liên quan hoặc không đầy đủ một cách có hệ thống có thể khiến một tập dữ liệu lớn không phù hợp với nhiệm vụ dự định.