Bài kiểm tra có liên kết hướng dẫn · Trung bình Cấp độ

Đánh giá ngoài chính sách từ bài kiểm tra dữ liệu đã ghi

Áp dụng trọng số xu hướng nghịch đảo và xác định các yêu cầu chồng chéo, phương sai và ghi nhật ký nhằm hạn chế các ước tính chính sách phản thực tế.

Đường dẫn hướng dẫn liên quanTắt dữ liệu đã ghi đánh giá chính sách
Câu hỏi 1 của 8

Đánh giá ngoài chính sách ước tính điều gì?

Xem trước mọi câu hỏi8 câu hỏi

Câu trả lời và giải thích xuất hiện khi bạn làm bài kiểm tra.

  1. Đánh giá ngoài chính sách ước tính điều gì?
    • Kết quả của chính sách mục tiêu sử dụng dữ liệu do chính sách khác tạo ra
    • Độ chính xác huấn luyện của mô hình ghi nhật ký
    • Hiệu ứng đặc trưng nhân quả của mô hình
    • Tổng số yêu cầu được ghi lại
  2. Tại sao IPS chia cho xu hướng ghi nhật ký?
    • Để làm cho phần thưởng không âm
    • Để cân nhắc lại các hành động được quan sát theo khả năng chính sách cũ chọn chúng
    • Để loại bỏ nhu cầu về kết quả
    • Chỉ để ước tính phân phối bối cảnh
  3. Điều gì xảy ra khi chính sách ghi nhật ký gán một xác suất rất nhỏ cho một hành động đã chọn?
    • Chính sách ứng viên tự động không thiên vị
    • Kết quả hành động được biết đến một cách chắc chắn
    • Trọng số nghịch đảo có thể trở nên lớn và làm tăng phương sai
    • Phần thưởng được đặt thành 0
  4. Thiếu hỗ trợ có nghĩa là gì đối với một hành động mục tiêu?
    • Mọi phần thưởng đều bị thiếu
    • Hành động luôn tối ưu
    • Chính sách mục tiêu bằng logger
    • Nhật ký chứa ít hoặc không có bằng chứng cho hành động đó trong ngữ cảnh
  5. Tại sao phải báo cáo kích thước mẫu hiệu dụng với các ước tính có trọng số?
    • Nó thay đổi các giá trị xu hướng
    • Nó tiết lộ liệu một vài trọng lượng lớn có chiếm ưu thế trong thông tin hay không
    • Nó đo lường số lượng hành động chính sách có thể thực hiện được
    • Nó chứng tỏ mô hình khen thưởng là đúng
  6. Việc cắt bớt trọng lượng IPS có thể tạo ra sự cân bằng gì?
    • Guaranteed unbiasedness
    • Cỡ mẫu cao hơn không có giả định
    • Phương sai thấp hơn nhưng có thể có sai lệch
    • Không ảnh hưởng đến ước tính
  7. Những gì phải được ghi lại để hỗ trợ đánh giá IPS thông thường?
    • Các quyết định trong tương lai của chính sách ứng cử viên
    • Chỉ dự đoán mô hình
    • Chỉ tổng số phần thưởng cuối cùng
    • Xác suất hành động và kết quả với bối cảnh liên quan
  8. Khi nào có thể cần một thử nghiệm có kiểm soát thay vì dựa vào OPE?
    • Khi chính sách của ứng cử viên hành động bên ngoài hỗ trợ lịch sử
    • Bất cứ khi nào một số liệu dương
    • Khi xu hướng được ghi lại chính xác
    • Khi mục tiêu phù hợp với chính sách ghi nhật ký