1. Học hỏi
    2. /
  2. Khoa Học
    3. /
  3. Dự đoán CTR với Machine Learning trong Python
Connected

Bài tập

Precision, ROI và AUC

Tỷ suất hoàn vốn (ROI) có thể được phân rã thành precision nhân với tỷ lệ giữa lợi nhuận và chi phí. Như đã thảo luận, precision của mô hình có thể thấp ngay cả khi AUC của đường cong ROC cao. Nếu precision thấp, ROI cũng sẽ thấp. Trong bài tập này, bạn sẽ dùng một MLP để tính ROI mẫu với giả định r cố định (lợi nhuận trên mỗi lượt nhấp theo số lần hiển thị) và cost (chi phí trên mỗi số lần hiển thị), cùng với precision và AUC của đường cong ROC để xem ba giá trị này biến thiên thế nào.

X_train, y_train, X_test, y_test đã có sẵn trong không gian làm việc của bạn, cùng clf là một bộ phân loại MLP, điểm xác suất lưu trong y_score và nhãn dự đoán trong y_pred. pandas dưới tên pd và sklearn cũng đã sẵn sàng trong không gian làm việc của bạn.

Hướng dẫn

100 XP
  • Tính precision prec của bộ phân loại MLP.
  • Tính tổng ROI dựa trên precision prec.