1. Học hỏi
    2. /
  2. Khoa Học
    3. /
  3. Mô hình hóa Rủi ro Tín dụng bằng Python
Connected

Bài tập

So sánh bằng ROC

Bạn nên dùng biểu đồ ROC và điểm AUC để so sánh hai mô hình. Đôi khi, trực quan hóa sẽ giúp bạn và người dùng doanh nghiệp tiềm năng hiểu rõ sự khác biệt giữa các mô hình đang được cân nhắc.

Khi đã có đồ thị, bạn sẽ tự tin hơn để đưa ra quyết định. Lift cho biết đường cong lệch xa dự đoán ngẫu nhiên đến mức nào. AUC là diện tích giữa đường cong và đường dự đoán ngẫu nhiên. Mô hình có lift lớn hơn và AUC cao hơn là mô hình dự đoán chính xác hơn.

Các mô hình đã huấn luyện clf_logistic và clf_gbt đã được nạp vào không gian làm việc. Các dự đoán xác suất vỡ nợ clf_logistic_preds và clf_gbt_preds cũng đã được nạp sẵn.

Hướng dẫn 1/2

undefined XP
    1
    2
  • Tính fallout, sensitivity và thresholds cho logistic regression và gradient boosted tree.
  • Vẽ biểu đồ ROC cho lr rồi đến gbt bằng cách đặt fallout trên trục x và sensitivity trên trục y cho từng mô hình.