Trong bài tập này, bạn sẽ đánh giá hiệu suất của mô hình dự báo để khám phá các trường hợp sử dụng của thực nghiệm.

Bảng dự báo đã gộp (fc), kết hợp dự đoán với kết quả kiểm thử thực tế, đã được nạp sẵn. Các hàm đánh giá (mape, rmse, coverage) và pandas (đặt tên là pd) cũng sẵn sàng để dùng. Dưới đây là tham chiếu nhanh cho các hàm:

def mape(y, yhat):
    mape = mean(abs(y - yhat) / y) 
    return mape

def rmse(y, yhat):
    rmse = (mean((y - yhat) ** 2)) ** 0.5
    return rmse

def coverage(y, lower, upper):
    coverage = sum((y <= upper) & (y >= lower)) / len(y)
    return coverage

Trước tiên, hãy tính các chỉ số hiệu suất cho mô hình. Sau đó, trả lời một câu hỏi về mục tiêu của thực nghiệm trong dự báo.

Đăng ký mô hình với MLflow

Create Your Free Account