Trực quan hóa điểm cực tiểu của RSS

Trong bài tập này, bạn sẽ tính và trực quan hóa cách RSS thay đổi theo các giá trị tham số của mô hình. Bắt đầu bằng cách giữ nguyên hệ số chặn (intercept), nhưng thay đổi hệ số góc (slope): với mỗi giá trị slope, bạn sẽ tính giá trị mô hình và RSS tương ứng. Khi đã có một mảng các giá trị RSS, bạn sẽ xác định giá trị RSS nhỏ nhất bằng mã, và từ giá trị nhỏ nhất đó, suy ra slope tạo ra RSS tối thiểu.

Sử dụng sẵn các mảng dữ liệu x_data, y_data, và vùng chứa rỗng rss_list để bắt đầu.

Bài tập này là một phần của khóa học

Nhập môn Mô hình tuyến tính với Python

Xem khóa học

Hướng dẫn bài tập

Với mỗi giá trị thử a1 trong a1_array, dùng model() để dự đoán giá trị mô hình, rồi dùng compute_rss() với y_data, y_model, lưu đầu ra rss_value vào rss_list.
Chuyển rss_list thành np.array(), sau đó dùng np.min() để tìm giá trị nhỏ nhất trong rss_array.
Dùng np.where() để tìm giá trị thử tương ứng và gán kết quả cho best_a1.
Dùng plot_rss_vs_parameters() để xác nhận trực quan rằng các giá trị của bạn khớp với hình minh họa.

Bài tập tương tác thực hành trực tiếp

Hãy thử làm bài tập này bằng cách hoàn thành đoạn mã mẫu này.

# Loop over all trial values in a1_array, computing rss for each
a1_array = np.linspace(15, 35, 101)
for a1_trial in a1_array:
    y_model = model(x_data, a0=150, a1=____)
    rss_value = compute_rss(y_data, ____)
    rss_list.append(____)

# Find the minimum RSS and the a1 value from whence it came
rss_array = np.array(____)
best_rss = np.min(____) 
best_a1 = a1_array[np.where(rss_array==____)]
print('The minimum RSS = {}, came from a1 = {}'.format(best_rss, best_a1))

# Plot your rss and a1 values to confirm answer
fig = plot_rss_vs_a1(a1_array, rss_array)

Chỉnh sửa và Chạy Mã

Bài tập này là một phần của khóa học

Nhập môn Mô hình tuyến tính với Python

SkillTag.level.intermediateSkillTag.label

4.8+

Bắt đầu khóa học miễn phí

Chúng ta bắt đầu khóa học bằng việc khám phá ban đầu các mối quan hệ tuyến tính, bao gồm một số ví dụ truyền cảm hứng về cách mô hình tuyến tính được sử dụng và minh họa các phương pháp trực quan hóa dữ liệu từ matplotlib. Sau đó, chúng ta dùng thống kê mô tả để định lượng hình dạng dữ liệu và dùng tương quan để định lượng độ mạnh của mối quan hệ tuyến tính giữa hai biến.

Exercise 1: Giới thiệu về mô hình hóa dữ liệu Exercise 2: Lý do mô hình hóa: Nội suy Exercise 3: Lý do mô hình hóa: Ngoại suy (Extrapolation)Exercise 4: Lý do để Mô hình hóa: Ước lượng Quan hệ Exercise 5: Trực quan hóa các mối quan hệ tuyến tính Exercise 6: Vẽ biểu đồ dữ liệu Exercise 7: Vẽ mô hình lên trên dữ liệu Exercise 8: Ước lượng trực quan độ dốc và hệ số chặn Exercise 9: Định lượng mối quan hệ tuyến tính Exercise 10: Giá trị trung bình, Độ lệch & Độ lệch chuẩn Exercise 11: Hiệp phương sai và Tương quan Exercise 12: Độ mạnh tương quan

Tại đây, chúng ta xem xét các thành phần cấu thành nên một mô hình tuyến tính. Sử dụng khái niệm Chuỗi Taylor, chúng ta tập trung vào các tham số độ dốc (slope) và hệ số chặn (intercept), cách chúng xác định mô hình và cách diễn giải chúng trong nhiều ngữ cảnh ứng dụng. Chúng ta áp dụng nhiều mô-đun Python để tìm mô hình khớp dữ liệu tốt nhất, bằng cách tính các giá trị tối ưu của độ dốc và hệ số chặn, sử dụng bình phương tối thiểu, numpy, statsmodels và scikit-learn.

Exercise 1: Điều gì khiến một mô hình là tuyến tính Exercise 2: Các hạng trong một mô hình Exercise 3: Các thành phần của mô hình Exercise 4: Tham số mô hình Exercise 5: Diễn giải hệ số góc và hệ số chặn Exercise 6: Tỷ lệ tuyến tính Exercise 7: Độ dốc và Tốc độ thay đổi Exercise 8: Hệ số chặn và điểm bắt đầu Exercise 9: Tối ưu hóa mô hình Exercise 10: Tổng bình phương phần dư Exercise 11: Tối thiểu hóa phần dư Exercise 12: Trực quan hóa điểm cực tiểu của RSS

Bài tập hiện tại

Exercise 13: Tối ưu bình phương tối thiểu Exercise 14: Bình phương tối thiểu với `numpy`Exercise 15: Tối ưu hóa với Scipy Exercise 16: Bình phương tối thiểu với `statsmodels`

Tiếp theo, chúng ta sẽ áp dụng mô hình vào dữ liệu thực và tạo dự đoán. Chúng ta sẽ khám phá một số cạm bẫy và giới hạn thường gặp của dự đoán, và đánh giá, so sánh các mô hình bằng cách định lượng và đối chiếu một số thước đo độ phù hợp, bao gồm RMSE và R-squared.

Exercise 1: Mô hình hóa dữ liệu thực Exercise 2: Mô hình tuyến tính trong Nhân học Exercise 3: Mô hình tuyến tính trong Hải dương học Exercise 4: Mô hình tuyến tính trong Vũ trụ học Exercise 5: Giới hạn của dự đoán Exercise 6: Nội suy: Khoảng thời gian ở giữa Exercise 7: Nội suy quá đà: Đi quá giới hạn Exercise 8: Mức độ phù hợp (Goodness-of-Fit)Exercise 9: RMSE từng bước Exercise 10: R-Squared Exercise 11: Sai số chuẩn Exercise 12: Độ biến thiên quanh xu thế Exercise 13: Phân rã phương sai thành hai phần

Ở chương cuối, chúng ta giới thiệu các khái niệm từ thống kê suy luận và sử dụng chúng để tìm hiểu cách ước lượng hợp lý tối đa và bootstrap resampling có thể dùng để ước lượng tham số của mô hình tuyến tính. Sau đó, chúng ta áp dụng các phương pháp này để đưa ra các phát biểu xác suất về mức độ tin cậy đối với các tham số mô hình.

Exercise 1: Các khái niệm về thống kê suy luận Exercise 2: Thống kê mẫu so với tổng thể Exercise 3: Độ biến thiên của thống kê mẫu Exercise 4: Trực quan hóa độ biến thiên của một thống kê Exercise 5: Ước lượng mô hình và Hợp lý Exercise 6: Ước lượng tham số tổng thể Exercise 7: Tối đa hóa Likelihood, Phần 1 Exercise 8: Tối đa hóa khả năng xảy ra (Likelihood), Phần 2 Exercise 9: Độ bất định của mô hình và phân phối mẫu Exercise 10: Bootstrap và Sai số chuẩn Exercise 11: Ước lượng tốc độ và khoảng tin cậy Exercise 12: Trực quan hóa Bootstrap Exercise 13: Sai số mô hình và tính ngẫu nhiên Exercise 14: Thống kê kiểm định và kích thước hiệu ứng Exercise 15: Giả thuyết không Exercise 16: Trực quan hóa thống kê kiểm định Exercise 17: Trực quan hóa P-Value Exercise 18: Kết thúc khóa học