Оценка производительности модели предсказания чаевых
В предыдущих упражнениях вы подготовили референсную и аналитическую выборки для набора данных NYC Green Taxi. В этом упражнении вы воспользуетесь этими данными, чтобы оценить производительность модели в производственной среде.
Сначала необходимо инициализировать алгоритм DLE с заданными параметрами, а затем визуализировать результаты.
Референсная и аналитическая выборки уже загружены и сохранены в переменных reference и analysis.
Библиотека nannyml также уже импортирована.
Это упражнение является частью курса
Мониторинг машинного обучения на Python
Инструкции к упражнению
- Инициализируйте алгоритм DLE с дневным периодом чанков, укажите
tip_amountв качествеy_trueи используйте метрику MSE. - Обучите оценщик DLE на референсной выборке (
reference), выполните оценку производительности для аналитической выборки и сохраните результат в переменнойresults. - Визуализируйте результаты с помощью методов
plot()иshow().
Интерактивное практическое упражнение
Попробуйте выполнить это упражнение, дополнив этот пример кода.
estimator = nannyml.DLE(y_pred='y_pred',
timestamp_column_name='lpep_pickup_datetime',
feature_column_names=features,
chunk_period='d',
y_true='tip_amount',
metrics=['mse'])
# Fit the reference data to the DLE algorithm
estimator.____(____)
# Estimate the performance on the analysis data
results = estimator.____(____)
# Plot and show the results
____.____().____()