Когда оценка производительности даёт сбой
Представьте, что вы работаете дата-сайентистом в банке над задачей прогнозирования дефолта по кредитам. Каждый месяц вы получаете размеченные данные для проверки модели и алгоритма оценки производительности. В один из месяцев вы замечаете, что клиенты с хорошо оплачиваемой работой стали значительно чаще допускать дефолт — из-за резкого роста инфляции и последовавшего кризиса занятости.
Сравнивая оценочную и фактическую производительность, вы обнаруживаете существенное расхождение между ними.
Чем можно объяснить снижение эффективности алгоритма оценки производительности в данной ситуации?
Это упражнение является частью курса
Мониторинг машинного обучения на Python
Практическое интерактивное упражнение
Превратите теорию в практику с помощью одного из наших интерактивных упражнений
Начать упражнение