假设您是一名负责模型上线的数据科学家。公司要求您构建一个健壮的监控系统。
为确保所有人对项目目标达成一致,您需要向首席工程师展示通用的监控工作流,并对每个步骤进行详细说明。
本练习是课程的一部分
通过我们的互动练习之一,将理论转化为实践
第 1 章将解释企业为何需要在生产环境中监控您的机器学习模型。您将了解理想的监控工作流及其各个步骤,以及监控系统在生产中可能面临的一些挑战。
当前练习
在第 2 章,您将认识到性能监控在可靠监控系统中的基础性作用。我们将探讨真实生产环境中常见的挑战,例如真值的可用性。到本章结束时,您将学会在真值数据延迟到达或缺失时,如何使用性能估计算法进行应对。
既然您已经了解了生产环境中的协变量偏移与概念漂移基础知识,我们来更深入地探讨。完成本章后,您将掌握在真实场景中检测并处理它们的不同方法。