운영 환경에서의 성능 추정
당신은 자동차 보험사에서 일하는 데이터 과학자라고 가정해 볼게요. 보험료를 예측하는 모델을 성공적으로 배포했고, 성능 추정을 활용하는 모니터링 시스템도 구축했습니다. 그런데 몇 주 후 모델 성능이 하락했고, 입력 데이터가 대표성이 낮은 구간으로 이동하는 현상이 관찰되었어요.
이 경우 성능 추정 알고리즘의 출력은 여전히 유효한가요? 그 이유도 함께 설명해 주세요.
이 연습은 강의의 일부입니다
당신은 자동차 보험사에서 일하는 데이터 과학자라고 가정해 볼게요. 보험료를 예측하는 모델을 성공적으로 배포했고, 성능 추정을 활용하는 모니터링 시스템도 구축했습니다. 그런데 몇 주 후 모델 성능이 하락했고, 입력 데이터가 대표성이 낮은 구간으로 이동하는 현상이 관찰되었어요.
이 경우 성능 추정 알고리즘의 출력은 여전히 유효한가요? 그 이유도 함께 설명해 주세요.
이 연습은 강의의 일부입니다