컬럼 수준 품질 검사 추가하기
불량 데이터를 정기적으로 적재하는 파이프라인은 오류를 명확하게 드러내는 파이프라인보다 더 위험합니다. 다운스트림 팀이 daily_summary를 사용하기 전에, 적재 직후 실행되는 컬럼 수준 품질 게이트를 추가해 보겠습니다. 매출이 0 아래로 떨어지거나 주문 건수가 누락된 경우 실행을 거부하도록 설정합니다.
적재 태스크와 SQL 파일은 이전 레슨에서 미리 채워져 있습니다.
이 연습은 강의의 일부입니다
불량 데이터를 정기적으로 적재하는 파이프라인은 오류를 명확하게 드러내는 파이프라인보다 더 위험합니다. 다운스트림 팀이 daily_summary를 사용하기 전에, 적재 직후 실행되는 컬럼 수준 품질 게이트를 추가해 보겠습니다. 매출이 0 아래로 떨어지거나 주문 건수가 누락된 경우 실행을 거부하도록 설정합니다.
적재 태스크와 SQL 파일은 이전 레슨에서 미리 채워져 있습니다.
이 연습은 강의의 일부입니다