실패 시 DAG 자동 일시정지

모니터링 파이프라인이 매 시간 API 상태를 확인합니다. API가 점검으로 인해 다운되면 파이프라인이 반복적으로 실패하면서 온콜 채널에 알림이 쏟아집니다. Airflow는 연속 실패 횟수가 일정 수준을 넘으면 DAG를 자동으로 일시정지하여 불필요한 알림을 차단할 수 있습니다. 또한 콜백(callback)을 활용하면 실패가 발생할 때마다 관련 컨텍스트와 함께 로그를 남길 수 있습니다.

이 두 가지 기능을 함께 사용하여, 팀이 상황을 파악하면서도 알림 피로를 줄이는 방법을 실습해 보겠습니다.