or
이 연습은 강의의 일부입니다
Airflow의 주요 구성 요소를 살펴보고, TaskFlow API로 첫 번째 DAG를 작성한 뒤, XCom을 이용해 태스크 간에 데이터를 전달하는 방법을 배웁니다.
동적 태스크 매핑으로 태스크를 병렬 실행하고, Asset을 활용해 데이터 기반으로 DAG를 스케줄링하며, 사람의 승인 단계를 추가하는 방법을 익힙니다.
현재 연습
재시도와 콜백으로 오류를 처리하고, 지연 가능한 센서로 리소스를 절약하며, 세 가지 수준에서 DAG를 테스트하는 방법을 학습합니다.
마지막 챕터에서는 DuckDB 위에서 SQL ETL 파이프라인을 구축하고, Asset Partition을 활용한 파티션 인식 스케줄링을 추가하며, 데이터 품질 검사를 파이프라인에 직접 삽입하는 방법을 배웁니다.