Thiết lập pipeline ETL cho dữ liệu bán hàng

Bạn đã học rất nhiều về cách Airflow hoạt động – giờ là lúc triển khai quy trình của bạn vào một pipeline chạy production gồm nhiều đối tượng như task và sensor. Sếp của bạn muốn quy trình này được tự động hóa và có thể cung cấp báo cáo, vì điều đó sẽ giúp đội ngũ sales có thêm đòn bẩy để chốt một thương vụ. Khách hàng tiềm năng cho biết nếu họ thấy các cập nhật được tự động hóa, họ sẵn sàng đăng ký dịch vụ dữ liệu đã đề xuất.

Dựa trên những gì bạn đã biết về quy trình, sẽ có dữ liệu bán hàng được tải lên hệ thống. Khi dữ liệu được tải lên, một tệp mới cần được tạo để kích hoạt toàn bộ xử lý, nhưng hiện có gì đó chưa hoạt động đúng.