Bắt đầu ngayBắt đầu miễn phí

Báo hiệu dữ liệu sẵn sàng với Asset outlet

Nhóm của bạn có một pipeline ghi dữ liệu bán hàng hằng ngày vào s3://data-lake/sales/daily.csv, và một số pipeline phía sau phụ thuộc vào nó. Thay vì để chúng thăm dò theo lịch hoặc đoán khi nào tệp sẵn sàng, bạn sẽ gắn một Asset outlet để tác vụ này phát tín hiệu rằng dữ liệu đã được cập nhật ngay khi nó hoàn tất. Tín hiệu đó cho phép các Dag khác tự lập lịch dựa trên chính dữ liệu.

Sau khi hoàn thành mã, hãy chạy tệp, rồi xác minh asset đã được đăng ký và cập nhật bằng Airflow CLI.

Bài tập này là một phần của khóa học

Xây dựng Data Pipeline với Airflow

Xem khóa học

Bài tập tương tác thực hành

Biến lý thuyết thành hành động với một trong các bài tập tương tác của chúng tôi

Bắt đầu bài tập