Thiết lập Airflow
Trong bài tập này, bạn sẽ học cách thêm một DAG vào Airflow. Ở bên phải, bạn có một cửa sổ terminal để sử dụng. Môi trường làm việc đã được cấu hình sẵn Airflow, nhưng bạn cũng có thể tự cài đặt rất dễ dàng.
Bạn cần di chuyển tệp dag.py chứa DAG bạn đã định nghĩa ở bài trước vào thư mục DAGs. Làm theo các bước sau để tìm thư mục này:
- Thư mục home của Airflow được định nghĩa trong biến môi trường
AIRFLOW_HOME. Gõecho $AIRFLOW_HOMEđể xem giá trị. - Trong thư mục này, tìm tệp
airflow.cfg. Dùngheadđể đọc tệp và tìm giá trị củadags_folder.
Giờ bạn có thể xác định thư mục và di chuyển tệp dag.py vào đó: mv ./dag.py <dags_folder>.
Sau khi bạn di chuyển tệp, thư mục DAGs có những tệp nào?
Bài tập này là một phần của khóa học
Introduction to Data Engineering
Bài tập tương tác thực hành
Biến lý thuyết thành hành động với một trong các bài tập tương tác của chúng tôi
Bắt đầu bài tập