Configurarea Airflow
În acest exercițiu, vei învăța cum să adaugi un DAG în Airflow. În dreapta ai un terminal la dispoziție. Mediul de lucru vine cu Airflow pre-configurat, dar îl poți instala ușor și pe cont propriu.
Trebuie să muți fișierul dag.py, care conține DAG-ul definit în exercițiul anterior, în folderul DAGs. Iată pașii pentru a-l găsi:
- Directorul principal al Airflow este definit în variabila de mediu
AIRFLOW_HOME. Tasteazăecho $AIRFLOW_HOMEpentru a-l afla. - În acest director, găsește fișierul
airflow.cfg. Foloseșteheadpentru a-l citi și identifică valoarea câmpuluidags_folder.
Acum poți găsi folderul și muta fișierul dag.py acolo: mv ./dag.py <dags_folder>.
Ce fișiere conține folderul DAGs după ce ai mutat fișierul?
Acest exercițiu face parte din cursul
Introducere în Data Engineering
Exercițiu interactiv practic
Transformă teoria în practică cu unul dintre exercițiile noastre interactive
Începe exercițiul