ÎncepețiÎncepe gratuit

Configurarea Airflow

În acest exercițiu, vei învăța cum să adaugi un DAG în Airflow. În dreapta ai un terminal la dispoziție. Mediul de lucru vine cu Airflow pre-configurat, dar îl poți instala ușor și pe cont propriu.

Trebuie să muți fișierul dag.py, care conține DAG-ul definit în exercițiul anterior, în folderul DAGs. Iată pașii pentru a-l găsi:

  • Directorul principal al Airflow este definit în variabila de mediu AIRFLOW_HOME. Tastează echo $AIRFLOW_HOME pentru a-l afla.
  • În acest director, găsește fișierul airflow.cfg. Folosește head pentru a-l citi și identifică valoarea câmpului dags_folder.

Acum poți găsi folderul și muta fișierul dag.py acolo: mv ./dag.py <dags_folder>.

Ce fișiere conține folderul DAGs după ce ai mutat fișierul?

Acest exercițiu face parte din cursul

Introducere în Data Engineering

Vezi cursul

Exercițiu interactiv practic

Transformă teoria în practică cu unul dintre exercițiile noastre interactive

Începe exercițiul