Konfiguracja Airflow
W tym ćwiczeniu nauczysz się, jak dodać DAG do Airflow. Po prawej stronie masz do dyspozycji terminal. Środowisko pracy ma Airflow już wstępnie skonfigurowane, ale instalacja na własną rękę jest prosta.
Musisz przenieść plik dag.py zawierający DAG zdefiniowany w poprzednim ćwiczeniu do folderu DAGs. Oto kroki, które pozwolą ci go znaleźć:
- Katalog domowy Airflow jest zdefiniowany w zmiennej środowiskowej
AIRFLOW_HOME. Wpiszecho $AIRFLOW_HOME, aby się dowiedzieć, gdzie się znajduje. - W tym katalogu znajdź plik
airflow.cfg. Użyj poleceniahead, aby odczytać plik i znaleźć wartośćdags_folder.
Teraz możesz odnaleźć folder i przenieść do niego plik dag.py: mv ./dag.py <dags_folder>.
Jakie pliki znajdują się w folderze DAGs po przeniesieniu pliku?
To ćwiczenie jest częścią kursu
Wprowadzenie do inżynierii danych
Interaktywne ćwiczenie praktyczne
Przekształć teorię w praktykę dzięki jednemu z naszych interaktywnych ćwiczeń
Rozpocznij ćwiczenie