Налаштування Airflow
У цій вправі ви навчитеся додавати DAG до Airflow. Праворуч у вашому розпорядженні є термінал. Робоче середовище вже має попередньо налаштований Airflow, але його легко встановити самостійно.
Вам потрібно перемістити файл dag.py, який містить DAG, визначений у попередній вправі, до папки DAGs. Ось як її знайти:
- Домашній каталог Airflow заданий у змінній середовища
AIRFLOW_HOME. Введітьecho $AIRFLOW_HOME, щоб дізнатися значення. - У цьому каталозі знайдіть файл
airflow.cfg. Скористайтесяhead, щоб прочитати файл і знайти значенняdags_folder.
Тепер ви можете знайти потрібну папку й перемістити туди файл dag.py: mv ./dag.py <dags_folder>.
Які файли міститиме папка DAGs після переміщення файла?
Ця вправа є частиною курсу
Вступ до Data Engineering
Практична інтерактивна вправа
Перетворіть теорію на практику за допомогою однієї з наших інтерактивних вправ
Почати вправу