Настройка Airflow
В этом упражнении вы узнаете, как добавить DAG в Airflow. Справа у вас есть терминал. Рабочая среда поставляется с предварительно настроенным Airflow, однако его легко установить самостоятельно.
Вам нужно переместить файл dag.py с DAG, который вы определили в предыдущем упражнении, в папку DAGs. Вот как её найти:
- Домашний каталог Airflow задаётся переменной окружения
AIRFLOW_HOME. Введитеecho $AIRFLOW_HOME, чтобы узнать его путь. - В этом каталоге найдите файл
airflow.cfg. Используйте командуhead, чтобы прочитать файл и найти значение параметраdags_folder.
Теперь вы можете найти нужную папку и переместить в неё файл dag.py: mv ./dag.py <dags_folder>.
Какие файлы оказались в папке DAGs после перемещения файла?
Это упражнение является частью курса
Введение в дата-инжиниринг
Практическое интерактивное упражнение
Превратите теорию в практику с помощью одного из наших интерактивных упражнений
Начать упражнение