НачатьНачать бесплатно

Настройка Airflow

В этом упражнении вы узнаете, как добавить DAG в Airflow. Справа у вас есть терминал. Рабочая среда поставляется с предварительно настроенным Airflow, однако его легко установить самостоятельно.

Вам нужно переместить файл dag.py с DAG, который вы определили в предыдущем упражнении, в папку DAGs. Вот как её найти:

  • Домашний каталог Airflow задаётся переменной окружения AIRFLOW_HOME. Введите echo $AIRFLOW_HOME, чтобы узнать его путь.
  • В этом каталоге найдите файл airflow.cfg. Используйте команду head, чтобы прочитать файл и найти значение параметра dags_folder.

Теперь вы можете найти нужную папку и переместить в неё файл dag.py: mv ./dag.py <dags_folder>.

Какие файлы оказались в папке DAGs после перемещения файла?

Это упражнение является частью курса

Введение в дата-инжиниринг

Посмотреть курс

Практическое интерактивное упражнение

Превратите теорию в практику с помощью одного из наших интерактивных упражнений

Начать упражнение