Menyiapkan Airflow
Dalam latihan ini, Anda akan mempelajari cara menambahkan sebuah DAG ke Airflow. Di sebelah kanan, Anda memiliki terminal yang dapat digunakan. Workspace sudah dilengkapi Airflow yang telah dikonfigurasi sebelumnya, namun mudah untuk menginstalnya sendiri.
Anda perlu memindahkan file dag.py yang berisi DAG yang Anda definisikan pada latihan sebelumnya ke folder DAGs. Berikut langkah-langkah untuk menemukannya:
- Direktori home Airflow ditentukan dalam variabel lingkungan
AIRFLOW_HOME. Ketikecho $AIRFLOW_HOMEuntuk mengetahuinya. - Di direktori ini, temukan file
airflow.cfg. Gunakanheaduntuk membaca file tersebut, dan cari nilaidags_folder.
Sekarang Anda dapat menemukan foldernya dan memindahkan file dag.py ke sana: mv ./dag.py <dags_folder>.
File apa saja yang dimiliki folder DAGs setelah Anda memindahkan file tersebut?
Latihan ini adalah bagian dari kursus
Pengantar Data Engineering
Latihan interaktif praktis
Ubah teori menjadi tindakan dengan salah satu latihan interaktif kami.
Mulai berolahraga