ตั้งค่า Airflow
ในแบบฝึกหัดนี้ จะได้เรียนรู้วิธีเพิ่ม DAG เข้าสู่ Airflow ทางด้านขวามีเทอร์มินัลให้ใช้งาน workspace นี้มี Airflow ติดตั้งไว้ให้แล้ว แต่หากต้องการติดตั้งเองก็ทำได้ง่ายเช่นกัน
ให้ย้ายไฟล์ dag.py ที่ประกอบด้วย DAG ที่กำหนดไว้ในแบบฝึกหัดก่อนหน้าไปยังโฟลเดอร์ DAGs โดยทำตามขั้นตอนต่อไปนี้
- ไดเรกทอรีหลักของ Airflow ถูกกำหนดไว้ในตัวแปรสภาพแวดล้อม
AIRFLOW_HOMEพิมพ์echo $AIRFLOW_HOMEเพื่อดูค่าดังกล่าว - ในไดเรกทอรีนั้น ให้ค้นหาไฟล์
airflow.cfgใช้คำสั่งheadเพื่ออ่านไฟล์ แล้วหาค่าของdags_folder
จากนั้นก็สามารถค้นหาโฟลเดอร์และย้ายไฟล์ dag.py ไปได้ด้วยคำสั่ง: mv ./dag.py <dags_folder>
หลังจากย้ายไฟล์แล้ว โฟลเดอร์ DAGs มีไฟล์อะไรบ้าง?
แบบฝึกหัดนี้เป็นส่วนหนึ่งของหลักสูตร
Data Engineering เบื้องต้น
แบบฝึกหัดเชิงโต้ตอบแบบลงมือทำจริง
เปลี่ยนทฤษฎีให้เป็นการลงมือทำด้วยแบบฝึกหัดเชิงโต้ตอบหนึ่งในของเรา
เริ่มแบบฝึกหัด