Airflow, Prefect และ cron
ในวิดีโอ คุณได้เห็นเครื่องมือหลายตัวที่ช่วยกำหนดตารางเวลาให้กับงาน Spark รวมถึงข้อจำกัดของ cron ซึ่งนำไปสู่การพัฒนาเฟรมเวิร์กอย่าง Airflow, Prefect และ Dagster
Airflow มีฟีเจอร์ที่เป็นประโยชน์มากมาย แต่คุณสามารถเลือกฟีเจอร์จากรายการด้านล่างที่ cron ก็มีให้เช่นกันได้หรือไม่
แบบฝึกหัดนี้เป็นส่วนหนึ่งของหลักสูตร
Data Engineering เบื้องต้น
แบบฝึกหัดเชิงโต้ตอบแบบลงมือทำจริง
เปลี่ยนทฤษฎีให้เป็นการลงมือทำด้วยแบบฝึกหัดเชิงโต้ตอบหนึ่งในของเรา
เริ่มแบบฝึกหัด