Airflow, Prefect en cron
In de video zag je verschillende tools die je helpen bij het plannen van je Spark-jobs. Je zag de beperkingen van cron en hoe die hebben geleid tot de ontwikkeling van frameworks zoals Airflow, Prefect en Dagster.
Airflow heeft veel handige functies. Kun je uit de onderstaande lijst de functie kiezen die ook door cron wordt geleverd?
Deze oefening maakt deel uit van de cursus
Introductie tot Data Engineering
Interactieve oefening met praktijkervaring
Zet theorie om in actie met een van onze interactieve oefeningen
Begin oefening