Airflow, Luigi e cron
No vídeo, você viu várias ferramentas que podem ajudar no agendamento dos seus jobs do Spark. Você viu as limitações do cron e como isso levou ao desenvolvimento de frameworks como Airflow e Luigi.
O Airflow tem muitos recursos úteis, mas você consegue selecionar, na lista abaixo, qual recurso também é fornecido pelo cron?
Este exercício faz parte do curso
Introdução à Engenharia de Dados
Exercício interativo prático
Transforme a teoria em ação com um de nossos exercícios interativos
Começar o exercício