Outils d'orchestration et ETL

Lors du déploiement de pipelines de données en production, les Data Engineers doivent s'assurer que leurs pipelines s'exécutent régulièrement selon un planning, disposent d'une quantité de ressources flexible et déclenchent des alertes en cas d'échec. Pour cela, ils s'appuient souvent, au-delà d'un simple script Python, sur un outil d'orchestration et d'ETL.

Quel est l'outil d'orchestration le plus populaire pour créer, déployer et superviser des pipelines de données ?