オーケストレーションとETLツール
データパイプラインを本番環境にデプロイする際、データエンジニアは、パイプラインがスケジュールどおりに安定して実行され、柔軟な量のリソースにアクセスでき、失敗時にアラートできることを確認する必要があります。これを実現するために、Python スクリプトの外に目を向け、オーケストレーションや ETL ツールを利用することがよくあります。
データパイプラインの構築・デプロイ・監視において、最も人気のあるオーケストレーションツールはどれですか?
この演習はコースの一部です
