オーケストレーションツールと ETL ツール
データパイプラインを本番環境にデプロイする際、データエンジニアはパイプラインがスケジュールどおりに一貫して実行され、必要に応じて柔軟にリソースを確保でき、失敗時にはアラートを発するようにする必要があります。そのために、データエンジニアは Python スクリプトの枠を超えて、オーケストレーションツールや ETL ツールを活用することがよくあります。
データパイプラインの構築、デプロイ、監視に最もよく使われているオーケストレーションツールは何でしょうか。
この演習はコースの一部です
