始める無料で始める

本番環境向けセンサーの設定

このパイプラインでは、FileSensor を使って受信 CSV レポートの到着を待ってから処理を開始します。デフォルトの poke モードでは、ファイルの到着に数分かかる場合でも、センサーは待機中ずっとワーカースロットを占有し続けます。

本番環境では、センサーがチェックとチェックの間にスロットを解放し、無限に待ち続けないよう安全なタイムアウトを設定することが重要です。

この演習はコースの一部です

Airflow によるデータパイプラインの構築

コースを見る

実践的なインタラクティブ演習

理論を実践に変える、インタラクティブな演習のひとつをお試しください

演習を開始する