始める無料で始める

poke・reschedule・deferrable の使い分け

チームで 3 つのパイプラインにまたがるセンサーの設定を見直しています。

  • パイプライン A: Dag が起動してから通常 10 秒以内にファイルが届くことを確認するセンサーです。
  • パイプライン B: パートナーのデータフィードが 4 時間以内のいずれかのタイミングで届くのを待つセンサーです。同様のセンサーが 20 個同時に実行されています。
  • パイプライン C: API エンドポイントを 2 分ごとにチェックし、通常 15 分程度待機するセンサーです。

最も適切なセンサーモードの組み合わせはどれですか?

この演習はコースの一部です

Airflow によるデータパイプラインの構築

コースを見る

実践的なインタラクティブ演習

理論を実践に変える、インタラクティブな演習のひとつをお試しください

演習を開始する