列レベルの品質チェックの追加
不正なデータを定期的に読み込むパイプラインは、エラーで止まるパイプラインよりも厄介です。ダウンストリームのチームが daily_summary を利用する前に、列レベルの品質ゲートを追加しましょう。このゲートはデータ読み込みの直後に実行され、売上がゼロを下回ったり注文数が欠損していたりする場合にその実行を拒否します。
読み込みタスクと SQL ファイルは、前のレッスンから引き継いで事前に入力されています。
この演習はコースの一部です
不正なデータを定期的に読み込むパイプラインは、エラーで止まるパイプラインよりも厄介です。ダウンストリームのチームが daily_summary を利用する前に、列レベルの品質ゲートを追加しましょう。このゲートはデータ読み込みの直後に実行され、売上がゼロを下回ったり注文数が欠損していたりする場合にその実行を拒否します。
読み込みタスクと SQL ファイルは、前のレッスンから引き継いで事前に入力されています。
この演習はコースの一部です