始める無料で始める

適切な品質指標の選択

Global Retail Analytics のジュニアエンジニアが、新しくアップロードされた online_retail データにクリーニングパイプラインを実行しましたが、誤って na.drop(subset=["CustomerID"]) の行をコメントアウトしてしまいました。残りの処理(na.fill()dropDuplicates()、無効レコードのフィルター)はすべてエラーなく実行されました。

このミスをすぐに検出できる品質チェック指標はどれでしょうか?

この演習はコースの一部です

Databricks における Spark SQL を使ったデータ変換

コースを見る

実践的なインタラクティブ演習

理論を実践に変える、インタラクティブな演習のひとつをお試しください

演習を開始する