fillとdropによる欠損値の処理
なんと!このデータセットには欠損値がたくさんあります。データをきれいにしましょう!読み込んだCSVファイルを使って、null値を含む行を削除し、結果を表示してください。
SparkSession という名前の spark はすでにワークスペースに用意されています。
この演習はコースの一部です
PySpark 入門
演習の手順
census_dfDataFrameからnull値を含む行を削除してください。- 結果のDataFrameを表示してください。
実践的なインタラクティブ演習
このサンプルコードを完成させて、この演習に挑戦してみましょう。
# Drop rows with any nulls
census_cleaned = census_df.____
# Show the result
census_cleaned.____