使用 fill 與 drop 處理遺漏資料
喔不……這個資料集裡有很多遺漏值!來清理一下吧!使用已載入的 CSV 檔案,刪除含有任一 null 值的列,然後顯示結果!
記得,你的工作區裡已經有一個叫做 SparkSession 的 spark!
本練習屬於課程
PySpark 入門
練習說明
- 在
census_dfDataFrame 中,刪除所有含有 null 值的列。 - 顯示處理後的 DataFrame。
動手互動練習
試著完成這個範例程式碼,體驗一下這個練習。
# Drop rows with any nulls
census_cleaned = census_df.____
# Show the result
census_cleaned.____