你剛剛看到,不可變性與延遲處理是 Spark 處理資料的核心概念。但為什麼 Spark 一開始會使用不可變的 DataFrame 呢?
本練習屬於課程
將理論付諸實踐,立即體驗我們的互動練習
複習 DataFrame 的基礎概念,並說明資料清理的重要性。
當前練習
探討在 Spark 中修改 DataFrame 內容的各種技巧。
透過提升效能或降低資源需求,改進資料清理工作。
學習如何使用 Spark 處理複雜的真實世界資料,以及管線的基本概念。