開始使用免費開始

重新啟動後的復原

你在 Global Retail Analytics 的串流管線會從 Unity Catalog 的 volume 讀取新進的 CSV 檔,並寫入 Delta Lake。週末發生停機後,叢集在週一早上重新啟動。週末期間有 3 個新檔案進來。串流只處理這 3 個檔案——前一週的檔案都不會被重新載入。

「是什麼機制」讓串流可以略過先前已處理的檔案,並精準從中斷處繼續?

本練習屬於課程

在 Databricks 使用 Spark SQL 進行資料轉換

檢視課程

動手互動練習

將理論付諸實踐,立即體驗我們的互動練習

開始練習