你剛到一家軟體與資料顧問公司擔任初級資料工程師。完成一些入門教材與訓練後,主管與團隊開始請你協助不同的專案。
在學到批次處理之後,你在筆記中看到某個資料流程的文件。主管要你把裡面的描述分成兩組:一組是適用於批次處理的特性,另一組則是適用於其他處理方式的特性。就目前而言,你決定先把非批次的特性放到名為 Other 的群組,等之後你對資料處理更熟悉再細分。
Other
本練習屬於課程
將理論付諸實踐,立即體驗我們的互動練習
本章將介紹批次資料處理的基本概念,聚焦於實作、擴充,以及使用過程中可能遇到的挑戰。
當前練習
在這裡,你會學到串流處理的基礎、以事件為基礎的資料處理,以及相較於傳統批次處理的優勢。
本章介紹現代串流系統背後的概念、如何擴充,以及使用串流流程時可能遇到的問題。
在最後一章,你將認識常見的串流系統,並思考如何在不同情境中實作串流資料處理。