資料管線步驟

你在 Sierra Publishing 的一條對業務高度關鍵的資料管線仰賴高流量的資料串流，來源是 Kafka 資料串流。我們需要讀取這些資料，並將它與其他幾個資料集進行串接。

你的資料工程團隊希望使用 Databricks 提升此資料管線的效率，並讓下游使用者能即時讀取這些資料以進行分析。