既然你已熟悉工作區,你在 Metro Transit Analytics 的主管希望你了解團隊的計程車行程資料是如何組織的。此管線採用 medallion 架構——bronze、silver、gold 三層。
三個資料表已載入:bronze_taxi_trips、silver_taxi_trips,以及 gold_taxi_daily_summary。請探索每一層,觀察資料在管線中流動時,資料品質如何逐步提升。
bronze_taxi_trips
silver_taxi_trips
gold_taxi_daily_summary
本練習屬於課程
將理論付諸實踐,立即體驗我們的互動練習
了解 lakehouse 與傳統架構的差異、medallion 模式如何組織資料,以及各項資源在 Databricks 平台中的位置。
當前練習
為工作挑選合適的叢集、針對成本與效能進行設定、熟悉 Notebook 環境,並在 Databricks 工作區中把你的工作連結到 Git。
使用 Unity Catalog 保護你的資料,透過 Delta Sharing 安全分享,並將查詢聯邦到外部來源——全程不需複製任何位元組。
使用 Databricks Asset Bundles 打包你的成果、部署到正式環境,並在綜合情境中把一切串聯起來。