精通 Snowflake 的資料匯入管線——從使用 COPY INTO、Snowpipe 與 Snowpipe Streaming 導入檔案到暫存區——並透過連接器、驅動程式與匯出工具，將 Snowflake 串接進更廣泛的資料生態系。

Stages、檔案格式與 COPY INTO

分類 Stage 類型

COPY INTO 錯誤處理

Snowpipe 與 Snowpipe Streaming

選擇正確的匯入機制

匯入方式的特性

資料匯出與連接性

將資料匯出到雲端儲存

連線機制

資料載入、匯入與連接性

使用 Snowflake 原生的調度功能打造穩健的資料管線——以 streams 進行變更擷取，以 tasks 安排排程，以 dynamic tables 進行宣告式轉換，並以 external 與 Iceberg tables 儲存開放格式資料。

Streams 與異動資料擷取（Change Data Capture）

查詢 Stream

選擇正確的 Stream 類型

Tasks 與 DAG 編排

任務排程與相依關係

倉儲型任務 vs 無伺服器任務

Dynamic Tables（動態資料表）

Dynamic Table 的 TARGET_LAG 與重新整理

選擇你的編排機制

設計端到端管線

External 與 Iceberg 資料表

何時使用 External Tables

依儲存與引擎分類的資料表類型

管線調度與資料物件

使用點記法與 FLATTEN 查詢半結構化 JSON，搭配 GROUPING SETS、ROLLUP 與 CUBE 進行彙總，計算視窗函式，並以 UDF 與 stored procedures 封裝可重複使用的邏輯。

半結構化資料查詢

擷取巢狀欄位

展開 JSON 陣列

中級彙總函式

撰寫 ROLLUP 查詢

選對正確的群組延伸語法

視窗函式

使用 ROW_NUMBER 排名記錄

RANK 與 DENSE_RANK 的差異

使用 LAG 計算環期變化

使用 SUM 計算逐步累計

使用者自訂函式與儲存程序

建立並呼叫 SQL UDF

UDF 與 Stored Procedure

查詢與轉換資料

在 Snowsight 進行查詢分析，透過 QUERY_HISTORY 找出瓶頸，應用 Search Optimization、Query Acceleration Service、Automatic Clustering 與 Materialized Views，並撰寫能善用 Snowflake 三層快取的 SQL。

Query Profile、History 與 Insights

瀏覽 Query Profile

使用 QUERY_HISTORY 辨識查詢

調查慢查詢

最佳化方法

將最佳化工具對應到查詢模式

在各種最佳化工具之間做選擇

哪種方法最合適

Snowflake 中的快取運作方式

辨識快取層級

SQL 模式：快取 vs 修剪

恭喜！

查詢效能與最佳化

在 Snowflake 建立端到端的資料管線。學習使用 COPY INTO、Snowpipe 與 Snowpipe Streaming 來導入資料，接著用 streams、tasks 與 dynamic tables 自動化工作流程。你也會熟悉查詢半結構化資料、應用視窗函式，並利用 Snowflake 的分析工具與快取層來最佳化查詢效能。

精通在 Snowflake 中建立可靠且自動化資料管道的工具與技術。 您將從學習如何大規模導入資料開始——設定階段與檔案格式，使用 COPY INTO 載入資料，並根據不同的延遲與資料量需求，在批次載入、Snowpipe 及 Snowpipe Streaming 之間做出選擇。
接下來，您將培養端到端的流程協調技能：利用串流捕捉列級變更、透過任務DAG串接多步驟工作流程，以及使用動態資料表建立宣告式、自動更新的資料管道。 您還將學習在多引擎和雲端原生情境下，何時應該選擇使用 external 和 Iceberg 資料表。
課程的下半部分將進一步提升您的查詢與資料轉換能力——包括從 VARIANT 欄位中擷取並展開半結構化的 JSON、運用分組擴充功能與視窗函數進行進階分析，以及將可重複使用的邏輯封裝於 UDF 和儲存程序中。
最後，您將學習查詢效能優化：閱讀 Snowflake 的查詢分析報告以找出瓶頸，選擇合適的優化工具——搜尋優化、查詢加速服務、分群鍵或實體化檢視表——並撰寫有利於快取的 SQL，避免那些會悄悄降低效能的常見反模式。

使用COPY INTO、Snowpipe、流、任務、動態表和查詢性能工具在Snowflake中加載、自動化和優化數據管道。

在 Snowflake 進行資料管線自動化

掌握在 Snowflake 中使用 COPY INTO、Snowpipe、streams、tasks、dynamic tables 及查詢效能工具來載入、自動化與優化資料管道。

使用者自訂函式與儲存程序

Create Your Free Account