Chương này khám phá quản lý bảng trong Databricks, tập trung vào bảng được quản lý và không được quản lý, cùng cách chúng xử lý lưu trữ và vòng đời. Bạn sẽ học cách tạo và làm mới các view bền vững và đi sâu vào các tính năng của Delta Lake như giao dịch ACID, cưỡng chế lược đồ và du hành thời gian để quản lý dữ liệu đáng tin cậy. Bạn cũng sẽ hiểu sâu hơn về cơ chế tổ chức và truy cập dữ liệu trong Databricks.

Tìm hiểu Delta Lake

Độ tin cậy dữ liệu trong Delta Lake

Đảm bảo các thuộc tính ACID

Quản lý dữ liệu trong Delta Lake

Tối ưu hóa bảng

Tính bền vững và phạm vi của bảng

Bảng Managed vs. Unmanaged

Cuộc so tài giữa các bảng

Xóa bảng

Tạo bảng unmanaged

Giới thiệu về Delta Lake

Chương này đi sâu vào cách tạo và quản lý view và temp view trong Databricks. Bạn sẽ khám phá cách các view bền vững lưu logic truy vấn để tái sử dụng qua nhiều phiên, trong khi temp view phù hợp cho các tác vụ nhanh trong phạm vi phiên làm việc. Phần thảo luận cũng nêu bật các tình huống thực tế mà mỗi loại có thể tăng hiệu quả và tinh gọn việc xử lý dữ liệu.

Tạo và quản lý bảng

Thiết lập lưu trữ tùy chỉnh hiệu quả

Lưu trữ bảng

Di chuyển bảng

Tùy chọn

Data Management

Data Movement

Quản lý hay di chuyển?

Thực tiễn tốt nhất khi quản lý bảng lớn

Dọn dẹp dữ liệu với VACUUM

Views và Temp views

View

Temp View

Bền vững hay tạm thời?

Chạy thử qua các view

Lưu bền như dân chuyên

View tồn tại ngắn hạn

Điều kỳ diệu của persistent view

Làm việc với bảng trong Databricks

Ở chương cuối, bạn sẽ khám phá cách dùng Data Explorer để xem trước, phân tích và bảo mật các tập dữ liệu. Nội dung đề cập đến quyền sở hữu bảng, trách nhiệm và các thực hành quản trị tốt nhất. Chương cũng đi sâu vào quản lý quyền truy cập và xử lý an toàn dữ liệu nhận dạng cá nhân (PII) với các chiến lược tập trung tuân thủ và bài tập thực hành.

Khám phá dữ liệu với Data Explorer

Lộ trình trong Data Explorer

Khám phá tập dữ liệu

Nhật ký và bảo mật

Quản lý quyền truy cập và hiểu về PII

Bảo vệ PII

Bảo vệ tên bệnh nhân

Quản lý quyền truy cập

Chúc mừng bạn!

Khám phá dữ liệu và bảo mật

Sẵn sàng nâng tầm kỹ năng Databricks? Trong khóa học này, bạn sẽ thành thạo kỹ năng Quản lý Dữ liệu trong Databricks, tận dụng các tính năng của Delta Lake như giao dịch ACID, cưỡng chế lược đồ và du hành thời gian để quản lý dữ liệu vững chắc. Tìm hiểu cách tạo và quản lý bảng cùng các temp view để tối ưu quy trình làm việc. Tiếp đó, khám phá Data Explorer của Databricks để xem trước tập dữ liệu, gán quyền sở hữu bảng và bảo vệ dữ liệu nhạy cảm với các thực hành bảo mật hàng đầu. Dù bạn viết truy vấn có thể tái sử dụng hay quản lý dữ liệu nhận dạng cá nhân (PII), khóa học này mang đến các bài tập thực hành và chiến lược thiết thực để dữ liệu luôn an toàn, dễ truy cập và tối ưu cho mọi tình huống.

Introduction to Databricks

Quản lý dữ liệu chính trong Databricks với Delta Lake, gồm giao dịch ACID, kiểm soát lược đồ, bảo mật.

Quản lý dữ liệu trong Databricks

Tìm hiểu quản lý dữ liệu trong Databricks với Delta Lake, bao gồm giao dịch ACID, kiểm soát lược đồ và bảo mật.

Associate Data Engineer in Databricks

Chuyên viên phân tích dữ liệu trong Databricks

Command: CREATE DATABASE healthcare_data  
Use Case: Tạo một cơ sở dữ liệu mới để tổ chức các bảng liên quan dưới cùng một namespace.  

Command: DROP DATABASE healthcare_data  
Use Case: Xóa một cơ sở dữ liệu hiện có, loại bỏ tất cả các đối tượng liên quan. 

Command: ALTER TABLE patients_data SET SCHEMA archived_data  
Use Case: Di chuyển một bảng sang schema khác đồng thời giữ nguyên dữ liệu và metadata.  

Command: INSERT INTO archived_data SELECT * FROM healthcare_data.patients_data  
Use Case: Sao chép dữ liệu từ một cơ sở dữ liệu sang cơ sở dữ liệu khác để lưu trữ (archive).  

Quản lý hay di chuyển?

Quản lý dữ liệu trong Databricks

Bài tập tương tác thực hành