本章将讲解 Databricks 中的表管理，重点比较托管表与非托管表，以及它们在存储与生命周期管理上的差异。您将学习如何创建与刷新持久视图，并深入了解 Delta Lake 的 ACID 事务、模式强制与时光回溯等特性，以确保可靠的数据管理。同时，您也会更深入地理解 Databricks 中数据组织与访问的机制。

理解 Delta Lake

Delta Lake 中的数据可靠性

确保 ACID 特性

在 Delta Lake 中管理数据

优化表

表的持久性与作用域

托管表 vs. 非托管表

表格对决

删除表

创建非托管表

Delta Lake 入门

本章将深入讲解在 Databricks 中创建与管理视图和临时视图。您将了解持久视图如何在多个会话间保存查询逻辑以便复用，而临时视图更适合快速、仅限当前会话的任务。内容还会结合实际场景，说明如何选择合适的视图类型以提升效率并简化数据处理。

创建与管理表

正确使用自定义存储

表存储

移动表

选项

数据管理

数据移动

管理还是移动？

管理大型表的最佳实践

使用 Vacuum 清理数据

视图与临时视图

Options

View

Temp View

持久还是临时？

通过视图运行

像专业人士一样持久化

短期存在的视图

永久视图的妙用

在 Databricks 中使用表

在最后一章中，您将学习如何使用 Data Explorer 来预览、分析并保护数据集。内容涵盖表的所有权、职责与治理最佳实践。同时还将介绍如何管理访问权限，并通过合规导向的策略与实践练习安全地处理个人可识别信息（PII）。

使用 Data Explorer 进行数据探索

Data Explorer 的使用路径

探索数据集

日志与安全

管理访问与理解 PII

保护 PII

保护患者姓名

管理权限

恭喜您！

数据探索与安全

准备好提升您的 Databricks 技能了吗？在本课程中，您将掌握 Databricks 中的数据管理技能，充分利用 Delta Lake 的 ACID 事务、模式强制和时光回溯等功能，实现稳健的数据管理。您将学习如何创建和管理表及临时视图，以优化工作流。随后，您将探索 Databricks 的 Data Explorer，预览数据集、分配表所有权，并通过一流的安全实践保护敏感数据。无论是构建可复用的查询，还是管理个人可识别信息（PII），本课程都配有动手练习与实用策略，帮助您的数据在各种场景下保持安全、可访问且高效。

<h2>通过 Delta Lake 打造坚实基础</h2>
这门课程将帮助你掌握在 Databricks 中高效管理数据的技能，并利用 Delta Lake 和 Databricks 的 Data Explorer 等工具。 你将探索托管表和非托管表等基础概念，以及它们如何处理存储和生命周期，同时深入了解 Delta Lake 的高级功能，如 ACID 事务、模式强制和时间旅行。 这些技术可确保数据的一致性和可靠性，为构建稳健的数据工作流奠定基础。
<h2>使用视图和临时视图优化工作流程</h2>
您还将学习创建和管理视图和临时视图，以优化数据处理流程。 持久化视图可让您保存查询逻辑，以便在多个会话中重复使用，从而简化工作流程并提高效率。 另一方面，临时视图为快速的、特定于会话的任务提供了一种轻量级解决方案。 实用示例展示了如何将每种方法应用于提升数据的可访问性和组织性，使其成为构建高效且灵活解决方案的宝贵工具。
<h2>自信地保护和治理您的数据</h2>
最后，您将利用 Databricks 的 Data Explorer 来预览、分析并保护数据集。 从分配表所有权到管理访问权限，您将全面了解治理最佳实践。 特别强调以合规为导向的策略安全处理个人身份信息（PII）。 通过实践练习，你将掌握维护安全且经过优化的数据集的专业技能，确保你的数据在任何情况下都保持可访问、管理有序并受到保护。

Introduction to Databricks

在Databricks中使用Delta Lake进行主数据管理，包括ACID事务、模式强制和高级安全功能。

Databricks 中的数据管理

在 Databricks 中学习数据管理，涵盖 Delta Lake、ACID 事务、模式强制和安全性。

初级数据工程师 在 Databricks

数据分析师 在 Databricks

使用 `OPTIMIZE` 命令优化表，以压缩数据并提升查询性能。

使用 `VACUUM` 命令清理旧版本，以释放存储空间。

使用 `COPY INTO` 命令备份数据，将其传输到安全的存储位置。

使用 Vacuum 清理数据

Databricks 中的数据管理

动手互动练习