この章では、Databricks におけるテーブル管理を扱い、管理対象テーブルと非管理対象テーブルの違いと、それぞれのストレージやライフサイクルの取り扱いに焦点を当てます。永続ビューの作成と更新方法を学び、ACID トランザクション、スキーマ強制、タイムトラベルといった Delta Lake の機能に踏み込み、信頼性の高いデータ管理を実現します。さらに、Databricks 内でのデータの構造化とアクセスの仕組みについても理解を深めます。

Delta Lake を理解する

Delta Lake におけるデータの信頼性

ACID 特性の保証

Delta Lake でデータを管理する

テーブルの最適化

テーブルの永続性とスコープ

Options

Managed Table

Unmanaged Table

Managed と Unmanaged の違い

テーブル対決

テーブルの削除

非管理テーブルの作成

Delta Lake の概要

この章では、Databricks におけるビューと一時ビューの作成・管理を掘り下げます。永続ビューはセッションをまたいでクエリロジックを再利用できるのに対し、一時ビューはその場限りのセッション内タスクに適していることを学びます。あわせて、それぞれのタイプが効率化やデータ処理の合理化に役立つ実践的なシナリオも取り上げます。

テーブルの作成と管理

カスタムストレージを正しく使う

テーブルのストレージ

テーブルの移動

Management or movement?

データの真空化（Vacuum）クリーンアップ

ビューと一時ビュー

永続的か一時的か？

ビューを使って実行してみましょう

プロのように永続化しよう

短命なビュー

永続ビューの魔法

Databricks でのテーブル操作

最終章では、Data Explorer を使ってデータセットをプレビュー、分析、そして保護する方法を学びます。テーブルの所有権や責任範囲、ガバナンスのベストプラクティスを取り上げます。さらに、アクセス権の管理や、コンプライアンスを意識した戦略と実践演習を通じて、PII（個人を特定できる情報）を安全に取り扱う方法も掘り下げます。

Data Explorer でのデータ探索

Data Explorer の進め方

データセットの探索

ログとセキュリティ

アクセス管理とPIIの理解

PII の保護

患者名の保護

権限の管理

おめでとうございます！

データ探索とセキュリティ

Databricks スキルをさらに高めませんか？このコースでは、ACID トランザクション、スキーマ強制、タイムトラベルなどの Delta Lake 機能を活用し、堅牢なデータ管理をマスターします。テーブルや一時ビューの作成・管理に取り組み、ワークフローを効率化しましょう。さらに、Databricks の Data Explorer を使ってデータセットをプレビューし、テーブル所有者を割り当て、機密データを高度なセキュリティで保護する方法を学びます。再利用可能なクエリの作成から PII（個人を特定できる情報）の管理まで、ハンズオン演習と実践的な戦略を通じて、あらゆる状況でデータを安全・アクセス可能・最適化された状態に保つスキルを身につけます。

Introduction to Databricks

Databricksでのマスターデータ管理：Delta Lakeを使用したACIDトランザクションとスキーマ強制。

Databricks におけるデータ管理

DatabricksでDelta Lakeを用いたデータ管理を習得。ACIDトランザクション、スキーマ制約、セキュリティを網羅。

アソシエイトデータエンジニア Databricks内で

データアナリスト Databricksで

CREATE TABLE customer_data AS SELECT * FROM sales_data;

CREATE TABLE patient_records_managed AS SELECT * FROM patients WHERE age > 30;

CREATE TABLE sales_data AS SELECT * FROM sales OPTIONS ('path'='/mnt/data');

ALTER TABLE sales_data SET LOCATION '/mnt/archive/sales/';

Managed と Unmanaged の違い

Databricks におけるデータ管理

実践的なインタラクティブ演習