This chapter explores table management in Databricks, focusing on managed vs. unmanaged tables and how they handle storage and lifecycle. You'll learn to create and refresh persistent views and dive into Delta Lake features like ACID transactions, schema enforcement, and time travel for reliable data management. You will also gain a deeper look into the mechanics of data organization and access within Databricks.

Understanding Delta Lake

Data reliability in Delta Lake

Ensuring ACID properties

Managing data in Delta Lake

Optimizing tables

Persistence and scope of tables

Managed vs. Unmanaged Tables

Table showdown

Deleting tables

Creating unmanaged tables

Introduction to Delta Lake

This chapter delves into creating and managing views and temp views in Databricks. You'll explore how persistent views save query logic for reuse across sessions, while temp views are suited for quick, session-specific tasks. The discussion also highlights practical scenarios where each type can enhance efficiency and streamline data handling.

Creating and managing tables

Custom storage done right

Table storage

Moving tables

Management or movement?

Vacuum cleaning data

Views and Temp views

Persistent or temporary?

Running through views

Persist like a pro

Short-lived views

Persistent view magic

Working with Tables in Databricks

In the final chapter, you’ll explore how to use Data Explorer to preview, analyze, and secure datasets. The content covers table ownership, responsibilities, and governance best practices. It also dives into managing access rights and securely handling Personally Identifiable Information (PII) with compliance-focused strategies and practical exercises.

Daten erkunden mit dem Data Explorer

Schritte für effektive Datenexploration und Governance

Der Weg im Data Explorer

Datensätze erkunden

Protokolle und Sicherheit

Zugriff verwalten und PII verstehen

PII schützen

Patientennamen schützen

Options

Data Permissions

Administrative Permissions

Berechtigungen verwalten

Glückwunsch!

Data Exploration and Security

Bereit, deine Databricks-Skills aufs nächste Level zu bringen? In diesem Kurs meisterst du Data-Management in Databricks und nutzt Delta-Lake-Features wie ACID-Transaktionen, Schemaüberprüfung und Time Travel für zuverlässiges Datenmanagement. Tauche ein in das Erstellen und Verwalten von Tabellen und temporären Views, um Workflows zu verschlanken. Anschließend erkundest du den Data Explorer von Databricks, um Datensätze vorab anzusehen, Tabellenbesitz zuzuweisen und sensible Daten mit erstklassigen Sicherheitspraktiken zu schützen. Ob wiederverwendbare Abfragen oder der Umgang mit personenbezogenen Daten (PII) – dieser Kurs bietet praxisnahe Übungen und Strategien, damit deine Daten sicher, zugänglich und für jede Situation optimiert sind.

<h2>Mit Delta Lake ein starkes Fundament schaffen</h2>
In diesem Kurs lernst du, wie du Daten in Databricks effektiv verwalten kannst, indem du Tools wie Delta Lake und den Data Explorer von Databricks nutzt. Du lernst grundlegende Konzepte wie verwaltete und nicht verwaltete Tabellen kennen und erfährst, wie sie mit Speicherplatz und Lebenszyklus umgehen. Außerdem tauchst du in fortgeschrittene Delta Lake-Funktionen wie ACID-Transaktionen, Schema-Durchsetzung und Zeitreisen ein. Diese Techniken sorgen dafür, dass die Daten konsistent und zuverlässig sind, und schaffen so die Basis für stabile Datenabläufe.
<h2>Optimiere Arbeitsabläufe mit Ansichten und temporären Ansichten</h2>
Du lernst auch, wie du Ansichten und temporäre Ansichten erstellst und verwaltest, um Datenprozesse zu optimieren. Mit persistenten Ansichten kannst du Abfragelogik für die wiederholte Verwendung über mehrere Sitzungen hinweg speichern, wodurch Arbeitsabläufe optimiert und die Effizienz gesteigert werden. Temporäre Ansichten sind dagegen eine einfache Lösung für schnelle, sitzungsspezifische Aufgaben. Praktische Beispiele zeigen, wie man sie nutzen kann, um die Zugänglichkeit und Organisation von Daten zu verbessern, was sie zu super nützlichen Tools für die Entwicklung effizienter und flexibler Lösungen macht.
<h2>Sichere und verwalte deine Daten mit Zuversicht</h2>
Zum Schluss lernst du, wie du mit dem Data Explorer von Databricks Datensätze in der Vorschau anzeigen, analysieren und sichern kannst. Von der Zuweisung von Tabellenbesitz bis hin zur Verwaltung von Zugriffsrechten bekommst du ein umfassendes Verständnis der besten Vorgehensweisen im Bereich Governance. Besonderer Wert wird auf den sicheren Umgang mit personenbezogenen Daten (PII) mit Strategien gelegt, die auf die Einhaltung von Vorschriften ausgerichtet sind. Durch praktische Übungen lernst du, wie du Datensätze sicher und optimiert verwaltest, damit deine Daten immer zugänglich, gut organisiert und geschützt sind, egal was passiert.

Introduction to Databricks

Stammdatenverwaltung in Databricks mit Delta Lake: ACID-Transaktionen, Schema-Regeln, erweiterte Sicherheit.

Data Management in Databricks

Lerne Datenmanagement in Databricks mit Delta Lake, einschließlich ACID-Transaktionen, Schema-Durchsetzung und Sicherheit.

Associate Data Engineer in Databricks

Datenanalyst in Databricks

Datensätze erkunden und ihre Struktur verstehen

Tabellen-Eigentümerschaft zuweisen oder prüfen

Granulare Berechtigungen für sicheren Zugriff festlegen

Datennutzung überwachen und Berechtigungen regelmäßig prüfen

Der Weg im Data Explorer

Interaktive praktische Übung