In dit hoofdstuk verken je het beheer van tabellen in Databricks, met de focus op managed versus unmanaged tables en hoe deze opslag en lifecycle afhandelen. Je leert persistente views te maken en te vernieuwen en duikt in Delta Lake-functies zoals ACID-transacties, schemahandhaving en time travel voor betrouwbaar databeheer. Je krijgt ook een dieper inzicht in de werking van gegevensorganisatie en -toegang binnen Databricks.

Delta Lake begrijpen

Betrouwbaarheid van data in Delta Lake

ACID-eigenschappen waarborgen

Gegevens beheren in Delta Lake

Tabellen optimaliseren

Persistentie en reikwijdte van tabellen

Managed vs. Unmanaged Tables

Tafelduel

Tabellen verwijderen

Onbeheerde tabellen maken

Introductie tot Delta Lake

Dit hoofdstuk gaat dieper in op het maken en beheren van views en temp views in Databricks. Je ontdekt hoe persistente views querylogica opslaan om sessie-overstijgend te hergebruiken, terwijl temp views geschikt zijn voor snelle, sessiespecifieke taken. We bespreken ook praktische scenario’s waarin elk type de efficiëntie kan verhogen en dataverwerking kan stroomlijnen.

Tabellen maken en beheren

Aangepaste opslag, goed geregeld

Tabelopslag

Tabellen verplaatsen

Options

Data Management

Data Movement

Management of verplaatsing?

Best practices voor het beheren van grote tabellen

Data schoonmaken met Vacuum

Views en temp views

Opties

View

Temp View

Persistent of tijdelijk?

Werken met views in de praktijk

Persist als een pro

Kortstondige views

De magie van persistente views

Werken met tabellen in Databricks

In het laatste hoofdstuk leer je hoe je Data Explorer gebruikt om gegevenssets te bekijken, analyseren en beveiligen. We behandelen eigenaarschap van tabellen, verantwoordelijkheden en best practices voor governance. Ook ga je in op het beheren van toegangsrechten en het veilig omgaan met Personally Identifiable Information (PII) met compliance-gedreven strategieën en praktische oefeningen.

Data verkennen met Data Explorer

Het Data Explorer-traject

Gegevenssets verkennen

Logs en beveiliging

Toegang beheren en PII begrijpen

PII beschermen

Patiëntnamen beschermen

Machtigingen beheren

Gefeliciteerd!

Data-exploratie en beveiliging

Klaar om je Databricks-skills naar een hoger niveau te tillen? In deze cursus beheers je Data Management in Databricks met Delta Lake-functies zoals ACID-transacties, schemahandhaving en time travel voor robuust databeheer. Je gaat aan de slag met het maken en beheren van tabellen en tijdelijke views om je workflow te stroomlijnen. Daarna verken je de Data Explorer van Databricks om gegevenssets te bekijken, eigenaarschap van tabellen toe te wijzen en gevoelige data te beschermen met topklasse beveiligingspraktijken. Of je nu herbruikbare queries opstelt of Personally Identifiable Information (PII) beheert, deze cursus biedt hands-on oefeningen en praktische strategieën om je data veilig, toegankelijk en geoptimaliseerd te houden voor elke situatie.

<h2>Bouw een stevige basis met Delta Lake</h2>
Deze cursus leert je hoe je gegevens goed kunt beheren in Databricks, met tools als Delta Lake en Databricks' Data Explorer. Je gaat aan de slag met basisconcepten zoals beheerde en onbeheerde tabellen en hoe die omgaan met opslag en levenscyclus, terwijl je je verdiept in geavanceerde Delta Lake-functies zoals ACID-transacties, schema-handhaving en tijdreizen. Deze technieken zorgen ervoor dat gegevens consistent en betrouwbaar zijn, en maken de weg vrij voor solide gegevensstromen.
<h2>Werkstromen verbeteren met weergaven en tijdelijke weergaven</h2>
Je leert ook hoe je weergaven en tijdelijke weergaven kunt maken en beheren om gegevensprocessen te verbeteren. Met persistente weergaven kun je query-logica opslaan voor herhaald gebruik in verschillende sessies, waardoor je workflows kunt stroomlijnen en de efficiëntie kunt verhogen. Tijdelijke weergaven zijn daarentegen een makkelijke oplossing voor snelle, sessiespecifieke taken. Praktische voorbeelden laten zien hoe je ze kunt gebruiken om gegevens toegankelijker en overzichtelijker te maken, waardoor ze superhandig zijn om efficiënte en flexibele oplossingen te bedenken.
<h2>Beveilig en beheer je gegevens met vertrouwen</h2>
Tot slot ga je de Data Explorer van Databricks gebruiken om datasets te bekijken, te analyseren en te beveiligen. Van het toewijzen van tabeleigendom tot het beheren van toegangsrechten, je krijgt een goed beeld van de beste manieren om dingen te regelen. Er wordt extra aandacht besteed aan het veilig omgaan met persoonlijke gegevens (PII) met strategieën die gericht zijn op naleving. Door middel van praktische oefeningen leer je hoe je veilige en geoptimaliseerde datasets kunt onderhouden, zodat je gegevens altijd toegankelijk, goed beheerd en beschermd blijven, wat er ook gebeurt.

Introduction to Databricks

Beheer van stamgegevens in Databricks met Delta Lake: ACID-transacties, schemahandhaving, beveiliging.

Data Management in Databricks

Leer hoe je met Delta Lake gegevens kunt beheren in Databricks, inclusief ACID-transacties, schema-handhaving en beveiliging.

Associate Data Engineer in Databricks

Data-analist in Databricks

Optimaliseer de tabel met het commando `OPTIMIZE` om data te comprimeren en de queryprestaties te verbeteren.

Ruim oude versies op met het commando `VACUUM` om opslagruimte vrij te maken.

Maak een back-up van de data met het commando `COPY INTO` om deze naar een beveiligde opslaglocatie te verplaatsen.

Data schoonmaken met Vacuum

Data Management in Databricks

Interactieve oefening met praktijkervaring