I det här kapitlet lär du dig vad datateknik är och varför efterfrågan på datatekniker ökar. Du får sedan se var datateknik passar in i datavetenskap-livscykeln, hur datatekniker skiljer sig från datavetare och en introduktion till din första kompletta datapipeline.

Datateknik och big data

Datavetenskapens arbetsflöde

Följ flödet

Alternativ

Dataingenjörsuppgifter

Inte dataingenjörsuppgifter

Inte ansvarigt

Sant

Falskt

Stordatavärlden

Dataingenjörer vs. datavetare

Vad stämmer egentligen?

Dataingenjör

Datavetare

Vem gör vad?

Datapipelinen

Det stämmer inte

Datavetenskapligt arbetsflöde

Pipeline

Vad är datateknik?

Nu är det dags att prata om datalagring – ett av datateknikerns viktigaste ansvarsområden. I det här kapitlet lär du dig hur datatekniker hanterar olika datastrukturer, arbetar i SQL – det självklara språket för att fråga och lagra data – samt implementerar lämpliga lagringslösningar med datalager och datasjöar.

Datastrukturer

Vad är skillnaden?

SQL-databaser

Vi löser det här

Kolumner

Olika roller

Datalager och datasjöar

Sant eller falskt

Vårt datalager (mitt i vår gata)

Att lagra data

Datatekniker förenklar datavetarnas arbete genom att förbereda rådata för analys med hjälp av olika bearbetningstekniker i olika steg. Dessa steg kombineras till pipelines, vilket kräver automatisering. Datatekniker använder också parallell- och molnberäkning för att hålla pipelinerna igång smidigt.

Bearbetning av data

Koppla ihop punkterna

Schemaläggning av data

Schemaläggning

Det ena eller det andra

Parallell beräkning

När som helst, vad som helst?

Parallellt universum

Molnbaserad databehandling

Dold bakom molnen

Rätt plats för allt

Vi är mästarna

Att flytta och bearbeta data

Lexicon

Course Glossary: Understanding Data Engineering

År 2019 översteg medellönen för datatekniker den för datavetare. Hur gick det till? Företag som ville utvinna värde ur sina data insåg att det inte var möjligt utan en solid grund att stå på. Datatekniker lägger den grunden som gör datavetenskap möjlig.
<br /> <br />
I den här kursen lär du dig om datateknikerns kärnansvar, hur rollen skiljer sig från datavetarens och hur datatekniker möjliggör dataflödet inom en organisation. Genom praktiska övningar följer du Spotflix, ett fiktivt musikstreamingföretag, och ser hur deras datatekniker samlar in, rensar och katalogiserar data. När du är klar förstår du vad ditt företags datatekniker gör, kan föra ett meningsfullt samtal med en datateknikern och har en stabil grund att bygga din egen datateknikerresa på.

Videorna innehåller direkttextning som du når genom att klicka på "Visa transkript" längst ned till vänster i videospelaren.

Kursglosset hittar du till höger i resursavsnittet.

För att få CPE-poäng behöver du slutföra kursen och uppnå minst 70 % på den kvalificerade utvärderingen. Du navigerar till utvärderingen via CPE-länken till höger.

<h2> Förstå grunderna i data engineering </h2>
<br>
I den här kursen lär du dig om en dataingenjörs kärnansvar, hur de skiljer sig från data scientists, och hur du underlättar dataflödet genom en organisation. Genom praktiska övningar följer du Spotflix, ett fiktivt musikstreamingföretag, för att förstå hur deras dataingenjörer samlar in, rensar och katalogiserar sin data. 
<br><br>
<h2> Tillämpa i personliga fall</h2>
<br>
I slutet av kursen kommer du att förstå vad ditt företags dataingenjörer gör, vara redo att ha ett samtal med en dataingenjör och ha en stabil grund för att börja din egen resa som dataingenjör.

Upptäck hur dataingenjörer skapar grunden för datavetenskap. Ingen kodning behövs!

Introduktion till datatekniker

Upptäck hur dataingenjörer lägger grunden som gör data science möjlig. Ingen kodning inblandad!

Associate Data Engineer i SQL

Dataanalytiker i Databricks

Förstå datateman

Se till att de som använder databaserna inte kan radera musikvideor av misstag.

Tillhandahålla data om lyssningssessioner så att den kan analyseras med minimalt förberedelsearbete.

Använda Java för att bygga en pipeline som samlar in albumomslag och lagrar dem.

Identifiera vilka kunder som sannolikt kommer att avsluta sina Spotflix-prenumerationer, så att marknadsföringen kan rikta in sig på dem och uppmuntra dem att förnya.

Ta reda på i vilka länder vissa artister är populära för att ge dem insikter om var de bör turnera.

Använda Python för att analysera om användare föredrar att ha sökfältet uppe till vänster eller uppe till höger i Spotflix skrivbordsapp.

Vem gör vad?

Introduktion till datatekniker

Interaktiv övning med praktiskt arbete