Berlatih membangun proyek dbt dari nol. Terapkan keterampilan Anda untuk memuat berbagai jenis data ke dalam proyek dbt dan menyiapkan beragam model staging dbt. Bab ini berfokus pada bagian E dan L dari proses ELT.

Pengenalan studi kasus dbt

Periksa instalasi dbt

Inisialisasi proyek dbt

Menyiapkan proyek dbt dan memuat data

version: 2

seeds:
  - name: looker__distribution_centers



# Name your project! Project names should contain only lowercase characters
# and underscores. A good package name should reflect your organization's
# name or the intended use of these models
name: 'looker_ecommerce'
version: '1.0.0'

# This setting configures which "profile" dbt uses for this project.
profile: 'looker_ecommerce'

# These configurations specify where dbt should look for different types of files.
# The `model-paths` config, for example, states that models in this project can be
# found in the "models/" directory. You probably won't need to change these!
model-paths: ["models"]
analysis-paths: ["analyses"]
test-paths: ["tests"]
seed-paths: ["seeds"]
macro-paths: ["macros"]
snapshot-paths: ["snapshots"]

clean-targets:         # directories to be removed by `dbt clean`
  - "target"
  - "dbt_packages"


looker_ecommerce:
  outputs:
    dev:
      type: duckdb
      path: /home/repl/dbt.duckdb
  target: dev


id,name,latitude,longitude
1,Memphis TN,35.1174,-89.9711
2,Chicago IL,41.8369,-87.6847
3,Houston TX,29.7604,-95.3698
4,Los Angeles CA,34.05,-118.25
5,New Orleans LA,29.95,-90.0667
6,Port Authority of New York/New Jersey NY/NJ,40.634,-73.7834
7,Philadelphia PA,39.95,-75.1667
8,Mobile AL,30.6944,-88.0431
9,Charleston SC,32.7833,-79.9333
10,Savannah GA,32.0167,-81.1167

Muat distribution center sebagai berkas seed dbt

version: 2

models:
  - name: _____ # Fill in the model name
    description: _____ # Fill in an informative description of the model


SELECT *
FROM {{ ref('looker__distribution_centers') }}

version: 2

models:
  - name: stg_looker__distribution_centers # Fill in the model name
    description: Distribution center name and location # Fill in an informative description of the model


Buat model staging distribution center

version: 2

models:
  - name: stg_looker__distribution_centers
    description: Distribution center name and location    

  - name: ____ # Fill in the staging model name 
    description: Users demographics and location information 

version: 2

sources:
  - name: looker_ecommerce
    tables:
      - name: ____ 	# Fill in the source name

SELECT *
FROM {{ source(____, ____) }} -- Fill in the source 

SELECT *
FROM {{ source('looker_ecommerce', 'users') }} -- Fill in the source 

version: 2

sources:
  - name: looker_ecommerce
    tables:
      - name: users 	# Fill in the source name

version: 2

models:
  - name: stg_looker__distribution_centers
    description: Distribution center name and location    

  - name: stg_looker__users # Fill in the staging model name 
    description: Users demographics and location information

Muat dan buat model pengguna melalui dbt source

version: 2

models:
  - name: stg_looker__distribution_centers
    description: Distribution center name and location    

  - name: stg_looker__users
    description: Users demographics and location information
    
  - name: stg_looker__events
    description: User event data

  - name: stg_looker__inventory_items
    description: Inventory items information

  - name: stg_looker__order_items
    description: Order information on the item level

  - name: stg_looker__orders
    description: Order information such as status and timestamps
        
    # Fill in for the staging model for products
    

SELECT *
FROM {{ source('looker_ecommerce', 'users') }}

version: 2

sources:
  - name: looker_ecommerce
    tables:
      - name: users
      - name: events
      - name: inventory_items
      - name: order_items
      - name: orders
      # Fill in for the dbt source for products
      ____

SELECT *
FROM {{ source('looker_ecommerce', 'events') }}

SELECT *
FROM {{ source('looker_ecommerce', 'inventory_items') }}

SELECT *
FROM {{ source('looker_ecommerce', 'order_items') }}

SELECT *
FROM {{ source('looker_ecommerce', 'orders') }}

SELECT *
FROM {{ source('looker_ecommerce', 'products') }}

version: 2

sources:
  - name: looker_ecommerce
    tables:
      - name: users
      - name: events
      - name: inventory_items
      - name: order_items
      - name: orders
      # Fill in for the dbt source for products
      - name: products

version: 2

models:
  - name: stg_looker__distribution_centers
    description: Distribution center name and location    

  - name: stg_looker__users
    description: Users demographics and location information
    
  - name: stg_looker__events
    description: User event data

  - name: stg_looker__inventory_items
    description: Inventory items information

  - name: stg_looker__order_items
    description: Order information on the item level

  - name: stg_looker__orders
    description: Order information such as status and timestamps
    
  # Fill in for the staging model for products
  - name: stg_looker__products
    description: Product information such as SKU and category


Latihan lanjutan dengan sumber dbt dan model staging

version: 2

models:
  - name: stg_looker__distribution_centers
    description: Distribution center name and location    

  - name: stg_looker__users
    description: Users demographics and location information
    
  - name: stg_looker__events
    description: User event data

  - name: stg_looker__inventory_items
    description: Inventory items information

  - name: stg_looker__order_items
    description: Order information on the item level

  - name: stg_looker__orders
    description: Order information such as status and timestamps
    
  - name: stg_looker__products
    description: Product information such as SKU and category


SELECT *
FROM {{ source('looker__distribution_centers') }}

version: 2

sources:
  - name: looker_ecommerce
    tables:
      - name: users
      - name: events
      - name: inventory_items
      - name: order_items
      - name: orders
      - name: stg_looker__products

version: 2

sources:
  - name: looker_ecommerce
    tables:
      - name: users
      - name: events
      - name: inventory_items
      - name: order_items
      - name: orders
      - name: products

Debug kesalahan umum

Menyiapkan dbt

Telusuri secara mendalam pemodelan data dbt. Bangun pipeline data dari model staging awal hingga model data mart akhir untuk menjawab kebutuhan bisnis yang kritis. Sepanjang proses, dapatkan pengalaman membuat pengujian data guna menjadi pagar pengaman terhadap penyimpangan kualitas data.

Membuat deskripsi dan pengujian dbt

Tambahkan deskripsi kolom dbt

Tambahkan uji kolom dbt

Membangun data mart dan model snapshot dbt

Kilasan hierarki model dbt

Buat model mart untuk customers

Buat model mart untuk products

Melacak kesalahan umum (debugging)

Mendebug lebih banyak error

Membangun model snapshot dbt

Membangun model dbt

Pelajari cara meningkatkan proyek dbt dengan Jinja dengan merapikan kode, mengurangi redundansi, dan meningkatkan keterpeliharaan. Anda akan berlatih menggunakan variabel, loop, dan macro untuk membangun alur kerja transformasi yang lebih efisien.

Pengenalan Jinja dengan dbt

Pemanasan dengan dbt compile

Pemanasan dengan dbt compile 2

Menggunakan dbt compile untuk debug

Menetapkan variabel dengan dbt Jinja

Menetapkan variabel dengan dbt Jinja 2

Penggunaan jinja yang kompleks dengan dbt

Menggunakan Jinja untuk for loop pada SQL berulang 1

Menggunakan Jinja untuk for loop pada SQL berulang 2

Makro dengan Jinja

Memangkas whitespace dengan Jinja

Rekap: studi kasus dbt

Meningkatkan dbt dengan Jinja

Manfaatkan kekuatan transformasi data dengan Kursus Studi Kasus dbt (Data Build Tool) berbasis praktik. Dirancang untuk pengguna dbt tingkat awal, kursus ini berfokus pada latihan praktis dunia nyata yang memberi Anda banyak kesempatan untuk membangun, mentransformasi, dan memperdalam pemahaman Anda tentang perintah dbt yang esensial. Melalui praktik langsung, Anda akan percaya diri di setiap langkah proses—mulai dari menyiapkan lingkungan dbt hingga membuat model lanjutan yang memecahkan tantangan bisnis kritis. Dengan mengerjakan latihan interaktif, Anda akan membangun pengalaman yang dibutuhkan untuk menangani proyek pipeline ETL data nyata dengan percaya diri.

Ubah data mentah menjadi model yang bersih dan andal menggunakan dbt (Data Build Tool) - sebuah kerangka kerja transformasi berbasis SQL modern yang digunakan oleh tim data di seluruh dunia. Kursus studi kasus praktis ini dirancang untuk pemula yang ingin mengembangkan keterampilan nyata melalui latihan praktis yang dipandu. Anda akan menyiapkan lingkungan dbt Anda sendiri, memodelkan data dalam skala besar, dan menulis kode yang dapat digunakan kembali menggunakan fitur bawaan dbt.<br><br><h2>Atur Proyek Anda dan Jelajahi Data</h2>Mulailah dengan membuat proyek dbt dan bekerja dengan dataset e-commerce yang sebenarnya. Anda akan mengolah data mentah, mengonfigurasi profil, dan memperbaiki masalah sintaksis sambil memahami konteks bisnis di balik setiap langkah transformasi.<br><br><h2>Bangun dan Validasi Model</h2>Pelajari cara membuat model staging yang skalabel dan menerapkan pemeriksaan kualitas data untuk memastikan dataset Anda akurat dan siap untuk analisis. Anda akan membangun dasar yang kokoh untuk menjawab pertanyaan-pertanyaan bisnis yang penting.<br><br><h2>Otomatisasi dengan Jinja</h2>Selesaikan kursus ini dengan mempelajari cara menggunakan Jinja untuk menulis kode yang dapat digunakan kembali dan mudah dipelihara. Anda akan menggunakan variabel, alur kontrol, dan loop untuk mengikuti prinsip DRY (Don't Repeat Yourself) guna mengoptimalkan alur kerja dbt Anda.

Data Manipulation in SQL

Intermediate dbt

Pelajari cara mengubah data mentah menjadi model andal dengan dbt melalui latihan praktis.

Studi Kasus: Membangun Model Data E-Commerce dengan dbt

Pelajari cara mengubah data mentah menjadi model yang bersih dan andal menggunakan dbt melalui latihan praktis yang relevan dengan dunia nyata. 

Inisialisasi proyek dbt

Studi Kasus: Membangun Model Data E-Commerce dengan dbt

Latihan interaktif langsung