Setelah mempelajari bab ini, Anda akan mampu menjelaskan apa itu arsitektur data modern, serta persyaratan dan komponen utamanya. Anda juga akan meninjau berbagai jenis arsitektur data yang ada, mulai dari Lambda hingga Data Mesh.

Arsitektur Data Modern

Apa itu arsitektur data modern?

Arsitektur modern vs tradisional

Contoh arsitektur data modern

Arsitektur Lambda

Lapisan arsitektur Lambda

Arsitektur Kappa

Kappa: Bagaimana dengan batch layer?

Data Mesh dan Data Fabric

Data Mesh

Data Fabric

Arsitektur data & kasus penggunaannya

Pendahuluan Arsitektur Data Modern

Pelajari berbagai komponen dan lapisan arsitektur data modern; dari ingestion data hingga penyajian. Kenali beragam paradigma dan pendekatan di setiap lapisan, serta beberapa layanan cloud yang digunakan untuk mengimplementasikan solusi data modern agar mendapatkan pengalaman praktis!

Penyimpanan Data: Jenis penyimpanan

Apa itu blob storage?

Kapan sebaiknya Anda menggunakan blob storage?

SQL vs. NoSQL

Kasus penggunaan penyimpanan

Pemasukan Data

Apa itu ingestion?

Apa itu landing zone?

Mengingest data baru

Pemrosesan Data

Batch vs. Streaming

Apa itu window dalam streaming?

Paradigma pemrosesan

Penyajian data

Teknologi serving

Urutkan lapisan

Komponen Arsitektur Data Modern

Dalami komponen transversal yang membentuk arsitektur data modern, mencakup aspek-aspek kunci seperti tata kelola data, metadata, keamanan data, dan observabilitas. Dengan memahami elemen penting ini, Anda akan siap merancang platform data yang tangguh, aman, dan efisien sambil mempertahankan standar tinggi untuk data dan layanan secara keseluruhan.

Tata kelola data

Apa itu data governance?

Pilihan

Governors

Pengguna

Ancillary

Peran dalam tata kelola data

Manajemen Metadata

Peran metadata

Opsi

Teknis

Bisnis

Operasional

Jenis metadata

Kamus bisnis terdiri dari...

Keamanan Data

Apa itu pelanggaran data?

Virtual Private Clouds (VPC)

Keamanan data yang efektif

Layanan Cloud

Perlindungan data

Keamanan jaringan

Mengklasifikasikan Langkah Keamanan Data

Observability

Mengatasi sumber masalah

Lebih mudah diterapkan

Lebih sulit diterapkan

Langkah-langkah keamanan data

Komponen Transversal dalam Arsitektur Data

Pelajari cara mengelola alur kerja, memahami biaya pada layanan cloud, dan membuat rancangan data modern. Bab ini membantu Anda bekerja dengan alat seperti Apache Airflow dan mengajarkan cara menghemat biaya penggunaan cloud. Pada akhirnya, Anda akan tahu cara membangun dan mengevaluasi sistem data yang kuat untuk bisnis.

Orkestrasi

Orkestrasi vs. Penjadwalan

Sensor orkestrasi

Praktik terbaik biaya penyimpanan dan pemrosesan

Kapasitas terpesan pada layanan cloud

Kelas penyimpanan

Merancang arsitektur data modern

Mengajukan pertanyaan yang tepat

Mengimpor data aplikasi

Mengevaluasi solusi arsitektur data modern

Mengapa zona karantina?

Merancang platform data modern

Penutup

Mengintegrasikan Semuanya

Dalam kursus ini, Anda akan memperoleh pemahaman mendalam tentang komponen utama yang membentuk solusi data modern dan mengeksplorasi berbagai arsitektur yang ada beserta keunggulan dan kekurangannya. Mulai dari ingestion data dan penyajian hingga tata kelola dan orkestrasi, Anda akan menelusuri setiap lapisan dan menemukan bagaimana semuanya berkontribusi dalam membangun solusi data yang andal dan dapat diskalakan. Di akhir kursus, Anda akan memiliki pengetahuan dan keterampilan untuk merancang dan mengimplementasikan arsitektur data modern yang tidak hanya mendorong wawasan berharga, tetapi juga mempertimbangkan biaya dan keamanan.

<h2>Pengantar Arsitektur Data Modern</h2>
<br>
Dunia terus berubah berkat data, dan setiap hari jumlah data yang harus diproses semakin besar. Dengan demikian, kursus ini memberi Anda gambaran umum tentang arsitektur data modern, membimbing Anda melalui komponen-komponen fundamental dari solusi data.

<h2>Komponen arsitektur data modern</h2>
<br>
Ini adalah kursus pengantar untuk solusi data modern. Selama paruh pertama kursus ini, Anda akan mempelajari apa itu arsitektur data modern, meninjau beberapa solusi populer seperti Data Mesh dan Data Fabric, serta mengeksplorasi berbagai elemen arsitektur data seperti penyimpanan, metode ingest data, opsi pemrosesan, dan teknik penyajian.

<h2>Komponen Transversal dari arsitektur data modern</h2>
<br>
Pada bagian kedua, kursus ini menunjukkan komponen lintas fungsi yang memastikan kohesi dan memungkinkan pengelolaan arsitektur data; menjelaskan konsep seperti tata kelola data, orkestrasi, observabilitas, dan bahkan optimasi biaya di dalam penyedia cloud. Dengan semua elemen ini, Anda akan mampu merancang solusi data yang sangat selaras dengan kebutuhan organisasi Anda.

<h2>Merancang dan mengevaluasi arsitektur data modern</h2>
<br>
Bagian akhir kursus ini mengintegrasikan pengetahuan yang telah Anda peroleh, menggunakan studi kasus bisnis untuk merancang solusi data yang memenuhi kebutuhan bisnis.

Data Warehousing Concepts

Understanding Data Engineering

Temukan komponen utama arsitektur data modern: dari pengambilan, penyajian, hingga tata kelola dan orkestrasi.

Memahami Arsitektur Data Modern

Temukan komponen utama arsitektur data modern, dari ingestion dan serving hingga governance dan orchestration.

Insinyur Data Profesional dalam Python

Makna tiap kolom dalam himpunan data film

Waktu terakhir himpunan data film diproses

Jenis metadata

Memahami Arsitektur Data Modern

Latihan interaktif langsung