Menjalankan pipeline data end-to-end
Penting untuk memantau kinerja pipeline saat berjalan di produksi. Sebelumnya dalam kursus, Anda telah mempelajari alat seperti penanganan pengecualian dan logging. Dalam latihan terakhir ini, kita akan berlatih menjalankan pipeline secara end-to-end, sambil memantau pengecualian dan mencatat kinerja.
Latihan ini merupakan bagian dari kursus
ETL dan ELT di Python
Latihan interaktif langsung praktik
Cobalah latihan ini dengan melengkapi kode contoh ini.
import logging
# Import extract, transform, and load functions from pipeline_utils
____