การรันไปป์ไลน์ข้อมูลแบบ end-to-end
การตรวจสอบประสิทธิภาพของไปป์ไลน์ขณะทำงานในสภาพแวดล้อมจริงเป็นเรื่องสำคัญ ก่อนหน้านี้ในคอร์สนี้ได้สำรวจเครื่องมืออย่างการจัดการข้อยกเว้นและการบันทึกล็อกไปแล้ว ในแบบฝึกหัดสุดท้ายนี้ จะได้ฝึกรันไปป์ไลน์แบบ end-to-end พร้อมกับตรวจสอบข้อยกเว้นและบันทึกประสิทธิภาพการทำงานไปด้วย
แบบฝึกหัดนี้เป็นส่วนหนึ่งของหลักสูตร
ETL and ELT ใน Python
แบบฝึกหัดเชิงโต้ตอบแบบลงมือทำ
ลองทำแบบฝึกหัดนี้โดยเติมโค้ดตัวอย่างนี้ให้สมบูรณ์
import logging
# Import extract, transform, and load functions from pipeline_utils
____