การบันทึกรายละเอียดการรันด้วย Stored Procedures

ในฐานะวิศวกรข้อมูล การบันทึก execution log ของ pipeline ถือเป็นสิ่งสำคัญในการติดตามและจัดการการทำงานของ data pipeline ได้อย่างมีประสิทธิภาพ ในแบบฝึกหัดนี้ เราจะสร้าง Stored Procedure ใน Warehouse เพื่อบันทึกรายละเอียดการรันของ pipeline จากนั้นเรียกใช้ Stored Procedure นี้จาก pipeline โดยส่งรายละเอียด log เป็น parameter ซึ่งจะถูกบันทึกลงในตาราง

เคล็ดลับ: ทำแบบฝึกหัดนี้และแบบฝึกหัดถัดไปในเซสชันเดียวกัน เนื่องจากเราจะใช้ artifact ชุดเดิมตลอดทั้งสองแบบฝึกหัด!