1. Učit se
  2. /
  3. Kurzy
  4. /
  5. ETL a ELT v Pythonu

Connected

cvičení

Monitoring a alerting v datovém pipeline

Nastal čas dát vše dohromady! Možná jsi to už tušil/a, ale ošetření chyb pomocí try-except a logování jdou ruku v ruce. Tyto dvě praktiky jsou nezbytné pro to, aby byl pipeline odolný a transparentní – a zároveň tvoří základ pro pokročilejší monitorovací a alertovací řešení.

pandas je naimportován jako pd a modul logging je načtený a nakonfigurovaný. DataFrame raw_sales_data byl extrahován a je připravený k transformaci.

Pokyny 1/3

undefined XP
    1
    2
    3
  • Vytvoř logovací zprávu na úrovni info pro zaznamenání úspěchu a logovací zprávu na úrovni warning pro případ, že transformace selže.