Exploiter un pipeline de données de bout en bout
Il est important de surveiller les performances d'un pipeline lorsqu'il est en production. Plus tôt dans le cours, vous avez exploré des outils tels que la gestion des exceptions et la journalisation. Dans ce dernier exercice, nous allons nous entraîner à exécuter un pipeline de bout en bout, tout en surveillant les exceptions et en enregistrant les performances.
Cet exercice fait partie du cours
ETL et ELT en Python
Exercice interactif pratique
Essayez cet exercice en complétant cet exemple de code.
import logging
# Import extract, transform, and load functions from pipeline_utils
____