Ajouter des contrôles de qualité au niveau des colonnes
Un pipeline qui charge des mauvaises données selon l'horaire est pire qu'un pipeline qui échoue de façon explicite. Avant que les équipes en aval consomment daily_summary, vous allez ajouter une barrière de qualité au niveau des colonnes qui s'exécute juste après le chargement et qui rejette l'exécution si les revenus tombent sous zéro ou si des décomptes de commandes manquent.
La tâche de chargement et le fichier SQL sont déjà préremplis à partir des leçons précédentes.
Cette activité fait partie du cours
Créer des pipelines de données avec Airflow
Exercice interactif pratique
Passez de la théorie à l’action grâce à l’un de nos exercices interactifs
Commencer l’exercice