Ajouter des contrôles de qualité au niveau de la table
Les contrôles de colonne détectent les mauvaises valeurs, mais ils ne disent rien si le chargement a inséré silencieusement zéro ligne. Un contrôle au niveau de la table comble cette lacune en validant, après chaque chargement, des propriétés de l'ensemble de la table, comme son nombre de lignes.
SQLTableCheckOperator est déjà importé pour vous.
Cette activité fait partie du cours
Créer des pipelines de données avec Airflow
Exercice interactif pratique
Passez de la théorie à l’action grâce à l’un de nos exercices interactifs
Commencer l’exercice