Aggiungere controlli di qualità a livello di colonna
Una pipeline che carica dati errati secondo pianificazione è peggio di una che fallisce in modo evidente. Prima che i team a valle usino daily_summary, aggiungerai una soglia di qualità a livello di colonna che viene eseguita subito dopo il caricamento e rifiuta l'esecuzione se il fatturato scende sotto zero o se i conteggi degli ordini risultano mancanti.
Il task di caricamento e il file SQL sono già precompilati dalle lezioni precedenti.
Questo esercizio fa parte del corso
Creare data pipeline con Airflow
esercizio interattivo pratico
Trasforma la teoria in pratica con uno dei nostri esercizi interattivi
Inizia esercizio