Sätta upp ETL-pipeline för försäljning

Du har lärt dig mycket om hur Airflow fungerar – nu är det dags att implementera ditt arbetsflöde i en produktionspipeline som består av många objekt, inklusive uppgifter och sensorer. Din chef är intresserad av att se det här arbetsflödet automatiseras och kunna generera rapporter, eftersom det ger extra draghjälp i en affär som säljteamet håller på att stänga. Försäljningsprospektet har indikerat att de är villiga att teckna det aktuella datatjänstavtalet så fort de ser uppdateringar på ett automatiserat sätt.

Baserat på vad du har lärt dig om processen vet du att det finns försäljningsdata som kommer att laddas upp till systemet. När datan är uppladdad ska en ny fil skapas för att starta hela bearbetningen – men något fungerar inte som det ska.