Hacer que un sensor sea diferible
Tu equipo ejecuta docenas de sensores en distintas canalizaciones y los slots de los workers se están convirtiendo en un cuello de botella. Incluso en modo reschedule, cada sensor ocupa brevemente un slot cada vez que se activa para comprobar. El modo diferible va más allá al ceder toda la espera al Triggerer, un proceso ligero que usa E/S asíncrona y nunca ocupa un slot de worker.
Vas a configurar este FileSensor para aprovechar la postergación.
Este ejercicio forma parte del curso
Creación de canalizaciones de datos con Airflow
ejercicio interactivo práctico
Convierte la teoría en práctica con uno de nuestros ejercicios interactivos
Empezar ejercicio