EmpezarEmpieza gratis

Hacer que un sensor sea diferible

Tu equipo ejecuta docenas de sensores en distintas canalizaciones y los slots de los workers se están convirtiendo en un cuello de botella. Incluso en modo reschedule, cada sensor ocupa brevemente un slot cada vez que se activa para comprobar. El modo diferible va más allá al ceder toda la espera al Triggerer, un proceso ligero que usa E/S asíncrona y nunca ocupa un slot de worker.

Vas a configurar este FileSensor para aprovechar la postergación.

Este ejercicio forma parte del curso

Creación de canalizaciones de datos con Airflow

Ver curso

ejercicio interactivo práctico

Convierte la teoría en práctica con uno de nuestros ejercicios interactivos

Empezar ejercicio