Configurer un capteur pour la production
Votre pipeline utilise un FileSensor pour attendre l'arrivée d'un rapport CSV avant de le traiter. En mode poke par défaut, le capteur occupe un poste de travail pendant toute l'attente, même si le fichier met plusieurs minutes à arriver.
En production, un capteur devrait libérer le poste entre les vérifications et avoir un délai d'attente de sécurité pour éviter d'attendre indéfiniment.
Cette activité fait partie du cours
Créer des pipelines de données avec Airflow
Exercice interactif pratique
Passez de la théorie à l’action grâce à l’un de nos exercices interactifs
Commencer l’exercice