Einen Sensor deferrable machen
Dein Team betreibt Dutzende Sensoren in verschiedenen Pipelines, und die Worker-Slots werden zum Engpass. Selbst im Modus reschedule belegt jeder Sensor kurzzeitig einen Slot, sobald er aufwacht und prüft. Der deferrable Modus geht weiter: Er übergibt das Warten vollständig an den Triggerer – einen leichtgewichtigen Prozess, der async I/O nutzt und nie einen Worker-Slot belegt.
Du konfigurierst diesen FileSensor, um das Deferral zu nutzen.
Diese Übung ist Teil des Kurses
<Kurs>Data-Pipelines mit Airflow aufbauen</Kurs>Interaktive praktische Übung
Verwandle Theorie mit einer unserer interaktiven Übungen in die Praxis
Übung starten