Configurare i retry con backoff esponenziale
Il tuo team esegue una pipeline che recupera dati meteo da un'API esterna. A volte l'API va in timeout nelle ore di punta, ma sono errori temporanei che di solito si risolvono da soli.
Un semplice retry con ritardo fisso può sovraccaricare l'API durante un'interruzione, quindi il task ha bisogno di una strategia che conceda all'endpoint sempre più tempo per riprendersi tra un tentativo e l'altro.
Questo esercizio fa parte del corso
Creare data pipeline con Airflow
esercizio interattivo pratico
Trasforma la teoria in pratica con uno dei nostri esercizi interattivi
Inizia esercizio