Konfigurowanie powtórzeń z wykładniczym opóźnieniem
Twój zespół prowadzi pipeline, który pobiera dane pogodowe z zewnętrznego API. Interfejs API czasami przekracza limit czasu podczas szczytowego ruchu, ale to przejściowe błędy, które zazwyczaj same się rozwiązują.
Proste powtórzenie ze stałym opóźnieniem może przeciążyć API podczas awarii, dlatego zadanie potrzebuje strategii, która daje punktowi końcowemu coraz więcej czasu na odzyskanie sprawności między kolejnymi próbami.
To ćwiczenie jest częścią kursu
Budowanie potoków danych z Airflow
Interaktywne ćwiczenie praktyczne
Przekształć teorię w praktykę dzięki jednemu z naszych interaktywnych ćwiczeń
Rozpocznij ćwiczenie