1. Nauka
  2. /
  3. Kursy
  4. /
  5. ETL i ELT w Pythonie

Connected

ćwiczenie

Wzorce architektury potoków danych

Budując potoki danych, warto rozdzielać pliki, w których definiuje się funkcje, od tych, w których się je uruchamia.

W tym ćwiczeniu przećwiczysz importowanie komponentów potoku do pamięci, a następnie użyjesz tych funkcji, aby uruchomić potok od początku do końca. Projekt ma następującą strukturę – pipeline_utils przechowuje funkcje extract(), transform() i load(), które służą do uruchomienia potoku.

> ls
 etl_pipeline.py
 pipeline_utils.py

Instrukcje

100 XP
  • Zaimportuj funkcje extract, transform i load z modułu pipeline_utils.
  • Użyj zaimportowanych funkcji, aby uruchomić potok danych od początku do końca.