З'єднайте точки
Конвеєри обробки даних використовують для опрацювання даних. Наприкінці розділу 1 ви дізналися про ETL (Extract, Transform, Load — витягнути, трансформувати, завантажити), одну з парадигм для побудови конвеєрів. Завдання з обробки даних, які ви щойно розглянули, добре вкладаються в цю схему — вони відповідають операціям витягування, трансформації або завантаження.
Зверніть увагу: хоча «збереження» і «завантаження» зазвичай вважають протилежними діями, у контексті інженерії даних це, по суті, одне й те саме, як ви могли помітити. Причина в тому, що коли ви щось зберігаєте, ви просто розміщуєте це на наступному кроці конвеєра.
Чи зможете ви правильно класифікувати завдання з обробки даних як операції витягування, трансформації або завантаження?
Ця вправа є частиною курсу
Розуміння Data Engineering
Практична інтерактивна вправа
Перетворіть теорію на практику за допомогою однієї з наших інтерактивних вправ
Почати вправу