Инструменты оркестровки и ETL
При развёртывании пайплайнов данных в production инженеры по данным должны убедиться, что пайплайны стабильно выполняются по расписанию, имеют доступ к необходимому количеству ресурсов и отправляют уведомления при сбоях. Для этого инженеры по данным нередко обращаются к специализированным инструментам оркестровки и ETL, выходящим за рамки обычного Python-скрипта.
Какой инструмент оркестровки наиболее широко используется для построения, развёртывания и мониторинга пайплайнов данных?
Это упражнение является частью курса
ETL и ELT на Python
Практическое интерактивное упражнение
Превратите теорию в практику с помощью одного из наших интерактивных упражнений
Начать упражнение