Автоматизация конвейеров данных

Вы работаете в онлайн-агентстве по продаже туристических услуг и занимаетесь созданием интерфейса прикладного программирования (API), который будет в режиме реального времени обмениваться данными со страховой компанией для проверки наличия у путешественников необходимого страхового полиса. Этот API будет связан с микросервисом insurance_checker.

Теперь вам нужно:

1. создать конвейеры данных, которые будут записывать результаты работы API insurance_checker
2. автоматически преобразовывать и записывать данные каждую ночь в другую базу данных

Какой инструмент и какой метод конвейера можно использовать для каждого из этих шагов?