Потоковая загрузка розничных данных в Delta Lake

Каждый день в хранилище вашей команды Global Retail Analytics появляются новые файлы с заказами.

Вместо того чтобы каждое утро перезагружать все данные заново, вы создадите потоковый пайплайн: он будет автоматически подхватывать новые CSV-файлы, записывать их в Delta Lake и корректно восстанавливаться после перезапуска с помощью чекпоинтов.