Добавление контрольных точек логирования с помощью Data Tables

Никто не видит, сколько записей на самом деле прошло через каждый этап запуска загрузки данных, — а менять основной конвейер только ради этого не хочется. Боковая ветвь с журналом аудита отслеживает прогресс, не нарушая поток данных.

Импортируйте стартовый файл, создайте таблицу execution_log и добавьте узлы вставки Data Table в виде боковых ветвей от HTTP Request, Transform Data и Format Output. Завершите узлом Get row(s), чтобы убедиться, что в таблицу попали три строки с контрольными точками.