НачатьНачать бесплатно

Проблема с данными в конвейере

После создания быстрого конвейера вы передаёте JSON-файл аналитику в своей команде. Загрузив данные и выполнив несколько исследовательских операций, аналитик сообщает о проблеме в наборе данных при попытке отсортировать данные о продолжительности рейса. Она не может точно определить причину — известно лишь, что операция сортировки работает не так, как ожидалось.

Date          Flight Number   Airport     Duration    ID

09/30/2015    2287            ANC         409         107962
12/28/2015    1408            OKC         41          141917
08/11/2015    2287            ANC         410         87978

Проанализировав данные, какая команда устранит проблему?

Это упражнение является частью курса

Очистка данных с помощью PySpark

Посмотреть курс

Практическое интерактивное упражнение

Превратите теорию в практику с помощью одного из наших интерактивных упражнений

Начать упражнение