Проблема с данными в конвейере
После создания быстрого конвейера вы передаёте JSON-файл аналитику в своей команде. Загрузив данные и выполнив несколько исследовательских операций, аналитик сообщает о проблеме в наборе данных при попытке отсортировать данные о продолжительности рейса. Она не может точно определить причину — известно лишь, что операция сортировки работает не так, как ожидалось.
Date Flight Number Airport Duration ID
09/30/2015 2287 ANC 409 107962
12/28/2015 1408 OKC 41 141917
08/11/2015 2287 ANC 410 87978
Проанализировав данные, какая команда устранит проблему?
Это упражнение является частью курса
Очистка данных с помощью PySpark
Практическое интерактивное упражнение
Превратите теорию в практику с помощью одного из наших интерактивных упражнений
Начать упражнение