НачатьНачать бесплатно

Очистка набора данных об онлайн-продажах

Вы — дата-инженер в компании Global Retail Analytics. Ваш руководитель выявил проблемы с качеством данных в наборе online_retail: отсутствующие идентификаторы клиентов, дублирующиеся строки и отменённые заказы искажают еженедельную отчётность.

Прежде чем приступить к анализу, необходимо задать явную схему, диагностировать проблемы с качеством данных и построить пайплайн очистки, который удалит некорректные записи.

Это упражнение является частью курса

Преобразование данных с помощью Spark SQL в Databricks

Посмотреть курс

Практическое интерактивное упражнение

Превратите теорию в практику с помощью одного из наших интерактивных упражнений

Начать упражнение