Очистка набора данных об онлайн-продажах
Вы — дата-инженер в компании Global Retail Analytics. Ваш руководитель выявил проблемы с качеством данных в наборе online_retail: отсутствующие идентификаторы клиентов, дублирующиеся строки и отменённые заказы искажают еженедельную отчётность.
Прежде чем приступить к анализу, необходимо задать явную схему, диагностировать проблемы с качеством данных и построить пайплайн очистки, который удалит некорректные записи.
Это упражнение является частью курса
Преобразование данных с помощью Spark SQL в Databricks
Практическое интерактивное упражнение
Превратите теорию в практику с помощью одного из наших интерактивных упражнений
Начать упражнение