Выбор правильной метрики качества
Младший инженер компании Global Retail Analytics запускает конвейер очистки данных на свежей загрузке online_retail, но случайно комментирует строку na.drop(subset=["CustomerID"]). Остальные шаги — na.fill(), dropDuplicates() и фильтр некорректных записей — выполняются без ошибок.
Какая метрика качества сразу же выявит эту ошибку?
Это упражнение является частью курса
Преобразование данных с помощью Spark SQL в Databricks
Практическое интерактивное упражнение
Превратите теорию в практику с помощью одного из наших интерактивных упражнений
Начать упражнение