Czyszczenie zbioru danych sprzedaży online
Pracujesz jako inżynier danych w firmie Global Retail Analytics. Twój menedżer zgłosił problemy z jakością danych w zbiorze online_retail — brakujące identyfikatory klientów, zduplikowane wiersze i anulowane zamówienia zaburzają tygodniowe raporty.
Zanim rozpocznie się jakakolwiek analiza, musisz zdefiniować jawny schemat, zdiagnozować problemy z jakością danych i zbudować potok czyszczenia, który usunie nieprawidłowe rekordy.
To ćwiczenie jest częścią kursu
Data Transformation with Spark SQL in Databricks
Interaktywne ćwiczenie praktyczne
Przekształć teorię w praktykę dzięki jednemu z naszych interaktywnych ćwiczeń
Rozpocznij ćwiczenie