Обробка пропущених даних за допомогою fill та drop
Ой-ой… У цьому наборі даних багато пропусків! Давайте приберемо їх. Маючи завантажений файл CSV, видаліть рядки з будь-якими значеннями null і виведіть результат!
Пам'ятайте, у вашому середовищі вже є SparkSession під назвою spark!
Ця вправа є частиною курсу
Вступ до PySpark
Інструкції до вправи
- Видаліть усі рядки зі значеннями null у датафреймі
census_df. - Показайте отриманий датафрейм.
Інтерактивна практична вправа
Спробуйте виконати цю вправу, доповнивши цей зразок коду.
# Drop rows with any nulls
census_cleaned = census_df.____
# Show the result
census_cleaned.____