Завантаження даних перепису
Почнімо створювати ваш перший датафрейм у PySpark! Файл adult_reduced.csv містить групування дорослих за різними демографічними категоріями. Ці дані адаптовано з перепису населення США. Загалом є 32 562 групування дорослих.
Завантажмо CSV і перегляньмо отриману схему.
Словник даних:
| Змінна | Опис |
|---|---|
| age | Вік особи |
| education_num | Освіта за ступенем |
| marital_status | Сімейний стан |
| occupation | Рід занять |
| income | Категоріальний дохід |
Ця вправа є частиною курсу
Вступ до PySpark
Інструкції до вправи
- Створіть датафрейм PySpark з файлу
"adult_reduced.csv", використавши методspark.read.csv(). - Відобразіть отриманий датафрейм.
Інтерактивна практична вправа
Спробуйте виконати цю вправу, доповнивши цей зразок коду.
# Read in the CSV
census_adult = ____.____.____(____)
# Show the DataFrame
census_adult.____