Візуалізація датафрейму PySpark

Графічне подання або візуалізація даних є необхідними для розуміння та інтерпретації даних. У цій простій вправі з візуалізації ви спочатку виведете назви стовпців датафрейму names_df, який ви створили раніше, потім перетворите names_df на датафрейм Pandas, і нарешті побудуєте горизонтальну стовпчикову діаграму, де на осі x будуть імена людей, а на осі y — їхній вік.

Пам'ятайте, у вашому робочому середовищі вже доступні SparkSession spark і датафрейм names_df.

Ця вправа є частиною курсу

Основи Big Data з PySpark

Переглянути курс

Інструкції до вправи

Виведіть назви стовпців у датафреймі names_df.
Перетворіть датафрейм names_df на датафрейм Pandas df_pandas.
Використайте метод matplotlib plot(), щоб створити горизонтальну стовпчикову діаграму з 'Name' на осі x і 'Age' на осі y.

Інтерактивна практична вправа

Спробуйте виконати цю вправу, доповнивши цей зразок коду.

# Check the column names of names_df
print("The column names of names_df are", names_df.____)

# Convert to Pandas DataFrame  
df_pandas = names_df.____()

# Create a horizontal bar plot
____.plot(kind='barh', x='____', y='____', colormap='winter_r')
plt.show()

Редагувати та запускати код