Створення SparkSession
Почнімо зі створення нового SparkSession. У цьому курсі ви зазвичай отримуватимете готовий екземпляр, але вміння створити новий або отримати наявний — обов'язкова навичка!
Ця вправа є частиною курсу
Вступ до PySpark
Інструкції до вправи
- Імпортуйте
SparkSessionзpyspark.sql. - Створіть новий
SparkSessionз назвою"my_spark", використавшиSparkSession.builder.getOrCreate(). - Виведіть
my_sparkу консоль, щоб перевірити, що цеSparkSession.
Інтерактивна практична вправа
Спробуйте виконати цю вправу, доповнивши цей зразок коду.
# Import SparkSession from pyspark.sql
from ____ import ____
# Create my_spark
my_spark = SparkSession.builder.appName(____).____
# Print my_spark
____