Создание SparkSession
Начнём с создания нового SparkSession. В этом курсе он, как правило, будет предоставляться вам автоматически, однако умение создать новый сеанс или получить уже существующий — это важный навык, который необходимо освоить!
Это упражнение является частью курса
Введение в PySpark
Инструкции к упражнению
- Импортируйте
SparkSessionизpyspark.sql. - Создайте новый
SparkSessionс именем"my_spark", используяSparkSession.builder.getOrCreate(). - Выведите
my_sparkв консоль, чтобы убедиться, что это действительноSparkSession.
Интерактивное практическое упражнение
Попробуйте выполнить это упражнение, дополнив этот пример кода.
# Import SparkSession from pyspark.sql
from ____ import ____
# Create my_spark
my_spark = SparkSession.builder.appName(____).____
# Print my_spark
____