Tworzenie SparkSession
Zacznijmy od utworzenia nowej SparkSession. W tym kursie zazwyczaj będziesz mieć ją przygotowaną z góry, ale umiejętność tworzenia nowej sesji lub korzystania z już istniejącej to absolutna podstawa!
To ćwiczenie jest częścią kursu
Wprowadzenie do PySpark
Instrukcje do ćwiczenia
- Zaimportuj
SparkSessionzpyspark.sql. - Utwórz nową
SparkSessiono nazwie"my_spark", używającSparkSession.builder.getOrCreate(). - Wyświetl
my_sparkw konsoli, aby sprawdzić, czy to rzeczywiścieSparkSession.
Interaktywne ćwiczenie praktyczne
Spróbuj tego ćwiczenia, uzupełniając ten przykładowy kod.
# Import SparkSession from pyspark.sql
from ____ import ____
# Create my_spark
my_spark = SparkSession.builder.appName(____).____
# Print my_spark
____