ćwiczenie

Tworzenie SparkSession

Przygotowaliśmy dla ciebie obiekt SparkSession o nazwie spark, ale co zrobić, jeśli nie masz pewności, czy już istnieje? Tworzenie wielu obiektów SparkSession i SparkContext może powodować problemy, dlatego dobrą praktyką jest korzystanie z metody SparkSession.builder.getOrCreate(). Zwraca ona istniejącą SparkSession, jeśli taka już jest w środowisku, albo tworzy nową – jeśli zajdzie taka potrzeba!

Instrukcje

100 XP

Zaimportuj SparkSession z pyspark.sql.
Utwórz nową SparkSession o nazwie my_spark, używając SparkSession.builder.getOrCreate().
Wyświetl my_spark w konsoli, aby sprawdzić, czy to rzeczywiście SparkSession.

.css-6su6fj{-webkit-flex-shrink:0;-ms-flex-negative:0;flex-shrink:0;}ćwiczenie

Instrukcje

ćwiczenie