1. Učit se
  2. /
  3. Kurzy
  4. /
  5. Foundations of PySpark

Connected

Cvičení

Vytvoření SparkSession

Už jsme pro tebe připravili SparkSession s názvem spark, ale co kdybys si nebyl/a jistý/a, jestli už nějaká existuje? Vytváření více SparkSession a SparkContext může způsobovat problémy, takže osvědčeným postupem je použít metodu SparkSession.builder.getOrCreate(). Ta vrátí existující SparkSession, pokud už v prostředí nějaká je, nebo v případě potřeby vytvoří novou!

Pokyny

100 XP
  • Importuj SparkSession z pyspark.sql.
  • Vytvoř novou SparkSession s názvem my_spark pomocí SparkSession.builder.getOrCreate().
  • Vypiš my_spark do konzole a ověř, že jde o SparkSession.