1. Apprendre
    2. /
  2. Cours
    3. /
  3. Principes de Big Data avec PySpark
Connected

Exercice

Comprendre SparkContext

Un SparkContext représente le point d'entrée vers les fonctionnalités de Spark. C'est un peu comme la clé de votre voiture. Lorsque vous exécutez une application Spark, un programme pilote (driver) démarre, contient la fonction principale, et votre SparkContext y est initialisé. PySpark crée automatiquement un SparkContext pour vous dans l'interpréteur PySpark (vous n'avez donc pas à le créer vous-même) et il est accessible par la variable sc.

Dans ce court exercice, vous allez découvrir les attributs de SparkContext dans votre interpréteur PySpark, que vous utiliserez pour le reste du cours.

Instructions

100 XP
  • Affichez la version de SparkContext dans l'interpréteur PySpark.
  • Affichez la version de Python utilisée par SparkContext dans l'interpréteur PySpark.
  • Quel est le « master » de SparkContext dans l'interpréteur PySpark?