Examiner le SparkContext

Dans cet exercice, vous vous familiariserez avec l'application SparkContext.

Vous remarquerez probablement que l'exécution du code prend plus de temps que prévu. En effet, Spark est un logiciel sérieux. Le démarrage prend plus de temps que ce à quoi vous êtes habitué. Vous pouvez également constater que l'exécution de calculs plus simples peut prendre plus de temps que prévu. C'est parce que toutes les optimisations que Spark a sous son capot sont conçues pour des opérations compliquées avec des ensembles de données volumineuses. Cela signifie que pour des problèmes simples ou de petite taille, Spark peut en fait être moins performant que d'autres solutions !