1. Learn
  2. /
  3. Курси
  4. /
  5. Principes de Big Data avec PySpark

Connected

Вправа

CountingBykeys

Pour de nombreux jeux de données, il est important de compter le nombre de clés dans un ensemble clé/valeur. Par exemple, compter le nombre de pays où le produit a été vendu ou afficher les prénoms de bébé les plus populaires. Dans cet exercice simple, vous utiliserez le Rdd que vous avez créé plus tôt et compterez le nombre de clés uniques dans ce RDD de paires.

N'oubliez pas : vous avez déjà un SparkContext sc et un Rdd disponibles dans votre espace de travail.

Інструкції

100 XP
  • Utilisez countByKey et affectez le résultat à une variable total.
  • Quel est le type de total?
  • Itérez sur total et affichez les clés ainsi que leur nombre.