1. Learn
  2. /
  3. Курси
  4. /
  5. Основи Big Data з PySpark

Connected

Вправа

CountingBykeys

Для багатьох наборів даних важливо порахувати кількість ключів у наборі даних ключ/значення. Наприклад, порахувати кількість країн, де було продано продукт, або показати найпопулярніші імена немовлят. У цій простій вправі ви використаєте Rdd, який створили раніше, і порахуєте кількість унікальних ключів у цьому pair RDD.

Пам'ятайте, що у вашому робочому середовищі вже доступні SparkContext sc і Rdd.

Інструкції

100 XP
  • Використайте countByKey і присвойте результат змінній total.
  • Який тип має total?
  • Проітеруйтеся по total і виведіть ключі та їхні підрахунки.