1. Learn
  2. /
  3. Курси
  4. /
  5. Опрацювання ознак у PySpark

Connected

Вправа

Перевірка типів даних

У добу даних ми маємо доступ до більшої кількості атрибутів, ніж будь-коли раніше. Щоб упоратися з ними, ми створюємо чимало автоматизацій, але мінімальна вимога — щоб їхні типи даних були правильними. У цій вправі ви перевірите словник атрибутів і їхніх типів даних, щоб визначити, чи все коректно. Цей словник збережено у змінній validation_dict і він доступний у вашому робочому середовищі.

Інструкції

100 XP
  • Використайте df, щоб створити список кортежів «атрибут — тип даних» за допомогою dtypes і назвіть його actual_dtypes_list.
  • Ітеруйте по actual_dtypes_list, перевіряючи, чи існують назви стовпців у словнику очікуваних типів даних validation_dict.
  • Для ключів, що є у словнику, звірте їхні типи даних і виведіть ті, що збігаються.