1. Learn
    2. /
  2. Курси
    3. /
  3. Очищення даних у PySpark
Connected

Вправа

Розбір даних про собак

Ви вже суттєво почистили початковий набір даних, але тепер потрібно проаналізувати його глибше. З'явилося кілька запитань щодо типів собак на зображенні та деяких деталей самих зображень. Ви розумієте, що для відповіді на ці запитання потрібно обробити дані до конкретного типу. Перш ніж ви зможете його використовувати, потрібно створити схему/тип для представлення деталей про собаку.

Датaфрейм joined_df — у тому стані, в якому ви його залишили, а модулі з pyspark.sql.types уже імпортовано.

Інструкції

100 XP
  • Виберіть зі датафрейму стовпець із деталями про собаку та виведіть перші 10 рядків без скорочення.
  • Створіть нову схему, як ви робили раніше, використавши назви breed, start_x, start_y, end_x і end_y. Обов'язково вкажіть відповідні типи даних для кожного поля в схемі (будь-які числові значення — це цілі числа).