Вилучення DataFrame з кешу
Ви завершили аналітичні завдання з датафреймом departures_df, але маєте виконати іншу обробку. Ви хочете прибрати датафрейм з кешу, щоб уникнути зайвого використання пам'яті у вашому кластері.
Датуфрейм departures_df уже визначено й закешовано для вас.
Ця вправа є частиною курсу
Очищення даних у PySpark
Інструкції до вправи
- Перевірте статус кешування датафрейму
departures_df. - Вилучіть датафрейм
departures_dfз кешу. - Повторно перевірте статус кешування.
Інтерактивна практична вправа
Спробуйте виконати цю вправу, доповнивши цей зразок коду.
# Determine if departures_df is in the cache
print("Is departures_df cached?: %s" % departures_df.____)
print("Removing departures_df from cache")
# Remove departures_df from the cache
____
# Check the cache status again
print("Is departures_df cached?: %s" % ____)