Retirer un DataFrame de la mémoire cache
Vous avez terminé les tâches d'analyse avec le DataFrame departures_df, mais il vous reste d'autres traitements à faire. Vous souhaitez retirer le DataFrame de la mémoire cache pour éviter une utilisation excessive de la mémoire sur votre grappe.
Le DataFrame departures_df est défini et a déjà été mis en cache pour vous.
Cette activité fait partie du cours
Nettoyer des données avec PySpark
Instructions de l’exercice
- Vérifiez l'état de mise en cache du DataFrame
departures_df. - Retirez le DataFrame
departures_dfde la mémoire cache. - Vérifiez de nouveau l'état de mise en cache.
Exercice interactif pratique
Essayez cet exercice en complétant ce code d’exemple.
# Determine if departures_df is in the cache
print("Is departures_df cached?: %s" % departures_df.____)
print("Removing departures_df from cache")
# Remove departures_df from the cache
____
# Check the cache status again
print("Is departures_df cached?: %s" % ____)