DataFrame をキャッシュから削除する
departures_df DataFrame での分析作業は完了しましたが、ほかの処理が残っています。クラスターの余分なメモリ使用を避けるために、この DataFrame をキャッシュから削除したいと考えています。
DataFrame departures_df は定義済みで、すでにキャッシュされています。
この演習はコースの一部です
PySpark でデータをクレンジングする
演習の手順
departures_dfDataFrame のキャッシュ状況を確認します。departures_dfDataFrame をキャッシュから削除します。- もう一度、キャッシュ状況を確認して検証します。
実践的なインタラクティブ演習
このサンプルコードを完成させて、この演習に挑戦してみましょう。
# Determine if departures_df is in the cache
print("Is departures_df cached?: %s" % departures_df.____)
print("Removing departures_df from cache")
# Remove departures_df from the cache
____
# Check the cache status again
print("Is departures_df cached?: %s" % ____)