始める無料で始める

キャッシュの実践:総まとめ

df1df2 をキャッシュする最適な方法はどれで、理由は何でしょうか?

結果は環境により異なりますが、各アプローチの一例(ランダムな結果)を示します。

1つ目の解答(df1 をキャッシュ):

df1_1st : 2.4s
df1_2nd : 0.1s
df2_1st : 0.3s
df2_2nd : 0.2s
Overall elapsed : 3.9

2つ目の解答(df2 をキャッシュ):

df1_1st : 2.3s
df1_2nd : 1.1s
df2_1st : 1.7s
df2_2nd : 0.1s
Overall elapsed : 6.4

この演習はコースの一部です

Pythonで学ぶ Spark SQL 入門

コースを見る

実践的なインタラクティブ演習

理論を実践に変える、インタラクティブな演習のひとつをお試しください

演習を開始する