Öva på cachelagring: sätt ihop allt
Vilket var det bästa sättet att cachelagra df1 och df2, och varför?
Dina resultat kommer att variera, men här är ett (slumpmässigt) resultat för var och en av de två metoderna:
Första svaret (cachelagra df1):
df1_1st : 2.4s
df1_2nd : 0.1s
df2_1st : 0.3s
df2_2nd : 0.2s
Overall elapsed : 3.9
Andra svaret (cachelagra df2):
df1_1st : 2.3s
df1_2nd : 1.1s
df2_1st : 1.7s
df2_2nd : 0.1s
Overall elapsed : 6.4
Den här övningen är en del av kursen
Introduktion till Spark SQL i Python
Interaktiv övning med praktiskt arbete
Gör teori till handling med en av våra interaktiva övningar
Starta övningen