クエリプランの練習
DataFrame text_df が利用可能です。このDataFrameは table1 という名前のテーブルとして登録されています。
この演習はコースの一部です
Pythonで学ぶ Spark SQL 入門
演習の手順
text_dfに対して explain を実行します。table1に対して "SELECT COUNT(*) as count" を行うSQLクエリで explain を実行します。table1のユニークな単語数をカウントするSQLクエリで explain を実行します。
実践的なインタラクティブ演習
このサンプルコードを完成させて、この演習に挑戦してみましょう。
# Run explain on text_df
text_df.____()
# Run explain on "SELECT COUNT(*) AS count FROM table1"
spark.sql("SELECT COUNT(*) AS count FROM table1").____()
# Run explain on "SELECT COUNT(DISTINCT word) AS words FROM table1"
spark.sql("____").____()