檢視資料表
建立好 SparkSession 之後,你就可以開始看看叢集裡有哪些資料了!
你的 SparkSession 有個名為 catalog 的屬性,會列出叢集中的所有資料。這個屬性提供一些方法,可用來擷取不同種類的資訊。
其中最實用的方法之一是 .listTables(),它會回傳叢集中所有資料表的名稱清單。
本練習屬於課程
PySpark 基礎
練習說明
- 呼叫
spark.catalog.listTables()並印出結果,看看你的叢集裡有哪些資料表!
動手互動練習
試著完成這個範例程式碼,體驗一下這個練習。
# Print the tables in the catalog
print(spark.____.____())