1. 学ぶ
  2. /
  3. コース
  4. /
  5. PySpark入門

Connected

演習

テーブルを確認する

SparkSession を作成したら、クラスター内にどんなデータがあるかを確認できます。

SparkSession には catalog という属性があり、クラスター内のすべてのデータを一覧できます。この属性には、さまざまな情報を取り出すためのメソッドがいくつかあります。

中でも便利なのが .listTables() メソッドで、クラスター内のすべてのテーブル名をリストとして返します。

指示

100 XP
  • spark.catalog.listTables() を呼び出し、その結果を出力して、クラスター内のテーブルを確認しましょう!