Просмотр таблиц
После создания SparkSession можно приступить к изучению данных в вашем кластере!
У объекта SparkSession есть атрибут catalog, который содержит информацию обо всех данных в кластере. Этот атрибут предоставляет несколько методов для получения различных сведений.
Один из наиболее полезных — метод .listTables(), который возвращает список имён всех таблиц в вашем кластере.
Это упражнение является частью курса
Основы PySpark
Инструкции к упражнению
- Узнайте, какие таблицы есть в вашем кластере: вызовите
spark.catalog.listTables()и выведите результат на экран!
Интерактивное практическое упражнение
Попробуйте выполнить это упражнение, дополнив этот пример кода.
# Print the tables in the catalog
print(spark.____.____())