Перегляд таблиць
Щойно ви створили SparkSession, можна почати досліджувати, які дані є у вашому кластері!
У вашого SparkSession є атрибут catalog, який перелічує всі дані в кластері. Цей атрибут має кілька методів для отримання різних фрагментів інформації.
Один із найкорисніших — метод .listTables(), який повертає назви всіх таблиць у вашому кластері як список.
Ця вправа є частиною курсу
Основи PySpark
Інструкції до вправи
- Перегляньте, які таблиці є у вашому кластері: викличте
spark.catalog.listTables()та виведіть результат на екран!
Інтерактивна практична вправа
Спробуйте виконати цю вправу, доповнивши цей зразок коду.
# Print the tables in the catalog
print(spark.____.____())