Przeglądanie tabel
Po utworzeniu SparkSession możesz zacząć przeglądać dane dostępne w klastrze!
Twoja SparkSession ma atrybut o nazwie catalog, który przechowuje informacje o wszystkich danych w klastrze. Ten atrybut udostępnia kilka metod do pobierania różnych informacji.
Jedną z najbardziej przydatnych jest metoda .listTables(), która zwraca listę nazw wszystkich tabel w klastrze.
To ćwiczenie jest częścią kursu
Podstawy PySpark
Instrukcje do ćwiczenia
- Sprawdź, jakie tabele są dostępne w klastrze – wywołaj
spark.catalog.listTables()i wyświetl wynik!
Interaktywne ćwiczenie praktyczne
Spróbuj tego ćwiczenia, uzupełniając ten przykładowy kod.
# Print the tables in the catalog
print(spark.____.____())