НачатьНачать бесплатно

Практика с планами запросов

Доступен датафрейм text_df. Этот датафрейм зарегистрирован как таблица table1.

Это упражнение является частью курса

Введение в Spark SQL на Python

Посмотреть курс

Инструкции к упражнению

  • Вызовите explain для text_df.
  • Вызовите explain для SQL-запроса, который выполняет "SELECT COUNT(\*) as count" по таблице table1.
  • Вызовите explain для SQL-запроса, который подсчитывает количество уникальных слов в таблице table1.

Интерактивное практическое упражнение

Попробуйте выполнить это упражнение, дополнив этот пример кода.

# Run explain on text_df
text_df.____()

# Run explain on "SELECT COUNT(*) AS count FROM table1" 
spark.sql("SELECT COUNT(*) AS count FROM table1").____()

# Run explain on "SELECT COUNT(DISTINCT word) AS words FROM table1"
spark.sql("____").____()
Редактировать и запускать код