1. Learn
  2. /
  3. Курси
  4. /
  5. Introduction to PySpark

Connected

вправа

Dotazování nad dočasným pohledem

V tomto cvičení si procvičíš registraci DataFrame jako dočasného SQL pohledu v PySparku. Dočasné pohledy jsou užitečný nástroj, který ti umožňuje dotazovat se na data pomocí SQL syntaxe a dělá složité datové operace přehlednějšími a intuitivnějšími. Tvým úkolem je vytvořit pohled z připraveného DataFrame a spustit nad ním SQL dotazy – což je běžná práce při ETL a ELT procesech.

V pracovním prostoru máš k dispozici SparkContext spark a PySpark DataFrame df.

Інструкції

100 XP
  • Zaregistruj nový pohled s názvem "data_view" z DataFrame df.
  • Spusť připravený SQL dotaz pro výpočet celkové mzdy podle pozice.