Použití UDF na vektorová data
K dispozici máš dataframe df se sloupcem output typu vector. Jeho prvních pět řádků vidíš v konzoli.
K dispozici je také UDF get_first_udf, která vybere první prvek vektorového sloupce.
Toto cvičení je součástí kurzu
Úvod do Spark SQL v Pythonu
Pokyny k cvičení
- Vytvoř nový dataframe
df_newtak, že dodfpřidáš nový sloupec. Nový sloupec pojmenujlabel. - Zobraz prvních pět řádků dataframu
df_new.
Interaktivní cvičení na vyzkoušení si v praxi
Vyzkoušejte si toto cvičení dokončením tohoto ukázkového kódu.
# Add label by applying the get_first_udf to output column
df_new = df.____('____', ____('____'))
# Show the first five rows
df_new.____