Застосування UDF до векторних даних
Доступний датафрейм df з колонкою output типу vector. Перші п'ять рядків показано в консолі.
Доступна UDF get_first_udf, яка вибирає перший елемент колонky-вектора.
Ця вправа є частиною курсу
Вступ до Spark SQL у Python
Інструкції до вправи
- Створіть новий датафрейм
df_new, додавши доdfнову колонку. Назвіть нову колонкуlabel. - Виведіть перші п'ять рядків
df_new.
Інтерактивна практична вправа
Спробуйте виконати цю вправу, доповнивши цей зразок коду.
# Add label by applying the get_first_udf to output column
df_new = df.____('____', ____('____'))
# Show the first five rows
df_new.____