Алгоритмы PySpark MLlib
Прежде чем использовать алгоритмы машинного обучения в оболочке PySpark, необходимо импортировать подмодули библиотеки pyspark.mllib и выбрать подходящий класс для конкретной задачи.
В этом упражнении вы научитесь импортировать различные подмодули pyspark.mllib вместе с классами, которые нужны для коллаборативной фильтрации, классификации и кластеризации.
Это упражнение является частью курса
Основы Big Data с PySpark
Инструкции к упражнению
- Импортируйте подмодуль рекомендательных систем
pyspark.mllibи класс метода наименьших квадратов с переменными (ALS). - Импортируйте подмодуль классификации
pyspark.mllibи класс логистической регрессии с методом LBFGS. - Импортируйте подмодуль кластеризации
pyspark.mllibи класс метода k-средних (KMeans).
Интерактивное практическое упражнение
Попробуйте выполнить это упражнение, дополнив этот пример кода.
# Import the library for ALS
from pyspark.mllib.____ import ____
# Import the library for Logistic Regression
from ____.____.____ import ____
# Import the library for Kmeans
from ____.____.____ ____ ____