or
Ця вправа є частиною курсу
Spark — це фреймворк для роботи з Big Data. У цьому розділі ви ознайомитеся з основами Spark і машинного навчання. Далі ви дізнаєтеся, як під'єднатися до Spark за допомогою Python і завантажити дані з CSV.
Тепер, коли ви вмієте завантажувати дані в Spark, переходьте до побудови двох типів моделей класифікації: дерева рішень і логістичної регресії. Ви також дізнаєтеся кілька підходів до підготовки даних.
Далі ви навчитеся створювати моделі лінійної регресії. Крім того, ви з'ясуєте, як збагачувати дані інженерією нових предикторів і як надійно обирати лише найрелевантніші з них.
Поточна вправа
Насамкінець ви навчитеся робити свої моделі ефективнішими. Ви дізнаєтеся, як використовувати конвеєри, щоб зробити код зрозумілішим і зручнішим у підтримці. Потім застосуєте крос-валідацію для кращого тестування моделей і підбору вдалих гіперпараметрів. І наостанок спробуєте два типи ансамблевих моделей.