Tworzenie ewaluatora

Pierwszą rzeczą potrzebną przy krosswalidacji do wyboru modelu jest sposób porównywania różnych modeli. Na szczęście submoduł pyspark.ml.evaluation zawiera klasy do oceny różnych rodzajów modeli. Twój model to model klasyfikacji binarnej, dlatego skorzystasz z klasy BinaryClassificationEvaluator z modułu pyspark.ml.evaluation.

Ten ewaluator oblicza pole pod krzywą ROC. Jest to metryka łącząca dwa rodzaje błędów, jakie może popełnić klasyfikator binarny (fałszywe pozytywne i fałszywe negatywne), w jedną prostą liczbę. Więcej na ten temat dowiesz się pod koniec rozdziału!

Zaimportuj submoduł pyspark.ml.evaluation jako evals.
Utwórz zmienną evaluator, wywołując evals.BinaryClassificationEvaluator() z argumentem metricName="areaUnderROC".

ćwiczenie

Tworzenie ewaluatora

Instrukcje

.css-6su6fj{-webkit-flex-shrink:0;-ms-flex-negative:0;flex-shrink:0;}ćwiczenie

Instrukcje

ćwiczenie