Pipeline बनाएँ
अब आप Pipeline बनाने के लिए पूरी तरह तैयार हैं!
Pipeline pyspark.ml मॉड्यूल में एक क्लास है जो आपके बनाए हुए सभी Estimators और Transformers को एक साथ जोड़ता है। इससे आप पूरे मॉडलिंग प्रोसेस को एक साधारण ऑब्जेक्ट में समेटकर बार‑बार दोहरा सकते हैं। बढ़िया, है ना?
यह अभ्यास पाठ्यक्रम का हिस्सा है
PySpark की नींव
अभ्यास निर्देश
pyspark.mlसेPipelineइम्पोर्ट करें.- कीवर्ड आर्ग्युमेंट
stagesके साथPipeline()कंस्ट्रक्टर को कॉल करकेflights_pipeनाम काPipelineबनाइए.stagesएक लिस्ट होनी चाहिए जिसमें वे सभी स्टेज हों जिनसे आप चाहते हैं कि आपका डेटा पाइपलाइन में गुजरे। यहाँ यह है:[dest_indexer, dest_encoder, carr_indexer, carr_encoder, vec_assembler]
इंटरैक्टिव व्यावहारिक अभ्यास
इस अभ्यास को इस नमूना कोड को पूरा करके आज़माएँ।
# Import Pipeline
from ____ import ____
# Make the pipeline
flights_pipe = Pipeline(stages=____)