Airflow सेटअप करना
इस अभ्यास में, आप सीखेंगे कि Airflow में एक DAG कैसे जोड़ा जाता है. दाईं ओर आपके पास एक टर्मिनल उपलब्ध है. वर्कस्पेस में Airflow पहले से कॉन्फ़िगर है, लेकिन इसे अपने सिस्टम पर इंस्टॉल करना आसान है.
आपको dag.py फ़ाइल, जिसमें पिछले अभ्यास में परिभाषित आपका DAG है, DAGs फ़ोल्डर में ले जानी होगी. इसे ढूँढने के लिए ये कदम अपनाइए:
- Airflow होम डायरेक्टरी
AIRFLOW_HOMEएन्वायरनमेंट वैरिएबल में परिभाषित होती है. पता करने के लिएecho $AIRFLOW_HOMEटाइप करें. - इस डायरेक्टरी में
airflow.cfgफ़ाइल ढूँढें. फ़ाइल पढ़ने के लिएheadका उपयोग करें, औरdags_folderका मान खोजें.
अब आप फ़ोल्डर ढूँढ सकते हैं और dag.py फ़ाइल वहाँ ले जा सकते हैं: mv ./dag.py <dags_folder>.
फ़ाइल को स्थानांतरित करने के बाद DAGs फ़ोल्डर में कौन-कौन सी फ़ाइलें हैं?
यह अभ्यास पाठ्यक्रम का हिस्सा है
Introduction to Data Engineering
इंटरैक्टिव व्यावहारिक अभ्यास
हमारे इंटरैक्टिव अभ्यासों में से किसी एक के साथ सिद्धांत को व्यवहार में बदलें
अभ्यास शुरू करें