Asset-आधारित scheduling को क्रिया में देखें
पिछले अभ्यासों के sales_producer और sales_consumer दोनों Dags Airflow UI में लोड कर दिए गए हैं. Producer सेल्स डेटा लिखता है और s3://data-lake/sales/daily.csv asset को अपडेट करता है. Consumer उसी asset पर scheduled है.
इन चरणों का पालन करें:
- Dags view में
sales_producerऔरsales_consumerदोनों को ढूँढें और toggle switch का उपयोग करके सक्रिय करें. - play आइकन पर क्लिक करके
sales_producerको ट्रिगर करें, Single Run चुनें, फिर Trigger. - Producer run पूरा होने की प्रतीक्षा करें (सभी tasks हरे).
- जाँचें कि क्या
sales_consumerअपने आप ट्रिगर हुआ, बिना आपके कुछ क्लिक किए.
sales_producer का run पूरा होने के बाद, sales_consumer के साथ क्या होता है?
यह अभ्यास पाठ्यक्रम का हिस्सा है
Airflow के साथ Data Pipelines बनाना
इंटरैक्टिव व्यावहारिक अभ्यास
हमारे इंटरैक्टिव अभ्यासों में से किसी एक के साथ सिद्धांत को व्यवहार में बदलें
अभ्यास शुरू करें