एंड-टू-एंड पाइपलाइन डिज़ाइन करना

Harbr की लॉजिस्टिक्स टीम अपना इनबाउंड पाइपलाइन ऑटोमेट कर रही है। हर 15 मिनट में, शिपमेंट रिकॉर्ड्स का नया बैच S3 external stage में आता है। टीम चाहती है कि वे रिकॉर्ड्स स्टेजिंग टेबल में लोड हों, नई एंट्री के रूप में ट्रैक हों, और reporting टेबल को रिफ्रेश करने में इस्तेमाल हों — यह सब अपने-आप, फ़ाइल के लैंड होने के 10 मिनट के भीतर हो जाए.

इस पाइपलाइन के लिए Snowflake के कौन-से कॉम्पोनेंट्स का सही संयोजन है?