ओपन सोर्स। नई संभावनाएँ।

AWS पर एक पूर्णतः सर्वरलेस, इवेंट-ड्राइव्न क्लिकस्ट्रीम डेटा पाइपलाइन जो API Gateway, Kinesis, Firehose, Lambda और Athena का उपयोग करके क्लिकस्ट्रीम इवेंट्स को इनगेस्ट, ट्रान्सफॉर्म और Parquet फ़ॉर्मेट में S3 में स्टोर करती है। AWS SAM के साथ प्रोडक्शन-रेडी Infrastructure as Code प्रदान करती है।

Kestra एक ओपन-सोर्स, इवेंट-ड्रिवन ऑर्केस्ट्रेशन प्लेटफॉर्म है जिसे डेटा, AI और इंफ्रास्ट्रक्चर वर्कफ़्लो के लिए डिज़ाइन किया गया है, जो एक डिक्लेरेटिव YAML इंटरफ़ेस का उपयोग करता है।

हल्का पायथन निष्पादन पाइपलाइन लाब्रेरी जो कार्यों को परिभाषित करने के लिए @action डेकोरेटर का उपयोग करती है, रिट्राई, समानांतर निष्पादन, ब्ज़र्वेबिलिटी और AWS Lambda, GCP Cloud Run और Kubernetes सहित 34+ क्लाउड प्लेटफ़ॉर्म पर एक-क्लिक तैनाती का समर्थन करती है।