اوپن سورس۔ نئے امکانات۔

RisingWave ایک ایونٹ اسٹریمنگ پلیٹ فارم ہے جو ایجنٹک AI کے لیے ڈیزائن کیا گیا ہے، جو ڈیٹا کی وصولی، پروسیسنگ اور سرونگ کو ایک ہی سسٹم میں یکجا کرتا ہے۔

ویکٹر ایک اوپن سورس مشاہداتی ڈیٹا پائپ لائن ہے جو Rust میں لکھی گئی ہے۔ یہ لاگز اور میٹرکس کو جمع، تبدیل اور راؤٹ کرتی ہے، ٹیموں کو کنٹرول دیتی ہے کہ ٹیلی میٹری کہاں جائے اور ویانڈر لاگت کم ہو۔

Pathway Python کا ایک لائیو ڈیٹا فریم ورک ہے جو اسٹریمنگ اور بیچ ڈیٹا پروسیسنگ کو یکساں API کے ذریعے سنبھالتا ہے۔ یہ Rust انجن پر بنایا گیا ہے جو مختلف AI پائپ لائنز سمیت حقیقی وقت کے تجزیات کی سہولت دیتا ہے۔

AWS پر مکمل طور پر سرورلیس کلک سٹریم ڈیٹا پیپ لائن جو API Gateway، Kinesis، Firehose، Lambda اور Athena کا استعمال کرتے ہوئے کلک ایونٹس کو پروسیس کر کے Parquet فارمیٹ میں ذخیرہ کرتی ہے۔