مصدر مفتوح. آفاق جديدة.

Great Expectations (GX Core) هي مكتبة Python مفتوحة المصدر لجودة البيانات، توفر إطار عمل لإنشاء اختبارات وحدة للبيانات لضمان الاتساق والموثوقية.

مكتبة Python خفيفة الوزن لتنفيذ خطوط الأنابيب تستخدم مزخرفات @action لتحديد المهام، وتدعم إعادة المحاولة، والتنفيذ المتوازي، والمراقبة، والنشر بنقرة واحدة إلى أكثر من 34 منصة سحابية بما في ذلك AWS Lambda وGCP Cloud Run وKubernetes.

StormByte-Buffer هي مكتبة C++26 توفر FIFO وSharedFIFO وRing buffers وأدوات pipeline لمجموعة StormByte. تتضمن مخازن مؤقتة آمنة وغير آمنة للخيوط، وأنماط المنتج/المستهلك، ومراحل pipeline قابلة للتكوين. تتطلب StormByte Base.

marimo هو دفتر ملاحظات Python تفاعلي يضمن الاتساق بين الكود والمخرجات، ويتم تخزينه كملفات Python نقية لسهولة التعامل مع git وإمكانية النشر.

توفر Tekton Pipelines موارد أصلية لـ Kubernetes لتعريف خطوط أنابيب CI/CD. خطوط الأنابيب سحابية أصلية، مفصولة ومنمّطة، تستخدم الحاويات كوحدات بناء، مع مهام قابلة للتشغيل بشكل منعزل وموارد قابلة للتبديل.

nf-core/fastqrepair is a bioinformatics pipeline for recovering corrupted FASTQ.gz files, fixing uncompliant reads, removing unpaired reads, and re-pairing disordered reads. It outputs clean FASTQ files and QC reports.

Prefect هو إطار عمل لتنسيق سير العمل يعتمد على لغة Python، مصمم لبناء وأتمتة ومراقبة خطوط بيانات مرنة مع ميزات مثل الجدولة وإعادة المحاولة.

Kestra هي منصة أوركسترا مفتوحة المصدر ومدفوعة بالأحداث، مصممة لسير عمل البيانات والذكاء الاصطناعي والبنية التحتية، وتعتمد على واجهة YAML التصريحية.

Taipy هو إطار عمل بلغة Python مصمم لعلماء البيانات ومهندسي تعلم الآلة لبناء ونشر تطبيقات ويب جاهزة للإنتاج تعتمد على البيانات والذكاء الاصطناعي دون الحاجة لتعلم لغات الواجهة الأمامية.