عن المشروع
Dagster هي منصة تنسيق تركز على تطوير وصيانة أصول البيانات مثل الجداول ومجموعات البيانات ونماذج تعلم الآلة والتقارير. وهي تستخدم نموذج برمجة تصريحي حيث يحدد المستخدمون أصول البيانات كدوال Python، مما يسمح للنظام بإدارة توقيت التنفيذ وتحديثات الأصول.
تشمل القدرات الرئيسية ما يلي:
- تتبع السلالة والمراقبة المتكاملة لتتبع تدفق البيانات وتشخيص مشكلات الأداء.
- نهج تصريحي لإنشاء الأصول وإدارة المهام.
- دعم دورة التطوير الكاملة، بما في ذلك التطوير المحلي، واختبارات الوحدة، واختبارات التكامل، والنشر في بيئة الإنتاج.
- مستوى تحكم موحد للبيانات الوصفية المركزية والفهرسة والتشخيص.
- مكتبة من التكاملات لمختلف أدوات البيانات والبنية التحتية الشائعة.
Dagster متاح على PyPI ويدعم إصدارات Python من 3.9 إلى 3.14.