dagsterdagster-io
新收录Dagster 是一款云原生数据流水线编排工具,旨在支持数据资产在整个生命周期中的开发、生产和观测。
发现优质开源项目,匿名提交开源项目,认领编辑你的开源项目。
带着好奇心,发现开源世界。
THE FIRST COLLECTIONDagster 是一款云原生数据流水线编排工具,旨在支持数据资产在整个生命周期中的开发、生产和观测。
Apache Airflow 是一个用于以代码形式编程编写、调度和监控工作流的平台,常用于数据管道以及 AI/ML 编排。
Pathway 是一款支持流处理、实时分析与 AI 流水线(含 LLM 及 RAG 应用)的 Python ETL 框架。它基于 Rust 引擎运行 Python 代码实现增量计算,支持用同一套代码处理批流数据,可通过 Docker 与 Kubernetes 部署。