streampark

Apache StreamPark 是一个用于构建和管理实时流式应用的开源框架，旨在简化流处理的端到端生命周期。它为 Apache Flink 和 Apache Spark 提供了统一的开发框架，以及一个强大的云原生应用管理平台。StreamPark 使用户能够高效且一致地开发、调试、部署和操作大规模流式应用。该项目最初名为 StreamX，于 2022 年 8 月更名为 StreamPark，并于 2025 年 1 月成为 Apache 顶级项目（TLP）。 主要特性包括： - 流式应用开发框架：通过预置的 API、连接器和模板，简化 Flink 和 Spark 流式开发。 - 云原生实时计算平台：提供集开发、部署、监控和运维于一体的一站式实时计算平台。 - 统一批流处理：支持 Apache Flink 和 Apache Spark，实现流处理和批处理。 - 多引擎与多版本支持：运行和管理多版本的 Flink/Spark 应用。 - 多环境兼容：适用于 Standalone、YARN (Hadoop 2.x/3.x) 和 Kubernetes。 - 丰富的生态系统：兼容大数据生态工具（如 Apache Flink/Spark/Paimon/Doris）及机器学习/AI 生态系统。 - 易于使用：单服务部署；几分钟内即可从零开始运行作业。