OPEN SOURCE, OPEN TO EVERYONE

好开源,值得被发现。

发现优质开源项目,匿名提交开源项目,认领编辑你的开源项目。

人工精选 · 发现好开源4109已发现

带着好奇心,发现开源世界。

THE FIRST COLLECTION
Topic: spark清除
deeplearning4jdeeplearning4j
新收录

Eclipse Deeplearning4J(DL4J)是一个基于JVM的开源深度学习生态系统,支持Java、Scala、Kotlin等语言。它包含从Keras和TensorFlow导入模型、ND4J线性代数库、SameDiff自动微分框架、DataVec数据预处理等功能,可在CPU/GPU上跨Windows、Linux、macOS运行。

人工智能开发工具训练 / 微调 / 评测
新收录

本项目是一套基于 Docker 的本地实时分析管道,采用与 Kafka 兼容的 Redpanda 作为消息代理,并结合 PySpark Structured Streaming 处理数据。通过 docker-compose 一键启动,可模拟点击流事件,并实现带时间水印的窗口聚合与结果持久化。

开发工具自动化后端与 API
sparkapache
新收录

Apache Spark 是一个专为大规模数据处理设计的统一分析引擎,提供高级 API 和针对通用计算图的优化引擎。

数据与数据库ETL / 数据集成
deltadelta-io
新收录

Delta Lake 是一个开源存储框架,支持 Lakehouse 架构。它与 Spark、PrestoDB、Flink、Trino 和 Hive 等计算引擎集成,提供 ACID 事务、时间旅行和模式演进,实现可靠的数据管理。

数据与数据库流式处理与数仓
redashgetredash
新收录

Redash 是一款基于浏览器的数据探索和可视化工具,允许用户从各种 SQL 和 NoSQL 数据源中查询、可视化并共享数据。

数据与数据库效率办公数据分析与 BI
sqlglottobymao
新收录

SQLGlot 是一个纯 Python 的 SQL 解析器、转译器、优化器和引擎,支持超过 30 种方言,可实现格式化、跨方言转换、AST 操作,并可选 C 扩展加速以快速处理 SQL。

开发工具数据与数据库组件库