オープンソース。新しい可能性。

Apache SeaTunnelは、160以上のコネクタをサポートし、バッチとストリームを統合し、複数エンジンで実行できる高性能な分散データ統合ツールです。

Apache Beamは、バッチ処理とストリーミング処理の両方を定義するための統一されたプログラミングモデルです。

RustyCSVは、SIMD加速、並列解析、バウンドメモリストリーミングを備えたRust NIFとして構築された、Elixir用の高性能CSVパーサーです。NimbleCSVのドロップイン交換として機能します。

Apache Kafkaは、高性能なデータパイプライン、ストリーミング分析、およびデータ統合向けに設計されたオープンソースの分散イベントストリーミングプラットフォームです。

Pathwayは、ストリーム処理・リアルタイム分析、LLMやRAGアプリケーションを含むAIパイプライン向けのPython ETLフレームワークです。PythonコードをRustエンジン上で実行して差分データフローによる増分計算を実現し、バッチ・ストリームデータを同じコードで処理可能で、DockerやKubernetesでのデプロイに対応しています。