オープンソース。新しい可能性。

Apache Arrowは、効率的なデータ交換とインメモリ分析のために設計された、汎用的な列指向メモリフォーマットおよび多言語ツールボックスです。

QuestDBは、Apache-2.0ライセンスの時系列SQLデータベースで、カラム型・時間パーティション型ストレージを使用し、取り込み、ストリーム処理、クエリ、階層型保持を実現します。順序付きおよび順序外れのイベント、マテリアライズドビューとライブビュー、Parquet、QWPプロトコル、PostgreSQL/ILP/RESTインターフェース、公式クライアント、Webコンソールをサポートします。

rudbはRust製の初期段階の組み込み分析データベースで、DuckDB互換を目指し、ClickBenchで10倍の性能と10分の1のディスク使用量を目標とする。現在はインメモリエンジンとDuckDB風シェルを提供。

AWS上のサーバーレスクリックストリームデータパイプライン。API Gateway、Kinesis、Firehose、Lambda、Athenaを活用し、Parquet形式でイベントを ingestion・変換・保存する。SAMによるIaC対応。

Sailは、RustネイティブのApache Spark代替エンジンで、Spark Connect経由でバッチ処理、ストリーミング処理、AIワークロードをサポートします。高性能、低コスト、既存のPySparkコードとの互換性を実現します。

DaftはAIおよびマルチモーダルワークロード向けの高性能データエンジンで、画像、音声、動画、構造化データをあらゆる規模で処理します。PythonネイティブでRustコアを採用し、組み込みAI操作、RayやKubernetesによる分散スケーリング、S3、GCS、Iceberg、Delta Lakeなどへの接続を提供します。

Hueyは、DuckDB-WASMを使用した静的なブラウザベースのデータ探索・分析ツールです。CSV、Parquet、JSON、XLSX、DuckDBファイルをサポートし、ピボットテーブル、クエリビルダー、派生属性を提供します。データはプライバシーのためローカルに保持されます。

Lonboardは、GeoArrowやGeoParquet、GPUベースのdeck.glレンダリングを基盤とし、大規模データセットを扱うJupyter向けの高速でインタラクティブな地理空間データ可視化Pythonライブラリです。