オープンソース。新しい可能性。

Dotflowは@actionデコレータでタスクを定義し、リトライ・並列実行・観測性・34以上のクラウドプラットフォームへのワンクリックデプロイをサポートする軽量なPython実行パイプラインライブラリ。

Pathwayは、ストリーム処理・リアルタイム分析、LLMやRAGアプリケーションを含むAIパイプライン向けのPython ETLフレームワークです。PythonコードをRustエンジン上で実行して差分データフローによる増分計算を実現し、バッチ・ストリームデータを同じコードで処理可能で、DockerやKubernetesでのデプロイに対応しています。

Flowは、単一のバイナリで動作する高性能なETLエンジンおよびワークフローオーケストレーターで、Go言語で記述されています。組み込みのビジュアルWebビルダー、宣言的なXMLパイプライン、クロスデータベースサポート、および内蔵の監査テレメトリを備えています。