オープンソース。新しい可能性。

Pathwayは、ストリーム処理・リアルタイム分析、LLMやRAGアプリケーションを含むAIパイプライン向けのPython ETLフレームワークです。PythonコードをRustエンジン上で実行して差分データフローによる増分計算を実現し、バッチ・ストリームデータを同じコードで処理可能で、DockerやKubernetesでのデプロイに対応しています。

CocoIndexは、変更データのみを再処理することでAIエージェントとLLMアプリケーションに継続的に新鮮なコンテキストを提供するオープンソースの増分インデキシングフレームワークです。