Código aberto. Novas possibilidades.

Apache SeaTunnel é uma ferramenta distribuída de integração de dados de alto desempenho, com suporte a mais de 160 conectores, integração batch-stream e execução multi-motor.

O Apache Beam é um modelo de programação unificado para definir pipelines de processamento paralelo de dados, tanto em lote (batch) quanto em streaming.

RustyCSV é um analisador de CSV de alto desempenho para Elixir, construído como um NIF de Rust com aceleração SIMD, análise paralela e streaming de memória limitada. Ele serve como um substituto direto para NimbleCSV.

O Apache Kafka é uma plataforma de streaming de eventos distribuída de código aberto, projetada para pipelines de dados de alta performance, análise de streaming e integração de dados.

Pathway é um framework ETL em Python para processamento de streaming, análise em tempo real e pipelines de IA incluindo LLM e RAG. Ele executa código Python em um motor Rust para computação incremental, suporta dados em batch e streaming com o mesmo código, e faz deploy via Docker e Kubernetes.