Flow é um motor ETL de alto desempenho e orquestrador de fluxo de trabalho, escrito em Go, que se apresenta como um único binário. Ele inclui um construtor web visual embutido, pipelines declarativos em XML, suporte a vários bancos de dados e telemetria de auditoria integrada.
Código aberto. Novas possibilidades.
Descubra projetos open source de qualidade, envie projetos anonimamente e reivindique e edite seu próprio projeto.
Um pouco de curiosidade. Um mundo de código aberto.
THE FIRST COLLECTIONPipeline de análise em tempo real local com Redpanda (broker compatível com Kafka) e PySpark Structured Streaming. Simula eventos de clickstream, agrega em janelas com watermarking, tudo via docker-compose.
Kestra é uma plataforma de orquestração open-source e orientada a eventos, projetada para fluxos de trabalho de dados, IA e infraestrutura, utilizando uma interface declarativa em YAML.
SolarisPKN-Stats é um sistema automatizado para coletar, armazenar e atualizar estatísticas de projetos de múltiplas plataformas em arquivos JSON estruturados.
Apache Airflow é uma plataforma para criar, agendar e monitorar fluxos de trabalho programaticamente como código, comumente usada para pipelines de dados e orquestração de AI/ML.
delta-explain visualiza a poda de arquivos do Delta Lake. Ele lê os logs de transação para mostrar a poda por partição e a exclusão baseada em estatísticas para um determinado predicado, com CLI, API Python, gate de CI e relatórios JSON.