Sobre o projeto
FireRed-OpenStoryline transforma a criação complexa de vídeos em conversas naturais e intuitivas. O sistema combina busca e organização inteligente de mídia (encontrando e baixando automaticamente imagens/clipes correspondentes), geração inteligente de roteiro com transferência de estilo few-shot para tons específicos (avaliações de produtos, vlogs, etc.), recomendação inteligente de música/voz/fonte com sincronização de batidas, refinamento conversacional para edições rápidas via linguagem natural e arquivamento de habilidades de edição para salvar e reproduzir fluxos de trabalho completos como Skills reutilizáveis.
Adições recentes incluem geração de transições por IA (criando cenas de transição a partir de descrições de quadros), habilidade de corte bruto baseada em ASR para vídeos de fala (removendo palavras de preenchimento e disfluências) e integração com OpenClaw e Claude Code via Agent Skills para automação de instalação e uso.
A arquitetura usa um servidor Model Context Protocol (MCP), nós de processamento de vídeo, uma biblioteca de habilidades do agente e armazenamento de memória do agente. Baseia-se em MoviePy, FFmpeg e LangChain. A instalação suporta Linux/macOS (automatizada via build_env.sh), Windows (download manual de recursos) e Docker. A interface web roda em FastAPI, com alternativa CLI. A configuração requer chaves de API em config.toml.
Demos mostram vários estilos: Zhongcao, Humorístico, Seleções de Produtos, Artístico, Unboxing, Pet Falante, Vlog de Viagem e Retrospectiva Anual. O projeto é licenciado sob Apache 2.0 e desenvolvido ativamente com um roadmap incluindo edição de narração, clonagem de voz, mais efeitos, capacidades generativas e aceleração por GPU.
Comments
0 Rating appears after 10 ratings
Sign in to join the discussion.