这个项目能做什么

ViMax是由HKUDS开发的开源智能体视频生成框架。它将导演、编剧、制片人和视频生成器等角色整合至单一工作流,实现从叙事输入到最终视频输出的端到端自动化创作流水线。 核心功能包括: - Idea2Video:将简短概念转化为结构化故事、角色、剧本、分镜、镜头及成品视频。 - Script2Video:在保留创作意图的前提下,将明确剧本转化为可控制的多场景、多镜头视频。 - Novel2Video:通过叙事压缩、角色追踪和场景规划,将长篇小说改编为连载式视觉叙事。 - AutoCameo:将参考照片中的本人或宠物植入生成的故事中,并保持外观一致。 - Agent Loop与TUI:交互式工作台,支持讨论创意、修改方案、恢复会话、审查产物及控制渲染。 - Web UI:基于浏览器的界面,用于管理命名项目、Agent对话、文件上传、产物检查、分镜预览及提供商配置。 - Consistent production pipeline:端到端协调参考素材、首帧画面、摄像机连贯性与最终剪辑组装。 - Parallelized generation:并发生成兼容的镜头与媒体资产,加速多镜头视频制作。 该框架支持多种模型提供商,包括OpenRouter、Google Omni、MiniMax、Seedance 2.0 Fast和GPT Image 2。项目基于Python 3.12构建,使用uv进行环境管理,Web UI需Node.js 18及以上版本。采用MIT许可证,支持Linux与Windows系统。