
从一句话到成片ViMax 多智能体 AI 视频生成实操指南【免费下载链接】ViMaxViMax: Agentic Video Generation (Director, Screenwriter, Producer, and Video Generator All-in-One)项目地址: https://gitcode.com/GitHub_Trending/ai/ViMaxViMax 是一个多智能体协作的 AI 视频生成框架它把剧本写作、分镜设计、镜头规划、图像与视频生成、成片拼接整个流程自动化。它针对的是普通创作者常见的两个卡点不会写剧本、不会做分镜以及无法在几十上百个镜头中保持角色与场景一致。两个主入口分别是一句话创意出片的 main_idea2video.py 和完整剧本出片的main_script2video.py。你只需要准备创作内容和对应的 API 密钥。 多智能体如何分工生成视频ViMax 内部把视频生产线拆给多个智能体screenwriter 把创意扩展成故事并写出剧本角色智能体为每个角色生成正、侧、背三视图分镜师把剧本拆成镜头简报机位智能体再生成每个镜头的首帧图并规划机位。上一阶段的产物是下一阶段的输入某个环节跑偏时可以定位中间文件单独重跑该阶段。 三条创作链路对比输入形式入口脚本适合人群最终产出一句话创意 创作要求main_idea2video.py不会写剧本的创作者多场景多镜头短片标准剧本场景 对白main_script2video.py已有剧本、追求可控性多镜头视频风格与节奏可控长篇小说文本pipelines/novel2movie_pipeline.py开发中长篇文学改编需求分集视觉内容当前尚未完整三条链路共用同一套渲染后端熟悉一份配置后可以直接切换。 场景实战一句话创意出三分钟短片需求做一段儿童睡前故事但完全不想自己写剧本。输入修改main_idea2video.py里的三个变量——idea、user_requirement、style。例如 idea 写如果猫和狗是好朋友当它们遇到一只新猫会发生什么要求里注明不超过 3 个场景。系统做了什么agents/screenwriter.py 的编剧智能体先把 idea 扩写成故事并落成语本角色抽取智能体提取人物设定并生成三视图分镜师把剧本拆成镜头简报图像与视频生成器逐镜头产出画面。拿到什么结果各镜头的首帧图、参考图和镜头片段按阶段存放在working_dir最后自动拼接为完整短片。已有剧本精确控制镜头需求手里已有一段标准剧本希望原样转成视频不额外发挥。输入把场景剧本粘贴进main_script2video.py在 user_requirement 里限定镜头数和节奏例如不超过 15 个镜头节奏快。系统做了什么agents/storyboard_artist.py 把剧本拆成逐镜头描述机位智能体依据角色三视图挑选参考图生成每个镜头的首帧图并规划机位树保证相邻镜头衔接。拿到什么结果角色外观一致、机位连续的镜头视频按剧本顺序组装成片。长篇小说做剧集改编需求把一部十万字以上的小说转成系列视频。输入将小说全文传给Novel2MoviePipeline。系统做了什么pipelines/novel2movie_pipeline.py 先压缩长文再按顺序提取事件与场景把跨场景出现的同一角色合并身份保证前后集人物长相一致最后交给 script2video 管线渲染。拿到什么结果分集视觉内容。注意该链路源码头部仍标记 TODO功能尚未完整建议先跑通前两条链路。 从零跑通第一个视频三步完成git clone https://gitcode.com/GitHub_Trending/ai/ViMax cd ViMax uv sync # 在 configs/idea2video.yaml 填入 chat_model、image_generator、video_generator 三处 api_key python main_idea2video.py运行前把configs/idea2video.yaml的三个 API 密钥填好配置里有限流字段不要设得高于服务商配额。在main_idea2video.py中写好创意与要求即可所有中间产物和成片都落在working_dir。想换图像或视频后端改同一配置文件的class_path仓库tools目录已内置多套后端可直接选用。⚠️ 边界与成本耗时一次出片要经历数十次大模型与媒体生成调用配置中视频生成默认限频 2 次/分钟3 个场景的短片通常要几十分钟到数小时。费用聊天模型、图像生成、视频生成均为付费 API镜头数与账单基本成正比。第一次试跑把场景数和镜头数压到最低。效果生成仍是概率性输出框架对不可用画面有重选与重试机制但复杂动作、物理效果和长文本渲染仍可能出错别期待一次成片。如果你接受等待和 API 账单今晚就可以跑通第一个 idea 视频完整安装与使用说明见 README_ZH.md。【免费下载链接】ViMaxViMax: Agentic Video Generation (Director, Screenwriter, Producer, and Video Generator All-in-One)项目地址: https://gitcode.com/GitHub_Trending/ai/ViMax创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考