2026 年 11 月 21 日——FastVideo 团队于 11 月 19 日发布博客宣布开源 Dreamverse Harness,11 月 20 日更新 FastVideo 仓库发布说明。这套构建在 FastVideo 之上的 Agent 工作流把本地视频生成从单条片段扩展到完整影片:单台 NVIDIA DGX Spark(GB10 Grace Blackwell,128GB 统一内存)即可同时运行导演 Agent 的 LLM(Qwen3.8-27B,NVFP4 量化)与 FastH3 视频模型,剧本、角色参考与成片素材不出本机;最多四台 DGX Spark 通过 QSFP 直连并联,两台机器完成 2K 重渲染的耗时从 454 秒降至 158 秒。

项目以 TypeScript 实现,采用 MIT 许可证,仓库为 github.com/fastvideo-project/dreamverse-harness,构建在 DeepSeek Harness 的插件系统之上。官方表示,Dreamverse Harness 瞄准的是现有方案的空档:云端 AI 制片工作室托管整个技术栈,按次收取积分溢价且无法修改 Agent 逻辑;开源项目则往往只覆盖"本地模型"或"云端 API 导演"其中一半。

本地拍片工作流

Dreamverse Harness 以对话为入口,Agent 依据内置的导演技能与各模型的提示词技能拆解剧本、锁定角色与场景参考、调度镜头,并在时间线上完成剪辑。画布承载角色、场景、分镜与渲染素材,对话与画布上的每一次改动都写入项目追加日志 records.jsonl,撤销与重做只移动项目在历史中的位置、不删除记录;参考素材按版本号追踪(如角色 c1@1 换图后变为 c1@2),每次渲染记录其读取的素材版本,上游素材更新后旧镜头会被标记,供用户或 Agent 决定是否重渲。

所有部件均为插件:FastVideo server 是原生视频后端,新增模型或 API 只需编写一个 provider 插件,仓库自带 dv-add-model-provider 技能,可由编程 Agent 代写。本地是默认选项而非硬性限制,云 LLM 或远程 FastVideo server 只是模型目录中的另一个条目。

多机调度与 2K 重制

Agent 通过 Hardware 设置页识别每台 Spark 的在线状态、忙碌状态与已装载模型,把镜头派到装了对应模型的空闲机器上并行渲染,并自行加载、卸载模型。单台 Spark 可放置两个 FastH3 NVFP4 模型(单个占 40–55GB),或一个 FastH3 加 Agent 的 Qwen3.8-27B(vLLM 下约 39GB,FastH3 Trim 渲染时约 45GB)。官方在 200G 网络下用 4 台 Spark 组网演示:Agent 并行渲染 4 个镜头,随后按两台一组分担 2K 重制,每段视频拆分到两台机器上做序列并行(sp_size=2)。

2K 能力改编自 NVlabs 的 Open-H3-Regenerate-2K,按 2560×1440 重制草稿,在 GB10 上使用稀疏注意力、MXFP8 矩阵乘与更轻的 24 层解码器。

项目 数据
单机硬件 DGX Spark(GB10 Grace Blackwell),128GB 统一内存
本地全栈 Qwen3.8-27B NVFP4 担任 Agent LLM,FastH3 渲染视频与音频
5 秒 480p 带音频渲染 单台约 33 秒,两台约 19 秒;FastH3 首次在 Spark 上运行为 243 秒
2K(2560×1440)重制 两台 Spark 分担,由 454 秒降至 158 秒
并联规模 最多 4 台 QSFP 直连、无需交换机;200G 交换机组网可并行渲染 4 个镜头
模型占用 单个 FastH3 NVFP4 模型 40–55GB,单台可放两个或一个加 Qwen
开源许可 MIT,TypeScript 实现

安装与获取

使用 Dreamverse Harness 需要两个服务端:渲染视频的 FastVideo server 与运行 Agent 的 LLM 端点。官方列出的依赖为 Node.js ^22.19.0 或 >=24.0.0、pnpm 11.7.0、ffmpeg 与 ffprobe;FastVideo 服务端需要一块或多块 NVIDIA GPU(标准 FastH3 8 步配置默认使用 4 块),Agent 侧需要一个 OpenAI 兼容的 LLM 端点,默认模型 id 为 deepseek-v4.1。DGX Spark 单机路径的步骤为:用 vLLM 以 --gpu-memory-utilization 0.32 启动 Qwen3.8-27B,为 FastH3 留出显存,再构建 Dreamverse Harness 并通过 scripts/video-harness/launch.sh web 打开网页界面。FastH3 系列(V1、V2、Trim、Omni)与 Pika H3 Flex 均提供面向 Blackwell 的 NVFP4 构建。