把白模喂给大模型
白模不是给别人看的草图 —— 它是模型能读的一种参考。这篇讲清楚该怎么用。
先理解:白模在控制什么
文字提示词能描述「什么」,但描述不清「怎么拍」。 运镜、走位、节奏这类东西,用文字写十句也不如给模型看一遍。
白模承载的正是这部分:空间结构、主体姿态、运动轨迹、镜头机位。 把它作为参考送进去,模型就不用在「画面长什么样」上猜 —— 它只需要负责渲染。
模型还提升了白模参考、运动参考、创意参考等各类参考能力,让画面中的主体、动作、运镜更可控。比如,在白模参考中,用户可以用无纹理 3D 模型搭出画面的空间结构、主体姿态、运动轨迹和镜头机位,再让模型参考这套结构生成视频,使复杂镜头的构图和调度更接近预期。
官方公告里给了两条白模参考的示例 Prompt(一条动画短片、一条汽车装配工业仿真), 写法都是「参考 @白模 的运镜、镜头节奏、景别变化、主体轨迹和镜头调度」, 再另配一条「参考 @图片 的角色外形、场景、材质、光照、色彩」。
这个分工很关键:白模管调度,图片管外观。导演台导出的东西正好就是前半段。
导出什么,怎么喂
顶栏「导出视频 → 逐镜头 ZIP」会给你每个镜头一整套:
| 文件 | 喂给模型的什么位置 |
|---|---|
| 首帧 PNG | 首帧控制(图生视频的起点画面) |
| 尾帧 PNG | 尾帧控制(限定这一镜结束时的画面) |
| 白模 MP4 | 运镜与节奏参考(视频参考输入) |
| Prompt 卡 PNG | 人看的速查卡:首帧 + 景别 / 运镜 / prompt |
| 镜头清单.txt | 整批素材的对照表 |
推荐用法(按镜头逐条生成)
- 用首帧做图生视频的起点,必要时加尾帧限制落点。
- 需要精确运镜时,把白模 MP4 作为运动 / 运镜参考一起传。
- 提示词直接用 Prompt 卡上的景别 + 运镜 + 风格。 导演台的「风格 / 角色圣经」已经自动拼进每一镜,不用手动粘贴。
- 上一镜的尾帧可以当下一镜的参考,方便接戏。
为什么这样能少抽卡
反复生成的根因通常是「模型不知道你要怎么拍」,于是它每条都给你一个不同的答案。 你把机位、走位、节奏先定死之后,模型要决策的东西少了一大半 —— 剩下的主要是画质与外观,而外观可以用参考图进一步约束。
换句话说:不是让模型一次猜中,而是让它没有可猜的余地。
常见踩坑
1. 白模挺干净,成片穿模了
大概率是白模本身就有穿模,只是你没注意。导出前扫一眼 诊断面板 —— 白模里穿的东西,模型会忠实地渲染出来。
2. 运镜对不上
检查白模视频里的运镜是否够「明确」。镜头太短、或者一瞬间连做三个动作, 参考价值会下降。宁可把复杂调度拆成两个镜头。
3. 主体长得不像
白模本来就不负责外观。人物形象、服装、场景材质要靠参考图给, 或者用「风格 / 角色圣经」把描述写进每一镜的 Prompt。
4. 跳轴,观众看着别扭
正反打要保证同侧轴线。导演台的「台词 → 一键正反打」会自动处理; 手动摆机位时,诊断面板会报「疑似跳轴(180° 规则)」,按提示调整即可。
5. 镜头之间接不上
用上一镜的尾帧作为下一镜的起点参考。逐镜头素材包里已经带好了上一镜的尾帧。
下一步
各平台对参考素材的数量与格式限制不同(例如 Seedance 2.5 支持单次最多 30 张图片、 10 段视频、10 段音频作为参考),实际以你使用的平台文档为准。