当输入图像已经包含你想要的构图、主体、光照和风格时,图生视频 AI 的效果最好。用提示词来指导运动、镜头行为、速度和顺序;生成一个短测试;检查结果;然后每次只改变一个变量。
推荐工作流: ElserStudio 通过将每张源图像或引导板关联到特定的 Shot、其 World 参考、运动方向、生成的 take 以及最终时间线位置,使电影规模的图生视频更易于管理。
下载 ElserStudio 以启动本地优先项目,或打开 ElserStudio 用户指南 在安装前查看当前工作流。
输入图像是第一个制作决策
选择一张干净、高质量、解剖结构正确、轮廓清晰、身份稳定、留白有用且没有意外文字或标志的帧。一旦开始运动,模型可能会放大模糊的手、不对称或奇怪的物体。
让帧与所请求的动作相匹配。一个定格在冲刺中途的主体带有强烈的前进运动线索;要求这个人完全静止不动会产生冲突。在添加更长的提示词之前先修复图像。
针对随时间变化的内容编写提示词
描述主体动作、环境运动、镜头运动、时序、方向和速度。一个有用的模式是:“The camera [movement] as the subject [action]. [environment or timing]。”它是一个起始结构,而非强制公式。
不要把大部分提示词花在重新描述帧中已有的外观上。只有在引入元素、变换场景或澄清交互时才添加视觉描述。
将请求的动作保持在时长范围内
一个短片段无法清晰地执行一长串事件。将复杂动作拆分为多个镜头,或指定一个简单的顺序:首先、然后、最后。粗略的时间戳可能有帮助,但它们不能保证逐帧精确控制。
设计一个有用的入点和出点。以混乱姿势开始或结束的镜头很难剪辑。如果精确的终点很重要,请使用支持结束帧的模型,或拆分动作。
通过 ElserStudio 运行一个图生视频 Shot
创建或选择 Shot,附加正确的角色和地点资产,并添加已批准的引导图像。编写提示词来描述主体动作、环境运动、镜头运动、时序和速度,而不是重述帧内容。
通过已配置的提供商提交任务,监控它,并在原始 Shot 上下文旁边审查结果。保持已接受和已拒绝的 take 可区分。如果运动失败,只修改相关的方向或引导帧。当一个 take 通过时,将其连接到 Composition,并对照相邻 Shot 检查过渡。
在 ElserStudio 中构建: 下载 ElserStudio 并遵循 官方用户指南 了解当前的安装和工作流。
使用受控的迭代日志
保存模型、版本、源帧、时长、宽高比、提示词、种子(如可用)、成本和审查结果。每次重试只改变一个变量。如果你同时更改提示词、时长、图像和模型,结果不会教给你任何东西。
审查运动意图、身份、解剖结构、背景稳定性、镜头、伪影和可编辑性。将 take 标记为已接受、可修复或已拒绝,而不是保留一个装满匿名输出的文件夹。
排查常见故障
动作微弱或错误:简化提示词,并移除与之矛盾的视觉线索。意外切换:要求一个连续镜头,移除暗示多个场景的表述,或增加时长。镜头运动过多:指定固定机位,并明确应保留的主体运动。身份漂移:强化首帧和角色参考。细节融化:缩短镜头或减少相互竞争的动作。
对于更长的序列,提取最后一帧并继续可能有所帮助,但错误也会传播。检查过渡,并在剪辑中修剪重复的共享帧。
在序列工作流中使用图生视频
一个成功的片段在与下一个镜头相邻时仍可能失败。检查屏幕方向、视线、场景布局、光线方向、角色和道具状态、运动连续性以及音频。将每个源帧和每条拍摄记录存储在镜头 ID 下。
在 ElserStudio 中,规范的世界资产可以为镜头参考提供输入,生成的拍摄结果可供审阅,选定的片段可以移至合成时间线。生成器仍然只是更大制作系统中的一个环节。
了解何时其他方法更合适
当你需要视觉探索且没有精确的首帧时,使用文生视频。当必须保留时序或人物表演时,使用视频生视频。当任务是确定性的平移、缩放、视差或过渡时,使用传统编辑器。生成式视频的价值在于不确定的视觉合成,而非每一种运动。
在 ElserStudio 中开始此工作流
在 ElserStudio 中尝试一个受控的图生视频镜头。保持引导帧固定,每次尝试只改变一个运动变量,并将通过的拍摄结果直接放入剪辑中。
下一步: 下载 ElserStudio并在扩大项目规模之前完成一个小型的端到端序列。ElserStudio 提供制作工作区;生成质量、成本和可用性仍取决于你选择的提供商和设置。
常见问题
图生视频提示词应包含什么?
重点关注主体动作、环境运动、镜头运动、时序、方向和速度。
为什么结果忽略了我的提示词?
源图像可能包含更强或冲突的运动线索,请求可能过于复杂,或者所选模型可能不支持该控制。
我能用一张图像制作长视频吗?
你可以延长或串联片段,但漂移和过渡错误会累积;请逐个镜头规划和审阅序列。
我应该再次描述角色吗?
通常图像应承载外观。重新描述可能会产生冲突,除非它添加了必要的变换或交互。