你为角色做了一段很棒的片段。接着做下一段时,她却换了个鼻子、换了个发型,还穿上了她从没穿过的外套。
这是阻碍人们用 AI 视频讲好故事的头号难题。这就是问题的成因,以及解决它的具体步骤。
要点总结
- AI 视频模型没有记忆,因此每个片段都会生成一个全新的人物。
- 在制作任何视频之前,先用一张干净的参考图锁定你的角色。
- 制作一张角度参考图,让模型从各个方向都能识别这张脸。
- 角色只需保存一次即可反复使用,无需每次重新创建。
- 从静态图像开始生成动画,而非从全新的文本 prompt 开始。
你的角色为何总在变化
AI 视频模型不会在片段之间记住任何内容。每次生成都从头开始,因此模型会读取你的文字,并据此构建一个全新的、与描述相符的人物。
即便使用完全相同的 prompt,也会得到不同的脸。「一位三十多岁、留着棕色短发的女性」可以形容成千上万的人,模型每次都会挑一张新面孔。脸部在同一段片段内也会发生漂移,这就是为什么长片段比短片段风险更高。
所以问题不在于把文案写得更好。真正的办法是先用一张图确定你的角色长什么样,然后让每个片段都以这张图为准。
第 1 步:制作一张主参考图
先在「创建图片」中为你的角色生成一张干净清晰的照片。正面朝向、均匀光照、纯色背景、中性表情、无强烈阴影。
刻意拍得平淡一些,因为戏剧化的光线和刁钻的角度会掩盖你需要锁定的细节。另外确保整套服装都在画面内,因为模型对待头发、衣服和眼镜的方式和对待脸部是一样的。
第 2 步:将该图像转为角度参考图
仅一张正面照片,模型无从得知角色头部侧面的样子。所以当视频镜头绕过角色时,模型只能靠猜,而猜出来的往往是另一个人。
在 OpenArt 中用 Multi-View 处理你的主图,一次即可得到同一角色的9个不同角度,先是网格图,然后是分开的单张图片。
这组图就是你的角度参考表。保留正面、四分之三侧面和侧脸,因为这三个角度几乎能覆盖你需要的所有镜头。
第 3 步:保存角色,无需重新构建
每次做新项目都从头重建参考图,正是一致性悄悄崩塌的地方。prompt 里多一个词,人物就变了样。
将角色保存一次于 OpenArt 角色 接着把同一个已保存的角色带入新作品中。这对系列内容尤为重要——每周更新的节目或持续投放的广告可能需要几个月后仍用同一个人物。
第 4 步:让图片动起来,而不是让 prompt 动
这是你能做的最有效的一个改变。别在文本生成视频的 prompt 里描述你的角色然后碰运气。先做出静态图片,再用图片生成视频。
现在你的参考图就是片段的第一帧。面孔、服装和光线都已确定,模型无需再自行发挥。
这样你的 prompt 只需描述动作即可。"她转向窗户微笑"比描述整个人物要简单得多。片段也尽量控制在 5 到 8 秒左右,因为片段越长,面部越容易走样。
第 5 步:让同一张脸贯穿整个序列
一个故事需要多个镜头,而逐个单独生成正是画面偏移悄然回归的原因。Smart Shot 先整体规划全片,从根本上解决这个问题。
Smart Shot 会生成一个可供你查看和编辑的分镜脚本,然后制作出一段更长的视频,镜头之间有真实的切换。由于这些镜头是统一规划的,你的角色能够贯穿始终,而不会在每次切换时被重新生成。
如需更长的故事视频, OpenArt Director 可处理跨镜头保持相同角色和场景的完整序列。The vibe directing 指南 将带你走一遍这个流程。
修正已经跑偏的角色
有时动作很完美,只是人物是陌生人。你无需丢弃这段素材。
使用「替换角色」来更换视频中的人物,直接从你保存的 OpenArt 角色库中调用正确的角色。动作保持不变,身份得到修正。若只是单张静帧,「换脸」也能在图片上完成同样的任务。
对于口播视频,对口型(Lip Sync)是最稳妥的方式。先生成一次面部,再叠加声音,这样面部就不会重新生成,也就不会出现偏移。
预期效果
即使设置完美,命中率也不会完美。有些片段效果仍会略有偏差,所以多生成几个版本,从中挑选好的,别指望第一次就能出彩。
把这些镜头并排对比着看。脸部的细微变化单看很难发现,可一旦两个版本挨在一起就一目了然了。
常见问题
为什么我的 AI 角色在每个视频里都不一样?
该模型在不同片段之间没有记忆,因此每次都会根据你的文字重新生成一个人物。仅凭文字无法足够精确地描述一张脸,所以你需要提供参考图。
如何在多个 AI 视频片段中保持同一张脸?
先制作一张干净的参考图,保存为角色,然后用图生视频从这张图开始生成每个片段。要生成完整序列,就用 Smart Shot,让所有镜头一起规划。
角色出错的视频能修复吗?
是的。「替换角色」能在成片中替换人物,同时保留原有动作,您还可以从已保存的素材库中调取合适的角色。
服装算角色一致性的一部分吗?
可以。模型对待头发、服装和配饰的方式与对待面部一样,所以请在参考图中锁定完整造型,并在各个镜头中保持完全一致。