为每个镜头选对AI视频工具
文生视频、图生视频、首尾帧、口型同步:每种镜头该用什么方法和什么模型,如何在十分钟内测试,以及怎样把额度花在刀刃上。
每个镜头都有任务
新手会选一个AI视频工具,让它包办一切。有经验的创作者正好相反:先看每个镜头要完成什么,再选择最擅长这件事的方法和模型。
城市的远景要壮观而稳定。特写要让主角的脸完全准确。对话镜头需要嘴型和声音对得上。打斗需要快速又看得清的动作。这是四个不同的问题,没有一个工具能在四项上都做到最好。
- 地点的远景
- 文生视频或图生视频
- 主角的特写
- 用角色设定图做图生视频
- 两个角色对话
- 口型同步工具
- 快速动作
- 首尾帧
- 魔法、火焰、爆炸
- 图生视频,特效在剪辑中添加
- 先决定镜头要完成什么,工具排在第二位。
生成镜头的四种方式
几乎所有AI视频工具都提供同样的四种方法,只是名字不同。了解它们,比熟悉某一个应用更有用。
- 文生视频:用文字描述镜头。做场景、人群和氛围很快,但主角的脸会在每个片段之间变化。
- 图生视频:给出一张静态图并描述动作。这是保持角色、服装和光线一致的最好方法。大多数剧集都是这样做的。
- 首尾帧:给出第一张和最后一张图,模型补出中间的动作。非常适合变身、命中的一拳、在指定位置打开的门。
- 参考图(也叫元素或素材):分别给出角色、物件和地点的图片,模型把它们组合成新的镜头。当你需要同一个主角出现在很多新地点时很有用。
整集每个镜头都用文生视频:“一位红发年轻女弓箭手在森林里行走”。每个片段里她的脸、弓和外套都不一样。
先从角色设定图中确定一张女弓箭手的静态图,再给每个镜头做图生视频:“她在松树间慢慢走,抬头看,风吹起头发”。同一张脸、同一把弓、同一件外套。
拿不准时,就从静态图开始。一张失败的静态图,成本只是失败视频片段的一小部分,而且能给模型一个清楚的起点。
各类模型分别擅长什么
模型每个月都在变,所以把这当作测试的起点,而不是排名。截至2026年11月,DeepStories上的创作者最常反馈的是这些。
- Kling:性价比高,角色参考能力强,内置口型同步。适合主角反复出现的剧集。
- Seedance(在Dreamina等平台中):电影感的运镜,一次生成就能包含多个镜头的场景。
- Veo(在Google Flow中):画面非常真实,并带原生声音,但每个片段价格更高。
- Hailuo(MiniMax):便宜、动感强,适合动作戏和测试。
- Runway:更侧重对现有片段的编辑工具和控制,而不是单纯生成。
- Wan:开源模型,如果你有强劲的显卡,可以在自己电脑上运行。
选一个主力模型,摸透它的习惯。一个你熟悉的模型,比五个你不熟悉的模型能给你更多可用镜头。
十分钟测试:三个模型,一个镜头
在一个工具上花掉一个月的额度之前,先用这集最难的镜头做个快速测试。在三个模型里使用同一张静态图和同一条提示词,然后给每个结果打分。
- 动作:动得自然吗?有没有融化或跳帧?
- 脸:到最后一帧,主角还是你的主角吗?
- 提示词:它做了你要求的事吗?是否只做了这些?
- 成本:算上失败的尝试,一个可用片段花了多少钱?
- 模型A
- 模型B
- 模型C
- 动作
- 脸保持一致
- 遵循提示词
- 每个可用镜头的成本
- 这个镜头模型B胜出
- 在同一个镜头上给每个模型打1到5分。不同类型的镜头,胜者可能不同。
配音和口型同步
对话是AI电影最容易显假的地方。解决办法主要在方法,而不在工具。
- 先录制或生成声音,再让脸跟着声音动。
- 说话镜头要短:2到4秒,然后切到听者或一个细节。
- 优先使用正对镜头的中近景;侧脸和快速转头会破坏口型同步。
- 让一些台词在画外出现,配上反应镜头或风景。真正的电影一直都这么做。
一个平台还是多个?
你可以直接订阅一个模型,也可以使用一个账号就能调用多个模型的平台。直接订阅通常每个片段更便宜。多模型平台让你不用付五份订阅,就能为每个镜头挑选最合适的模型。
常见的配置:给大多数镜头使用的模型开一个直接套餐,再在多模型平台上留少量额度,处理它做不好的少数镜头。
实例:一场戏,一个镜头一个工具
黎明时分,一位女弓箭手发现自己的村庄被烧毁。六个镜头,以及每个镜头选择的方法。
- 雾中被烧毁村庄的远景:用图片工具做的静态图生成视频,缓慢推镜。
- 女弓箭手睁开眼睛的面部特写:用角色设定图做图生视频,几乎不动。
- 她从灰烬中站起来:图生视频,中景,动作用一句话描述。
- 插入镜头,一支皇家箭矢插在横梁上:图生视频,镜头只轻微移动。插入镜头便宜,还能掩盖剪辑点。
- 她说“这是谁干的?”:先生成声音,再在一个3秒的中近景上做口型同步。
- 她跑向城门:首尾帧,让她准确到达你设计好的城门。
注意,六个镜头里只有一个需要口型同步,也只有一个需要首尾帧。大多数镜头都是简单的图生视频,预算因此很低。
让AI助手和你一起规划工具
把镜头清单贴给AI助手,让它为每个镜头建议一种方法。你仍然是导演,它帮你节省时间。
这是我的AI剧集这一集的镜头清单:[粘贴你的镜头清单]。请为每个镜头用一行告诉我该用哪种方法(文生视频、图生视频、首尾帧、参考图或口型同步)以及原因。标出最难的3个镜头,也就是我应该先在多个模型里测试的镜头。保留我的镜头编号。
最终检查清单
- 清单上的每个镜头旁边都写了方法。
- 每个角色镜头都从一张确认过的静态图开始。
- 你已在三个模型里测试了最难的镜头,并保留了胜出者。
- 对话镜头简短,且正对镜头。
- 大部分额度都花在观众会记住的镜头上。
- 先决定每个镜头要完成什么,再选择方法和模型。
- 角色镜头从确认过的静态图开始。
- 投入额度之前,先在三个模型里测试最难的镜头。
为每个镜头选对AI视频工具 — DeepStories Academy