Codex也能“P视频”?Seedance + Codex,做出「瞬息多元宇宙」式的换装视频

Seedanc生成动态视频,后续 全靠 Codex“P视频”!
之前发了一个简单流程的post,有几十K的浏览。这次丰富下内容和指令。
原理是通过Codex(GPT 6)的抽帧, 调用生图技能替换元素,然后再利用它的自动剪辑完成拼接。
而且哪一帧细节有问题,直接告诉codex就行。
上面是直接使用 Seedance做出来的效果,变化数有限,构图和人物动作有些时候也会偏。
我们直接进入流程讲解
① 先准备一条动作视频,发给Codex
-用 Seedance 生成基础的动作视频,或者找一些之前生成的视频片段。
这类视频 最好 是比较趣味的,比如空中飞踢,人物拿枪等,视频 会更有趣
-接着,裁掉多余的画面,再把视频交给 Codex。
这步可以减少 codex 多余画面抽帧 消耗的额度。
② 让 Codex 分析换装区间
Codex自己会去查看整个视频,它会自己去抽帧,然后帮你选择一处 比较完美的切入点。
这里你可以先告诉 它,每多少帧替换一次,先让它继续出大概 需要生成多少张
参考指令:
「每 4 帧更换一套造型。先分析帧率、时长和动作,计算需要生成多少张图片,提取对应原帧。」

这边建议可以3-4帧,减少生成图片的数量。
③ 调用生图模型,批量生成不同造型
接着,基于 它抽帧的底图,告诉它你想要改变的风格。
这里的风格你下一些大致的方向就行了,其他交给它自己发挥。

参考指令:
「以每张对应原帧为底图,仅修改女主的服装、发型和配饰。造型穿插黑衣刀客、外星人、侦探、女将军、机甲少女、女忍者和粉红少女。
保持人物位置、身体比例、动作姿势和镜头构图一致,环境、被踢的人及围观者保持不变。踢出的腿在前景,弯曲收回的腿在后方。先生成图片。」
后面一段开枪的视频:
「在持续射击的动作中,交替更换翅膀材质、发色、服装和手中的武器,穿插加特林、科幻能量炮、可爱水枪等造型。保持握持姿势、枪口朝向和原动作一致。」

④ 检查图片,局部返修
这一步 主要是检查替换元素以后,有没有哪些地方出错的。比如,我这个踢腿的视频,就容易把前腿和后腿生成错误。


这一步需要人工看一遍。发现哪张不对,直接告诉 Codex 编号和具体问题,不必所有图片重新生成。


参考指令:
「把生成图与对应原帧并排对照,检查前后腿关系、手部、道具位置,以及背景和其他人物是否被误改。列出问题编号,只重做有问题的图片。」

⑤ 让 Codex 自动完成剪辑

参考指令:
「将确认后的图片按原时间线替换回视频,每张持续 4 帧,最后不足 4 帧按剩余帧数处理。换装开始前保留原片,保持原时长、帧率和音频,导出 MP4。」
最后,
关于额度的大致消耗,我是plus 会员,一般这样一段2多秒的时候,按照每三帧一张图的替换,大概会需要替换29张图片,加上抽帧会消耗20%左右的 5小时 额度。
我使用下来,尽量使用astra ,效果会好一些。
同样的原理,也能做这种超高速换装的AI视频,我这个是一帧一张图,所以切换的非常快。
基础流程:
第一步:图片生成
使用 Codex(GPT),生成两部分素材:
前4秒: 首尾帧 图片
后15秒:定格画面所需的25张图片
第二步:前4秒画面 生成
由GPT 生成 提示词,然后使用 Wan 3.0 的首尾帧模式 生成视频。 提示词见评论区
第三步:后15秒画面 生成
Codex(GPT)全程完成图片的快速剪辑,并精准卡点。此步 仅消耗额度,不使用任何视频模型。
第四步:两段视频拼接和剪辑
发送指令,让Codex(GPT) 完成 视频的剪辑,并在开头加上文字和贴纸。
全程除了前四秒视频生成,其他在Codex(GPT)的对话框 跟它沟通对话即可。
以上就是本期的分享,觉得有趣的欢迎 点赞 转发 和关注,我会持续更新好玩的玩法。