AI 视频创作者 MetaPuppet 想要通过可灵 v1.5 为自己的影片《记忆碎片》制作人物对话的场景。经过实践,他发现可灵 v1.5 生成的视频虽然很逼真但仍旧不够自然。经过一番尝试,他总结了一个让人物对话表现得更加自然的视频制作流程。

详细步骤

在进行口型同步前,确保角色脸部一直在画面当中,且光线良好,否则口型同步可能会失败。将画面调整到令你满意后,点击视频下方的"口型同步"按钮。

可灵一次只能生成 5 秒的口型同步视频,因此需要事先将对话内容切割成5秒的视频片段。

可灵的口型同步使用非常简单,但生成的视频往往不够流畅,那是因为生成视频的帧速率低于原始视频。

这个时候,可以通过 Runway 解决这个问题。将可灵生成的视频上传至 Runway,然后点击 Super-Slow Motion(超慢动作)按钮,把速度设置成 0.5。新的视频将变成半速,此时 Runway 为原视频添加了更多的中间帧。

以最高分辨率导出视频,并包含音频。

把新的视频导入 Pr,把视频播放速度调整成2倍速,并通过音频波形图,将原音频与新的视频对齐。

完成对齐后,删除视频中被加速的音频。新的视频与原视频长度一致,但因为加入了新的中间帧,效果变得更加自然了。