著名的 AI 创意视频制作者 Pierrick Chevallier 分享了一个借助 AI 制作虚拟网红的极简工作流。首先,让我们来看看最终呈现的效果,您能看出视频中的人物是 100% 由 AI 生成的吗?
工作流
1. 生成一张包含人物和场景的图片
英文提示词:A photo of a captivating Asian woman, with long straight hair and cat-eye eyeliner, smiling and sitting on the edge of a bed in a luxurious hotel room. She is wearing a satin robe and slippers . She is looking at the camera in a wide, cinematic shot, captured with a Canon EOS Mark III and a macro lens, front view
中文提示词:一张迷人的亚洲女人的照片,一头长长的直发,画着猫眼眼线,微笑着坐在豪华酒店房间的床边。她穿着缎子长袍和拖鞋。她正看着镜头,用佳能EOS Mark III和微距镜头拍摄了一张广角电影镜头,正面视图
提示词适用于目前绝大部分 AI 绘画工具。Midjourney、Flux、Ideogram、Freepik Mystic 这四款工具效果最为出色。
2. 使用 AI 视频工具把图片转成视频
目前直接由文字生成视频的模式还不能实现人物形象的一致性,只能在图片生成阶段加以控制。因此需要先生成人物和场景的图片,再转换成视频。大家可以通过可灵、Runway Gen-3、Luma、Vidu,或是海螺 AI 完成这一步,效果都不错。
在生成视频的进程中,我们还需要凭借提示词,对人物的动作以及镜头的变化进行设定。
英文提示词:Woman happy as she talks to the viewer, looking to the viewer, blinking eyes many time, talking with hand, points the finger at the viewer
中文提示词:女人高兴地与观众交谈,看着观众,眨着眼睛,用手说话,用手指着观众
3. 配音及口型同步
最后一步是为角色进行配音,并达成口型同步。Runway、D-ID、Heygen、Rendernet 都是不错的选择。在这个示例中,Pierrick Chevallier 使用的是 Rendernet。相较于其他几款工具,Rendernet 能够完成虚拟网红制作的完整流程。它不但能够固定人物的形象,还能借助 ControlNet 控制人物的动作。它内置了 40 种不同的声音,只要输入文字,就能让视频中的人物声情并茂地表达出来。
以上方法不仅可以用来制作虚拟网红,还可以把自己的照片与不同的场景组合实现“宅家云旅游”!
评论(0)