字节跳动正在探索一款名为 I2VControl AI 视频生成一体化框架,能够单独控制视频镜头的运动,或场景中物体的运动。用户可以通过它精确控制视频的运动方式。

拖动场景中的物体

实现图像可控运动的 AI 视频生成框架: I2VControl
实现图像可控运动的 AI 视频生成框架: I2VControl
实现图像可控运动的 AI 视频生成框架: I2VControl

控制镜头的移动

实现图像可控运动的 AI 视频生成框架: I2VControl
实现图像可控运动的 AI 视频生成框架: I2VControl
实现图像可控运动的 AI 视频生成框架: I2VControl

同时拖动场景中物体和移动镜头

实现图像可控运动的 AI 视频生成框架: I2VControl
实现图像可控运动的 AI 视频生成框架: I2VControl
实现图像可控运动的 AI 视频生成框架: I2VControl

通过运动笔刷移动物体

实现图像可控运动的 AI 视频生成框架: I2VControl
实现图像可控运动的 AI 视频生成框架: I2VControl
实现图像可控运动的 AI 视频生成框架: I2VControl

通过运动笔刷实现视频特效

实现图像可控运动的 AI 视频生成框架: I2VControl
实现图像可控运动的 AI 视频生成框架: I2VControl
实现图像可控运动的 AI 视频生成框架: I2VControl

多种运动方式结合

联合运动

实现图像可控运动的 AI 视频生成框架: I2VControl
在单个场景中使用拖拽、镜头移动和运动笔刷。运动笔刷部分为红色,拖拽单元部分为绿色。

希区柯克

实现图像可控运动的 AI 视频生成框架: I2VControl
固定前景,拉远背景,创造出一种希区柯克式的镜头运动效果。

围绕人物

实现图像可控运动的 AI 视频生成框架: I2VControl
将镜头围绕一个人物移动,并始终保持主角在原地,从而创造出美丽的动态肖像视频。

飘逸长发

实现图像可控运动的 AI 视频生成框架: I2VControl
以画面整体为边界,设定适合的动感强度,并把提示词设为 “随风飘扬”,这样艺术人像就能有动感了。

项目地址:https://wanquanf.github.io/I2VControl