日前,Stability AI推出了新的视频生成模型Stable Video 4D,可以将单个对象视频从不同角度和视角转换为多个新视图视频。
图源:Stability AI
据介绍,用户只需上传一个视频并指定他们想要的3D相机姿势,Stable Video 4D就会根据指定的摄像头视图生成八个新视图视频,并提供主体的全面、多角度视角。模型可以使用所生成的视频有效地优化视频中对象的动态3D表示。
目前,Stable Video 4D可以在大约40秒内生成8个视图的5帧视频,整个4D优化大约需要20到25分钟。
Stable Video 4D已上线Hugging Face,但模型目前还处于研究阶段,未来有望应用于游戏开发、视频编辑和虚拟现实,以增强产品的真实感和沉浸感。