“3D视频版Sora”来了!

AIGC动态5个月前发布 智东西
6 0 0

“3D视频版Sora”来了!

AIGC动态欢迎阅读

原标题:“3D视频版Sora”来了!
关键字:解读,视频,模型,视图,视角
文章来源:智东西
内容字数:0字

内容摘要:


40秒生成3D视频,Stability AI开源首个视频生视频模型。
作者|香草
编辑|李水青
输入单个物体视频,就能获取任意拍摄视角的全视图3D动态视频了!
智东西7月25日消息,昨日晚间,AI独角兽Stability AI推出其首个视频生视频(video-to-video)模型Stable Video 4D(SV4D),该模型能够将单个物体的视频输入,转换为8个不同视角的多个新视频,用户可任意指定摄像机角度。
▲输出全视图视频演示
目前,SV4D可以通过一次推理,在约40秒内生成8个视图的各5帧视频,整个4D优化需要20-25分钟。该模型已在Hugging Face上开源,适用于游戏开发、视频编辑、虚拟现实(VR)等场景的应用,可免费用于研究、非商业用途。
SV4D技术论文也同步发表,研究团队由Stability AI和东北大学学者组成,其中详细解读了该模型的框架结构、优化策略、测评结果等。
▲SV4D论文
Stability AI从2019年成立起,就致力于研发文字、图像、音频、视频等多个领域的开源模型,其在2022年跻身独角兽行列。虽然从去年以来它就陷入寻求卖身、核心技术团队离


原文链接:“3D视频版Sora”来了!

联系作者

文章来源:智东西
作者微信:
作者简介:

阅读原文
© 版权声明

相关文章

暂无评论

暂无评论...