突破次元壁！新加坡国立发布GenXD：拿捏真实感3D、4D动态场景

AIGC动态欢迎阅读

原标题：突破次元壁！新加坡国立发布GenXD：拿捏真实感3D、4D动态场景
关键字：视角,场景,相机,物体,数据
文章来源：新智元
内容字数：0字

内容摘要：

新智元报道编辑：LRST
【新智元导读】GenXD模型结合CamVid-30K数据集突破了3D和4D场景生成的挑战，能从单张图片生成逼真的动态3D和4D场景。这一进展为虚拟世界构建带来新的可能性，让动态场景的生成更加快速和真实。在我们熟知的2D图像和视频生成技术蓬勃发展之际，3D和4D的世界依然是前沿科技的「无人区」。
面对真实场景中复杂的物体和视角变化，3D、4D生成一直面临数据和模型设计的双重瓶颈。然而，一项令人振奋的突破即将改变这一现状！近日，新加坡国立大学（NUS）的研究人员提出了一种全新的生成框架——GenXD，不但能生成极具真实感的3D场景，还实现了从相机视角和物体图片中「生长」出逼真的4D动态场景。项目主页：https://gen-x-d.github.io/
论文链接：https://arxiv.org/abs/2411.02319
代码链接：https://github.com/HeliosZhao/GenXD
GenXD能够实现单图片静态虚拟物体和场景的生成，实现高质量的3D内容创作：GenXD也能够实现稀疏图片场景的重建，作为先验完善3D重建任务：GenXD

原文链接：突破次元壁！新加坡国立发布GenXD：拿捏真实感3D、4D动态场景