迈入4D新时代：单视角视频如何重塑我们的视觉体验！

这项研究将进一步改进自动驾驶场景的重建效果。

原标题：世界模型进入4D时代！单视角视频构建的视角4D世界来了
文章来源：机器之心
内容字数：4975字

近年来，人工智能技术以惊人的速度改变着我们对世界的认知。李飞飞教授团队的研究表明，单张图片生成三维物理世界的能力展现了空间智能的巨大潜力。最近，极佳科技与北京大学、理想汽车及中国科学院自动化研究所共同推出了ReconDreamer，这一技术使得自动驾驶场景的视角重建和生成成为可能。

闭环仿真是实现大规模端到端自动驾驶的重要步骤，其中场景重建是关键环节。然而，现有的场景重建技术如NeRF和3DGS受到训练数据分布的限制，难以高效重建复杂驾驶环境。ReconDreamer通过训练世界模型，采用渐进式修复策略，显著提升了在大范围视角变化下的渲染质量。

ReconDreamer的整体框架首先利用传统方法进行场景重建，然后采样新轨迹进行渲染。通过引入DriveRestorer，ReconDreamer能够修复低质量视频，消除伪影与缺陷。此外，采用渐进式数据更新策略，从小位移渲染开始，逐步扩展到大范围渲染，以提升渲染质量。

实验结果显示，ReconDreamer在大范围相机中表现出色，显著提升了动态驾驶场景的渲染质量，消除了“鬼影”现象，并增强了交通元素的清晰度。定量实验表明，相较于传统三维重建算法，ReconDreamer在复杂场景中的渲染效果更加优秀，并获得了用户的高度认可，超过95%的投票率支持其渲染效果。

ReconDreamer是极佳科技团队在DriveDreamer系列工作的延续，致力于提升自动驾驶场景重建的精度和可靠性。这一技术不仅为端到端自动驾驶系统的开发提供了更加真实的环境，也为未来4D空间智能的应用奠定了基础，具有广泛的应用前景。

文章来源：机器之心
作者微信：
作者简介：专业的人工智能媒体和产业服务平台

文章版权归作者所有，未经允许请勿转载。

暂无评论...