NeurIPS 2024收录！港科大&上海AI Lab提出高质量可控的自动驾驶世界模型Vista | 一作高深远博士主讲预告

AIGC动态欢迎阅读

原标题：NeurIPS 2024收录！港科大&上海AI Lab提出高质量可控的自动驾驶世界模型Vista | 一作高深远博士主讲预告
关键字：模型,世界,数据,保真度,论文
文章来源：智猩猩GenAI
内容字数：0字

内容摘要：

世界模型被业内认为是通往自动驾驶的唯一解。世界模型是真实世界的模拟，可以根据控制指令预测对应的未来并反馈给决策过程，从而有效地帮助智能体的训练和测试。
上海人工智能实验室OpenDriveLab联合香港科技大学等研究人员构建了迄今为止最大的公共驾驶数据集OpenDV-2K，其中包含超过2000小时的驾驶视频，比广泛使用的nuScenes数据集大374倍。基于OpenDV-2K还构建了自动驾驶领域中第一个大规模视频预测模型GenAD。该模型通过新颖的时间推理模块处理驾驶场景中的挑战性动态情况，超越了一般或驾驶特定的视频预测模型，在真实世界驾驶应用中的巨大潜力。与GenAD相关的论文收录于CVPR 2024 Highlight。
此外，针对现有的驾驶世界模型在泛化到未见环境、关键细节的预测保真度以及灵活应用的动作可控性方面存在的局限性。香港科技大合上海人工智能实验室OpenDriveLab等研究人员又提出一种高质量可控的通用自动驾驶世界模型Vista。与Vista相关的论文收录于NeurIPS 2024。Vista能够在高时空分辨率下预测逼真的未来，通过捕捉动态和保持结构的两种新损失函

原文链接：NeurIPS 2024收录！港科大&上海AI Lab提出高质量可控的自动驾驶世界模型Vista | 一作高深远博士主讲预告