超越GPT-4V，清华孙茂松教授团队提出具身智能体开放平台LEGENT

AIGC动态欢迎阅读

原标题：超越GPT-4V，清华孙茂松教授团队提出具身智能体开放平台LEGENT
关键字：智能,模型,猩猩,清华大学,讲座
文章来源：算法邦
内容字数：0字

内容摘要：

智猩猩机器人新青年讲座由AI与硬科技知识分享社区「智猩猩」全新企划，致力于邀请全球知名高校、顶尖研究机构以及优秀企业的青年学者，主讲在具身智能、强化学习、多智能体系统、建模仿真等机器人关键前沿技术上的研究成果和开发实践。近年来，大语言模型（LLM）和多模态大模型（LMM）在理解和生成语言、图像等方面展现出令人瞩目的能力。但LLM和LMM缺乏必要的物理交互，无法很好地将其应用到以语言为基础、类似人类的具身智能体中。
而现有平台存在着数据规模不足、只专注于特定的具身任务缺少泛化性，以及与当前的 LLM 和 LMM 不兼容等诸多问题。因此，如何将大模型应用于具身智能体，使其能够在物理世界中进行感知、推理和行动，仍然面临着巨大的挑战。
针对当前挑战，清华大学孙茂松教授团队提出了一个具身智能体开放平台LEGENT，用于开发使用 LLM 和 LMM 的具身智能体。该平台具有一个功能强大的3D模拟环境，为具身智能体提供了丰富的训练场景，从而提升其泛化能力。平台具有逼真的物理效果，如重力、摩擦和碰撞等，使具身智能体能够更好地理解物理世界的规则。此外，LEGENT构建了一套高效的具身数据生成框架，用于场

原文链接：超越GPT-4V，清华孙茂松教授团队提出具身智能体开放平台LEGENT

联系作者

文章来源：算法邦
作者微信：allplusai
作者简介：智猩猩矩阵账号之一，聚焦生成式AI，重点关注模型与应用。