银河通用王鹤：让具身智能机器人“言出法随”，需攻克两大局限性丨GenAICon 2024

AIGC动态欢迎阅读

原标题：银河通用王鹤：让具身智能机器人“言出法随”，需攻克两大局限性丨GenAICon 2024
关键字：模型,机器人,物体,数据,解读
文章来源：智东西
内容字数：0字

内容摘要：

没有做好小模型的公司、没有能让动作小模型泛化的公司不可能让大模型泛化。
2024中国生成式AI大会于4月18-19日在北京举行，在大会第一天的主会场开幕式上，北京大学助理教授、银河通用机器人创始人&CTO、智源具身智能中心主任王鹤以《通向开放指令操作的具身多模态大模型系统》为题发表演讲。
成立于2023年5月的银河通用机器人，是国内具身智能代表初创公司之一，迄今已完成4轮融资，美团是公司外第一大外部股东，北大燕缘创投、清华无限基金SEE Fund均是投资方，其累计融资额已超过1亿美元。
作为国内具身智能领域资深专家，王鹤详细解读了具身智能大模型的定义、范围和关键技术。他谈到目前面向通用机器人的具身多模态大模型的局限在于数据来源有限、很难高频输出动作。应对这两大挑战的方向，一是通过仿真世界提供训练数据，二是采用三维模态模型提升泛化性和速度。
对此，银河通用机器人构建了三层级大模型系统，包括硬件、仿真合成数据训练的泛化技能、大模型等。基于该系统，机器人可实现跨场景、跨物体材质、跨形态、跨物体摆放、依据人类语音指令进行的开放语义泛化抓取，成功率达95%。
以下为王鹤的演讲实录：
今天我带来的

原文链接：银河通用王鹤：让具身智能机器人“言出法随”，需攻克两大局限性丨GenAICon 2024

联系作者

文章来源：智东西
作者微信：zhidxcom
作者简介：智能产业新媒体！智东西专注报道人工智能主导的前沿技术发展，和技术应用带来的千行百业产业升级。聚焦智能变革，服务产业升级。