港大最新成果：基于多模态大模型的脑身同步框架BBSEA｜讲座预告

AIGC动态欢迎阅读

原标题：港大最新成果：基于多模态大模型的脑身同步框架BBSEA｜讲座预告
关键字：智能,模型,机器人,猩猩,讲座
文章来源：算法邦
内容字数：3662字

内容摘要：

智猩猩机器人新青年讲座由AI与硬科技知识分享社区「智猩猩」全新企划，致力于邀请全球知名高校、顶尖研究机构以及优秀企业的青年学者，主讲在具身智能、强化学习、多智能体系统、建模仿真等机器人关键前沿技术上的研究成果和开发实践。
目前讲座已完结6讲，错过直播的朋友，可以点击文章底部“阅读原文”观看回放！具身智能包括机器人本体，和决定其智能化的大脑、小脑、脑身同步。目前大脑的研究方向是大模型，让机器人听懂人的语言；小脑为控制身体，掌握基本技能；脑身同步指机器人的意识训练。
大语言模型能在语言空间中进行推理，并通过视觉输入进行问答，但不具备环境的具身感知能力，无法与其互动。而具身智能体能与场景互动，但缺乏对物理世界的理解，无法完成具有意义的语义任务。
为此，香港大学杨言超老师团队提出一种基于大型基础模型的具身智能体脑身同步框架BBSEA。将包括LLMs和VLMs的大型基础模型（Large Foundation Models，LFMs）视为一个拥有物理世界常识的“大脑”，并探索了利用大脑的非物质结构知识训练具身智能体（身体）与物理世界的互动。与BBSEA相关的论文目前收录在arXiv 上，其

原文链接：港大最新成果：基于多模态大模型的脑身同步框架BBSEA｜讲座预告