朱玉可团队新作：看一眼就能模仿，大模型让机器人轻松学会撒盐

AIGC动态欢迎阅读

原标题：朱玉可团队新作：看一眼就能模仿，大模型让机器人轻松学会撒盐
关键字：物体,机器人,人形,任务,人类
文章来源：机器之心
内容字数：0字

内容摘要：

机器之心报道
编辑：杜伟、Panda在人形机器人领域，有一个非常值钱的问题：既然人形机器人的样子与人类类似，那么它们能使用网络视频等数据进行学习和训练吗？
如果可以，那考虑到网络视频的庞大规模，机器人就再也不用担心没有学习资源了。
近日，德克萨斯大学奥斯汀分校和 NVIDIA Research 的朱玉可团队公布了他们的一篇 CoRL 2024 oral 论文，其中提出了一种名为 OKAMI 的方法，可基于单个 RGB-D 视频生成操作规划并推断执行策略。论文地址：OKAMI: Teaching Humanoid Robots Manipulation Skills through Single Video Imitation
论文链接：https://arxiv.org/pdf/2410.11792
项目地址：https://ut-austin-rpl.github.io/OKAMI/
先来看看演示视频：可以看到，机器人在看过人类演示者向袋子中装东西后，也学会了以同样的动作向袋子中装东西。不仅如此，OKAMI 还能让人形机器人看一眼演示视频就轻松学会撒盐、将玩具放进篮子和合上笔记本电脑

原文链接：朱玉可团队新作：看一眼就能模仿，大模型让机器人轻松学会撒盐