朱玉可团队新作：看一眼就能模仿，大模型让机器人轻松学会撒盐

文章预览

机器之心报道 编辑：杜伟、Panda 在人形机器人领域，有一个非常值钱的问题： 既然人形机器人的样子与人类类似，那么它们能使用网络视频等数据进行学习和训练吗？ 如果可以，那考虑到网络视频的庞大规模，机器人就再也不用担心没有学习资源了。 近日，德克萨斯大学奥斯汀分校和 NVIDIA Research 的朱玉可团队公布了他们的一篇 CoRL 2024 oral 论文，其中提出了一种名为 OKAMI 的方法，可基于单个 RGB-D 视频生成操作规划并推断执行策略。 论文地址：OKAMI: Teaching Humanoid Robots Manipulation Skills through Single Video Imitation 论文链接：https://arxiv.org/pdf/2410.11792 项目地址：https://ut-austin-rpl.github.io/OKAMI/ 先来看看演示视频： 可以看到，机器人在看过人类演示者向袋子中装东西后，也学会了以同样的动作向袋子中装东西。不仅如此，OKAMI 还能让人形机器人看一眼演示视 ………………………………