英伟达GR00T重大突破：利用Apple Vision Pro 解决机器人领域最痛苦数据扩展难点

文章预览

GR00T项目重大突破！英伟达实现了一种系统化扩展机器人数据的方法，解决了机器人领域最痛苦的难点 GR00T 项目是英伟达一项为仿人机器人开发通用基础模型的计划，该模型将多模式指令和过去的互动作为输入，并输出机器人的动作。 这种先进的模型是模块化的，既有高级推理和规划系统，也有低级快速、准确和反应性运动系统 英伟达 Embodied AI（GEAR 实验室）负责人Jim Fan解释了GROOT这一突破 其实想法很简单：人类在真实机器人上收集演示数据，然后在仿真中将这些数据扩大1000倍或更多。具体来讲： We use Apple Vision Pro  to give the human operator first person control of the humanoid. Vision Pro parses human hand pose and retargets the motion to the robot hand, all in real time. From the human’s point of view, they are immersed in another body like the Avatar. Teleoperation is slow and time-consuming, but we can afford t ………………………………