英伟达开源自适应多模态「世界生成」模型！开启机器人、自动驾驶训练革命

文章预览

   新智元报道   编辑：定慧 【新智元导读】 Nvidia刚刚发布了「世界生成」模型Cosmos-Transfer1，可以根据多种模态的空间控制输入（如分割、深度和边缘）生成世界模拟，使得世界生成具有高度可控性。开发者使用模型能够创建高度逼真的模拟环境，用于训练机器人和自动驾驶车辆。 Nvidia带着最新「黑科技」模型 Cosmos-Transfer1 震撼登场，可以创建高度逼真的模拟环境，反向生成「真实世界」！ Cosmos-Transfer1，是一种自适应多模态世界生成模型。 可以根据多种模态的空间控制输入（如分割、深度和边缘）生成真实世界模拟。 注意！右边的场景并非「真实场景」，而通过 HD Ma p 高清地图和 Lidar 雷达图实时「生成」的！ 这种生成能力给未来数字世界带来太多想象力和可能性！ 也有望解决物理AI开发中的一个长期挑战：缩小模拟训练环境与实际应用之 ………………………………