世界模型与 Real2Sim2Real

文章预览

9月10日晚7点， 「智猩猩公开课 NVIDIA 端到端自动驾驶专场」正式开讲，NVIDIA 自动驾驶团队深度学习和计算机视觉方向李臻欣将以 《探索端到端自动驾驶规划新范式》 为主题进行直播讲解，详细解读CVPR 2024大规模端到端驾驶挑战赛冠军方案Hydra-MDP，欢迎扫码报名。 01 说在前面的话 其实关于自动驾驶的生成式世界模型和具身智能的 Real2sim2Real 数据飞轮，都是成型于 23 年底，在最近这几个月集中爆发。 我可以理解大家都希望追赶这些最潮流的东西，保持自己的科研影响力。 不过在主流范式还没有定型的摸索时期，大家入坑一定要清晰的了解 WM 和 Real2sim2Real 是什么，它能带来什么。 因为大多数的伙伴也包括我本人其实很多时候对于这两个概念的理解还处于把 \sigma 看成 \frac{+\infty}{2} 的状态。 02 首先我们来梳理概念 （一）什么是 WorldModel: Lecun 的世 ………………………………