西湖大学、浙大等最新工作Omni-Scene：Gaussian统一表征下的自动驾驶多模态生成！

文章预览

点击“ 计算机视觉life ”，选择“星标” 机器人AI干货第一时间送达 论文作者  | Dongxu Wei等， 编辑 | 自动驾驶之心 写在前面 & 笔者的个人理解 西湖大学和浙大的工作，利用3DGS的统一表征，结合扩散模型打通自动驾驶场景的多模态生成。近期生成+重建的算法越来越多，这说明单重建或者单生成可能都没有办法很好的cover闭环仿真，所以现在的工作尝试两者结合，这块应该也是后面闭环仿真落地的方向。 先前采用基于像素的高斯表示的工作已经证明了前馈稀疏视图重建的有效性。然而，这种表示需要交叉视图重叠才能进行精确的深度估计，并且受到对象遮挡和截头体截断的挑战。因此，这些方法需要以场景为中心的数据采集来保持交叉视图重叠和完整的场景可见性，以规避遮挡和截断，这限制了它们在以场景为核心的重建中的适用性。相比之下 ………………………………