文章预览
点击下方 卡片 ，关注“ 3D视觉之心 ”公众号 第一时间获取 3D视觉干货 >> 点击进入→ 3D视觉之心技术交流群 写在前面 & 为什么提出？ 虽然用于图像和视频的可控生成模型已经取得了显著的成功，但针对3D场景的高质量模型，特别是在像自动驾驶这样的无界场景中，仍然发展不足，这主要是因为数据获取成本高昂。MagicDrive3D是一种用于可控3D街道场景生成的新颖流程，支持多条件控制，包括BEV（鸟瞰图）地图、3D目标和文本描述。与之前在训练生成模型之前进行重建的方法不同，MagicDrive3D首先训练一个视频生成模型，然后从生成的数据中进行重建。这种创新的方法使得生成过程易于控制，并可以获取静态场景，从而实现了高质量的场景重建。为了解决生成内容中的微小错误，MagicDrive3D提出了可变形的高斯映射（deformable Gaussian splatting），结合单目深
………………………………
