推理爆拉SOTA 2000倍！FSGS：稀疏视角的实时高仿真图像合成框架(ECCV'24)

文章预览

点击下方 卡片 ，关注“ 3D视觉之心 ”公众号 第一时间获取 3D视觉干货 >> 点击进入→ 3D视觉之心技术交流群 摆脱稀疏输入的限制 从一组视角集合中进行新视角合成（NVS），尽管在照片级真实感渲染方面取得了成效，但 对密集支持视角的要求 阻碍了其实用性。先前的研究通过利用神经辐射场（NeRF），一种能够捕捉场景细节的强大隐式3D表示，结合体积渲染技术，提出了减少视角需求的方法。它们通常会 导致巨大的计算需求 ，进而对实时性能产生不利影响。在实现实时渲染速度和理想的照片级真实感、高分辨率输出质量之间仍存在明显差距。 本文介绍的 FSGS (Few-Shot Gaussian Splatting)[1]研究了在稀疏输入上部署3D-GS的挑战。3D-GS的有效性关键在于 稠密化过程 ，它将稀疏的初始点云转变为更详细的3D环境表示。然而，由空间梯度决定的新高斯的放置往往 ………………………………