Flash3D:一张图像重建3D场景

文章预览

论文题目 Flash3D: Feed-Forward Generalisable 3D Scene  Reconstruction from a Single Image 1、简介 本文提出了一种基于单幅图像的场景重建和新视图合成方法Flash3D，它既通用又高效。 从单目深度估计的“基础”模型开始，并将其扩展到完整的3D形状和外观重构器。 为了提高效率，将此扩展建立在前馈高斯溅射的基础上。 具体来说，在预测深度处预测第一层三维高斯，然后添加额外的高斯层，这些高斯层在空间上偏移，允许模型完成遮挡和截断后的重建。 Flash3D非常高效，可以在一天内在单个GPU上进行训练，因此大多数研究人员都可以访问。 当在RealEstate10k上进行训练和测试时，它达到了最先进的结果。 当转移到像NYU这样看不见的数据集时，它比竞争对手的表现要好得多。 更令人印象深刻的是，当转移到KITTI时，Flash3D比专门针对该数据集训练的方法实现了更好的PSN ………………………………