ACM MM24 | Hi3D: 3D生成领域再突破！新视角生成和高分辨率生成双SOTA(复旦&智象等)

文章预览

点击下方 卡片 ，关注“ AIGC Studio ”     文章链接：https://arxiv.org/pdf/2409.07452 Github 链接：https://github.com/yanghb22-fdu/Hi3D-Official 亮点直击 本文提出了高分辨率图像到3D模型（Hi3D），这是一种基于视频扩散的新范式，将单个图像重新定义为多视角图像，作为3D感知的序列图像生成（即轨道视频生成）。该方法深入探讨了视频扩散模型中潜在的时间一致性知识，这些知识在3D生成中能够很好地推广到多个视角之间的几何一致性。 提出了基于视频扩散模型的图像到3D生成方法 ，通过利用视频扩散模型的时间一致性来增强3D几何一致性。 提出了高分辨率图像到3D模型（Hi3D） ，在两阶段中生成高分辨率的3D网格和纹理：首先生成低分辨率轨道视频，然后通过3D感知精化器生成高分辨率视频。 在新视角合成和单视角重建任务中表现出色 ，实现了高质量的3D网格和 ………………………………