英伟达提出并开源RefFusion：3D 场景下，可实现主体编辑的自适应扩散模型

文章预览

来源：投稿  作者：橡皮 编辑：学姐 论文链接：https://arxiv.org/abs/2404.10765 项目主页：https://reffusion.github.io/ 图 1. 本研究提出了一种基于从参考自适应扩散模型中提炼 2D 生成先验的 3D 修复方法。左图给定一个使用 3D 高斯溅射和用户定义的掩码表示的场景，我们使用基于个性化扩散模型的分数提炼目标来修复 3D 中缺失的内容。右图我们的方法是通用的，无需任何更改即可应用于其他编辑任务，例如对象插入、修复和稀疏视图重建。 unset unset 摘要： unset unset 神经重建方法正在迅速成为 3D 场景的首选表示，但其有限的可编辑性仍然是一个挑战。在这项工作中，我们提出了一种 3D 场景修复方法——用所需内容连贯地替换重建场景的部分任务。场景修复是一项本质上不适定的任务，因为存在许多可能替换缺失内容的解决方案。因此，好的修复方法不仅应 ………………………………