SINGAPO：对象中关节部分的单图像控制生成

文章预览

来源：投稿  作者：橡皮 编辑：学姐 论文链接：https://arxiv.org/abs/2410.16499 项目主页：https://3dlg-hcvc.github.io/singapo 摘要： 我们解决了从单个图像创建家用铰接式物体的 3D 资产的挑战。关于铰接式物体创建的先前工作要么需要多视图多状态输入，要么仅允许对生成过程进行粗略控制。这些限制阻碍了铰接式物体建模的可扩展性和实用性。在这项工作中，我们提出了一种从单个图像生成铰接式物体的方法。从任意视图观察处于静止状态的物体，我们的方法会生成与输入图像在视觉上一致的铰接式物体。为了捕捉物体的单一视图造成的部分形状和运动的模糊性，我们设计了一个扩散模型，该模型可以学习物体在几何和运动学方面的合理变化。为了解决在多个领域中生成具有属性的结构化数据的复杂性，我们设计了一个管道，以从粗到细的方式从高级结构 ………………………………