CVPR 2024 | 基于接触信息微调的Transformer实现人-物联合重建

文章预览

该工作提出了一种 联合重建人与物体 的方法，有效地利用了人与物体之间的接触信息，该重建方法可在虚拟现实场景、具身智能等应用场景下发挥重要作用。 论文标题： Joint Reconstruction of 3D Human and Object via Contact-Based Refinement Transformer  论文链接： https://arxiv.org/abs/2404.04819 项目主页： https://github.com/dqj5182/CONTHO_RELEASE 一、引言 3D人体与物体的联合重建在AR/VR沉浸式体验和机器人智能操作等应用上发挥重要作用。在这项任务中，人与物体的接触位置是一个重要信息，但以往工作将接触位置预测和人-物三维重建当作两个独立的任务，有一部分工作根据输入图像预测了人体表面与物体的接触点集，但没有重建人和物体；还有一部分重建了人和物体，但没有充分提取和利用接触信息来协助重建。 本次导读论文将这两部分任务整合起来，集成到了一个统一的 ………………………………