华科等最新工作SA4D：首个基于4D高斯模型来分割4D数字世界中任何事物的框架

文章预览

点击下方 卡片 ，关注“ 自动驾驶之星 ” 这里有一群奋斗在自动驾驶 & 座舱量产第一线的小伙伴等你加入 写在前面 华科 & 华为 & 上交团队最新的工作《Segment Any 4D Gaussians》，主要应用于4D动态场景的分割任务，结合4DGS效果很惊艳~ 建模、理解和重建现实世界在XR/VR中至关重要。最近3DGS方法在建模和理解3D场景方面取得了显著成功。同样，各种4D表示已经证明了捕捉4D世界动态的能力。然而，很少有研究关注4D表示中的分割。本文提出了Segment Any 4D Gaussians（SA4D），这是基于4D Gaussian分割4D数字世界中anything的首批框架之一。在SA4D中，引入了一个高效的时间identity特征场来处理高斯伪影，有可能从噪声和稀疏输入中学习精确的identity特征。此外，还提出了一种4D分割细化过程来消除伪影。我们的SA4D在4D高斯中在几秒钟内实现了精确、高质量的分割，并显示 ………………………………