颠覆认知 | 北大领衔发布《文生3D全景世界大模型》，元宇宙、VR等行业将“重焕新生”!

文章预览

打造一个有温度、有趣味、专业的全栈式AI 交流社区， 用心写好每一篇文章！ “   随着2D生成和3D表示领域的快速发展，3D内容生成已成为计算机视觉领域的一项重要任务。文本提示可以直观、全面地描述用户的需求，因此，零样本文本驱动的3D场景生成将降低新用户的进入门槛，并节省大量的3D建模人工工作量。 这使得它在元宇宙、虚拟现实和电影制作等行业具有广阔的应用前景。 然而，与2D领域中大量的成对文本到图像数据不同，目前成对文本到3D数据非常稀缺。创建3D数据集通常需要大量的人力和物力资源，这导致了从用户提示直接训练3D内容生成的挑战。 本文引入了HoloDreamer，这是一个利用文本生成3D全景世界的框架，它首先生成高清全景作为完整3D场景的整体初始化，然后利用3D高斯散斑（3D-GS）快速重建3D场景，从而促进创建视图一致和完 ………………………………