专栏名称: CreateAMind
ALLinCreateAMind.AGI.top , 前沿AGI技术探索,论文跟进,复现验证,落地实验。 鼓励新思想的探讨及验证等。 探索比大模型更优的智能模型。
今天看啥  ›  专栏  ›  CreateAMind

H3DFact: 因子分解五个数量级提升的内存计算,计算密度提高了5.5倍,能效提高了1.2倍,硅面积减少了5.9倍

CreateAMind  · 公众号  ·  · 2024-10-12 15:07

文章预览

H3DFact: Heterogeneous 3D Integrated CIM for Factorization with Holographic Perceptual Representations H3DFact:利用全息感知表示进行因子分解的异构3D集成CIM https://arxiv.org/pdf/2404.04173 摘要—— 解开各种感官信号的属性是类人感知和推理的核心,也是高级认知和神经符号AI系统的关键任务。一种优雅的方法是通过受大脑启发的向量符号架构中的高维全息向量来表示这种复杂的分解。然而,全息分解涉及高维矩阵-向量乘法的迭代计算,并存在不收敛问题。在本文中,我们提出了H3DFACT,一种异构3D集成内存计算引擎,能够高效地分解高维全息表示。H3DFACT利用全息向量的计算-叠加能力和基于忆阻器的3D内存计算的内在随机性。在大规模分解和感知问题上评估,H3DFACT在分解精度和操作容量方面表现出 高达五个数量级的优越能力,与等容量的2D设计相比,计算密度提高了5.5倍,能效 ………………………………

原文地址:访问原文地址
快照地址: 访问文章快照
总结与预览地址:访问总结与预览