入选NeurIPS 2024！中科院团队提出非侵入式大脑解码新框架，为脑机接口和认知模型发展奠定基础

文章预览

作者：哇塞 编辑：十九 中国科学院自动化研究所团队创新性地设计了一种多模态集成框架，该框架融合 fMRI 特征提取器与大语言模型，可解决大脑活动的视觉重建问题， 增强脑信号解码能力，实现脑信号描述、复杂推理、概念定位和视觉重建等任务。 你能想象自己看到、想到，甚至是梦到的画面被可视化出来吗？这并非天马行空的想象，早在 2008 年，美国加州伯克利分校神经系统科学家 Jack Gallant 就在 Nature 中提出了他的假设，他们利用功能磁共振成像 (functional Magnetic Resonance Imaging, fMRI) ——一种非侵入式脑功能成像技术「读取」受试者大脑视觉皮层的活动，然后通过视觉重建来可视化呈现受试者所看到画面， 打响了世界范围内科学家解码大脑的号令枪。 相比侵入性脑解码技术，以 fMRI 为代表的非侵入性脑解码技术以更简单、更安全的方式实现 ………………………………