2024年9月27日,《Science》期刊在线发表题为《猕猴额叶皮层对空间序列信息的工作记忆编程》的研究论文。该研究由中国科学院脑科学与智能技术卓越创新中心(神经科学研究所)王立平研究组完成。通过训练猕猴在工作记忆中完成对空间序列的排序任务,发现了猕猴群体额叶神经元对时序记忆操作的表征与运行计算机制。
对于时序信息的编码、存储、操作和使用是众多高级认知功能的基础。人们日常生活中听到的话语、看见的事物,会以不同的颗粒度进行感知,接着进入工作记忆中短暂存储,而后根据当前目的进行加工处理,比如对言语中句法和语义的下意识理解、对购物金额的加减乘除心算。然而,虽然包括王立平研究组在内的研究人员在前期已经广泛深入探索了时序记忆的存储原理(Xie et al., Science, 2022; Chen et al., Neuron, 2024),但学界对于下游的加工控制神经原理却所知不多。
为了深入研究时序记忆的加工控制机制,研究人员选取了对序列记忆内容的排序作为研究对象。研究人员训练猕猴记忆一段由连续在不同位置闪现的点组成的空间序列(记忆期1),并根据随后出现的规则提示去对该序列进行排序(正向排序或者逆向排序),最后在一定记忆时间(记忆期2)后进行汇报。研究人员利用高通量电极阵列对猕猴的额叶皮层神经元活动进行了记录。
首先,研究人员对规则提示出现前(记忆期1)和规则出现后(记忆期2)群体神经元对工作记忆信号的表征进行了分析。大脑中有数以亿计的神经元在同时发放,其活动强度有高有低,于是,每时每刻的大脑状态可以被一定程度上简化成这个上达亿维空间中的一个点,若是只关注某一特定的时刻(如记忆期),则不同的实验条件下的“点”便在这个空间中组成了纷繁复杂、难以捉摸的几何结构。研究组前期工作表明(Xie et al., Science, 2022),大脑中记忆表征空间序列的几何结构是有规律的——不同次序上的信息被表征在不同的亚平面(或子空间)中,其表征结构忠实反映了外在刺激的结构,而且不同次序所在的子空间彼此正交。
在本研究中,研究人员发现,对空间序列记忆信息进行重新排序时,在记忆期1里不同次序的子空间中的位置信息会从原本的子空间中消失,而后在记忆期2中依据新的顺序将原本的信息放入其对应次序的子空间中——就像两个盒子分别装着红球和绿球,当排序发生后,红绿球一起从自己的盒子中消失,而后又神奇地出现在了对方的盒子中。研究人员进一步通过跨时间解码分析验证了在不同次序所在的子空间中,若不发生排序操作,则各自原本的空间记忆信息随时间保持稳定,而若发生排序,则各自的空间记忆信息在记忆期1到2的过程中发生了交换。通过对于错误试次的分析也表明,若是本不应排序的时候发生了重排,则在对应空间中也能发现这些错误的交换信号。
研究人员进一步发现,在对不同子空间之间的信息进行交换时,每个子空间额外招募了一个临时存储自己信息的新的子空间,每个子空间先把原先内部的记忆信息传递给新的临时子空间,待到自身内部的记忆被清空之后,再将临时子空间中的记忆信号传递给对方,这样便完成了子空间之间记忆信息的交换。研究人员通过临时子空间和次序记忆子空间中信号强度与动力学时间特征的关联分析,证明了找到的临时子空间确实用于存储和交换记忆信号。
最后,研究人员还发现了一个表征规则的子空间。在这个子空间中,不同规则下动力学的轨道有着显著差异,通过解码泛化分析与错误试次的分析,表明该空间与排序过程确实存在关联。研究人员推测,该规则子空间可能是将外界具体的规则信号与内部抽象的动力学轨道进行联系,进而用于交换过程的发起与门控——该空间控制了次序子空间与临时子空间之间的信息流动,使得这些子空间在不同的排序规则下发生不同的动力学过程。
该研究第一次系统地阐释了工作记忆的排序机制。一方面,这种排序机制作为多种智能活动的基本运算之一,不仅仅运用于日常生活中的语言理解、项目规划等方方面面,还可以推广到因果推断、逻辑推理等复杂的认知活动中,对其机理的发现为进一步揭示诸多高级认知功能的神经机制提供了基础。另一方面,研究发现大脑与计算机运算机制有着惊人的相似(如用于信息交换的临时子空间和操作过程),提示了对大脑认知机制的进一步深入研究或许有助于推动未来类脑计算模块的更加智能化、高效化发展。研究中发现的作为中间步骤的临时子空间,尽管在主观上无法被大脑感知,但这些意识下计算的神经基础在物质层面上确实存在,相关神经加工过程在神经活动也能被实际观测,为明确意识的操作定义、揭示意识的生物学基础提供了新的见解。
Let's go
专家点评
蒲慕明
中国科学院脑智卓越中心学术主任
人类成为万物之灵,源于大脑特有的高等智能,使得人类能对外来和内在的信息进行复杂的处理,并做出最佳的行为反应。比如说,我们能将一连串信息中的时间和空间顺序及间隔进行编码,并进一步存储、理解、操纵和提取这些编码的信息。有了这种信息处理能力,我们才能拥有语言、运算和逻辑思维等高等智能。脑科学的终极目标就是要理解大脑的神经网络如何产生这些高等智能;这些智能是在灵长类动物演化过程中逐渐涌现的,而且在非人灵长类上(如猕猴)已有苗头。要理解神经网络的工作原理,我们需要用侵入式的记录方法来观测大脑中大群神经细胞(神经元)在进行高等认知行为时的动态活动,并理解它们的放电规律;但这种侵入式研究在人类大脑尚未能有效地进行。王立平研究组近年来建立了一项基于空间位置序列的学习和记忆的猕猴研究范式,并在猕猴大脑获取了大量神经元集群的相关电活动,这是脑科学的重要进展。他们在一项前年发表在Science上的研究中发现,前额叶神经元集群可以用它们放电的动态变化模式(动态空间的“子空间”)来编码空间序列信息,在序列中的各个相对位置都有其独立的动态子空间。在今天发表的Science论文工作中,他们进一步探讨了这些前额叶神经元集群在学会(存储)了空间序列信息的编码后,如何进一步编码外来的感知指令(正向或反向汇报存储的序列),并依据指令正确地提取即时存储在各个子空间的序列信息,用于启动“顺序列”或“反序列”的行为。有意思的是,他们发现在接收到外来指令后的一个短暂时刻(所谓工作记忆的存储期),前额叶神经元的另外两个(异于编码空间序列信息的)动态子空间编码了正向和反向的指令。这个发现为研究工作记忆(需要进行操作的短期记忆)如何在大脑进行短时程编码,以及如何按照规则加工、提取即时存储的序列信息,指出了一个新的研究方向。
和许多原始创新的工作一样,王立平实验室的发现只是一个起点。他们的工作清晰地说明了:1)在单细胞层面观测高级脑区大群神经元电活动随时间的动态变化,是理解序列学习和工作记忆编码模式的有效途径;2)建立分析大群神经元活动的有效计算范式和创新性理论框架,是描述和理解大群神经元编码规律的关键;3)从描述与认知事件相关的神经元编码范式和规律,到理解在学习和工作记忆过程中感知觉信息如何建立神经元集群活动的编码,以及如何提取编码信息来驱动认知所引导的行为,未来仍有漫长而艰巨的工作。
黄铁军
北京大学计算机学院教授,北京智源人工智能研究院理事长
工作记忆机理是揭示生物智能奥秘的重要突破口。团队在两年前揭示空间序列记忆表征几何结构规律性的基础上,通过对空间序列记忆信息重排序发现了表征子空间的交换机制及临时存储子空间的存在,是理解工作记忆机理的重大进展。与生物神经网络相比,包括大模型在内的人工神经网络的动力学特性相对简单,这一新发现有望促进大模型可解释性研究,并启发大模型新架构的探索。
中国科学院脑科学与智能技术卓越创新中心(神经科学研究所)的博士研究生田拯赫(与中国科学院自动化研究所联合培养)、陈静文和博士后张聪为该研究的共同第一作者,中国科学院自动化研究所徐波教授指导了该项工作,临港国家实验室的闵斌研究员和中国科学院神经科学研究所的王立平研究员为本论文的通讯作者。这项工作是王立平研究组近年来在空间序列工作记忆方向一系列工作延续,如Current Biology (2018),Journal of Neuroscience (2022), Science (2022),Neuron (2024)。该工作获得国家自然科学基金委、中国科学院、科技部和上海市的经费资助。