中国科学院脑科学与智能技术卓越创新中心常乐研究组在《自然-通讯》(Nature Communications)上,发表了题为High-dimensional topographic organization of visual features in the primate temporal lobe的研究论文。该研究结合功能核磁共振、电生理记录和深度学习等技术手段,系统解析了猕猴和人类被试高级视觉区的特征选择性和拓扑组织规律,为探究视觉系统的演化和发育、构建类脑的视觉加工模型奠定了重要基础。
物体识别是人类从外界获取信息的重要一环。灵长类负责物体识别的脑区是下颞叶皮层。以往研究表明,灵长类下颞叶不是一个均一的结构,而是包括多个加工特定物体种类或物体特征的子区域,如加工面孔信息的面孔脑区、加工躯干信息的躯干脑区和加工视觉场景的场景脑区。前人针对下颞叶皮层的功能分区已开展了较多研究,但仍有一些重要问题尚未解答。例如,目前的功能分区不能连续覆盖整个下颞叶,剩余的脑区的功能尚不清楚;既往研究主要在猕猴或者人类被试单独进行,两个物种下颞叶皮层的分区是否存在明显差异尚不清楚。
为了回答上述问题,科研人员需要找到一组丰富的视觉特征对下颞叶皮层的选择性进行系统刻画。前人工作显示,深度卷积网络的深层单元可较好地解释下颞叶神经元的反应。基于这一发现,常乐研究组将网络单元对20万张自然图片的反应降维得到25个视觉特征(图1a)。利用功能核磁共振实验,研究组获得了猕猴和人类被试颞叶皮层不同子区对这25个特征的选择性(图1b)。
常乐研究组系统比较了功能核磁实验获得的神经选择性和视觉特征(图2a),在与前人研究取得联系的基础上,发现了之前未报道的神经特征,并定位了编码该特征的脑区。进一步,该研究组通过电生理实验验证了核磁实验的结果(图2b-e)。
同时,科研人员对颞叶皮层特征分布的拓扑组织规律进行了系统和定量的研究,发现了猕猴颞叶存在一对方向相互垂直但空间尺度不同的视觉特征梯度,而这种拓扑组织方式不能被一类近期提出的、用于解释下颞叶拓扑结构的模型所复现,为这一类类脑智能的发展提供了新的约束。此外,该工作针对人类被试进行了同样的核磁实验发现:人类和猕猴相比,虽然颞叶总体结构相似但是在特征选择性和拓扑组织规律上有较大不同,尤其体现在对无生命物体的编码,人类编码明显更强;相比猕猴,人类颞叶皮层拓扑组织的规律性更差,猕猴颞叶中相互正交的特征梯度在人类大脑并不明显(图2f-h)。研究推测,这两个物种间的差异可能是由于人类需要识别各种各样的人造物体和符号。这一需求扩大了加工无生命物体的脑区,并打乱了原本有规律的拓扑组织结构。
该研究刻画了灵长类高级视觉区的信息表征地图,为探索物体视觉的神经机制奠定了基础。过去,该领域对特征选择性的研究高度定量,使用了各种复杂、先进的计算模型;相对而言,对其拓扑组织规律是定性描述为主。该工作则采用精细、定量的方式对这一问题开展研究,揭示了不同物种之间(猕猴和人类)和不同系统之间(大脑和人工神经网络)的差异,为设计具有类脑结构的人工智能提供了依据。该研究通过构建视觉信息的大脑地图,为脑图谱的研究提供了可靠的功能参考。
研究工作得到中国科学院、科学技术部、国家自然科学基金委员会和上海市的资助,并获得脑智卓越中心神经影像中心的技术支持。
图1.(a)特征提取。AlexNet第7层4096个单元对20万张自然图片的反应,经过ICA降维得到25个特征。(b)猕猴左侧颞叶皮层对25个特征的选择性地图。红色和蓝色分别显示对特征正向和负向的偏好。
图2.
(a)猕猴颞叶皮层的特征选择性与21个已知视觉特征的关系。数值越高代表两者相似性越强。
(b)猕猴颞叶未知脑区偏好特征的代表性图片。Positive为偏好图片,Negative为不偏好图片。
(c)通过比较b中两组图片定位了一个脑区,并进行电生理记录,黑线为记录电极。
(d)该区域中一个神经元对两组图片的反应。
(e)该区域的群体结果(紫线)。作为对照,定位并记录了一个对Negative刺激反应更强的脑区,其群体反应如绿线所示。
(f)猕猴颞叶偏好三个重要特征的子脑区以非常规则的方式排布:绿色、蓝色条带交替,两侧为红色区域。三种不同颜色对应三个重要特征。
(g)人类大脑颞叶呈现类似排布,但规律性较猕猴差很多。
(h)猕猴和人类颞叶皮层拓扑组织规律性的定量比较。上图为特征梯度的方向性,下图为不同梯度的正交性。两个指标都显示猕猴颞叶的规律性更强。