类脑研究

来源：科学中国人, 2023, (05): 13.

<正>神经计算与脑机交互团队的多模态神经信息编解码研究中国科学院自动化研究所神经计算与脑机交互团队何晖光等人将大脑、视觉和语言知识相结合，通过多模态学习实现了从人类脑活动中零样本地解码视觉新类别。相关成果发表于《IEEE模式分析与机器智能汇刊》（IEEETPAMI）。文章提出“脑-图-文”三模态联合学习框架，在使用实际呈现的视觉语义特征的同时，加入与视觉目标对象相关的更丰富的语言语义特征，以更好地解码脑信号。