近日,中国科学院自动化研究所自然语言处理研究组正式发布了目前国际上规模最大、包含信息最丰富的多模态同步语言神经影像数据集。我们的大脑究竟怎样调动各脑区去理解语言?不同脑区之间如何协同工作?对于这些问题,该数据集都能提供研究支持。
大脑在加工语言时,需要实时调动多个脑区的神经元进行协同工作。构建高时空分辨率的神经影像数据,能帮助我们更好地了解各个脑区以及脑区之间的协同合作。但当前已有的开源数据主要针对英文采集,只包括单一模态的神经影像数据且规模有限,无法更全面深入地探索大脑语言加工机制。
为突破上述问题,研究团队邀请了12名被试者收听时长约6小时的故事,收集、采集、整理他们的功能核磁共振、脑磁图、扩散磁共振成像和静息态核磁共振等数据,故事材料由人工标注了句法结构树,计算了文本中每个词汇对应的音频时间点、词频等,从而形成了当前国际上最大规模用于脑语言处理机制研究的多模态同步神经影像数据集,已覆盖近万个汉语词汇,将为全方位研究大脑在真实场景下理解词汇、短语和句子时如何调动不同脑区,以及不同脑区之间如何协同工作等科学问题提供重要支撑。