交互式沟通中视觉-语言双向转换的神经机制

《Human Brain Mapping》:Neural Mechanisms of Bidirectional Visuo-Linguistic Transformation in Interactive Communication

【字体: 大 中 小 】 时间:2026年05月17日 来源:Human Brain Mapping 3.3

编辑推荐:

  人类沟通需要灵活地将视觉输入转化为言语描述,并从语言重构心理意象,然而社交互动中这些双向转换的神经机制仍不明确。研究人员采用超扫描功能磁共振成像(hyperscanning fMRI)与角色切换沟通任务,探究个体在互动情境中交替将视觉刺激编码为语言、从语言解码

  
人类沟通需要灵活地将视觉输入转化为言语描述,并从语言重构心理意象,然而社交互动中这些双向转换的神经机制仍不明确。研究人员采用超扫描功能磁共振成像(hyperscanning fMRI)与角色切换沟通任务,探究个体在互动情境中交替将视觉刺激编码为语言、从语言解码为心理意象的过程。全脑分析识别出参与这些过程的脑区,基于此选取左侧额下回(IFG)、梭状回面孔区(FFA)与顶内沟(IPS)三个关键区域,应用动态因果建模(DCM)检验其有效连接。DCM结果显示,IFG、FFA与IPS之间的连接在支持角色依赖的自上而下与自下而上信息流切换时发生动态重配置。这些发现揭示了一种整合视觉与语言信息的灵活协调神经架构,为理解沟通源于感知系统与语言系统的相互作用提供了新见解。
该研究发表于《Human Brain Mapping》,针对人类交互中视觉-语言双向转换的神经机制空白展开探索。现有研究多孤立考察语言产出与视觉表象的神经基础,未明确自然沟通里发送者与接收者角色快速切换时的双向加工机制。研究人员假设这种灵活性依赖语义控制网络(SCN)的动态调控,因此设计角色切换范式,结合多模态神经影像技术解析其神经架构与连接模式。
关键技术方法包括:招募46名右利手健康参与者组成23对双人组,采用双核磁共振扫描仪同步采集的超扫描功能磁共振成像(hyperscanning fMRI)技术;设计包含知晓期、言语倾听期、观看-表象期与四选一 forced choice(4AFC)反应的面对面介绍-回应任务,系统操纵面部特征线索数量(2条vs5条)与刺激类别(人脸vs乱码马赛克对照);采用AFNI、FSL与MATLAB进行功能影像预处理,通过一般线性模型(GLM)进行单变量激活分析,并基于左侧额下回(IFG)、左侧顶内沟(lIPS)与左侧梭状回面孔区(lFFA)三个感兴趣区(ROI)构建全连接动态因果建模(DCM)模型,采用参数经验贝叶斯(PEB)框架进行组水平有效连接推断。
研究结果如下:
3.1 行为表现:重复测量方差分析显示,人脸条件下5条线索的正确率显著高于2条线索,而对照条件无此差异,验证了信息量操纵的有效性。
3.2 功能磁共振激活结果:
3.2.1 言语化与可视化的共享与特异激活:二者共同激活双侧梭状回(FuG)、左侧额下回(IFG)、左侧顶叶下部与左侧颞中回(MTG);言语化特异激活双侧纹状与前纹外皮质(V1、V3、V4)、双侧前辅助运动区(pre-SMA)、顶上小叶(SPL)与顶内沟(IPS)等;可视化特异激活左侧颞上回(STG)、左侧顶下小叶/角回(IPL/AG)、右侧杏仁核与双侧楔前叶等。
3.2.2 信息丰富度对激活的调制:两种任务均显示信息量增加时左侧IPS、左侧IFG与左侧pre-SMA激活增强;言语化额外招募双侧FuG(含FFA与枕叶面孔区OFA),可视化额外招募V1、双侧SPL/楔前叶与右侧额中回(MFG)。
3.2.3 脑-行为关联:左侧FuG的面选择性激活强度与接收者的任务正确率呈正相关;可视化过程中初级视皮层与右侧MFG的激活增强程度与个体的视觉优势认知风格呈正相关。
3.3 有效连接结果:
3.3.1 言语化DCM结果:基线连接显示lFFA向lIPS与lIFG传递兴奋信号,接收来自lIFG的抑制反馈与来自lIPS的兴奋反馈;2条线索条件下lFFA向lIPS与lIFG的兴奋驱动更强,5条线索条件下lIPS对lFFA转为抑制调制,lIPS与lIFG间呈相互抑制。
3.3.2 可视化DCM结果:基线连接显示lFFA对lIPS与lIFG施加抑制效应,lIFG与lIPS向另外两个节点传递兴奋效应;两种信息量条件下均存在lIFG向lIPS的兴奋调制与lIPS向lFFA的抑制调制,5条线索额外出现lIPS向lIFG的兴奋调制。
3.3.3 两类DCM的组水平比较:言语化基线连接中lIPS自抑制减弱且向lFFA的兴奋连接更强,lFFA与lIFG的连接极性在两类任务中相反;调制效应上,言语化表现为lFFA向lIFG与lIPS的兴奋调制,可视化表现为lIPS向lFFA的抑制调制与向lIFG的兴奋调制。
讨论与结论部分指出,该研究首次在自然交互框架下揭示视觉-语言双向转换的神经机制:左侧IFG、IPS与FFA构成共享的核心接口,信息复杂度通过该网络的激活缩放调节;言语化遵循感知解析模式,以自下而上视觉驱动为主,lFFA向额顶区的兴奋连接占主导;可视化遵循建构组装模式,以自上而下预测为主,额顶区向lFFA的兴奋连接与lFFA向额顶区的抑制连接共存;顶内沟(IPS)根据任务角色动态调整对视觉皮层的门控作用,实现同一网络在感知编码与内部重构间的灵活切换。这一发现为理解人类多模态沟通的灵活神经基础提供了实证框架,也为语义控制网络的功能可塑性提供了新的证据。
相关新闻
生物通微信公众号
微信
新浪微博

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号