在口语识别研究的视觉世界研究中,语言-视觉机制与名称激活的作用
《Brain Organoid and Systems Neuroscience Journal》:Linguistic-visual routines and name activation in visual world studies of spoken word recognition
【字体:
大
中
小
】
时间:2026年04月19日
来源:Brain Organoid and Systems Neuroscience Journal
编辑推荐:
本研究通过视觉世界范式探讨口语词识别中物体名称检索的作用,使用具有双重名称(如couch/sofa)的刺激材料,结合眼动实验和神经建模,发现仅在遮挡同义词物体时出现名称典型性效应,支持语言-视觉常规假说,即眼动由语言激活的视觉表征和动作程序驱动,而非直接名称检索。
在语言与视觉相互作用的认知研究中,视觉世界范式(Visual World Paradigm, VWP)长期存在争议。美国罗切斯特大学的研究团队通过创新实验设计,对"名称检索"假说进行系统性检验,提出了更具解释力的"语言-视觉常规"理论框架。
实验核心创新在于采用具有双重命名特征(如"沙发"与"躺椅"的同一物体)的视觉刺激材料。这种设计能有效区分两种假说:一种是名称被主动检索并存储于工作记忆后指导视觉搜索,另一种是语言刺激直接激活视觉表征框架。
研究包含三个关键实验:首次标准VWP实验显示,当呈现具有双重命名的物体时,名称典型性(如"沙发"比"躺椅"更常用)对眼动模式影响不显著,这与名称检索假说预测的强关联效应形成对比。后续实验通过动态视觉掩蔽(masking)技术,发现仅在遮挡具有语义关联的名称同源物体时(如遮挡"沙发"物体后呈现"躺椅"),才会出现符合名称检索假说的眼动延迟和群体效应增强现象。而遮挡与名称无关的干扰物体时,眼动模式未发生显著变化。
通过构建归一化循环本地吸引子网络(Normalized Recurrence Localist Attractor Networks)的模拟系统,研究团队展示了不同理论框架的预测差异:常规理论下,语言刺激激活物体概念框架,眼动系统通过语义相似性直接匹配视觉特征;而名称检索理论预测会形成显式名称表征,导致与语义框架分离的眼动模式。模拟结果与实际实验数据高度吻合,特别是当被试在视觉搜索前经历短暂的记忆维持压力(如物体被遮挡)时,常规理论能更准确解释眼动延迟的临界条件。
研究进一步通过注意力引导实验发现,单纯视觉提示(如高亮显示)无法触发名称检索效应,这排除了常规理论中存在隐性名称激活的可能。作者特别指出,传统VWP实验中使用的孤立命名刺激(如直接展示"沙发"的图片)可能隐含了工作记忆的预设负荷,而本研究通过动态掩蔽设计,有效分离了视觉搜索的语义驱动机制与名称检索的干扰机制。
该研究对语言加工理论产生重要启示:在跨模态信息整合过程中,语言刺激更倾向于激活物体概念的完整视觉表征框架(包括形状、材质、空间关系等低层特征),而非特定词汇名称的显式检索。这种理论转变有助于解释为何在多数VWP研究中观察到的眼动模式变化,主要源于语义框架的激活强度差异,而非具体词汇名称的加工。
研究同时揭示了工作记忆的双重作用机制:当被试预期需要维持物体信息(如实验2中被遮挡的物体)时,会触发名称的潜在激活;但在自然观察场景(实验3中无关物体的遮挡)中,这种激活不会影响视觉搜索过程。这表明名称检索并非普遍存在的自动过程,而是特定认知需求下的激活策略。
该成果对认知建模具有重要指导意义。现有基于名称检索的模型难以解释为何在复杂视觉场景中(如多个同义词物体共存),眼动模式仍能准确反映语义框架的激活程度。常规理论通过建立语言单元与视觉表征的直接映射,为多模态整合提供了更简洁的解释路径。后续研究建议可结合眼动追踪与脑电信号,进一步区分语义框架激活与具体名称加工的神经表征差异。
这项研究通过精心设计的实验变体和理论模拟,有效剥离了名称检索的潜在干扰因素,为理解自然语言引导的视觉搜索机制提供了关键证据。其方法论创新——动态掩蔽设计与归一化网络模拟的结合——为认知神经科学提供了新的范式参考。
生物通微信公众号
生物通新浪微博
今日动态 |
人才市场 |
新技术专栏 |
中国科学人 |
云展台 |
BioHot |
云讲堂直播 |
会展中心 |
特价专栏 |
技术快讯 |
免费试用
版权所有 生物通
Copyright© eBiotrade.com, All Rights Reserved
联系信箱:
粤ICP备09063491号