听觉语义信息对视觉全局-局部加工的双阶段调控机制：基于多感官整合的HDDM模型研究

本研究通过创新性地结合层次字母识别任务与听觉刺激（纯音/语义一致-不一致语音），首次揭示了听觉信息对视觉全局-局部加工的双阶段调控机制。采用层次漂移扩散模型（HDDM）发现：语义冲突语音通过注意力捕获（perceptual encoding阶段延迟）和决策干扰（evidence accumulation受损）分别削弱全局优势效应（global advantage effect）和全局干扰效应（global interference effect），为多感官整合（multisensory integration）和内容-层级绑定理论（CLB）提供了新证据。

　　

Highlight

本研究通过两个实验系统探讨了听觉刺激如何影响视觉层次加工：实验1采用经典层次字母范式，实验2通过增大视觉角度消除全局优势效应。结果发现语义冲突语音能特异性削弱全局优势效应，并在决策阶段（decision formation）显著干扰冲突解决。HDDM模型揭示纯音仅影响知觉编码阶段（perceptual encoding），而语义信息会同时调控编码与决策双阶段。

General Discussion

本研究首次证明听觉语义信息通过不同机制动态调控视觉层次加工：1）在知觉编码阶段，语义冲突语音通过注意力捕获（attentional capture）延迟局部目标处理；2）在决策阶段，语义不一致性会破坏证据累积（evidence accumulation），导致冲突解决效率下降。这种双阶段分离效应为多感官整合理论提供了重要补充——听觉输入不仅能调节早期视觉特征绑定（feature binding），还能改变高层次决策动态（decision dynamics）。

实验创新性体现在：1）通过HDDM量化了传统RT指标无法捕捉的认知加工阶段；2）首次在层次加工中分离语义特异性（semantic-specific）与模态通用（modality-general）效应。这些发现对理解临床场景（如自闭症的多感官整合异常）具有启示意义，未来研究可进一步探索跨模态干扰的神经振荡机制。

CRediT Authorship Contribution Statement

唐晓雨：研究设计/资金获取/论文撰写；刘浩明：数据分析/可视化/初稿撰写；张鹤鸣：模型验证/软件实现；贺宇峰：实验资源/数据采集；崔新忠：技术指导；刘万龙：实验执行；孙燕：文献支持；孙佳莹：数据整理；傅晶：概念讨论。

Declaration of Competing Interest

作者声明无利益冲突。

Acknowledgements

感谢审稿专家对理论框架的重要建议，以及参与实验的全体学生。本研究受辽宁省兴辽英才计划（XLYC2403186）等基金支持。