《Language, Cognition and Neuroscience》：The recent-role preference in situated thematic-role prediction
编辑推荐：
本研究通过代理识别任务结合同步鼠标光标追踪，考察了视觉场景对口语句子题元角色指派的影响。被试先观看场景图，再听辨德语主语提取与宾语提取关系从句（暗示与图示相同或相反的动作方向，如“Das ist der Koch, der/den die Braut verf
本研究通过代理识别任务结合同步鼠标光标追踪，考察了视觉场景对口语句子题元角色指派的影响。被试先观看场景图，再听辨德语主语提取与宾语提取关系从句（暗示与图示相同或相反的动作方向，如“Das ist der Koch, der/den die Braut verfolgt”意为“这是那位厨师，他追新娘/新娘追的那位厨师”）。在被试识别句子施事（agent）时记录鼠标轨迹。朝向首提指称物的轨迹复制了基于词序的“施事优先”（agent-first）解释的预测时间进程。早期轨迹偏移显示，被试将场景施事视为最可能的句子施事，而当场景描绘相反动作方向时，施事识别更慢。这些发现支持了视觉线索对预测性题元角色指派的贡献，揭示了一种“近期角色”（recent-role）偏好——即被注视过的角色被认为最有可能在时序协调的话语中重现。
研究背景与问题提出
在句子理解中，题元关系（“谁对谁做什么”）的抽取依赖多种线索。视觉世界范式（visual-world paradigm, VWP）研究表明，语言加工与视觉注意分配存在紧密时间关联，当前句意解释会对输入延续产生预测；其中线性词序带来的“施事优先偏向”（agent-first bias）在德语歧义词序中表现尤为稳定。已有“协调互动账户”（Coordinated Interplay Account, CIA）主张语言与视觉线索在working memory中循环整合，但VWP中视觉显示通常与口语材料题元角色一致（congruent），难以分离视觉与语言线索各自的预测贡献，也难回答在无视觉支持时句子本身预测性有多强。此外，近期事件偏好（recent-event preference）研究提示，被试倾向回看刚注视过的指称物，这可能混杂了“近期指称物偏好”与“近期角色偏好”。因此，有必要在任务本身不依赖场景角色信息时，检验被注视过的题元角色是否会提高其在后续时序协调句子中重现的主观概率。
研究目的与总体设计
研究人员采用鼠标追踪（mouse tracking）范式，在代理识别任务中向德语母语者先后呈现：（1）含两个角色的视觉场景（Playmobil角色执行简单及物动作）；（2）口语关系从句，主语提取（SO, 施事优先）或宾语提取（OS, 受事优先），关系代词用阳性主格der或宾格den消除歧义，句首NP1为阳性名词（Koch等），NP2为阴性名词（Braut）。场景与句子题元关系或一致（congruent）或相反（incongruent）。被试先在图中点选动作执行者，再听句过程中将鼠标从底部按钮移向屏幕上方两角肖像之一以指认句子施事。因变量为反应准确率、总时长（RT）及每5–15 ms采样的光标x/y坐标。最终51名母语者数据进入分析（原105名，依技术故障与准确率门槛排除）。
主要技术方法概括
研究人员依托E-Prime脚本与E-PrimeGO远程施测，采集德语母语大学生样本（N=51，19–39岁，右利手，正常视听）。刺激为24个目标句及填充句，口语刺激以关系代词为锚定在试次起始后1500 ms呈现，NP1限定词约790 ms呈现；场景图为白底双角色及物动作照，一致/相反仅反转动作方向。鼠标轨迹按正确响应重对齐至左侧，x坐标作为竞争指标，按25 ms分箱；采用聚类置换检验（cluster-based permutation, CBP）判存在性，非参数bootstrap（含Minor式按被试重采样作稳健性检验）估测差异起始时间；离线RT做自然对数变换线性混合模型，准确率做二项logistic混合模型，随机效应含被试截距与Clause Structure斜率。
研究结果
3.1 离线数据（Off-line data）
线性混合模型显示：OS相对SO反应更慢（b=0.10, p<.001）且更不准确（b=?2.43, p=.006），复现施事优先偏向被格标记推翻时的加工困难；不一致场景（vs一致）使RT显著变慢（b=0.03, p=.009），但准确率无显著变化（p=.277）；交互项不显著。说明视觉角色一致性主要影响时间进程而非最终指认对错。
3.2 轨迹数据（Trajectory data）
CBP显示在1500 ms关系代词前SO与OS轨迹无差异；全段差异显著段为2125–3225 ms（OS终态与SO相反），bootstrap估测分叉始于2150 ms（CI 2100–2200）。左对齐正确响应后，OS在1300–3225 ms较SO更多偏向错误侧（患者），bootstrap起始1325 ms（CI 1275–1425），表明NP1作为施事被预测性采纳，早于消歧代词。场景一致性效应则早得多：CBP全段25–3200 ms显著（CMS=635, p<.001），bootstrap起始675 ms（CI 475–950），即不一致场景使光标更早偏向图中施事（若图中施事恰为句子受事则为错误侧）。收敛/竞争比较（一致SO+不一致OS vs 不一致SO+一致OS）未现显著簇（p=.313），即两种偏好是否同向不额外改变轨迹形态。
讨论与结论翻译
本研究用代理识别+鼠标追踪考察视觉场景是否及何时影响题元角色预测，假设并被支持的“近期角色偏好”指：被临时注视过的题元角色，在时序协调话语中更易被重新指派给同一指称物。结果上，句子—场景一致性在试次起始后即影响轨迹偏移并使总识别变慢；词序（SO/OS）效应确认线性顺序可作预测线索，OS在消歧代词后持续吸引向未获格许可的响应，且比SO更慢更错。两偏好收敛并未产生额外轨迹差异，可能受NP1提及到消歧间时距短限制。不一致场景减慢识别与Zona & Felser (2023)、Zona & Reifegerste (2024)一致，但本任务未现准确率差异，或因本任务为句中显式指认、前后相继呈现，记忆负荷低于既往同时呈现+事后隐式提问设计。结果扩展CIA：题元角色（非仅指称物与动作）跨视觉—语言被共同索引并相互核验，即使任务不需场景角色信息亦如此；亦兼容Kuperberg双通路预测机制中视觉 priming 对语言预测的干扰。局限含远程施测数据流失、NP1 onset未严格锁时、试次起始即动鼠标属任务要求、阳性NP1施事与“男性偏好”混淆、NP1提及本身可能引发注意偏移等。综上，近期角色偏好在鼠标轨迹竞争指标与离线时长中均获支持，表明视觉传达的题元角色可在时序协调句子中被预测性重新指派给同一指称物，从而参与题元角色预测的时间进程。
