《European Journal of Neuroscience》:Game-Based Foreign-Language Speech Rehearsal Improves Pitch Processing Beyond Speech Domain
编辑推荐:
摘 要:训练新技能时,若所学能力能泛化至未经训练的新项目则更为有益。本研究探讨基于游戏的第二语言(L2)语音及词汇训练是否影响对未经训练声音的加工,特别关注非言语(non-speech)声音的基频(pitch/F0)加工。37名学龄儿童参与纵向研究,设2~3个
摘 要:训练新技能时,若所学能力能泛化至未经训练的新项目则更为有益。本研究探讨基于游戏的第二语言(L2)语音及词汇训练是否影响对未经训练声音的加工,特别关注非言语(non-speech)声音的基频(pitch/F0)加工。37名学龄儿童参与纵向研究,设2~3个测量时间点,采用脑电图(EEG)记录失匹配负波(mismatch negativity, MMN)反应。治疗组(treatment group)在第1与第2次测量间接受4~5周基于游戏的L2语音训练;延迟治疗组(delayed-treatment group)在第1与第2次测量间等待4~5周(无干预),第2次测量后接受同等游戏训练,效果于第3次测量评估。结果显示MMN峰值波幅随测量时点升高;治疗组经过游戏训练后MMN潜伏期(latency)缩短,而延迟治疗组在同时间段内MMN潜伏期延长,延迟治疗组接受训练后MMN潜伏期同样缩短。该结果表明二语(L2)语音训练的效果可泛化至未经训练的非言语声音加工,所观察到的音高加工能力提升可能源于游戏训练所针对的音高知觉与语音技能(phonological skills)之间的联系,此外游戏化训练方式本身也可能促成MMN潜伏期的缩短。综上,二语语音训练可增强大脑对未经训练听觉刺激的神经性加工,证实存在跨域听觉可塑性(cross-domain auditory plasticity)。
论文解读:《Game-Based Foreign-Language Speech Rehearsal Improves Pitch Processing Beyond Speech Domain》发表于《European Journal of Neuroscience》
一、研究背景与目的
已有二语(L2)语音知觉与发音模仿(articulatory rehearsal)训练研究多关注特定语音对比的辨别学习能否泛化至同属言语域中未训练过的词汇、说话人或新的语音语境,但极少探讨此类训练能否泛化至未经训练的声学特征乃至非言语(non-speech)刺激。部分研究显示语音训练可泛化至同类但未训练过的语音对比(如VOT差异),被动暴露于带调语言可调制言语及模拟声调非言语刺激的失匹配负波(mismatch negativity, MMN),但训练特征与测试特征相同(均为F0轮廓)。目前尚不清楚以扩展语音系统(phonological system)为目标的L2主动发音训练,是否能提升跨域——即非言语声音——的音高(pitch/F0)加工能力。以往行为研究受儿童注意力波动影响大,且前人研究发现音高加工与语音意识(phonological awareness)、语音技能相关联,主动L2发音训练还可能通过听觉—运动映射(auditory–motor mapping)引发广泛听觉可塑性。因此研究人员假设,基于游戏的L2语音及词汇模仿训练可改善儿童对非言语谐波纯音频率(音高)变化的自动神经加工,表现为MMN潜伏期缩短,体现跨域听觉可塑性。
二、主要关键技术方法概述
研究人员招募芬兰语为母语、无神经发育及听力障碍的学龄儿童37名(平均年龄9岁6个月,男18名女19名),分为治疗组(n=15)与延迟治疗组(n=22)。所有被试完成至少两次EEG测量,延迟治疗组增加第三次测量。干预为在家使用"SIAK(Say It Again, Kid!)"二语英语单词发音游戏(听母语及英语范读→跟读→回放自评+自动语音识别ASR评分反馈),持续4~5周。EEG使用BioSemi ActiveTwo 64导联系统,以鼻尖为在线参考,乳突重参考,记录被动oddball范式下对非言语谐波标准音(500 Hz F0, 50 ms)与频率偏差音(550 Hz F0)诱发的ERP,提取deviant减standard差异波,在前额—中央区(ROI: F3, Fz, F4, FC3, FCz, FC4, C3, Cz, C4)测MMN峰值波幅与潜伏期。统计采用混合设计方差分析(ANOVA),组间因素为分组,重复测量因素为测试时点,延迟治疗组单独做三时点重复测量ANOVA,并做游戏时长与MMN变化量的Pearson相关及事后灵敏度分析。
三、研究结果
3 Results(结果)
MMN波幅在第二次测量时较第一次显著增大(主效应显著,p<0.001, partial η2=0.29),但组×时点交互不显著(p=0.52),说明波幅增大在两组均有发生,可能源于重复测量的测试—再测效应(test–retest effect)。MMN潜伏期组×时点交互显著(F(1,35)=38.42, p<0.001, partial η2=0.52):治疗组MMN潜伏期由第1次216 ms缩短至第2次174 ms(p<0.001, Cohen's d=-1.67);延迟治疗组未经训练前第1至第2次测量潜伏期由188 ms延长至203 ms(p=0.013, Cohen's d=0.53)。延迟治疗组接受游戏训练后第3次测量MMN潜伏期缩短至174 ms,显著短于第1次(p=0.042)和第2次(p<0.001),而波幅在三时点主效应显著(p=0.023)但两两比较未达显著。游戏总时长与MMN波幅或潜伏期变化量均无显著相关(p>0.6)。以上表明只有接受L2游戏训练后才出现MMN潜伏期特异性缩短,该效应可重复出现于延迟治疗组接受训练后,证明是训练而非单纯时间推移或重复测量所致。
四、讨论与结论翻译
讨论指出MMN波幅增加可能为重复测量带来的感知学习或熟悉化效应,不因训练组别而异;而MMN潜伏期缩短具组别特异性,且延迟治疗组在接受训练后复现该效应,表明基于游戏的L2语音模仿训练(含听觉—运动映射与ASR反馈)可加速大脑对非言语声音频率变化的自动检测。可能机制包括:(1)L2语音训练扩展语音系统并提升语音意识,而音高(F0)加工与语音技能相关联;(2)新L2音素的发音探索(articulatory experimentation)可能使大脑进入类鸣禽学歌般的学习态,提高一般听觉可塑性;(3)游戏本身含即时反馈与激励机制,可能与先前研究中游戏玩家MMN潜伏期较短的结果相符。各机制不互斥。
研究结论原文翻译如下:
本研究表明,通过MMN潜伏期指标可见,涉及言语知觉—产生听觉—运动映射(auditory–motor mapping)的基于游戏的二语(L2)语音模仿训练可改善大脑对非言语声音(训练中未包含)的音高(pitch)加工。这说明二语语音训练能够增强大脑对未经训练听觉刺激的神经性加工,从而证明了跨域听觉可塑性(cross-domain auditory plasticity)的存在。