耳戴式双麦克风语音增强中低质量辅助模态的探索与应对

《Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies》:Exploring and Addressing Low-Quality Auxiliary Modality in Earable Dual-microphone Speech Enhancement

【字体: 大 中 小 】 时间:2026年09月20日 来源:Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies

编辑推荐:

   摘要AI 摘要要查看此 AI 生成的摘要,您必须拥有高级访问权限。了解更多登录摘要摘要为了提升可穿戴语音交互场景下的语音清晰度,结合耳内和耳外麦克风的双麦克风语音增强(SE)技术已引起研究社区的高度关注。然而,现有的双麦克风语音增强技术建立在一个强假设之上:高质量的耳内语音(

  

摘要

摘要

为了提升可穿戴语音交互场景下的语音清晰度,结合耳内和耳外麦克风的双麦克风语音增强(SE)技术已引起研究社区的高度关注。然而,现有的双麦克风语音增强技术建立在一个强假设之上:高质量的耳内语音(辅助模态)能够为目标空气中的语音(主模态)提供有效的互补信息,这一假设降低了其在真实世界中的适应性。在本工作中,我们探索了一个关键观察:耳道变形(ECD)引起的空气压力失衡会不利影响耳内语音的质量,进而导致语音增强性能显著下降。为解决这一瓶颈问题,我们设计了一种高效的质量感知语音增强方案,命名为 QuaSE,该方案通过评估耳内语音的质量变化,高效且动态地融合互补信息。此外,基于对耳道变形引起的频谱失真的分析,我们设计了一种包含质量感知数据选择和内容感知增强的训练策略,以增强 QuaSE 的泛化能力。大量实验表明,QuaSE 在 PESQ、STOI、SI-SDR 和 SegSNR 指标上分别比最先进技术高出 6.27%、4.54%、14.90% 和 11.93%。此外,我们还验证了所提出的质量感知融合策略可以模块化地集成到其他感知任务中,从而提升融合性能。

AI 摘要

AI 生成摘要(实验性)

此摘要由自动化工具生成,未经本文作者撰写或审阅。我们提供此摘要以支持检索发现、帮助读者评估相关性,并协助相邻研究领域的读者理解该工作。该摘要旨在补充作者提供的摘要,后者仍然是论文的主要概述。全文仍为权威记录版本。点击此处了解更多。

点击此处对此摘要的准确性、清晰度和有用性发表评论。这将有助于改进和未来重新生成的版本。

要查看此 AI 生成的通俗摘要,您必须拥有高级访问权限。

相关新闻
生物通微信公众号
微信
新浪微博
  • 搜索
  • 国际
  • 国内
  • 人物
  • 产业
  • 热点
  • 科普

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号