《Proceedings of the Human Factors and Ergonomics Society Annual Meeting》：Potential of Augmented Reality Platforms to Improve Hearing Aids and Support More Ecologically Valid Research: A Systematic Review
编辑推荐：
增强现实（Augmented Reality, AR）技术正越来越多地被探索作为听力辅助工具，有望补充或扩展传统助听器的能力。本系统性综述从人因工程角度评估了当前AR集成音频系统的现状及其在日常环境中对沟通、可及性、空间感知、认知负荷和用户适应性的影响。研究人
增强现实（Augmented Reality, AR）技术正越来越多地被探索作为听力辅助工具，有望补充或扩展传统助听器的能力。本系统性综述从人因工程角度评估了当前AR集成音频系统的现状及其在日常环境中对沟通、可及性、空间感知、认知负荷和用户适应性的影响。研究人员遵循PRISMA指南，检索了PubMed和Engineering Village（Compendex和Inspec）数据库，筛选出2000年至2025年间发表的477篇文章，其中14篇符合纳入标准。这些研究的发现被归纳为四个领域：个性化与可及性、生态效度（ecological validity）、多模态感知（multimodal sensing）以及空间/三维音频建模（spatial/3D audio modeling）。结果表明，AR辅助设备在支持用户驱动的听觉调整、增强空间感知以及通过AR/VR声景实现更真实的测试环境方面展现出前景。然而，许多解决方案仍处于早期原型阶段，在自然场景中的评估有限，且关于长期用户体验的报告稀少。总体而言，AR音频系统显示出重塑助听器设计的巨大潜力，但仍需进一步的纵向研究和真实世界研究来验证其对聆听表现和日常沟通的影响。
论文解读文章
一、研究背景与研究问题
传统助听器在复杂声学环境（如多人交谈或嘈杂公共空间）中存在局限性，其固定的放大模式难以满足用户动态变化的听觉需求。此外，全球助听器采纳率长期低于20%，主要原因包括高昂成本、社会污名化（被视为残疾标志）以及佩戴舒适度不足。同时，现有助听器评估多在实验室条件下进行，缺乏反映真实世界复杂性、移动性和空间线索的生态效度（ecological validity）。为突破这些瓶颈，增强现实（Augmented Reality, AR）技术——一种将数字信息或空间音频叠加到用户感知环境中的技术——被引入听力辅助领域，旨在通过智能眼镜、耳戴式设备等形态提供更具适应性和用户中心化的听觉支持。
二、研究方法与技术路线
本研究是一项系统性综述，严格遵循PRISMA（Preferred Reporting of Items for Systematic Review and Meta-Analyses）指南。研究人员于2025年10月在PubMed和Engineering Village（涵盖Compendex和Inspec）数据库中执行检索，限定2000至2025年间发表的文章。检索词组合为：“hearing aid” OR “wearable device” OR “hearable” OR “listening device” AND “augmented reality” OR “AR” OR “Virtual Reality” OR “VR”。经去重（去除178篇重复文献）、标题摘要筛选及全文审查后，最终纳入14篇原创实验或工程研究。排除标准包括：未涉及AR/VR与听力技术的关联、不聚焦于听力设备或原型、非原创研究（如综述、社论）、非英文文献。研究采用PICO框架界定范围：人群（Population）为助听器及可听戴设备的潜在用户；干预措施（Intervention）为AR赋能听觉系统；对照（Comparison）为传统助听器；结局指标（Outcomes）关注听觉有效性、用户舒适度和可及性的改善。
三、研究结果
1. 个性化与可及性（Personalization and Accessibility）
两项研究探讨了如何让听力损失用户根据舒适度和可用性个性化听觉体验。例如，基于凝视（gaze）和脑电图（EEG）的注意力引导系统能识别用户视觉焦点或意图关注的声源，从而优化噪声适应和个体适配。一项针对可穿戴AR音频设备（WARDs）的研究显示，这类设备在安静环境下对轻中度听力损失者有益，但在嘈杂环境中不仅未能改善效果，反而增加了声音厌恶感（aversiveness）。另一项研究发现，WARDs比传统助听器更具成本效益，且AR眼镜因其消费电子外观可能降低社会污名感。此外，一项针对70岁以上老年人的VR双任务研究表明，听力损失者在挑战性听觉条件下未获得双任务收益，凸显了个性化辅助方案的必要性。
2. 生态效度（Ecological Validity）
六项研究展示了通过AR/VR框架提升评估生态效度的进展。早期工作如StreetLab（2016年）建立了兼顾控制性与真实性的虚拟现实实验室；随后TASCAR（Toolbox for Acoustic Scene Creation and Rendering）工具实现了精确的三维（3D）声学模拟；EasyCom（2021年）提供了逼真的餐厅对话数据集，并被SPEAR挑战赛用作标准化AR音频基准；最新的GiN（2024年）捕捉了更具互动性和社交真实性的AR录音。这些平台共同推动了更贴近日常生活的听力研究。然而，多数报告由开发团队自我评估，且缺乏AR/VR模拟与现实声学的直接实证比较，生态效度仅为推断而非经验验证。
3. 多模态感知（Multimodal Sensing）
多模态感知整合音频、视觉、生理和运动信号，使设备能动态响应用户状态和环境。一项2017年研究量化了耳内设备对高频声波的扭曲程度，表明AR信号处理需补偿这些伪影。Hohmann（2023年）的文献分析讨论了结合额外麦克风、EEG、眼动追踪、运动传感器和摄像头的多模态空间处理如何提升助听器性能。2019年的一项研究测量了不同环境中头、眼、躯干的运动并记录EEG数据，为设备设计提供依据。2022年和2024年的模型分别探索了利用内置麦克风实时区分主音频源与背景噪声，以及通过附加麦克风捕获设备与用户头部/身体对声波的影响。一项2023年实验采用麦克风组合区分用户语音与环境音，并通过双延迟管道模拟自然听觉反馈。但这些研究多为概念验证，样本量小（如仅3名参与者），需进一步验证。
4. 空间与三维音频建模（Spatial and 3D Audio Modeling）
两项研究强调了空间定向对助听器用户的重要性，包括对平衡、声音清晰度和混响容忍度的支持。Lezzoum和Voix通过VR模拟再现真实聆听环境，展示了房间几何、距离和运动如何塑造空间感知。Manamperi等人分析了数学建模方法，比较了设备相关传递函数（DRTF）、头相关传递函数（HRTF）和可穿戴设备相关传递函数（WDRTF）。结果显示，WDRTF能考虑头部运动和麦克风位置，实现动态、运动感知的空间渲染，在空间重建精度和实时处理效率上表现更优。SPEAR等平台集成运动传感数据与多通道音频，证实了其在保持三维听觉场景几何结构和支持机器学习模型学习空间连贯双耳渲染方面的能力。
四、讨论与结论
讨论总结：本综述综合了AR技术与助听器融合的最新研究，涵盖个性化、多模态感知、生态效度和三维空间音频四大主题。整体证据支持AR辅助听力技术的可行性和前景，但尚未确立其在日常聆听或临床使用中的长期有效性。尽管AR/VR测试平台（如StreetLab、TASCAR、EasyCom、GiN）在受控环境中展现了向真实评估的进步，但与现实声学的实证比较仍然稀缺。硬件成熟度是主要限制，许多高级功能（如实时多模态融合、高保真空间渲染、低延迟自适应波束成形）超出当前消费设备能力。未来研究需优先开展纵向、真实世界的评估，结合客观音频性能与主观用户体验（如舒适度、聆听努力、认知负荷、社会接受度和生活质量）。
研究结论：AR音频系统在重塑助听器设计方面展现出显著潜力，但要验证其对聆听表现和日常沟通的影响，仍需进一步的纵向研究和真实世界研究。
