开放信息物理中间件上的声控厂内物流:基于深度学习的语音处理及工业噪声环境验证

《Applied Sciences》:Voice-Controlled Intralogistics on an Open Cyber–Physical Middleware: Deep Learning-Based Speech Processing and Validation in an Industrial Noisy Environment

【字体: 大 中 小 】 时间:2026年08月28日 来源:Applied Sciences 2.5

编辑推荐:

  工业4.0的快速发展通过提升灵活性、互操作性与实时响应能力为厂内物流带来显著收益,但工业环境复杂性的增长给物流流程适配及异构机器人与物联网(IoT)系统的语音驱动控制集成带来挑战。开源方案以供应商独立与低成本部署提供可行路径。研究人员依托Horizon 202

  
工业4.0的快速发展通过提升灵活性、互操作性与实时响应能力为厂内物流带来显著收益,但工业环境复杂性的增长给物流流程适配及异构机器人与物联网(IoT)系统的语音驱动控制集成带来挑战。开源方案以供应商独立与低成本部署提供可行路径。研究人员依托Horizon 2020 L4MS计划开发的OPIL(Open Platform for Innovations in Logistics)开放信息物理中间件,结合卷积神经网络(CNN)实现语音降噪与关键词识别,在强噪声工业环境中实现稳健声控厂内物流。研究人员在OPIL平台上设计、部署并实证评估了一套声控物流系统,结果确认OPIL作为专有工业4.0平台开放模块化替代方案的技术可行性,并证明在开放中间件架构中集成基于人工智能(AI)的关键词 spotting与语音交互的可行性。研究同时识别关键局限:非母语说话人性能下降及高信噪比(SNR)下轻微语音过抑制。为支持可复现与外部验证,研究人员公开完整网络配置、训练流程与部署数据。
研究背景方面,工业4.0范式对制造与物流系统在灵活性、互操作性、可扩展性与实时响应上提出严苛要求,厂内物流作为供应链骨干其数字化自动化转型受高投资成本、刚性架构与专业知识缺乏制约。传统方案多为供应商绑定、适应性有限,中小企业难以负担。开源中间件如机器人操作系统(ROS)、FIWARE及OPIL提供替代路径。OPIL为Horizon 2020 L4MS项目成果,是开放、模块化、供应商中立的信息物理系统(CPS)平台,基于FIWARE上下文管理与ROS兼容机器人集成。已有研究多将OPIL用于移动机器人控制与车队规划,其在声控ERP耦合厂内物流中的闭环验证尚属空白;深度学习语音降噪与关键词识别多在通用噪声基准评测,持续宽带工业噪声(钻孔、传送带、冲击工具)下的表现证据不足;自动导引车(AGV)与机械臂感知普遍依赖机器视觉,而NFC/RFID确定性识别结合Simplex优化排序的低成体可追溯路径研究较少。该研究即针对上述四类缺口展开。
研究人员在塞尔维亚一家肉类加工厂(Alpha公司,约250人,日屠宰猪600头、牛50头)部署VCLMP(Voice Controlled Logistics System for Automation in Meat Production)系统,以OPIL为骨干,ERP为编排层,Android头戴式App采集语音,服务端经CNN语音降噪、CNN关键词识别、ERP指令校验,下发至AGV(ROS通过Robot Agent Node抽象)与ABB IRB 140机械臂(经Simplex法排序拣选),并由Sensor Agent Node通过IR与NFC/RFID做托盘识别,形成人—声—ERP—机器人—IoT闭环。论文发表于《Applied Sciences》。
关键技术方法上,语音降噪采用Mozilla Common Voice与LibriSpeech干净语料,混合UrbanSound8K中drilling、engine idling、jackhammer三类噪声映射至切割、传送、冲击工况,于0/5/10 dB SNR生成450条测试样本;音频重采样16 kHz,STFT窗长256、重叠75%,取对数幅度谱构129×8×1张量,全卷积神经网络(FCNN)带残差跳连预测干净幅度,相位复用噪声明相位做逆STFT;训练用MSE损失、Adam(lr=3×10?4)、batch 512、早停patience 50。关键词识别用TensorFlow Speech Commands v2.0/v3.0及Numbers-only子集,22 050 Hz单秒片段提MFCC(13维×44帧),三层Conv2D(64→32→32滤波器)+BN+MaxPool+64维Dense+Softmax(20类),Adam(lr=1×10?4)、sparse categorical crossentropy、batch 32、早停监控训练精度。端到端评测含10条4—7关键词命令模板,工业现场2名C2英语者各重复5次共100条,置信度阈90%过滤后送ERP校验。
研究结果部分,4.1语音降噪应用中,FCNN在0 dB输入SNR下ΔSNR达+3.88~+4.68 dB,5 dB下+1.47~+2.19 dB,10 dB下转负(?1.53~?1.97 dB)伴STOI仍0.86~0.88、PESQ 1.15→1.57,证实低SNR强抑噪、高SNR轻微过抑制;工业实录背景噪声功率降约21.11 dB(99.23%)。4.2语音识别应用中,Speech Commands v3.0测试精度92.22%、v2.0为92.59%、Numbers-only 94.17%,非母语B1/B2者错误略增但未做定量分层。第5节端到端管线评测显示,5 dB工业噪声下命令执行成功率由无降噪77.00%升至带降噪91.00%,生成样本由70.00%升至90.00%。第6节工业验证中,十个月生命周期内部署于?38 ℃低温区与高湿高噪剔骨间,声控免手触交互消除工人离岗消毒中断;NFC追溯自屠宰线首站绑定肉尸与肉箱;AGV跨卫生隔门运输将原3人湿滑推车作业改为无人化;总投入188 500 EUR、四年 recurring 61 840 EUR,NPV折率10%下经济可行。
讨论与结论翻译部分,研究人员指出OPIL作为开放模块中间件可承载声控—ERP—AGV—机械臂—NFC闭环,证实在受监管食品厂内部署AI语音交互的可行性;主要局限为非母语说话人泛化下降与高SNR过抑制,后者可用盲SNR估计+VAD旁路缓解留待未来工作;端到端增益源于降噪削减关键词识别失败而非孤立指标改善。结论为:OPIL结合CNN语音降噪与关键词识别,能在声学与操作双严苛的肉类加工环境中实现稳健声控厂内物流,为专有工业4.0平台提供可复现、供应商中立替代,并给出完整网络配置与训练部署数据以支持外部验证。
相关新闻
生物通微信公众号
微信
新浪微博

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号