基于双目视觉的轻量级检测与测距方法研究

《Displays》:Research on lightweight detection and ranging method based on binocular vision

【字体: 大 中 小 】 时间:2026年04月12日 来源:Displays 3.4

编辑推荐:

  智能视觉感知中,轻量多尺度融合方法通过动态卷积增强浅层与深层特征交互,减少参数量并提升小目标检测能力。通道-空间协同机制抑制背景干扰,改进的半全局块匹配结合成本优化、边缘增强和置信度引导,生成更平滑的视差图。实验表明该方法在检测精度与测距误差间实现平衡,适用于嵌入式设备的实时多任务视觉系统设计。

  
Weina Zhou|Yuanzhe Xin
上海海事大学,上海 201306,中国

摘要

在智能视觉感知领域,在轻量级约束下实现检测精度与距离测量稳定性之间的平衡仍然是一个主要挑战。为了解决这个问题,本文提出了一种轻量级的多尺度融合方法,用于双目视觉,构建了一个集成框架来联合优化检测和测距。设计了一种跨层次的多尺度融合结构,通过动态卷积增强浅层纹理和深层语义特征之间的交互,提高了对小目标和低对比度目标的识别能力,同时减少了参数数量。为了抑制背景干扰,引入了一种通道-空间协作重建机制,在特征压缩下实现对关键区域的自适应聚焦,从而增强了特征表示的鲁棒性和泛化能力。对于深度估计,构建了一种基于改进的半全局块匹配的新深度提取过程,整合了成本优化、边缘增强和基于置信度的细化,以获得更平滑、更完整的视差图。此外,本研究还探讨了检测精度与测距误差之间的关系,揭示了它们的综合模式和性能平衡特性。在多个公开的立体视觉数据集上的实验结果验证了所提出方法的高精度、强鲁棒性和低计算复杂性,为多任务视觉系统的轻量级和集成设计提供了一条新的技术路径。

引言

在智能视觉感知领域,对象检测和距离估计是场景理解和空间建模的两个基本任务。视觉系统不仅能够识别对象的语义类别,还能推断它们的空间位置,这对于自动驾驶、服务机器人、监控和工业检测等应用至关重要[1]、[2]、[3]。随着深度学习的快速发展,视觉系统已经从二维识别逐渐发展到三维感知。然而,在保持轻量级和实时性能的同时实现高精度和鲁棒性仍然是一个紧迫的挑战。
对于对象检测,单目方法通过卷积神经网络(CNN)提取多尺度特征,并以端到端的方式预测对象类别和边界框[1]、[3]、[4]。在这些单目方法中,两阶段检测器和轻量级单阶段检测框架被广泛采用[5]、[6]、[7]、[8]。得益于网络设计和轻量级策略的进步,单目检测器已成功应用于具有实时性能的嵌入式设备[9]、[10]。然而,单目图像本质上缺乏视差信息;因此,其输出仅表示对象在2D平面上的位置和大小,无法提供它们的实际空间距离[2]、[3]。为了获得度量深度,单目检测通常需要额外的深度估计算法或外部传感器,这不仅增加了系统复杂性,还会引入误差累积[11]、[12]、[13]。
相比之下,立体视觉利用两张图像之间的视差来恢复场景深度,从而可以直接测量对象距离。经典方法如半全局匹配(SGM)通过成本聚合和能量最小化实现像素级视差估计,在纹理丰富的区域产生准确的结果[14]。最近,基于深度学习的立体网络在包括低纹理和遮挡区域在内的具有挑战性的场景中表现出更好的鲁棒性[15]、[16]、[17]、[18]。然而,这些方法通常计算成本较高,限制了它们在资源受限设备上的应用,而传统算法在某些方面提出了优化技术[19]、[20],但在处理对象边界连续性和对噪声的敏感性方面仍面临困难[21]、[22]。
为了同时实现对象检测和距离估计,提出了基于立体的集成方法。主流策略可以分为两类:一类是独立执行检测和立体匹配,然后融合结果;另一类是利用检测输出来限制深度估计区域,从而提高测量精度和效率[12]、[23]、[24]。这种联合方法结合了检测的语义理解和立体视觉的几何精度,在复杂场景中提供了可靠的性能。然而,在效率、鲁棒性和结果的可解释性方面仍存在挑战。
现有研究的主要问题总结如下:首先,轻量级检测与测量精度之间的权衡。在嵌入式平台上,检测网络必须减少参数以实现实时速度。然而,这种压缩会削弱特征表示能力,导致检测精度降低,从而降低测量质量。
其次,在复杂场景中视差估计的不稳定性。在低纹理区域、遮挡或对象边界处,传统立体算法往往会产生不匹配,导致深度图不连续或噪声较大,这直接影响距离估计。
第三,缺乏关于检测精度与距离误差之间关系的系统讨论。大多数现有系统将检测仅视为测量阶段的输入,而没有研究检测置信度(或边界框精度)与测量稳定性之间的关系。因此,检测不确定性与距离估计误差之间的内在耦合尚未得到充分探索。
为了解决这些挑战,本研究提出了一个在三个方面进行优化的基于立体的检测和距离估计系统:轻量级检测、鲁棒的立体匹配以及对检测-距离关系的系统分析。
首先,轻量级多尺度融合网络(LMSFN)旨在解决轻量级设计与检测精度之间的矛盾。通过采用多尺度特征融合和动态卷积,该网络增强了浅层纹理特征和深层语义特征之间的交互。
其次,改进的半全局块匹配(ISGBM)模块增强了立体匹配的鲁棒性。通过整合成本细化和基于置信度的过滤,该算法在低纹理或遮挡区域自适应调整参数。这减少了噪声并提高了视差连续性。通过额外的平滑和统计过滤,ISGBM生成了支持可靠距离估计的稳定深度图。
最后,本研究系统地讨论了检测精度与距离估计误差之间的关系。通过在不同检测置信度分数、边界框大小和对象位置下的实验比较,揭示了检测不确定性如何传播到距离估计中。
总之,本研究提出了一种基于立体的系统,实现了高效的对象检测和距离估计,而无需依赖额外的传感器。通过轻量级检测、鲁棒的立体匹配和关系分析的创新,所提出的系统在精度、稳定性和实时性能之间取得了良好的平衡。该研究为智能机器人和自主导航提供了实用的视觉解决方案,对实际应用具有重要的意义。

部分摘录

轻量级特征提取和多尺度融合网络设计

本文提出了一种轻量级多尺度特征网络(LMSFN),以解决传统检测网络的局限性,特别是它们的高模型复杂性和大量的计算资源消耗。通过引入创新模块和优化策略,该网络在显著减少参数数量和计算成本的同时保持了检测精度,使其更适合在资源受限的边缘设备上部署。

数据集

为了验证所提出算法的有效性和鲁棒性,我们在两个代表性的立体视觉数据集上进行了系统实验:KITTI视觉基准数据集[27]和Middlebury立体数据集[28]。在本文中,KITTI视觉基准数据集用于LMSFN网络架构的消融实验和比较实验。Middlebury立体数据集用于SGBM算法和ISGBM算法之间的比较实验。

结论

本文基于改进的YOLOv11架构进行了优化研究,以满足双目视觉系统中对象检测和测距的实际需求。通过深入分析现有算法在模型复杂性、视差图质量和精度平衡方面的不足,提出了一个系统解决方案。
本研究的主要贡献包括:首先,设计了一种轻量级的多尺度对象检测模型(LMSFN),该模型显著

利益冲突声明

作者声明他们没有已知的可能影响本文报告工作的竞争性财务利益或个人关系。
相关新闻
生物通微信公众号
微信
新浪微博

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号