AOPQ-Net:用于水下多模态物体检测的声光探测提案查询网络
《Remote Sensing》:AOPQ-Net Acoustic–Optical Proposal Query Network for Underwater Multimodal Object Detection
【字体:
大
中
小
】
时间:2026年08月12日
来源:Remote Sensing 4.3
摘要
光学相机和成像声呐是自主水下航行器中广泛使用的传感器。然而,它们不同的成像机制会导致采集到的数据存在较大的跨模态差异。此外,水下光学图像常常因光照不足、散射和浑浊而质量下降,而声呐图像则通常受到斑点噪声和低空间分辨率的影响。因此,在复杂的水下环境中,仅依靠单一的光学或声学模态进行物体检测往往不够可靠。为解决这一问题,本文提出了一种用于水下物体检测的声光融合网络,称为声光提议查询网络(AOPQ-Net)。首先,设计了一个声呐位置编码(SPE)模块,用于明确编码声呐图像中的几何先验信息。其次,引入了双向差异感知空间对齐(BDSA)模块,以在特征层面减轻两种模态之间的空间错位问题。第三,提议查询变换器(PQT)模块在提议层面实现以目标为导向的跨模态交互。此外,本研究还构建了一个专门用于水下声光融合物体检测的数据集,名为海琴水下融合数据集(HUF),并基于该数据集进行了系统实验。实验结果表明,AOPQ-Net在光学和声呐图像领域均优于单一模态的基准方法以及现有的多种模态融合方法,从而证明了所提方法的有效性。
生物通微信公众号
生物通新浪微博
今日动态 |
人才市场 |
新技术专栏 |
中国科学人 |
云展台 |
BioHot |
云讲堂直播 |
会展中心 |
特价专栏 |
技术快讯 |
免费试用
版权所有 生物通
Copyright© eBiotrade.com, All Rights Reserved
联系信箱:
粤ICP备09063491号