基于边缘纹理感知的语义双查询融合多模态3D物体检测方法

《Symmetry》:Edge-Texture-Aware Semantic Dual-Query Fusion for Multimodal 3D Object Detection

【字体: 大 中 小 】 时间:2026年07月03日 来源:Symmetry 2.2

编辑推荐:

   摘要

  

摘要

多模态3D物体检测能够充分利用相机图像与LiDAR点云的互补优势。然而,现有的体素-像素融合方法通常依赖较为粗糙的跨模态交互,这限制了精细的结构建模能力,且在处理小型、对安全性要求较高的物体时性能较差。为解决这一问题,我们提出了ETA-SDQF这一基于边缘纹理感知的语义双查询融合框架,旨在提升对车辆、骑行者和行人的3D感知能力。该方法首先引入基于离散小波变换的边缘纹理感知图像骨干网络(ETAIB),以此优化多尺度精细图像特征的表示能力;接着设计了一个双查询引导的注意力融合模块(DQGAF),该模块利用可变形注意力机制,在语义信息与边缘纹理信息的共同引导下,自适应地整合不同尺度的体素对齐图像特征;最后,采用受PV-RCNN启发的混合3D特征学习策略,将基于体素的特征学习与PointNet风格的特征抽象相结合,用于处理融合后的特征。这样的设计提升了富含图像语义的体素特征的应用效率,从而有助于生成更可靠的3D物体检测结果。在KITTI数据集上的实验结果表明,所提出的框架相较于现有基准方法具有更好的性能,它在行人及骑行者检测方面表现持续优异,同时在不同难度级别的车辆检测中也保持较强竞争力,尤其在处理复杂的KITTI测试样本时展现出显著优势。
相关新闻
生物通微信公众号
微信
新浪微博

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号