摄像机-雷达融合与模式交互和雷达高斯扩展用于3D物体检测
Xiang Liu1, Zhenglin Li1,2, Yang Zhou1
1Institute of Artificial Intelligence, Shanghai University, Shanghai, China.
Cyborg and bionic systems (Washington, D.C.)
|May 12, 2025
概括
这项研究引入了用于3D物体检测的新框架,融合了毫米波雷达和摄像头数据. 该方法通过保留原始特征和使用一种新的雷达增强技术来提高检测准确度.
科学领域:
- 计算机视觉 计算机视觉
- 传感器融合式传感器
- 机器人技术 机器人技术 机器人技术
背景情况:
- 准确的三维 (3D) 对象检测对于自主系统至关重要.
- 现有的方法在将雷达和摄像头数据合并时经常会丢失信息.
- 模式转换可能导致特征退化.
研究的目的:
- 开发一种用于增强3D物体检测的新型框架.
- 为了解决多式联络融合中的信息丢失问题.
- 为了提高3D对象检测的准确性和完整性.
主要方法:
- 为代的雷达和摄像机功能更新提出了一个新的框架.
- 引入了一个交互模块,用于多模式数据融合,同时保留原始功能.
- 开发了雷达高斯扩展,用于雷达数据增强,以减少关联错误.
主要成果:
- 在nuScenes测试基准上取得了最先进的结果.
- 实现了41.6%的平均精度 (mAP).
- 达到了52.5%的nuScenes检测得分 (NDS).
结论:
- 拟议的摄像机-雷达融合框架显著提高了3D物体检测.
- 新型交互模块和雷达增强有效防止信息丢失.
- 该方法在准确性和完整性方面表现出卓越的性能,用于3D对象检测.
