《纯技术分享》近期刚完成了“单目摄像头+4D毫米波雷达联合标定“,有需要的佬可以交流

max 2026-06-02 15:15 1

由于业务需要,项目侧重于检测远距离且高速的目标,因此将原有的“视觉 + 激光雷达(LiDAR)”方案,升级修改为了“视觉 + 4D 毫米波雷达”的融合感知方案。


标定时遇到了一些问题:



  1. 毫米波点云极其稀疏:相比于激光雷达每秒数百万个点的稠密反射,4D 毫米波雷达点云非常稀疏,缺乏可直观识别的轮廓与几何特征,极难通过传统的点云匹配算法实现自动配准。

  2. 室内多径干扰:在室内标定环境下,强金属杂噪(如墙体、立柱、桌椅)会产生大量的多径反射杂点,使得真实的靶件(如角反射器)特征淹没在背景噪声中。

  3. 维度对准麻烦


大概的标定流程为:



  1. 第一步:购买角反射器,并初步测试点云反射效果。

  2. 第二步:自己写一个实时投影验证工具,实时同步抓拍与立体预验证,主要是因为即使是角反射器,也不一定会有明显的点云。

  3. 第三步:自己写一个实时可视化微调六自由度外参的工具,也就是可视化调整相机与雷达之间的相对位置与角度,使之尽量完美对齐。

  4. 第四步:记录当前外参,并使用foxglove做视觉+4D毫米波点云的投影可视化测试,或者自己写程序做投影可视化测试。


如下是标定效果(请忽略噪声问题),由于是测试,效果不是很完美,但可以看到点云和图像基本对齐。有遇到同样问题的佬们欢迎交流!



最新回复 (9)
  • gogo 06-02 15:38
    1

    大佬,我有个想法是这样的:飞机的机翼比较长,给飞行员的头显上显示出前进道路上机翼的宽度轨迹(类似于倒车的时候显示的倒车轨迹)。这个想法你你额这个有关系吗 ^-^

  • YanSep 06-02 15:43
    2

    有几点建议:

    1、别在室内做测试,环境太小+金属反射严重,建议去室外空旷的地方做测试

    2、时间同步很重要,最好是在测试前先确认时间是否同步

    3、角反别放的太近最好是拉开深度、横向间距和高度差,多个角反的情况下,如果条件允许,最好做个区分,不然到时候容易混淆

  • yunes 06-02 15:51
    3

    点云稀疏是是不是你检测动态目标和强反射目标,试着把一次点限制放开幅度门限调低一点

  • max 楼主 06-02 16:10
    4

    有点关系,机上的雷达设备在检测时会过滤或者标记一些目标,比如飞机自身区域等,如果有必要可以做检测后传到头显上。

  • max 楼主 06-02 16:13
    5

    感谢佬,已经在室外真实场景做了测试,真实场景不方便截图;在多传感器数据读取时,已经做了对齐;在室外真实场景下做了多方位的数据集采集。

  • max 楼主 06-02 16:14
    6

    是因为毫米波雷达的角分辨率和测量机制决定了它天然比激光雷达稀疏得多

  • YanSep 06-02 16:33
    7

    客气了,我不是搞技术的,我只是在项目过程中遇到过这种类似的问题,我们之前就是这么一步一步踩坑过来的。目前我们在考虑做角反,测试角反移动太麻烦了 ^-^

  • max 楼主 06-02 16:52
    8

    确实会比激光雷达标定麻烦一些,如果系统里同时有激光雷达的话,一般会先做Radar-LiDAR标定,再利用已有的LiDAR-Camera标定结果推算Radar-Camera外参。

  • 小满 06-06 11:00
    9

    大佬 请教下现在有好用的6DoF Radar-Lidar的开源标定方案吗?我调研到的好多标定方案都是基于2D Radar的

* 帖子来源Linux.do
返回