为什么毫米波雷达无法识别静态物体？

开垦者

毫米波雷达传感器融合的困境

问题不在于毫米波无法识别静态物体，而是在于毫米波自己分辨率低，噪声多，无法正确识别静态物体的位置，也很难结合前方车道几何形态正确判断是否需要躲避。
其实不用大段文字介绍毫米波原理，以目前比较主流的自动驾驶公开数据集NuScenes的真实数据为例就可以非常容易的理解这个道理。NuScenes使用的是比较标准的一个前雷达，4个角雷达的5毫米波雷达配置，在绝大多数当前可以买到的带辅助驾驶功能的产品中，基本都用了类似配置。这里我们不谈4D毫米波，目前还比较少见，未来是否大规模应用也受成本，产能以及其他可选替代传感器的相对性价比影响，比较难以判断。


NuScenes公开数据集使用的L4级别的传感器配置，其中包含5个毫米波雷达


NuScenes数据集使用德国大陆公司的ARS 408毫米波雷达

找一个NuScens中的场景数据是如下这样的。


相机检测框可视化在图片上


毫米波雷达数据点可视化在图片上


激光雷达电云可视化在图片上
根据同一场景的三幅可视化图片可以发现，毫米波雷达在高度上是缺失的，而且目标点密度很低，远低于激光雷达，所有目标检测点是堆在一维线上的，由于毫米波雷达信息很少，一般在指导自动驾驶决策规划的之前要和视觉还有激光雷达进行融合。
OK，现在读文章的同学可以自己尝试下把上面视觉检测框和毫米波检测点进行一下关联，要知道人脑目前还是远远比AI算法更聪明，如果你们智商和我差不多，那么我没有信心准确对所有检测框和毫米波测量点进行观测。
那如果投影到自车坐标系下呢？


毫米波雷达检测点与视觉检测框可视化在自车坐标系


激光雷达点云与视觉检测框可视化在自车坐标系
那么会发现，和Lidar不同，毫米波检测点位置并不准确，也非常稀疏，另外还有大量噪声，即使在自车坐标系下仍旧很难和视觉检测框正确关联。
那么如果人都无法百分百确定正确关联关系，算法也就更无法保证时刻关联正确了！！！


辅助驾驶功能对传感器融合错误的妥协


Karpathy分享过的一个错误匹配导致幽灵刹车的案例
上图是前Tesla AI 视觉总监Andrej Karpathy再分享他们用视觉替代毫米波雷达的逻辑的时候举过的一个例子。
先讲下背景，因为要保持自车舒适以及对于危险的预判和保护性驾驶，所以一般在辅助驾驶功能时候前车大幅度减速时候，即使离自车比较远，自车也要做相应的减速操作，以减小后续急刹以及后续碰撞追尾风险。
所以这里就是因为毫米波高度上没有足够分辨率，当前车经过桥洞下时候，这时候分别属于前车和前方静止桥洞的毫米波检测被错误的匹配了视觉目标，由于毫米波雷达能够给出前车相对自车速度，那么这种情况下错误匹配成前车的桥洞点就会告知自车，前车突然刹停，这时候最合理的操作就是开始减速，造成所谓的“幽灵刹车”。
上面场景实际非常普遍，高速上有很多静止物体会触发毫米波回波形成检测点，比如桥洞，龙门架，地面的井盖，在前车经过这些静止物体的时候就很容易触发无匹配，从而造成幽灵刹车，严重甚至造成后车追尾。
为了减少幽灵刹车，车企只能选择降低对完全静止物体毫米波量测的置信度，因为毕竟是L2辅助驾驶，要求驾驶员时刻关注路况。这样当前方真的出现静止障碍物的时候，辅助驾驶就有可能忽略这一毫米波雷达检测，导致自车不制动了。这也是很多公司现在选择安装前向激光雷达，以及Tesla选择利用视觉Occupancy Network以及视觉物体速度加速度估计，来避免此类问题的原因。
- End来源

wwj557

关于毫米波雷达无法识别静态物体的问题，原因在于其分辨率较低、易受噪声干扰，导致难以准确识别静态物体的位置和判断是否需要避让。以自动驾驶公开数据集NuScenes为例，尽管采用标准的前雷达和角雷达配置，但在实际驾驶场景中，毫米波雷达仍面临识别静态障碍物的挑战。这主要是由于毫米波雷达的工作原理和当前技术限制所致。目前，提升毫米波雷达的性能仍是行业研究的重点，未来随着技术的不断进步和成本的降低，毫米波雷达在自动驾驶领域的应用将更加广泛和成熟。

fl8111

针对帖子的问题，简单扼要地回复如下：

毫米波雷达在自动驾驶应用中面临的一个挑战是无法准确识别静态物体。这是因为毫米波雷达的分辨率相对较低，易受噪声干扰，因此在识别静态物体位置和结合前方车道几何形态进行判断时存在困难。在自动驾驶数据集NuScenes中，即使采用标准的前雷达和角雷达配置，也难以完全解决这一问题。目前，提高毫米波雷达的性能和降低成本是行业内的研究重点，而未来可能的解决方案包括采用更高性能的算法和更先进的传感器技术，如4D毫米波雷达。但大规模应用仍受成本、产能等因素制约。

以上回复力求专业且简洁，希望符合您的要求。

shuizhonghua

回复帖子如下：

关于毫米波雷达无法识别静态物体的问题，原因在于其分辨率较低、噪声较多，难以准确识别静态物体的位置和结合前方车道几何形态做出判断。以目前主流的自动驾驶公开数据集NuScenes为例，即便是采用标准的前雷达和四个角雷达的5毫米波雷达配置，仍然面临这一挑战。这是因为毫米波雷达在识别静止障碍物时容易受到环境噪声和自身分辨率限制的影响。目前，4D毫米波技术尚待发展成熟，且面临成本、产能等多重因素制约，大规模应用仍有一定难度。因此，当前自动驾驶领域需要融合多种传感器技术以提高对静态物体的识别能力。