Skip to content

点云伪影与恶劣环境失效

主题:激光雷达点云伪影的系统性技术文档——雨/雾/尘/雪物理作用机制(散射理论)、三大失效模式的量化表现、波长与多回波原理、运动畸变、回射/串扰/窗口污染等伪影,以及算法层与系统层应对策略。 本版基于 Asaptic《When LiDAR Lies》全文 + arXiv 2304.06312 综述全文(50KB,笔记 19 深读)+ 站点 04-filtering 系列资料展开。 版权说明:本文为公开资料(论文/专利/厂商文档)的中文要点综述与整理,非原文转载。完整内容与图表请访问文末「信息来源」中的原始链接;引用请注明原始出处。

1. 物理机制:颗粒物与激光的相互作用(散射理论)

Section titled “1. 物理机制:颗粒物与激光的相互作用(散射理论)”

激光脉冲在干净空气中沿直线传播到固体目标并返回。当颗粒物(液态/固态/悬浮)进入光束路径时,理想假设被打破。核心物理过程:

机制物理过程对测量的影响
散射(Scattering)激光与颗粒碰撞后偏转;颗粒尺寸≫波长时为米氏散射(Mie scattering)能量分散,部分光束偏离原路径
吸收(Absorption)颗粒(尤其水滴)将光能转为热能返回信号强度减弱
后向散射(Backscattering)颗粒直接把光反射回传感器被当作有效回波 → 虚假点
折射/弥散(Refraction/Diffusion)穿过水滴时光路弯折;雾滴引起漫射光束路径模糊,回波难以区分来源
遮挡(Occlusion)颗粒物理挡住后方目标丢点

雨(Rain)——“球形透镜”后向散射主导

  • 雨滴(毫米级)是光束路径上的球形透镜:单次散射事件即可被探测器当作一次测距回波;
  • 结果:2–15 m 距离带内出现密集虚假点云(假目标);同时真实表面回波被衰减 → 有效探测距离缩短;
  • 关键反直觉结论(arXiv 综述):降雨率更高不一定导致点云更差——退化与天气特征呈非线性关系。验证与调参不能假设”更坏天气=更坏数据”的线性规律;
  • 雨还有湿地面效应:路面积水形成镜面反射,导致地面点丢失(水膜模型可增强仿真)。

雾(Fog)——“连续消光”主导

  • 雾滴比雨滴小一个数量级,不产生离散散射事件;而是沿整条光束路径连续散射——米氏散射运行在其最高效区间;
  • 结果:脉冲能量渐进损耗(消光,extinction),回波时间展宽(temporal broadening)→ 测距噪声增大、远处点密度下降、物体边缘模糊;
  • 分割算法(在干净数据上训练的)开始”无声地失败”——边缘不清晰导致聚类粘连。

尘(Dust)——“最坏情况的组合”

  • 大颗粒(如雨)→ 短距离后向散射假点;整体浓度 → 消光衰减测程;
  • 方向性(雨雾没有的):风场中粉尘分布不均——一个扇区被”致盲”而相邻扇区清晰;
  • 窗口沉积:粉尘落在光学窗口上形成静态遮挡,随任务时间恶化(与大气条件无关)——这是工业场景(堆场、矿山)最典型的退化源;
  • 分割模型假设”空间均匀退化”时会误判为非均匀占用模式。

雪(Snow)——“低强度密集噪声”

  • 雪花低反射率 → 密集低强度回波点;
  • 天气噪声四特征(arXiv 综述):高密度、低强度、近距离、快速衰减——这组特征可直接用于滤波规则设计。

1.3 三种失效模式(Failure Modes)——本文核心框架

Section titled “1.3 三种失效模式(Failure Modes)——本文核心框架”
失效模式英文成因后果工业示例
鬼影点(虚假点)Ghost points颗粒后向散射被当作有效回波规划器绕开不存在的障碍物;误报粉尘中”看到”不存在的料堆隆起
丢点(漏检)Dropped points脉冲被衰减/消光,真实表面无回波撞上实际存在的障碍物;漏检雾中漏检远处车辆/料堆边界
测距噪声Range noise真实表面回波信噪比下降定位误差累积、表面抖动点云表面粗糙度增大→体积测量偏差

关键性质:三种失效模式都不均匀——随颗粒粒径分布、密度、风向、传感器朝向、波长而变化;且相互独立(消除一种≠消除其他)。

2. 波长选择与多回波处理(原理级)

Section titled “2. 波长选择与多回波处理(原理级)”
维度905 nm1550 nm
人眼安全限制功率上限低(水吸收低但视网膜敏感)允许更高发射功率(角膜吸收,不入视网膜)
干燥条件测程中等更远(可发更强激光)
浓雾可见性较差更好(两个独立综述均确认:允许更高功率补偿散射损耗)
大气水汽吸收低高——雨雾天退化同样明显
成本低(主流)高

工程结论:港口雾季、北方堆场、高湿环境 → 优先评估 1550nm;室内库区 → 905nm 性价比高。

  • 原理:现代雷达可分别记录每脉冲的第一回波(first)、最强回波(strongest)、最后回波(last);
  • 雨中应用:第一回波常来自雨滴,最后回波来自其后真实表面——分离多回波可显著降低虚假点密度而不丢失真实障碍物数据;
  • 工业启示:堆场/矿卡粉尘场景,多回波 + 1550nm 是硬件层面的首选组合;
  • 相关:**全波形 LiDAR(FWL)**记录所有弱回波(不止 1-2 次),可分析周围介质(区分雾滴与目标),为感知环境动态变化提供基础,代价是高计算资源(arXiv 综述)。
  • 成因:机械扫描雷达一帧点云在几十到几百毫秒内逐点/逐线采集;期间载体运动 → 各点坐标系不一致 → 墙体倾斜、运动目标拖尾(与相机运动模糊机制同源);
  • 与天气无关但常叠加:运动 + 粉尘 = 畸变 + 噪声;
  • 校正原理(详见笔记 06 §3.1):
    1. 精确到微秒级的时间同步(时间标尺);
    2. IMU/GPS 融合轨迹 → 插值每个点的采集位姿;
    3. 所有点变换到统一坐标系;
  • 动态物体畸变(HiMo 等方法):场景流估计校正非本车运动物体畸变;
  • 工业关注:矿卡振动工况需 IMU 融合实时校准(安协方案:定位误差控制在厘米级);天车/AGV 加减速阶段畸变最严重。
伪影成因表现应对
回射伪影(Retroreflection)反光片、亮面钢卷、路牌等产生过强回波饱和、光晕(blooming)、虚假点簇强度阈值、增益控制、多回波(站点 retroreflection 文档)
窗口污染雨滴/粉尘附着传感器罩,微透镜遮挡偏折目标点缺失、强度降低、局部失真疏水涂层、自动除尘、定期清洁(站点 window-contamination 文档)
多径反射(Multipath)激光经多次反射后到达探测器测距偏大(虚假远点)波形处理、距离一致性校验
雷达间串扰(Crosstalk)多台雷达互收对方脉冲(多雷达布局常见)特定方向虚假点编码调制(不同雷达不同编码)
近距畸变(Near-range)近距离光斑重叠、接收器饱和近距点失真(站点 near-range-distortion 文档)传感器增益曲线、近距滤波
边界双回波dToF 发散角→光斑随距离增大→同时打到前后两物体边界边缘点位置混淆(雪岭文章机制)回波波形判别、边缘点剔除
高反膨胀高反物体(路牌/车牌)反射过强物体轮廓向外膨胀强度管理(雪岭系列姊妹文章)
  • 统计/邻域:SOR、ROR(静态阈值,远距离失效)→ DROR/DSOR(动态阈值,但运行时间长)→ FCSOR/DSOR 加速变体(工业实时部署候选);
  • 强度感知:LIOR(低强度+半径滤波,雪天)→ DDIOR(动态距离+强度联合,预滤波降计算);
  • 投影法:AORI(距离图像+自适应半径,处理垂直分辨率不均,0.26s/帧);
  • 学习法:PointCleanNet(离群点分类+位移校正)、CNN 去噪(推理快于经典方法)、无监督 CycleGAN(真实性难验证);
  • 时序法:利用帧间一致性(瞬态噪声随机、背景稳定)区分雨雪。

综述级结论:统计方法效果 < 训练时天气增强 < CNN/GAN 去噪;天气增强训练比事后去噪更有效(让模型习惯噪声)。

5.2 天气分类与退化估计(arXiv 综述 III-B)

Section titled “5.2 天气分类与退化估计(arXiv 综述 III-B)”
  • 退化估计:基于 LiDAR 方程的降雨数学模型(降雨率+最大量程→性能退化估计);DL 异常检测量化退化程度;强化学习检测感知失效;
  • 天气分类:kNN/SVM+手工特征即可;特征集依赖感知表面(大气区域 vs 路面区域最优特征不同);概率模型可回归降雨率;
  • 工业应用:堆场粉尘浓度分级 → 自适应切换滤波强度/融合权重(对应”天气分类器将区域标记为低置信度”思路)。

6. 应对策略:系统层(架构性结论)

Section titled “6. 应对策略:系统层(架构性结论)”
  • 毫米波雷达:波长比激光长数个数量级,降水/气溶胶散射几乎无影响——LiDAR 因雾”宣布空无一物”的区域,雷达仍能探测”有实体”;
  • 热成像相机:接收发射红外而非反射激光,对雾和雨近乎透明;
  • 关键:失效模式物理上相互独立——毁掉 LiDAR 的雾不影响雷达,遮蔽相机的尘不遮挡热成像;
  • 晚融合优于早融合(arXiv 综述核心结论):只要至少一个传感器完好,决策级融合可依赖完好者、忽略失效者;早融合(数据级)耦合紧,单一失效会污染整体。

不是”晴天系统 + 加装天气滤波器”,而是从架构上假设”任何单一传感器在常规条件下都可能失效”——这改变传感器选型、融合层权重、不确定性向规划器的传播,以及超出现有设计域(ODD)时的降级策略(减速、停车、请求远程接管)。

工业场景主要伪影风险硬件层应对算法层应对
散货堆场(粉尘)尘雾虚假点+窗口积尘+测程缩短1550nm+多回波+自动除尘动态滤波(DDIOR 类)+时序一致性
钢厂库区(钢卷高反光)回射/饱和+低反光鞍座丢点增益控制+多回波强度管理+多视角融合
露天矿卡(粉尘+振动)局部扇区盲区+运动畸变多雷达冗余+IMU 融合去畸变+扇区置信度建模
港口岸桥(盐雾)窗口盐渍+雾天衰减IP67+定期清洁与毫米波融合(晚融合)
雨雪堆取料机2–15m 虚假点带+丢点多回波分离时序滤波(雨雪瞬态随机性)
电厂卸船机(高湿盐雾)点云失真+定位漂移(单雷达)多雷达协同标定(已核实案例)多雷达冗余互校验

7. 综述核心结论:恶劣天气应对(arXiv 2304.06312)

Section titled “7. 综述核心结论:恶劣天气应对(arXiv 2304.06312)”

(完整拆解见笔记 19,要点已在 §1–6 内联)

  1. 退化非线性(§1.2);
  2. 天气噪声四特征:高密度/低强度/近距离/快速衰减(§1.2);
  3. 路侧固定雷达可建背景模型:静止安装的堆场/库区雷达(背景静止),用历史数据区分动态目标与天气噪声——比车载移动场景简单得多;
  4. 晚融合优于早融合(§6.1);
  5. 天气增强训练 > 事后去噪(§5.1);
  6. 1550nm 浓雾可见性更好(§2.1);
  7. 小目标退化更严重:小且少样本类别(堆叠钢卷中的鞍座、远处小卡车)在恶劣天气下性能下降更明显——训练集中此类标注数量是恶劣天气下检测性能的预测指标;
  8. 统计去噪实时性问题:ROR/SOR 难用于实时系统,加速变体 FCSOR/DSOR 更适合工业实时部署。

8. 补充:雪岭《激光雷达常见点云异常场景分析》(未获全文,仅搜索摘要)

Section titled “8. 补充:雪岭《激光雷达常见点云异常场景分析》(未获全文,仅搜索摘要)”

知乎原文持续反爬 403,CSDN 转载持续 521,archive.org 无快照——未能获取全文。以下要点来自多引擎搜索摘要与 wxredian 转载片段,引用前请自行打开原文核实。

  • 评价框架:除基本性能指标(测距、角度分辨率、点云密度)外,更重要的是点云鲁棒性——不同使用环境下点云性能的稳定性,以及误报与漏报;
  • 边界双回波机制(wxredian 片段):dToF 激光雷达的激光脉冲存在发散角,光斑尺寸随距离增大——当激光束同时打到前后两个相距较近物体的边界时,会同时产生前后两个反射回波,导致边缘点位置混淆;
  • 同系列延伸(CSDN 有转载):《激光雷达点云异常现象详解:鬼影、高反膨胀与拖点》——鬼影(多径反射:高反物体如路牌/车牌在周围”复制”出虚像)、高反膨胀、拖点三种典型异常;
  • 雪岭系列其他:FMCW 激光雷达原理与玩家、毫米波雷达误报漏报场景、智驾安全强制标准分析。

版权提示:Asaptic 博客与 arXiv/MDPI 论文版权归各自作者/出版社;本文为中文翻译与改写(Asaptic 一文已做全篇译解),正式发布请标注原始出处;雪岭系列为摘要要点,未获全文。