自动驾驶感知——激光雷达基本概念|激光雷达点云|激光雷达的标定
创始人
2024-05-22 05:25:54
0

文章目录

  • 1. 激光雷达基本概念
    • 1.1 激光雷达特点
    • 1.2 激光雷达测距原理
      • 1.2.1 系统组成
      • 1.2.2 激光雷达测距原理
    • 1.3 常见的激光雷达
      • 1.3.1 机械旋转式激光雷达
      • 1.3.2 Velodyne HDL-64E
      • 1.3.3 固态激光雷达
      • 1.3.4 Flash型固态激光雷达
      • 1.3.5 相控阵固态激光雷达
      • 1.3.6 MEMS型固态激光雷达
      • 1.3.7 总览
    • 1.4 激光雷达性能指标
  • 2. 激光雷达点云(Point Cloud)
    • 2.1 激光雷达点云定义
    • 2.2 激光雷达点云表示方法
  • 3. 为什么要选择激光雷达?
    • 3.1 传感器之间的互补性
    • 3.2 不同级别自动驾驶系统的需求
  • 4. 激光雷达的标定
    • 4.1 激光雷达参数
    • 4.2 单线激光雷达
      • 4.2.1 γ\gammaγ侧偏角的标定
      • 4.2.2 α\alphaα俯仰角的标定
    • 4.3 多线激光雷达
      • 4.3.1 纸箱法
    • 4.4 相机与激光雷达联合标定
  • 参考文献
  • 声明

1. 激光雷达基本概念

1.1 激光雷达特点

激光探测及测距系统(Light Detection and Ranging,LiDAR)

  • 激光雷达是一种通过发射激光束探测目标的位置、速度等特征量 的雷达系统
  • 激光波段位于0.5μm-10μm,以光电探测器为接收器件,以光学望远镜为天线。

在这里插入图片描述

特点
• 角分辨率、距离分辨率高
• 抗干扰能力强
• 三维坐标、反射率
• 车体积小、质量轻

1.2 激光雷达测距原理

1.2.1 系统组成

在这里插入图片描述

1.2.2 激光雷达测距原理

TOF飞行时间法

  • 脉冲测距:通过测量激光脉冲在雷达和目标之间来回飞行时间获取目标距离的信息。在这里插入图片描述d=c⋅Δt2d = \frac{{c \cdot \Delta t}}{2}d=2c⋅Δt​

  • 相位测距:通过测量被强度调制的连续波激光信号在雷达与目标之间来回飞行产生的相位差获得距离信息。在这里插入图片描述d=c⋅Δφ4πfd = \frac{{c \cdot \Delta \varphi }}{{4\pi f}}d=4πfc⋅Δφ​

1.3 常见的激光雷达

1.3.1 机械旋转式激光雷达

    机械式激光雷达是指发射系统和接收系统存在宏观转动,通过不断旋转发射头,将速度更快、发射更准的激光从线变成面,并在竖直方向上排布多束激光,形成多个面,达到动态扫描并动态接收信息的目的。

1.3.2 Velodyne HDL-64E

在这里插入图片描述

1.3.3 固态激光雷达

  • 严格意义上是指自身不存在任何移动部件的激光雷达,如Flash型激光雷达、相控阵激光雷达。
  • 近年来,一些非完全旋转的激光雷达也被统称为“固态激光雷达”,它们具备了固态激光雷达的一般性能特点,如分辨率高、有限水平FOV(前向而不是360°)等,但这些技术方案会有一些微小的移动部件,如MEMS型激光雷达。

1.3.4 Flash型固态激光雷达

  • 激光直接向各个方向漫射,一次记录整个场景。
  • 分辨率越高,激光之间干扰越强,精度降低。

1.3.5 相控阵固态激光雷达

  • 通过控制光源阵列中各光源发光时间差,合成具有特定方向的 主光束,实现对不同方向的扫描。
  • 精度高、体积小、生产成本低,但研发成本高。

1.3.6 MEMS型固态激光雷达

  • MEMS(Micro-Electro-Mechanical System)激光雷达是指在机械旋转式激光雷达的基础上,采用MEMS微镜替代机械 式扫描单元进行扫描模式动态调整的激光雷达。
  • MEMS微镜指采用光学MEMS技术制造的,把微光反射镜与MEMS驱动器集成在一起的光学MEMS器件。
    在这里插入图片描述

1.3.7 总览

激光雷达是当前高级别自动驾驶最主要的传感器之一,感知能力强。
在这里插入图片描述

1.4 激光雷达性能指标

    从传感器的角度,激光雷达的主要指标包括线束、出点数、精度、测量距离、垂直视场角、垂直角分辨率、水平视场角、水平角分辨率、出点数、通信接口等。

2. 激光雷达点云(Point Cloud)

2.1 激光雷达点云定义

    点云是激光雷达获取的三维场景信息的数据存储形式,不同于图像数据,点云由空间中一系列离散的点组成,并记录了这些点相对于激光雷达自身坐标系的三维坐标与反射率在这里插入图片描述

  • 一帧点云数据(包含N个点)可表示为{xi,yi,zi,ri}i=1N\{ {x_i},{y_i},{z_i},{r_i}\} _{i = 1}^N{xi​,yi​,zi​,ri​}i=1N​
  • 其中(𝑥𝑖,𝑦𝑖,𝑧𝑖)(𝑥_𝑖, 𝑦_𝑖, 𝑧_𝑖)(xi​,yi​,zi​)第个点在激光雷达坐标系下的坐标,𝑟𝑖𝑟_𝑖ri​为
    该点的反射率。

2.2 激光雷达点云表示方法

  • 点视图 (Point View, PV)
    原始的点云集合
  • 俯视图 (Bird’sEyeView,BEV)
    将点云量化为2D/3D网格
  • 前视图 (Range View, RV)
    将点云投影到图像平面
  • 多种视图融合
    俯视图+点视图
    俯视图+前视图

     L. Fan等人[1]^{[1]}[1]对这方面的介绍比较详细。PS:文末参考链接无法查看论文的话,可以选择这个链接

在这里插入图片描述

3. 为什么要选择激光雷达?

3.1 传感器之间的互补性

❖摄像头
★ 优点:丰富的纹理和颜色信息,适用于目标的分类
★ 缺点:3D信息的感知能力较弱,受光照条件影响较大
❖激光雷达
★ 优点:精确感知目标的3D信息,不受光照影响
★ 缺点:成本较高,量产难度大,受天气影响较大

3.2 不同级别自动驾驶系统的需求

❖ L2级:自适应巡航 + 车道保持
★ 可以采用纯视觉系统来进行目标检测和距离估记
❖ L3级:拥堵辅助,领航辅助
★ 至少配备前向的激光雷达
❖ L4级:RoboTaxi
★ 多个激光雷达提供360度视场,以及系统冗余

激光雷达在自动驾驶中可以进行物体检测、3D场景语义分割以及定位与建图。

4. 激光雷达的标定

4.1 激光雷达参数

内参
内部激光发射器坐标系与雷达自身坐标系的转换关系,厂家提供。

外参
激光雷达坐标系与车体坐标系的转换关系,需要标定。

4.2 单线激光雷达

在这里插入图片描述    车体坐标系以车辆后轴中心作为原点,XvX_vXv​指向车辆的前方,YvY_vYv​指向车辆的左侧,ZvZ_vZv​指向车辆的上方。由于激光雷达的坐标系与车体坐标系存在一定的夹角,XlX_lXl​与XvX_vXv​存在α\alphaα的角度偏差,YlY_lYl​与YvY_vYv​存在γ\gammaγ的角度偏差,所以需要标定。

4.2.1 γ\gammaγ侧偏角的标定

在这里插入图片描述    γ\gammaγ侧偏角的标定需要用到矩形板ABCD。如图所示,矩形板ABCD平行于Z轴,且位于激光雷达的前方。激光束扫描的点构成了EF直线段,EG直线段为AB的平行线。
    想要求得γ\gammaγ侧偏角,可以利用γ=arccos⁡(lEGlEF)=arccos⁡(lABlEF)\gamma = \arccos (\frac{{{l_{EG}}}}{{{l_{EF}}}}) = \arccos (\frac{{{l_{AB}}}}{{{l_{EF}}}})γ=arccos(lEF​lEG​​)=arccos(lEF​lAB​​)得到。LABL_{AB}LAB​可以由矩形板的边长大小得知,LOFL_{OF}LOF​已知,LOEL_{OE}LOE​也可以通过激光雷达的数据得到,因此可以求得LEFL_{EF}LEF​,最后求得γ\gammaγ侧偏角。

4.2.2 α\alphaα俯仰角的标定

在这里插入图片描述
    ;首先不考虑侧偏角γ\gammaγ。激光雷达的Y轴垂直纸面向外,X轴呈如图所示方向,Z轴竖直向上。首先在1处放置一块标定板,激光雷达在标定板上扫描的位置为A,接着移动标定板置B处,过B作平行于地面的平行线,得到BC,即可求得α\alphaα俯仰角。
在这里插入图片描述    在实际过程中,需要考虑侧偏角。如图所示,在1处放置一块等腰三角形的标定板,同之前的步骤,将标定板移至2处,由图可知,∠F1E1D1\angle {F_1}{E_1}{D_1}∠F1​E1​D1​与∠F2E2D2\angle {F_2}{E_2}{D_2}∠F2​E2​D2​为侧倾角。在这里插入图片描述
    过D2D_2D2​作地面的平行线交于G点,可知∠GD2D1\angle GD_2D_1∠GD2​D1​即为要求的α\alphaα俯仰角。易知α=arctan⁡(D1GD2G)=arctan⁡(D1GB1B2)\alpha = \arctan \left( {\frac{{{D_1}G}}{{{D_2}G}}} \right) = \arctan \left( {\frac{{{D_1}G}}{{{B_1}{B_2}}}} \right)α=arctan(D2​GD1​G​)=arctan(B1​B2​D1​G​)D1G=B1D1−B2D2D_1G=B_1D_1-B_2D_2D1​G=B1​D1​−B2​D2​B1D1=B1C1−C1D1B_1D_1=B_1C_1-C_1D_1B1​D1​=B1​C1​−C1​D1​C1D1=E1D1C_1D_1=E_1D_1C1​D1​=E1​D1​E1D1=E1F1cos(γ)E_1D_1=E_1F_1cos(\gamma)E1​D1​=E1​F1​cos(γ)    从而可以求得α\alphaα俯仰角

4.3 多线激光雷达

在这里插入图片描述    如图所示:
车体坐标系:
Ov,Xv,Yv,ZvO_v,X_v,Y_v,Z_vOv​,Xv​,Yv​,Zv​
激光雷达坐标系:
Ol,Xl,Yl,ZlO_l,X_l,Y_l,Z_lOl​,Xl​,Yl​,Zl​
    假设车体坐标系一点P=(X,Y,Z)P=(X,Y,Z)P=(X,Y,Z),其在激光雷达坐标系中为P′=(X′,Y′,Z′)P'=(X',Y',Z')P′=(X′,Y′,Z′),于是有以下关系:[XYZ]=R[X′Y′Z′]+T\left[ {\begin{array}{ccccccccccccccc}X\\Y\\Z\end{array}} \right] = R\left[ {\begin{array}{ccccccccccccccc}{X'}\\{Y'}\\{Z'}\end{array}} \right] + T​XYZ​​=R​X′Y′Z′​​+T    RRR为激光雷达坐标系到车体坐标系的旋转矩阵,TTT为激光雷达坐标系到车体坐标系的平移向量在这里插入图片描述

4.3.1 纸箱法

在这里插入图片描述

  1. 在水平地面上摆放正方体纸箱,采集激光雷达数据
  2. 获得纸箱顶点的激光雷达坐标系坐标
  3. 通过测量得到纸箱顶点的车体坐标系坐标
  4. 用纸箱顶点的坐标代入坐标变换方程,求出旋转矩阵和平移向量

4.4 相机与激光雷达联合标定

在这里插入图片描述

将雷达点云向图像融合
在这里插入图片描述
将图像像素向雷达点云融合

    通过融合的方式,可以弥补单个传感器的不足,可以更好地环境感知。因此,就需要对相机和激光雷达进行联合标定。

标定内容:标定从激光雷达坐标系到相机坐标系的空间变换关系。
在这里插入图片描述在这里插入图片描述

在这里插入图片描述    对于单线激光雷达,选择标定箱上的两个端点
在这里插入图片描述    对于多线激光雷达,选择标定箱上下边沿的左右端点。在这里插入图片描述    获取像素雷达点对之后,结合相机内参,求解关于旋转矩阵和平移向量的线性方程,即可标定。在这里插入图片描述

参考文献

[1] L. Fan, X. Xiong, F. Wang, N. Wang and Z. Zha
ng, “RangeDet: In Defense of Range View for LiDAR-based 3D Object Detection,” 2021 IEEE/CVF International Conference on Computer Vision (ICCV), Montreal, QC, Canada, 2021, pp. 2898-2907, doi: 10.1109/ICCV48922.2021.00291.

声明

本人所有文章仅作为自己的学习记录,若有侵权,联系立删。本系列文章主要参考了清华大学、北京理工大学、深蓝学院、百度Apollo等相关课程。

相关内容

热门资讯

彩虹下的约定三年级作文(优选... 彩虹下的约定三年级作文 篇一彩虹下的约定我和小明是好朋友,我们住在同一个小区里。我们经常一起出去玩,...
小学三年级关于参观天文馆的作... 小学三年级关于参观天文馆的作文 篇一参观天文馆是一次非常有趣的经历。我们学校组织了一次参观天文馆的活...
三年级作文写物海洋馆23篇(... 三年级作文写物海洋馆23篇 篇一探秘海洋馆今天,我们班级去了海洋馆,我非常兴奋。一进门,我就看到了一...
上海小学三年级暑假生活小作文... 上海小学三年级暑假生活小作文300字59篇 篇一我和家人去游乐园的经历暑假来临,我兴奋地和家人一起计...
作文关于新时代新生活三年级【... 作文关于新时代新生活三年级 篇一新时代新生活的体验近年来,随着科技的不断进步和社会的发展,我们进入了...
三年级企鹅的作文(精彩6篇) 三年级企鹅的作文 篇一我是一只三年级的企鹅,我生活在南极的寒冷海洋中。每天,我都在冰雪覆盖的世界中度...
三年级作文荷花(经典6篇) 三年级作文荷花 篇一荷花是夏天的代表,每当夏日来临,池塘里的荷花就会绽放出美丽的花朵。我喜欢荷花,因...
三年级捉迷藏作文片段(经典6... 三年级捉迷藏作文片段 篇一在一个晴朗的周末下午,我和我的同学们决定来一场刺激的捉迷藏游戏。我们将游戏...
和爸爸去菜场买菜作文三年级【... 和爸爸去菜场买菜作文三年级 篇一今天,我和爸爸一起去菜场买菜。菜场离我们家不远,走路只需要十分钟。一...
遛狗的小学三年级作文【优秀3... 遛狗的小学三年级作文 篇一遛狗的小学三年级作文 篇一我家有一只可爱的小狗,它名叫小咪。小咪是一只混血...
三年级作文客人来了300字【... 三年级作文客人来了300字 篇一客人来了今天,我们班迎来了一位特殊的客人,他是我们学校的校长。这是他...
我渴望长大三年级作文(经典3... 我渴望长大三年级作文 篇一我渴望长大我是一名三年级的小学生,每天都在学校度过快乐的时光。尽管我很享受...
三年级作文我的幸福童年【优选... 三年级作文我的幸福童年 篇一我的幸福童年我是一个幸福快乐的孩子,拥有一个充满爱和温暖的家庭,度过了一...
我最有趣的一件事200字作文... 我最有趣的一件事200字作文三年级 篇一标题:迷路的冒险我最有趣的一件事是在暑假的时候,我和爸爸妈妈...
啄木鸟医生三年级作文(优选5... 啄木鸟医生三年级作文 篇一我是一只啄木鸟,今年已经三年级了。虽然我是一只鸟,但我却拥有着医生的技能。...
生活的快乐_叙事作文300字... 生活的快乐_叙事作文300字_三年级写事作文 篇一生活的快乐今天,我想和大家分享一件让我快乐的事情。...
三年级游植物园记作文350字... 三年级游植物园记作文350字6篇 篇一:难忘的植物园之旅今天,我们三年级的小朋友们去了植物园参观。一...
三年级作文大全新学期的变化(... 三年级作文大全新学期的变化 篇一新学期的变化新学期开始了,我迎来了充满变化的三年级生活。和以前相比,...
寒假二三事三年级作文【精选3... 寒假二三事三年级作文 篇一快乐的寒假时光今年的寒假真是过得太快了,转眼间就要开学了。回顾这个寒假,我...
三年级作文350字关于动物【... 三年级作文350字关于动物 篇一我喜欢的动物我喜欢的动物是小狗。小狗有着可爱的外形和活泼的性格,让人...