CN116930920A - 激光雷达及激光雷达控制方法 - Google Patents
激光雷达及激光雷达控制方法 Download PDFInfo
- Publication number
- CN116930920A CN116930920A CN202210360008.3A CN202210360008A CN116930920A CN 116930920 A CN116930920 A CN 116930920A CN 202210360008 A CN202210360008 A CN 202210360008A CN 116930920 A CN116930920 A CN 116930920A
- Authority
- CN
- China
- Prior art keywords
- laser
- rotor
- image
- exposure
- image acquisition
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 40
- 238000001514 detection method Methods 0.000 claims abstract description 74
- 230000003287 optical effect Effects 0.000 claims abstract description 68
- 238000003384 imaging method Methods 0.000 claims abstract description 28
- 230000008569 process Effects 0.000 claims description 17
- 230000001502 supplementing effect Effects 0.000 claims description 17
- 238000006243 chemical reaction Methods 0.000 claims description 12
- 239000000523 sample Substances 0.000 claims description 8
- 238000012546 transfer Methods 0.000 claims description 6
- 238000011156 evaluation Methods 0.000 claims description 4
- 238000005070 sampling Methods 0.000 claims description 3
- 230000000875 corresponding effect Effects 0.000 description 26
- 230000001276 controlling effect Effects 0.000 description 12
- 238000010586 diagram Methods 0.000 description 9
- 230000004927 fusion Effects 0.000 description 9
- 238000012545 processing Methods 0.000 description 7
- 230000007613 environmental effect Effects 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 239000003990 capacitor Substances 0.000 description 3
- 238000005286 illumination Methods 0.000 description 3
- 238000013441 quality evaluation Methods 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 230000002349 favourable effect Effects 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000008447 perception Effects 0.000 description 2
- 238000003672 processing method Methods 0.000 description 2
- 230000002035 prolonged effect Effects 0.000 description 2
- 238000002310 reflectometry Methods 0.000 description 2
- 238000007493 shaping process Methods 0.000 description 2
- 239000000758 substrate Substances 0.000 description 2
- 238000011144 upstream manufacturing Methods 0.000 description 2
- 241000252073 Anguilliformes Species 0.000 description 1
- 241000283070 Equus zebra Species 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000010351 charge transfer process Methods 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000005669 field effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000001303 quality assessment method Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000008054 signal transmission Effects 0.000 description 1
- 238000011895 specific detection Methods 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/481—Constructional features, e.g. arrangements of optical elements
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/481—Constructional features, e.g. arrangements of optical elements
- G01S7/4811—Constructional features, e.g. arrangements of optical elements common to transmitter and receiver
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/481—Constructional features, e.g. arrangements of optical elements
- G01S7/4817—Constructional features, e.g. arrangements of optical elements relating to scanning
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Optical Radar Systems And Details Thereof (AREA)
Abstract
本说明书提供激光雷达及激光雷达控制方法,其中,激光雷达包括:转子、激光收发装置、图像采集装置及控制装置;所述激光收发装置和所述图像采集装置设置于所述转子上,并围绕所述转子的轴线排布;所述转子,适于绕所述轴线旋转;所述激光收发装置,包括收发光学组件,适于发射探测信号和接收所述探测信号被反射形成的回波信号;所述图像采集装置,包括成像光学组件,适于对目标区域进行曝光;所述控制装置,适于基于所述探测信号和回波信号生成深度信息,并基于所述图像采集装置的曝光结果生成图像。采用上述方案,能够提高激光雷达的数据质量和同步性,从而改善激光雷达的性能。
Description
技术领域
本说明书实施例涉及雷达技术领域,尤其涉及一种激光雷达及激光雷达控制方法。
背景技术
目前,激光雷达已成为环境感知环节的重要设备。通过激光雷达的点云,可以提供外部环境的三维空间信息。但是,由于激光雷达点云的分辨率和反射率信息的精准度存在局限,使得激光雷达能够提供的有用信息受到了限制。
与此同时,图像采集技术的发展更加超前,图像采集设备的硬件性能(如体积、重量、功耗、使用寿命、可响应的光谱范围等)和软件性能(如数据分辨率、数据读取、数据转换、数据处理等)均已存在显著提升,使得图像采集设备生成的图像能够提供层次丰富且真实直观的二维平面信息。
因此,在目标识别任务(如识别路牌、交通指示灯和斑马线等目标的任务)中,仍然高度依赖图像采集设备,而为了弥补图像采集设备的空间局限性,需要通过激光雷达的点云为图像提供对应的深度信息。
激光雷达可以通过绕轴线旋转的方式实现垂直于轴线方向的360°环境感知,而图像采集设备固定不动,且图像采集设备的视场有限,因此,图像和点云之间存在较大视场差异。为了解决上述问题,目前存在以下两种方案:
1)在图像采集设备中设置多个图像传感器,通过多个图像传感器的组合形成垂直于激光雷达转轴方向的360°视场角,或者,通过多个图像采集设备的组合形成垂直于激光雷达转轴方向的360°视场角。
但是该方案需要进行多图像拼接。同时,由于图像采集设备和激光雷达之间独立运行,二者坐标系不同,且工作时序存在偏差,单个图像和点云的深度信息之间视场并不匹配,需要对多图像拼接得到的360°图像和深度信息进行标定,计算过程复杂;且激光雷达和图像采集设备的精度越高,计算量越大。因此,图像和深度信息之间的标定复杂性会造成数据处理延时过长的问题。
2)将一维的线阵图像传感器安装在激光雷达的转子上,与激光雷达的线阵探测器一同旋转,并与线阵探测器共用一套光学组件。这样,线阵图像传感器和线阵探测器可以分别接收来自相同视场区域的入射光,图像和深度信息之间的视场匹配,不需要复杂的标定过程。
但是,通过共用的光学组件,线阵图像传感器和线阵探测器分别接收相同入射光的时间减少,因而导致线阵图像传感器的曝光时间缩短,进一步地,若线阵图像传感器存在多个单色通道(如红色通道、绿色通道和蓝色通道),则线阵图像传感器各单色通道的曝光时间缩短更多,从而严重影响图像的成像质量。
综上可知,现有的技术方案无法在降低图像和深度信息之间标定复杂性的情况下,兼顾图像的成像质量。
发明内容
有鉴于此,本说明书实施例提供一种激光雷达及激光雷达控制方法,能够提高激光雷达的数据质量和同步性,从而改善激光雷达的性能。
本说明书实施例提供了一种激光雷达,包括:转子、激光收发装置、图像采集装置及控制装置;所述激光收发装置和所述图像采集装置设置于所述转子上,并围绕所述转子的轴线排布;其中:
所述转子,适于绕所述轴线旋转;
所述激光收发装置,包括收发光学组件,适于发射探测信号和接收所述探测信号被反射形成的回波信号;
所述图像采集装置,包括成像光学组件,适于对目标区域进行曝光;
所述控制装置,适于基于所述探测信号和回波信号生成深度信息,并基于所述图像采集装置的曝光结果生成图像。
可选地,所述控制装置,还适于基于所述激光收发装置和所述图像采集装置之间的相对位姿关系,获得包含深度信息的图像。
可选地,所述图像采集装置还包括按照第一方向排布的多个像素采集模块,且各所述像素采集模块包括按照第二方向排布的多个感光单元;所述第一方向为与所述轴线平行的方向,所述第二方向为:与所述轴线垂直的方向。
可选地,所述像素采集模块在相邻两次曝光之间转过的角度与所述像素采集模块在所述第二方向的角度分辨率相当。
可选地,所述控制装置还适于在转动过程中控制各所述像素采集模块的多个所述感光单元依次对相同的视场扫描区域进行曝光。
可选地,所述像素采集模块适于将多个所述感光单元对所述视场扫描区域依次曝光产生的曝光电荷进行叠加,以作为所述曝光结果输出。
可选地,所述像素采集模块还包括:电荷移位寄存单元和转化输出单元;
所述电荷移位寄存单元,包括多个电荷存储区域,多个所述电荷存储区域与多个所述感光单元一一对应,且多个所述电荷存储区域依次耦接;所述电荷移位寄存单元,适于存储和输出多个所述感光单元对所述视场扫描区域依次曝光产生的曝光电荷;
所述转化输出单元,与所述电荷移位寄存单元耦接,适于对所述电荷移位寄存单元输出的曝光电荷进行采样,并转化为电信号输出。
可选地,所述控制装置,适于读取所述曝光结果,以生成图像;
所述像素采集模块的曝光周期的时长至少大于:单次曝光时间、单次电荷转移时间以及单次读取时间之和。
可选地,所述激光收发装置包括:第一激光收发模组和第二激光收发模组,所述第一激光收发模组包括第一收发光学组件,所述第二激光收发模组包括第二收发光学组件,所述第一收发光学组件的焦距大于所述第二收发光学组件的焦距。
可选地,所述第一激光收发模组和所述第二激光收发模组围绕所述轴线排布。
可选地,所述控制装置还适于对生成的图像进行质量评估,并根据评估结果调整多个所述像素采集模块的曝光时间。
可选地,所述激光雷达还包括:补光模块,设置于所述转子上,适于为所述图像采集装置进行补光。
本说明书实施例还提供了一种激光雷达控制方法,所述激光雷达包括:转子、激光收发装置、图像采集装置及控制装置,所述激光收发装置包括收发光学组件;所述图像采集装置包括成像光学组件;所述激光收发装置和所述图像采集装置设置于所述转子上,并围绕所述转子的轴线排布;
所述激光雷达控制方法包括:
A1)控制所述转子绕所述轴线旋转;
A2)控制所述激光收发装置发射探测信号和接收所述探测信号被反射形成的回波信号;
A3)基于所述探测信号和回波信号生成深度信息;
A4)控制所述图像采集装置对目标区域进行曝光;
A5)基于所述图像采集装置的曝光结果生成图像。
可选地,所述激光雷达控制方法还包括:
A6)基于所述激光收发装置和所述图像采集装置之间的相对位姿关系,获得包含深度信息的图像。
可选地,所述图像采集装置还包括按照第一方向排布的多个像素采集模块,且各所述像素采集模块包括按照第二方向排布的多个感光单元;所述第一方向为与所述转子的轴线平行的方向,所述第二方向为:与所述转子的轴线垂直的方向;
所述步骤A1)包括:
控制所述转子的转速,以使所述像素采集模块在相邻两次曝光之间转过的角度与所述像素采集模块在所述第二方向的角度分辨率相当。
可选地,所述步骤A4)包括:
在转动过程中控制各所述像素采集模块的多个所述感光单元依次对相同的视场扫描区域进行曝光。
采用本说明书实施例提供的激光雷达,激光收发装置和图像采集装置可设置于转子上,并围绕所述转子的轴线排布,所述转子可以绕轴线旋转;所述激光收发装置可以通过收发光学组件发射探测信号和接收所述探测信号被反射形成的回波信号;所述图像采集装置通过成像光学组件对目标区域进行曝光,所述控制装置可以基于所述探测信号和回波信号生成深度信息,并且可以基于所述图像采集装置的曝光结果生成图像。由上可知,在所述转子旋转的过程中,通过带动所述激光收发装置和所述图像采集装置旋转,可使所述激光收发装置和所述图像采集装置均实现垂直于轴线方向的360°环境感知,激光收发装置和图像采集装置共同设置于转子上,二者之间的相对位姿关系固定,从而降低图像和深度信息之间的标定复杂性,提高数据处理效率;并且,转子的转速、所述激光收发装置的工作时序和所述图像采集装置的工作时序相适配,从而可以提高图像和深度信息之间的时间同步性;以及,所述激光收发装置和所述图像采集装置通过独立配置的光学组件进行运作,可以为图像采集装置提供足够的曝光时间,从而确保图像的成像质量。故上述结构可以提高激光雷达的数据质量和同步性,从而改善激光雷达的性能。此外,采用上述结构还可以降低激光雷达的硬件成本。
附图说明
为了更清楚地说明本说明书实施例的技术方案,下面将对本说明书实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面所描述的附图仅仅是本说明书的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本说明书实施例中一种激光雷达的结构示意图。
图2为图1所示激光雷达的转子逆时针旋转180°后的结构示意图。
图3为本说明书实施例提供的一种图像采集装置的正视图。
图4为图3所示图像采集装置的俯视图。
图5至图6为图4所示图像采集装置的旋转过程示意图。
图7为图3所示图像采集装置获得同一视场扫描区域曝光结果的示意图。
图8为本说明书实施例提供的一种像素采集模块的结构示意图。
图9为本说明书实施例提供的一种激光收发装置的结构示意图。
图10为本说明书实施例提供的另一种激光雷达的结构示意图。
图11为本说明书实施例提供的一种激光雷达控制方法的流程图。
具体实施方式
由背景技术部分可知,现有的技术方案无法在降低图像和深度信息之间标定复杂性的情况下,兼顾图像的成像质量。
为了解决上述问题,本说明书实施例提供了一种激光雷达结构,激光收发装置和图像采集装置可设置于转子上,并围绕所述转子的轴线排布,所述转子可以绕轴线旋转;所述激光收发装置可以通过收发光学组件发射探测信号和接收所述探测信号被反射形成的回波信号;所述图像采集装置通过成像光学组件对目标区域进行曝光,所述控制装置可以基于所述探测信号和回波信号生成深度信息,并且可以基于所述图像采集装置的曝光结果生成图像。由此,能够提高激光雷达的数据质量和同步性,从而改善激光雷达的性能。
为使本领域技术人员更加清楚地了解及实施本说明书实施例的构思、实现方案及优点,以下参照附图进行详细说明。
参照图1,为本说明书实施例中一种激光雷达的结构示意图,在本说明书实施例中,激光雷达LS1可以包括:转子M11、激光收发装置M12、图像采集装置M13及控制装置M14;所述激光收发装置M12和所述图像采集装置M13设置于所述转子M11上,并围绕所述转子M11的轴线排布,其中,在图1所示视角中,所述转子M11的轴线垂直于图1所处平面。
所述转子M11适于绕所述轴线旋转。
所述激光收发装置M12包括收发光学组件M121,且所述激光收发装置M12适于向外界发射探测信号X1和接收所述探测信号X1被外界的障碍物W1反射形成的回波信号X2。
所述图像采集装置M13包括成像光学组件M131,且所述图像采集装置M13适于对目标区域F1进行曝光。
所述控制装置M14,基于所述探测信号X1和回波信号X2生成深度信息,并基于所述图像采集装置M13的曝光结果生成图像。
由上可知,在所述转子旋转的过程中,通过带动所述激光收发装置和所述图像采集装置旋转,可使所述激光收发装置和所述图像采集装置均实现垂直于轴线方向的360°环境感知,激光收发装置和图像采集装置共同设置于转子上,二者之间的相对位姿关系固定,从而降低图像和深度信息之间的标定复杂性,提高数据处理效率;并且,转子的转速、所述激光收发装置的工作时序和所述图像采集装置的工作时序相适配,从而可以提高图像和深度信息之间的时间同步性;以及,所述激光收发装置和所述图像采集装置通过独立配置的光学组件进行运作,可以为图像采集装置提供足够的曝光时间,从而确保图像的成像质量。故上述结构可以提高激光雷达的数据质量和同步性,从而改善激光雷达的性能。此外,采用上述结构还可以降低激光雷达的硬件成本。
需要说明的是,本说明书中所述的图像采集装置的目标区域,可以理解为:在一个曝光周期内,所述图像采集装置的视场在外部环境中覆盖的区域。
还需要说明的是,所述图像采集装置的目标区域不是一个真实存在边界限定的区域,并且,在转子带动图像采集装置的旋转过程中,图像采集装置的视场发生转动,相应地,图像采集装置的目标区域也发生动态变化。
在具体实施中,可基于所述激光收发装置和所述图像采集装置之间的相对位姿关系,进行数据融合,获得包含深度信息的图像。由此,能够充分结合激光收发装置的高精度探测结果和图像采集装置的高精度曝光结果,从而提高深度信息和图像的精度,有效保障激光雷达所提供的数据质量和信息量。
在具体实施中,由于所述激光收发装置和所述图像采集装置之间的相对位姿(即位置和角度)固定不变,在激光雷达工作之前,可对所述激光收发装置和所述图像采集装置进行标定,从而能够得到所述激光收发装置和所述图像采集装置之间的相对位姿关系。然后,基于已获得的激光收发装置和所述图像采集装置之间的相对位姿关系,进行数据融合,获得包含深度信息的图像。其中,标定方式可以包括:人工标定、算法自动标定等。本说明书实施例对此不做具体限制。
由此,在激光雷达工作之前完成所述激光收发装置和所述图像采集装置之间的标定,有利于在激光雷达工作时调用,从而在后续数据处理时无需反复进行相对位姿的标定,降低算法复杂性,并提高数据融合效率。
在一可选示例中,数据融合的具体过程可以包括:基于所述激光收发装置和所述图像采集装置之间的相对位姿关系,将所述深度信息投影到所述图像上,或则,将图像投影到激光雷达的点云中,与深度信息结合,由此形成包含深度信息的图像。
在具体实施中,因为激光收发装置和图像采集装置均设置于转子上,为了进一步降低标定复杂性,可以使激光收发装置和图像采集装置采用同一坐标系,并且,深度信息和图像均可在同一坐标系下采用极坐标进行表示。基于此,激光收发装置和图像采集装置之间的相对位姿关系可通过二者之间的夹角进行表示。在一可选示例中,可以通过激光收发装置中收发光学组件的光轴和图像采集装置中成像光学组件的光轴之间的夹角,确定二者之间的相对位姿关系。需要说明的是,为了便于描述和理解,将与转子轴线垂直的方向定义为水平方向。
在转动过程中,由于激光收发装置和图像采集装置之间存在固定的水平夹角,因而同步工作的激光收发装置和图像采集装置并不对应同一目标区域。当激光收发装置转过二者之间存在的水平夹角后,能够与未转动水平夹角前图像采集装置的目标区域对应,或者反之,图像采集装置在转过二者之间的水平夹角后,与未转动水平夹角前激光收发装置的目标区域对应。其中,所述的激光收发装置的目标区域,可以理解为:在一个探测周期内,所述激光收发装置的视场在外部环境中覆盖的区域。由此可知,激光收发装置和图像采集装置之间存在水平角度延迟。
此外,激光收发装置的视场范围和图像采集装置的视场范围可能存在差异,因而提供深度信息的数据点对应的水平角度与图像中水平方向的不同像素的水平角度之间存在水平角度差。
基于此,根据激光收发装置的视场范围和图像采集装置的视场范围、以及激光收发装置和图像采集装置之间相对位姿关系,可以确定获得的深度信息和图像在同一坐标系中的水平角度差,进而在深度信息或图像旋转上述水平角度差后,即可获得对应于同一视场范围的图像像素和深度信息,从而实现数据融合,获得具有深度信息的图像。其中,激光收发装置的视场范围和图像采集装置的视场范围均可通过极坐标中的角度表示。
在一可选示例中,继续参考图1,所述激光收发装置M12和所述图像采集装置M13分别设置于所述轴线的两侧,收发光学组件M121和成像光学组件M131的光轴之间夹角为θ。转子M11绕所述轴线逆时针旋转。
激光收发装置M12还可以包括激光发射模块和激光接收模块(图中未示出),其中:所述激光发射模块可以从不同发散角发射探测光,多个探测光形成一束探测光,并发射至所述收发光学组件;所述收发光学组件在对该束探测光进行传输和整形后,能够形成探测信号,并向外部环境射出。所述收发光学组件可以对探测信号被反射形成的回波光进行传输和聚焦,从而得到回波信号,并传输至所述激光接收模块。所述激光接收模块适于对回波信号进行光电探测,并向控制装置输出光电探测得到的电信号。
激光发射模块包括多个激光器,激光接收模块包括多个探测器,多个激光器和多个探测器分别按照指定方向(如与转子M11轴线平行的方向)排布。多个激光器发射探测光的发射方向与指定方向之间存在不同的夹角。各探测器与各激光器存在对应关系,一个激光器发出探测光后,与之对应的探测器接收回波信号,当探测器接收到回波信号后,控制装置M14通过对应的激光器发射探测光的时间与探测器接收到回波信号的时间,可以计算得到光飞行时间,进而确定激光收发装置M12与外界障碍物之间的空间距离,得到深度信息。
不同探测器用于接收相对于指定方向不同夹角的回波信号,因而不同探测器测得的数据点可根据探测器位置获知其对应的相对于指定方向的夹角。
转子M11带动激光收发装置M12旋转,在激光收发装置M12旋转过程中,多个激光器依次轮巡发出探测光,探测器在与其对应的激光器发出探测光之后对回波信号进行探测。在所有探测器完成轮巡之后,获得了该水平角度下对应于探测器指定方向视场(Field ofView,FOV)范围的深度信息。在完成一次探测时,激光收发装置M12已经从一个角度旋转至另一个角度,并进行再一次的轮巡探测。因而,同一个探测器相邻两次信号探测对应的水平角度差可以表示为探测器在水平方向上的角分辨率。
相应地,图像采集装置M13的视场可以覆盖一定指定方向角度和一定的旋转方向角度的二维区域。所述控制装置M14基于图像采集装置M13在图1所示位置处的曝光结果,生成图像P1。
在转子M11在旋转角度θ后,激光收发装置M12的视场中心与目标区域F1的中心对应,如图2所示,激光收发装置M12在图2所示视场范围内发射的探测信号X1'和接收的回波信号X2'。随着转子M11的旋转,激光收发装置M12能够对目标区域F1进行扫描探测,图1所示为逆时针旋转,因此激光收发装置M12对目标区域F1从右边缘向左边缘依次扫描。所述控制装置M14基于激光收发装置M12对目标区域F1发射的探测信号X1'和接收的回波信号X2',可以获得目标区域F1角度范围内的深度信息D1。
基于激光收发装置M12的视场范围、图像采集装置M13的视场范围、以及所述激光收发装置M12和所述图像采集装置M13之间的相对位姿关系,可以确定图像采集装置M13的图像P1在水平方向的不同像素与激光收发装置M12中提供深度信息D1的数据点分别对应的水平角度差,从而可将深度信息D1投影至图像P1,形成包含深度信息的图像PD1。
进一步,随着转子M11的旋转,激光收发装置M12进行水平方向360°的探测,同时,图像采集装置M13进行水平方向360°的成像,根据上述相对位姿关系,将激光收发装置M12的深度信息和图像采集装置M13的图像在同一坐标系中表示,进而将深度信息或图像信息进行水平角度补偿,即可实现深度信息和图像的融合,获得水平方向360°的包含深度信息的图像。
更进一步,激光收发装置M12和图像采集装置M13之间可能存在一定的数据输出时间差,通过计算在激光收发装置M12与图像采集装置M13之间的数据输出时间差内转子M11转过的角度,并与激光收发装置M12和图像采集装置M13之间的视场水平角度差同时用于计算所需补偿的水平角度,进而提高深度信息和图像融合的视场匹配精度。
可以理解的是,上述实施例和附图仅为示意性说明,并不对所述转子的旋转方向、所述激光收发装置和所述图像采集装置在所述转子上的排布情况以及控制装置生成的数据类型进行限制。例如,所述转子可以进行顺时针旋转;所述激光收发装置和所述图像采集装置之间的夹角可以变化;控制装置可基于所述探测信号和回波信号还可以生成角度信息和反射率信息。本领域技术人员可根据具体情况,对本说明书实施例和附图提供的技术方案进行调整。
在具体实施中,所述图像采集装置还可以包括按照第一方向排布的多个像素采集模块,且各所述像素采集模块包括按照第二方向排布的多个感光单元;所述第一方向为与所述轴线平行的方向,所述第二方向为:与所述轴线垂直的方向。
根据多个像素采集模块的排布和各像素采集模块中多个感光单元的排布,在一个曝光周期内,各感光单元的视场在外部环境中覆盖的区域为所述目标区域的一部分,为了便于描述,将感光单元的视场在外部环境中覆盖的区域称为“视场扫描区域”,即在一个曝光周期内,所述图像采集装置的目标区域由所有进行曝光的感光单元的视场扫描区域组成。
由此,在转子带动图像采集装置旋转的过程中,通过控制多个像素采集模块,可以对目标区域中不同第一方向的视场扫描区域进行曝光,而通过控制各像素采集模块中的感光单元,可以对目标区域中不同第二方向的视场扫描区域进行曝光,从而可以提高曝光灵活性,并有效保障曝光效率。
在一可选示例中,如图3和图4所示,为本说明书实施例提供的一种图像采集装置的正视图和俯视图。需要说明的是,为了便于描述和理解图像采集装置中多个像素采集模块之间的位置关系,图3中未示出成像光学组件。
结合参考图3和图4,所述图像采集装置30可以包括:成像光学组件31和M个像素采集模块,即像素采集模块321至像素采集模块32M,其中,M为大于1的正整数。
像素采集模块321至像素采集模块32M按照第一方向排布,所述第一方向为与所述转子的轴线(图中未示出)平行的方向。在各所述像素采集模块中,包括多个感光单元,且多个感光单元按照第二方向排布。以所述像素采集模块321为例,所述像素采集模块321包括N个感光单元,即感光单元321-1至感光单元321-N。可以理解的是,根据所述像素采集模块321中多个感光单元的排布描述,能够类推出其他像素采集模块(即所述像素采集模块322至所述像素采集模块32M)中多个感光单元的排布情况,在此不再一一赘述。
其中,在图3所示视角中,所述转子的轴线、所述第一方向和所述第二方向均平行于图3所处平面;而在图4所示视角中,所述转子的轴线和所述第一方向垂直于图4所处平面,所述第二方向平行于图4所处平面。
需要说明的是,图3仅为示意性示出多个像素采集模块之间的位置关系,其并不对多个像素采集模块在激光雷达中的实际物理位置进行限定,在实际应用中,可根据具体情况,在激光雷达中设置多个像素采集模块以及各像素采集模块中的感光单元。例如,多个像素采集模块可以设置于同一基板上;又例如,所有像素采集模块的感光单元可以设置于同一基板上。
在具体实施中,所述像素采集模块在相邻两次曝光之间转过的角度与所述像素采集模块在所述第二方向的角度分辨率相当。其中,所述像素采集模块在所述第二方向的角度分辨率与感光单元在第二方向的视场相关。具体地,像素采集模块在所述第二方向的角度分辨率的对应角度为相邻两个感光单元的视场角之差。
由此,在控制所述像素采集模块的单次曝光时间小于所述像素采集模块转过一个第二方向的角度分辨率对应角度的时间,即可使所述像素采集模块的曝光时序和所述转子的转速适配,从而提高曝光质量。
在一可选示例中,继续参考图3和图4,感光单元321-1与感光单元321-2之间的视场角之差为α,则所述像素采集模块321在所述第二方向的角度分辨率的对应角度为α。由此,在控制所述像素采集模块321的单次曝光时间小于所述像素采集模块321转过一个第二方向的角度分辨率对应角度α的时间,即可使所述像素采集模块的曝光时序和所述转子的转速适配,从而提高曝光质量。
在实际应用中,所述像素采集模块在单次进行曝光时,根据具体情况和需求,可以启动所有的感光单元,也可以启动指定的部分感光单元,本说明书对此不做具体限制。由此,可以灵活调整进行曝光的感光单元数量以及感光单元位置,从而满足不同的曝光需求。
在具体实施中,所述控制装置可以在转动过程中控制各所述像素采集模块的多个所述感光单元依次对相同的视场扫描区域进行曝光。
具体地,在图像采集装置旋转过程中,像素采集模块也随之旋转,处于同一像素采集模块的多个所述感光单元的视场在不同时段可以覆盖相同的区域。通过控制各像素采集模块中各感光单元的曝光时机,以位于端部的第一个感光单元为起始单元进行曝光后,当像素采集模块旋转过一个第二方向的角度分辨率对应角度后,向后控制相应次序的感光单元进行曝光,从而可以使各像素采集模块中的多个所述感光单元依次对相同的视场扫描区域进行曝光。
由此,可以减少单个感光单元对相同视场扫描区域的曝光时间,并确保获得丰富的环境信息。
在一可选示例中,继续参考图3和图4,并结合参考图5和图6,以像素采集模块321为例,在像素采集模块321旋转过程中,在t01时刻,像素采集模块321到达图4所示位置,控制感光单元321-1对视场扫描区域f1进行曝光。以感光单元321-1为起始单元,在t02时刻,像素采集模块321旋转过一个第二方向的角度分辨率对应角度α,控制感光单元321-2对视场扫描区域f1进行曝光。以此类推,在t0N时刻,像素采集模块321旋转过N个第二方向的角度分辨率对应角度α,控制感光单元321-N对视场扫描区域f1进行曝光。
由此,可以减少感光单元321-1至感光单元321-N对相同视场扫描区域f1的曝光时间,并确保获得丰富的环境信息。
在具体实施中,所述感光单元在曝光过程中,其光敏面用于感应入射光子,从而使得所述感光单元被入射光子激励产生曝光电荷。所述像素采集模块可以将多个所述感光单元对所述视场扫描区域依次曝光产生的曝光电荷进行叠加,以作为所述曝光结果输出。具体地,由于同一像素采集模块中的相邻两个感光单元之间的相对位置固定,因而在根据转速确定相邻感光单元之间对相同视场扫描区域进行曝光的时间差后,可以将相同视场扫描区域的曝光电荷进行叠加,作为该视场扫描区域的曝光结果输出。
由此,通过叠加多个感光单元对同一视场扫描区域的曝光结果,可以确保同一视场扫描区域的曝光质量,进而提高图像精度。
在一可选示例中,继续参考图3至图6,并参考图7,叠加感光单元321-1在t01时刻进行曝光产生的曝光电荷、感光单元321-2在t02时刻进行曝光产生的曝光电荷……以及感光单元321-N在t0N时刻进行曝光产生的曝光电荷,可以得到视场扫描区域f1的曝光结果df1。由此,通过叠加感光单元321-1至感光单元321-N对同一视场扫描区域f1的曝光结果,可以确保同一视场扫描区域f1的曝光质量,进而提高图像精度。
在具体实施中,像素采集模块可以对多个发光单元的曝光电荷进行存储、转移和转化,从而可以将相同视场扫描区域的曝光电荷进行叠加,并将所述曝光结果进行输出。
在一可选示例中,如图8所示,为本说明书实施例提供的一种像素采集模块的结构示意图,所述像素采集模块80可以包括:P个感光单元(如图8中感光单元81-1至感光单元81-P)、电荷移位寄存单元82和转化输出单元83;
所述电荷移位寄存单元82,包括多个电荷存储区域(如图8中的电荷存储区域82-1至电荷存储区域82-P),多个所述电荷存储区域与多个所述感光单元一一对应(如图8中电荷存储区域82-1与感光单元81-1对应),且多个所述电荷存储区域依次耦接(如图8中电荷存储区域82-1与电荷存储区域82-2耦接);所述电荷移位寄存单元82可存储和输出所述感光单元81-1至感光单元81-P对所述视场扫描区域依次曝光产生的曝光电荷。
所述转化输出单元83,与所述电荷移位寄存单元82耦接,可对所述电荷移位寄存单元82输出的曝光电荷进行采样,并转化为电信号,所述电信号作为曝光结果进行输出。
在像素采集模块80进行旋转时,按照对相同视场扫描区域的曝光顺序,感光单元81-1第一个对相同视场扫描区域进行曝光,感光单元81-1对应的电荷存储区域82-1存储感光单元81-1产生的曝光电荷,并在感光单元81-1完成曝光后,将感光单元81-1产生的曝光电荷输出值电荷存储区域82-2进行存储,从而将感光单元81-1产生的曝光电荷转移至电荷存储区域82-2。
在所述像素采集模块80转过一个第二方向的角度分辨率对应角度后,感光单元81-2第二个对相同视场扫描区域进行曝光,感光单元81-2对应的电荷存储区域82-2基于已存储的感光单元81-1产生的曝光电荷,叠加存储感光单元81-2产生的曝光电荷,并在感光单元81-2完成曝光后,将经过叠加的曝光电荷(即感光单元81-1产生的曝光电荷和感光单元81-2产生的曝光电荷)输出至电荷存储区域82-3(图中未示出)存储,从而将经过叠加的曝光电荷转移至电荷存储区域82-3。
以此类推,直至所述像素采集模块80转过P个第二方向的角度分辨率对应角度后,感光单元81-P对相同视场扫描区域进行曝光,感光单元81-P对应的电荷存储区域82-P基于已存储的经过叠加的曝光电荷(即感光单元81-1产生的曝光电荷至感光单元81-(P-1)产生的曝光电荷),叠加存储感光单元81-P产生的曝光电荷,并在感光单元81-P完成曝光后,将叠加的曝光电荷输出至转化输出单元83。
转化输出单元83对所述电荷移位寄存单元82输出的经过叠加的曝光电荷(即感光单元81-1产生的曝光电荷至感光单元81-P产生的曝光电荷)进行采样,并转化为电信号向外输出。
在转子稳定旋转时,转化输出单元83在每一个曝光周期均能对P个感光单元依次对同一视场扫描区域进行曝光的叠加曝光电荷进行采样和输出。
由上可知,P个感光单元的曝光过程和P个感光单元之间的曝光电荷转移过程是连续的,在进行P次曝光之后,转化输出单元可以接收到经过P次叠加的曝光电荷,在不改变转子转速和各感光单元曝光时间的情况下,相当于将像素采集模块对同一视场扫描区域的曝光时间增加了P倍,这样,即使是恶劣天气或光能不足的环境,也能够清晰成像,从而提高成像质量。
可以理解的是,上述多个示例仅描述了同一像素采集模块中多个感光单元对于一个相同的视场扫描区域的曝光过程。但是,在实际应用中,在同一像素采集模块中,在一个感光单元完成一个视场扫描区域的曝光后,还可以控制该感光单元对下一个视场扫描区域进行曝光,从而实现多个感光单元在同一时刻对不同的视场扫描区域进行曝光的动态曝光。
在实际应用中,可以对多个像素采集模块进行控制,从而使得多个像素采集模块中处于同一次序的感光单元进行同步曝光。
在一可选示例中,结合参考图3,对于像素采集模块321至32M,在t01时刻,控制像素采集模块321的感光单元321-1、像素采集模块322的感光单元322-1至像素采集模块32M的感光单元32M-1进行曝光;在t02时刻,控制像素采集模块321的感光单元321-2、像素采集模块322的感光单元322-2至像素采集模块32M的感光单元32M-2进行曝光;以此类推,在t0N时刻,控制像素采集模块321的感光单元321-N、像素采集模块322的感光单元322-N至像素采集模块32M的感光单元32M-N进行曝光。
在一可选示例中,可以对所述多个像素采集模块进行控制,使所有感光单元按照预设的曝光周期持续进行曝光,即每个曝光周期中,所有感光单元同时曝光。各所述像素采集模块可以持续输出对应不同视场扫描区域的曝光结果,从而获得高精度二维图像。
在具体实施中,所述控制装置可读取所述像素采集模块输出的曝光结果,以生成图像。具体地,所述控制装置可以包括与图像采集装置适配的成像读出电路。成像读出电路可以分别读取图像采集装置中各像素采集模块输出的曝光结果。
在具体实施中,所述像素采集模块的曝光周期的时长至少大于:单次曝光时间、单次电荷转移时间以及单次读取时间之和。换而言之,所述像素采集模块在相邻两次曝光之间,可以进行一次曝光、一次电荷转移和被控制装置进行一次曝光结果读取。
由此,可以确保像素采集模块中多个感光单元之间的曝光电荷转移和各感光单元的曝光时序相匹配,从而提高曝光质量。
在具体实施中,所述激光雷达的转子的转速与像素采集模块在第二方向的角度分辨率以及曝光周期的时长相关。具体地,所述激光雷达的转子的角速度=像素采集模块在第二方向的角度分辨率的对应角度/曝光周期的时长。
在实际应用中,可根据具体情况和需求,确定像素采集模块的具体器件类型,例如,像素采集模块可以包括:基于金属-氧化物半导体场效应晶体管(Metal-Oxide-Semiconductor Field-Effect Transistor,简称为MOSFET,缩写为MOS)电容器形成的感光单元、基于MOS电容器形成的移位寄存电路和基于MOS电容器形成的转化输出电路。在具体实施中,像素采集模块可包括电荷耦合元件(Charge-Coupled Device,CCD)。相似地,也可根据具体情况和需求,确定成像光学组件中实现入射光子传输功能的具体器件类型,例如,成像光学组件可以包括透镜或透镜组、反射镜、分光镜中一种或多种光学器件。
在实际应用中,可根据具体场景和需求,确定所述激光收发装置中各模块包含的具体器件类型。例如,激光发射模块可以包括:垂直腔面发射激光器(Vertical-CavitySurface-Emitting Laser,VCSEL)和边缘发射激光器(Edge Emitting Laser,EEL)中一种或多种激光器。激光接收模块可以包括:单光子雪崩二极管(Single Photon AvalancheDiode,SPAD)和雪崩光电二极管(Avalanche Photo Diode,APD)中一种或多种探测器。所述激光接收模块还可以包括滤光元件,设置于探测器的光路上游,对回波信号中所包含的环境光进行滤除。所述收发光学组件可以包括透镜或透镜组、反射镜、半透半反镜、转镜、分光镜中一种或多种光学器件。
在一可选示例中,如图9所示,为本说明书实施例提供的一种激光收发装置的结构示意图。在图9中,激光收发装置90包括:激光发射模块91、激光接收模块92和收发光学组件93(图中未标示)。其中,收发光学组件93可以包括透镜93-1至透镜93-4以及反射镜93-5和反射镜93-6。
所述激光发射模块91可以从不同发散角发射探测光,形成一束探测光并发射至所述透镜93-1,一束探测光经过透镜93-1、反射镜93-5和透镜93-2的传输和整形后,形成探测信号X9-1,并向外部环境射出。多个回波光形成的一束回波光X9-2经过透镜93-4、反射镜93-6和透镜93-3的传输聚焦后,得到回波信号,并传输至所述激光接收模块92。所述激光接收模块92对回波信号进行光电探测,并向控制装置(图9中未示出)输出光电探测得到的电信号。在一可选示例中,激光接收模块92包括探测器和滤光元件,滤光元件设置于探测器的光路上游,对回波信号中所包含的环境光进行滤除,以提升探测的信噪比。
在实际应用中,收发光学组件的焦距与激光收发装置的探测距离正相关,即相对于相同发散角的一束探测光,收发光学组件的焦距越大,经过收发光学组件整形后的探测信号的光束直径越大,相对应的,经过收发光学组件聚焦后能够被激光接收模块接收的回波信号的光束直径也越大,因此激光接收模块能够接收到更大光能量的回波信号,进而探测距离增大。此外,激光收发装置的视场范围FOV可表示为:
其中,a为激光发射模块中单个激光器的发光面或激光接收模块中单个探测器的感光面的高度(高度也可称为垂直方向的尺寸,即与转子的轴线平行的方向上的尺寸),f为收发光学组件的焦距。可见,对于同样尺寸的激光器和探测器,激光收发装置的视场范围FOV与收发光学组件的焦距f反相关。
基于上述内容,在实际应用中,激光收发装置中可以设置一个或多个收发光学组件,激光收发装置的硬件结构调整方便,并且,可以根据具体探测需求,设置收发光学组件的焦距,从而满足各种探测需求。
在一可选示例中,所述激光收发装置可以包括:第一激光收发模组和第二激光收发模组,所述第一激光收发模组包括第一收发光学组件,所述第二激光收发模组包括第二收发光学组件,其中,所述第一收发光学组件的焦距大于所述第二收发光学组件的焦距。
需要说明的是,所述第一激光收发模组和第二激光收发模组还可以包括其他组成部分,例如,第一激光收发模组可以包括第一激光发射模块和第一激光接收模块;所述第二激光收发模组还可以包括第二激光发射模块和第二激光接收模块。其中,第一激光发射模块和第二激光发射模块的具体结构可以相同,也可以不相同,并且,第一激光接收模块和第二激光接收模块的具体结构可以相同,也可以不相同。此外,可根据具体情况确定第一激光收发模组和第二激光收发模组中包含的器件的具体类型。
基于此,由于第一激光收发模组的第一收发光学组件的焦距大于所述第二激光收发模组的第二收发光学组件的焦距,因而,对于第一激光收发模组,其通过第一收发光学组件,能够发射光束直径较大的探测信号,相应的接收光束直径较大的回波信号,从而增加探测距离;而对于第二激光收发模组,其通过第二收发光学组件,能够发射更大视场范围的探测信号,从而扩大探测范围。
采用上述方案,通过不同焦距的第一收发光学组件和第二收发光学组件,可以使得第一激光收发模组和第二激光收发模组的探测范围不同,进而可以兼顾远距离探测的需求和大范围探测的需求,实现全多方位的环境探测。并且,由于第一激光收发模组和第二激光收发模组之间的光路互相独立,因而可以根据实际的探测距离需求,单独调整第一激光收发模组的结构,以及,根据实际的探测范围需求,单独调整第二激光收发模组的结构,结构易于调整,且集成度高,从而可以在激光雷达内部空间有限的情况下,兼顾满足多种探测需求,有利于优化激光雷达的探测性能。
此外,第一激光收发模组、第二激光收发模组和图像采集装置之间,彼此互不干扰,从而在兼顾远距离探测的需求和大范围探测的需求的情况下,还可以提高成像精度。并且,第一激光收发模组、第二激光收发模组和图像采集装置可以共用一些激光雷达的组成部分(如转子、供电模块和信号传输电路等),从而对激光雷达的整机尺寸和整体成本进行有效控制。
在具体实施时,所述第一激光收发模组和所述第二激光收发模组可以围绕所述轴线排布。其中,所述第一激光收发模组和所述第二激光收发模组之间的夹角可根据具体情况设定。
在一可选示例中,如图10所示,为本说明书实施例提供的另一种激光雷达的结构示意图,在图10中,所述激光雷达LS2包括:转子M21、激光收发装置M22(图中未标示)、图像采集装置M23和控制装置M24。激光收发装置M22包括:第一激光收发模组M22-1和第二激光收发模组M22-2。其中,第一激光收发模组M22-1、第二激光收发模组M22-2和图像采集装置M23之间的夹角均为60°。
可以理解的是,激光雷达LS2中各组成部分(如转子M21、激光收发装置M22、图像采集装置M23和控制装置M24等)的具体实现方式、作用和效果可参考上述相关部分的内容,在此不再赘述。
在实际应用中,在第一激光收发模组和第二激光收发模组均采用同一坐标系时,可根据第一激光收发模组和第二激光收发模组在同一坐标系中的水平夹角,确定二者的相对位姿关系,从而根据第一激光收发模组的视场范围、第二激光收发模组的视场范围、以及第一激光收发模组和第二激光收发模组之间的相对位姿关系,可以确定在同一坐标系中处于同一水平角度的第一激光收发模组的深度信息和第二激光收发模组的深度信息,以便于对二者深度信息进行数据融合。
在具体实施中,对于第一激光收发模组发射的探测信号中,不同发散角发射的探测光的发射方向与平行于转子轴线的方向之间的夹角不同,相似地,第二激光收发模组发射的探测信号中,不同位置发射的探测光的发射方向与平行于转子轴线的方向之间的夹角也不同。
基于此,在将第一激光收发模组和第二激光收发模组设置于转子上时,可以将第一激光收发模组和第二激光收发模组中发射方向与水平方向平行的探测光所处位置进行对齐,从而确保第一激光收发模组和第二激光收发模组具有相同的参考基准(即与水平方向平行的探测光),有利于数据融合。
在具体实施中,所述控制装置还可以对生成的图像进行质量评估,并根据评估结果调整多个所述像素采集模块的曝光时间。例如,在确定图像曝光过度的情况下,可以减小所述像素采集模块的曝光时间;在确定图像曝光不足的情况下,可以延长所述像素采集模块的曝光时间。由此,基于图像的评估结果,对所述像素采集模块的曝光时间进行反馈控制,从而提高成像质量。
可以理解的是,在实际应用中,可以根据具体情境和需求,确定图像的具体质量评估方式,例如,可以通过计算图像的亮度、亮度直方图等参数,对图像进行质量评估。本说明书对具体采用的质量评估方式不作限制。
在具体实施中,所述激光雷达还可以包括:补光模块,设置于所述转子上,适于为所述图像采集装置进行补光。由此,在无法延长像素采集模块的曝光时间,或者延长像素采集模块的曝光时间后仍然无法提供充足的曝光度的情况下,可以对像素采集模块进行补光。
在具体实施中,可根据光照情况,确定补光模块在转子上的具体位置和数量。例如,可以在图像采集装置的两侧分别设置补光模块。由此,可以根据光照情况,可以选择性地开启至少一个补光模块和补光模块,从而为图像采集装置进行补光,提高了补光的灵活性和光照情况的均匀性。
在实际应用中,可以根据具体情况确定所述补光模块中实现补光功能的器件类型。例如,所述补光模块可以包括:发光二极管;又例如,所述补光模块可以包括:发光模块和透镜。本说明书对补光模块的结构具体限制。
需要知道的是,上文描述了本说明书实施例提供的多个实施例方案,各实施例方案介绍的各可选方式可在不冲突的情况下相互结合、交叉引用,从而延伸出多种可能的实施例方案,这些均可认为是本说明书实施例披露、公开的实施例方案。
下面对本申请实施例提供的激光雷达控制方法进行介绍,下文描述的数据处理方法可以应用于本说明书实施例所述的任意一种激光雷达,下文描述的数据处理方法的内容,可与上文描述的激光雷达的相关内容相互对应参照。
在具体实施中,如图11所示,为本说明书实施例提供的一种激光雷达控制方法的流程图,其中,所述激光雷达可以包括:转子、激光收发装置、图像采集装置及控制装置,所述激光收发装置包括收发光学组件;所述图像采集装置包括成像光学组件;所述激光收发装置和所述图像采集装置设置于所述转子上,并围绕所述转子的轴线排布。
参考图11,所述激光雷达控制方法可以包括:
A1)控制所述转子绕所述轴线旋转。
A2)控制所述激光收发装置发射探测信号和接收所述探测信号被反射形成的回波信号。
A3)基于所述探测信号和回波信号生成深度信息。
A4)控制所述图像采集装置对目标区域进行曝光。
A5)基于所述图像采集装置的曝光结果生成图像。
由上可知,在所述转子旋转的过程中,通过带动所述激光收发装置和所述图像采集装置旋转,可使所述激光收发装置和所述图像采集装置均实现垂直于轴线方向的360°环境感知,激光收发装置和图像采集装置共同设置于转子上,二者之间的相对位姿关系固定,从而降低图像和深度信息之间的标定复杂性,提高数据处理效率;并且,转子的转速、所述激光收发装置的工作时序和所述图像采集装置的工作时序相适配,从而可以提高图像和深度信息之间的时间同步性;以及,所述激光收发装置和所述图像采集装置通过独立配置的光学组件进行运作,可以为图像采集装置提供足够的曝光时间,从而确保图像的成像质量。故上述方法可以提高激光雷达的数据质量和同步性,从而改善激光雷达的性能。
在具体实施中,如图11所示,所述激光雷达控制方法还可以包括:
A6)基于所述激光收发装置和所述图像采集装置之间的相对位姿关系,获得包含深度信息的图像。
由此,在激光雷达工作之前完成所述激光收发装置和所述图像采集装置之间的标定,有利于在激光雷达工作时调用,从而在后续数据处理时无需反复进行算法标定,降低算法复杂性,并提高数据融合效率。
在具体实施中,所述图像采集装置还包括按照第一方向排布的多个像素采集模块,且各所述像素采集模块包括按照第二方向排布的多个感光单元;所述第一方向为与所述转子的轴线平行的方向,所述第二方向为:与所述转子的轴线垂直的方向。
基于此,所述步骤A1)可以包括:控制所述转子的转速,以使所述像素采集模块在相邻两次曝光之间转过的角度与所述像素采集模块在所述第二方向的角度分辨率相当。
由此,在控制所述像素采集模块的单次曝光时间小于所述像素采集模块转过一个第二方向的角度分辨率对应角度的时间,即可使所述像素采集模块的曝光时序和所述转子的转速适配,从而提高曝光质量。
在具体实施中,所述步骤A4)可以包括:在转动过程中控制各所述像素采集模块的多个所述感光单元依次对相同的视场扫描区域进行曝光。
由此,可以减少单个感光单元对相同视场扫描区域的曝光时间,并确保获得丰富的环境信息。
可以理解的是,本说明书实施例所称的“一个实施例”或“实施例”是指可包含于本说明书至少一个实现方式中的特定特征、结构或特性。在本说明书的描述中。
需要说明的是,在本说明书的描述中,需要理解的是,术语“中心”、“纵向”、“横向”、“长度”、“宽度”、“厚度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顺时针”、“逆时针”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本说明书和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本说明书的限制。此外,说明书实施例中的术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。而且,术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以使这里描述的本说明书的实施例能够以除了在这里图示或描述的那些以外的顺序实施。
虽然本发明实施例披露如上,但本发明并非限定于此。任何本领域技术人员,在不脱离本发明的精神和范围内,均可作各种更动与修改,因此本发明的保护范围应当以权利要求所限定的范围为准。
Claims (16)
1.一种激光雷达,其特征在于,包括:转子、激光收发装置、图像采集装置及控制装置;所述激光收发装置和所述图像采集装置设置于所述转子上,并围绕所述转子的轴线排布;其中:
所述转子,适于绕所述轴线旋转;
所述激光收发装置,包括收发光学组件,适于发射探测信号和接收所述探测信号被反射形成的回波信号;
所述图像采集装置,包括成像光学组件,适于对目标区域进行曝光;
所述控制装置,适于基于所述探测信号和回波信号生成深度信息,并基于所述图像采集装置的曝光结果生成图像。
2.根据权利要求1所述的激光雷达,其特征在于,所述控制装置,还适于基于所述激光收发装置和所述图像采集装置之间的相对位姿关系,获得包含深度信息的图像。
3.根据权利要求1所述的激光雷达,其特征在于,所述图像采集装置还包括按照第一方向排布的多个像素采集模块,且各所述像素采集模块包括按照第二方向排布的多个感光单元;所述第一方向为与所述轴线平行的方向,所述第二方向为:与所述轴线垂直的方向。
4.根据权利要求3所述的激光雷达,其特征在于,所述像素采集模块在相邻两次曝光之间转过的角度与所述像素采集模块在所述第二方向的角度分辨率相当。
5.根据权利要求3所述的激光雷达,其特征在于,所述控制装置还适于在转动过程中控制各所述像素采集模块的多个所述感光单元依次对相同的视场扫描区域进行曝光。
6.根据权利要求5所述的激光雷达,其特征在于,所述像素采集模块适于将多个所述感光单元对所述视场扫描区域依次曝光产生的曝光电荷进行叠加,以作为所述曝光结果输出。
7.根据权利要求6所述的激光雷达,其特征在于,所述像素采集模块还包括:电荷移位寄存单元和转化输出单元;
所述电荷移位寄存单元,包括多个电荷存储区域,多个所述电荷存储区域与多个所述感光单元一一对应,且多个所述电荷存储区域依次耦接;所述电荷移位寄存单元,适于存储和输出多个所述感光单元对所述视场扫描区域依次曝光产生的曝光电荷;
所述转化输出单元,与所述电荷移位寄存单元耦接,适于对所述电荷移位寄存单元输出的曝光电荷进行采样,并转化为电信号输出。
8.根据权利要求7所述的激光雷达,其特征在于,所述控制装置,适于读取所述曝光结果,以生成图像;
所述像素采集模块的曝光周期的时长至少大于:单次曝光时间、单次电荷转移时间以及单次读取时间之和。
9.根据权利要求1所述的激光雷达,其特征在于,所述激光收发装置包括:第一激光收发模组和第二激光收发模组,所述第一激光收发模组包括第一收发光学组件,所述第二激光收发模组包括第二收发光学组件,所述第一收发光学组件的焦距大于所述第二收发光学组件的焦距。
10.根据权利要求9所述的激光雷达,其特征在于,所述第一激光收发模组和所述第二激光收发模组围绕所述轴线排布。
11.根据权利要求8所述的激光雷达,其特征在于,所述控制装置还适于对生成的图像进行质量评估,并根据评估结果调整多个所述像素采集模块的曝光时间。
12.根据权利要求1-11任一项所述的激光雷达,其特征在于,还包括:补光模块,设置于所述转子上,适于为所述图像采集装置进行补光。
13.一种激光雷达控制方法,其特征在于,所述激光雷达包括:转子、激光收发装置、图像采集装置及控制装置,所述激光收发装置包括收发光学组件;所述图像采集装置包括成像光学组件;所述激光收发装置和所述图像采集装置设置于所述转子上,并围绕所述转子的轴线排布;
所述激光雷达控制方法包括:
A1)控制所述转子绕所述轴线旋转;
A2)控制所述激光收发装置发射探测信号和接收所述探测信号被反射形成的回波信号;
A3)基于所述探测信号和回波信号生成深度信息;
A4)控制所述图像采集装置对目标区域进行曝光;
A5)基于所述图像采集装置的曝光结果生成图像。
14.根据权利要求13所述的激光雷达控制方法,其特征在于,还包括:
A6)基于所述激光收发装置和所述图像采集装置之间的相对位姿关系,获得包含深度信息的图像。
15.根据权利要求13所述的激光雷达控制方法,其特征在于,所述图像采集装置还包括按照第一方向排布的多个像素采集模块,且各所述像素采集模块包括按照第二方向排布的多个感光单元;所述第一方向为与所述转子的轴线平行的方向,所述第二方向为:与所述转子的轴线垂直的方向;
所述步骤A1)包括:
控制所述转子的转速,以使所述像素采集模块在相邻两次曝光之间转过的角度与所述像素采集模块在所述第二方向的角度分辨率相当。
16.根据权利要求15所述的激光雷达控制方法,其特征在于,所述步骤A4)包括:
在转动过程中控制各所述像素采集模块的多个所述感光单元依次对相同的视场扫描区域进行曝光。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210360008.3A CN116930920A (zh) | 2022-04-07 | 2022-04-07 | 激光雷达及激光雷达控制方法 |
PCT/CN2022/120814 WO2023193408A1 (zh) | 2022-04-07 | 2022-09-23 | 激光雷达及激光雷达控制方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210360008.3A CN116930920A (zh) | 2022-04-07 | 2022-04-07 | 激光雷达及激光雷达控制方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116930920A true CN116930920A (zh) | 2023-10-24 |
Family
ID=88244013
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210360008.3A Pending CN116930920A (zh) | 2022-04-07 | 2022-04-07 | 激光雷达及激光雷达控制方法 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN116930920A (zh) |
WO (1) | WO2023193408A1 (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN118091609A (zh) * | 2024-04-29 | 2024-05-28 | 深圳阜时科技有限公司 | 接收模组、mems振镜激光雷达系统及电子设备 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5416026B2 (ja) * | 2010-04-23 | 2014-02-12 | 本田技研工業株式会社 | 車両の周辺監視装置 |
CN107219533B (zh) * | 2017-08-04 | 2019-02-05 | 清华大学 | 激光雷达点云与图像融合式探测系统 |
CN107991662B (zh) * | 2017-12-06 | 2023-12-15 | 南京添马机械科技股份有限公司 | 一种3d激光和2d成像同步扫描装置及其扫描方法 |
CN208421236U (zh) * | 2018-07-23 | 2019-01-22 | 上海禾赛光电科技有限公司 | 一种测距装置 |
CN111736169B (zh) * | 2020-06-29 | 2023-04-28 | 杭州海康威视数字技术股份有限公司 | 一种数据同步方法、设备及系统 |
CN114114317B (zh) * | 2020-08-28 | 2023-11-17 | 上海禾赛科技有限公司 | 激光雷达、数据处理方法及数据处理模块、介质 |
-
2022
- 2022-04-07 CN CN202210360008.3A patent/CN116930920A/zh active Pending
- 2022-09-23 WO PCT/CN2022/120814 patent/WO2023193408A1/zh unknown
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN118091609A (zh) * | 2024-04-29 | 2024-05-28 | 深圳阜时科技有限公司 | 接收模组、mems振镜激光雷达系统及电子设备 |
Also Published As
Publication number | Publication date |
---|---|
WO2023193408A1 (zh) | 2023-10-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110596721B (zh) | 双重共享tdc电路的飞行时间距离测量系统及测量方法 | |
CN109596091B (zh) | 测距传感器 | |
US5682229A (en) | Laser range camera | |
US7710545B2 (en) | Scanned laser detection and ranging apparatus | |
CN111025317B (zh) | 一种可调的深度测量装置及测量方法 | |
US20230014366A1 (en) | Laser transceiver system, lidar, and autonomous driving apparatus | |
CN110596723B (zh) | 动态直方图绘制飞行时间距离测量方法及测量系统 | |
WO2022017366A1 (zh) | 一种深度成像方法及深度成像系统 | |
AU2020290980B2 (en) | Airborne topo-bathy lidar system and methods thereof | |
CN111458717A (zh) | 一种tof深度测量装置、方法及电子设备 | |
CN113227827A (zh) | 激光雷达及自动驾驶设备 | |
CN114200426A (zh) | 光接收模块、光接收方法、激光雷达系统以及车辆 | |
CN113589317A (zh) | 一种激光雷达和二维扫描方法 | |
CN116930920A (zh) | 激光雷达及激光雷达控制方法 | |
EP4249849A1 (en) | Three-dimensional scanning ranging device and method | |
CN116413681A (zh) | 激光雷达与视觉融合系统及探测方法 | |
CN110456371B (zh) | 一种激光雷达系统及相关测量方法 | |
CN213091889U (zh) | 一种距离测量系统 | |
JP2021071471A (ja) | 距離画像の作成装置 | |
CN114063111A (zh) | 图像融合激光的雷达探测系统及方法 | |
CN115372992A (zh) | 全景单光子激光雷达系统及目标成像方法 | |
US11573324B2 (en) | Lidar imaging receiver | |
CN112213729A (zh) | 一种可拼接的tof系统装置及控制方法 | |
CN113447947A (zh) | 生成场景数据的装置及方法 | |
JP3029004B2 (ja) | 立体ビジョンカメラ |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |