CN109061658B - 激光雷达数据融合方法 - Google Patents

激光雷达数据融合方法 Download PDF

Info

Publication number
CN109061658B
CN109061658B CN201810573921.5A CN201810573921A CN109061658B CN 109061658 B CN109061658 B CN 109061658B CN 201810573921 A CN201810573921 A CN 201810573921A CN 109061658 B CN109061658 B CN 109061658B
Authority
CN
China
Prior art keywords
information
echo
distance
pixel
laser radar
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810573921.5A
Other languages
English (en)
Other versions
CN109061658A (zh
Inventor
赵毅强
夏显召
李�杰
陈瑞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tianjin University
Original Assignee
Tianjin University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tianjin University filed Critical Tianjin University
Priority to CN201810573921.5A priority Critical patent/CN109061658B/zh
Publication of CN109061658A publication Critical patent/CN109061658A/zh
Application granted granted Critical
Publication of CN109061658B publication Critical patent/CN109061658B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06Systems determining position data of a target
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/4802Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/4808Evaluating distance, position or velocity data

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Electromagnetism (AREA)
  • Optical Radar Systems And Details Thereof (AREA)

Abstract

本发明涉及脉冲激光雷达和二维平面传感系统及数据处理,为实现在不增加原脉冲激光雷达系统复杂度的基础上提高基于激光雷达系统的3D图像分辨率,本发明激光雷达数据融合方法,步骤如下:提取回波信息,对回波信息进行距离提取;计算每个强度信息i的概率质量函数;得到同一个像素内距离信息dM N与灰度信息Gα β的细对应矩阵F(dM N,Gα β);得到超过脉冲激光雷达固有分辨率的3D图像。本发明主要应用于脉冲激光雷达和二维平面传感系统数据处理场合。

Description

激光雷达数据融合方法
技术领域
本发明涉及脉冲激光雷达和二维平面传感系统及数据处理,具体讲,涉及激光雷达数据融合 方法。
背景技术
激光雷达可以通过测距实现自动导航和3D绘图,可以广泛的应用在自动驾驶、无人机、地形测绘、安防、监测等领域。但是由于现阶段技术所限,激光雷达的环境适应性和图像分辨率有待提高,将其与他类型传感系统融合是一个有效弥补其缺点的方法。
2014年出现了基于特征的机载激光点云与影像数据融合方法,实现简便,融合效果精度高。2017年出现了很多关于激光雷达信息融合的技术,包括点云与平面图像融合方法及装置,只需确定两个二维图像(即深度图像与平面图像)之间的映射矩阵即可完成对点云与平面图像之间的融合,以及基于白光扫描仪的点云融合方法及系统,保护了待测对象的完整性和真实性,有效地提高了点云融合精度,增强了点云融合稳定性。还有基于单目视觉与激光雷达融合的道路可行驶区域检测方法。
需要说明的是,脉冲激光雷达主动发射一束脉冲激光,激光遇到目标物体后会发生反射,脉冲激光雷达中每一个传感器对应一个像素单元,传感器接收到目标物体的反射光以后,将光信号变成电信号,这个电信号称为回波信号或回波信息。现有方法均在将可见光图像和基于距离信息的点云数据相融合的方向做出了改进,但是都忽略了对脉冲激光雷达系统(LIDAR) 所产生的回波信号强度信息的应用,回波信号的强度信息与目标反射面的反射率、材质、纹理均有关系,能反应丰富的目标物体信息,且与回波距离信息具有本征关联性。本发明在距离信息与灰度信息的基础上加入目标回波信号强度信息,在不增加系统复杂度的基础上,利用三者信息融合,提高了激光雷达3D建模的分辨率。
发明内容
为克服现有技术的不足,本发明旨在利用基于脉冲激光雷达系统所获得的目标回波强度信息和距离信息与二维传感系统获得的目标的灰度信息相融合,在不增加原脉冲激光雷达系统复杂度的基础上提高基于激光雷达系统的3D图像分辨率。为此,本发明采用的技术方案是,激光雷达数据融合 方法,步骤如下:
步骤1:通过脉冲激光雷达获得视场内目标的回波信息,包括距离信息和强度信息;
步骤2:对步骤1中获得的回波信息进行距离信息提取,这个距离命名为粗距离,第M 个像素对应的粗距离信息为DM,其中M为回波信息对应的像素序号,M为自然数;
步骤3:对步骤1中获得的每个回波信息进行分解,得到每个像素的回波对应的一系列子波;
步骤4:对步骤3得到的子波进行分析,通过算法得到第M个像素中第N个子波对应的距离信息dM N和强度信息iM N。 其中dM N命名为细距离信息,其中N为子波在对应像素中的编号,M、N均为自然数。每个子波的距离信息dM N和强度信息iM N一一对应;
步骤5:在同一个像素中,对步骤4得到的强度信息i进行统计,并计算每个强度信息i 的概率质量函数,第M个像素中第N个子波强度信息为iM N的概率质量函数为Pi(iM N);
步骤6:通过二维传感系统获得识场内场内目标的灰度信息Gα β,α,β是灰度信息的编号,α,β均为自然数,第α行第β列个灰度值为Gα β
步骤7:将步骤2得到的粗距离信息DM和步骤6得到的灰度信息Gα β坐标归一化,得到一个粗对应矩阵φ(DM,Gα β),由于现阶段面阵激光雷达的像素数量通常低于二维图像传感系统,在相同视场下,一个激光雷达系统的像素所占视场面积中包含多个可见光传感系统像素或多个红外传感系统像素;
步骤8:根据步骤7中得到的粗映射矩阵φ(DM,Gα β),找到每个像素对应的所有的灰度值;
步骤9:计算每个像素单元中不同灰度信息Gα β的概率质量函数PG(Gα β);
步骤10:在同一个像素内求强度信息i概率质量函数Pi(iM N)和灰度信息G的概率质量函数PG(Gα β)的协方差COV[Pi(iM N),PG(Gα β)];
步骤11:根据系统使用环境设定一个阈值T0,当两个强度信息I和灰度信息G的协方差 COV[Pi(iM N),PG(Gα β)]<T0时,认为这两个信息iM N和Gα β相关,利用iM N和Gα β的相关关系,以及dM N和iM N的对应关系,得到同一个像素内距离信息dM N与灰度信息Gα β的细对应矩阵 F(dM N,Gα β);
步骤12:根据步骤11得到的细对应矩阵F(dM N,Gα β),将每一个灰度值位置用对应的细距离信息填补上dM N,得到超过脉冲激光雷达固有分辨率的3D图像。
步骤2目标回波的距离信息获得方法具体是:利用型心算法获得回波的中心点位置,根据中心点位置对应的计数次数以及计数的单位时长得到中心点位置或者最高点位置对应的回波的时间τ,然后转化为激光发射装置到目标的距离d,根据d=τC/2,其中C为光速;或者,另一种距离信息获得方法是阈值法:设定电压VTH为阈值电压,当回波电压信号大于VTH时,认为此时回波信号到达接收端,这一到达时刻记为τ,根据d=τC/2,其中C为光速,将到达时间转化为激光发射装置到目标的距离d。
步骤3具体是利用高斯分解算法进行回波分解,具体实现过程包含以下内容:步骤S0310,通过脉冲激光雷达获得回波信号;步骤S0320,对回波信号进行滤波,以去除噪声;步骤S0330,对滤波后的波形运用高斯分解算法进行处理,得到多个子高斯波。
步骤4进一步具体实现过程如下,步骤S0410,用型心算法处理子波信号;步骤S0420,运用型心中点幅值找到子波信号强度,第M个像素中第N个子波对应的强度信息iM N;步骤 S0430,找到波形的中心点对应的时间值,换算得到波形中心点对应的距离信息。第M个像素中第N个子波对应的距离信息dM N;步骤S0440,建立iM N与dM N的映射关系。映射关系可以表示为:dM N=PiM N,其中P为映射矩阵。
步骤8进一步具体地细化为:步骤S0710,在场景中放置一个白色圆形板,以白色圆形板为原点,将激光雷达的视场区域进行二维平面坐标化,每一个像素对应一个区域,又因为每一个像素对应一个粗距离,这样每一个距离信息将获得一个坐标;步骤S0720,在同一个特定场景中对平面图像传感系统视场进行二维平面坐标化,每一个灰度信息的也将获得一个坐标;步骤S0730,以白色圆板的圆形为坐标原点,将粗距离与灰度信息坐标归一化后获得粗对应矩阵:
Figure GDA0003581616070000031
其中,Q为映射矩阵,(xD,yD)为粗距离的坐标,(xn,yn)为灰度信息的坐标,k为比例系数,比例系数用来反映粗距离信息和灰度信息分别对标定物进行的缩放程度之间的相对比值,从而提高计算的精确性。
本发明的特点及有益效果是:
本发明所提出的融合技术就是在不增加系统的复杂度和成本的基础上,实现超越激光雷达固有分辨率的3D成像效果。
本发明中二维平面传感系统指可见光传感系统和红外传感系统,可以获得二维平面灰度信息。通过分解脉冲激光雷达回波获得更详细的距离信息和强度信息,将距离信息、强度信息和灰度信息归一化以后再进行数据融合,可以使激光雷达的3D图像分辨率提升5倍到10 倍,提升倍数与目标物体的材质、反射率、纹理以及系统所处环境的光照强度和温度有关。
附图说明:
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他实施例的附图。
图1为一实施方式提供的距离信息、强度信息以及灰度信息融合的流程图;
图2为回波分解的一个实施例;
图3为得到子波强度信息以及距离信息的一个实施例;
图4为得到粗对应矩阵的一个实施例;
图5为得到细对应矩阵的一个实施例;
图6为一种激光雷达回波信息和二维平面信息的系统组成框图。
具体实施方式
本发明是一种基于脉冲激光雷达和二维平面传感系统的数据融合算法。本发明中二维平面传感系统指可见光传感系统和红外传感系统,可以获得二维平面灰度信息。通过分解脉冲激光雷达回波获得更详细的距离信息和强度信息,将距离信息、强度信息和灰度信息归一化以后再进行数据融合,可以使激光雷达的3D图像分辨率提升5倍到10倍,提升倍数与目标物体的材质、反射率、纹理以及系统所处环境的光照强度和温度有关。
本发明的技术方案是:
步骤1:通过脉冲激光雷达获得视场内目标的回波信息,包括距离信息和强度信息。
步骤2:对步骤1中获得的回波信息进行距离信息提取,这个距离记为DM,命名为粗距离,其中M为回波信息对应的像素序号,M为自然数。其中第M个像素对应的粗距离信息为DM
获得目标回波的距离信息是成三维像的基础。其中一种获得方法是:利用型心算法获得回波的中心点位置,根据中心点位置对应的计数次数以及计数的单位时长得到中心点位置(或者最高点位置)对应的回波的时间τ,根据d=τC/2,其中C为光速,将到达时间转化为激光发射装置到目标的距离d。另一种获取方法是阈值法:设定电压VTH为阈值电压,当回波电压信号大于VTH时,认为此时回波信号到达接收端,这一到达时刻记为τ,根据d=τC/2,其中C为光速,将到达时间转化为激光发射装置到目标的距离d。
步骤3:对步骤1中获得的每个回波信息进行分解,得到每个像素的回波对应的一系列子波。这样就将每个像素所对应的一个回波变成了多个子回波。
需要说明的是,一个激光雷达像素中的回波信号对应的是激光束覆盖到的一定面积内的信息,包含目标物体这个面积内相对于激光发射器的深度信息,材质信息,反射率信息,表面粗糙度等信息。在这个一定面积内有可能存在多个深度、材质、反射率、表面粗糙度等,所以对整个回波信息进行分解后获得的多个子波中包含不同的深度、材质、反射率、表面粗糙度等信息。因为脉冲激光雷达发射的激光为高斯信号,所以通常用高斯分解法对回波信号进行分解,得到多个子波,子波也是类高斯波形式。
步骤4:对步骤3得到的子波进行分析,通过算法得到第M个像素中第N个子波对应的距离信息dM N和强度信息iM N。 其中dM N命名为细距离信息。其中M为像素序号,N为子波在对应像素中的编号,M、N都是自然数。每个子波的距离信息dM N和强度信息iM N一一对应。
步骤5:在同一个像素中,对步骤4得到的强度信息i进行统计,并计算每个强度信息i 的概率质量函数。第M个像素中第N个子波强度信息为iM N的概率质量函数为Pi(iM N);
步骤6:通过二维传感系统获得识场内场内目标的灰度信息Gα β,α,β是灰度信息的编号,第α行第β列个灰度值为Gα β
步骤7:将步骤2得到的粗距离信息DM和步骤6得到的灰度信息Gα β坐标归一化,得到一个粗对应矩阵φ(DM,Gα β)。由于现阶段面阵激光雷达的像素数量通常低于二维图像传感系统,在相同视场下,一个激光雷达系统的像素所占视场面积中包含多个可见光传感系统像素或多个红外传感系统像素。
步骤8:根据步骤7中得到的粗对应矩阵φ(DM,Gα β),找到每个像素对应的所有的灰度值。
步骤9:计算每个像素单元中不同灰度信息Gα β的概率质量函数PG(Gα β)。
步骤10:在同一个像素内求强度信息i概率质量函数Pi(iM N)和灰度信息G的概率质量函数PG(Gα β)的协方差COV[Pi(iM N),PG(Gα β)]。
步骤11:根据系统使用环境设定一个阈值T0,当两个强度信息I和灰度信息G的协方差 COV[Pi(iM N),PG(Gα β)]<T0时,认为这两个信息iM N和Gα β相关。利用iM N和Gα β的相关关系,以及dM N和iM N的对应关系,得到同一个像素内距离信息dM N与灰度信息Gα β的细对应矩阵F(dM N,G α β)。
步骤12:根据步骤11得到的细对应矩阵F(dM N,Gα β),将每一个灰度值位置用对应的细距离信息填补上dM N,得到超过脉冲激光雷达固有分辨率的3D图像。
实施方式提供了一种脉冲激光雷达中强度信息和距离信息与二维平面传感系统中灰度信息的融合方法,可以由具有数据处理能力的智能设备(例如计算机)执行。请参考图1,该融合算法包括以下内容:
步骤S0100,获取目标的回波信息。
其中,回波信息信息中包括距离信息和强度信息,由距离信息可以提供三维信息,强度信息可以提供目标反射面的材质、反射率、表面粗糙度、纹理等信息,回波信息可以由脉冲激光雷达对目标物体照射或扫描而得到。
步骤S0200,对回波信号进行距离提取。每个像素单元可以获得一个回波信号。
步骤S0300,将激光雷达每个像素的回波信号进行分解,每个回波可以分解成多个子波。
在其中的一个实施例中,利用高斯分解算法进行回波分解。上述步骤S0300(高斯分解方法)具体实现过程,包含以下内容。请参考图2,步骤S0310,通过脉冲激光雷达获得回波信号;步骤S0320,对回波信号进行滤波,以去除噪声;步骤S0330,对滤波后的波形运用高斯分解算法进行处理,得到多个子高斯波。
步骤S0400对子波进行分析,得到每个子波的强度信息,以及对应的距离信息。
在其中的一个实施例中,上述步骤S0400具体实现过程如下,请参考图3,步骤S0410,用型心算法处理子波信号;步骤S0420,运用型心中点幅值找到子波信号强度,第M个像素中第N个子波对应的强度信息iM N;步骤S0430,找到波形的中心点对应的时间值,换算得到波形中心点对应的距离信息。第M个像素中第N个子波对应的距离信息dM N;步骤S0440,建立iM N与dM N的映射关系。映射关系可以表示为:dM N=PiM N,其中P为映射矩阵。
步骤S0500,对同一个像素中的子波对应的子波的强度iM N的概率质量函数Pi(iM N)。
步骤S0600,由可见光相机或者红外传感系统拍摄获得灰度信息。
步骤S0700将粗距离信息和灰度信息归一化到同一坐标下,得到一个粗对应矩阵。在其中的一个实施例中,如图4,
步骤S0710,在场景中放置一个白色圆形板,以白色圆形板为原点,将激光雷达的视场区域进行二维平面坐标化,每一个像素对应一个区域,又因为每一个像素对应一个粗距离,这样每一个距离信息将获得一个坐标;步骤S0720,在同一个特定场景中对平面图像传感系统视场进行二维平面坐标化,每一个灰度信息的也将获得一个坐标;步骤S0730,以白色圆板的圆形为坐标原点,将粗距离与灰度信息坐标归一化后获得粗对应矩阵。
这个矩阵可以为:
Figure GDA0003581616070000051
其中,Q为映射矩阵,(xD,yD)为粗距离的坐标,(xn,yn)为灰度信息的坐标,k为比例系数,比例系数用来反映粗距离信息和灰度信息分别对标定物进行的缩放程度之间的相对比值,从而提高计算的精确性。
步骤S0800,根据对应关系,找到每个距离信息区域对应的灰度信息区域。
步骤S0900,以激光雷达的像素为基本单元,计算每个像素单元对应的不同灰度信息所对应概率质量函数。由步骤S0700得到的对应矩阵可知,每一个激光雷达像素对应的视场区域都对应多个可见光传感系统像素或多个红外传感系统像素。
在进行灰度信息概率质量函数计算之前,可以对灰度信息进行处理,如设定一个阈值h 作为关联灰度信息的判断依据,协方差小于h的灰度值合并成一个灰度信息进行概率质量函数计算。
步骤S1000,在同一个像素内求强度信息i概率质量函数Pi(iM N)和灰度信息G的概率质量函数PG(Gα β)的协方差COV[Pi(iM N),PG(Gα β)]。
步骤S1100,由S1000得到的协方差,得到细对应矩阵,再利用iM N和Gα β的相关关系,以及dM N和iM N的对应关系,得到同一个像素内距离信息dM N与灰度信息Gα β的细对应矩阵F(dM N,G α β)。
其中的一个实施例中,如图5,
步骤S1110,设定一个阈值T0,T0与使用环境相关;步骤S1120,在同一个像素内,将步骤S1000得到的协方差与T0相比较,当强度信息iM N和灰度信息Gα β的协方差COV[Pi(iM N),PG(G α β)]<T0时,认为这两个信息iM N和Gα β相关;步骤S1130,利用iM N和Gα β的相关关系,以及dM N和iM N的对应关系,得到同一个像素内距离信息dM N与灰度信息Gα β的细对应矩阵F(dM N,Gα β)。
步骤S1200,根据细对应矩阵F(dM N,Gα β),将像素中灰度信息Gα β用对应的细距离信息dM N替代,可以得到超雷达固有分辨率的3D图像。
另一实施例中提供了一种激光雷达和二维传感系统融合系统结构,请参考图6。
脉冲激光雷达模块100,用于获取目标物体反射回波;
回波分解模块200,用于将模块100获得的反射回波分解成子波;
二维信息获取模块300,用于获取二维平面信息;
信息融合模块400,用于利用所述回波强度信息和距离信息以及二维信息转化到同一坐标系下,将三者进行融合。
在其中一个实施例中,所述回波分解模块200包括:子波分解模块,子波特征值获取模块。首先将每个回波分解成子波,然后根据需要,选取子波的强度等波形信息作为特征值,以此特征值对目标物的反射率、材质、粗糙度、纹理信息进行表征。
在其中一个实施例中,所述信息融合模块400包括:二维信息二维平面化坐标模块,距离信息平面坐标化模块,模块200中的特征值平面坐标化模块,坐标归一化模块。将距离、二维信息、特征值进行平面坐标化,这样可以降低坐标归一化难度,在归一化过程中通过阈值设定,高于设定的阈值就认定为对应量,从而对全局进行归一化。
需要说明的是,以上所述实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。

Claims (5)

1.一种激光雷达数据融合 方法,其特征是,步骤如下:
步骤1:通过脉冲激光雷达获得视场内目标的回波信息,包括距离信息和强度信息;
步骤2:对步骤1中获得的回波信息进行距离信息提取,这个距离命名为粗距离,第M个像素对应的粗距离信息为DM,其中M为回波信息对应的像素序号,M为自然数;
步骤3:对步骤1中获得的每个回波信息进行分解,得到每个像素的回波对应的一系列子波;
步骤4:对步骤3得到的子波进行分析,通过算法得到第M个像素中第N个子波对应的距离信息dM N和强度信息iM N,其中dM N命名为细距离信息,其中N为子波在对应像素中的编号,M、N均为自然数,每个子波的距离信息dM N和强度信息iM N一一对应;
步骤5:在同一个像素中,对步骤4得到的强度信息i进行统计,并计算每个强度信息i的概率质量函数,第M个像素中第N个子波强度信息iM N的概率质量函数为Pi(iM N);
步骤6:通过二维传感系统获得视场内目标的灰度信息Gα β,α,β是灰度信息的编号,α,β均为自然数,第α行第β列个灰度值为Gα β
步骤7:将步骤2得到的粗距离信息DM和步骤6得到的灰度信息Gα β坐标归一化,得到一个粗对应矩阵φ(DM,Gα β),由于现阶段面阵激光雷达的像素数量低于二维图像传感系统,在相同视场下,一个激光雷达系统的像素所占视场面积中包含多个可见光传感系统像素或多个红外传感系统像素;
步骤8:根据步骤7中得到的粗对应矩阵φ(DM,Gα β),找到每个像素对应的所有的灰度值;
步骤9:计算每个像素单元中不同灰度信息Gα β的概率质量函数PG(Gα β);
步骤10:在同一个像素内求强度信息i概率质量函数Pi(iM N)和灰度信息G的概率质量函数PG(Gα β)的协方差COV[Pi(iM N),PG(Gα β)];
步骤11:根据系统使用环境设定一个阈值T0,当强度信息I和灰度信息G的协方差COV[Pi(iM N),PG(Gα β)]<T0时,认为这两个信息iM N和Gα β相关,利用iM N和Gα β的相关关系,以及dM N和iM N的对应关系,得到同一个像素内距离信息dM N与灰度信息Gα β的细对应矩阵F(dM N,Gα β);
步骤12:根据步骤11得到的细对应矩阵F(dM N,Gα β),将每一个灰度值位置用对应的细距离信息填补上dM N,得到超过脉冲激光雷达固有分辨率的3D图像。
2.如权利要求1所述的激光雷达数据融合 方法,其特征是,步骤2目标回波的距离信息获得方法具体是:利用型心算法获得回波的中心点位置,根据中心点位置对应的计数次数以及计数的单位时长得到中心点位置或者最高点位置对应的回波的时间τ,然后转化为激光发射装置到目标的距离d,根据d=τC/2,其中C为光速;或者,另一种距离信息获得方法是阈值法:设定电压VTH为阈值电压,当回波电压信号大于VTH时,认为此时回波信号到达接收端,这一到达时刻记为τ,根据d=τC/2,其中C为光速,将到达时间转化为激光发射装置到目标的距离d。
3.如权利要求1所述的激光雷达数据融合 方法,其特征是,步骤3具体是利用高斯分解算法进行回波分解,具体实现过程包含以下内容:步骤S0310,通过脉冲激光雷达获得回波信号;步骤S0320,对回波信号进行滤波,以去除噪声;步骤S0330,对滤波后的波形运用高斯分解算法进行处理,得到多个子高斯波。
4.如权利要求1所述的激光雷达数据融合 方法,其特征是,步骤4进一步具体实现过程如下,步骤S0410,用型心算法处理子波信号;步骤S0420,运用型心中点幅值找到子波信号强度,第M个像素中第N个子波对应的强度信息iM N;步骤S0430,找到波形的中心点对应的时间值,换算得到波形中心点对应的距离信息,第M个像素中第N个子波对应的距离信息dM N;步骤S0440,建立iM N与dM N的映射关系,映射关系表示为:dM N=PiM N,其中P为映射矩阵。
5.如权利要求1所述的激光雷达数据融合 方法,其特征是,步骤7进一步具体地细化为:步骤S0710,在场景中放置一个白色圆形板,以白色圆形板为原点,将激光雷达的视场区域进行二维平面坐标化,每一个像素对应一个区域,又因为每一个像素对应一个粗距离,这样每一个距离信息将获得一个坐标;步骤S0720,在同一个特定场景中对平面图像传感系统视场进行二维平面坐标化,每一个灰度信息也获得一个坐标;步骤S0730,以白色圆板的圆形为坐标原点,将粗距离与灰度信息坐标归一化后获得粗对应矩阵:
Figure FDA0003581616060000021
其中,Q为映射矩阵,即φ(DM,Gα β),(xD,yD)为粗距离的坐标,(xn,yn)为灰度信息的坐标,k为比例系数,比例系数用来反映粗距离信息和灰度信息分别对标定物进行的缩放程度之间的相对比值,从而提高计算的精确性。
CN201810573921.5A 2018-06-06 2018-06-06 激光雷达数据融合方法 Active CN109061658B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810573921.5A CN109061658B (zh) 2018-06-06 2018-06-06 激光雷达数据融合方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810573921.5A CN109061658B (zh) 2018-06-06 2018-06-06 激光雷达数据融合方法

Publications (2)

Publication Number Publication Date
CN109061658A CN109061658A (zh) 2018-12-21
CN109061658B true CN109061658B (zh) 2022-06-21

Family

ID=64820431

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810573921.5A Active CN109061658B (zh) 2018-06-06 2018-06-06 激光雷达数据融合方法

Country Status (1)

Country Link
CN (1) CN109061658B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111414882B (zh) * 2019-11-07 2023-04-28 天津大学 一种基于多级分辨率平衡网络的红外目标检测方法
CN110716554B (zh) * 2019-11-12 2020-08-14 华育昌(肇庆)智能科技研究有限公司 基于视觉的家庭机器人
CN113156406B (zh) * 2020-01-21 2023-03-17 苏州一径科技有限公司 灰度标定、目标检测方法及装置、处理设备及存储介质
CN114755654B (zh) * 2022-06-14 2022-11-18 中达天昇(江苏)电子科技有限公司 一种基于图像拟态技术的残损雷达信号修复方法

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101652627A (zh) * 2007-01-14 2010-02-17 微软国际控股私有有限公司 一种用于成像的方法、设备和系统
CN103149569A (zh) * 2013-02-25 2013-06-12 昆山南邮智能科技有限公司 基于小波变换的激光雷达高压线识别方法
WO2014044569A1 (en) * 2012-09-18 2014-03-27 Iee International Electronics & Engineering S.A. Depth image enhancement method
CN103744087A (zh) * 2014-01-11 2014-04-23 桂林理工大学 一种脉冲式n×n阵列激光雷达系统
CN103955954A (zh) * 2014-04-21 2014-07-30 杭州电子科技大学 一种结合同场景立体图对的高分辨率深度图像重建方法
WO2014154839A1 (en) * 2013-03-27 2014-10-02 Mindmaze S.A. High-definition 3d camera device
CN104519343A (zh) * 2013-09-26 2015-04-15 西克股份公司 根据立体视图原理的3d相机和用于获取深度图的方法
CN106970393A (zh) * 2017-03-14 2017-07-21 南京航空航天大学 一种基于码分多址的面阵激光雷达三维成像方法
CN107534764A (zh) * 2015-04-30 2018-01-02 深圳市大疆创新科技有限公司 增强图像分辨率的系统及方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090115993A1 (en) * 2005-09-30 2009-05-07 Gunter Doemens Device and Method for Recording Distance Images
US9521397B2 (en) * 2014-03-11 2016-12-13 GM Global Technology Operations LLC System and method for selecting a two-dimensional region of interest using a range sensor

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101652627A (zh) * 2007-01-14 2010-02-17 微软国际控股私有有限公司 一种用于成像的方法、设备和系统
WO2014044569A1 (en) * 2012-09-18 2014-03-27 Iee International Electronics & Engineering S.A. Depth image enhancement method
CN103149569A (zh) * 2013-02-25 2013-06-12 昆山南邮智能科技有限公司 基于小波变换的激光雷达高压线识别方法
WO2014154839A1 (en) * 2013-03-27 2014-10-02 Mindmaze S.A. High-definition 3d camera device
CN104519343A (zh) * 2013-09-26 2015-04-15 西克股份公司 根据立体视图原理的3d相机和用于获取深度图的方法
CN103744087A (zh) * 2014-01-11 2014-04-23 桂林理工大学 一种脉冲式n×n阵列激光雷达系统
CN103955954A (zh) * 2014-04-21 2014-07-30 杭州电子科技大学 一种结合同场景立体图对的高分辨率深度图像重建方法
CN107534764A (zh) * 2015-04-30 2018-01-02 深圳市大疆创新科技有限公司 增强图像分辨率的系统及方法
CN106970393A (zh) * 2017-03-14 2017-07-21 南京航空航天大学 一种基于码分多址的面阵激光雷达三维成像方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
机载激光雷达三维成像技术研究;李东;《中国优秀博硕士学位论文全文数据库(硕士)信息科技辑》;20130115(第01期);正文全文 *
机载激光雷达回波形心算法修正及硬件验证;薛文佳 等;《哈尔滨工业大学学报》;20180531;第50卷(第5期);第116-119页 *
融合点云与高分辨率影像的城区道路提取与表面重建研究;彭检贵;《中国优秀博硕士学位论文全文数据库(博士)基础科学辑》;20160115(第01期);正文全文 *

Also Published As

Publication number Publication date
CN109061658A (zh) 2018-12-21

Similar Documents

Publication Publication Date Title
CN109061658B (zh) 激光雷达数据融合方法
CN105678689B (zh) 高精地图数据配准关系确定方法及装置
CN107392965B (zh) 一种基于深度学习和双目立体视觉相结合的测距方法
Roman et al. Application of structured light imaging for high resolution mapping of underwater archaeological sites
Jarvis A laser time-of-flight range scanner for robotic vision
Tatoglu et al. Point cloud segmentation with LIDAR reflection intensity behavior
US6042050A (en) Synthetic discriminant function automatic target recognition system augmented by LADAR
Fieber et al. Analysis of full-waveform LiDAR data for classification of an orange orchard scene
CN110349221A (zh) 一种三维激光雷达与双目可见光传感器的融合标定方法
CN108828621A (zh) 基于三维激光雷达的障碍检测和路面分割算法
CN107272021A (zh) 使用雷达和视觉定义的图像检测区域的对象检测
JP2008292449A (ja) 水中で対象物を検知し分類する自動目標識別システム
US8682037B2 (en) Method and system for thinning a point cloud
CN105547244B (zh) 一种结合立体像对的激光高度计高程控制点生成方法
CN113050074B (zh) 无人驾驶环境感知中相机与激光雷达标定系统及标定方法
CN113111513B (zh) 传感器配置方案确定方法、装置、计算机设备及存储介质
FR2981772A1 (fr) Procede de reconstruction 3d d'un objet d'une scene
JP7386136B2 (ja) 雲高計測装置、計測点決定方法、および雲種類決定方法
KR102186733B1 (ko) 3차원 해저 지형 생성 방법
GB2281165A (en) Identifying flat orthogonal objects using reflected energy signals
EP3862787A1 (en) De-jitter of point cloud data for target recognition
WO2021179583A1 (zh) 探测方法及探测设备
Nevis et al. Advantages of three-dimensional electro-optic imaging sensors
CN113513988B (zh) 一种激光雷达标靶检测方法、装置、车辆、存储介质
CN115407338A (zh) 一种车辆环境信息感知方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant