CN111724472A - 地图要素空间位置的确定方法和装置 - Google Patents

地图要素空间位置的确定方法和装置 Download PDF

Info

Publication number
CN111724472A
CN111724472A CN201910210053.9A CN201910210053A CN111724472A CN 111724472 A CN111724472 A CN 111724472A CN 201910210053 A CN201910210053 A CN 201910210053A CN 111724472 A CN111724472 A CN 111724472A
Authority
CN
China
Prior art keywords
image
determining
map
point cloud
cloud data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910210053.9A
Other languages
English (en)
Inventor
曹亮
李兴涛
刘晓泉
岳顺强
吕枘蓬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Navinfo Co Ltd
Original Assignee
Navinfo Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Navinfo Co Ltd filed Critical Navinfo Co Ltd
Priority to CN201910210053.9A priority Critical patent/CN111724472A/zh
Publication of CN111724472A publication Critical patent/CN111724472A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/05Geographic models
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10028Range image; Depth image; 3D point clouds

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Geometry (AREA)
  • Software Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Remote Sensing (AREA)
  • Computer Graphics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Navigation (AREA)

Abstract

本发明提供一种地图要素空间位置的确定方法和装置。该方法包括:获取地图要素的特征点在第一图像上的第一图像坐标和在第二图像上的第二图像坐标;获取所述地图要素对应的激光点云数据;根据所述第一图像坐标、所述第二图像坐标和所述激光点云数据,确定所述地图要素的空间位置。激光点云数据具有精度高且受测量距离影响小等特点,结合激光点云数据来确定地图要素的空间位置可提高精确度。

Description

地图要素空间位置的确定方法和装置
技术领域
本发明涉及自动驾驶领域,尤其涉及一种地图要素空间位置的确定方法和装置。
背景技术
高精地图是自动驾驶领域不可或缺的重要支撑技术,可以为自动驾驶汽车提供准确的定位、导航以及控制功能。和传统电子地图相比,高精地图包含的地图要素更为细化,比如,高精地图包含的地图要素可以有:车道线、路边地标、防护栏、高架物体、下水道口等。为了保证自动驾驶汽车的安全行驶,高精地图不仅要对地图信息覆盖精准而全面,还需保证后期数据能够快速准确地更新。因此,如何提高地图要素测量准确度成为亟待解决的问题。
目前采用如下方法确定地图要素的空间位置:首先,通过双目相机采集地图要素的立体像对,然后利用图像识别技术获取左右图像上地图要素的特征点,对左右图像上同名特征点进行自动匹配,最后利用立体交会技术得到同名特征点的地理坐标,根据同名特征点的地理坐标确定地图要素的空间位置。然而,利用上述方法得到地图要素的空间位置精确度不高。
发明内容
本发明提供一种地图要素空间位置的确定方法和装置,用以提高地图要素空间位置的精确度。
第一方面,本发明提供一种地图要素空间位置的确定方法,包括:
获取地图要素的特征点在第一图像上的第一图像坐标和在第二图像上的第二图像坐标;
获取所述地图要素对应的激光点云数据;
根据所述第一图像坐标、所述第二图像坐标和所述激光点云数据,确定所述地图要素的空间位置。
可选的,所述获取地图要素的特征点在第一图像上的第一图像坐标和在第二图像上的第二图像坐标之前,还包括:
通过双目相机采集所述第一图像和所述第二图像,所述第一图像和所述第二图像为所述双目相机的两个相机所拍摄的图像;
或者;
通过单目相机采集所述第一图像和所述第二图像,所述第一图像和所述第二图像为所述单目相机连续拍摄的两个图像。
可选的,所述获取所述地图要素对应的激光点云数据,包括:
通过激光雷达采集原始点云数据;
对所述原始点云数据进行解算,得到所述激光点云数据。
可选的,所述根据所述第一图像坐标、所述第二图像坐标和所述激光点云数据,确定所述地图要素的空间位置,包括:
获取所述第一图像和所述第二图像的外方位元素;
获取相机的标定参数;
根据所述激光点云数据,确定所述地图要素所构成的空间平面;
根据所述外方位元素、所述标定参数、所述空间平面和所述第一图像坐标以及所述第二图像坐标,确定所述地图要素的特征点的空间坐标;
根据所述地图要素的特征点的空间坐标,确定所述地图要素的空间位置。
可选的,所述获取所述第一图像和所述第二图像的外方位元素,包括:
通过全球定位系统GPS和惯性测量单元IMU获取原始定位定姿数据;
根据所述原始定位定姿数据和所述标定参数,通过视觉辅助SLAM技术或运动恢复结构SFM技术确定所述第一图像和所述第二图像的外方位元素。
可选的,所述根据所述激光点云数据,确定所述地图要素所构成的空间平面,包括:
根据所述第一图像、所述第二图像和所述激光点云数据,通过空间匹配及形状匹配技术确定所述地图要素所构成的空间平面。
可选的,所述根据所述外方位元素、所述标定参数、所述空间平面和所述第一图像坐标以及所述第二图像坐标,确定所述地图要素的特征点的空间坐标,包括:
根据所述外方位元素、所述标定参数和所述空间平面,构建附加平面约束的前方交会方程;
根据所述第一图像坐标、所述第二图像坐标以及所述附加平面约束的前方交会方程,采用最小二乘优化解法确定所述地图要素的特征点的空间坐标。
可选的,上述方法,还包括:
根据所述地图要素的空间位置,对高精地图进行更新。
第二方面,本发明提供一种地图要素空间位置的确定装置,包括:
获取模块,用于获取地图要素的特征点在第一图像上的第一图像坐标和在第二图像上的第二图像坐标;
所述获取模块,还用于获取所述地图要素对应的激光点云数据;
计算模块,用于根据所述第一图像坐标、所述第二图像坐标和所述激光点云数据,确定所述地图要素的空间位置。
可选的,所述获取模块,还用于:
通过双目相机采集所述第一图像和所述第二图像,所述第一图像和所述第二图像为所述双目相机的两个相机所拍摄的图像;
或者;
通过单目相机采集所述第一图像和所述第二图像,所述第一图像和所述第二图像为所述单目相机连续拍摄的两个图像。
可选的,所述获取模块,具体用于:
通过激光雷达采集原始点云数据;
对所述原始点云数据进行解算,得到所述激光点云数据。
可选的,所述计算模块,具体用于:
获取所述第一图像和所述第二图像的外方位元素;
获取相机的标定参数;
根据所述激光点云数据,确定所述地图要素所构成的空间平面;
根据所述外方位元素、所述标定参数、所述空间平面和所述第一图像坐标以及所述第二图像坐标,确定所述地图要素的特征点的空间坐标;
根据所述地图要素的特征点的空间坐标,确定所述地图要素的空间位置。
可选的,所述计算模块,具体用于:
通过全球定位系统GPS和惯性测量单元IMU获取原始定位定姿数据;
根据所述原始定位定姿数据和所述标定参数,通过视觉辅助SLAM技术或运动恢复结构SFM技术确定所述第一图像和所述第二图像的外方位元素。
可选的,所述计算模块,具体用于:
根据所述第一图像、所述第二图像和所述激光点云数据,通过空间匹配及形状匹配技术确定所述地图要素所构成的空间平面。
可选的,所述计算模块,具体用于:
根据所述外方位元素、所述标定参数和所述空间平面,构建附加平面约束的前方交会方程;
根据所述第一图像坐标、所述第二图像坐标以及所述附加平面约束的前方交会方程,采用最小二乘优化解法确定所述地图要素的特征点的空间坐标。
可选的,上述装置,还包括:
更新模块,用于根据所述地图要素的空间位置,对高精地图进行更新。
第三方面,本发明提供一种更新测量系统,包括上述确定装置和更新采集设备;
所述更新采集设备包括:双目相机、激光雷达、全球定位系统GPS以及惯性测量单元IMU;
或者;
所述更新采集设备包括:单目相机、激光雷达、全球定位系统GPS以及惯性测量单元IMU。
本发明提供的地图要素空间位置的确定方法和装置,在获取到地图要素的特征点在第一图像上的第一图像坐标和在第二图像上的第二图像坐标,以及获取到地图要素对应的激光点云数据的基础上,根据该第一图像坐标、第二图像坐标和激光点云数据确定地图要素的空间位置,激光点云数据具有精度高且受测量距离影响小等特点,结合激光点云数据来确定地图要素的空间位置可提高精确度。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明提供的立体交会示意图一;
图2为本发明提供的地图要素空间位置的确定方法的应用场景图;
图3为本发明提供的地图要素空间位置的确定方法的实施例一的流程示意图;
图4为本发明提供的地图要素空间位置的确定方法的实施例二的流程示意图;
图5为本发明提供的立体交会示意图二;
图6为本发明提供的地图要素空间位置的确定装置的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例例如能够以除了在这里图示或描述的那些以外的顺序实施。
此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
为了提高无人驾驶汽车的行驶安全水平,需保证高精地图快速准确的更新,这就需要提高地图要素空间位置的测量准确度,通常采用如下方法确定地图要素的空间位置:
首先,通过双目相机采集地图要素的立体像对,然后利用图像识别技术获取左右图像上地图要素的特征点,对左右图像上同名特征点进行自动匹配,最后利用立体交会技术得到同名特征点的空间坐标,进而根据同名特征点的空间坐标确定地图要素的空间位置。
下面对上述方法的精确度进行分析:
参见图1所示,图1为本发明提供的立体交会示意图一,图1中,Ol和Or分别表示双目相机的左右两边相机的位置,左边相机采集的左图像Il和右边相机采集的右图像Ir构成立体像对,利用图像识别技术对左图像Il和右图像Ir上地图要素进行识别和匹配,得到地图要素在左图像Il和右图像Ir上的同名特征点,同名特征点在左图像Il上的图像坐标为(xl,yl),在右图像Ir上的图像坐标为(xr,yr),利用立体交会技术,得到同名特征点对应的空间坐标为空间点P的坐标,该点P的坐标的误差计算公式为:
Figure BDA0002000199720000061
其中,Δ表示误差,s表示相机的像元尺寸,L表示测量距离(点P到双目相机中心的距离),B表示双目相机基线长度(左右相机中心的距离),f表示双目相机焦距。
由上述误差计算公式可知,根据上述方法确定的空间坐标的误差和测量距离L的平方成正比,由于,在确定地面要素的空间位置时,比如车道线和道路边线等,由于测量距离L较小,根据上述方法得到的地面要素的空间位置尚且能满足高精地图的精度需求,但是,在确定地上要素的空间位置时,比如标牌和路灯杆等,测量距离L较大,根据上述方法确定的空间位置不能满足高精地图的精度需求。
基于上述技术问题,本发明提供一种地图要素空间位置的确定方法,结合地图要素的图像数据和激光点云数据来确定其空间位置,激光点云数据具有精度高且受测量距离影响小等特点,结合激光点云数据确定地图要素的空间位置精确度较高。
图2为本发明提供的地图要素空间位置的确定方法的应用场景图。图2示出一种可选的更新测量系统:该更新测量系统包括:更新采集设备和电子设备。其中,更新采集设备用于室外数据采集,电子设备用于室内数据处理。
其中,更新采集设备包括以下设备:双目相机(或者单目相机)、激光雷达、全球定位系统(Global Positioning System,简称GPS)、惯性测量单元(Inertial measurementunit,简称IMU)以及同步控制系统等。这些设备均安装于地图更新采集车内部或者车顶平台上。
可选的,用于室内数据处理的电子设备可以是台式电脑或者笔记本等具有相应处理能力的硬件设备。
其中,双目相机(或者单目相机)用于采集道路上地图要素的图像;激光雷达用于采集原始点云数据;GPS用于测量无人驾驶汽车在各个时刻的位置;IMU用于测量无人驾驶汽车在各个时刻的姿态;同步控制系统用于将上述各部件采集或测量得到的数据以时间为依据进行对齐。电子设备用于执行本发明提供的空间位置的确定方法。
下面以具体地实施例对本发明的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图,对本发明的实施例进行描述。
图3为本发明提供的地图要素空间位置的确定方法的实施例一的流程示意图。如图3所示,本实施例提供的地图要素空间位置的确定方法,包括:
S301、获取地图要素的特征点在第一图像上的第一图像坐标和在第二图像上的第二图像坐标。
其中,地图要素可以包括:道路车道线、红绿灯、导流带、人行横道线、停止线、护栏、路缘石、路灯杆、标牌以及过街天桥等。
可选的,可通过双目相机采集第一图像和第二图像,这种情况下的第一图像和第二图像为双目相机的两个相机所拍摄的图像;也可通过单目相机采集第一图像和第二图像,这种情况下的第一图像和第二图像为单目相机连续拍摄的两个图像。
具体的,上述地图要素的特征点可以为从第一图像和第二图像中匹配得到的同名特征点,同名特征点的匹配过程可参见现有技术,本发明在此不再赘述。
具体的,第一图像坐标为地图要素的特征点在第一图像上的坐标,第二图像坐标为地图要素的特征点在第二图像上的坐标。以图1为例,可将(xl,yl)作为第一图像坐标,将(xr,yr)作为第二图像坐标。
S302、获取所述地图要素对应的激光点云数据。
可选的,获取地图要素对应的激光点云数据的可实现方式为:
通过激光雷达采集原始点云数据,对所述原始点云数据进行解算,得到所述激光点云数据。
具体的,对激光雷达采集原始点云数据进行解析,获取每个激光点的时间和局部三维坐标,然后利用激光雷达外标定参数将局部坐标转换至GPS/IMU坐标系下,再进一步利用时间信息在定位定姿文件中插值得到位姿参数,将点云转换至真实坐标系下,从而得到地图要素对应的激光点云数据。
S303、根据所述第一图像坐标、所述第二图像坐标和所述激光点云数据,确定所述地图要素的空间位置。
具体的,结合S301获取到的图像坐标和S302获取到的激光点云数据确定地图要素的空间位置,提高了空间位置的精确度。
本实施例提供的地图要素空间位置的确定方法,在获取到地图要素的特征点在第一图像上的第一图像坐标和在第二图像上的第二图像坐标,以及获取到地图要素对应的激光点云数据的基础上,根据该第一图像坐标、第二图像坐标和激光点云数据确定地图要素的空间位置,激光点云数据具有精度高且受测量距离影响小等特点,结合激光点云数据来确定地图要素的空间位置可提高精确度。
下面结合具体的实施例对上述实施例S303中确定地图要素的空间位置的过程进行详细的描述。
图4为本发明提供的地图要素空间位置的确定方法的实施例二的流程示意图。如图4所示,本实施例提供的地图要素空间位置的确定方法,包括:
S401、获取地图要素的特征点在第一图像上的第一图像坐标和在第二图像上的第二图像坐标。
S402、获取所述地图要素对应的激光点云数据。
具体的,S401-S402的实现方式可参见上述实施例S301-S302,本发明在此不再赘述。
S403、获取所述第一图像和所述第二图像的外方位元素。
可选的,获取第一图像和第二图像的外方位元素的可实现方式为:
首先,通过GPS和IMU获取原始定位定姿数据;然后获取拍摄第一图像和第二图像所使用的相机的标定参数,该标定参数用于指示相机和GPS,以及相机和IMU之间的关系;然后根据上述原始定位定姿数据和上述标定参数,通过视觉辅助SLAM技术或运动恢复结构SFM技术确定第一图像和第二图像的外方位元素。外方位元素代表了第一图像和第二图像拍照时刻的绝对位置和姿态。
S404、根据所述激光点云数据,确定所述地图要素所构成的空间平面。
可选的,可根据S401中的第一图像和第二图像,以及S402中的激光点云数据,通过空间匹配及形状匹配技术确定所述地图要素所构成的空间平面。
S405、根据所述外方位元素、标定参数、所述空间平面和所述第一图像坐标以及所述第二图像坐标,确定所述地图要素的特征点的空间坐标。
可选的,可采用如下方法确定地图要素的特征点的空间坐标。
步骤1、根据所述外方位元素、所述标定参数和所述空间平面,构建附加平面约束的前方交会方程。
假设S403获取的第一图像和第二图像的外方位元素为R和T,其中,R为3*3旋转矩阵,T为3*1摄影中心向量,矩阵R和向量T的具体表达如下:
Figure BDA0002000199720000091
假设标定参数为(x0,y0,),其中,x0和y0表示像主点,f表示相机的焦距。
构建如下摄影测量共线方程(式1):
Figure BDA0002000199720000092
其中,(x,y)表示特征点的图像坐标,(X,Y,Z)表示特征点的空间坐标。
对式1进行整理,得到式2:
Figure BDA0002000199720000101
其中,
l1=fa1+(x-x0)a3,l2=fb1+(x-x0)b3,l3=fc1+(x-x0)c3
lx=fa1XT+fb1YT+fc1ZT+(x-x0)a3XT+(x-x0)b3YT+(x-x0)c3ZT
l4=fa2+(y-y0)a3,l5=fb2+(y-y0)b3,l6=fc2+(y-y0)c3
ly=fa2XT+fb2YT+fc2ZT+(y-y0)a3XT+(y-y0)b3YT+(y-y0)c3ZT
假设S401中,第一图像坐标和第二图像坐标分别为pl(xl,yl)、pr(xr,yr),将该第一图像坐标和第二图像坐标带入方程式2,得到:
Figure BDA0002000199720000102
Figure BDA0002000199720000103
其中:
ll1=fa1+(xl-x0)a3,ll2=fb1+(xl-x0)b3,ll3=fc1+(xl-x0)c3
llx=fa1XT+fb1YT+fc1ZT+(xl-x0)a3XT+(xl-x0)b3YT+(xl-x0)c3ZT
ll4=fa2+(yl-y0)a3,ll5=fb2+(yl-y0)b3,ll6=fc2+(yl-y0)c3
lly=fa2XT+fb2YT+fc2ZT+(yl-y0)a3XT+(yl-y0)b3YT+(yl-y0)c3ZT
lr1=fa1+(xr-x0)a3,lr2=fb1+(xr-x0)b3,lr3=fc1+(xr-x0)c3
lrx=fa1XT+fb1YT+fc1ZT+(xr-x0)a3XT+(xr-x0)b3YT+(xr-x0)c3ZT
lr4=fa2+(yr-y0)a3,lr5=fb2+(yr-y0)b3,lr6=fc2+(yr-y0)c3
lry=fa2XT+fb2YT+fc2ZT+(yr-y0)a3XT+(yr-y0)b3YT+(yr-y0)c3ZT
假设S404确定的空间平面的表达式为式5:
aX+bY+cZ=d(式5)
结合式3、式4和式5,得到附加平面约束的前方交会方程(式6):
Figure BDA0002000199720000104
步骤2、根据所述第一图像坐标、所述第二图像坐标以及所述附加平面约束的前方交会方程,采用最小二乘优化解法确定所述地图要素的特征点的空间坐标。
具体的,将式6记为式7:
A·B=Y(式7)
式7的最小二乘形式可以表示为式8:
min||AB-Y||2(式8)
则式8最优解可表示为:
Figure BDA0002000199720000111
在得到第一图像坐标、第二图像坐标以及空间平面的具体值以后,将该具体值带入式6,用最小二乘优化求解式8,即可得到特征点的空间坐标。
参见图5所示,图5为本发明提供的立体交会示意图二,假设地图要素的特征点在第一图像上的对应点为pl,在第二图像上的对应点为pr,pl的坐标为(xl,yl),pr的坐标为(xr,yr),将(xl,yl)作为第一图像坐标,将(xr,yr)作为第二图像坐标,根据激光点云数据确定的空间平面为S。上述步骤1和步骤2的方法可将特征点的空间坐标约束在空间平面S上,由于空间平面S可代表地图要素实际所在的空间平面,上述方法可得到特征点的最优空间坐标解,提高了空间坐标的精度。
S406、根据所述地图要素的特征点的空间坐标,确定所述地图要素的空间位置。
具体的,针对地图要素的所有特征点做上述S401-S405相同的操作,可得到地图要素所有特征点的空间坐标,依据所有特征点的空间坐标可确定地图要素的空间位置。
S407、根据所述地图要素的空间位置,对高精地图进行更新。
本实施例提供的地图要素空间位置的确定方法,描述了根据第一图像坐标、所述第二图像坐标和所述激光点云数据,确定所述地图要素的空间位置的具体实现方式,首先,根据所述外方位元素、所述标定参数和所述空间平面,构建附加平面约束的前方交会方程;然后,采用最小二乘优化解法确定所述地图要素的特征点的空间坐标。提高了空间坐标的精度。
图6为本发明提供的地图要素空间位置的确定装置的结构示意图。如图6所示,本发明提供的地图要素空间位置的确定装置,包括:
获取模块601,用于获取地图要素的特征点在第一图像上的第一图像坐标和在第二图像上的第二图像坐标;
所述获取模块601,还用于获取所述地图要素对应的激光点云数据;
计算模块602,用于根据所述第一图像坐标、所述第二图像坐标和所述激光点云数据,确定所述地图要素的空间位置。
可选的,所述获取模块601,还用于:
通过双目相机采集所述第一图像和所述第二图像,所述第一图像和所述第二图像为所述双目相机的两个相机所拍摄的图像;
或者;
通过单目相机采集所述第一图像和所述第二图像,所述第一图像和所述第二图像为所述单目相机连续拍摄的两个图像。
可选的,所述获取模块601,具体用于:
通过激光雷达采集原始点云数据;
对所述原始点云数据进行解算,得到所述激光点云数据。
可选的,所述计算模块602,具体用于:
获取所述第一图像和所述第二图像的外方位元素;
获取相机的标定参数;
根据所述激光点云数据,确定所述地图要素所构成的空间平面;
根据所述外方位元素、所述标定参数、所述空间平面和所述第一图像坐标以及所述第二图像坐标,确定所述地图要素的特征点的空间坐标;
根据所述地图要素的特征点的空间坐标,确定所述地图要素的空间位置。
可选的,所述计算模块602,具体用于:
通过全球定位系统GPS和惯性测量单元IMU获取原始定位定姿数据;
根据所述原始定位定姿数据和所述标定参数,通过视觉辅助SLAM技术或运动恢复结构SFM技术确定所述第一图像和所述第二图像的外方位元素。
可选的,所述计算模块602,具体用于:
根据所述第一图像、所述第二图像和所述激光点云数据,通过空间匹配及形状匹配技术确定所述地图要素所构成的空间平面。
可选的,所述计算模块602,具体用于:
根据所述外方位元素、所述标定参数和所述空间平面,构建附加平面约束的前方交会方程;
根据所述第一图像坐标、所述第二图像坐标以及所述附加平面约束的前方交会方程,采用最小二乘优化解法确定所述地图要素的特征点的空间坐标。
可选的,上述装置,还包括:
更新模块603,用于根据所述地图要素的空间位置,对高精地图进行更新。
本发明提供的地图要素空间位置的确定装置,可用于执行上述任一实施例描述的地图要素空间位置的确定方法,其实现原理和技术效果类似,在此不再赘述。
本发明还提供一种更新采集设备,包括:双目相机(或者单目相机)、激光雷达、全球定位系统GPS以及惯性测量单元IMU。
本发明还提供一种更新测量系统,包括图6所示确定装置和上述更新采集设备。
在本发明所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
上述以软件功能单元的形式实现的集成的单元,可以存储在一个计算机可读取存储介质中。上述软件功能单元存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器(英文:processor)执行本发明各个实施例所述方法的部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(英文:Read-Only Memory,简称:ROM)、随机存取存储器(英文:Random Access Memory,简称:RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
应理解,上述处理器可以是中央处理单元(英文:Central Processing Unit,简称:CPU),还可以是其他通用处理器、数字信号处理器(英文:Digital Signal Processor,简称:DSP)、专用集成电路(英文:Application Specific Integrated Circuit,简称:ASIC)等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本申请所公开的方法的步骤可以直接体现为硬件处理器执行完成,或者用处理器中的硬件及软件模块组合执行完成。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (10)

1.一种地图要素空间位置的确定方法,其特征在于,包括:
获取地图要素的特征点在第一图像上的第一图像坐标和在第二图像上的第二图像坐标;
获取所述地图要素对应的激光点云数据;
根据所述第一图像坐标、所述第二图像坐标和所述激光点云数据,确定所述地图要素的空间位置。
2.根据权利要求1所述的方法,其特征在于,所述获取地图要素的特征点在第一图像上的第一图像坐标和在第二图像上的第二图像坐标之前,还包括:
通过双目相机采集所述第一图像和所述第二图像,所述第一图像和所述第二图像为所述双目相机的两个相机所拍摄的图像;
或者;
通过单目相机采集所述第一图像和所述第二图像,所述第一图像和所述第二图像为所述单目相机连续拍摄的两个图像。
3.根据权利要求2所述的方法,其特征在于,所述获取所述地图要素对应的激光点云数据,包括:
通过激光雷达采集原始点云数据;
对所述原始点云数据进行解算,得到所述激光点云数据。
4.根据权利要求2所述的方法,其特征在于,所述根据所述第一图像坐标、所述第二图像坐标和所述激光点云数据,确定所述地图要素的空间位置,包括:
获取所述第一图像和所述第二图像的外方位元素;
获取相机的标定参数;
根据所述激光点云数据,确定所述地图要素所构成的空间平面;
根据所述外方位元素、所述标定参数、所述空间平面、所述第一图像坐标以及所述第二图像坐标,确定所述地图要素的特征点的空间坐标;
根据所述地图要素的特征点的空间坐标,确定所述地图要素的空间位置。
5.根据权利要求4所述的方法,其特征在于,所述获取所述第一图像和所述第二图像的外方位元素,包括:
通过全球定位系统GPS和惯性测量单元IMU获取原始定位定姿数据;
根据所述原始定位定姿数据和所述标定参数,通过视觉辅助SLAM技术或运动恢复结构SFM技术确定所述第一图像和所述第二图像的外方位元素。
6.根据权利要求4所述的方法,其特征在于,所述根据所述激光点云数据,确定所述地图要素所构成的空间平面,包括:
根据所述第一图像、所述第二图像和所述激光点云数据,通过空间匹配及形状匹配技术确定所述地图要素所构成的空间平面。
7.根据权利要求4-6任一项所述的方法,其特征在于,所述根据所述外方位元素、所述标定参数、所述空间平面、所述第一图像坐标以及所述第二图像坐标,确定所述地图要素的特征点的空间坐标,包括:
根据所述外方位元素、所述标定参数和所述空间平面,构建附加平面约束的前方交会方程;
根据所述第一图像坐标、所述第二图像坐标以及所述附加平面约束的前方交会方程,采用最小二乘优化解法确定所述地图要素的特征点的空间坐标。
8.根据权利要求7所述的方法,其特征在于,还包括:
根据所述地图要素的空间位置,对高精地图进行更新。
9.一种地图要素空间位置的确定装置,其特征在于,包括:
获取模块,用于获取地图要素的特征点在第一图像上的第一图像坐标和在第二图像上的第二图像坐标;
所述获取模块,还用于获取所述地图要素对应的激光点云数据;
计算模块,用于根据所述第一图像坐标、所述第二图像坐标和所述激光点云数据,确定所述地图要素的空间位置。
10.一种更新测量系统,其特征在于,包括:权利要求9所述的确定装置和更新采集设备;
所述更新采集设备包括:双目相机、激光雷达、全球定位系统GPS以及惯性测量单元IMU;
或者;
所述更新采集设备包括:单目相机、激光雷达、全球定位系统GPS以及惯性测量单元IMU。
CN201910210053.9A 2019-03-19 2019-03-19 地图要素空间位置的确定方法和装置 Pending CN111724472A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910210053.9A CN111724472A (zh) 2019-03-19 2019-03-19 地图要素空间位置的确定方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910210053.9A CN111724472A (zh) 2019-03-19 2019-03-19 地图要素空间位置的确定方法和装置

Publications (1)

Publication Number Publication Date
CN111724472A true CN111724472A (zh) 2020-09-29

Family

ID=72562960

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910210053.9A Pending CN111724472A (zh) 2019-03-19 2019-03-19 地图要素空间位置的确定方法和装置

Country Status (1)

Country Link
CN (1) CN111724472A (zh)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110096957A1 (en) * 2008-07-01 2011-04-28 Tetsuji Anai Position measurement method, position measurement device, and program
CN105069843A (zh) * 2015-08-22 2015-11-18 浙江中测新图地理信息技术有限公司 一种面向城市三维建模的密集点云的快速提取方法
CN106352855A (zh) * 2016-09-26 2017-01-25 北京建筑大学 一种摄影测量方法及装置
CN107516077A (zh) * 2017-08-17 2017-12-26 武汉大学 基于激光点云和影像数据融合的交通标牌信息提取方法
CN107818288A (zh) * 2016-09-13 2018-03-20 腾讯科技(深圳)有限公司 标志牌信息获取方法及装置
US20180181817A1 (en) * 2015-09-10 2018-06-28 Baidu Online Network Technology (Beijing) Co., Ltd. Vehicular lane line data processing method, apparatus, storage medium, and device
CN108230379A (zh) * 2017-12-29 2018-06-29 百度在线网络技术(北京)有限公司 用于融合点云数据的方法和装置
CN108734654A (zh) * 2018-05-28 2018-11-02 深圳市易成自动驾驶技术有限公司 绘图与定位方法、系统及计算机可读存储介质

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110096957A1 (en) * 2008-07-01 2011-04-28 Tetsuji Anai Position measurement method, position measurement device, and program
CN105069843A (zh) * 2015-08-22 2015-11-18 浙江中测新图地理信息技术有限公司 一种面向城市三维建模的密集点云的快速提取方法
US20180181817A1 (en) * 2015-09-10 2018-06-28 Baidu Online Network Technology (Beijing) Co., Ltd. Vehicular lane line data processing method, apparatus, storage medium, and device
CN107818288A (zh) * 2016-09-13 2018-03-20 腾讯科技(深圳)有限公司 标志牌信息获取方法及装置
CN106352855A (zh) * 2016-09-26 2017-01-25 北京建筑大学 一种摄影测量方法及装置
CN107516077A (zh) * 2017-08-17 2017-12-26 武汉大学 基于激光点云和影像数据融合的交通标牌信息提取方法
CN108230379A (zh) * 2017-12-29 2018-06-29 百度在线网络技术(北京)有限公司 用于融合点云数据的方法和装置
CN108734654A (zh) * 2018-05-28 2018-11-02 深圳市易成自动驾驶技术有限公司 绘图与定位方法、系统及计算机可读存储介质

Similar Documents

Publication Publication Date Title
JP6812404B2 (ja) 点群データを融合させるための方法、装置、コンピュータ読み取り可能な記憶媒体、及びコンピュータプログラム
KR102266830B1 (ko) 차선 결정 방법, 디바이스 및 저장 매체
EP3505869B1 (en) Method, apparatus, and computer readable storage medium for updating electronic map
EP3759562B1 (en) Camera based localization for autonomous vehicles
CN112069856A (zh) 地图生成方法、驾驶控制方法、装置、电子设备及系统
EP3343172B1 (en) Creation and use of enhanced maps
JP2019215853A (ja) 測位のための方法、測位のための装置、デバイス及びコンピュータ読み取り可能な記憶媒体
KR102200299B1 (ko) 3d-vr 멀티센서 시스템 기반의 도로 시설물 관리 솔루션을 구현하는 시스템 및 그 방법
US20110261187A1 (en) Extracting and Mapping Three Dimensional Features from Geo-Referenced Images
CN111261016B (zh) 道路地图的构建方法、装置和电子设备
KR101444685B1 (ko) 영상기반 멀티센서 데이터를 이용한 차량의 위치자세 결정 방법 및 장치
Marinelli et al. Mobile mapping systems and spatial data collection strategies assessment in the identification of horizontal alignment of highways
CN113034540A (zh) 基于摄像机的自动化精密道路地图生成系统及方法
CN113870379A (zh) 地图生成方法、装置、电子设备及计算机可读存储介质
CN110018503B (zh) 车辆的定位方法及定位系统
CN111982132B (zh) 数据处理方法、装置和存储介质
IL267309B (en) Terrestrial observation device with positioning functionality
CN113112597A (zh) 交通元素的显示方法、装置、电子设备及存储介质
CN114969221A (zh) 一种更新地图的方法及相关设备
CN108195359A (zh) 空间数据的采集方法及系统
KR100981588B1 (ko) 특징점 픽셀의 크기와 방향 정보를 이용하는 벡터 변환에 기초한 도시공간 지리정보 생성 시스템
CN113838129B (zh) 一种获得位姿信息的方法、装置以及系统
JP2012099010A (ja) 画像処理装置及び画像処理プログラム
CN111724472A (zh) 地图要素空间位置的确定方法和装置
CN114743395A (zh) 一种信号灯检测方法、装置、设备及介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination