CN105096386A - 大范围复杂城市环境几何地图自动生成方法 - Google Patents
大范围复杂城市环境几何地图自动生成方法 Download PDFInfo
- Publication number
- CN105096386A CN105096386A CN201510429130.1A CN201510429130A CN105096386A CN 105096386 A CN105096386 A CN 105096386A CN 201510429130 A CN201510429130 A CN 201510429130A CN 105096386 A CN105096386 A CN 105096386A
- Authority
- CN
- China
- Prior art keywords
- dimensional
- map
- geometric
- line segment
- generating
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 59
- 238000004422 calculation algorithm Methods 0.000 claims abstract description 26
- 230000006870 function Effects 0.000 claims description 25
- 238000005457 optimization Methods 0.000 claims description 16
- 239000011159 matrix material Substances 0.000 claims description 14
- 230000007613 environmental effect Effects 0.000 claims description 6
- 238000000605 extraction Methods 0.000 claims description 6
- 230000033001 locomotion Effects 0.000 claims description 4
- 238000012897 Levenberg–Marquardt algorithm Methods 0.000 claims description 3
- 238000004458 analytical method Methods 0.000 claims description 3
- 230000011218 segmentation Effects 0.000 claims description 2
- 238000003672 processing method Methods 0.000 claims 1
- 230000000007 visual effect Effects 0.000 description 7
- 238000010276 construction Methods 0.000 description 6
- 238000004364 calculation method Methods 0.000 description 4
- 238000013507 mapping Methods 0.000 description 3
- 238000011160 research Methods 0.000 description 3
- 238000013461 design Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000002474 experimental method Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 230000008092 positive effect Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Landscapes
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
- Image Analysis (AREA)
Abstract
一种大范围复杂城市环境几何地图生成方法。其包括提取二维道路及二维建筑物轮廓信息,生成二维几何地图;由二维几何地图引导车载单目云台摄像机进行视频采集,由此获得视频图像;从视频图像中提取出关键帧;提取与匹配相邻关键帧之间的线段特征,由此得到线段对应;基于匹配的线特征的移动机器人同时定位与环境三维几何模型构建;将三维几何模型与二维几何地图进行匹配,确定二者对应关系,生成城市增强型几何地图;基于带几何约束的Bundle?Adjustment算法对城市增强型几何地图进行优化等步骤。本发明与现有技术相比,具有适用场景范围大、鲁棒性高、精度高、所需存储空间小、成本低等优点。
Description
技术领域
本发明属于移动机器人技术领域,尤其是一种面向移动机器人自主导航的大范围复杂城市环境几何地图自动生成方法。
背景技术
环境地图生成是实现移动机器人自主导航任务的基础和关键。而环境地图的表示形式以及地图构建方法则是移动机器人领域研究的热点和难点问题。
随着智能辅助驾驶以及无人驾驶车辆等技术的发展,城市环境中的移动机器人自主导航日益受到重视,随之而来大范围城市环境地图生成问题成为研究热点。
现有用于移动机器人在大范围城市环境中导航的地图仍然以二维的道路以及建筑物轮廓信息为主,这些信息可以从电子地图或卫星地图数据库中获取。然而,二维地图只能提供给机器人二维环境信息,无法用于移动机器人(如低空小型无人机)的三维定位及导航应用。为此,一些学者开始关注构建城市环境的三维地图模型。然而,目前用于三维城市环境地图表示的视觉特征大多为初级特征,即基于重建的点特征以及线段特征等。但由于初级视觉特征存在诸如精度低、计算量大、鲁棒性差等问题,特别是在城市环境中,虽然视觉特征非常丰富但相似的场景及特征也非常多,因此视觉特征经常受到来自光线、阴影等因素的干扰。此外,现有的三维城市模型尚未将二维道路及建筑物轮廓信息与三维视觉特征结合,各种特征之间的几何关系和约束并没有充分利用,致使地图生成过程中各特征之间相互独立,从而影响了环境地图构建的准确性和鲁棒性。MicrosoftVisualEarth和GoogleEarth是两项比较成功的对城市环境进行三维建模的应用,然而,由于它们都需要进行全尺度的三维重建,所以算法的时间复杂度和空间复杂度都非常高,致使其并不适合诸如小型无人机等资源受限的移动平台的应用。
同时定位与建图(SimultaneouslyLocalizationandMapping,SLAM)技术是实现移动机器人环境地图构建的重要理论框架。在SLAM中,周围环境被表示为“路标”的集合。比如,当利用激光测距仪或者深度相机作为主要传感器时,“路标”即为周围环境中的点云。在视觉SLAM中,“路标”通常为SIFT点特征或者线特征。在SLAM中,“路标”可以看作是一种初级的环境地图表示方式。越来越多的学者意识到了路标的选取对环境地图生成的重要影响。低层次路标相对容易提取,如Harris角点、SIFT特征点等,但点特征容易受到光照和阴影等自然因素的影响,计算量大且精度不高。为此,一些学者以线段和边缘等作为路标。最近,开始有学者将点、线段和平面等的组合作为路标。如Gee等将三维平面和直线组合用于视觉SLAM中;Martinez等通过提取点特征和平面实现了单目视觉SLAM。Cham等利用在全景图像中提取竖直的建筑物边缘以及该边缘两侧的建筑物平面的方向来估计摄像机的位姿。Delmerico等利用立体视觉对空间点进行重建,然后基于RANSAC方法来对点进行采样和分组,最终确定一系列的候选建筑物平面。这些方法说明越来越多的学者关注到了高层次路标在环境地图表示中的重要性。然而,现有工作都是仅仅将不同特征作为孤立的几何物体来看待,但并未充分挖掘出不同特征内部的联系,而且没有充分发挥高层次路标的作用,因而对于环境地图构建的精度有限,鲁棒性也不高。因此,亟需一种更高层次的、强鲁棒性、高精度的环境地图表示与生成方法。
目前,人造场景中的移动机器人SLAM方法主要应用于室内环境,并已经取得了丰硕的研究成果。与室内环境相比,城市环境是一个典型的大范围、复杂场景。因此,城市环境中的机器人定位与环境地图构建方法设计面临着更大的挑战。虽然也有学者尝试进行室外环境下的大范围SLAM,但在计算效率和精度方面仍不够理想。在大范围环境中,现有SLAM算法对时间、空间需求的矛盾更加突出。对于室外或者复杂环境,由于传感器感知的不确定性更加明显,不确定性传递造成的系统误差更加严重,现有SLAM算法很难取得很好的效果。因此,目前SLAM算法的计算量大、实时性差、对环境的鲁棒性不高等缺点使其在大型或室外环境中的应用受到限制。
综上所述,现有环境地图生成方法主要存在以下问题:1.环境地图构成的元素仍以点云或线段为主,缺少对更高层次特征的提取,算法复杂度较高且鲁棒性较差;2.缺少对于不同层次特征之间几何关系的分析及充分利用,各种特征仍被视为孤立的个体,致使地图表示精度以及算法鲁棒性均不高;3.仅限于小范围或室内环境使用,由于算法计算量大、实时性差、对环境的鲁棒性不高,所以很难在大范围复杂城市环境中应用。
发明内容
为了解决上述问题,本发明的目的在于提供一种能够为大范围城市环境中移动机器人自主导航应用提供技术基础的大范围复杂城市环境几何地图自动生成方法。
为了达到上述目的,本发明提供的大范围复杂城市环境几何地图自动生成方法包括按顺序进行的下列步骤:(此处暂空,等权利要求确定后我再复制)
本发明提供的大范围复杂城市环境几何地图自动生成方法是首先定义了综合了二维及三维几何特征的增强型几何地图EGMap,然后基于几何约束和优化算法实现对EGMap的估计。
本发明与现有技术相比,具有适用场景范围大、鲁棒性高、精度高、所需存储空间小、成本低等优点。本方法可供各类移动机器人在城市环境中的自主三维定位及导航应用。本发明的优点和积极效果具体如下:
1.本大范围复杂城市环境几何地图自动生成方法在二维道路地图及建筑物轮廓信息的基础上,基于车载单目摄像机建立周围环境的三维几何模型,并建立了二维几何地图与三维几何模型之间的对应关系,从而使生成的地图既能满足地面移动车辆二维定位与导航的需要,又能满足低空小型无人机的三维自主导航应用。
2.本大范围复杂城市环境几何地图自动生成方法利用不同层次特征之间的几何关系和约束,生成三维水平线段、竖直线段、竖直平面等高层次路标,并设计带几何约束的局部BundleAdjustment算法对环境地图进行优化,从而使地图生成方法的鲁棒性更强、准确性更高,用于存储环境地图所需的空间更小,有利于后续移动机器人精确、实时定位和导航应用。
3.本大范围复杂城市环境几何地图自动生成方法基于匹配的线特征进行竖直平面的重建,并以线特征和竖直平面作为三维几何地图构成元素,与现有方法相比,本算法的鲁棒性更高,时间复杂度和空间复杂度也更低,使其适用于大范围环境地图的构建,解决了现有SLAM方法仅能用于室内或小范围环境内使用的问题。
4.本大范围复杂城市环境几何地图自动生成方法仅利用一台车载云台单目摄像机,成本低且配置方便,解决了现有基于激光扫描仪或双目视觉系统等高复杂性、高成本的问题,同时便于系统功能的扩展。
附图说明
图1是EGMap示意图;
图2是EGMap中不同层次几何特征之间的相互关系;
图3是本发明提供的大范围复杂城市环境几何地图自动生成方法流程图;
图4是本发明提供的大范围复杂城市环境几何地图自动生成方法中线段特征提取与匹配流程图;
图5是实验平台及实验场景。
具体实施方式
下面参照附图和具体实施例对本发明提供的大范围复杂城市环境几何地图自动生成方法进行详细说明。
本发明涉及的大范围城市环境几何地图命名为增强型几何地图(EnhancedGeometricMap,EGMap)。EGMap的示意图如图1所示。EGMap中包含有二维道路地图、二维建筑物俯视轮廓信息以及高层次三维几何模型(水平直线、竖直直线以及竖直建筑物平面)。EGMap中不同层次特征之间的几何关系如图2所示,其中,二维建筑物俯视轮廓是三维竖直平面(建筑物侧平面)的垂直投影;二维道路模型为三维道路模型的垂直投影;三维道路模型与三维竖直平面之间存在的可见关系是指移动机器人位于该三维道路上时,可以通过车载摄像机获取对应三维竖直平面的图像;如果一组三维线段位于同一个竖直平面上,则它们符合共面关系。
如图3所示,本发明提供的大范围复杂城市环境几何地图自动生成方法包括按顺序进行的下列步骤:
(1)提取二维道路及二维建筑物轮廓信息,生成二维几何地图;
通过公开的地理信息系统数据库提供的应用程序接口读取二维道路信息;从高分辨率的卫星地图中提取出二维建筑物俯视轮廓信息,具体方法是:从公开的地理信息系统数据库中获取移动机器人工作区域的卫星地图,针对卫星地图中建筑物以及非建筑物区域的特点,同时借助相应的普通城市地图,首先提取卫星地图中的线段特征,并通过对线段主方向分析而获得候选的建筑物边缘;然后利用区域分割、区域分析以及区域合并的方法确定出候选的建筑物轮廓;最后借助建筑物轮廓的先验几何知识,对候选的建筑物轮廓进行检验和确认,从而完成二维建筑物俯视轮廓信息的自动提取。由此生成二维几何地图。
(2)由二维几何地图引导车载单目云台摄像机进行视频采集,由此获得视频图像;
利用车载单目云台摄像机采集周围建筑物视频,根据移动机器人与步骤(1)中得到的二维几何地图中建筑物轮廓的相对位置关系,自动调整云台摄像机的朝向,以使云台摄像机采集的视频中包含周围的主要建筑物。
(3)从步骤(2)中得到的视频图像中提取出关键帧;
视频图像中的一幅图像帧被选中为关键帧需要满足以下两个条件:1)与上一关键帧之间摄像机位姿变化较大;2)与上一关键帧具有明显的重叠区域。具体来讲,首先将上述视频图像的第一帧图像选定为关键帧I0;然后,假设Ik-1为上一关键帧,则将当前图像Ik作为关键帧的充要条件是Ik与Ik-1之间SIFT特征点匹配的数量大于某一设定的阈值Ns。
(4)提取与匹配相邻关键帧之间的线段特征,由此得到线段对应;
如图4所示,提取与匹配相邻关键帧之间的线段特征的具体步骤如下:
1)SIFT提取与匹配:对相邻关键帧中的点特征通过SIFT算法进行提取并匹配;
2)线段提取:采用LSD算法对每幅关键帧中的线段进行提取;
3)线段初始匹配:对帧间的线段特征进行初始匹配:为每条线段建立一个矩形邻域,对于任意两条线段,如果位于二者邻域内的已匹配的SIFT点的个数大于阈值N,则认为这两条线段是一对匹配线段;通过该步骤,并不能保证所有匹配的线段对应都正确,而且仍然存在一些线段对应没有被找到。
4)线段匹配修正:基于共面关系对上述初始匹配结果进行确认和修正。基于竖直平面诱导的单应矩阵模型,利用RANSAC算法对初始匹配的线段进行确认和分组,并借助这些单应矩阵模型找到更多在初始匹配阶段未被发现的线段对应;
最终,获得了两帧之间的线段匹配结果,同时按照线段所位于的竖直平面的不同对匹配结果进行了分组,即共面的线段被分为了一组。
(5)基于匹配的线段特征的移动机器人同时定位与环境三维几何模型构建;
机器人同时定位与周围环境三维几何模型构建主要包括两个环节:初始估计阶段、优化估计阶段。
初始估计阶段,利用获得的相邻关键帧间的线段对应,基于RANSAC算法估计出基本矩阵F,进而利用式(1)计算出本质矩阵E,其中K为摄像机内参数矩阵,可以通过标定事先获得。
E=KTFK(1)
通过分解本质矩阵E,可以获得作为移动机器人的摄像机当前相对于上一关键帧时刻的平移向量tk和旋转矩阵Rk,即获得了移动机器人的位姿信息。
在获得了移动机器人的位姿后,基于图像帧匹配的线段对应,利用三角法可以重构得到三维空间中的线段集合Lk,然后利用一组共面线段,估计得到三维空间中线段所在竖直平面集合∏k,从而完成了几何地图的初始估计。以上过程生成的环境地图和机器人位姿估计均包含较大误差,该误差会随着机器人运动范围的扩大而不断累积、放大,因此,需要对该初始估计结果进行优化。
在优化估计阶段,将各种特征之间的几何约束考虑其中,通过求解如下优化问题模型来优化初始估计阶段获得的三维几何特征:
其中,各项代价函数分别表示线段的重投影误差、线特征方向约束、平面的方向约束、线段的共面约束、可见约束以及二维道路模型约束。λ=[λ1,λ2,λ3,λ4,λ5,λ6]T分别表示各代价函数的权重系数。下面分别对各代价函数进行定义。
1)线段的重投影误差:重投影误差定义为:
满足:
其中,和是二维线段lk的两个端点,和是重建得到的三维线段l的重投影的两个端点,d⊥()表示点到直线的距离,d()表示两点之间的距离。式(3)的前4项为直线的重投影误差,后4项为线段端点的重投影误差。
2)线段的方向约束:三维空间中的一组平行线交于一无穷远点,称为消失点。重建时,该组平行线中的任一线段都应通过该消失点,即线段的方向都受到相应消失点的约束。
其中,Oi为消失点vi确定的方向向量,为线段lj的方向向量。
3)平面方向约束:EGMap中的平面均为竖直平面,所以平面πi的法向量应与竖直消失点的方向Ov平行,即:
4)共面约束:共面约束的代价函数定义为:
其中,和为三维线段lj的端点的估计值,dp()表示点到平面的距离。当线段lj与竖直平面共面时,该代价函数的值为0。
5)可见约束:地图中新增加的几何特征在移动机器人当前的位置必须是可见的,利用已经构建的部分几何地图,判断摄像机与新增的几何特征之间是否存在障碍物的遮挡,即:
6)道路约束:进行地图构建与机器人位置估计时,估计的机器人位置必然位于道路上,否则该位置估计应该被舍弃。因此,定义道路约束的代价函数为:
式(2)中的优化问题可以通过Levenberg-Marquardt算法进行求解。
(6)将三维几何模型与二维几何地图进行匹配,确定二者对应关系,生成城市增强型几何地图;
此步骤中,将上一步骤中获得的三维几何模型与二维几何地图进行匹配,找到三维建筑物模型与二维地图中建筑物轮廓的对应关系。首先,将三维模型向水平平面进行投影;然后,定义代价函数对该投影与二维建筑物轮廓的匹配程度进行度量。由于只考虑三维的竖直平面,所以三维平面的投影为一组线段。对于竖直平面定义Proj(πi)为其水平投影所产生的线段,和为该线段的两个端点,则该匹配问题转化为求解下面的优化问题:
其中,和是二维建筑物轮廓线段的两个端点,d()表示两点之间的欧式距离。
至此,已经初步生成了移动机器人工作环境的增强型几何地图,下面一步对该估计结果进行进一步优化。
(7)基于带几何约束的局部BundleAdjustment算法对上述城市增强型几何地图进行优化;
为了进一步提高地图构建的精度,本发明设计了一种带几何约束的局部BundleAdjustment算法来同时对估计的机器人位姿和三维几何地图进行修正和优化。几何约束通过下列代价函数实现:
1)线段重投影误差:定义图像空间下线段的重投影误差为:
其中,Pk是k时刻摄像机的外参数矩阵估计值,lj是三维线段,是lj对应的二维图像,和是线段的两个端点,Q(Pk,lj)表示lj的重投影线段,Q(Pk,lj)1和Q(Pk,lj)2分别表示该线段的两个端点,函数d⊥()表示点到直线的欧氏距离,d()表示两点之间的距离,ε(r1,t1)是一个代价函数,其中t1是一阈值,满足当r1>t1时该线段在优化过程中会被忽略,否则ε(r1,t1)的值等于r1。
2)平面和共面线段的代价函数:对于三维线段lj和竖直平面πi,定义如下代价函数:
其中,lj∈πi表示线段lj位于竖直平面πi上,dp()表示点到平面的距离,t1是一阈值,函数ε()的定义同式(10)。
由于EGMap中所包含的平面均为竖直平面,所以对于平面πi,其法向量遵循如下约束:ni=[n1,0,n3]T。类似地,对于任意竖直直线lj,其必然要经过三维的竖直消失点,即其中为直线上任意一点,为三维竖直消失点。该约束可以同式(10)和(11)中的约束一同考虑。
3)可见约束代价函数:可见约束的代价函数定义为:
为了避免全局BundleAdjustment可能出现的由于初始值离优化目标太远而无法收敛的问题,本发明采用局部BundleAdjustment算法来对初始得到的环境地图进行优化。算法的核心思想为:利用k时刻之前N个关键帧来对m个最近的机器人位姿和k-m+1时刻后新建的环境地图进行重新调整和优化。优化过程的代价函数定义以上各几何约束代价函数的加权和,
其中,wl和wπ分别为线段重投影误差和共面约束代价的权值,该权值根据经验和实验结果设定。式(13)中的优化问题可以通过Levenberg-Marquardt算法进行求解。
本发明提供的大范围复杂城市环境几何地图自动生成方法的效果可以通过以下实验结果进一步说明。
实验配置和实验数据描述:实验平台为一台移动机器人,上面固定了一台云台摄像机,摄像机型号为CanonVB-H410,摄像机分辨率为960×540像素,视频采集频率为30帧/秒。实验数据通过该车载摄像机在某校园内采集了两段视频,然后利用本发明的方法对视频数据进行处理,重建增强型几何地图。图5中,(a)为实验平台,(b)和(d)为两个实验场景的卫星地图,其中的加粗虚线表示为移动机器人设定的运动轨迹,(c)和(e)分别为场景(b)和场景(d)中两幅示意图像帧。
首先,对三维几何模型与二维几何地图匹配的结果进行评估,结果显示,两组实验中一共重建了36个竖直平面,全部竖直平面均与二维地图中的建筑物轮廓信息正确匹配。说明本发明方法具有较好的鲁棒性和准确性。
然后,为了评估本发明提供的大范围复杂城市环境几何地图自动生成方法的效果,定义如下地图生成精度评价指标:定义εd和εθ为竖直平面的距离误差均值和方向误差均值,竖直平面的真实值通过三个位于该竖直平面内的不共线的点计算得到,位于竖直平面内的点的三维坐标通过激光测距仪测量得到,激光测距仪的型号为BOSCHGLR225,测量距离为0-70米,误差为±1.5毫米。εd定义如下:
其中,Np为提取的竖直平面总数,di为竖直平面πi与摄像机中心之间距离的真实值,为竖直平面πi距离的估计值。
类似地,定义εθ为:
其中,ni为竖直平面πi法向量的真实值,为竖直平面πi法向量的估计值。
为了评估三维线段的重建精度,定义三维线段在图像空间中的重投影误差εL如下:
其中,为三维线段估计在图像空间中的投影,和分别为该三维线段在图像空间中投影的观测值的两个端点,NL为所有重建的三维线段的总数,函数d⊥()表示点到直线的几何距离。
表1给出了在上述两个实验场景中几何地图生成的结果。从表中可以看出,所有实验结果中,竖直平面的距离误差不大于0.82米,方向误差不大于6.5度,线段的重投影误差不大于1.4个像素。说明本发明提供的大范围复杂城市环境几何地图自动生成方法具有较高的准确性。
表1两组实验中地图生成结果
虽然利用本发明方法所生成的几何地图所需存储空间的大小依赖于场景的大小以及场景中建筑物和道路的复杂程度,然而在本实验的两个实验场景中(机器人运动轨迹均为500米左右),利用本发明提供的大范围复杂城市环境几何地图自动生成方法所生成的几何地图所需存储空间均不超过10MB,在一定程度上说明本发明方法所需的存储空间较小。
Claims (8)
1.一种大范围复杂城市环境几何地图生成方法,其特征在于:其包括按顺序进行的下列步骤:
(1)提取二维道路及二维建筑物轮廓信息,生成二维几何地图;
(2)由二维几何地图引导车载单目云台摄像机进行视频采集,由此获得视频图像;
(3)从步骤(2)中得到的视频图像中提取出关键帧;
(4)提取与匹配相邻关键帧之间的线段特征,由此得到线段对应;
(5)基于匹配的线段特征的移动机器人同时定位与环境三维几何模型构建;
(6)将三维几何模型与二维几何地图进行匹配,确定二者对应关系,生成城市增强型几何地图;
(7)基于带几何约束的BundleAdjustment算法对上述城市增强型几何地图进行优化。
2.根据权利要求1所述的大范围复杂城市环境几何地图生成方法,其特征在于:在步骤(1)中,所述的提取二维道路及二维建筑物轮廓信息,生成二维几何地图的方法是:基于公开的地理信息系统获取移动机器人工作区域的高分辨率卫星地图,利用提供的应用程序接口读取二维道路信息;然后利用图像处理方法从卫星地图中提取出二维建筑物俯视轮廓信息,具体操作步骤是:首先提取卫星地图中的线段特征,并通过对线段主方向分析而获得候选的建筑物边缘;然后利用区域分割、区域分析以及区域合并的方法确定出候选的建筑物轮廓;最后借助建筑物轮廓的先验几何知识,对候选的建筑物轮廓进行检验和确认,从而完成二维建筑物俯视轮廓信息的自动提取,由此生成二维几何地图。
3.根据权利要求1所述的大范围复杂城市环境几何地图生成方法,其特征在于:在步骤(2)中,所述的由二维几何地图引导车载单目云台摄像机进行视频采集,由此获得视频图像的方法是:利用车载单目云台摄像机采集周围建筑物视频,根据移动机器人与步骤(1)中得到的二维几何地图中建筑物轮廓的相对位置关系,自动调整云台摄像机的朝向,以使云台摄像机采集的视频中包含周围的主要建筑物。
4.根据权利要求1所述的大范围复杂城市环境几何地图生成方法,其特征在于:在步骤(3)中,所述的从步骤(2)中得到的视频图像中提取出关键帧的方法是:首先将步骤(2)中所采集的视频图像中的第一帧图像选定为关键帧I0;然后,假设Ik-1为上一关键帧,则将当前图像Ik作为关键帧的充要条件是Ik与Ik-1之间SIFT特征点匹配的数量大于某一设定的阈值Ns。
5.根据权利要求1所述的大范围复杂城市环境几何地图生成方法,其特征在于:在步骤(4)中,所述的提取与匹配相邻关键帧之间的线段特征,由此得到线段对应的方法是:首先,基于SIFT算法对相邻关键帧中的点特征进行提取与匹配;其次,利用LSD算法对每幅关键帧中的线段进行提取;然后,根据线段邻域内已匹配的SIFT特征点的个数确定线段的初始匹配,当匹配的个数大于某一设定阈值,则认为两条线段匹配;最后,基于竖直平面诱导的单应矩阵模型,利用RANSAC算法对初始匹配的线段进行确认和修正。
6.根据权利要求1所述的大范围复杂城市环境几何地图生成方法,其特征在于:在步骤(5)中,所述的基于匹配的线段特征的移动机器人同时定位与环境三维几何模型构建的方法是:共包括初始估计和优化估计两个阶段;在初始估计阶段,利用获得的相邻关键帧间的匹配线段,基于RANSAC算法估计出基本矩阵F,然后利用摄像机内参数矩阵和基本矩阵F估计出本质矩阵E,之后通过分解本质矩阵E估计出移动机器人的位姿变化,最后利用三角法重构得到三维空间中的线段,并基于共面线段估计出相应的竖直平面;在优化估计阶段,利用各种特征之间的几何约束,通过构造并求解优化函数完成对初始估计结果的优化,以降低估计误差随机器人运动范围的扩大而不断累积。
7.根据权利要求1所述的大范围复杂城市环境几何地图生成方法,其特征在于:在步骤(6)中,所述的将三维几何模型与二维几何地图进行匹配,确定二者对应关系,生成城市增强型几何地图的方法是:首先,将步骤(5)中获得的三维几何模型向水平平面进行投影,这样三维几何模型中的竖直平面投影为了二维线段;然后,定义代价函数对该投影与二维几何地图的匹配程度进行度量,最小化该代价函数以确定三维几何模型与二维几何地图之间的对应关系。
8.根据权利要求1所述的大范围复杂城市环境几何地图生成方法,其特征在于:在步骤(7)中,所述的基于带几何约束的BundleAdjustment算法对上述城市增强型几何地图进行优化的方法是:首先,基于城市增强型几何地图中各种特征之间的几何约束,分别构造线段重投影误差、共面约束代价函数、可见约束代价函数;然后,基于局部BundleAdjustment算法对几何地图进行优化:利用k时刻之前N个关键帧来对m个最近的机器人位姿和k-m+1时刻后新建的环境地图进行重新调整和优化;优化过程的代价函数定义为构造的几何约束代价函数的加权和,利用Levenberg-Marquardt算法对该优化问题进行求解。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510429130.1A CN105096386B (zh) | 2015-07-21 | 2015-07-21 | 大范围复杂城市环境几何地图自动生成方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510429130.1A CN105096386B (zh) | 2015-07-21 | 2015-07-21 | 大范围复杂城市环境几何地图自动生成方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105096386A true CN105096386A (zh) | 2015-11-25 |
CN105096386B CN105096386B (zh) | 2017-11-17 |
Family
ID=54576715
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510429130.1A Active CN105096386B (zh) | 2015-07-21 | 2015-07-21 | 大范围复杂城市环境几何地图自动生成方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105096386B (zh) |
Cited By (37)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017020465A1 (zh) * | 2015-08-03 | 2017-02-09 | 百度在线网络技术(北京)有限公司 | 道路三维模型的建模方法、装置和存储介质 |
CN106446815A (zh) * | 2016-09-14 | 2017-02-22 | 浙江大学 | 一种同时定位与地图构建方法 |
CN106530345A (zh) * | 2016-11-07 | 2017-03-22 | 江西理工大学 | 一种同机影像辅助下的建筑物三维激光点云特征提取方法 |
CN106803397A (zh) * | 2016-12-28 | 2017-06-06 | 贵州马科技有限公司 | 数字地图混合定位方法 |
CN108303721A (zh) * | 2018-02-12 | 2018-07-20 | 北京经纬恒润科技有限公司 | 一种车辆定位方法及系统 |
CN108428254A (zh) * | 2018-03-15 | 2018-08-21 | 斑马网络技术有限公司 | 三维地图的构建方法及装置 |
CN108648219A (zh) * | 2018-04-08 | 2018-10-12 | 浙江大承机器人科技有限公司 | 一种基于双目的障碍物与可行区域检测方法 |
CN108961410A (zh) * | 2018-06-27 | 2018-12-07 | 中国科学院深圳先进技术研究院 | 一种基于图像的三维线框建模方法及装置 |
CN109074757A (zh) * | 2018-07-03 | 2018-12-21 | 深圳前海达闼云端智能科技有限公司 | 一种建立地图的方法、终端和计算机可读存储介质 |
CN109074638A (zh) * | 2018-07-23 | 2018-12-21 | 深圳前海达闼云端智能科技有限公司 | 融合建图方法、相关装置及计算机可读存储介质 |
CN109115232A (zh) * | 2017-06-22 | 2019-01-01 | 华为技术有限公司 | 导航的方法和装置 |
CN109187048A (zh) * | 2018-09-14 | 2019-01-11 | 盯盯拍(深圳)云技术有限公司 | 自动驾驶性能测试方法以及自动驾驶性能测试装置 |
CN109271924A (zh) * | 2018-09-14 | 2019-01-25 | 盯盯拍(深圳)云技术有限公司 | 图像处理方法及图像处理装置 |
CN109584289A (zh) * | 2017-09-28 | 2019-04-05 | 百度(美国)有限责任公司 | 适应地图创建中状态转换的系统和方法 |
CN109709977A (zh) * | 2017-10-26 | 2019-05-03 | 广州极飞科技有限公司 | 移动轨迹规划的方法、装置及移动物体 |
CN109816704A (zh) * | 2019-01-28 | 2019-05-28 | 北京百度网讯科技有限公司 | 物体的三维信息获取方法和装置 |
CN109919958A (zh) * | 2019-01-14 | 2019-06-21 | 桂林航天工业学院 | 一种基于多尺度图像空间的多重约束线段提取方法 |
CN110111388A (zh) * | 2019-05-10 | 2019-08-09 | 北京航空航天大学 | 三维物体位姿参数估计方法及视觉设备 |
CN110135376A (zh) * | 2019-05-21 | 2019-08-16 | 北京百度网讯科技有限公司 | 确定图像传感器的坐标系转换参数的方法、设备和介质 |
CN110136247A (zh) * | 2019-05-17 | 2019-08-16 | 杭州电子科技大学 | 一种数字城市的三维模型快速拼切方法 |
CN110226186A (zh) * | 2016-12-26 | 2019-09-10 | 宝马股份公司 | 一种用于表示地图元素的方法和装置以及基于此定位车辆/机器人的方法和装置 |
CN110443199A (zh) * | 2019-08-06 | 2019-11-12 | 暨南大学 | 一种基于二维几何轮廓的点云姿态识别方法 |
CN110880157A (zh) * | 2019-11-15 | 2020-03-13 | 腾讯科技(深圳)有限公司 | 一种地图数据处理方法、装置、电子设备及存储介质 |
CN110910497A (zh) * | 2019-11-15 | 2020-03-24 | 北京信息科技大学 | 实现增强现实地图的方法和系统 |
CN110956219A (zh) * | 2019-12-09 | 2020-04-03 | 北京迈格威科技有限公司 | 视频数据的处理方法、装置和电子系统 |
CN111104849A (zh) * | 2018-10-29 | 2020-05-05 | 安波福技术有限公司 | 运载工具的导航期间的、地图中的环境特征的自动注释 |
CN111102986A (zh) * | 2018-10-29 | 2020-05-05 | 安波福技术有限公司 | 用于运载工具导航的尺寸缩小的地图的自动生成以及时空定位 |
CN111435538A (zh) * | 2019-01-14 | 2020-07-21 | 上海欧菲智能车联科技有限公司 | 定位方法、定位系统和计算机可读存储介质 |
CN111801678A (zh) * | 2018-03-15 | 2020-10-20 | 蓝色视觉实验室英国有限公司 | 都市环境标签 |
CN111913499A (zh) * | 2020-07-17 | 2020-11-10 | 天津大学 | 基于单目视觉slam及深度不确定性分析的云台控制方法 |
CN112381890A (zh) * | 2020-11-27 | 2021-02-19 | 上海工程技术大学 | 一种基于点线特征的rgb-d视觉slam方法 |
CN112967311A (zh) * | 2019-12-12 | 2021-06-15 | 浙江商汤科技开发有限公司 | 三维线图构建方法及装置、电子设备和存储介质 |
CN113256808A (zh) * | 2020-02-11 | 2021-08-13 | 阿里巴巴集团控股有限公司 | 空间关系计算方法、设备及存储介质 |
CN114459488A (zh) * | 2022-03-11 | 2022-05-10 | 中国民航大学 | 基于三维融合路网的室内外一体化应急处置路径规划方法 |
CN114926601A (zh) * | 2022-07-21 | 2022-08-19 | 广州乐软网络科技有限公司 | 一种面向对象的地图构建方法及系统 |
CN114972769A (zh) * | 2022-06-17 | 2022-08-30 | 北京百度网讯科技有限公司 | 图像处理方法、三维地图生成方法、装置、设备及介质 |
CN116030136A (zh) * | 2023-03-29 | 2023-04-28 | 中国人民解放军国防科技大学 | 基于几何特征的跨视角视觉定位方法、装置和计算机设备 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108592919B (zh) * | 2018-04-27 | 2019-09-17 | 百度在线网络技术(北京)有限公司 | 制图与定位方法、装置、存储介质和终端设备 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110044504A1 (en) * | 2009-08-21 | 2011-02-24 | Oi Kenichiro | Information processing device, information processing method and program |
CN104062973A (zh) * | 2014-06-23 | 2014-09-24 | 西北工业大学 | 一种基于图像标志物识别的移动机器人slam方法 |
CN104077809A (zh) * | 2014-06-24 | 2014-10-01 | 上海交通大学 | 基于结构性线条的视觉slam方法 |
-
2015
- 2015-07-21 CN CN201510429130.1A patent/CN105096386B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110044504A1 (en) * | 2009-08-21 | 2011-02-24 | Oi Kenichiro | Information processing device, information processing method and program |
CN104062973A (zh) * | 2014-06-23 | 2014-09-24 | 西北工业大学 | 一种基于图像标志物识别的移动机器人slam方法 |
CN104077809A (zh) * | 2014-06-24 | 2014-10-01 | 上海交通大学 | 基于结构性线条的视觉slam方法 |
Non-Patent Citations (1)
Title |
---|
李海丰: "城市环境中移动机器人视觉定位研究", 《中国博士学位论文全文数据库信息科技辑》 * |
Cited By (60)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017020465A1 (zh) * | 2015-08-03 | 2017-02-09 | 百度在线网络技术(北京)有限公司 | 道路三维模型的建模方法、装置和存储介质 |
US10643378B2 (en) | 2015-08-03 | 2020-05-05 | Baidu Online Network Technology (Beijing) Co., Ltd. | Method and device for modelling three-dimensional road model, and storage medium |
CN106446815A (zh) * | 2016-09-14 | 2017-02-22 | 浙江大学 | 一种同时定位与地图构建方法 |
CN106446815B (zh) * | 2016-09-14 | 2019-08-09 | 浙江大学 | 一种同时定位与地图构建方法 |
CN106530345A (zh) * | 2016-11-07 | 2017-03-22 | 江西理工大学 | 一种同机影像辅助下的建筑物三维激光点云特征提取方法 |
CN106530345B (zh) * | 2016-11-07 | 2018-12-25 | 江西理工大学 | 一种同机影像辅助下的建筑物三维激光点云特征提取方法 |
CN110226186A (zh) * | 2016-12-26 | 2019-09-10 | 宝马股份公司 | 一种用于表示地图元素的方法和装置以及基于此定位车辆/机器人的方法和装置 |
CN106803397A (zh) * | 2016-12-28 | 2017-06-06 | 贵州马科技有限公司 | 数字地图混合定位方法 |
CN109115232B (zh) * | 2017-06-22 | 2021-02-23 | 华为技术有限公司 | 导航的方法和装置 |
CN109115232A (zh) * | 2017-06-22 | 2019-01-01 | 华为技术有限公司 | 导航的方法和装置 |
CN109584289A (zh) * | 2017-09-28 | 2019-04-05 | 百度(美国)有限责任公司 | 适应地图创建中状态转换的系统和方法 |
CN109709977B (zh) * | 2017-10-26 | 2022-08-16 | 广州极飞科技股份有限公司 | 移动轨迹规划的方法、装置及移动物体 |
CN109709977A (zh) * | 2017-10-26 | 2019-05-03 | 广州极飞科技有限公司 | 移动轨迹规划的方法、装置及移动物体 |
CN108303721A (zh) * | 2018-02-12 | 2018-07-20 | 北京经纬恒润科技有限公司 | 一种车辆定位方法及系统 |
CN108303721B (zh) * | 2018-02-12 | 2020-04-03 | 北京经纬恒润科技有限公司 | 一种车辆定位方法及系统 |
CN111801678A (zh) * | 2018-03-15 | 2020-10-20 | 蓝色视觉实验室英国有限公司 | 都市环境标签 |
CN108428254A (zh) * | 2018-03-15 | 2018-08-21 | 斑马网络技术有限公司 | 三维地图的构建方法及装置 |
CN108648219B (zh) * | 2018-04-08 | 2022-02-22 | 浙江大承机器人科技有限公司 | 一种基于双目的障碍物与可行区域检测方法 |
CN108648219A (zh) * | 2018-04-08 | 2018-10-12 | 浙江大承机器人科技有限公司 | 一种基于双目的障碍物与可行区域检测方法 |
CN108961410B (zh) * | 2018-06-27 | 2023-04-18 | 中国科学院深圳先进技术研究院 | 一种基于图像的三维线框建模方法及装置 |
CN108961410A (zh) * | 2018-06-27 | 2018-12-07 | 中国科学院深圳先进技术研究院 | 一种基于图像的三维线框建模方法及装置 |
CN109074757A (zh) * | 2018-07-03 | 2018-12-21 | 深圳前海达闼云端智能科技有限公司 | 一种建立地图的方法、终端和计算机可读存储介质 |
CN109074638A (zh) * | 2018-07-23 | 2018-12-21 | 深圳前海达闼云端智能科技有限公司 | 融合建图方法、相关装置及计算机可读存储介质 |
CN109074638B (zh) * | 2018-07-23 | 2020-04-24 | 深圳前海达闼云端智能科技有限公司 | 融合建图方法、相关装置及计算机可读存储介质 |
CN109271924A (zh) * | 2018-09-14 | 2019-01-25 | 盯盯拍(深圳)云技术有限公司 | 图像处理方法及图像处理装置 |
CN109187048A (zh) * | 2018-09-14 | 2019-01-11 | 盯盯拍(深圳)云技术有限公司 | 自动驾驶性能测试方法以及自动驾驶性能测试装置 |
CN111104849A (zh) * | 2018-10-29 | 2020-05-05 | 安波福技术有限公司 | 运载工具的导航期间的、地图中的环境特征的自动注释 |
US11774261B2 (en) | 2018-10-29 | 2023-10-03 | Motional Ad Llc | Automatic annotation of environmental features in a map during navigation of a vehicle |
CN111102986B (zh) * | 2018-10-29 | 2023-12-29 | 动态Ad有限责任公司 | 用于运载工具导航的尺寸缩小的地图的自动生成以及时空定位 |
CN111102986A (zh) * | 2018-10-29 | 2020-05-05 | 安波福技术有限公司 | 用于运载工具导航的尺寸缩小的地图的自动生成以及时空定位 |
CN111104849B (zh) * | 2018-10-29 | 2022-05-31 | 动态Ad有限责任公司 | 运载工具的导航期间的、地图中的环境特征的自动注释 |
US11340080B2 (en) | 2018-10-29 | 2022-05-24 | Motional Ad Llc | Automatic annotation of environmental features in a map during navigation of a vehicle |
CN111435538A (zh) * | 2019-01-14 | 2020-07-21 | 上海欧菲智能车联科技有限公司 | 定位方法、定位系统和计算机可读存储介质 |
CN109919958B (zh) * | 2019-01-14 | 2023-03-28 | 桂林航天工业学院 | 一种基于多尺度图像空间的多重约束线段提取方法 |
CN109919958A (zh) * | 2019-01-14 | 2019-06-21 | 桂林航天工业学院 | 一种基于多尺度图像空间的多重约束线段提取方法 |
CN109816704A (zh) * | 2019-01-28 | 2019-05-28 | 北京百度网讯科技有限公司 | 物体的三维信息获取方法和装置 |
US11288492B2 (en) | 2019-01-28 | 2022-03-29 | Beijing Baidu Netcom Science And Technology Co., Ltd. | Method and device for acquiring 3D information of object |
CN110111388A (zh) * | 2019-05-10 | 2019-08-09 | 北京航空航天大学 | 三维物体位姿参数估计方法及视觉设备 |
CN110111388B (zh) * | 2019-05-10 | 2021-03-23 | 北京航空航天大学 | 三维物体位姿参数估计方法及视觉设备 |
CN110136247A (zh) * | 2019-05-17 | 2019-08-16 | 杭州电子科技大学 | 一种数字城市的三维模型快速拼切方法 |
CN110135376A (zh) * | 2019-05-21 | 2019-08-16 | 北京百度网讯科技有限公司 | 确定图像传感器的坐标系转换参数的方法、设备和介质 |
CN110443199B (zh) * | 2019-08-06 | 2021-10-15 | 暨南大学 | 一种基于二维几何轮廓的点云姿态识别方法 |
CN110443199A (zh) * | 2019-08-06 | 2019-11-12 | 暨南大学 | 一种基于二维几何轮廓的点云姿态识别方法 |
CN110880157B (zh) * | 2019-11-15 | 2024-03-29 | 腾讯科技(深圳)有限公司 | 一种地图数据处理方法、装置、电子设备及存储介质 |
CN110910497A (zh) * | 2019-11-15 | 2020-03-24 | 北京信息科技大学 | 实现增强现实地图的方法和系统 |
CN110910497B (zh) * | 2019-11-15 | 2024-04-19 | 北京信息科技大学 | 实现增强现实地图的方法和系统 |
CN110880157A (zh) * | 2019-11-15 | 2020-03-13 | 腾讯科技(深圳)有限公司 | 一种地图数据处理方法、装置、电子设备及存储介质 |
CN110956219A (zh) * | 2019-12-09 | 2020-04-03 | 北京迈格威科技有限公司 | 视频数据的处理方法、装置和电子系统 |
CN112967311A (zh) * | 2019-12-12 | 2021-06-15 | 浙江商汤科技开发有限公司 | 三维线图构建方法及装置、电子设备和存储介质 |
CN112967311B (zh) * | 2019-12-12 | 2024-06-07 | 浙江商汤科技开发有限公司 | 三维线图构建方法及装置、电子设备和存储介质 |
CN113256808A (zh) * | 2020-02-11 | 2021-08-13 | 阿里巴巴集团控股有限公司 | 空间关系计算方法、设备及存储介质 |
CN111913499A (zh) * | 2020-07-17 | 2020-11-10 | 天津大学 | 基于单目视觉slam及深度不确定性分析的云台控制方法 |
CN111913499B (zh) * | 2020-07-17 | 2023-11-14 | 天津大学 | 基于单目视觉slam及深度不确定性分析的云台控制方法 |
CN112381890A (zh) * | 2020-11-27 | 2021-02-19 | 上海工程技术大学 | 一种基于点线特征的rgb-d视觉slam方法 |
CN114459488A (zh) * | 2022-03-11 | 2022-05-10 | 中国民航大学 | 基于三维融合路网的室内外一体化应急处置路径规划方法 |
CN114459488B (zh) * | 2022-03-11 | 2023-11-24 | 中国民航大学 | 基于三维融合路网的室内外一体化应急处置路径规划方法 |
CN114972769A (zh) * | 2022-06-17 | 2022-08-30 | 北京百度网讯科技有限公司 | 图像处理方法、三维地图生成方法、装置、设备及介质 |
CN114926601A (zh) * | 2022-07-21 | 2022-08-19 | 广州乐软网络科技有限公司 | 一种面向对象的地图构建方法及系统 |
CN116030136B (zh) * | 2023-03-29 | 2023-06-09 | 中国人民解放军国防科技大学 | 基于几何特征的跨视角视觉定位方法、装置和计算机设备 |
CN116030136A (zh) * | 2023-03-29 | 2023-04-28 | 中国人民解放军国防科技大学 | 基于几何特征的跨视角视觉定位方法、装置和计算机设备 |
Also Published As
Publication number | Publication date |
---|---|
CN105096386B (zh) | 2017-11-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105096386B (zh) | 大范围复杂城市环境几何地图自动生成方法 | |
CN111968129B (zh) | 具有语义感知的即时定位与地图构建系统及方法 | |
Won et al. | OmniSLAM: Omnidirectional localization and dense mapping for wide-baseline multi-camera systems | |
Taneja et al. | Registration of spherical panoramic images with cadastral 3d models | |
CN113192193B (zh) | 基于Cesium三维地球框架的高压输电线路走廊三维重建方法 | |
US20030014224A1 (en) | Method and apparatus for automatically generating a site model | |
Taneja et al. | Geometric change detection in urban environments using images | |
EP3248029A1 (en) | Visual localization within lidar maps | |
CN105160702A (zh) | 基于LiDAR点云辅助的立体影像密集匹配方法及系统 | |
WO2018061010A1 (en) | Point cloud transforming in large-scale urban modelling | |
CN115388902B (zh) | 室内定位方法和系统、ar室内定位导航方法和系统 | |
Gao et al. | Ground and aerial meta-data integration for localization and reconstruction: A review | |
CN110223351B (zh) | 一种基于卷积神经网络的深度相机定位方法 | |
CN111710040B (zh) | 一种高精度地图的构建方法、系统、终端和存储介质 | |
Nagy et al. | Online targetless end-to-end camera-LiDAR self-calibration | |
CN111161334B (zh) | 一种基于深度学习的语义地图构建方法 | |
Wendel et al. | Automatic alignment of 3D reconstructions using a digital surface model | |
Wang et al. | TerrainFusion: Real-time digital surface model reconstruction based on monocular SLAM | |
Tao et al. | Automated processing of mobile mapping image sequences | |
CN111612829B (zh) | 一种高精度地图的构建方法、系统、终端和存储介质 | |
CN110021041B (zh) | 基于双目相机的无人驾驶场景增量式网格化结构重建方法 | |
Gu et al. | Surveying and mapping of large-scale 3D digital topographic map based on oblique photography technology | |
CN111710039B (zh) | 一种高精度地图的构建方法、系统、终端和存储介质 | |
Bai et al. | Application of unmanned aerial vehicle multi-vision image 3D modeling in geological disasters | |
Wei et al. | Indoor and outdoor multi-source 3D data fusion method for ancient buildings |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
TR01 | Transfer of patent right |
Effective date of registration: 20220107 Address after: No.1, 2 / F, building 50, No.888, Section 2, Chenglong Avenue, Longquanyi District, Chengdu, Sichuan 610000 Patentee after: CHENGDU GUIMU ROBOT Co.,Ltd. Address before: 300300 Tianjin city Dongli District North Road No. 2898 Patentee before: CIVIL AVIATION University OF CHINA |
|
TR01 | Transfer of patent right |