CN109003305A - 一种定位定姿方法及装置 - Google Patents

一种定位定姿方法及装置 Download PDF

Info

Publication number
CN109003305A
CN109003305A CN201810792152.8A CN201810792152A CN109003305A CN 109003305 A CN109003305 A CN 109003305A CN 201810792152 A CN201810792152 A CN 201810792152A CN 109003305 A CN109003305 A CN 109003305A
Authority
CN
China
Prior art keywords
posture information
target image
image
tradition
video camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810792152.8A
Other languages
English (en)
Other versions
CN109003305B (zh
Inventor
樊自伟
田春亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jiangsu Real Mdt Infotech Ltd
Original Assignee
Jiangsu Real Mdt Infotech Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jiangsu Real Mdt Infotech Ltd filed Critical Jiangsu Real Mdt Infotech Ltd
Priority to CN201810792152.8A priority Critical patent/CN109003305B/zh
Publication of CN109003305A publication Critical patent/CN109003305A/zh
Application granted granted Critical
Publication of CN109003305B publication Critical patent/CN109003305B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • G06T7/75Determining position or orientation of objects or cameras using feature-based methods involving models
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/10Geometric effects
    • G06T15/20Perspective computation
    • G06T15/205Image-based rendering

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Geometry (AREA)
  • Computer Graphics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Analysis (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本申请提供了一种定位定姿方法,其中,该方法包括:服务器获取目标影像,以及摄像机拍摄目标影像时所处的传统定位位姿信息;根据传统定位位姿信息及预存的三维实景模型数据,确定与目标影像匹配的虚拟影像;获取摄像机拍摄所述虚拟影像对应的实景时的位姿信息;根据摄像机拍摄所述虚拟影像对应的实景时的位姿信息,确定出摄像机拍摄目标影像时的位姿信息。本申请通过该方法及装置提高了摄像机拍摄目标影像时的位姿信息的精度。

Description

一种定位定姿方法及装置
技术领域
本申请涉及定位导航领域,具体而言,涉及一种定位定姿方法及装置。
背景技术
随着科技飞快发展,用户对地图定位和导航的精度要求不断增加,高精度的定位定姿系统可以精确地确定用户位置以及目的地位置,根据用户的位置以及目的地位置给出最佳导航路线,引导用户沿着选定路线到达目的地;也可以使自动驾驶车辆根据精准的定位更加安全,便捷的行驶至目的地。
现在普遍的方法是通过全球定位系统(GlobalPositioningSystem,GPS)或惯性导航系统(Inertial Navigation System,INS)来定位定姿,并设置图像传感器来得到地物的位置信息。然而,GPS是由接收机接收卫星信号并解算得到接收机位置的,一旦接收机在卫星信号不强的区域,或者受大气传播延迟的影响,得到的定位精度比较差;INS是根据用户初始位置与加速度计测量的加速度来确定用户位置的,具体地,通过加速度对时间的连续数学积分就可计算得到用户位移信息,结合用户初始位置即可确定用户当前位置,由于加速度计测量的加速度存在一定误差,所以在进行积分计算定位时,定位精度会随时间的推移而越来越差。
发明内容
有鉴于此,本申请实施例的目的在于提供一种定位定姿方法及装置,以提高用户以及目标物体的定位精度。
第一方面,本申请实施例提供了一种定位定姿方法,所述方法包括:
服务器获取目标影像,以及摄像机拍摄所述目标影像时所处的传统定位位姿信息;
根据所述传统定位位姿信息及预存的三维实景模型数据,确定与所述目标影像匹配的虚拟影像;
获取摄像机拍摄所述虚拟影像对应的实景时的位姿信息;
根据摄像机拍摄所述虚拟影像对应的实景时的位姿信息,确定出摄像机拍摄所述目标影像时的位姿信息。
结合第一方面,本申请实施例提供了第一方面的第一种可能的实施方式,其中,根据所述传统定位位姿信息及预存的三维实景模型数据,确定与所述目标影像匹配的虚拟影像,包括:
根据所述传统定位位姿信息及预存的三维实景模型数据,获取多个虚拟影像;其中,基于传统定位方式得到的所述多个虚拟影像对应的实景的拍摄位姿与该传统定位位姿信息所指示的位姿之间的差异满足预设条件;
从所述目标影像中,提取多个目标影像特征点,以及从获取的每个所述虚拟影像中,提取多个虚拟影像特征点;
通过将所述目标影像特征点与所述虚拟影像特征点进行匹配,从所述多个虚拟影像中确定与所述目标影像匹配的至少一个虚拟影像。
结合第一方面的第一种可能的实施方式,本申请实施例提供了第一方面的第二种可能的实施方式,其中,根据所述传统定位位姿信息及预存的三维实景模型数据,获取多个虚拟影像,包括:
根据所述传统定位位姿信息,在预存的三维实景模型数据中查找与所述传统定位位姿信息匹配的三维实景模型数据;其中,与所述传统定位位姿信息匹配的三维实景模型数据所对应的位置落入以所述传统定位位姿信息所对应的位置坐标为中心,以第一预设阈值为半径的区域范围内,并且与所述传统定位位姿信息匹配的三维实景模型数据所对应的姿态与所述传统定位位姿信息所对应的姿态之间的差距,小于第二预设阈值;
基于查找到的与所述传统定位位姿信息匹配的三维实景模型数据,进行图像渲染得到多个虚拟影像。
结合第一方面的第一种可能的实施方式,本申请实施例提供了第一方面的第三种可能的实施方式,其中,根据摄像机拍摄所述虚拟影像对应的实景时的位姿信息,确定出摄像机拍摄所述目标影像时的位姿信息,包括:
针对每个与所述目标影像特征点匹配成功的虚拟影像特征点,根据该虚拟影像特征点的像素坐标、摄像机拍摄该虚拟影像特征点对应的实景时的位姿信息,确定出该虚拟影像特征点的空间坐标,并将该空间坐标作为与该虚拟影像特征点匹配的目标影像特征点的空间坐标;
根据所述目标影像的多个目标影像特征点的像素坐标、所述空间坐标,以及摄像机拍摄该目标影像时的摄像参数信息,确定出摄像机拍摄所述目标影像时的位姿信息。
结合第一方面,本申请实施例提供了第一方面的第四种可能的实施方式,其中,所述方法还包括:
根据摄像机拍摄所述目标影像时的位姿信息,以及,目标物体在所述目标影像中的像素坐标信息,确定所述目标物体的空间位置信息。
第二方面,本申请实施例还提供了一种定位定姿装置,所述装置包括:
第一获取模块,用于获取目标影像,以及摄像机拍摄所述目标影像时所处的传统定位位姿信息;
第二获取模块,用于根据所述传统定位位姿信息及预存的三维实景模型数据,确定与所述目标影像匹配的虚拟影像;
第三获取模块,用于获取摄像机拍摄所述虚拟影像对应的实景时的位姿信息;
第一确定模块,用于根据摄像机拍摄所述虚拟影像对应的实景时的位姿信息,确定出摄像机拍摄所述目标影像时的位姿信息。
结合第二方面,本申请实施例提供了第二方面的第一种可能的实施方式,其中,所述第二获取模块包括:
查找单元,用于根据所述传统定位位姿信息及预存的三维实景模型数据,获取多个虚拟影像;其中,基于传统定位方式得到的所述多个虚拟影像对应的实景的拍摄位姿与该传统定位位姿信息所指示的位姿之间的差异满足预设条件;
提取单元,用于从所述目标影像中,提取多个目标影像特征点,以及从获取的每个所述虚拟影像中,提取多个虚拟影像特征点;
确定单元,用于通过将所述目标影像特征点与所述虚拟影像特征点进行匹配,从所述多个虚拟影像中确定与所述目标影像匹配的至少一个虚拟影像。
结合第二方面的第一种可能的实施方式,本申请实施例提供了第二方面的第二种可能的实施方式,其中,所述查找单元包括:
数据查找子单元,用于根据所述传统定位位姿信息,在预存的三维实景模型数据中查找与所述传统定位位姿信息匹配的三维实景模型数据;其中,与所述传统定位位姿信息匹配的三维实景模型数据所对应的位置落入以所述传统定位位姿信息所对应的位置坐标为中心,以第一预设阈值为半径的区域范围内,并且与所述传统定位位姿信息匹配的三维实景模型数据所对应的姿态与所述传统定位位姿信息所对应的姿态之间的差距,小于第二预设阈值;
影像确定子单元,用于基于查找到的与所述传统定位位姿信息匹配的三维实景模型数据,进行图像渲染得到多个虚拟影像。
结合第二方面的第一种可能的实施方式,本申请实施例提供了第二方面的第三种可能的实施方式,其中,所述第一确定模块包括:
坐标确定单元,用于针对每个与所述目标影像特征点匹配成功的虚拟影像特征点,根据该虚拟影像特征点的像素坐标、摄像机拍摄该虚拟影像特征点对应的实景时的位姿信息,确定出该虚拟影像特征点的空间坐标,并将该空间坐标作为与该虚拟影像特征点匹配的目标影像特征点的空间坐标;
位姿确定单元,用于根据所述目标影像的多个目标影像特征点的像素坐标、所述空间坐标,以及摄像机拍摄该目标影像时的摄像参数信息,确定出摄像机拍摄所述目标影像时的位姿信息。
结合第二方面,本申请实施例提供了第二方面的第四种可能的实施方式,所述装置还包括:
第二确定模块,用于根据摄像机拍摄所述目标影像时的位姿信息,以及,目标物体在所述目标影像中的像素坐标信息,确定所述目标物体的空间位置信息。
本申请实施例提供的定位定姿方法及装置,服务器首先获取目标影像,以及摄像机拍摄目标影像时所处的传统定位位姿信息,并根据传统定位位姿信息,从三维实景模型中获取与所述目标影像匹配的虚拟影像;其次获取摄像机拍摄所述虚拟影像对应的实景时的位姿信息;最后根据摄像机拍摄所述虚拟影像对应的实景时的位姿信息,确定出摄像机拍摄目标影像时的位姿信息,这种通过摄像机拍摄目标影像来获取摄像机位姿信息的定位方式,不受卫星信号、大气传播延迟的影响,也不受制于加速度测量误差的影响,定位精度较高。
为使本申请的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本申请的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1示出了本申请实施例所提供的一种定位定姿的方法流程图;
图2示出了本申请实施例所提供的另一种定位定姿的方法流程图;
图3示出了本申请实施例所提供的另一种定位定姿的方法流程图;
图4示出了本申请实施例所提供的另一种定位定姿的方法流程图;
图5示出了本申请实施例所提供的一种定位定姿装置的结构示意图;
图6示出了本申请实施例所提供的另一种定位定姿装置的结构示意图;
图7示出了本申请实施例所提供的另一种定位定姿装置的结构示意图;
图8示出了本申请实施例所提供的另一种定位定姿装置的结构示意图;
图9示出了本申请实施例所提供的一种服务器的结构示意图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围,而是仅仅表示本申请的选定实施例。基于本申请的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本申请保护的范围。
考虑到现有技术中通常采用的GPS定位或INS定位的定位精度比较低的问题,本申请实施例提供了一种不受限于卫星信号传输及加速度测量的定位定姿方法及装置,详见下述实施例。
如图1所示,为本申请实施例提供的一种定位定姿方法,该定位定姿方法的执行主体可以是服务器,上述方法具体包括如下步骤:
S101、服务器获取目标影像,以及摄像机拍摄目标影像时所处的传统定位位姿信息。
这里,目标影像可以是任何成像系统拍摄的影像,本申请实施例以摄像机拍摄目标影像进行阐述。在摄像机拍摄目标影像时,可以在摄像机上安装例如GPS、MEMS的传统定位定姿系统,并记录下摄像机拍摄每一张目标影像时的传统定位位姿信息。其中,位姿信息包括位置信息和姿态信息,位置信息即摄像机的空间坐标,姿态信息是指摄像机拍摄目标影像时,摄像机绕X轴、Y轴、Z轴旋转的角度。
S102、根据传统定位位姿信息及预存的三维实景模型数据,确定与目标影像匹配的虚拟影像。
在具体实施中,三维实景模型是由专业相机把现场完整的记录下来,三维实景模型数据全部源自于对真实场景的影像获取,其中,可以包括:空间的任意三点构成的三角形的位姿信息、该三角形构成的网状的平面控制图形以及该图形的纹理信息。三维引擎可以根据三维实景模型数据渲染出相对应的虚拟影像。
这里,在查找与该传统定位位姿信息对应的多个虚拟影像时,可以以该传统定位位姿信息对应的位置坐标为中心,以预设距离为半径,确定一个位置坐标范围;并且,可以根据传统定位位姿信息对应的姿态,确定一个姿态范围。然后,可以在三维实景模型数据中查找对应的位置落入上述位置坐标范围内、且姿态落入上述姿态范围内的三维实景模型数据。利用查找到的三维实景模型数据,三维引擎可以渲染得到多个虚拟影像,该虚拟影像即为与传统定位位姿信息相对应的多个虚拟影像。
在查找到上述多个虚拟影像后,通过数字影像处理从目标影像中提取多个目标影像特征点,以及从上述多个虚拟影像中提取多个虚拟影像特征点,将目标影像特征点与虚拟影像特征点进行匹配,从上述多个虚拟影像中确定与目标影像匹配的至少一个虚拟影像。
S103、获取摄像机拍摄虚拟影像对应的实景时的位姿信息。
由步骤S102可知,三维引擎根据三维实景模型数据渲染得到多个虚拟影像。具体的,在传统定位位姿信息确定的范围内,选定任意一个位姿,获取该位姿对应的三维实景模型数据,三维引擎根据获取的三维实景模型数据渲染得到与三维实景模型数据对应的虚拟影像,也即与上述选定的位姿对应的虚拟影像。由于根据传统定位位姿信息确定的范围内有多个位姿,所以传统定位位姿信息对应有多个虚拟影像,并且每个虚拟影像均有相对应的位姿。
这里,由于三维实景模型数据全部源自于对真实场景的影像获取,因此根据三维实景模型数据渲染得到的虚拟影像,均可以通过摄像机拍摄真实场景得到,并且虚拟影像对应的位姿,即为摄像机拍摄虚拟影像对应的实景时的位姿。
S104、根据摄像机拍摄虚拟影像对应的实景时的位姿信息,确定出摄像机拍摄目标影像时的位姿信息。
这里,可以根据摄像机拍摄虚拟影像对应的实景时的位姿信息,确定出摄像机拍摄目标影像时的位置信息,也可以根据摄像机拍摄虚拟影像对应的实景时的位姿信息,确定出摄像机拍摄目标影像时的姿态信息。在实际实施中,根据实际应用,可以只确定摄像机拍摄目标影像时的位置信息,也可以同时确定摄像机拍摄目标影像时的位置信息和姿态信息。
在具体实施中,可以基于摄像机拍摄虚拟影像对应的实景时的位姿信息,以及虚拟影像特征点的像素坐标来确定该虚拟影像特征点的空间坐标,由于目标影像特征点与虚拟影像特征点是一一对应的,所以可以将虚拟影像特征点的空间坐标作为与该虚拟影像特征点匹配的目标影像特征点的空间坐标。再根据目标影像特征点的空间坐标、目标影像特征点的像素坐标、摄像机拍摄该目标影像时的摄像参数信息,确定摄像机拍摄目标影像的位姿信息。
另外,根据精确的位置信息和姿态信息,可以反推出目标影像中任意物体的空间位置信息,也即:
S105、根据摄像机拍摄目标影像时的位姿信息,以及,目标物体在目标影像中的像素坐标信息,确定目标物体的空间位置信息。
通过本申请实施例提供的定位定姿方法,可以在用户遇到危险求救时,求救者通过摄像机拍摄影像,将目标影像传输至服务器,服务器利用本申请实施例提供的方法解算出求救者的位姿信息,并将求救者位姿信息传送给营救人员,以使营救人员顺利解救求救者。该定位定姿方法还可以用在军事领域、测绘地理信息等。
如图2所示,在步骤S102中,根据传统定位位姿信息及预存的三维实景模型数据,确定与目标影像匹配的虚拟影像,其具体方法如下:
S201、根据传统定位位姿信息及预存的三维实景模型数据,获取多个虚拟影像;其中,基于传统定位方式得到的多个虚拟影像对应的实景的拍摄位姿与该传统定位位姿信息所指示的位姿之间的差异满足预设条件;
S202、从目标影像中,提取多个目标影像特征点,以及从获取的每个虚拟影像中,提取多个虚拟影像特征点;
S203、通过将目标影像特征点与虚拟影像特征点进行匹配,从多个虚拟影像中确定与目标影像匹配的至少一个虚拟影像。
这里,根据传统定位位姿信息所匹配的三维实景模型数据,三维引擎可以渲染出传统定位位姿信息所对应的多个虚拟影像。服务器根据影像数字处理提取目标影像的多个目标影像特征点,以及每个虚拟影像的多个虚拟影像特征点,在获取目标影像特征点和虚拟影像特征点之后,从获取的虚拟影像特征点中查找与目标影像特征点相匹配的至少一个虚拟影像特征点,通过特征点的匹配确定目标影像匹配的虚拟影像。只要虚拟影像有至少一个虚拟影像特征点与目标影像的特征点相同,则该虚拟影像即为与目标影像匹配的虚拟影像,而且与一个目标影像相对应的虚拟影像至少有一个。
其中,特征点为多个像素点组成的像素区域,是能够反映影像本质特征、能够标识图像中目标物体的点,通过特征点的匹配能够完成图像的匹配,并且每张影像可以有不止一个特征点。当然,虚拟影像特征点可以是在三维引擎渲染虚拟影像的过程中就已经提取出来,作为三维实景模型的一类参数信息,也就是存在虚拟影像与相对应的特征点信息一一对应的关系;也可以在通过传统定位位姿信息和三维实景模型数据,获取多张虚拟影像之后,再对获取的虚拟影像进行特征点提取。本申请实施例以后者方法进行阐述。
如图3所示,在根据传统定位位姿信息及预存的三维实景模型数据,获取多个虚拟影像,包括:
S301、根据传统定位位姿信息,在预存的三维实景模型数据中查找与传统定位位姿信息匹配的三维实景模型数据;其中,与传统定位位姿信息匹配的三维实景模型数据所对应的位置落入以传统定位位姿信息所对应的位置坐标为中心,以第一预设阈值为半径的区域范围内,并且与传统定位位姿信息匹配的三维实景模型数据所对应的姿态与传统定位位姿信息所对应的姿态之间的差距,小于第二预设阈值;
S302、基于查找到的与传统定位位姿信息匹配的三维实景模型数据,进行图像渲染得到多个虚拟影像。
其中,预存的三维实景模型数据有其对应的位姿,根据传统定位位姿信息,可以在预存的三维实景模型数据中查找到与传统定位位姿信息匹配的三维实景模型数据。具体的,若三维实景模型数据所对应的位置落入以传统定位位姿信息所对应的位置坐标为中心,以第一预设阈值为半径的区域范围内,并且该三维实景模型数据所对应的姿态与传统定位位姿信息所对应的姿态(比如拍摄角度)之间的差距,小于第二预设阈值,则该三维实景模型数据为与传统定位位姿信息匹配的三维实景模型数据。
根据查找到的与传统定位位姿信息匹配的三维实景模型数据,三维引擎可以渲染出与传统定位位姿信息相对应的多个虚拟影像。
如图4所示,在步骤S104中,根据摄像机拍摄虚拟影像对应的实景时的位姿信息,确定出摄像机拍摄目标影像时的位姿信息,其具体方法如下:
S401、针对每个与目标影像特征点匹配成功的虚拟影像特征点,根据该虚拟影像特征点的像素坐标、摄像机拍摄该虚拟影像特征点对应的实景时的位姿信息,确定出该虚拟影像特征点的空间坐标,并将该空间坐标作为与该虚拟影像特征点匹配的目标影像特征点的空间坐标;
S402、根据目标影像的多个目标影像特征点的像素坐标、空间坐标,以及摄像机拍摄该目标影像时的摄像参数信息,确定出摄像机拍摄目标影像时的位姿信息。
其中,可以根据共线方程决定摄影中心点、像点和物点间的关系。这里,根据像点和摄影中心点确定物点,即可以根据虚拟影像特征点的像素坐标与摄像机拍摄该虚拟影像特征点对应的实景时的位姿信息,确定该虚拟影像特征点的空间坐标。由于此处解算的特征点是虚拟影像与目标影像一一对应的依据,所以,该虚拟影像特征点的空间坐标即为与该虚拟影像特征点匹配的目标影像特征点的空间坐标。
此时,根据共线方程决定摄影中心点、像点和物点间的关系,可以通过共线方程确定拍摄目标影像的摄像机的位姿信息。首先,提取该目标影像特征点在目标影像中的像素坐标,然后,根据目标影像特征点的像素坐标与目标影像特征点的空间坐标、拍摄该目标影像的摄像机的参数,可以通过共线方程解算出拍摄该目标影像的摄像机的位姿信息。
值得说明的,如若目标影像的特征点不止一个,对应的摄像机的位姿信息也不止一组,根据共线方程平差的特性,可以计算出最为精确的一组位姿信息。
本申请实施例提供的定位定姿方法,其确定的位姿信息精度高于传统的定位定姿方式。当然,基于精度较高的位姿信息可以创建高精度地图,无人驾驶汽车在基于高精地图行驶时,可以安全又便捷;也可以基于精度较高的位姿信息,对视线范围外的遇难人员进行营救;也可以基于精度较高的位姿信息,对地形地貌地理位置进行精准的复原。
基于同一发明构思,本申请实施例中还提供了与上述定位定姿方法对应的定位定姿装置,由于本申请实施例中的装置解决问题的原理与本申请实施例上述定位定姿方法相似,因此装置的实施可以参见方法的实施,重复之处不再赘述。如图5所示,为本申请实施例所提供的定位定姿装置的结构示意图,该数据传输装置包括:
第一获取模块11,用于获取目标影像,以及摄像机拍摄目标影像时所处的传统定位位姿信息;
第二获取模块12,用于根据所述传统定位位姿信息及预存的三维实景模型数据,确定与所述目标影像匹配的虚拟影像;
第三获取模块13,用于获取摄像机拍摄虚拟影像对应的实景时的位姿信息;
第一确定模块14,用于根据摄像机拍摄虚拟影像对应的实景时的位姿信息,确定出摄像机拍摄目标影像时的位姿信息;
第二确定模块15,用于根据摄像机拍摄目标影像时的位姿信息,以及,目标物体在目标影像中的像素坐标信息,确定目标物体的空间位置信息。
在具体实施中,如图6所示,第二获取模块12包括:
查找单元21,用于根据传统定位位姿信息,从三维实景模型中获取多个虚拟影像;其中,基于传统定位方式得到的多个虚拟影像对应的实景的拍摄位姿与该传统定位位姿信息所指示的位姿之间的差异满足预设条件;
提取单元22,用于从目标影像中,提取多个目标影像特征点,以及从获取的每个虚拟影像中,提取多个虚拟影像特征点;
确定单元23,用于通过将目标影像特征点与虚拟影像特征点进行匹配,从多个虚拟影像中确定与目标影像匹配的至少一个虚拟影像。
在具体实施中,如图7所示,查找单元21包括:
数据查找子单元31,用于根据传统定位位姿信息,在预存的三维实景模型数据中查找与传统定位位姿信息匹配的三维实景模型数据;其中,与传统定位位姿信息匹配的三维实景模型数据所对应的位置落入以传统定位位姿信息所对应的位置坐标为中心,以第一预设阈值为半径的区域范围内,并且与传统定位位姿信息匹配的三维实景模型数据所对应的姿态与传统定位位姿信息所对应的姿态之间的差距,小于第二预设阈值;
影像确定子单元32,基于查找到的与传统定位位姿信息匹配的三维实景模型数据,进行图像渲染得到多个虚拟影像。
在具体实施中,如图8所示,第一确定模块14包括:
坐标确定单元41,用于针对每个与目标影像特征点匹配成功的虚拟影像特征点,根据该虚拟影像特征点的像素坐标、摄像机拍摄该虚拟影像特征点对应的实景时的位姿信息,确定出该虚拟影像特征点的空间坐标,并将该空间坐标作为与该虚拟影像特征点匹配的目标影像特征点的空间坐标;
位姿确定单元42,用于根据目标影像的多个目标影像特征点的像素坐标、空间坐标,以及摄像机拍摄该目标影像时的摄像参数信息,确定出摄像机拍摄目标影像时的位姿信息。
如图9所示,为本申请实施例所提供的一种服务器的结构示意图,包括:处理器901、存储器902和总线903,存储器902存储有处理器901可执行的机器可读指令,当服务器运行时,处理器901与存储器902之间通过总线903通信,机器可读指令被处理器901执行时执行如下处理:
服务器获取目标影像,以及摄像机拍摄目标影像时所处的传统定位位姿信息;
根据传统定位位姿信息及预存的三维实景模型数据,确定与目标影像匹配的虚拟影像;
获取摄像机拍摄虚拟影像对应的实景时的位姿信息;
根据摄像机拍摄虚拟影像对应的实景时的位姿信息,确定出摄像机拍摄目标影像时的位姿信息。
上述处理器901执行的处理中,根据传统定位位姿信息及预存的三维实景模型数据,确定与目标影像匹配的虚拟影像,包括:
根据传统定位位姿信息及预存的三维实景模型数据,获取多个虚拟影像;其中,基于传统定位方式得到的多个虚拟影像对应的实景的拍摄位姿与该传统定位位姿信息所指示的位姿之间的差异满足预设条件;
从目标影像中,提取多个目标影像特征点,以及从获取的每个虚拟影像中,提取多个虚拟影像特征点;
通过将目标影像特征点与虚拟影像特征点进行匹配,从多个虚拟影像中确定与目标影像匹配的至少一个虚拟影像。
上述处理器901执行的处理中,根据传统定位位姿信息及预存的三维实景模型数据,获取多个虚拟影像,包括:
根据传统定位位姿信息,在预存的三维实景模型数据中查找与传统定位位姿信息匹配的三维实景模型数据;其中,与传统定位位姿信息匹配的三维实景模型数据所对应的位置落入以传统定位位姿信息所对应的位置坐标为中心,以第一预设阈值为半径的区域范围内,并且与传统定位位姿信息匹配的三维实景模型数据所对应的姿态与传统定位位姿信息所对应的姿态之间的差距,小于第二预设阈值;
基于查找到的与传统定位位姿信息匹配的三维实景模型数据,进行图像渲染得到多个虚拟影像。
上述处理器901执行的处理中,根据摄像机拍摄虚拟影像对应的实景时的位姿信息,确定出摄像机拍摄目标影像时的位姿信息,包括:
针对每个与目标影像特征点匹配成功的虚拟影像特征点,根据该虚拟影像特征点的像素坐标、摄像机拍摄该虚拟影像特征点对应的实景时的位姿信息,确定出该虚拟影像特征点的空间坐标,并将该空间坐标作为与该虚拟影像特征点匹配的目标影像特征点的空间坐标;
根据目标影像的多个目标影像特征点的像素坐标、空间坐标,以及摄像机拍摄该目标影像时的摄像参数信息,确定出摄像机拍摄目标影像时的位姿信息。
在具体实施中,上述处理器901执行的处理中,还包括:
根据摄像机拍摄目标影像时的位姿信息,以及,目标物体在目标影像中的像素坐标信息,确定目标物体的空间位置信息。
本申请实施例还提供了一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行信息传输方法的步骤。
具体地,该存储介质能够为通用的存储介质,如移动磁盘、硬盘等,该存储介质上的计算机程序被运行时,能够执行上述信息传输方法,从而解决目前单载波传输方式所带来的邻道泄露功率较高的问题,进而达到降低邻道泄露功率,提升电力无线专网通信系统的通信性能的效果。
本公开实施例所提供的信息传输方法的计算机程序产品,包括存储了程序代码的计算机可读存储介质,程序代码包括的指令可用于执行前面方法实施例中的方法,具体实现可参见方法实施例,在此不再赘述。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统和装置的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本公开的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本公开各个实施例方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上,仅为本公开的具体实施方式,但本公开的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本公开揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本公开的保护范围之内。因此,本公开的保护范围应以权利要求的保护范围为准。

Claims (10)

1.一种定位定姿方法,其特征在于,所述方法包括:
服务器获取目标影像,以及摄像机拍摄所述目标影像时所处的传统定位位姿信息;
根据所述传统定位位姿信息及预存的三维实景模型数据,确定与所述目标影像匹配的虚拟影像;
获取摄像机拍摄所述虚拟影像对应的实景时的位姿信息;
根据摄像机拍摄所述虚拟影像对应的实景时的位姿信息,确定出摄像机拍摄所述目标影像时的位姿信息。
2.如权利要求1所述的方法,其特征在于,根据所述传统定位位姿信息及预存的三维实景模型数据,确定与所述目标影像匹配的虚拟影像,包括:
根据所述传统定位位姿信息及预存的三维实景模型数据,获取多个虚拟影像;其中,基于传统定位方式得到的所述多个虚拟影像对应的实景的拍摄位姿与该传统定位位姿信息所指示的位姿之间的差异满足预设条件;
从所述目标影像中,提取多个目标影像特征点,以及从获取的每个所述虚拟影像中,提取多个虚拟影像特征点;
通过将所述目标影像特征点与所述虚拟影像特征点进行匹配,从所述多个虚拟影像中确定与所述目标影像匹配的至少一个虚拟影像。
3.如权利要求2所述的方法,其特征在于,根据所述传统定位位姿信息及预存的三维实景模型数据,获取多个虚拟影像,包括:
根据所述传统定位位姿信息,在预存的三维实景模型数据中查找与所述传统定位位姿信息匹配的三维实景模型数据;其中,与所述传统定位位姿信息匹配的三维实景模型数据所对应的位置落入以所述传统定位位姿信息所对应的位置坐标为中心,以第一预设阈值为半径的区域范围内,并且与所述传统定位位姿信息匹配的三维实景模型数据所对应的姿态与所述传统定位位姿信息所对应的姿态之间的差距,小于第二预设阈值;
基于查找到的与所述传统定位位姿信息匹配的三维实景模型数据,进行图像渲染得到多个虚拟影像。
4.如权利要求2所述的方法,其特征在于,根据摄像机拍摄所述虚拟影像对应的实景时的位姿信息,确定出摄像机拍摄所述目标影像时的位姿信息,包括:
针对每个与所述目标影像特征点匹配成功的虚拟影像特征点,根据该虚拟影像特征点的像素坐标、摄像机拍摄该虚拟影像特征点对应的实景时的位姿信息,确定出该虚拟影像特征点的空间坐标,并将该空间坐标作为与该虚拟影像特征点匹配的目标影像特征点的空间坐标;
根据所述目标影像的多个目标影像特征点的像素坐标、所述空间坐标,以及摄像机拍摄该目标影像时的摄像参数信息,确定出摄像机拍摄所述目标影像时的位姿信息。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
根据摄像机拍摄所述目标影像时的位姿信息,以及,目标物体在所述目标影像中的像素坐标信息,确定所述目标物体的空间位置信息。
6.一种定位定姿装置,其特征在于,所述装置包括:
第一获取模块,用于获取目标影像,以及摄像机拍摄所述目标影像时所处的传统定位位姿信息;
第二获取模块,用于根据所述传统定位位姿信息及预存的三维实景模型数据,确定与所述目标影像匹配的虚拟影像;
第三获取模块,用于获取摄像机拍摄所述虚拟影像对应的实景时的位姿信息;
第一确定模块,用于根据摄像机拍摄所述虚拟影像对应的实景时的位姿信息,确定出摄像机拍摄所述目标影像时的位姿信息。
7.如权利要求6所述的装置,其特征在于,所述第二获取模块包括:
查找单元,用于根据所述传统定位位姿信息及预存的三维实景模型数据,获取多个虚拟影像;其中,基于传统定位方式得到的所述多个虚拟影像对应的实景的拍摄位姿与该传统定位位姿信息所指示的位姿之间的差异满足预设条件;
提取单元,用于从所述目标影像中,提取多个目标影像特征点,以及从获取的每个所述虚拟影像中,提取多个虚拟影像特征点;
确定单元,用于通过将所述目标影像特征点与所述虚拟影像特征点进行匹配,从所述多个虚拟影像中确定与所述目标影像匹配的至少一个虚拟影像。
8.如权利要求7所述的装置,其特征在于,所述查找单元包括:
数据查找子单元,用于根据所述传统定位位姿信息,在预存的三维实景模型数据中查找与所述传统定位位姿信息匹配的三维实景模型数据;其中,与所述传统定位位姿信息匹配的三维实景模型数据所对应的位置落入以所述传统定位位姿信息所对应的位置坐标为中心,以第一预设阈值为半径的区域范围内,并且与所述传统定位位姿信息匹配的三维实景模型数据所对应的姿态与所述传统定位位姿信息所对应的姿态之间的差距,小于第二预设阈值;
影像确定子单元,用于基于查找到的与所述传统定位位姿信息匹配的三维实景模型数据,进行图像渲染得到多个虚拟影像。
9.如权利要求7所述的装置,其特征在于,所述第一确定模块包括:
坐标确定单元,用于针对每个与所述目标影像特征点匹配成功的虚拟影像特征点,根据该虚拟影像特征点的像素坐标、摄像机拍摄该虚拟影像特征点对应的实景时的位姿信息,确定出该虚拟影像特征点的空间坐标,并将该空间坐标作为与该虚拟影像特征点匹配的目标影像特征点的空间坐标;
位姿确定单元,用于根据所述目标影像的多个目标影像特征点的像素坐标、所述空间坐标,以及摄像机拍摄该目标影像时的摄像参数信息,确定出摄像机拍摄所述目标影像时的位姿信息。
10.根据权利要求6所述的装置,其特征在于,所述装置还包括:
第二确定模块,用于根据摄像机拍摄所述目标影像时的位姿信息,以及,目标物体在所述目标影像中的像素坐标信息,确定所述目标物体的空间位置信息。
CN201810792152.8A 2018-07-18 2018-07-18 一种定位定姿方法及装置 Active CN109003305B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810792152.8A CN109003305B (zh) 2018-07-18 2018-07-18 一种定位定姿方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810792152.8A CN109003305B (zh) 2018-07-18 2018-07-18 一种定位定姿方法及装置

Publications (2)

Publication Number Publication Date
CN109003305A true CN109003305A (zh) 2018-12-14
CN109003305B CN109003305B (zh) 2021-07-20

Family

ID=64600536

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810792152.8A Active CN109003305B (zh) 2018-07-18 2018-07-18 一种定位定姿方法及装置

Country Status (1)

Country Link
CN (1) CN109003305B (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110176034A (zh) * 2019-05-27 2019-08-27 盎锐(上海)信息科技有限公司 用于vslam的定位方法及扫描终端
CN112258574A (zh) * 2020-09-21 2021-01-22 北京沃东天骏信息技术有限公司 标注位姿信息的方法、装置及计算机可读存储介质
CN112348887A (zh) * 2019-08-09 2021-02-09 华为技术有限公司 终端位姿确定方法以及相关装置
CN113313966A (zh) * 2020-02-27 2021-08-27 华为技术有限公司 一种位姿确定方法以及相关设备
CN113709409A (zh) * 2020-05-20 2021-11-26 杭州萤石软件有限公司 一种室内监控处理方法、装置及设备
WO2022078240A1 (zh) * 2020-10-14 2022-04-21 佳都科技集团股份有限公司 一种应用于电子地图中的摄像头精准定位方法及处理终端
EP4261783A1 (en) * 2022-04-08 2023-10-18 Varjo Technologies Oy Using cloud computing to improve accuracy of pose tracking

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101794459A (zh) * 2010-02-09 2010-08-04 北京邮电大学 一种立体视觉影像与三维虚拟物体的无缝融合方法
CN101931790A (zh) * 2009-06-23 2010-12-29 北京航天长峰科技工业集团有限公司 一种三维视频监控方法及系统
CN102831401A (zh) * 2012-08-03 2012-12-19 樊晓东 对无特定标记目标物体跟踪、三维叠加及交互的方法及系统
CN103226838A (zh) * 2013-04-10 2013-07-31 福州林景行信息技术有限公司 地理场景中移动监控目标的实时空间定位方法
CN103528568A (zh) * 2013-10-08 2014-01-22 北京理工大学 一种基于无线信道的目标位姿图像测量方法
US20140300775A1 (en) * 2013-04-05 2014-10-09 Nokia Corporation Method and apparatus for determining camera location information and/or camera pose information according to a global coordinate system
CN104204726A (zh) * 2012-03-06 2014-12-10 日产自动车株式会社 移动物体位置姿态估计装置和移动物体位置姿态估计方法
US20160364867A1 (en) * 2015-06-11 2016-12-15 Fujitsu Limited Camera pose estimation device and control method
CN108022302A (zh) * 2017-12-01 2018-05-11 深圳市天界幻境科技有限公司 一种Inside-Out空间定位的AR立体显示装置

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101931790A (zh) * 2009-06-23 2010-12-29 北京航天长峰科技工业集团有限公司 一种三维视频监控方法及系统
CN101794459A (zh) * 2010-02-09 2010-08-04 北京邮电大学 一种立体视觉影像与三维虚拟物体的无缝融合方法
CN104204726A (zh) * 2012-03-06 2014-12-10 日产自动车株式会社 移动物体位置姿态估计装置和移动物体位置姿态估计方法
CN102831401A (zh) * 2012-08-03 2012-12-19 樊晓东 对无特定标记目标物体跟踪、三维叠加及交互的方法及系统
US20140300775A1 (en) * 2013-04-05 2014-10-09 Nokia Corporation Method and apparatus for determining camera location information and/or camera pose information according to a global coordinate system
CN103226838A (zh) * 2013-04-10 2013-07-31 福州林景行信息技术有限公司 地理场景中移动监控目标的实时空间定位方法
CN103528568A (zh) * 2013-10-08 2014-01-22 北京理工大学 一种基于无线信道的目标位姿图像测量方法
US20160364867A1 (en) * 2015-06-11 2016-12-15 Fujitsu Limited Camera pose estimation device and control method
CN108022302A (zh) * 2017-12-01 2018-05-11 深圳市天界幻境科技有限公司 一种Inside-Out空间定位的AR立体显示装置

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110176034A (zh) * 2019-05-27 2019-08-27 盎锐(上海)信息科技有限公司 用于vslam的定位方法及扫描终端
CN112348887A (zh) * 2019-08-09 2021-02-09 华为技术有限公司 终端位姿确定方法以及相关装置
CN113313966A (zh) * 2020-02-27 2021-08-27 华为技术有限公司 一种位姿确定方法以及相关设备
CN113709409A (zh) * 2020-05-20 2021-11-26 杭州萤石软件有限公司 一种室内监控处理方法、装置及设备
CN113709409B (zh) * 2020-05-20 2024-03-01 杭州萤石软件有限公司 一种室内监控处理方法、装置及设备
CN112258574A (zh) * 2020-09-21 2021-01-22 北京沃东天骏信息技术有限公司 标注位姿信息的方法、装置及计算机可读存储介质
WO2022078240A1 (zh) * 2020-10-14 2022-04-21 佳都科技集团股份有限公司 一种应用于电子地图中的摄像头精准定位方法及处理终端
EP4261783A1 (en) * 2022-04-08 2023-10-18 Varjo Technologies Oy Using cloud computing to improve accuracy of pose tracking

Also Published As

Publication number Publication date
CN109003305B (zh) 2021-07-20

Similar Documents

Publication Publication Date Title
CN109003305A (zh) 一种定位定姿方法及装置
CN108871314A (zh) 一种定位定姿方法及装置
CN109658461B (zh) 一种基于虚拟仿真环境的合作二维码的无人机定位方法
CN107727079B (zh) 一种微小型无人机全捷联下视相机的目标定位方法
KR102003152B1 (ko) 정보 처리 방법, 디바이스, 및 단말기
Panahandeh et al. Vision-aided inertial navigation based on ground plane feature detection
US9378559B2 (en) System and method for motion estimation
WO2011091552A1 (en) Extracting and mapping three dimensional features from geo-referenced images
JP2016048172A (ja) 画像処理装置、画像処理方法、およびプログラム
JP5762131B2 (ja) キャリブレーション装置、キャリブレーション装置のキャリブレーション方法およびキャリブレーションプログラム
JP2012118666A (ja) 三次元地図自動生成装置
EP3332215B1 (en) Systems and methods for northfinding
CN111279354A (zh) 图像处理方法、设备及计算机可读存储介质
CN109300143A (zh) 运动向量场的确定方法、装置、设备、存储介质和车辆
KR102239562B1 (ko) 항공 관측 데이터와 지상 관측 데이터 간의 융합 시스템
CN113048980A (zh) 位姿优化方法、装置、电子设备及存储介质
CN110503684A (zh) 相机位姿估计方法和装置
JP6698430B2 (ja) 測定装置、測定方法およびプログラム
CN110800023A (zh) 图像处理方法和设备、摄像装置以及无人机
CN110298320B (zh) 一种视觉定位方法、装置及存储介质
CN109003295B (zh) 一种无人机航空影像快速匹配方法
CN113052974A (zh) 物体三维表面的重建方法和装置
CN114170376B (zh) 一种针对室外大场景的多源信息融合分组式运动恢复结构方法
CN108981700A (zh) 一种定位定姿方法及装置
US8903163B2 (en) Using gravity measurements within a photogrammetric adjustment

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant