CN104048648A - 大尺寸非合作目标的相对位姿测量方法 - Google Patents

大尺寸非合作目标的相对位姿测量方法 Download PDF

Info

Publication number
CN104048648A
CN104048648A CN201410226532.7A CN201410226532A CN104048648A CN 104048648 A CN104048648 A CN 104048648A CN 201410226532 A CN201410226532 A CN 201410226532A CN 104048648 A CN104048648 A CN 104048648A
Authority
CN
China
Prior art keywords
image
rectangular characteristic
straight line
limit
coordinate
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410226532.7A
Other languages
English (en)
Other versions
CN104048648B (zh
Inventor
梁斌
杜晓东
何英
王学谦
刘厚德
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen International Graduate School of Tsinghua University
Original Assignee
Shenzhen Graduate School Tsinghua University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Graduate School Tsinghua University filed Critical Shenzhen Graduate School Tsinghua University
Priority to CN201410226532.7A priority Critical patent/CN104048648B/zh
Publication of CN104048648A publication Critical patent/CN104048648A/zh
Application granted granted Critical
Publication of CN104048648B publication Critical patent/CN104048648B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/24Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for cosmonautical navigation

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • Astronomy & Astrophysics (AREA)
  • Automation & Control Theory (AREA)
  • General Physics & Mathematics (AREA)
  • Image Analysis (AREA)

Abstract

一种大尺寸非合作目标的相对位姿测量方法,其包括以下步骤:在所述非合作目标上选择一个矩形特征;通过两个相机对所述矩形特征的不同区域进行图像采集,获得包含所述矩形特征的第一、第二顶点的图像A和包含所述矩形特征的第三、第四顶点的图像B;对图像A、B分别进行图像处理,提取与所述矩形特征的边对应的直线;用提取到的所述直线计算所述第一至第四顶点的图像坐标;用所述第一至第四顶点的图像坐标计算其在各自相机坐标系下的三维坐标;坐标变换,将第一至第四顶点的三维坐标统一到同一坐标系下;用同一坐标系下第一至第四顶点的三维坐标求解所述矩形特征的位姿,作为所述非合作目标的位姿。该方法能够近距离准确测量非合作目标的位姿。

Description

大尺寸非合作目标的相对位姿测量方法
技术领域
本发明涉及大尺寸非合作目标的相对位姿测量方法,属于空间机器人在轨服务技术领域和计算机视觉领域。
背景技术
位于地球静止轨道(GEO)的卫星,因其相对于地球表面始终是静止的,并且可覆盖约40%的地球面积,因此它在通讯、气象、导航等领域得到了广泛的应用。据统计,在全球每年发射的卫星中,约有2.5%的卫星未能正确入轨,然而在正确入轨的卫星中又有6%-8%由于机械故障等原因导致卫星失效(Sullivan B R,Akin D L.A survey of serviceable space-craftfailures[R].Reston,VA,USA:AIAA,2001.)。这些失效的卫星不仅造成了巨大的经济损失,同时还占据了宝贵的GEO轨道资源。
为了最大限度的降低因卫星故障或失效而造成的损失,各航天大国正在积极发展基于空间机器人的在轨服务技术。这项技术可对空间发生故障的航天器进行在轨修复和维护,而不是通过发射新的航天器来进行替代;通过对发生故障的航天器进行维护和载荷升级,可有效解决航天器的故障、延长其使用寿命、增强其系统能力。
然而,对GEO轨道的航天器进行在轨服务是有很大难度的。由于发生故障的GEO航天器一般没有专门安装的用于测量的标志器、用于通信的星间链路和用于硬连接的对接接口,无法为在轨服务提供辅助的合作条件。所以这些类型的航天器被归类为“非合作目标”。实现与非合作目标从远距离跟踪接近直至近距离的停靠,是在轨服务得以实施的重要保障。然而GEO卫星的体积、重量、功耗通常会设计得较大,庞大的外形尺寸会给超近距离的相对测量带来很大的难度。当服务航天器接近到一定距离后,光学敏感器受视场角限制有可能无法观测到大尺寸目标卫星的全貌,甚至一些可识别的特征也超出了视场范围。因此本发明将对相关关键技术进行深入研究,提出一种基于双目协作视觉对超近距离下大尺寸非合作目标的相对位姿测量方法。
发明内容
本发明的目的是提供一种大尺寸非合作目标的相对位姿测量方法,以解决大尺寸非合作目标由于没有用于测量的标志器且体积庞大导致难以测量其位姿的技术问题。
为达上述目的,本发明提供的方法是一种基于双目协作视觉对超近距离下大尺寸非合作目标的相对位姿测量方法,其基本构思是:根据调查已有大尺寸非合作目标的特点,选用矩形特征作为识别对象;利用两台相机协同测量大尺寸非合作目标的矩形特征,每台相机只拍摄矩形特征的部分区域,然后将两台相机的图像信息进行融合以得到整个矩形特征的信息;以及根据图像处理算法和相应的位置测量算法进而解算出非合作目标的相对位置和姿态。该方法不要求在大尺寸非合作目标上安装用于辅助测量的合作标志器,也无需知道大尺寸非合作目标的几何尺寸,而是直接以大尺寸非合作目标自身的部件作为识别对象。
本发明具体的技术方案如下:
一种大尺寸非合作目标的相对位姿测量方法,其包括以下步骤:
在所述非合作目标上选择一个矩形特征;
通过两个相机对所述矩形特征的不同区域进行图像采集,获得包含所述矩形特征的第一、第二顶点的图像A和包含所述矩形特征的第三、第四顶点的图像B;
对图像A、B分别进行图像处理,提取与所述矩形特征的边对应的直线;
用提取到的所述直线计算所述第一至第四顶点的图像坐标;
用所述第一至第四顶点的图像坐标计算其在各自相机坐标系下的三维坐标;
坐标变换,将第一至第四顶点的三维坐标统一到同一坐标系下;以及
用同一坐标系下第一至第四顶点的三维坐标求解所述矩形特征的位姿,该位姿即为所述非合作目标的位姿。
在上述的大尺寸非合作目标的相对位姿测量方法中,优选地,对图像A、B进行的图像处理包括:用于减弱噪声及保留图像中微小锐利细节的图像滤波步骤;用于从滤波后的图像获取图像边沿信息的边沿检测步骤;用于从获取的边沿信息中提取直线的直线提取步骤;以及用于从提取的直线中识别与所述矩形特征的边对应的直线的识别步骤。
在上述的大尺寸非合作目标的相对位姿测量方法中,优选地,所述图像滤波步骤采用中值滤波算法,所述边沿检测步骤采用Canny算法,所述直线提取步骤采用霍夫变换。
在上述的大尺寸非合作目标的相对位姿测量方法中,优选地,所述识别步骤通过图像中的复数个参考点辅助识别与所述矩形特征的边对应的直线,其中一个参考点位于与所述矩形特征对应的矩形区域内,其余参考点位于所述矩形区域外,且所述矩形区域外的各个参考点与所述矩形区域内的参考点的连线对应与矩形的各边相交。
在上述的大尺寸非合作目标的相对位姿测量方法中,优选地,在第一帧图像的处理中,所述复数个参考点通过遥操作选定;在后序图像的处理中,所述复数个参考点根据前一帧图像中与矩形特征的边对应的直线和参考点的位置以及本帧图像中提取的直线确定。
在上述的大尺寸非合作目标的相对位姿测量方法中,优选地,所述非合作目标为故障卫星,所述矩形特征为故障卫星通讯天线背板上的矩形加强筋。
在上述的大尺寸非合作目标的相对位姿测量方法中,优选地,所述两个相机为光学相机,安装于服务航天器上,所述图像采集步骤在超近距离或停靠位置进行。
在上述的大尺寸非合作目标的相对位姿测量方法中,优选地,在提取与所述矩形特征的边对应的直线的步骤中,在图像A中提取到与所述矩形特征的第一边、第二边及第三边对应的三条直线,在图像B中提取到与所述矩形特征的第一边、第三边及第四边对应的另外三条直线,所述第一边和第三边平行,第二边和第四边平行;在计算所述第一至第四顶点的图像坐标的步骤中,用在图像A中提取到的所述三条直线的直线方程计算出它们的两个交点,将该两个交点的图像坐标作为矩形特征的第一和第二顶点的图像坐标;同样地,用在图像B中提取到的所述另外三条直线的直线方程计算出它们的两个交点从而得到矩形特征的第三和第四顶点的图像坐标。
本发明与现有技术相比具有如下优点:(1)采用自主识别非合作目标自身的矩形特征进行位姿的测量,无需在被测目标上安装合作标志器,也无需知道被测目标的几何尺寸;(2)采用双目相机协作方式,可以在超近距离直至停靠位置时,对非合作目标进行准确的位姿测量;(3)可以用于大尺寸非合作航天器位姿的测量;(4)所采用的设备为光学相机,其具有质量轻、体积小、功耗低等特点,可以很好的在空间任务中得到应用。
附图说明
图1为坐标系之间的关系示意图;
图2为一实施例大尺寸非合作目标的相对位姿测量方法的流程图;
图3为模拟生成的图像A;
图4为模拟生成的图像B;
图5为图像B经过边沿检测的结果;
图6为通过参考点识别矩形特征的边的结果;
图7为通过矩形特征的边确定矩形特征的顶点的结果。
具体实施方式
下面结合附图和实施例对本发明进一步说明。这些更详细的描述旨在帮助理解本发明,而不应被用于限制本发明。根据本发明公开的内容,本领域技术人员明白,可以不需要一些或者所有这些特定细节即可实施本发明。而在其它情况下,为了避免将发明创造淡化,未详细描述众所周知的操作过程。
本实施例以故障卫星作为非合作目标。能够在超近距离下准确测量大尺寸非合作目标的相对位姿。
为了表述方便,本实施例视觉测量的各坐标系定义如图1所示。
∑T代表交会目标坐标系,建立在目标航天器上。它的原点OT是在矩形的中心,ZT轴与矩形的长边平行,YT轴与矩形的短边平行。根据右手法则,XT垂直于矩形平面。
∑C代表交会参考坐标系,建立在追踪航天器(服务航天器)上。原点OC在追踪航天器的+X面上,两相机基线正中间的位置。XC轴平行于相机的光轴,ZC轴垂直于光轴由相机A指向相机B。YC轴服从右手法则。
如图2所示,本大尺寸非合作目标的相对位姿测量方法包括以下步骤:
在非合作目标上选择一个矩形特征,这里选择故障卫星通讯天线背板上的矩形加强筋作为矩形特征。
通过双目相机的两个相机A、B对所述矩形特征的不同区域进行图像采集,将相机A采集到的图像记作图像A,相机B采集到的图像记作图像B,图像A包含所述矩形特征的第一顶点P1和第二顶点P2,图像B包含所述矩形特征的第三顶点P3和第四顶点P4。为了便于理解,图3和图4分别示出了OpenGL模拟的虚拟图像A和图像B,为了更加真实的反映相机的运行情况,在虚拟图像中加入了一定的噪声。双目相机可以采用光学相机,安装于服务航天器上,该图像采集步骤可以在超近距离或停靠位置进行。
步骤S101,对图像A、B分别进行图像处理,提取与所述矩形特征的边对应的直线;然后用提取到的与矩形特征的边对应的直线计算所述第一至第四顶点的图像坐标。其中,图像处理包括:用于减弱噪声及保留图像中微小锐利细节的图像滤波步骤;用于从滤波后的图像获取图像边沿信息的边沿检测步骤;用于从获取的边沿信息中提取直线的直线提取步骤;以及用于从提取的直线中识别与所述矩形特征的边对应的直线的识别步骤。下面进一步详细说明。
(1)图像滤波步骤:分别对A、B相机采集到的图像进行滤波,以减弱噪声的干扰,并保留图像中微小锐利的细节。
中值滤波是一种广泛采用的典型非线性滤波,其原理是让与周围像素灰度值的差比较大的像素改取与周围像素值接近的值。由于它不是简单的取均值,所以产生的模糊比较少。因此它既能消除噪声又能保持图像的细节。由于我们提取的特征为一些重要的边沿信息,因此本发明优选中值滤波来平滑噪声。
(2)边沿检测步骤:对上述滤波处理后的图像分别进行边沿检测,得到图像的边沿信息。
边沿检测的实质是采用某种算法来提取出图像中对象与背景间的交界线,边沿的定义为图像中灰度发生急剧变化的区域边界。
Canny算子是目前在图像处理领域应用广泛的一种较新的边沿检测算法,其检测性能好,边沿定位的唯一性较高。Canny边沿检测器是高斯函数的一阶导数,是对信噪比与定位之乘积的最优化逼近算子。因此本发明优选Canny算法来进行边沿检测,检测结果如图5所示。
(3)直线提取步骤:对上述处理后的图像分别进行直线提取,得到包含矩形加强筋各边在内的各条直线。
为了获取目标航天器表面矩形特征的各个棱边,还需要从二值图像的边沿图像中提取出直线信息。本发明优选霍夫变换来进行直线的提取。霍夫变换是一种能从二进制图像中提取几何基元的有效方法,可以根据局部度量来计算全面描述参数,因此对局部信息缺损不敏感和对随机噪声具有很好的鲁棒性,即对于图像中边沿的部分缺损,直线的残缺,表面安装物体的小部分遮挡都有很好的抗干扰性。
(4)矩形边直线的识别步骤:从提取后的所有直线信息中,识别对应于矩形加强筋的3条直线。
通过直线提取步骤,从视场里的复杂图像中会提取出许多条直线。因此需要采取一些手段来辨别出与矩形加强筋(即矩形特征)对应的直线。首先,通过遥操作在图像中选取几个参考点来辅助对目标直线的识别。在通过遥测获得的图像上利用鼠标设置了四个参考点Pr1,Pr2,Pr3和Pr4,如图6所示。对于参考点的位置没有特殊的要求,只要一个参考点Pr1在矩形框内,其余参考点Pr2、Pr3、Pr4在矩形框外且保证它们与点Pr1的连线与矩形的各边相交,如图7所示。图中边P3P4可以由参考点Pr1和Pr2来确定,而另外两条边P1P3和P2P4可以由Pr1,Pr3和Pr1,Pr4的连线识别出来。识别结果如图6和图7所示,图6中较粗的白色线条为识别到的与矩形特征的边对应的直线。
这些操作只需实施在第一帧图像的处理上,一旦选定一次后,在接下来的图像处理中,可以根据上帧的结果(参考点的位置、矩形边等)和本帧的结果(提取的直线)估计出参考点的位置并进行实时跟踪。
针对故障卫星天线的实际情况,矩形框架的细节值得认真考虑,组成矩形结构的样条具有一定的高度和宽度。因此针对矩形特征的一条边会提取出不只一条直线。为了更精确的描述目标,把样条顶部的内边沿作为目标矩形P1P2P4P3的边。
(5)矩形顶点的求解:当图像中的三条矩形边确定后,可以利用它们所在的直线方程来计算出它们的交点,从而得到矩形特征的顶点的图像坐标。比起直接获取矩形的顶点,先提取直线再求交点的方法可以获得更高的精度。
图4中点P3,P4在像平面上的坐标(即第三顶点和第四顶点的图像坐标)为:
( u 3 , v 3 ) = ( 147.9,415.2 ) ( u 4 , v 4 ) = ( 416.6,396.4 ) - - - ( 1 )
同样地,利用相机A的图像可以提取另外两个点(即第一顶点和第二顶点)的图像坐标:
( u 1 , v 1 ) = ( 118.7,137.5 ) ( u 2 , v 2 ) = ( 409.1,124.8 ) - - - ( 2 )
步骤S102,用所述第一至第四顶点的图像坐标计算其在各自相机坐标系下的三维坐标。即,矩形顶点在各自相机坐标系中的位置求解。
通过上述图像处理算法,矩形顶点的图像坐标已经被提取出来,可以根据相机成像模型求解出相应矩形顶点在各自相机坐标系中的位置。
像平面上的点对应于CCD阵列的每一个成像单元。点Pi的图像坐标为(xi,yi),也是物理单元的坐标。(ui,vi)与(xi,yi)之间有如下关系:
u i = x i dx + u o v i = y i dy + v o - - - ( 3 )
其中dx,dy表示一个像素在x轴和y轴方向上的物理尺寸,(uo,vo)表示像平面中心点的图像坐标。
从空间中点的三维坐标到两维的图像坐标的映射可以由针孔模型来描述。点Pi在相机坐标系下的坐标为Pi=(Xi,Yi,Zi),在相机像平面上的坐标为(xi,yi),则有:
x i = fX i Z i y i = fY i Z i - - - ( 4 )
其中f为相机焦距。由式(3)和(4),第一顶点P1和第二顶点P2在相机A坐标系下的坐标可以表示为:
X i A Y i A Z i A = ( u i - u Ao ) dx / f ( v i - v Ao ) dy / f 1 Z i A = a i b i 1 Z i A , i = 1,2 - - - ( 5 )
式中(5)中(uAo,vAo)是相机A的像平面中心点。为了方便起见,用ai和bi代表复杂公式运算的结果。相应地,第三顶点P3和第四顶点P4在相机B坐标系下的坐标可以表示为:
X i B Y i B Z i B = ( u i - u Bo ) dx / f ( v i - v Bo ) dy / f 1 Z i B , i = 3,4 - - - ( 6 )
其中(uBo,vBo)是相机B的像平面中心点。
步骤S103,坐标变换,将上述步骤中分别求解的矩形顶点在各自相机坐标系中的位置进行坐标变换,在同一个坐标系中表示出来,即,将第一至第四顶点的三维坐标统一到同一坐标系下。
两相机坐标系之间的旋转矩阵ARB和平移向量ATB可以通过标定来获得。因此特征点在不同相机坐标系下的坐标具有如下关系:
APiARB×BPi+ATB    (7)
其中APi=[AXi,AYi,AZi]是相机坐标系∑A中第i个特征点的坐标。类似地,BPi=[BXi,BYi,BZi]是相机坐标系∑B中第i个特征点的坐标。
由上式(7)可得,第三顶点P3和第四顶点P4在相机A坐标系下的坐标为(这里假设两相机具有相同的内参数):
X i A Y i A Z i A = R B A × ( u i - u Bo ) dx / f ( v i - v Bo ) dy / f 1 Z i B + T B A = a i b i c i Z i B + T B A , i = 3,4 - - - ( 8 )
其中ai,bi,ci是包含相机内参数的常数。至此,矩形的四个顶点相对于相机A坐标系下的坐标已全部得到。
首先由于矩形的对边是相等的,因此向量的对应分量是相等的,即:
- a 1 a 2 a 3 - a 4 - b 1 b 2 b 3 - b 4 - 1 1 c 3 - c 4 Z 1 A Z 2 A Z 3 B Z 4 B = 0 - - - ( 9 )
只要矩阵的秩为3,就可以求出(AZ1,AZ2,BZ3,BZ4)的一维解向量。为了解算出所有的未知向量,在此,可应用矩形的另外一个性质:矩形的角都是直角,即矩形的邻边相互垂直。的内积为零:
( a 1 Z 1 A - a 3 Z 3 B - t x ) ( a 1 Z 1 A - a 2 Z 2 A ) + ( b 1 Z 1 A - b 3 Z 3 B - t y ) ( b 1 Z 1 A - b 2 Z 2 A ) + ( Z 1 A - c 3 Z 3 B - t z ) ( Z 1 A - Z 2 A ) = 0 - - - ( 10 )
其中,ATB=[tx,ty,tz]为平移向量。
由式(10)和(9),可以获得向量(AZ1,AZ2,BZ3,BZ4)的唯一解。于是通过式(5)和(7)便可以得到矩形四个顶点在相机A坐标系下的坐标。
步骤S104,用同一坐标系下第一至第四顶点的三维坐标求解所述矩形特征的位姿,该位姿即为所述非合作目标的位姿。
由于已经计算出了矩形四个顶点P1、P2、P3和P4在相机A坐标系下的坐标,那么矩形的尺寸(长和宽)就可以计算出来,则矩形四个顶点P1、P2、P3和P4在交会目标坐标系下的坐标可以表示为:
P 1 T = [ X 1 T , Y 1 T , Z 1 T ] T = [ 0 , - W / 2 , - L / 2 ] T , P 2 T = [ X 2 T , Y 2 T , Z 2 T ] T = [ 0 , W / 2 , - L / 2 ] T , P 3 T = [ X 3 T , Y 3 T , Z 3 T ] T = [ 0 , - W / 2 , L / 2 ] T , P 4 T = [ X 4 T , Y 4 T , Z 4 T ] T = [ 0 , W / 2 , L / 2 ] T - - - ( 11 )
其中L,W分别为矩形的长度和宽度。交会目标坐标系和相机A坐标系之间的关系为:
APiART×TPi+ATT    (12)
式中ARTATT分别是旋转矩阵和平移向量。为了描述故障卫星和服务航天器的相对位姿关系,需要解算出目标坐标系和相对参考坐标系之间的旋转矩阵和平移向量。由式(12),坐标系∑T相对于坐标系∑C的位姿可以写成齐次坐标的形式:
X i C Y i C Z i C 1 = R T C T T C O 3 × 3 1 X i T Y i T Z i T 1 - - - ( 13 )
其中,旋转矩阵CRT和平移矩阵CTT分别为:
R T C = R A C · R T A T T C = T A C + R A C · T T A - - - ( 14 )
将特征点(第一至第四顶点)的坐标代入式(13),可以得到如下方程:
Ax=b        (15)其中,A是12×12的系数矩阵,且
x=(R11,R12,R13,Tx,R21,R22,R23,Ty,R31,R32,R33,Tz)T    (16)
b=(AXi,AYi,AZi,1,...)T,i=1,2,3,4    (17)
于是,式(15)中的旋转矩阵和平移向量便可以由式(18)求出:
x=(ATA)-1ATb    (18)
假设姿态角度按照Z-Y-X的顺序分别记为α,β,γ。交会目标坐标系和交会参考坐标系之间的旋转矩阵可表示为:
R T C = C β C γ - C α S γ + S α S β C γ S α S γ + C α S β C γ C β S γ C α C γ + S α S β S γ - S α C γ + C α S β S γ - S β S α C β C α C β - - - ( 19 )
由于实际中服务航天器不会发生绕Z轴90°的姿态翻转,因此旋转矩阵中的第一列第一行元素和第三列第三行元素都不为零,于是可以解算出旋转角度:
γ = arctan ( R 32 / R 33 ) β = - arcsin R 31 α = arctan ( R 21 / R 11 ) - - - ( 20 )
至此,交会目标坐标系和交会参考坐标系之间的六自由度相对位姿参数都已经计算出来,因此可以确定故障卫星和服务航天器之间的相对位置和相对姿态关系。

Claims (8)

1.一种大尺寸非合作目标的相对位姿测量方法,其特征在于,包括以下步骤:
在所述非合作目标上选择一个矩形特征;
通过两个相机对所述矩形特征的不同区域进行图像采集,获得包含所述矩形特征的第一、第二顶点的图像A和包含所述矩形特征的第三、第四顶点的图像B;
对图像A、B分别进行图像处理,提取与所述矩形特征的边对应的直线;
用提取到的所述直线计算所述第一至第四顶点的图像坐标;
用所述第一至第四顶点的图像坐标计算其在各自相机坐标系下的三维坐标;
坐标变换,将第一至第四顶点的三维坐标统一到同一坐标系下;以及
用同一坐标系下第一至第四顶点的三维坐标求解所述矩形特征的位姿,该位姿即为所述非合作目标的位姿。
2.如权利要求1所述的大尺寸非合作目标的相对位姿测量方法,其特征在于,对图像A、B进行的图像处理包括:
用于减弱噪声及保留图像中微小锐利细节的图像滤波步骤;
用于从滤波后的图像获取图像边沿信息的边沿检测步骤;
用于从获取的边沿信息中提取直线的直线提取步骤;以及
用于从提取的直线中识别与所述矩形特征的边对应的直线的识别步骤。
3.如权利要求2所述的大尺寸非合作目标的相对位姿测量方法,其特征在于,所述图像滤波步骤采用中值滤波算法,所述边沿检测步骤采用Canny算法,所述直线提取步骤采用霍夫变换。
4.如权利要求2所述的大尺寸非合作目标的相对位姿测量方法,其特征在于,所述识别步骤通过图像中的复数个参考点辅助识别与所述矩形特征的边对应的直线,其中一个参考点位于与所述矩形特征对应的矩形区域内,其余参考点位于所述矩形区域外,且所述矩形区域外的各个参考点与所述矩形区域内的参考点的连线对应与矩形的各边相交。
5.如权利要求4所述的大尺寸非合作目标的相对位姿测量方法,其特征在于,在第一帧图像的处理中,所述复数个参考点通过遥操作选定;在后序图像的处理中,所述复数个参考点根据前一帧图像中与矩形特征的边对应的直线和参考点的位置以及本帧图像中提取的直线确定。
6.如权利要求1所述的大尺寸非合作目标的相对位姿测量方法,其特征在于,所述非合作目标为故障卫星,所述矩形特征为故障卫星通讯天线背板上的矩形加强筋。
7.如权利要求6所述的大尺寸非合作目标的相对位姿测量方法,其特征在于,所述两个相机为光学相机,安装于服务航天器上,所述图像采集步骤在超近距离或停靠位置进行。
8.如权利要求1所述的大尺寸非合作目标的相对位姿测量方法,其特征在于,在提取与所述矩形特征的边对应的直线的步骤中,在图像A中提取到与所述矩形特征的第一边、第二边及第三边对应的三条直线,在图像B中提取到与所述矩形特征的第一边、第三边及第四边对应的另外三条直线,所述第一边和第三边平行,第二边和第四边平行;
在计算所述第一至第四顶点的图像坐标的步骤中,用在图像A中提取到的所述三条直线的直线方程计算出它们的两个交点,将该两个交点的图像坐标作为矩形特征的第一和第二顶点的图像坐标;同样地,用在图像B中提取到的所述另外三条直线的直线方程计算出它们的两个交点从而得到矩形特征的第三和第四顶点的图像坐标。
CN201410226532.7A 2014-05-27 2014-05-27 大尺寸非合作目标的相对位姿测量方法 Active CN104048648B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410226532.7A CN104048648B (zh) 2014-05-27 2014-05-27 大尺寸非合作目标的相对位姿测量方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410226532.7A CN104048648B (zh) 2014-05-27 2014-05-27 大尺寸非合作目标的相对位姿测量方法

Publications (2)

Publication Number Publication Date
CN104048648A true CN104048648A (zh) 2014-09-17
CN104048648B CN104048648B (zh) 2016-09-21

Family

ID=51501812

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410226532.7A Active CN104048648B (zh) 2014-05-27 2014-05-27 大尺寸非合作目标的相对位姿测量方法

Country Status (1)

Country Link
CN (1) CN104048648B (zh)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104443450A (zh) * 2014-11-03 2015-03-25 上海卫星工程研究所 微卫星导航系统地面验证系统及方法
CN105215669A (zh) * 2015-09-17 2016-01-06 中国商用飞机有限责任公司 基于iGPS的对接测量调姿方法
CN105509733A (zh) * 2015-11-30 2016-04-20 上海宇航系统工程研究所 非合作空间圆目标的相对位姿测量方法
CN107103621A (zh) * 2017-04-22 2017-08-29 许晟明 基于光场单相机的非合作航天器三维位姿测量系统
CN107449402A (zh) * 2017-07-31 2017-12-08 清华大学深圳研究生院 一种非合作目标的相对位姿的测量方法
CN107490356A (zh) * 2017-08-21 2017-12-19 上海航天控制技术研究所 一种非合作目标旋转轴和旋转角测量方法
CN107534202A (zh) * 2015-05-22 2018-01-02 华为技术有限公司 一种测量天线姿态的方法和装置
CN108844462A (zh) * 2018-06-05 2018-11-20 广州视源电子科技股份有限公司 一种尺寸检测方法、装置、设备和系统
CN109115184A (zh) * 2018-07-13 2019-01-01 哈尔滨工业大学(深圳) 基于非合作目标协同测量方法及系统
CN110030979A (zh) * 2019-03-11 2019-07-19 北京空间飞行器总体设计部 一种基于序列图像的空间非合作目标相对位姿测量方法
CN110287873A (zh) * 2019-06-25 2019-09-27 清华大学深圳研究生院 基于深度神经网络的非合作目标位姿测量方法、系统及终端设备
CN110411459A (zh) * 2019-06-11 2019-11-05 中国西安卫星测控中心 一种使用图像序列的空间非合作目标自旋参数的辨识方法
CN112378383A (zh) * 2020-10-22 2021-02-19 北京航空航天大学 基于圆和线特征非合作目标相对位姿双目视觉测量方法
CN112597832A (zh) * 2020-12-10 2021-04-02 上海闻泰信息技术有限公司 矩形件安装偏位判定方法和装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101726296A (zh) * 2009-12-22 2010-06-09 哈尔滨工业大学 空间机器人视觉测量、路径规划、gnc一体化仿真系统
CN102759358A (zh) * 2012-03-14 2012-10-31 南京航空航天大学 基于失效卫星表面参考点的相对位姿动力学建模方法
JP2012242317A (ja) * 2011-05-23 2012-12-10 Mitsubishi Electric Corp キャリブレーション装置、キャリブレーション装置のキャリブレーション方法およびキャリブレーションプログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101726296A (zh) * 2009-12-22 2010-06-09 哈尔滨工业大学 空间机器人视觉测量、路径规划、gnc一体化仿真系统
JP2012242317A (ja) * 2011-05-23 2012-12-10 Mitsubishi Electric Corp キャリブレーション装置、キャリブレーション装置のキャリブレーション方法およびキャリブレーションプログラム
CN102759358A (zh) * 2012-03-14 2012-10-31 南京航空航天大学 基于失效卫星表面参考点的相对位姿动力学建模方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
徐培智等: "基于立体视觉的非合作目标位姿测量", 《计算机与现代化》, 31 August 2013 (2013-08-31) *
徐文福等: "非合作航天器的相对位姿测量", 《光学精密工程》, 31 July 2009 (2009-07-31) *

Cited By (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104443450B (zh) * 2014-11-03 2016-05-11 上海卫星工程研究所 微卫星导航系统地面验证系统及方法
CN104443450A (zh) * 2014-11-03 2015-03-25 上海卫星工程研究所 微卫星导航系统地面验证系统及方法
CN107534202A (zh) * 2015-05-22 2018-01-02 华为技术有限公司 一种测量天线姿态的方法和装置
CN107534202B (zh) * 2015-05-22 2019-10-01 华为技术有限公司 一种测量天线姿态的方法和装置
CN105215669A (zh) * 2015-09-17 2016-01-06 中国商用飞机有限责任公司 基于iGPS的对接测量调姿方法
CN105509733B (zh) * 2015-11-30 2018-04-06 上海宇航系统工程研究所 非合作空间圆目标的相对位姿测量方法
CN105509733A (zh) * 2015-11-30 2016-04-20 上海宇航系统工程研究所 非合作空间圆目标的相对位姿测量方法
CN107103621A (zh) * 2017-04-22 2017-08-29 许晟明 基于光场单相机的非合作航天器三维位姿测量系统
CN107449402A (zh) * 2017-07-31 2017-12-08 清华大学深圳研究生院 一种非合作目标的相对位姿的测量方法
CN107449402B (zh) * 2017-07-31 2019-11-26 清华大学深圳研究生院 一种非合作目标的相对位姿的测量方法
CN107490356A (zh) * 2017-08-21 2017-12-19 上海航天控制技术研究所 一种非合作目标旋转轴和旋转角测量方法
CN107490356B (zh) * 2017-08-21 2020-04-07 上海航天控制技术研究所 一种非合作目标旋转轴和旋转角测量方法
CN108844462A (zh) * 2018-06-05 2018-11-20 广州视源电子科技股份有限公司 一种尺寸检测方法、装置、设备和系统
CN109115184B (zh) * 2018-07-13 2021-06-22 哈尔滨工业大学(深圳) 基于非合作目标协同测量方法及系统
CN109115184A (zh) * 2018-07-13 2019-01-01 哈尔滨工业大学(深圳) 基于非合作目标协同测量方法及系统
CN110030979A (zh) * 2019-03-11 2019-07-19 北京空间飞行器总体设计部 一种基于序列图像的空间非合作目标相对位姿测量方法
CN110030979B (zh) * 2019-03-11 2020-11-20 北京空间飞行器总体设计部 一种基于序列图像的空间非合作目标相对位姿测量方法
CN110411459A (zh) * 2019-06-11 2019-11-05 中国西安卫星测控中心 一种使用图像序列的空间非合作目标自旋参数的辨识方法
CN110287873A (zh) * 2019-06-25 2019-09-27 清华大学深圳研究生院 基于深度神经网络的非合作目标位姿测量方法、系统及终端设备
CN110287873B (zh) * 2019-06-25 2021-06-29 清华大学深圳研究生院 基于深度神经网络的非合作目标位姿测量方法、系统及终端设备
CN112378383A (zh) * 2020-10-22 2021-02-19 北京航空航天大学 基于圆和线特征非合作目标相对位姿双目视觉测量方法
CN112378383B (zh) * 2020-10-22 2021-10-19 北京航空航天大学 基于圆和线特征非合作目标相对位姿双目视觉测量方法
CN112597832A (zh) * 2020-12-10 2021-04-02 上海闻泰信息技术有限公司 矩形件安装偏位判定方法和装置
CN112597832B (zh) * 2020-12-10 2022-08-16 上海闻泰信息技术有限公司 矩形件安装偏位判定方法和装置

Also Published As

Publication number Publication date
CN104048648B (zh) 2016-09-21

Similar Documents

Publication Publication Date Title
CN104048648A (zh) 大尺寸非合作目标的相对位姿测量方法
CN101839721B (zh) 自主交会对接中的视觉导航方法
Opromolla et al. A review of cooperative and uncooperative spacecraft pose determination techniques for close-proximity operations
CN111862126B (zh) 深度学习与几何算法结合的非合作目标相对位姿估计方法
CN101598556B (zh) 一种未知环境下无人机视觉/惯性组合导航方法
Kolomenkin et al. Geometric voting algorithm for star trackers
US9734398B2 (en) Method and apparatus for identifying object
He et al. Non-cooperative spacecraft pose tracking based on point cloud feature
CN103824080B (zh) 动态稀疏环境下机器人slam物体状态检测方法
CN103697855B (zh) 一种基于海天线检测的船体水平姿态测量方法
Capuano et al. Robust features extraction for on-board monocular-based spacecraft pose acquisition
CN103745458A (zh) 一种鲁棒的基于双目光流的空间目标旋转轴及质心估计方法
Oumer et al. Vision-based localization for on-orbit servicing of a partially cooperative satellite
Dumble et al. Airborne vision-aided navigation using road intersection features
Kato et al. NLOS satellite detection using a fish-eye camera for improving GNSS positioning accuracy in urban area
CN111126116A (zh) 无人船河道垃圾识别方法及系统
Bhamidipati et al. SLAM-based integrity monitoring using GPS and fish-eye camera
Liu et al. An area-based position and attitude estimation for unmanned aerial vehicle navigation
CN103697883A (zh) 一种基于天际线成像的飞行器水平姿态确定方法
Van Pham et al. Vision‐based absolute navigation for descent and landing
Turan et al. Image processing based autonomous landing zone detection for a multi-rotor drone in emergency situations
Kim et al. Fusing lidar data and aerial imagery with perspective correction for precise localization in urban canyons
Hosseini et al. Determining the location of UAVs automatically using aerial or remotely sensed high-resolution images for intelligent navigation of UAVs at the time of disconnection with GPS
Jiang et al. Icp stereo visual odometry for wheeled vehicles based on a 1dof motion prior
Yan et al. Horizontal velocity estimation via downward looking descent images for lunar landing

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CP01 Change in the name or title of a patent holder

Address after: 518055 Guangdong city of Shenzhen province Nanshan District Xili of Tsinghua

Patentee after: Tsinghua Shenzhen International Graduate School

Address before: 518055 Guangdong city of Shenzhen province Nanshan District Xili of Tsinghua

Patentee before: GRADUATE SCHOOL AT SHENZHEN, TSINGHUA University

CP01 Change in the name or title of a patent holder