CN110084842A - 一种机器人云台伺服二次对准方法及装置 - Google Patents

一种机器人云台伺服二次对准方法及装置 Download PDF

Info

Publication number
CN110084842A
CN110084842A CN201910369055.2A CN201910369055A CN110084842A CN 110084842 A CN110084842 A CN 110084842A CN 201910369055 A CN201910369055 A CN 201910369055A CN 110084842 A CN110084842 A CN 110084842A
Authority
CN
China
Prior art keywords
point
characteristic point
reference picture
realtime graphic
secondary alignment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910369055.2A
Other languages
English (en)
Other versions
CN110084842B (zh
Inventor
刘晶
黄炎
王柯
吴昊
麦晓明
李文胜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Power Grid Co Ltd
Electric Power Research Institute of Guangdong Power Grid Co Ltd
Original Assignee
Guangdong Power Grid Co Ltd
Electric Power Research Institute of Guangdong Power Grid Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Power Grid Co Ltd, Electric Power Research Institute of Guangdong Power Grid Co Ltd filed Critical Guangdong Power Grid Co Ltd
Priority to CN201910369055.2A priority Critical patent/CN110084842B/zh
Publication of CN110084842A publication Critical patent/CN110084842A/zh
Application granted granted Critical
Publication of CN110084842B publication Critical patent/CN110084842B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/22—Matching criteria, e.g. proximity measures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/33—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/30—Noise filtering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/75—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
    • G06V10/757—Matching configurations of points or features

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Evolutionary Computation (AREA)
  • Data Mining & Analysis (AREA)
  • Artificial Intelligence (AREA)
  • Multimedia (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Databases & Information Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Software Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • General Engineering & Computer Science (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)
  • Manipulator (AREA)

Abstract

本申请公开了一种机器人云台伺服二次对准方法及装置，本申请通过单应矩阵图像投影方式，从SIFT特征匹配得到的多组配对特征点中提取出预置对数的配对特征点，并由提取出的配对特征点建立单应矩阵，通过单应矩阵进行坐标值的投影进而计算实时图像与参考图像的平移像素偏差，解决了现有的变电站巡检机器人通常采用特征点匹配的方式进行二次对准时，需要根据每一对配对特征点的平移像素偏差求出平均像素偏差，再根据平均像素偏差进行二次对准，导致的变电站设备巡检机器人二次对准方法计算量大，对准效率慢的技术问题。

Description

一种机器人云台伺服二次对准方法及装置
技术领域
本申请涉及自动化控制领域，尤其涉及一种机器人云台伺服二次对准方法及装置。
背景技术
变电站设备巡检机器人是基于自主导航、精确定位、自动充电的室外全天候移动平台，集成可见光、红外、声音等传感器；基于磁轨迹和路面特殊布置的RFID标签，实现巡检机器人的最优路径规划和双向行走，将被检测设备的视频、声音和红外测温数据通过无线网络传输到监控室；巡检后台系统通过对待检设备的图像处理和模式识别等技术，结合设备图像红外专家库，实现对设备热缺陷、分合状态、外观异常的判别，以及仪表读数、油位计位置的识别的智能化巡检设备。
现有的变电站巡检机器人通常采用特征点匹配的方式进行二次对准时，需要根据每一对配对特征点的平移像素偏差求出平均像素偏差，再根据平均像素偏差进行二次对准，导致的变电站设备巡检机器人二次对准方法计算量大，对准效率慢的技术问题。
发明内容
本申请提供了一种机器人云台伺服二次对准方法及装置，用于解决现有的变电站设备巡检机器人二次对准方法计算量大，对准效率慢的技术问题。
有鉴于此，本申请提供了一种机器人云台伺服二次对准方法，包括：
当检测到机器人移动至预置位时，采集待巡检目标的实时图像；
通过SIFT特征相似度匹配方式，对所述实时图像的特征点与预置的参考图像的特征点进行匹配，并提取出所述实时图像与所述参考图像中的成对匹配的配对特征点；
筛选出预置对数的所述配对特征点，并根据筛选出的所述配对特征点建立单应矩阵，并根据所述实时图像的中心点坐标，通过单应矩阵坐标映射公式，计算出所述中心特征点在所述参考图像中的映射坐标；
根据所述参考图像的中心点坐标与所述映射坐标的差值，得到平移像素偏差，并根据所述平移像素偏差，驱动所述机器人进行位置修正。
优选地，所述单应矩阵坐标映射公式为：
式中，k为归一化算子，为单应矩阵，[x′y′]为所述实时图像投影至所述参考图像上的映射坐标，[x y]为所述实时图像的中心点坐标。
优选地，所述筛选出预置对数的所述配对特征点之前还包括：
通过RANSAC算法，对所有所述配对特征点进行去噪及无效点筛查处理。
优选地，所述当检测到机器人移动至预置位时，采集待巡检目标的实时图像之前还包括：
获取所述机器人在各个预置位处采集的图像数据，并将获取到的各个图像数据设为各个所述预置位对应的参考图像并保存。
本申请还提供了一种机器人云台伺服二次对准装置，包括：
实时图像采集单元，用于当检测到机器人移动至预置位时，采集待巡检目标的实时图像；
特征点匹配单元，用于通过SIFT特征相似度匹配方式，对所述实时图像的特征点与预置的参考图像的特征点进行匹配，并提取出所述实时图像与所述参考图像中的成对匹配的配对特征点；
特征映射单元，用于筛选出预置对数的所述配对特征点，并根据筛选出的所述配对特征点建立单应矩阵，并根据所述实时图像的中心点坐标，通过单应矩阵坐标映射公式，计算出所述中心特征点在所述参考图像中的映射坐标；
偏差修正单元，用于根据所述参考图像的中心点坐标与所述映射坐标的差值，得到平移像素偏差，并根据所述平移像素偏差，驱动所述机器人进行位置修正。
优选地，所述单应矩阵坐标映射公式为：
式中，k是归一化算子，为单应矩阵，[x′ y′]为所述实时图像投影至所述参考图像上的映射坐标，[x y]为所述实时图像的中心点坐标。
优选地，还包括：
特征点预处理单元，用于通过RANSAC算法，对所有所述配对特征点进行去噪及无效点筛查处理。
优选地，还包括：
参考图像获取单元，用于获取所述机器人在各个预置位处采集的图像数据，并将获取到的各个图像数据设为各个所述预置位对应的参考图像并保存。
从以上技术方案可以看出，本申请具有以下优点：
本申请提供了一种机器人云台伺服二次对准方法，包括：
当检测到机器人移动至预置位时，采集待巡检目标的实时图像；
通过特征相似度匹配方式，对所述实时图像的特征点与预置的参考图像的特征点进行匹配，并提取出所述实时图像与所述参考图像中的成对匹配的配对特征点；
筛选出预置对数的所述配对特征点，并根据筛选出的所述配对特征点建立单应矩阵，并根据所述实时图像的中心点坐标，通过单应矩阵坐标映射公式，计算出所述中心特征点在所述参考图像中的映射坐标；
根据所述参考图像的中心点坐标与所述映射坐标的差值，得到平移像素偏差，并根据所述平移像素偏差，驱动所述机器人进行位置修正。
本申请通过单应矩阵图像投影方式，从SIFT特征匹配得到的多组配对特征点中提取出预置对数的配对特征点，并由提取出的配对特征点建立单应矩阵，通过单应矩阵进行坐标值的投影进而计算实时图像与参考图像的平移像素偏差，解决了现有的变电站巡检机器人通常采用特征点匹配的方式进行二次对准时，需要根据每一对配对特征点的平移像素偏差求出平均像素偏差，再根据平均像素偏差进行二次对准，导致的变电站设备巡检机器人二次对准方法计算量大，对准效率慢的技术问题。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其它的附图。
图1为本申请提供的一种机器人云台伺服二次对准方法的第一个实施例的流程图；
图2为本申请提供的一种机器人云台伺服二次对准方法的第二个实施例的流程图；
图3为本申请提供的一种机器人云台伺服二次对准装置的第一个实施例的结构图。
具体实施方式
本申请实施例提供了一种机器人云台伺服二次对准方法及装置，用于解决现有的变电站设备巡检机器人二次对准方法计算量大，对准效率慢的技术问题。
为使得本申请的发明目的、特征、优点能够更加的明显和易懂，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，下面所描述的实施例仅仅是本申请一部分实施例，而非全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本申请保护的范围。
请参阅图1，本申请实施例提供了一种机器人云台伺服二次对准方法，包括：
101、当检测到机器人移动至预置位时，采集待巡检目标的实时图像；
需要说明的是，在启动机器人巡检时，实时定位巡检机器人的位置信息，当检测到机器人移动至预置位时，使巡检机器人通过摄像设备采集带巡检目标的实时图像。
102、通过SIFT特征相似度匹配方式，对实时图像的特征点与预置的参考图像的特征点进行匹配，并提取出实时图像与参考图像中的成对匹配的配对特征点；
需要说明的是，在获取到实时图像后，通过SIFT特征相似度匹配方式，对实时图像的特征点与预置的参考图像的特征点进行匹配，并提取出实时图像与参考图像中的成对匹配的配对特征点。
103、筛选出预置对数的配对特征点，并根据筛选出的配对特征点建立单应矩阵，并根据实时图像的中心点坐标，通过单应矩阵坐标映射公式，计算出中心特征点在参考图像中的映射坐标；
需要说明的是，根据步骤102中提取出的配对特征点中筛选出预置对数的配对特征点，并利用筛选出来的配对特征点建立单应矩阵，并根据实时图像的中心点坐标，通过单应矩阵坐标映射公式，计算出中心特征点在参考图像中的映射坐标。
104、根据参考图像的中心点坐标与映射坐标的差值，得到平移像素偏差，并根据平移像素偏差，驱动机器人进行位置修正。
需要说明的是，在计算得到中心特征点在参考图像中的映射坐标后，根据参考图像的中心点坐标与映射坐标的差值，得到平移像素偏差，并根据平移像素偏差，驱动机器人进行位置修正。
本申请通过单应矩阵图像投影方式，从SIFT特征匹配得到的多组配对特征点中提取出预置对数的配对特征点，并由提取出的配对特征点建立单应矩阵，通过单应矩阵进行坐标值的投影进而计算实时图像与参考图像的平移像素偏差，解决了现有的变电站巡检机器人通常采用特征点匹配的方式进行二次对准时，需要根据每一对配对特征点的平移像素偏差求出平均像素偏差，再根据平均像素偏差进行二次对准，导致的变电站设备巡检机器人二次对准方法计算量大，对准效率慢的技术问题。
以上为本申请提供的一种机器人云台伺服二次对准方法的第一个实施例的详细说明，下面为本申请提供的一种机器人云台伺服二次对准方法的第二个实施例的详细说明。
请参阅图2，本申请实施例提供了一种机器人云台伺服二次对准方法，包括：
201、获取机器人在各个预置位处采集的图像数据，并将获取到的各个图像数据设为各个预置位对应的参考图像并保存。
需要说明的是，在实施本实施例的二次对准方法前，需要先设置用作特征匹配的参考图像，具体做法为：获取机器人在各个预置位处采集的图像数据，将获取到的各个图像数据设为各个预置位对应的参考图像并保存在机器人内置的存储介质中。
202、当检测到机器人移动至预置位时，采集待巡检目标的实时图像。
需要说明的是，在正式使用机器人巡检时，实时定位巡检机器人的位置信息，当检测到机器人移动至预置位时，使巡检机器人通过摄像设备采集带巡检目标的实时图像。
203、通过SIFT特征相似度匹配方式，对实时图像的特征点与预置的参考图像的特征点进行匹配，并提取出实时图像与参考图像中的成对匹配的配对特征点。
需要说明的是，在获取到实时图像后，通过SIFT特征相似度匹配方式，对实时图像的特征点与预置的参考图像的特征点进行匹配，并提取出实时图像与参考图像中的成对匹配的配对特征点。
具体过程包括，根据其特征向量的相似程度进行匹配，设E和E'分别是实时图像和参考图像的SIFT特征集合，特征点d∈E'，d'∈E，d”∈E，如果|d-d'|/|d-d”|＜α，则认为d与d'是一对匹配点。
其中，α为匹配阈值，d'是d的最邻近点，d”是d的次邻近点。
借助SIFT特征提取算法抗干扰能力，能适应变电站一般室外光照和复杂背景环境，提取出质量较高的配对特征点。
204、通过RANSAC算法，对所有配对特征点进行去噪及无效点筛查处理。
需要说明的是，由于通过SIFT特征提取出配对特征点往往含有较大的噪声或者无效点，为了提高精度，本实施例通过RANSAC算法对SIFT特征匹配后得到的配对特征点进行预处理。
205、筛选出预置对数的配对特征点，并根据筛选出的配对特征点建立单应矩阵，并根据实时图像的中心点坐标，通过单应矩阵坐标映射公式，计算出中心特征点在参考图像中的映射坐标。
需要说明的是，在对配对特征点进行预处理，排除了信号噪声和无效点后，从剩余的配对特征点中筛选出预置对数的配对特征点，并根据筛选出的配对特征点建立单应矩阵，本实施例的中的预置对数具体为至少四对匹配特征，因为要解出单应矩阵，一般需要至少四组匹配特征点。
接着，根据实时图像的中心点坐标，通过单应矩阵坐标映射公式，计算出中心特征点在参考图像中的映射坐标。
其中，本实施例的单应矩阵坐标映射公式为：
式中，k为归一化算子，为单应矩阵，[x′ y′]为实时图像投影至参考图像上的映射坐标，[x y]为实时图像的中心点坐标。
206、根据参考图像的中心点坐标与映射坐标的差值，得到平移像素偏差，并根据平移像素偏差，驱动机器人进行位置修正。
需要说明的是，最后根据参考图像的中心点坐标与映射坐标，计算平移分量恢复像素偏差[dx dy]，设参考图片的中心点坐标为[x0 y0]，则，dx＝x'-x0，dy＝y'-y0。
另外，本实施例还提供了像素偏移量换算为云台转动控制参数的方法，具体包括：
检测目标点在图像特征空间中的2维向量(映射坐标到参考图像的中心点坐标)表示为f＝[fx,fy]T，fx和fy分别根据dx和dy取值，云台中可见光摄像头在笛卡尔坐标系(以云台中的摄像设备为原点)中位置的2维向量表示为r＝[rx,ry]T，操作云台控制器改变云台可见光摄像头位置，导致图像参数的变化，通过摄像机透视投影映射关系，可以获得图像特征空间与云台可见光摄像头位置的变换关系—雅克比矩阵Jr，可得为了判断云台x轴和y轴的耦合特性，单独沿x轴方向旋转云台，通过拍摄图片y轴的像素偏差进行判定值。同理，单独沿y轴方向旋转云台，通过拍摄图片x轴的像素偏差进行判定值。
最后，根据公式和得到机器人位置修正量[Δrx,Δry]，其中，Δfx为fx的距离标量，Δfy为fy的距离标量。
本申请通过单应矩阵图像投影方式，从SIFT特征匹配得到的多组配对特征点中提取出预置对数的配对特征点，并由提取出的配对特征点建立单应矩阵，通过单应矩阵进行坐标值的投影进而计算实时图像与参考图像的平移像素偏差，解决了现有的变电站巡检机器人通常采用特征点匹配的方式进行二次对准时，需要根据每一对配对特征点的平移像素偏差求出平均像素偏差，再根据平均像素偏差进行二次对准，导致的变电站设备巡检机器人二次对准方法计算量大，对准效率慢的技术问题。
以上为本申请提供的一种机器人云台伺服二次对准方法的第一个实施例的详细说明，下面为本申请提供的一种机器人云台伺服二次对准方法的第二个实施例的详细说明。
本申请还提供了一种机器人云台伺服二次对准装置，包括：
实时图像采集单元301，用于当检测到机器人移动至预置位时，采集待巡检目标的实时图像；
特征点匹配单元302，用于通过SIFT特征相似度匹配方式，对实时图像的特征点与预置的参考图像的特征点进行匹配，并提取出实时图像与参考图像中的成对匹配的配对特征点；
特征映射单元303，用于筛选出预置对数的配对特征点，并根据筛选出的配对特征点建立单应矩阵，并根据实时图像的中心点坐标，通过单应矩阵坐标映射公式，计算出中心特征点在参考图像中的映射坐标；
偏差修正单元304，用于根据参考图像的中心点坐标与映射坐标的差值，得到平移像素偏差，并根据平移像素偏差，驱动机器人进行位置修正。
进一步地，还包括：
特征点预处理单元305，用于通过RANSAC算法，对所有配对特征点进行去噪及无效点筛查处理。
进一步地，还包括：
参考图像获取单元306，用于获取机器人在各个预置位处采集的图像数据，并将获取到的各个图像数据设为各个所述预置位对应的参考图像并保存。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
本申请的说明书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例例如能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，以上实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (8)

1.一种机器人云台伺服二次对准方法，其特征在于，包括：
当检测到机器人移动至预置位时，采集待巡检目标的实时图像；
通过SIFT特征相似度匹配方式，对所述实时图像的特征点与预置的参考图像的特征点进行匹配，并提取出所述实时图像与所述参考图像中的成对匹配的配对特征点；
筛选出预置对数的所述配对特征点，并根据筛选出的所述配对特征点建立单应矩阵，并根据所述实时图像的中心点坐标，通过单应矩阵坐标映射公式，计算出所述中心特征点在所述参考图像中的映射坐标；
根据所述参考图像的中心点坐标与所述映射坐标的差值，得到平移像素偏差，并根据所述平移像素偏差，驱动所述机器人进行位置修正。
2.根据权利要求1所述的一种机器人云台伺服二次对准方法，其特征在于，所述单应矩阵坐标映射公式为：
式中，k是归一化算子，为单应矩阵，[x′ y′]为所述实时图像投影至所述参考图像上的映射坐标，[x y]为所述实时图像的中心点坐标。
3.根据权利要求2所述的一种机器人云台伺服二次对准方法，其特征在于，所述筛选出预置对数的所述配对特征点之前还包括：
通过RANSAC算法，对所有所述配对特征点进行去噪及无效点筛查处理。
4.根据权利要求3所述的一种机器人云台伺服二次对准方法，其特征在于，所述当检测到机器人移动至预置位时，采集待巡检目标的实时图像之前还包括：
获取所述机器人在各个预置位处采集的图像数据，并将获取到的各个图像数据设为各个所述预置位对应的参考图像并保存。
5.一种机器人云台伺服二次对准装置，其特征在于，包括：
实时图像采集单元，用于当检测到机器人移动至预置位时，采集待巡检目标的实时图像；
特征点匹配单元，用于通过SIFT特征相似度匹配方式，对所述实时图像的特征点与预置的参考图像的特征点进行匹配，并提取出所述实时图像与所述参考图像中的成对匹配的配对特征点；
特征映射单元，用于筛选出预置对数的所述配对特征点，并根据筛选出的所述配对特征点建立单应矩阵，并根据所述实时图像的中心点坐标，通过单应矩阵坐标映射公式，计算出所述中心特征点在所述参考图像中的映射坐标；
偏差修正单元，用于根据所述参考图像的中心点坐标与所述映射坐标的差值，得到平移像素偏差，并根据所述平移像素偏差，驱动所述机器人进行位置修正。
6.根据权利要求5所述的一种机器人云台伺服二次对准装置，其特征在于，所述单应矩阵坐标映射公式为：
式中，k为归一化算子，为单应矩阵，[x′ y′]为所述实时图像投影至所述参考图像上的映射坐标，[x y]为所述实时图像的中心点坐标。
7.根据权利要求6所述的一种机器人云台伺服二次对准装置，其特征在于，还包括：
特征点预处理单元，用于通过RANSAC算法，对所有所述配对特征点进行去噪及无效点筛查处理。
8.根据权利要求7所述的一种机器人云台伺服二次对准装置，其特征在于，还包括：
参考图像获取单元，用于获取所述机器人在各个预置位处采集的图像数据，并将获取到的各个图像数据设为各个所述预置位对应的参考图像并保存。
CN201910369055.2A 2019-05-05 2019-05-05 一种机器人云台伺服二次对准方法及装置 Active CN110084842B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910369055.2A CN110084842B (zh) 2019-05-05 2019-05-05 一种机器人云台伺服二次对准方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910369055.2A CN110084842B (zh) 2019-05-05 2019-05-05 一种机器人云台伺服二次对准方法及装置

Publications (2)

Publication Number Publication Date
CN110084842A true CN110084842A (zh) 2019-08-02
CN110084842B CN110084842B (zh) 2024-01-26

Family

ID=67418611

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910369055.2A Active CN110084842B (zh) 2019-05-05 2019-05-05 一种机器人云台伺服二次对准方法及装置

Country Status (1)

Country Link
CN (1) CN110084842B (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111800576A (zh) * 2020-07-01 2020-10-20 河北中创广电科技有限公司 一种快速定位云台摄像机拍摄画面的方法及装置
CN111931832A (zh) * 2020-07-30 2020-11-13 国网智能科技股份有限公司 一种变电站巡检设备最优数据采集方法及系统
CN111932609A (zh) * 2020-07-08 2020-11-13 广州科易光电技术有限公司 阀厅设备巡检机器人的云台校准方法及装置、存储介质
CN112561986A (zh) * 2020-12-02 2021-03-26 南方电网电力科技股份有限公司 巡检机器人云台的二次对准方法、装置、设备和存储介质
CN113209610A (zh) * 2021-03-16 2021-08-06 腾讯科技（深圳）有限公司 虚拟场景画面展示方法、装置、计算机设备及存储介质
CN113538283A (zh) * 2021-07-22 2021-10-22 浙江赫千电子科技有限公司 一种冗余鱼眼摄像头拍摄图像的畸变矫正方法
CN113727003A (zh) * 2021-08-31 2021-11-30 浙江大华技术股份有限公司 云台位置自检方法及装置、存储介质、电子装置

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101957325A (zh) * 2010-10-14 2011-01-26 山东鲁能智能技术有限公司 基于变电站巡检机器人变电站设备外观异常识别方法
CN101998136A (zh) * 2009-08-18 2011-03-30 华为技术有限公司 单应矩阵的获取方法、摄像设备的标定方法及装置
CN102929288A (zh) * 2012-08-23 2013-02-13 山东电力集团公司电力科学研究院 基于视觉伺服的输电线路无人机巡检云台控制方法
CN103440663A (zh) * 2013-09-05 2013-12-11 黑龙江科技大学 数字成像系统中标定板上圆形标志点成像偏差的补偿方法
CN106125744A (zh) * 2016-06-22 2016-11-16 山东鲁能智能技术有限公司 基于视觉伺服的变电站巡检机器人云台控制方法
US20180116556A1 (en) * 2016-10-27 2018-05-03 Nanjing Avatarmind Robot Technology Co., Ltd. Height measurement method based on monocular machine vision
CN109129488A (zh) * 2018-09-27 2019-01-04 广东电网有限责任公司 一种基于近地全局视觉的高空检修机器人定位方法及装置
CN109711400A (zh) * 2018-11-06 2019-05-03 华中科技大学 一种识别模拟指针式仪表读数的电力巡检方法和装置

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101998136A (zh) * 2009-08-18 2011-03-30 华为技术有限公司 单应矩阵的获取方法、摄像设备的标定方法及装置
CN101957325A (zh) * 2010-10-14 2011-01-26 山东鲁能智能技术有限公司 基于变电站巡检机器人变电站设备外观异常识别方法
CN102929288A (zh) * 2012-08-23 2013-02-13 山东电力集团公司电力科学研究院 基于视觉伺服的输电线路无人机巡检云台控制方法
CN103440663A (zh) * 2013-09-05 2013-12-11 黑龙江科技大学 数字成像系统中标定板上圆形标志点成像偏差的补偿方法
CN106125744A (zh) * 2016-06-22 2016-11-16 山东鲁能智能技术有限公司 基于视觉伺服的变电站巡检机器人云台控制方法
US20180116556A1 (en) * 2016-10-27 2018-05-03 Nanjing Avatarmind Robot Technology Co., Ltd. Height measurement method based on monocular machine vision
CN109129488A (zh) * 2018-09-27 2019-01-04 广东电网有限责任公司 一种基于近地全局视觉的高空检修机器人定位方法及装置
CN109711400A (zh) * 2018-11-06 2019-05-03 华中科技大学 一种识别模拟指针式仪表读数的电力巡检方法和装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
孙艳鹤等: "一种适用于阀厅巡检机器人的图像特征匹配算法", 《自动化技术与应用》 *

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111800576A (zh) * 2020-07-01 2020-10-20 河北中创广电科技有限公司 一种快速定位云台摄像机拍摄画面的方法及装置
CN111932609A (zh) * 2020-07-08 2020-11-13 广州科易光电技术有限公司 阀厅设备巡检机器人的云台校准方法及装置、存储介质
CN111931832A (zh) * 2020-07-30 2020-11-13 国网智能科技股份有限公司 一种变电站巡检设备最优数据采集方法及系统
CN111931832B (zh) * 2020-07-30 2024-05-21 国网智能科技股份有限公司 一种变电站巡检设备最优数据采集方法及系统
CN112561986A (zh) * 2020-12-02 2021-03-26 南方电网电力科技股份有限公司 巡检机器人云台的二次对准方法、装置、设备和存储介质
CN113209610A (zh) * 2021-03-16 2021-08-06 腾讯科技（深圳）有限公司 虚拟场景画面展示方法、装置、计算机设备及存储介质
CN113209610B (zh) * 2021-03-16 2022-11-25 腾讯科技（深圳）有限公司 虚拟场景画面展示方法、装置、计算机设备及存储介质
CN113538283A (zh) * 2021-07-22 2021-10-22 浙江赫千电子科技有限公司 一种冗余鱼眼摄像头拍摄图像的畸变矫正方法
CN113538283B (zh) * 2021-07-22 2024-04-30 浙江赫千电子科技有限公司 一种冗余鱼眼摄像头拍摄图像的畸变矫正方法
CN113727003A (zh) * 2021-08-31 2021-11-30 浙江大华技术股份有限公司 云台位置自检方法及装置、存储介质、电子装置
CN113727003B (zh) * 2021-08-31 2023-08-01 浙江大华技术股份有限公司 云台位置自检方法及装置、存储介质、电子装置

Also Published As

Publication number Publication date
CN110084842B (zh) 2024-01-26

Similar Documents

Publication Publication Date Title
CN110084842A (zh) 一种机器人云台伺服二次对准方法及装置
CN109357630B (zh) 一种多类型工件批量视觉测量系统及方法
CN112418103B (zh) 一种基于动态双目视觉的桥式起重机吊装安全防撞系统及方法
CN110142785A (zh) 一种基于目标检测的巡检机器人视觉伺服方法
CN102640185B (zh) 图像序列中对象实时表示的混合跟踪的方法和设备
CN103279765B (zh) 基于图像匹配的钢丝绳表面损伤检测方法
CN109949361A (zh) 一种基于单目视觉定位的旋翼无人机姿态估计方法
Rothganger et al. Segmenting, modeling, and matching video clips containing multiple moving objects
CN105335973B (zh) 运用于带钢加工生产线的视觉处理方法
CN108007388A (zh) 一种基于机器视觉的转盘角度高精度在线测量方法
CN109752855A (zh) 一种光斑发射装置和检测几何光斑的方法
CN111950440B (zh) 一种识别与定位门的方法、装置及存储介质
JP2010256253A (ja) 三次元計測用画像撮影装置及びその方法
CN110910460A (zh) 一种获取位置信息的方法、装置及标定设备
CN112752028A (zh) 移动平台的位姿确定方法、装置、设备和存储介质
CN115035162A (zh) 基于视觉slam的监控视频人员定位跟踪方法及系统
CN113701750A (zh) 一种井下多传感器的融合定位系统
CN114299153B (zh) 一种超大电力设备的相机阵列同步标定方法及系统
CN111462310A (zh) 一种基于多视几何的螺栓缺陷空间定位方法
CN114937233A (zh) 一种基于多光谱数据深度学习的识别方法和识别装置
Collins et al. Site model acquisition and extension from aerial images
CN109636856A (zh) 基于hog特征融合算子的物体六维度位姿信息联合测量方法
JP2004354320A (ja) 撮像対象物品の認識検定システム
CN105631431A (zh) 一种可见光目标轮廓模型指导的飞机感兴趣区测谱方法
Yang et al. Method for building recognition from FLIR images

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant