CN106441238A - 一种基于红外视觉技术的机器人的定位装置及其定位导航算法 - Google Patents

一种基于红外视觉技术的机器人的定位装置及其定位导航算法 Download PDF

Info

Publication number
CN106441238A
CN106441238A CN201610381899.5A CN201610381899A CN106441238A CN 106441238 A CN106441238 A CN 106441238A CN 201610381899 A CN201610381899 A CN 201610381899A CN 106441238 A CN106441238 A CN 106441238A
Authority
CN
China
Prior art keywords
infrared
positioning
robot based
map
characteristic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610381899.5A
Other languages
English (en)
Inventor
张鑫
吴季泳
郭锐
苗靖
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
KUNSHAN TAMI ROBOT CO Ltd
Original Assignee
KUNSHAN TAMI ROBOT CO Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by KUNSHAN TAMI ROBOT CO Ltd filed Critical KUNSHAN TAMI ROBOT CO Ltd
Priority to CN201610381899.5A priority Critical patent/CN106441238A/zh
Publication of CN106441238A publication Critical patent/CN106441238A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C11/00Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
    • G01C11/02Picture taking arrangements specially adapted for photogrammetry or photographic surveying, e.g. controlling overlapping of pictures
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00

Abstract

本发明公开了一种基于红外视觉技术的机器人的定位装置及其定位导航算法,包括:红外图像采集设备,接收红外图像采集设备的信息的定位控制模块;红外图像采集设备组成有:红外信号灯,红外相机,位于红外相机上并将红外线反射的定位星标;红外相机组成有:红外镜头,设于红外镜头周围的红外发光管,设于红外发光管下方的红外摄像头电路板。本发明减少摄像头对红外线光的过度曝光,减少环境光与运动时拍照的影响;红外采集设备参数的校正可以有效降低环境光的影响,视觉处理系统的算法效率提升能有效降低运动时拍照产生的残影的影响,通过本发明提供的算法,使得导航时本体抵达目标点的现实误差缩小在可接受的范围内。

Description

一种基于红外视觉技术的机器人的定位装置及其定位导航 算法
技术领域
一种定位装置及其定位导航算法,特别是一种基于红外视觉技术的机器人的定位装置及其定位导航算法。
背景技术
红外技术定位导航为红外镜头具有热成像,照射距离远,成像画质清晰的特点,所以经常被应用于高性能的图像的分割检测识别中,然而红外镜头还有很大的缺陷,导致目前的红外技术定位导航算法受环境光、移动时的拍照残影影响较大,处理算法虽然多,但识别速度慢,识别率低,过度依靠硬件设备运算能力;现有技术还未解决这样的问题。
发明内容
为解决现有技术的不足,本发明的目的在于提供一种基于红外视觉技术的机器人的定位装置及其导航算法,受环境光、移动时的拍照残影影响小,识别速度快,识别率高。
为了实现上述目标,本发明采用如下的技术方案:
一种基于红外视觉技术的机器人的定位装置,包括:红外图像采集设备,接收红外图像采集设备的信息的定位控制模块;红外图像采集设备组成有:红外信号灯,红外相机,位于红外相机上并将红外线反射的定位星标;红外相机组成有:红外镜头,设于红外镜头周围的红外发光管,设于红外发光管下方的红外摄像头电路板。
前述的一种基于红外视觉技术的机器人的定位装置,定位控制模块组成有:收发信息于红外图像采集设备的图像采集控制模块,设置红外图像采集设备参数并对采集到的红外图像中的靶面及镜头、工作场景及镜头的光学干扰进行调整的系统初始化模块,接收系统初始化模块的数据并进行像素级识别的视觉算法处理模块。
前述的一种基于红外视觉技术的机器人的定位装置,视觉算法处理模块组成有:红外图像视觉处理模块、虚拟地图创建模块和定位导航模块。
前述的一种基于红外视觉技术的机器人的定位装置,还包括:装载红外相机的载体,连接红外相机与载体之间的连接杆。
前述的一种基于红外视觉技术的机器人的定位装置,红外发光管为20到28个,红外镜头为1个。
前述的一种基于红外视觉技术的机器人的定位装置,定位星标由基于PES基材的高亮热贴膜制作而成。
前述的一种基于红外视觉技术的机器人的定位装置,定位星标组成有:固定标记的实心圆,可选标记并组成特征区域的空心圆,特征区域使用数值化方式对星标赋予唯一性标记。
前述的一种基于红外视觉技术的机器人的定位装置,视觉算法处理模块的图像识别包括如下步骤:
步骤一,图像配准,通过匹配策略,找出原始图像中的特征点及特征区域的位置,对于非特征点作为噪点进行与之对应的降噪处理,其中包含有二值化、特征排除等一系列操作;
步骤二,建立特征模型,根据模板与图像特征点之间的对应关系,计算出数学模型中的各特征区域参数值;
步骤三,虚拟地图创建系统,根据建立的特征模型,将特征区域通过空间位置关系联系在一起,建立统一的坐标系并确立各特征区域在坐标系的空间位置关系;
步骤四,定位识别系统,根据创建的虚拟地图内各个特征区域的空间位置关系,获取本体在地图中的空间位置信息;
步骤五,导航系统,根据本体在地图中的空间位置关系与虚拟地图各个特征区域的位置关系,本体根据指令移动到指定区域,完成定位导航。
前述的一种基于红外视觉技术的机器人的定位导航算法,包括如下步骤:
步骤S1,通过红外设备获取一个特征区域信息,并初始化地图;
步骤S2,获取新的红外图像,包含有至少一个已知的特征区域信息和一个未知的特征区域信息,通过算法计算,可以将未知特征区域的空间位置信息注册进地图;
步骤S3,重复步骤S2,获取全部特征区域信息,建立地图;
步骤S4,获取新的红外图像,包含有至少一个已知的特征区域,通过算法计算,可以得到本体对于系统坐标轴原点的相对坐标和角度信息,即本体对于地图的空间位置信息;
步骤S5,通过指令,指示本体于地图中到达指定区域,完成导航。
本发明的有益之处在于:本发明提供一种基于红外视觉技术的机器人的定位装置及其导航算法,受环境光、移动时的拍照残影影响小,识别速度快,识别率高;本发明通过红外图像采集设备和定位控制模块的配合,减少摄像头对红外线光的过度曝光,减少环境光与运动时拍照的影响;红外采集设备参数的校正可以有效降低环境光的影响,视觉处理系统的算法效率提升能有效降低运动时拍照产生的残影的影响,通过本发明提供的算法,使得导航时本体抵达目标点的现实误差缩小在可接受的范围内。
附图说明
图1是本发明定位装置的一种实施例的结构示意图;
图2是本发明一种实施例的运行流程图;
图3是本发明红外相机的一种实施例的结构示意图;
图4是本发明导航系统的一种实施例的结构示意图;
图中附图标记的含义:
1 定位星标,2 红外镜头,3 红外发光管,4 电路板,5连接杆,6 载体, 7 原点,8 特征区域,9 本体位置,10 地图,11 图像坐标轴。
具体实施方式
以下结合附图和具体实施例对本发明作具体的介绍。
一种基于红外视觉技术的机器人的定位装置,包括:红外图像采集设备,接收红外图像采集设备的信息的定位控制模块;红外图像采集设备组成有:红外信号灯,红外相机,位于红外相机上并将红外线反射的定位星标1;红外相机组成有:红外镜头2,设于红外镜头2周围的红外发光管3,设于红外发光管3下方的红外摄像头电路板4。需要说明的是,定位控制模块是基于如下硬件条件实现的,操作系统:Microsoft Windows 7 Professional SP1,处理器:Intel(R) Celeron(R) CPU N3150 @ 1.60GHz,内存:4GB,硬盘驱动器型号:KINGSHARE 200064 ATA Device,硬盘驱动器型号:Kingston DataTraveler 3.0 USB Device;为了支撑红外相机,定位装置,还包括:装载红外相机的载体6,连接红外相机与载体6之间的连接杆5。如图3所示,作为一种优选,红外发光管3为20到28个,红外镜头2为1个。作为一种优选,定位星标1由基于PES基材的高亮热贴膜制作而成。定位星标1组成有:固定标记的实心圆,可选标记并组成特征区域8的空心圆,特征区域8使用数值化方式对星标赋予唯一性标记。
定位控制模块组成有:收发信息于红外图像采集设备的图像采集控制模块,设置红外图像采集设备参数并对采集到的红外图像中的靶面及镜头、工作场景及镜头的光学干扰进行调整的系统初始化模块,接收系统初始化模块的数据并进行像素级识别的视觉算法处理模块。视觉算法处理模块组成有:红外图像视觉处理模块、虚拟地图创建模块和定位导航模块。
系统初始化模块通过图像采集控制模块采集并初步处理数据,再将处理后的数据传输到视觉算法处理模块对数据进一步处理,然后进行地图创建与定位导航。系统初始化模块负责的红外图像采集设备参数的设置对采集到的红外图像中的靶面及镜头、工作场景及镜头的光学干扰进行调整,视觉算法处理模块对初始化模块处理后的数据图像进行像素级识别。需要说明的是,为了实现精确的定位和导航,需要先对红外采集设备参数的设置进行校正,对特征模板进行标定,将摄像头到目标特征区域8距离控制在一定范围之内,将机器人的移动速度控制在一定范围之内。 红外采集设备参数的校正可以有效降低环境光的影响,视觉处理系统的算法效率提升能有效降低运动时拍照产生的残影的影响,通过本发明提供的算法,可以精确的匹配特征模板与特征区域8,通过注册获取到的特征区域8,使得地图10包含有特征区域8的特征信息与空间位置信息,通过获取所在区域的特征信息,可以得到定位时准确的空间位置信息,使得导航时载体6抵达目标点的现实误差缩小在可接受的范围内。
前述的一种基于红外视觉技术的机器人的定位装置,视觉算法处理模块的图像识别包括如下步骤:
步骤一,图像配准,通过匹配策略,找出原始图像中的特征点及特征区域8的位置,对于非特征点作为噪点进行与之对应的降噪处理,其中包含有二值化、特征排除等一系列操作;
步骤二,建立特征模型,根据模板与图像特征点之间的对应关系,计算出数学模型中的各特征区域8参数值;
步骤三,虚拟地图创建系统,根据建立的特征模型,将特征区域8通过空间位置关系联系在一起,建立统一的坐标系并确立各特征区域8在坐标系的空间位置关系;
步骤四,定位识别系统,根据创建的虚拟地图内各个特征区域8的空间位置关系,获取本体在地图中的空间位置信息;
步骤五,导航系统,根据本体在地图中的空间位置关系与虚拟地图各个特征区域8的位置关系,本体根据指令移动到指定区域,完成定位导航。
如图4所示,导航系统包括系统坐标轴原点7,新获取图像特征区域8,本体位置9,地图10,新获取图像坐标轴11。
一种基于红外视觉技术的机器人的定位导航算法,包括如下步骤:
步骤S1,通过红外设备获取一个特征区域8信息,并初始化地图;
步骤S2,获取新的红外图像,包含有至少一个已知的特征区域8信息和一个未知的特征区域8信息,通过算法计算,可以将未知特征区域8的空间位置信息注册进地图;
步骤S3,重复步骤S2,获取全部特征区域8信息,建立地图;
步骤S4,获取新的红外图像,包含有至少一个已知的特征区域8,通过算法计算,可以得到本体对于系统坐标轴原点7的相对坐标和角度信息,即本体对于地图的空间位置信息;
步骤S5,通过指令,指示本体于地图中到达指定区域,完成导航。
本发明提供一种基于红外视觉技术的机器人的定位装置及其定位导航算法,受环境光、移动时的拍照残影影响小,识别速度快,识别率高;本发明通过红外图像采集设备和定位控制模块的配合,减少摄像头对红外线光的过度曝光,减少环境光与运动时拍照的影响;红外采集设备参数的校正可以有效降低环境光的影响,视觉处理系统的算法效率提升能有效降低运动时拍照产生的残影的影响,通过本发明提供的算法,使得导航时本体抵达目标点的现实误差缩小在可接受的范围内。
以上显示和描述了本发明的基本原理、主要特征和优点。本行业的技术人员应该了解,上述实施例不以任何形式限制本发明,凡采用等同替换或等效变换的方式所获得的技术方案,均落在本发明的保护范围内。

Claims (9)

1.一种基于红外视觉技术的机器人的定位装置,其特征在于,包括:红外图像采集设备,接收上述红外图像采集设备的信息的定位控制模块;上述红外图像采集设备组成有:红外信号灯,红外相机,位于上述红外相机上并将红外线反射的定位星标;上述红外相机组成有:红外镜头,设于上述红外镜头周围的红外发光管,设于上述红外发光管下方的红外摄像头电路板。
2.根据权利要求1所述的一种基于红外视觉技术的机器人的定位装置,其特征在于,上述定位控制模块组成有:收发信息于上述红外图像采集设备的图像采集控制模块,设置红外图像采集设备参数并对采集到的红外图像中的靶面及镜头、工作场景及镜头的光学干扰进行调整的系统初始化模块,接收上述系统初始化模块的数据并进行像素级识别的视觉算法处理模块。
3.根据权利要求2所述的一种基于红外视觉技术的机器人的定位装置,其特征在于,上述视觉算法处理模块组成有:红外图像视觉处理模块、虚拟地图创建模块和定位导航模块。
4.根据权利要求1所述的一种基于红外视觉技术的机器人的定位装置,其特征在于,还包括:装载上述红外相机的载体,连接上述红外相机与载体之间的连接杆。
5.根据权利要求1所述的一种基于红外视觉技术的机器人的定位装置,其特征在于,上述红外发光管为20到28个,上述红外镜头为1个。
6.根据权利要求1所述的一种基于红外视觉技术的机器人的定位装置,其特征在于,上述定位星标由基于PES基材的高亮热贴膜制作而成。
7.根据权利要求1所述的一种基于红外视觉技术的机器人的定位装置,其特征在于,上述定位星标组成有:固定标记的实心圆,可选标记并组成特征区域的空心圆,上述特征区域使用数值化方式对星标赋予唯一性标记。
8.根据权利要求2所述的一种基于红外视觉技术的机器人的定位装置,其特征在于,上述视觉算法处理模块的图像识别包括如下步骤:
步骤一,图像配准,通过匹配策略,找出原始图像中的特征点及特征区域的位置,对于非特征点作为噪点进行与之对应的降噪处理,其中包含有二值化、特征排除等一系列操作;
步骤二,建立特征模型,根据模板与图像特征点之间的对应关系,计算出数学模型中的各特征区域参数值;
步骤三,虚拟地图创建系统,根据建立的特征模型,将特征区域通过空间位置关系联系在一起,建立统一的坐标系并确立各特征区域在坐标系的空间位置关系;
步骤四,定位识别系统,根据创建的虚拟地图内各个特征区域的空间位置关系,获取本体在地图中的空间位置信息;
步骤五,导航系统,根据本体在地图中的空间位置关系与虚拟地图各个特征区域的位置关系,本体根据指令移动到指定区域,完成定位导航。
9.根据权利要求8所述的一种基于红外视觉技术的机器人的定位导航算法,其特征在于,包括如下步骤:
步骤S1,通过红外设备获取一个特征区域信息,并初始化地图;
步骤S2,获取新的红外图像,包含有至少一个已知的特征区域信息和一个未知的特征区域信息,通过算法计算,可以将未知特征区域的空间位置信息注册进地图;
步骤S3,重复步骤S2,获取全部特征区域信息,建立地图;
步骤S4,获取新的红外图像,包含有至少一个已知的特征区域,通过算法计算,可以得到本体对于系统坐标轴原点的相对坐标和角度信息,即本体对于地图的空间位置信息;
步骤S5,通过指令,指示本体于地图中到达指定区域,完成导航。
CN201610381899.5A 2016-06-01 2016-06-01 一种基于红外视觉技术的机器人的定位装置及其定位导航算法 Pending CN106441238A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610381899.5A CN106441238A (zh) 2016-06-01 2016-06-01 一种基于红外视觉技术的机器人的定位装置及其定位导航算法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610381899.5A CN106441238A (zh) 2016-06-01 2016-06-01 一种基于红外视觉技术的机器人的定位装置及其定位导航算法

Publications (1)

Publication Number Publication Date
CN106441238A true CN106441238A (zh) 2017-02-22

Family

ID=58183148

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610381899.5A Pending CN106441238A (zh) 2016-06-01 2016-06-01 一种基于红外视觉技术的机器人的定位装置及其定位导航算法

Country Status (1)

Country Link
CN (1) CN106441238A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107797560A (zh) * 2017-11-28 2018-03-13 广州中国科学院先进技术研究所 一种用于机器人跟踪的视觉识别系统及方法
CN112631311A (zh) * 2021-03-05 2021-04-09 上海擎朗智能科技有限公司 移动机器人的定位方法、装置、移动机器人和存储介质
CN113486878A (zh) * 2021-07-08 2021-10-08 南通科技职业学院 一种图形化交互式机器视觉系统
CN113879921A (zh) * 2021-10-13 2022-01-04 昆山塔米机器人有限公司 一种机器人进入电梯的控制方法及装置

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN202255404U (zh) * 2011-08-24 2012-05-30 国营红林机械厂 一种室内移动机器人双目视觉导航系统
US20120224063A1 (en) * 2007-11-28 2012-09-06 Flir Systems, Inc. Infrared camera systems and methods
CN103442183A (zh) * 2013-09-11 2013-12-11 电子科技大学 基于红外热成像原理的自动视觉导航方法
CN105115498A (zh) * 2015-09-30 2015-12-02 长沙开山斧智能科技有限公司 一种机器人定位导航系统及其导航方法
WO2015180021A1 (zh) * 2014-05-26 2015-12-03 中国科学院自动化研究所 剪枝机器人系统
CN105258702A (zh) * 2015-10-06 2016-01-20 深圳力子机器人有限公司 一种基于slam导航移动机器人的全局定位方法
CN105352508A (zh) * 2015-10-22 2016-02-24 深圳创想未来机器人有限公司 机器人定位导航方法及装置
CN205219101U (zh) * 2015-10-27 2016-05-11 众德迪克科技(北京)有限公司 一种家庭服务机器人

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120224063A1 (en) * 2007-11-28 2012-09-06 Flir Systems, Inc. Infrared camera systems and methods
CN202255404U (zh) * 2011-08-24 2012-05-30 国营红林机械厂 一种室内移动机器人双目视觉导航系统
CN103442183A (zh) * 2013-09-11 2013-12-11 电子科技大学 基于红外热成像原理的自动视觉导航方法
WO2015180021A1 (zh) * 2014-05-26 2015-12-03 中国科学院自动化研究所 剪枝机器人系统
CN105115498A (zh) * 2015-09-30 2015-12-02 长沙开山斧智能科技有限公司 一种机器人定位导航系统及其导航方法
CN105258702A (zh) * 2015-10-06 2016-01-20 深圳力子机器人有限公司 一种基于slam导航移动机器人的全局定位方法
CN105352508A (zh) * 2015-10-22 2016-02-24 深圳创想未来机器人有限公司 机器人定位导航方法及装置
CN205219101U (zh) * 2015-10-27 2016-05-11 众德迪克科技(北京)有限公司 一种家庭服务机器人

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
查峰: "未知环境下自主移动机器人定位与导航方法研究", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107797560A (zh) * 2017-11-28 2018-03-13 广州中国科学院先进技术研究所 一种用于机器人跟踪的视觉识别系统及方法
CN107797560B (zh) * 2017-11-28 2023-06-20 深圳市中科德睿智能科技有限公司 一种用于机器人跟踪的视觉识别系统及方法
CN112631311A (zh) * 2021-03-05 2021-04-09 上海擎朗智能科技有限公司 移动机器人的定位方法、装置、移动机器人和存储介质
CN113486878A (zh) * 2021-07-08 2021-10-08 南通科技职业学院 一种图形化交互式机器视觉系统
CN113486878B (zh) * 2021-07-08 2023-09-26 南通科技职业学院 一种图形化交互式机器视觉系统
CN113879921A (zh) * 2021-10-13 2022-01-04 昆山塔米机器人有限公司 一种机器人进入电梯的控制方法及装置
CN113879921B (zh) * 2021-10-13 2023-10-10 苏州塔米机器人有限公司 一种机器人进入电梯的控制方法及装置

Similar Documents

Publication Publication Date Title
WO2021138990A1 (zh) 一种棋盘格亚像素级角点自适应检测的方法
CN106197265B (zh) 一种空间自由飞行模拟器视觉精密定位方法
JP5043133B2 (ja) 移動ロボットの位置認識用ランドマーク、並びにこれを利用した位置認識装置及び方法
CN110163912B (zh) 二维码位姿标定方法、装置及系统
CN109387186B (zh) 测绘信息获取方法、装置、电子设备及存储介质
CN107471218B (zh) 一种基于多目视觉的双臂机器人手眼协调方法
CN104125372B (zh) 一种目标光电搜索探测方法
CN106441238A (zh) 一种基于红外视觉技术的机器人的定位装置及其定位导航算法
CN110400315A (zh) 一种缺陷检测方法、装置及系统
CN110497187A (zh) 基于视觉引导的太阳花模组装配系统
CN109739239B (zh) 一种用于巡检机器人的不间断仪表识别的规划方法
CN106971408B (zh) 一种基于时空转换思想的摄像机标定方法
CN107797560B (zh) 一种用于机器人跟踪的视觉识别系统及方法
CN105635551A (zh) 一种球型摄像机生成全景图像的方法及球型摄像机
CN112465960B (zh) 一种三维模型的尺寸标定装置及方法
CN105352975A (zh) 一种桥梁缆索外观检测方法
CN111123962A (zh) 一种用于电力杆塔巡检的旋翼无人机重定位拍照方法
CN113240615B (zh) 图像处理方法、装置、电子设备和计算机可读存储介质
CN111461963A (zh) 一种鱼眼图像拼接方法及装置
CN115205286B (zh) 爬塔机器人机械臂螺栓识别与定位方法、存储介质、终端
CN107092905A (zh) 一种电力巡检机器人的待识别仪器定位方法
CN115578315A (zh) 一种基于无人机图像的桥梁应变近景摄影测量方法
CN110111364A (zh) 运动检测方法、装置、电子设备及存储介质
CN112257536B (zh) 一种空间与物体三维信息采集匹配设备及方法
Sarwade et al. Line following robot using image processing

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20170222

RJ01 Rejection of invention patent application after publication