CN106774324A - 一种双摄像头三维识别巡逻机器人 - Google Patents
一种双摄像头三维识别巡逻机器人 Download PDFInfo
- Publication number
- CN106774324A CN106774324A CN201611200906.3A CN201611200906A CN106774324A CN 106774324 A CN106774324 A CN 106774324A CN 201611200906 A CN201611200906 A CN 201611200906A CN 106774324 A CN106774324 A CN 106774324A
- Authority
- CN
- China
- Prior art keywords
- patrol robot
- patrol
- module
- information
- characteristic point
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000009977 dual effect Effects 0.000 title claims abstract description 15
- 238000012545 processing Methods 0.000 claims abstract description 6
- 230000005611 electricity Effects 0.000 claims description 6
- 238000012806 monitoring device Methods 0.000 claims description 6
- 230000006698 induction Effects 0.000 claims description 3
- 238000012544 monitoring process Methods 0.000 claims 1
- 230000004888 barrier function Effects 0.000 description 17
- 238000005516 engineering process Methods 0.000 description 5
- 238000003384 imaging method Methods 0.000 description 4
- 238000007726 management method Methods 0.000 description 4
- 238000011161 development Methods 0.000 description 3
- 238000000034 method Methods 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0231—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
- G05D1/0246—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
- G05D1/0251—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means extracting 3D information from a plurality of images taken from different locations, e.g. stereo vision
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0257—Control of position or course in two dimensions specially adapted to land vehicles using a radar
Landscapes
- Engineering & Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Physics & Mathematics (AREA)
- Aviation & Aerospace Engineering (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Electromagnetism (AREA)
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
- Manipulator (AREA)
Abstract
本发明提供一种双摄像头三维识别巡逻机器人,包括:间隔一定距离设置于巡逻机器人上的一对摄像头,用于采集前方障碍物的图像信息;定位模块,用于获取巡逻机器人位置信息;视频处理模块,用于根据图像信息上每两个特征点分别在每个摄像头中的成像距离及两个摄像头间的固定距离,计算每两个特征点的景深差异;中央控制模块,用于根据前方图像信息中每两个特征点的景深差异,得到前方障碍物的三维信息,并根据位置信息调整巡逻机器人的巡逻轨迹。通过计算每两个特征点间的深度差异,得到前方障碍物的三维信息,为巡逻机器人导航奠定基础,再通过获取巡逻机器人本体的位置,即可针对前方障碍物对巡逻轨迹进行重新规划调整。
Description
技术领域
本发明涉及机器人技术领域,更具体地,涉及一种双摄像头三维识别巡逻机器人。
背景技术
机器人技术的发展,是一个科学技术发展共同的一个综合性的结果,是为社会经济发展产生了一个重大影响的一门科学技术。经济的发展改变了人类社会结构的组成,现今的人类对于安全保障的需求愈发地强烈,而在智能化大发展的浪潮下,利用机器人来替代传统的保安人员的趋势已经越来越明显。
现在技术环境的机器人智能化的一个基础就在于能够自行移动,并且能够有效得避开各种各样的障碍物。若要避开障碍物,首先需要对障碍物、地形等能够准确地识别,目前常用的识别地形、障碍物的手段有,基于超声波、微波、激光来探测的雷达系统,但是这类系统无法给予地形、障碍物的具体信息。另外的方法采用单个摄像头,虽然能够获取直观的信息,但是单个摄像头所采集的只是平面信息,没有景深,难以判断多个障碍物之间的距离。本发明采用的双摄像头技术基于双目立体成像技术,利用两个摄像头所获得图像的细微差异,经过图像处理,计算障碍物的三维图像,形成完备的地形图传递给机器人导航系统,帮助巡逻机器人实现更好的巡逻路径规划。
发明内容
本发明提供一种克服上述问题或者至少部分地解决上述问题的双摄像头三维识别巡逻机器人,通过对前进方向中的障碍物,通过计算每两个点的景深差异获取障碍物三维信息,进而调整巡逻路线,保障机器人的自主巡逻。
根据本发明的一个方面,提供一种双摄像头三维识别巡逻机器人,包括:
间隔一定距离设置于巡逻机器人上的一对摄像头,用于采集前方障碍物的图像信息;
定位模块,用于获取巡逻机器人位置信息;
视频处理模块,用于根据图像信息上每两个特征点分别在每个摄像头中的成像距离及两个摄像头间的固定距离,计算每两个特征点的景深差异;
中央控制模块,用于根据前方图像信息中每两个特征点的景深差异,将景深差异插入当前摄像头拍摄画面,形成带有深度信息的画面,即前方的三维信息,得到前方障碍物的三维信息,并根据位置信息调整巡逻机器人的巡逻轨迹。通过计算每两个特征点间的深度差异,得到前方障碍物的三维信息,为巡逻机器人导航奠定基础,再通过获取巡逻机器人本体的位置,即可针对前方障碍物对巡逻轨迹进行重新规划调整。
作为优选的,还包括电源管理模块,所述电源管理模块包括蓄电池、电量监控装置和充电装置;
所述蓄电池用于为所述巡逻机器人提供电力;
所述电量监控装置用于监控所述蓄电池的电量情况,并将所述电量情况发送至所述中央控制模块;可设定蓄电池电量阈值,当低于该阈值时则提示充电。
所述充电装置用于在充电时,为蓄电池供电。
作为优选的,还包括警示模块,所述警示模块连接所述中央控制模块,用于对异常状况进行警示。
作为优选的,还包括动力模块,所述动力模块包括动力轮和转向轮,所述动力轮用于推动巡逻机器人移动,所述转向轮用于调整巡逻机器人移动方向。
作为优选的,还包括所述人体感应模块与所述中央控制模块连接,用于感应预设范围内是否有人员出现,当有人员出现时,将报警指令发送至所述中央控制模块。
作为优选的,还包括音频输出模块,所述音频输出模块连接所述中央控制模块,用于将预设音频信息进行播放。
作为优选的,所述机器人驱动方式包括轮式驱动和履带式驱动。
作为优选的,还包括后台控制模块,用于主动控制巡逻机器人的工作状态。
本申请提出一种双摄像头三维识别巡逻机器人,通过双摄像头的设置,采集巡逻机器人巡逻路径中的障碍物图像信息,通过视频处理模块,计算障碍物图像信息中每两个点的景深差异,进而获得障碍物的三维信息,根据巡逻机器人的位置信息及前方障碍物的三维信息,对巡逻机器人的巡逻路线进行,实现机器人实时地准确获取周围地形信息,保障机器人的自主移动正常。
附图说明
图1为本发明实施例的双摄像头三维识别机器人的结构框图;
图2位本发明实施例中双摄像头三维识别模拟示意图。
具体实施方式
下面结合附图和实施例,对本发明的具体实施方式作进一步详细描述。以下实施例用于说明本发明,但不用来限制本发明的范围。
图1示出了一种双摄像头三维识别巡逻机器人,包括:
间隔一定距离设置于巡逻机器人上的一对摄像头,用于采集前方障碍物的图像信息;所述一对摄像头设于巡逻机器人两侧;
定位模块,用于获取巡逻机器人位置信息;
视频处理模块,用于根据图像信息上每两个特征点分别在每个摄像头中的成像距离及两个摄像头间的固定距离,计算每两个特征点的景深差异;如图2所示,图中设置有第一摄像头C1和第二摄像头C2,用于捕捉巡逻机器人前进方向中的障碍物图像信息,当遇到如图中D所述的障碍物时,第一摄像头C1和第二摄像头C2分别对障碍物D进行拍摄,障碍物D上的两个具有不同深度的特征点A和特征点B,分别被第一摄像头C1和第二摄像头C2记录,两个特征点的间距在第一摄像头C1和第二摄像头C2的记录下的空间夹角有差异,即特征点A和特征点B在第一摄像头C1记录中的空间夹角θ1明显大于特征点A和特征点B在第二摄像头C2中记录的空间夹角θ2,体现在成像画面上为两个点的距离有差异。
中央控制模块,用于根据前方图像信息中每两个特征点的景深差异,将景深差异插入当前摄像头拍摄画面,形成带有深度信息的画面,即前方的三维信息,得到前方障碍物的三维信息,并根据位置信息调整巡逻机器人的巡逻轨迹。通过计算每两个特征点间的深度差异,得到前方障碍物的三维信息,为巡逻机器人导航奠定基础,再通过获取巡逻机器人本体的位置,即可针对前方障碍物对巡逻轨迹进行重新规划调整。区别于现有技术中通过测距雷达或传感器对单个点识别距离,通过对障碍物上每两个点的景深差异计算,得到障碍物的三维信息,使避障更加容易、精准。
作为优选的,还包括电源管理模块,所述电源管理模块包括蓄电池、电量监控装置和充电装置;
所述蓄电池用于为所述巡逻机器人提供电力;
所述电量监控装置用于监控所述蓄电池的电量情况,并将所述电量情况发送至所述中央控制模块;可设定蓄电池电量阈值,当低于该阈值时则提示充电。
所述充电装置用于在充电时,为蓄电池供电。
作为优选的,还包括警示模块,所述警示模块连接所述中央控制模块,用于对异常状况进行警示。所述警示模块可以为鸣笛、警示灯、强光等
作为优选的,还包括动力模块,所述动力模块包括动力轮和转向轮,所述动力轮用于推动巡逻机器人移动,所述转向轮用于调整巡逻机器人移动方向。
作为优选的,还包括所述人体感应模块与所述中央控制模块连接,用于感应预设范围内是否有人员出现,当有人员出现时,将报警指令发送至所述中央控制模块。
作为优选的,还包括音频输出模块,所述音频输出模块连接所述中央控制模块,用于将预设音频信息进行播放。
作为优选的,所述机器人驱动方式包括轮式驱动和履带式驱动。
作为优选的,还包括后台控制模块,用于主动控制巡逻机器人的工作状态。
本申请提出一种双摄像头三维识别巡逻机器人,通过双摄像头的设置,采集巡逻机器人巡逻路径中的障碍物图像信息,通过视频处理模块,计算障碍物图像信息中每两个点的景深差异,进而获得障碍物的三维信息,根据巡逻机器人的位置信息及前方障碍物的三维信息,对巡逻机器人的巡逻路线进行,实现机器人实时地准确获取周围地形信息,保障机器人的自主移动正常。
最后,本申请的方法仅为较佳的实施方案,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (8)
1.一种双摄像头三维识别巡逻机器人,其特征在于,包括:
间隔一定距离设置于巡逻机器人上的一对摄像头,用于采集前方障碍物图像信息;
定位模块,用于获取巡逻机器人位置信息;
视频处理模块,用于根据图像信息上每两个特征点分别在每个摄像头中的成像距离及两个摄像头间的固定距离,计算每两个特征点的景深差异;
中央控制模块,用于根据前方图像信息中每两个特征点的景深差异,并将景深差异插入到当前摄像机拍摄画面,得到前方障碍物的三维信息,并根据位置信息调整巡逻机器人的巡逻轨迹。
2.根据权利要求1所述的快速反应巡逻机器人,其特征在于,还包括电源管理模块,所述电源管理模块包括蓄电池、电量监控装置和充电装置;
所述蓄电池用于为所述巡逻机器人提供电力;
所述电量监控装置用于监控所述蓄电池的电量情况,并将所述电量情况发送至所述中央控制模块;
所述充电装置用于在充电时,为蓄电池供电。
3.根据权利要求1所述的快速反应巡逻机器人,其特征在于,还包括警示模块,所述警示模块连接所述中央控制模块,用于对异常状况进行警示。
4.根据权利要求1所述的快速反应巡逻机器人,其特征在于,还包括动力模块,所述动力模块包括动力轮和转向轮,所述动力轮用于推动巡逻机器人移动,所述转向轮用于调整巡逻机器人移动方向。
5.根据权利要求1所述的快速反应巡逻机器人,其特征在于,还包括所述人体感应模块与所述中央控制模块连接,用于感应预设范围内是否有人员出现,当有人员出现时,将报警指令发送至所述中央控制模块。
6.根据权利要求1所述的快速反应巡逻机器人,其特征在于,还包括音频输出模块,所述音频输出模块连接所述中央控制模块,用于将预设音频信息进行播放。
7.根据权利要求1所述的快速反应巡逻机器人,其特征在于,所述机器人驱动方式包括轮式驱动和履带式驱动。
8.根据权利要求1所述的快速反应巡逻机器人,其特征在于,还包括后台控制模块,用于主动控制巡逻机器人的工作状态。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611200906.3A CN106774324B (zh) | 2016-12-22 | 2016-12-22 | 一种双摄像头三维识别巡逻机器人 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611200906.3A CN106774324B (zh) | 2016-12-22 | 2016-12-22 | 一种双摄像头三维识别巡逻机器人 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106774324A true CN106774324A (zh) | 2017-05-31 |
CN106774324B CN106774324B (zh) | 2020-06-09 |
Family
ID=58899793
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201611200906.3A Active CN106774324B (zh) | 2016-12-22 | 2016-12-22 | 一种双摄像头三维识别巡逻机器人 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106774324B (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108508884A (zh) * | 2018-02-06 | 2018-09-07 | 南京永为科技有限公司 | 水上巡逻机器人 |
CN108536145A (zh) * | 2018-04-10 | 2018-09-14 | 深圳市开心橙子科技有限公司 | 一种使用机器视觉进行智能跟随的机器人系统及运行方法 |
CN108733045A (zh) * | 2017-09-29 | 2018-11-02 | 北京猎户星空科技有限公司 | 机器人及其避障方法以及计算机可读存储介质 |
CN113900435A (zh) * | 2021-08-31 | 2022-01-07 | 深圳蓝因机器人科技有限公司 | 基于双摄像头的移动机器人避障方法、设备、介质及产品 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012044308A (ja) * | 2010-08-16 | 2012-03-01 | Sharp Corp | 3d画像出力装置及び3d画像表示装置 |
CN103413313A (zh) * | 2013-08-19 | 2013-11-27 | 国家电网公司 | 基于电力机器人的双目视觉导航系统及方法 |
CN103926927A (zh) * | 2014-05-05 | 2014-07-16 | 重庆大学 | 一种室内移动机器人双目视觉定位与三维建图方法 |
US20150198813A1 (en) * | 2011-02-14 | 2015-07-16 | Semiconductor Energy Laboratory Co., Ltd. | Display device |
US20150339826A1 (en) * | 2014-05-22 | 2015-11-26 | Brain Corporation | Apparatus and methods for robotic operation using video imagery |
CN105411490A (zh) * | 2015-10-26 | 2016-03-23 | 曾彦平 | 移动机器人的实时定位方法及移动机器人 |
CN106003036A (zh) * | 2016-06-16 | 2016-10-12 | 哈尔滨工程大学 | 一种基于双目视觉引导的物体抓取与放置系统 |
CN106002925A (zh) * | 2016-08-04 | 2016-10-12 | 西安科技大学 | 双履带智能巡检机器人 |
CN106054883A (zh) * | 2016-06-13 | 2016-10-26 | 国家电网公司 | 一种机器人巡检路径控制系统 |
CN106153041A (zh) * | 2015-03-30 | 2016-11-23 | 北京自动化控制设备研究所 | 一种基于多景深信息的视觉里程计测速方法 |
-
2016
- 2016-12-22 CN CN201611200906.3A patent/CN106774324B/zh active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012044308A (ja) * | 2010-08-16 | 2012-03-01 | Sharp Corp | 3d画像出力装置及び3d画像表示装置 |
US20150198813A1 (en) * | 2011-02-14 | 2015-07-16 | Semiconductor Energy Laboratory Co., Ltd. | Display device |
CN103413313A (zh) * | 2013-08-19 | 2013-11-27 | 国家电网公司 | 基于电力机器人的双目视觉导航系统及方法 |
CN103926927A (zh) * | 2014-05-05 | 2014-07-16 | 重庆大学 | 一种室内移动机器人双目视觉定位与三维建图方法 |
US20150339826A1 (en) * | 2014-05-22 | 2015-11-26 | Brain Corporation | Apparatus and methods for robotic operation using video imagery |
CN106153041A (zh) * | 2015-03-30 | 2016-11-23 | 北京自动化控制设备研究所 | 一种基于多景深信息的视觉里程计测速方法 |
CN105411490A (zh) * | 2015-10-26 | 2016-03-23 | 曾彦平 | 移动机器人的实时定位方法及移动机器人 |
CN106054883A (zh) * | 2016-06-13 | 2016-10-26 | 国家电网公司 | 一种机器人巡检路径控制系统 |
CN106003036A (zh) * | 2016-06-16 | 2016-10-12 | 哈尔滨工程大学 | 一种基于双目视觉引导的物体抓取与放置系统 |
CN106002925A (zh) * | 2016-08-04 | 2016-10-12 | 西安科技大学 | 双履带智能巡检机器人 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108733045A (zh) * | 2017-09-29 | 2018-11-02 | 北京猎户星空科技有限公司 | 机器人及其避障方法以及计算机可读存储介质 |
CN108733045B (zh) * | 2017-09-29 | 2022-01-04 | 北京猎户星空科技有限公司 | 机器人及其避障方法以及计算机可读存储介质 |
CN108508884A (zh) * | 2018-02-06 | 2018-09-07 | 南京永为科技有限公司 | 水上巡逻机器人 |
CN108508884B (zh) * | 2018-02-06 | 2023-04-18 | 南京永为科技有限公司 | 水上巡逻机器人 |
CN108536145A (zh) * | 2018-04-10 | 2018-09-14 | 深圳市开心橙子科技有限公司 | 一种使用机器视觉进行智能跟随的机器人系统及运行方法 |
CN113900435A (zh) * | 2021-08-31 | 2022-01-07 | 深圳蓝因机器人科技有限公司 | 基于双摄像头的移动机器人避障方法、设备、介质及产品 |
Also Published As
Publication number | Publication date |
---|---|
CN106774324B (zh) | 2020-06-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20210311476A1 (en) | Patrol robot and patrol robot management system | |
CN106774324A (zh) | 一种双摄像头三维识别巡逻机器人 | |
US11407116B2 (en) | Robot and operation method therefor | |
CN103413313B (zh) | 基于电力机器人的双目视觉导航系统及方法 | |
CN102944224B (zh) | 一种无人驾驶车的自动环境感知系统的工作方法 | |
WO2019233222A1 (zh) | 用于桥隧结构病害无损检测诊断的自动爬墙式雷达光电机器人系统 | |
CN105549616B (zh) | 一种基于激光阵列的多轴无人机避障系统及其避障方法 | |
CN109571468A (zh) | 安防巡检机器人及安防巡检方法 | |
CN108297058A (zh) | 智能安防机器人及其自动巡检方法 | |
CN104238566B (zh) | 电子电路用基于图像识别的巡线机器人控制系统 | |
CN106527426A (zh) | 一种室内多目轨迹规划系统及其方法 | |
CN206287145U (zh) | 一种小区安防机器人控制系统 | |
US20200047346A1 (en) | Robot and robot system comprising same | |
CN206200973U (zh) | 一种智能避障检测机器人 | |
CN109318899B (zh) | 自动驾驶车辆的弯道行驶方法、装置、设备和存储介质 | |
CN207281590U (zh) | 一种智能化导盲机器人装置 | |
CN107089458A (zh) | 一种新型的智能环保垃圾自动回收系统 | |
CN114115296B (zh) | 一种重点区域智能巡检与预警系统及方法 | |
CN106569225A (zh) | 一种基于测距传感器的无人车实时避障方法 | |
CN114448114A (zh) | 基于移动机器人的智能无线供电系统 | |
CN108270963A (zh) | 智能控制移动摄像监控系统及其控制方法 | |
CN109211260B (zh) | 智能车的行驶路径规划方法及装置、智能车 | |
CN108205314A (zh) | 基于立体视觉匹配的机器人导航装置及系统 | |
CN109079795B (zh) | 具有视觉识别功能的巡检机器人 | |
CN111786465A (zh) | 一种变电站巡检机器人无线充电系统及方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |