CN109883393A - 基于双目立体视觉的移动机器人前方坡度预测方法 - Google Patents

基于双目立体视觉的移动机器人前方坡度预测方法 Download PDF

Info

Publication number
CN109883393A
CN109883393A CN201910154412.3A CN201910154412A CN109883393A CN 109883393 A CN109883393 A CN 109883393A CN 201910154412 A CN201910154412 A CN 201910154412A CN 109883393 A CN109883393 A CN 109883393A
Authority
CN
China
Prior art keywords
binocular stereo
depth
mobile robot
gradient
ground
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910154412.3A
Other languages
English (en)
Other versions
CN109883393B (zh
Inventor
刘瑜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yancheng Xiangyuan Environmental Protection Equipment Co ltd
Original Assignee
Hangzhou Jingyi Intelligent Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Jingyi Intelligent Science and Technology Co Ltd filed Critical Hangzhou Jingyi Intelligent Science and Technology Co Ltd
Priority to CN201910154412.3A priority Critical patent/CN109883393B/zh
Publication of CN109883393A publication Critical patent/CN109883393A/zh
Application granted granted Critical
Publication of CN109883393B publication Critical patent/CN109883393B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Manipulator (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Measurement Of Optical Distance (AREA)

Abstract

公开一种基于双目立体视觉的移动机器人前方坡度预测方法,包括设置在移动机器人前部的双目立体摄像机,焦距f,基线宽度b,高度h,所述的双目立体摄像机的光轴与移动机器人的底盘平行,还包括与所述的双目立体摄像机连接的处理器,所述的处理器设置前方坡度预测方法,包括步骤:1、所述的处理器获取所述的双目立体摄像机的图像对,并形成深度信息z=f(x,y);2、对成像点A’,计算投影角度θ=arctan(yA/f),对于平坦地面,成像点A’对应的地面点A的深度为zA=h*f/yA;3、如果深度z>zA,则为下坡,坡度为α=;如果深度z<zA,则为上坡,坡度为α=;如果深度z=zA,则为平面。

Description

基于双目立体视觉的移动机器人前方坡度预测方法
技术领域
本发明涉及基于双目立体视觉的移动机器人前方坡度预测方法,属于移动机器人控制领域。
背景技术
室外移动机器人工作环境非常复杂,其中地面的起伏情况就多变,可能是平地,也可能是上坡或者下坡,那么移动机器人提前获知该信息非常重要,不然可能导致倾倒等意外情况。
发明内容
针对上述问题,本发明提供基于双目立体视觉的移动机器人前方坡度预测方法,为移动机器人检测前方地面的坡度信息。
本发明解决其技术问题所采用的技术方案是:
基于双目立体视觉的移动机器人前方坡度预测方法,包括设置在所述的移动机器人前部的双目立体摄像机,焦距为f,基线宽度为b,高度为h,所述的双目立体摄像机的光轴与所述的移动机器人的底盘平行,还包括与所述的双目立体摄像机连接的处理器,所述的处理器设置前方坡度预测方法,包括以下步骤:
(1) 所述的处理器获取所述的双目立体摄像机的图像对fL和fR,形成深度信息z=f(x,y),x,y为像平面坐标,z为对应的深度;
(2) 对成像点A’(xA,yA),投影角度θ=arctan(yA/f),则对于平坦地面,成像点A’对应的地面点A的深度为zA=h*f/yA
(3) 如果实际深度z>zA,则前方地面为下坡,坡度为α=;如果实际深度z<zA,则地面为上坡,坡度为α=;如果实际深度z=zA,则地面为平面,角度为α=0。
本发明的有益效果主要表现在:1、可提前预测前方地面的坡度数值,为移动机器人运动控制提供环境信息。
附图说明
图1是移动机器人外形示意图;
图2 是移动机器人前方坡度预测方法原理示意图1;
图3是移动机器人前方坡度预测方法原理示意图2。
具体实施方式
下面结合附图对本发明作进一步描述:
参照图1-3,基于双目立体视觉的移动机器人前方坡度预测方法,包括设置在所述的移动机器人前部的双目立体摄像机,所述的移动机器的参数为:焦距为f,基线宽度为b,高度为h。
所述的双目立体摄像机的光轴与所述的移动机器人的底盘平行,这样视野开阔,检测距离远。还包括与所述的双目立体摄像机连接的处理器,所述的处理器设置前方坡度预测方法,包括以下步骤:
(1)、所述的处理器获取所述的双目立体摄像机的图像对fL和fR,形成深度信息z=f(x,y),x,y为像平面坐标,z为对应的深度;
所述的处理器是根据视差原理来计算深度信息,利用所述的双目立体摄像机的参数,可得z=f(x,y)=,其中d是根据图像对fL和fR计算得到的位置(x,y)的视差。
(2)、对成像点A’(xA,yA),投影角度θ=arctan(yA/f),则对于平坦地面,成像点A’对应的地面点A的深度为zA=h*f/yA
在计算坡度之前,首先假定前方是平地,则成像点A’(xA,yA)对应于地面点A,根据三角形关系,可计算出地面点A的深度为zA=h*f/yA
(3)、如果实际深度z>zA,则前方地面为下坡,坡度为α=;如果实际深度z<zA,则地面为上坡,坡度为α=;如果实际深度z=zA,则地面为平面,角度为α=0。
如图2,实际深度z>zA,则前方地面为下坡,首先计算距离l:根据三角形关系得到,因此l=(z-zA)*tanθ,可得到tanα=l/z,最终得到α=
如图3,实际深度z<zA,则地面为上坡,首先计算距离l:根据三角形关系得到,因此l=(zA-z)*tanθ,可得到tanα=l/z,最终得到α=
对于实际深度z=zA,则地面为平面,可直接得到角度为α=0。
综上所述,基于双目立体视觉,移动机器人可以提前计算前方地面的坡度,这个坡度是相对移动机器人的,如果移动机器人自动传感器可检测自身与水平面的角度,则还可以计算前方地面相对水平面的坡度。

Claims (1)

1.基于双目立体视觉的移动机器人前方坡度预测方法,包括设置在所述的移动机器人前部的双目立体摄像机,焦距为f,基线宽度为b,高度为h,其特征在于:所述的双目立体摄像机的光轴与所述的移动机器人的底盘平行,还包括与所述的双目立体摄像机连接的处理器,所述的处理器设置前方坡度预测方法,包括以下步骤:
(1) 所述的处理器获取所述的双目立体摄像机的图像对fL和fR,形成深度信息z=f(x,y),x,y为像平面坐标,z为对应的深度;
(2) 对成像点A’(xA,yA),投影角度θ=arctan(yA/f),则对于平坦地面,成像点A’对应的地面点A的深度为zA=h*f/yA
(3) 如果实际深度z>zA,则前方地面为下坡,坡度为α=;如果实际深度z<zA,则地面为上坡,坡度为α=;如果实际深度z=zA,则地面为平面,角度为α=0。
CN201910154412.3A 2019-03-01 2019-03-01 基于双目立体视觉的移动机器人前方坡度预测方法 Active CN109883393B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910154412.3A CN109883393B (zh) 2019-03-01 2019-03-01 基于双目立体视觉的移动机器人前方坡度预测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910154412.3A CN109883393B (zh) 2019-03-01 2019-03-01 基于双目立体视觉的移动机器人前方坡度预测方法

Publications (2)

Publication Number Publication Date
CN109883393A true CN109883393A (zh) 2019-06-14
CN109883393B CN109883393B (zh) 2020-11-27

Family

ID=66930185

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910154412.3A Active CN109883393B (zh) 2019-03-01 2019-03-01 基于双目立体视觉的移动机器人前方坡度预测方法

Country Status (1)

Country Link
CN (1) CN109883393B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110307783A (zh) * 2019-06-26 2019-10-08 浙江农林大学 一种基于双目立体视觉的树木体积测量装置
CN114495043A (zh) * 2022-04-06 2022-05-13 北京中科慧眼科技有限公司 基于双目视觉系统的上下坡路况检测方法、系统和智能终端

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011069191A1 (en) * 2009-12-08 2011-06-16 Radar Portal Systems Pty Ltd High speed photometric stereo pavement scanner
CN102141398A (zh) * 2010-12-28 2011-08-03 北京航空航天大学 基于单目视觉的多机器人位置与姿态测量方法
WO2014118391A2 (de) * 2013-02-04 2014-08-07 Dnv Gl Se Inspektionskameraeinheit, verfahren zur inspektion von innenräumen sowie sensoreinheit
US20150336546A1 (en) * 2014-05-19 2015-11-26 Umm Al-Qura University Method and system for vehicle to sense roadblock
CN105765605A (zh) * 2013-10-08 2016-07-13 福特全球技术公司 用于确定相对道路倾斜度的方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011069191A1 (en) * 2009-12-08 2011-06-16 Radar Portal Systems Pty Ltd High speed photometric stereo pavement scanner
CN102141398A (zh) * 2010-12-28 2011-08-03 北京航空航天大学 基于单目视觉的多机器人位置与姿态测量方法
WO2014118391A2 (de) * 2013-02-04 2014-08-07 Dnv Gl Se Inspektionskameraeinheit, verfahren zur inspektion von innenräumen sowie sensoreinheit
CN105765605A (zh) * 2013-10-08 2016-07-13 福特全球技术公司 用于确定相对道路倾斜度的方法
US20150336546A1 (en) * 2014-05-19 2015-11-26 Umm Al-Qura University Method and system for vehicle to sense roadblock

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110307783A (zh) * 2019-06-26 2019-10-08 浙江农林大学 一种基于双目立体视觉的树木体积测量装置
CN110307783B (zh) * 2019-06-26 2021-01-08 浙江农林大学 一种基于双目立体视觉的树木体积测量装置
CN114495043A (zh) * 2022-04-06 2022-05-13 北京中科慧眼科技有限公司 基于双目视觉系统的上下坡路况检测方法、系统和智能终端

Also Published As

Publication number Publication date
CN109883393B (zh) 2020-11-27

Similar Documents

Publication Publication Date Title
CN105282443B (zh) 一种全景深全景图像成像方法
Sheinin et al. The next best underwater view
US8605993B2 (en) Methods and systems of merging depth data from a plurality of disparity maps
WO2017080108A1 (zh) 飞行装置、飞行控制系统及方法
CN109872324A (zh) 地面障碍物检测方法、装置、设备和存储介质
CN109308718B (zh) 一种基于多深度相机的空间人员定位装置及方法
CN102792333A (zh) 图像处理装置、方法、程序以及记录介质
CN101065785A (zh) 自动3d成像的方法
CN104079916A (zh) 一种全景三维视觉传感器及使用方法
US20180192032A1 (en) System, Method and Software for Producing Three-Dimensional Images that Appear to Project Forward of or Vertically Above a Display Medium Using a Virtual 3D Model Made from the Simultaneous Localization and Depth-Mapping of the Physical Features of Real Objects
CN108280401A (zh) 一种路面检测方法、装置、云端服务器及计算机程序产品
CN102221331A (zh) 一种基于不对称双目立体视觉技术的测量方法
CN109883393A (zh) 基于双目立体视觉的移动机器人前方坡度预测方法
JP7372708B2 (ja) 広視野角のステレオカメラ装置およびこれを利用した深度画像処理方法
CN106524995B (zh) 基于可见光图像实时检测目标物体空间距离的定位方法
CN114245091B (zh) 投影位置修正方法、投影定位方法及控制装置、机器人
CN104596442A (zh) 一种辅助三维扫描的装置及方法
CN106382918A (zh) 一种三维视觉传感器
CN109919139B (zh) 基于双目立体视觉的路面状况快速检测方法
CN102968817A (zh) 一种双摄像头三维电子眼
CN109848997A (zh) 基于下倾立体相机的移动机器人前方坡度快速预测方法
WO2022078438A1 (zh) 一种室内3d信息采集设备
WO2022078433A1 (zh) 一种多点组合式3d采集系统及方法
WO2022111104A1 (zh) 一种多翻滚角度的智能视觉3d信息采集设备
CN108489469A (zh) 一种单目测距装置及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20210105

Address after: 224000 group 1, village committee of the people's Federation of China, Tinghu New District, Yancheng City, Jiangsu Province (28)

Patentee after: JIANGSU ZHONGKE RUISAI POLLUTION CONTROL ENGINEERING Co.,Ltd.

Address before: 310013 no.256, 6th floor, building 2, Huahong building, 248 Tianmushan Road, Xihu District, Hangzhou City, Zhejiang Province

Patentee before: HANGZHOU JINGYI INTELLIGENT SCIENCE & TECHNOLOGY Co.,Ltd.

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20230110

Address after: 224000 Blaupunkt Road, Yancheng City environmental protection science and Technology City, Jiangsu 199 (28)

Patentee after: YANCHENG XIANGYUAN ENVIRONMENTAL PROTECTION EQUIPMENT Co.,Ltd.

Address before: 224000 group 1, village committee of the people's Federation of China, Tinghu New District, Yancheng City, Jiangsu Province (28)

Patentee before: JIANGSU ZHONGKE RUISAI POLLUTION CONTROL ENGINEERING Co.,Ltd.

EE01 Entry into force of recordation of patent licensing contract
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20190614

Assignee: YANCHENG XIANGGUO TECHNOLOGY Co.,Ltd.

Assignor: YANCHENG XIANGYUAN ENVIRONMENTAL PROTECTION EQUIPMENT Co.,Ltd.

Contract record no.: X2023980040381

Denomination of invention: A Method for Predicting Forward Slope of Mobile Robots Based on Binocular Stereo Vision

Granted publication date: 20201127

License type: Common License

Record date: 20230824

EE01 Entry into force of recordation of patent licensing contract
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20190614

Assignee: YANCHENG LIYAN NEW MATERIAL Co.,Ltd.

Assignor: YANCHENG XIANGYUAN ENVIRONMENTAL PROTECTION EQUIPMENT Co.,Ltd.

Contract record no.: X2023980051871

Denomination of invention: A slope prediction method for mobile robots based on binocular stereo vision

Granted publication date: 20201127

License type: Common License

Record date: 20231213

EE01 Entry into force of recordation of patent licensing contract
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20190614

Assignee: Yancheng Maijie Software Technology Co.,Ltd.

Assignor: YANCHENG XIANGYUAN ENVIRONMENTAL PROTECTION EQUIPMENT Co.,Ltd.

Contract record no.: X2023980052569

Denomination of invention: A slope prediction method for mobile robots based on binocular stereo vision

Granted publication date: 20201127

License type: Common License

Record date: 20231219