CN102506852A - 农用车辆视觉导航系统及其导航方法 - Google Patents

农用车辆视觉导航系统及其导航方法 Download PDF

Info

Publication number
CN102506852A
CN102506852A CN2011103392896A CN201110339289A CN102506852A CN 102506852 A CN102506852 A CN 102506852A CN 2011103392896 A CN2011103392896 A CN 2011103392896A CN 201110339289 A CN201110339289 A CN 201110339289A CN 102506852 A CN102506852 A CN 102506852A
Authority
CN
China
Prior art keywords
module
image
agri
path
navigation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011103392896A
Other languages
English (en)
Other versions
CN102506852B (zh
Inventor
丁幼春
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hubei Yongxiang Agricultural Machinery Preparation Co.,Ltd.
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201110339289.6A priority Critical patent/CN102506852B/zh
Publication of CN102506852A publication Critical patent/CN102506852A/zh
Application granted granted Critical
Publication of CN102506852B publication Critical patent/CN102506852B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

本发明提供了一种成本低、效率高、智能的农业车辆视觉导航系统及其导航方法。本发明的农用车辆视觉导航系统,包括:视觉导航平台模块,与所述视觉导航平台模块相连的导航路径检测模块、转向控制模块和安全预警模块;所述导航路径检测模块,用于实时采集、处理、分析图像,获得导航路径参数;所述转向控制模块,用于获得农用车辆作业速度与转向轮转角状态,根据导航路径参数实现指定角度的转向;所述安全预警模块,用于检测周围环境信息,进行分析对比并报警。本发明的农用车辆视觉导航系统及其导航方法,能够达到辅助驾驶的目的,提高作业精度、作业效率,减轻驾驶员劳动强度,节能降耗,提升智能化水平。

Description

农用车辆视觉导航系统及其导航方法
技术领域
本发明涉及一种农用设备导航系统及其导航方法,尤其是一种农用车辆视觉导航系统及其导航方法。
背景技术
农用车辆自动导航在提高作业精度、作业效率,减轻驾驶员劳动强度,节能降耗,提升智能化水平等方面具有重要意义。农田车辆自身的定位是其实现自动导航的关键,没有准确、快速的自身定位,就谈不上自动导航,自身定位主要是对车辆自身的位姿与航向角的感知。近几十年来,超声波、声纳导航、激光探测导航、微波雷达导航、惯性导系(IMU)、视觉导航、全球卫星定位导航等陆续被众多研究者所关注。通过50多年来农用车辆对多种导航方式的探索,农用车辆的导航研究已经主要集中在机器视觉和GPS导航这两种最具发展前途的方式上。
国内目前在公路车辆GPS导航领域已经进行了很多研究,取得了很多成果,缩短了和世界先进水平的差距。但是有关GPS在农用车辆导航领域的应用研究相对较少,与世界先进水平有一定的差距,主要瓶颈是GPS设备购置费用高,高昂的成本阻碍了GPS导航系统在农用车辆上的应用;并且,当卫星信号遇到树木、建筑等障碍物或受到无线电波干扰时,信号会失效,一旦失效,得重新花费较长时间再次进行卫星捕捉,延误了工作时间,所以,单纯运用GPS技术还不能确保驾驶的安全性,只能作为辅助导航的有力工具。
发明内容
本发明提供了一种成本低、效率高、智能的农业车辆视觉导航系统及其导航方法。
实现本发明目的之一的农用车辆视觉导航系统,包括:视觉导航平台模块,与所述视觉导航平台模块相连的导航路径检测模块、转向控制模块和安全预警模块;所述导航路径检测模块,用于实时采集、处理、分析图像,获得导航路径参数;所述转向控制模块,用于获得农用车辆作业速度与转向轮转角状态,根据导航路径参数实现指定角度的转向;所述安全预警模块,用于检测周围环境信息,进行分析对比并报警。
所述导航路径检测模块,包括用于分析曲率大小的曲率分析模块、用于识别作业与未作业边界的小曲率路径检测模块和大曲率路径检测模块。
所述转向控制模块,包括电控液压转向装置,小曲率路径的跟踪模块,大曲率路径跟踪模块和传感器中位标定模块,所述液压转向装置中增加了一个步进电机控制的闭式液压转向器,分别与原转向液压缸和原液压转向器相连。
所述安全预警模块,包括田头线检测模块,障碍物检测模块和报警装置。
所述视觉导航平台模块软件系统,包括参数实时显示模块,视频图像与GPS定位显示模块,实时航向指示模块,动画示意模块,导航状态控制模块,转向调试模块和GPS设置模块。
实现本发明目的之二的农用车辆视觉导航方法,包括导航路径检测方法、转向控制方法和安全预警方法;所述导航路径检测方法包括相机安装方式、小曲率路径检测和大曲率路径检测;所述转向控制方法包括电控液压转向改装、小曲率路径跟踪、大曲率路径跟踪和传感器中位标定;所述安全预警方法包括田头线检测和障碍物检测。
所述小曲率路径检测,利用旋转投影算法和导航路径参数直方图融合算法,通过角度枚举对图像ROI实施旋转变换,由旋转后图像的列均值与枚举角度构成旋转投影矩阵,对其行向量实施差分运算得到差分旋转投影矩阵,由差分旋转投影矩阵的极值可确定图像导航路径,即航向偏差与航位偏差,进而可以求得世界坐标系下的导航路径参数,在此过程中,实施线性压缩,旋转角度先粗分再细分的二步法。
所述大曲率路径检测是,采用双切线大曲率路径转弯半径估计算法,具体步骤如下:
(1)确定初始旋转中心点,即图像的旋转变换所围绕的确定点,通过下述公示确定:
U = u cos α + v sin α + u 0 V = - u sin α + v cos α + v 0
其中(u,v)是原图像坐标,(u0,v0)是旋转中心坐标,初始旋转中心点决定着第一条切线的位置,设定u0=width/2,v0=3*height/4,且取图像ROI为(0,height/2,width,height),以缩小曲线路径检测范围,其中width为图像的宽带,height为图像的高度,单位均为像素数;
(2)实施旋转投影算法,求取曲线的第一条近似切线l1,其表征参数为图像u轴截距cc1及与图像v轴夹角αc1,其中枚举角度取Δα=1°,线性压缩比β=0.25,旋转α从-45°到45°;
(3)确定第二个旋转中心点,求取曲线的第二条近似切线,在相机一定视野中,曲线具有连续性,第二旋转中心点应该依赖于第一条切线位置,为此,沿l1直线上在高度方向上height/4处确定为第二旋转中心,即u0=l1|y=height/4,v0=height/4,且取图像ROI为(u0-width/4,0,u0+width/4,height/2),旋转投影算法仍取所述步骤(2)中相同的参数,得到第二条近似切线l2,其表征参数为图像u轴截距cc2及与图像v轴夹角αc2
(4)求取大曲率路径转弯半径,根据地面直线与图像直线的转换关系:
c = h ( k c cos φ f y f x + c c f x sin φ ) k = cos φ c c - k c f y sin φ f x
其中cc为图像坐标下直线在u轴的截距,kc=tanαc,c、k为地面坐标下直线截距与正切,fx,fy,φ为相机的内外参数,通过标定可以获得,通过上述公式将切线l1、l2转换为地面坐标系下的直线方程,进而可以获得其对应的α1、α2及α=α12,大曲率路径的高度d通过图像坐标系中的两旋转中心点以及相机的视场确定,可以求出跟踪地面大曲率路径,在航位偏差为0的前提下,转向轮转向的角度
Figure BSA00000602897100033
所述液压转向改造,是在现有液压转向器的基础上增加一个闭式液压转向器,采用两个转向器同时控制转向油缸;所述相机安装,是将相机安装在农用车辆前进方向的侧面,高于所述农用车辆的顶部,并与水平面成一俯角。
所述传感器中位标定,包括如下步骤:
(1)装上角度传感器,后轮处于中位附近时,调整角度传感器,让其输出在传感器中间电压左右;
(2)操作人员启动农用车辆,沿固定直线以一定速度行驶,行驶时间不少于30s;
(3)在启动运行5s左右基本稳定后,以3000Hz的采样率采集20s的中位电压;
(4)计算60000个中位电压的平均值以及均方差,当均方差低于0.08V时判定此次标定有效,否则重复操作。
所述障碍物检测,首先通过图像颜色进行分割并二值化,获得潜在障碍物的位置及区域;再通过双目匹配、超声波进一步确认障碍物的存在与否。
本发明的农用车辆视觉导航系统及其导航方法,对田间播种机械、耕作机械以及收获机械的作业与未作业边界进行识别并获得导航路径,由此获得航向偏差与航位偏差,通过转向控制系统对农业行走进行自动转向,以达到辅助驾驶的目的,提高作业精度、作业效率,减轻驾驶员劳动强度,节能降耗,提升智能化水平等。
附图说明
图1为本发明农用车辆视觉导航系统的示意图。
图2为本发明农用车辆视觉导航系统的电控液压转向装置的结构示意图。
图3为本发明农用车辆视觉导航系统的控制流程图。
具体实施方式
如图1所示,本发明的农用车辆视觉导航系统,包括:视觉导航平台模块,与所述视觉导航平台模块相连的导航路径检测模块、转向控制模块和安全预警模块;所述导航路径检测模块,用于实时采集、处理、分析图像,获得导航路径参数;所述转向控制模块,用于获得农用车辆作业速度与转向轮转角状态,根据导航路径参数实现指定角度的转向;所述安全预警模块,用于检测周围环境信息,进行分析对比并报警。
所述导航路径检测模块,包括用于分析曲率大小的曲率分析模块、用于识别作业与未作业边界的小曲率路径检测模块和大曲率路径检测模块。所述转向控制模块,包括液压转向装置,小曲率路径的跟踪模块,大曲率路径跟踪模块和传感器中位标定模块。
如图2所示,所述液压转向装置中增加了一个步进电机控制的闭式液压转向器,分别与原转向液压缸和原液压转向器相连。所述安全预警模块,包括田头线检测模块,障碍物检测模块和报警装置。所述视觉导航平台模块软件系统,包括参数实时显示模块,视频图像与GPS定位显示模块,实时航向指示模块,动画示意模块,导航状态控制模块,转向调试模块和GPS设置模块。
本发明的农用车辆视觉导航方法,包括导航路径检测方法、转向控制方法和安全预警方法;所述导航路径检测方法包括相机安装方式、小曲率路径检测和大曲率路径检测;所述转向控制方法包括电控液压转向改装、小曲率路径跟踪、大曲率路径跟踪和传感器中位标定;所述安全预警方法包括田头线检测和障碍物检测。
所述小曲率路径检测,利用旋转投影算法和导航路径参数直方图融合算法,通过角度枚举对图像ROI实施旋转变换,由旋转后图像的列均值与枚举角度构成旋转投影矩阵,对其行向量实施差分运算得到差分旋转投影矩阵,由差分旋转投影矩阵的极值可确定图像导航路径,即航向偏差与航位偏差,进而可以求得世界坐标系下的导航路径参数。同理可以对田头线进行检测。
为了提高算法的实时性,提出设定合理的ROI、实施线性压缩、旋转角度先粗分再细分的二步法以及充分利用前帧信息4种处理方法,使处理一帧用时6ms左右。通过对不同条件下成熟小麦图像测试表明,该算法识别导航路径准确率达到95%。
为了提高旋转投影算法的鲁棒性,提出了一种导航路径参数直方图融合算法,其核心思路是:①利用多次检测结果建立频次直方图,控制周期内检测得到的结果出现频次最高的最可能成为最终结果。②依据导航路径参数的变化连续性原理对结果进行约束,即本周期内检测得到的结果必须与上周期检测结果相差不大。通过此思路算法,获得的导航路径参数可信度更高,抗干扰性更强。通过提出的直方图融合算法能够更进一步提高导航路径识别精度,为导航控制提高了坚实的基础。
所述大曲率路径检测是,采用双切线大曲率路径转弯半径估计算法,具体步骤如下:
(1)确定初始旋转中心点,即图像的旋转变换所围绕的确定点,通过下述公示确定:
U = u cos α + v sin α + u 0 V = - u sin α + v cos α + v 0
其中(u,v)是原图像坐标,(u0,v0)是旋转中心坐标,初始旋转中心点决定着第一条切线的位置,设定u0=width/2,v0=3*height/4,且取图像ROI为(0,height/2,width,height),以缩小曲线路径检测范围,其中width为图像的宽带,height为图像的高度,单位均为像素数;
(2)实施旋转投影算法,求取曲线的第一条近似切线l1,其表征参数为图像u轴截距cc1及与图像v轴夹角αc1,其中枚举角度取Δα=1°,线性压缩此β=0.25,旋转α从-45°到45°;
(3)确定第二个旋转中心点,求取曲线的第二条近似切线,在相机一定视野中,曲线具有连续性,第二旋转中心点应该依赖于第一条切线位置,为此,沿l1直线上在高度方向上height/4处确定为第二旋转中心,即u0=l1|y=height/4,v0=height/4,且取图像ROI为(u0-width/4,0,u0+width/4,height/2),旋转投影算法仍取所述步骤(2)中相同的参数,得到第二条近似切线l2,其表征参数为图像u轴截距cc2及与图像v轴夹角αc2
(4)求取大曲率路径转弯半径,根据地面直线与图像直线的转换关系:
c = h ( k c cos φ f y f x + c c f x sin φ ) k = cos φ c c - k c f y sin φ f x
其中cc为图像坐标下直线在u轴的截距,kc=tanαc,c、k为地面坐标下直线截距与正切,fx,fy,φ为相机的内外参数,通过标定可以获得,通过上述公式将切线l1、l2转换为地面坐标系下的直线方程,进而可以获得其对应的α1、α2及α=α12,大曲率路径的高度d通过图像坐标系中的两旋转中心点以及相机的视场确定,可以求出跟踪地面大曲率路径,在航位偏差为0的前提下,转向轮转向的角度
Figure BSA00000602897100063
路面与麦田试验结果表明:双切线转弯半径估计算法能够有效地检测曲线路径转弯半径;在正常小麦收获速度挡位下,联合收获机能够跟踪转弯半径大于10m的曲线路径,路面曲线跟踪误差最大值为0.19m,田间曲线边界跟踪过程中割幅变化范围最大为0.29m。
如图2所示,所述电控液压转向改装,是在现有液压转向器的基础上增加一个步进电机控制的闭式液压转向器3,通过增加的油管1,2,4与原有的液压转向器和转向油缸相连,采用两个转向器同时控制转向油缸。为了驾驶操作安全,实现人工驾驶与视觉导航控制系统自动驾驶,切换自如,互不干涉,同时为了消除液压油路切换过程中产生的强烈冲击,在不改变原有液压系统工作性能的基础上,液压系统设计中增加一个闭式液压转向器,使得两个液压转向器控制同一转向液压缸。
所述相机安装方式,是将相机安装在农用车辆前进方向的侧面,高于所述农用车辆的顶部,并与水平面成一俯角。相机安装的位置和俯视角度,直接影响采集到的图像的式样、图像处理算法以及联合收获机行走的控制方法等,因此相机的安装位置和俯视角度非常重要。相机距离行走目标越近,采集图像的效果越好,自动控制的精度也越高,但为了使控制系统具有预见性,相机需要有一定的预瞄距离,因此,本研究采用从行走目标的上方采集图像的方案,在农用车辆前方安装相机,相机安装的高度和俯视角度,通过试验进行确定,最后确定为φ=30°,h=3.1m,OP1=3.4m,P1P3=11.5m,。
所述传感器中位标定,包括如下步骤:
(1)装上角度传感器,后轮处于中位附近时,调整角度传感器,让其输出在传感器中间电压左右;
(2)操作人员启动农用车辆,沿固定直线以一定速度行驶,行驶时间不少于30s;
(3)在启动运行5s左右基本稳定后,以3000Hz的采样率采集20s的中位电压;
(4)计算60000个中位电压的平均值以及均方差,当均方差低于0.08V时判定此次标定有效,否则重复操作。
标定结果对自动转向系统具有重要的意义:首先,中位电压的精确程度直接决定了控制量的极性,也就是转向的方向性问题;其次,通过沿直线行驶得到的后轮中位电压屏蔽了车辆转向后轮本身的制造工艺问题,提高了自动转向系统的准确性。
所述障碍物检测,首先通过图像颜色进行分割并二值化,获得潜在障碍物的位置及区域;再通过双目匹配、超声波进一步确认障碍物的存在与否。
障碍物检测中提出了一种采用图像颜色H、I、S分量识别障碍物与双目匹配、三维超声波测障相结合的田间障碍物检测方法。利用H、S颜色分量对单目图像实施固定阈值分割并二值化,获得潜在障碍物的位置及区域。
双目匹配采用尺度空间不变(SIFT)算法获取潜在障碍物区域特征,采用近似最近邻分类算法(ANN)进行快速特征匹配,获得潜在障碍物的世界坐标,由此进一步确认障碍物以及与车之间的距离。提出了提高算法效率的措施,分析了图像压缩比与运行时间、SIFT特征数以及匹配数之间的关系。试验得出,在有障碍物的情况下,检测时间不超过200ms。
三维超声波测障是基于单片机设计,在农用车辆的前进方向、左右两侧各安装一套超声波传感器发射装置。当碰到障碍物的时候,超声波回被障碍物阻挡而立刻返回,一段时间过后超声波接收器会接收到回波,同时停止计时,计时器记录下这一段时间为t。根据空气中的声速可以计算出发射点距障碍物的距离s。
本发明的农用车辆视觉导航的控制方法如下:
如图3示,双闭环智能控制器的结构方式。大闭环由视觉检测系统和车速检测反馈以及智能控制器构成,智能控制器可以根据路径的状态采用直线路径还是曲线路径控制算法,得到对应的控制量。小闭环以后轮转角测量作为单位负反馈构成,确保控制量适时完全执行。
结构中,反馈环节检测参数有航位偏差D、航向偏差θ(直线路径参数)、曲线路径转弯半径R、直线与曲线的判决因子δ、行车速度v以及转向轮当前转角α0,这些参数作为智能控制器的输入,控制量为转向轮转角。
直线路径与曲线路径通过判决因子δ判定。根据旋转投影算法原理,直线路径与曲线路径差异体现在差分旋转投影矩阵极值δ的大小上,这主要是直线路径经旋转后在图像列均值上具有集中突变的特点,差分旋转投影矩阵极值较大,而曲线路径不管旋转到什么位置,曲线路径很难被集中到某一列或几列,列均值较分散,差分旋转投影矩阵极值较小,直线路径所对应的极值为曲线的2-6倍。通过设定合适的阈值δ0(本系统取15),当差分旋转投影矩阵极值δ>δ0时,给出航向偏差θ;当δ≤δ0时,认为是曲线路径,采用转弯半径估计算法,得到转弯半径R,给出航向偏差θ以及转弯半径R。智能控制器根据判决因子δ的大小确定采用直线路径控制算法还是曲线路径控制算法,直线路径控制算法采用模糊PD控制方法,曲线路径控制算法采用分段式控制方式。阈值δ0的选取不可能绝对分开直线路径与曲线路径,但δ0可以取大点,以增加直线路径误判为曲线路径的机会,减少曲线路径误判为直线路径的机会。
上面所述的实施例仅仅是对本发明的优选实施方式进行描述,并非对本发明的范围进行限定,在不脱离本发明设计精神前提下,本领域普通工程技术人员对本发明技术方案做出的各种变形和改进,均应落入本发明的权利要求书确定的保护范围内。

Claims (10)

1.一种农用车辆视觉导航系统,包括:视觉导航平台模块,与所述视觉导航平台模块相连的导航路径检测模块、转向控制模块和安全预警模块;所述导航路径检测模块,用于实时采集、处理、分析图像,获得导航路径参数;所述转向控制模块,用于获得农用车辆作业速度与转向轮转角状态,根据导航路径参数实现指定角度的转向;所述安全预警模块,用于检测周围环境信息,进行分析对比并报警。
2.根据权利要求1所述的农用车辆视觉导航系统,其特征在于:所述导航路径检测模块,包括用于分析曲率大小的曲率分析模块、用于识别作业与未作业边界的小曲率路径检测模块和大曲率路径检测模块。
3.根据权利要求1所述的农用车辆视觉导航系统,其特征在于:所述转向控制模块,包括液压转向装置,小曲率路径的跟踪模块,大曲率路径跟踪模块和传感器中位标定模块,所述液压转向装置中增加了一个闭式液压转向器,分别与原转向液压缸和原液压转向器相连。
4.根据权利要求1所述的农用车辆视觉导航系统,其特征在于:所述安全预警模块,包括田头线检测模块,障碍物检测模块和报警装置。
5.根据权利要求1所述的农用车辆视觉导航系统,其特征在于:所述视觉导航平台模块软件系统,包括参数实时显示模块,视频图像与GPS定位显示模块,实时航向指示模块,动画示意模块,导航状态控制模块,转向调试模块和GPS设置模块。
6.一种权利要求1~5所述的农用车辆视觉导航系统的导航方法,包括导航路径检测方法、转向控制方法和安全预警方法;所述导航路径检测方法包括相机安装方式、小曲率路径检测和大曲率路径检测;所述转向控制方法包括电控液压转向改装、小曲率路径跟踪、大曲率路径跟踪和传感器中位标定;所述安全预警方法包括田头线检测和障碍物检测。
7.根据权利要求6所述的农用车辆视觉导航方法,其特征在于:所述小曲率路径检测,利用旋转投影算法和导航路径参数直方图融合算法,通过角度枚举对图像ROI实施旋转变换,由旋转后图像的列均值与枚举角度构成旋转投影矩阵,对其行向量实施差分运算得到差分旋转投影矩阵,由差分旋转投影矩阵的极值可确定图像导航路径,即航向偏差与航位偏差,进而可以求得世界坐标系下的导航路径参数,在此过程中,实施线性压缩,旋转角度先粗分再细分的二步法。
8.根据权利要求6所述的农用车辆视觉导航方法,其特征在于:所述大曲率路径检测是,采用双切线大曲率路径转弯半径估计算法,具体步骤如下:
(1)确定初始旋转中心点,即图像的旋转变换所围绕的确定点,通过下述公示确定:
U = u cos α + v sin α + u 0 V = - u sin α + v cos α + v 0
其中(u,v)是原图像坐标,(u0,v0)是旋转中心坐标,初始旋转中心点决定着第一条切线的位置,设定u0=width/2,v0=3*height/4,且取图像ROI为(0,height/2,width,height),以缩小曲线路径检测范围,其中width为图像的宽带,height为图像的高度,单位均为像素数;
(2)实施旋转投影算法,求取曲线的第一条近似切线l1,其表征参数为图像u轴截距cc1及与图像v轴夹角αc1,其中枚举角度取Δα=1°,线性压缩比β=0.25,旋转α从-45°到45°;
(3)确定第二个旋转中心点,求取曲线的第二条近似切线,在相机一定视野中,曲线具有连续性,第二旋转中心点应该依赖于第一条切线位置,为此,沿l1直线上在高度方向上height/4处确定为第二旋转中心,即u0=l1|y=height/4,v0=height/4,且取图像ROI为(u0-width/4,0,u0+width/4,height/2),旋转投影算法仍取所述步骤(2)中相同的参数,得到第二条近似切线l2,其表征参数为图像u轴截距cc2及与图像v轴夹角αc2
(4)求取大曲率路径转弯半径,根据地面直线与图像直线的转换关系:
c = h ( k c cos φ f y f x + c c f x sin φ ) k = cos φ c c - k c f y sin φ f x
其中cc为图像坐标下直线在u轴的截距,kc=tanαc,c、k为地面坐标下直线截距与正切,fx,fy,φ为相机的内外参数,通过标定可以获得,通过上述公式将切线l1、l2转换为地面坐标系下的直线方程,进而可以获得其对应的α1、α2及α=α12,大曲率路径的高度d通过图像坐标系中的两旋转中心点以及相机的视场确定,可以求出跟踪地面大曲率路径,在航位偏差为0的前提下,转向轮转向的角度
Figure FSA00000602897000031
9.根据权利要求6所述的农用车辆视觉导航方法,其特征在于:所述电控液压转向改装,是在现有液压转向器的基础上增加一个闭式液压转向器,并采用步进电机驱动改转向器,采用两个转向器同时控制转向油缸;所述相机安装方式,是将相机安装在农用车辆前进方向的侧面,高于所述农用车辆的顶部,并与水平面成一俯角;所述障碍物检测,首先通过图像颜色进行分割并二值化,获得潜在障碍物的位置及区域;再通过双目匹配、超声波进一步确认障碍物的存在与否。
10.根据权利要求6所述的农用车辆视觉导航方法,其特征在于:所述传感器中位标定,包括如下步骤:
(1)装上角度传感器,后轮处于中位附近时,调整角度传感器,让其输出在传感器中间电压左右;
(2)操作人员启动农用车辆,沿固定直线以一定速度行驶,行驶时间不少于30s;
(3)在启动运行5s左右基本稳定后,以3000Hz的采样率采集20s的中位电压;
(4)计算60000个中位电压的平均值以及均方差,当均方差低于0.08V时判定此次标定有效,否则重复操作。
CN201110339289.6A 2011-11-01 2011-11-01 农用车辆视觉导航系统及其导航方法 Active CN102506852B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201110339289.6A CN102506852B (zh) 2011-11-01 2011-11-01 农用车辆视觉导航系统及其导航方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201110339289.6A CN102506852B (zh) 2011-11-01 2011-11-01 农用车辆视觉导航系统及其导航方法

Publications (2)

Publication Number Publication Date
CN102506852A true CN102506852A (zh) 2012-06-20
CN102506852B CN102506852B (zh) 2016-08-03

Family

ID=46218959

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110339289.6A Active CN102506852B (zh) 2011-11-01 2011-11-01 农用车辆视觉导航系统及其导航方法

Country Status (1)

Country Link
CN (1) CN102506852B (zh)

Cited By (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103914071A (zh) * 2014-04-02 2014-07-09 中国农业大学 一种用于谷物联合收割机的视觉导航路径识别系统
CN104089629A (zh) * 2014-06-30 2014-10-08 西北农林科技大学 一种视觉导航电动车试验平台
CN104111460A (zh) * 2013-04-22 2014-10-22 苏州宝时得电动工具有限公司 自动行走设备及其障碍检测方法
CN105075463A (zh) * 2015-07-20 2015-11-25 柳州好顺科技有限公司 一种具有转弯预警系统的播种机
CN105807297A (zh) * 2016-03-16 2016-07-27 江苏理工学院 基于无线网络的火灾探测定位救援系统及方法
CN106455481A (zh) * 2014-05-22 2017-02-22 洋马株式会社 作业车辆的行驶系统
CN106502252A (zh) * 2016-12-05 2017-03-15 聊城大学 多传感器融合的拖拉机导航控制系统及其定位、控制方法
CN106595637A (zh) * 2016-12-21 2017-04-26 上海华测导航技术股份有限公司 农业机械视觉导航方法
CN107390682A (zh) * 2017-07-04 2017-11-24 安徽省现代农业装备产业技术研究院有限公司 一种农用车辆自动驾驶路径跟随方法及系统
CN108132670A (zh) * 2018-01-30 2018-06-08 天津中德应用技术大学 基于分布式控制的多功能巡检机器人及工作方法
CN108153303A (zh) * 2017-12-13 2018-06-12 张庆国 一种农业机械的田间道路自动导航定位装置及方法
CN109115225A (zh) * 2018-08-31 2019-01-01 江苏大学 一种无人作业谷物联合收割机导航方法与导航装置
CN109358625A (zh) * 2018-10-25 2019-02-19 丰疆智慧农业股份有限公司 自动驾驶农机及其动力系统
CN109405836A (zh) * 2017-08-17 2019-03-01 维布络有限公司 用于确定无人驾驶汽车的可驾驶导航路径的方法和系统
CN110209153A (zh) * 2019-04-09 2019-09-06 丰疆智能科技股份有限公司 自动收割机的倒伏行驶规划系统及其方法
CN110226370A (zh) * 2019-04-09 2019-09-13 丰疆智能科技股份有限公司 履带式微耕机的控制方法及其控制系统
CN110285790A (zh) * 2018-12-29 2019-09-27 丰疆智能科技股份有限公司 农机地形检测系统及运动控制方法
CN110862279A (zh) * 2019-12-18 2020-03-06 华中农业大学 一种基于激光雷达导航的履带式无人驾驶有机肥翻抛机
CN111216708A (zh) * 2020-01-13 2020-06-02 上海华测导航技术股份有限公司 车辆导航引导系统及车辆
CN112654886A (zh) * 2020-05-27 2021-04-13 华为技术有限公司 外参标定方法、装置、设备及存储介质
CN113102134A (zh) * 2021-02-25 2021-07-13 中国农业大学 一种智能型行道树树干喷涂装置
CN113545219A (zh) * 2021-07-13 2021-10-26 江苏大学 一种联合收获机田头转向系统及方法和联合收获机
CN113566807A (zh) * 2020-04-28 2021-10-29 富华科精密工业(深圳)有限公司 自动导航方法、导航装置及存储介质
CN113865582A (zh) * 2021-09-27 2021-12-31 南京农业大学 一种果树行间农用车辆航向角与横向偏差的测定方法
CN113932816A (zh) * 2021-11-16 2022-01-14 北京中科海讯数字科技股份有限公司 基于水声数据综合态势下的航迹优化方法
CN115855067A (zh) * 2023-02-23 2023-03-28 华南农业大学 一种曲形农田边界的路径规划方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6445983B1 (en) * 2000-07-07 2002-09-03 Case Corporation Sensor-fusion navigator for automated guidance of off-road vehicles
US20070271013A1 (en) * 2006-05-18 2007-11-22 Applied Perception Inc. Vision guidance system and method for identifying the position of crop rows in a field
CN101101216A (zh) * 2006-07-05 2008-01-09 中国农业大学 棉田喷药机导航路径识别方法
CN101750051A (zh) * 2010-01-04 2010-06-23 中国农业大学 一种视觉导航的多作物行检测方法
CN101866181A (zh) * 2009-04-16 2010-10-20 中国农业大学 农用机械的导航方法、导航装置和农用机械

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6445983B1 (en) * 2000-07-07 2002-09-03 Case Corporation Sensor-fusion navigator for automated guidance of off-road vehicles
US20070271013A1 (en) * 2006-05-18 2007-11-22 Applied Perception Inc. Vision guidance system and method for identifying the position of crop rows in a field
CN101101216A (zh) * 2006-07-05 2008-01-09 中国农业大学 棉田喷药机导航路径识别方法
CN101866181A (zh) * 2009-04-16 2010-10-20 中国农业大学 农用机械的导航方法、导航装置和农用机械
CN101750051A (zh) * 2010-01-04 2010-06-23 中国农业大学 一种视觉导航的多作物行检测方法

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
丁幼春等: "农用车辆作业环境障碍物检测方法", 《农业机械学报》 *
丁幼春等: "基于图像旋转投影的导航路径检测算法", 《农业机械学报》 *
丁幼春等: "联合收获机视觉导航控制器设计", 《农业机械学报》 *
丁幼春等: "联合收获机视觉导航控制系统设计与试验", 《农业机械学报》 *
蒋海波等: "室外机器人视觉导航的路径结构识别", 《计算机工程与应用》 *

Cited By (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104111460A (zh) * 2013-04-22 2014-10-22 苏州宝时得电动工具有限公司 自动行走设备及其障碍检测方法
CN104111460B (zh) * 2013-04-22 2018-02-23 苏州宝时得电动工具有限公司 自动行走设备及其障碍检测方法
CN103914071A (zh) * 2014-04-02 2014-07-09 中国农业大学 一种用于谷物联合收割机的视觉导航路径识别系统
CN106455481A (zh) * 2014-05-22 2017-02-22 洋马株式会社 作业车辆的行驶系统
CN104089629A (zh) * 2014-06-30 2014-10-08 西北农林科技大学 一种视觉导航电动车试验平台
CN105075463A (zh) * 2015-07-20 2015-11-25 柳州好顺科技有限公司 一种具有转弯预警系统的播种机
CN105807297A (zh) * 2016-03-16 2016-07-27 江苏理工学院 基于无线网络的火灾探测定位救援系统及方法
CN106502252B (zh) * 2016-12-05 2024-02-02 山东双力现代农业装备有限公司 多传感器融合的拖拉机导航控制系统的控制方法
CN106502252A (zh) * 2016-12-05 2017-03-15 聊城大学 多传感器融合的拖拉机导航控制系统及其定位、控制方法
CN106595637A (zh) * 2016-12-21 2017-04-26 上海华测导航技术股份有限公司 农业机械视觉导航方法
CN107390682A (zh) * 2017-07-04 2017-11-24 安徽省现代农业装备产业技术研究院有限公司 一种农用车辆自动驾驶路径跟随方法及系统
CN107390682B (zh) * 2017-07-04 2020-08-07 安徽省现代农业装备产业技术研究院有限公司 一种农用车辆自动驾驶路径跟随方法及系统
CN109405836A (zh) * 2017-08-17 2019-03-01 维布络有限公司 用于确定无人驾驶汽车的可驾驶导航路径的方法和系统
CN108153303A (zh) * 2017-12-13 2018-06-12 张庆国 一种农业机械的田间道路自动导航定位装置及方法
CN108132670A (zh) * 2018-01-30 2018-06-08 天津中德应用技术大学 基于分布式控制的多功能巡检机器人及工作方法
CN109115225A (zh) * 2018-08-31 2019-01-01 江苏大学 一种无人作业谷物联合收割机导航方法与导航装置
CN109358625A (zh) * 2018-10-25 2019-02-19 丰疆智慧农业股份有限公司 自动驾驶农机及其动力系统
CN110285790A (zh) * 2018-12-29 2019-09-27 丰疆智能科技股份有限公司 农机地形检测系统及运动控制方法
CN110226370A (zh) * 2019-04-09 2019-09-13 丰疆智能科技股份有限公司 履带式微耕机的控制方法及其控制系统
CN110209153A (zh) * 2019-04-09 2019-09-06 丰疆智能科技股份有限公司 自动收割机的倒伏行驶规划系统及其方法
CN110862279A (zh) * 2019-12-18 2020-03-06 华中农业大学 一种基于激光雷达导航的履带式无人驾驶有机肥翻抛机
CN111216708B (zh) * 2020-01-13 2022-02-11 上海华测导航技术股份有限公司 车辆导航引导系统及车辆
CN111216708A (zh) * 2020-01-13 2020-06-02 上海华测导航技术股份有限公司 车辆导航引导系统及车辆
US11572078B2 (en) 2020-01-13 2023-02-07 Shanghai Huace Navigation Technology Ltd Vehicle navigation guidance system and vehicle
CN113566807A (zh) * 2020-04-28 2021-10-29 富华科精密工业(深圳)有限公司 自动导航方法、导航装置及存储介质
CN112654886A (zh) * 2020-05-27 2021-04-13 华为技术有限公司 外参标定方法、装置、设备及存储介质
CN113102134A (zh) * 2021-02-25 2021-07-13 中国农业大学 一种智能型行道树树干喷涂装置
CN113545219A (zh) * 2021-07-13 2021-10-26 江苏大学 一种联合收获机田头转向系统及方法和联合收获机
CN113865582A (zh) * 2021-09-27 2021-12-31 南京农业大学 一种果树行间农用车辆航向角与横向偏差的测定方法
CN113865582B (zh) * 2021-09-27 2023-09-05 南京农业大学 一种果树行间农用车辆航向角与横向偏差的测定方法
CN113932816A (zh) * 2021-11-16 2022-01-14 北京中科海讯数字科技股份有限公司 基于水声数据综合态势下的航迹优化方法
CN113932816B (zh) * 2021-11-16 2023-09-22 北京中科海讯数字科技股份有限公司 基于水声数据综合态势下的航迹优化方法
CN115855067A (zh) * 2023-02-23 2023-03-28 华南农业大学 一种曲形农田边界的路径规划方法

Also Published As

Publication number Publication date
CN102506852B (zh) 2016-08-03

Similar Documents

Publication Publication Date Title
CN102506852B (zh) 农用车辆视觉导航系统及其导航方法
Chen et al. Navigation path extraction for greenhouse cucumber-picking robots using the prediction-point Hough transform
Barawid Jr et al. Development of an autonomous navigation system using a two-dimensional laser scanner in an orchard application
US20170357267A1 (en) Autonomous work vehicle obstacle detection system
CN101833092B (zh) 车辆360度障碍无死角智能检测与预警方法
US9037403B2 (en) Intensity map-based localization with adaptive thresholding
Shalal et al. A review of autonomous navigation systems in agricultural environments
CN102368158B (zh) 一种果园机械导航定位方法
CN106164798A (zh) 自主行驶作业车辆
CN101285686B (zh) 一种农业机械导航分级定位的方法和系统
US20170303466A1 (en) Robotic vehicle with automatic camera calibration capability
US11321950B2 (en) Apparatus and method for detecting lane information, and computer-readable recording medium storing computer program programmed to execute same method
CN106909148A (zh) 基于农田环境感知的农机无人驾驶导航方法
CN106164801A (zh) 自主行驶作业车辆
CN105182976A (zh) 一种农业机器人的视觉导航策略
JP2020107022A (ja) 作業車両用の障害物検知システム
CN106874887A (zh) 基于农田环境感知的农机导航控制方法
Ratner et al. Navigating an outdoor robot along continuous landmarks with ultrasonic sensing
CN111077890A (zh) 一种基于gps定位与自动避障的农业机器人的实现方法
CN114080578A (zh) 作业车辆用的自动行驶系统
CN111016901A (zh) 基于深度学习的智能驾驶决策方法及系统
CN111506069B (zh) 一种全天候全地面起重机障碍识别系统及方法
CN114322980A (zh) 获取位置坐标及绘制电子地图的方法、计算机可读存储介质和自主作业设备
CN112425344A (zh) 一种果园自走式除草机及其自主导航避障方法
Furioli et al. Cost-effective tractor localization for semi-autonomous vineyard operations

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20160623

Address after: 430070 Wuhan, Hongshan, lion street, No.

Applicant after: HUAZHONG AGRICULTURAL University

Address before: 430070 No. 1, lion hill, Hongshan District, Hubei, Wuhan

Applicant before: Ding Youchun

C14 Grant of patent or utility model
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20230919

Address after: 432600 No.53, Fuhe Avenue, Anlu City, Xiaogan City, Hubei Province

Patentee after: Hubei Yongxiang Agricultural Machinery Preparation Co.,Ltd.

Address before: 430070 No.1 Shizishan street, Hongshan District, Wuhan City, Hubei Province

Patentee before: HUAZHONG AGRICULTURAL University

TR01 Transfer of patent right