CN111347388A - 一种基于履带式多功能机器人及杂草识别方法 - Google Patents

一种基于履带式多功能机器人及杂草识别方法 Download PDF

Info

Publication number
CN111347388A
CN111347388A CN202010276452.8A CN202010276452A CN111347388A CN 111347388 A CN111347388 A CN 111347388A CN 202010276452 A CN202010276452 A CN 202010276452A CN 111347388 A CN111347388 A CN 111347388A
Authority
CN
China
Prior art keywords
module
hanging
main body
robot
green plant
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010276452.8A
Other languages
English (en)
Other versions
CN111347388B (zh
Inventor
王瑞利
随洋
马啸
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inner Mongolia Autonomous Region Institute Of Biotechnology
Original Assignee
Inner Mongolia Autonomous Region Institute Of Biotechnology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inner Mongolia Autonomous Region Institute Of Biotechnology filed Critical Inner Mongolia Autonomous Region Institute Of Biotechnology
Priority to CN202010276452.8A priority Critical patent/CN111347388B/zh
Publication of CN111347388A publication Critical patent/CN111347388A/zh
Application granted granted Critical
Publication of CN111347388B publication Critical patent/CN111347388B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J5/00Manipulators mounted on wheels or on carriages
    • B25J5/005Manipulators mounted on wheels or on carriages mounted on endless tracks or belts
    • AHUMAN NECESSITIES
    • A01AGRICULTURE; FORESTRY; ANIMAL HUSBANDRY; HUNTING; TRAPPING; FISHING
    • A01DHARVESTING; MOWING
    • A01D46/00Picking of fruits, vegetables, hops, or the like; Devices for shaking trees or shrubs
    • A01D46/30Robotic devices for individually picking crops
    • AHUMAN NECESSITIES
    • A01AGRICULTURE; FORESTRY; ANIMAL HUSBANDRY; HUNTING; TRAPPING; FISHING
    • A01MCATCHING, TRAPPING OR SCARING OF ANIMALS; APPARATUS FOR THE DESTRUCTION OF NOXIOUS ANIMALS OR NOXIOUS PLANTS
    • A01M7/00Special adaptations or arrangements of liquid-spraying apparatus for purposes covered by this subclass
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J18/00Arms
    • B25J18/02Arms extensible
    • B25J18/025Arms extensible telescopic
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J19/00Accessories fitted to manipulators, e.g. for monitoring, for viewing; Safety devices combined with or specially adapted for use in connection with manipulators
    • B25J19/005Accessories fitted to manipulators, e.g. for monitoring, for viewing; Safety devices combined with or specially adapted for use in connection with manipulators using batteries, e.g. as a back-up power source
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J19/00Accessories fitted to manipulators, e.g. for monitoring, for viewing; Safety devices combined with or specially adapted for use in connection with manipulators
    • B25J19/02Sensing devices
    • B25J19/021Optical sensing devices
    • B25J19/023Optical sensing devices including video camera means

Landscapes

  • Engineering & Computer Science (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Environmental Sciences (AREA)
  • Multimedia (AREA)
  • Insects & Arthropods (AREA)
  • Pest Control & Pesticides (AREA)
  • Wood Science & Technology (AREA)
  • Zoology (AREA)
  • Catching Or Destruction (AREA)

Abstract

本发明涉及一种基于履带式多功能机器人,包括:车体、行走模块、感知模块、控制模块、通信模块、作业模块及挂接平台;其中,行走模块、感知模块、控制模块、通信模块、挂接平台均设置于车体上,作业模块通过挂接平台与车体连接;作业模块为采摘机构或喷药机构或巡检机构;行走模块包括驱动模块及履带。本发明通过可拆卸的挂接平台实现多种作业功能的快速转换,可以适用农业生产过程中的多种作业任务。同时,本发明的履带式多功能机器人还具备自动巡检功能,可以在启动采摘、喷药等作业任务之前先执行巡检模式,基于机器视觉技术识别出是否需要作物的喷药及果实的采摘,具备更强的自动化水平,可极大提高农业生产效率。

Description

一种基于履带式多功能机器人及杂草识别方法
技术领域
本发明涉及农业机器人技术领域,特别是涉及一种基于履带式多功能机器人及该机器人的杂草识别方法。
背景技术
开发农业机器人是21世纪农业机械自动化和智能化的发展趋势之一。用于采摘、收获、除草、修剪、耕作、嫁接和农产品分级等方面的各具特色的农业机器人已在许多国家得以研究与开发应用。例如,公开号为CN105746092A的专利申请公开了一种新型履带式苹果采摘机器人,主要包括履带式移动平台、采摘系统和控制系统,其特征是履带式移动平台上集成四个苹果采摘机械臂,控制系统采用ARM处理器,对采摘机械臂以及末端执行器上的各种传感器信息进行融合处理得出相应的控制信号,从而对采摘机械臂以及末端执行器上的伺服电机进行相应控制,驱动采摘机械臂和末端执行器对苹果进行自动采摘。公开号为CN103380766A的专利申请公开了一种温室自动喷药机器人,其包括轨道行走部件、固定于所述轨道行走部件上的药液喷施部件以及分别与所述轨道行走部件和药液喷施部件连接的控制部件。然而,这些农业机器人只具有特定的功能,适应于特定的环境,通用性差,不便于对系统进行扩展和改进。
发明内容
为解决上述技术缺陷,本发明提供了一种多功能的农业机器人,可以通过可拆卸的挂接平台实现多种作业功能的快速转换,从而适用了农业生产的多种作业任务,提高了农业机器人的利用率与性价比,降低了作业成本。
为实现上述功能,本发明采用的技术方案是:
一种基于履带式多功能机器人,包括车体、行走模块、感知模块、控制模块、通信模块、作业模块及挂接平台;其中,所述行走模块、感知模块、控制模块、通信模块、挂接平台均设置于车体上,所述作业模块通过挂接平台与车体连接;所述行走模块、感知模块、通信模块、作业模块、挂接平台均与控制模块电连接;所述作业模块为采摘机构或喷药机构或巡检机构。
优选地,所述挂接平台包括左弓形部件、右弓形部件、转动轮盘、滑动装置,其中,所述左弓形部件、右弓形部件之一与车体固定连接,另一通过转动轮盘及滑动装置与车体滑动连接,所述左弓形部件、右弓形部件的弓形上部具有锯齿状区域、弓形下部具有凸出的连接柱、中部具有小凹槽;所述挂接平台上还设有通信及供电接口;所述转动轮盘具有锁止装置。
优选地,所述作业模块包括作业机构及挂接主体,所述挂接主体包括作业安装部、上挂接部、下挂接部;其中,所述作业安装部设有用于安装作业机构的安装槽;所述上挂接部包括上挂接主体及设于上挂接主体内且分别凸出上挂接主体两侧的两个缓冲连接柱,所述两个缓冲连接柱在上挂接主体内部通过第一弹簧连接;所述上挂接主体的上部左右侧部设有软体部;所述下挂接部包括下挂接主体及分别设于下挂接主体下部两侧的两个凹形容纳件,所述两个凹形容纳件在所述下挂接主体内通过第二弹簧连接;所述挂接主体上还设有通信及供电线缆。
优选地,所述采摘机构包括挂接模块、升降平台、可伸缩机械臂、采摘机构、第二摄像模块及测距模块,所述挂接模块与所述升降平台固定连接,所述可伸缩机械臂安装在所述升降平台上,所述可伸缩机械臂的末端安装有采摘机构、第二摄像模块及测距模块。
优选地,所述喷药机构包括电动伸缩杆一、药液箱、加压器、导液管及喷头,所述导液管经所述加压器与药液箱连接,所述导液管与喷头连接,所述导液管及喷头设置于电动伸缩杆一上。
优选地,所述巡检机构包括电动伸缩杆二及第三摄像模块,所述第三摄像模块设置于电动伸缩杆的顶部。
优选地,所述感知模块包括测速传感器、姿态传感器、定位器及第一摄像模块;所述控制模块用于基于测速传感器测得的所述车速、姿态传感器测得的姿态、定位器测得的位置信息及第一摄像模块测得的环境图像实时调整车辆的行进速度及方向,以实现按照规划路线行驶及自动避障。
优选地,还包括电力模块,所述电力模块包括蓄电池及充电模块。
优选地,还包括与蓄电池连接的太阳能充电板
优选地,还包括手持遥控器,用于通过无线通信与所述控制模块连接,用于从所述通信模块接收并显示车辆的实时运动状态,以及,向所述通信模块发送行驶控制指令。
本发明的有益效果是:本发明的履带式多功能机器人通过可拆卸的挂接平台实现多种作业功能的快速转换,可以适用农业生产过程中的多种作业任务。同时,本发明的履带式多功能机器人还具备自动巡检功能,可以在启动采摘、喷药等作业任务之前先执行巡检模式,具体基于机器视觉技术识别出是否需要作物的喷药及果实的采摘,具备更强的自动化水平,可极大提高农业生产效率。
附图说明
下面结合附图和实施例对本发明进一步说明。
图1是本发明的履带式多功能机器人的整体结构示意图;
图2是对本发明的图1中A区域的挂接平台及挂接主体配合实现挂接的原理的示意图;
图3是本发明的履带式多功能机器人的功能模块示意图。
图中:
车体1;行走模块2;感知模块3;控制模块4;通信模块5;作业模块6;作业安装部6.1;上挂接部6.2;下挂接部6.3;缓冲连接柱6.4;凹形容纳件6.5;软体部6.6;弓形部件7.1;右弓形部件7.2;转动轮盘7.3;连接柱7.4。
具体实施方式
为了能够更加清楚地理解本发明的上述目的、特征和优点,下面结合附图和具体实施方式对本发明进行进一步的详细描述,这些附图均为简化的示意图,仅以示意方式说明本发明的基本结构,因此其仅显示与本发明有关的构成,需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。
在下面的描述中阐述了很多具体细节以便于充分理解本发明,但是本发明还可以采用其他不同于在此描述的其他方式来实施,因此,本发明的保护范围并不受下面公开的具体实施例的限制。
除非另有定义,本文所使用的所有的技术和科学术语与术语本发明的技术领域的技术人员通常理解的含义相同。本文中在本发明的说明书中所使用的术语只是为了描述具体的实施例的目的,不是旨在于限制本发明。本文所使用的术语“和/或”包括一个或多个相关的所列项目的任意的和所有的组合。
在本申请的描述中,需要理解的是,术语“中心”、“纵向”、“横向”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本申请和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本申请保护范围的限制。此外,术语“第一”、“第二”等仅用于描述目的,而不能理解为指示或暗示相对重要性或隐含指明所指示的技术特征的数量。因此,限定有“第一”、“第二”等的特征可以明示或者隐含地包括一个或者更多个该特征。在本发明创造的描述中,除非另有说明,“多个”的含义是两个或两个以上。
在本申请的描述中,需要说明的是,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或一体地连接;可以是机械连接,也可以是电连接;可以直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通。对于本领域的普通技术人员而言,可以通过具体情况理解上述术语在本申请中的具体含义。
如图1-2所示,本发明的第一实施方式提供一种基于履带式多功能机器人包括:车体1、行走模块2、感知模块3、控制模块4、通信模块5、作业模块6及挂接平台;其中,所述行走模块2、感知模块3、控制模块4、通信模块5、挂接平台均设置于车体1上,所述作业模块6通过挂接平台与车体1连接;所述行走模块2、感知模块3、通信模块4、通信模块5、作业模块6、挂接平台均与控制模块4电连接;所述作业模块6为采摘机构或喷药机构或巡检机构;所述行走模块2包括驱动模块及履带。
需要说明的是,现有的农业机器人都是为解决专门农业生产中的自动化与智能化而研制的,因而只具有特定的功能,适应于特定的环境,通用性差,不便于对系统进行扩展和改进,而且对于农业生产来说,具有明显的季节性,即,不同的作物生长阶段所需要的农业劳作存在巨大的差别。所以,上述现有的农业机器人的使用效率很低、成本高。为了解决该技术缺陷,本发明通过挂接平台实现了不同的作业模块6之间的快速切换,即,基于可拆卸的挂接平台实现了采摘机构、喷药机构、巡检机构等不同作业模式的快速切换。同时,履带式行走机构可以适应更多的农田环境,例如旱田、水田等,具有更强的适应性。
基于图2所示,对图1中的A区域进行详细解释。所述挂接平台包括左弓形部件7.1、右弓形部件7.2、转动轮盘7.3、滑动装置(图中未示出),其中,所述左弓形部件7.1、右弓形部件7.2之一与车体1固定连接,另一通过转动轮盘7.3及滑动装置与车体1滑动连接,所述左弓形部件7.1、右弓形部件7.2的弓形上部具有锯齿状区域、弓形下部具有凸出的连接柱7.4、中部具有小凹槽;所述挂接平台上还设有通信及供电接口(图中未示出);所述转动轮盘7.3具有锁止装置。
所述作业模块6包括作业机构(图中未示出)及挂接主体,所述挂接主体包括作业安装部6.1、上挂接部6.2、下挂接部6.3;其中,所述作业安装部6.1设有用于安装作业机构的安装槽(图中未示出);所述上挂接部6.2包括上挂接主体及设于上挂接主体内且分别凸出上挂接主体两侧的两个缓冲连接柱6.4,所述两个缓冲连接柱6.4在上挂接主体内部通过第一弹簧连接;所述上挂接主体的上部左右侧部设有软体部6.6;所述下挂接部6.3包括下挂接主体及分别设于下挂接主体下部两侧的两个凹形容纳件6.5,所述两个凹形容纳件6.5在所述下挂接主体内通过第二弹簧连接;所述挂接主体上还设有通信及供电线缆(图中未示出)。
需要说明的是,挂接平台位于车辆本体1上,前述不同的作业模块6均包括挂接主体以及与挂接主体连接的具体作业机构,该挂接主体具有相同的结构,如此以来,增强了模块的通用性,即,可以通过相同的、通用的挂接装置实现车辆本体1与不同作业模块6的快速切换安装,也就不需要为每一种农业作业任务配置一整套的车辆及作业结构,极大的降低了使用成本。
同时,对于该具体的挂接结构来说,两个弓形部件的一个是固定于车辆本体的,另一移动,至于哪个是移动的,由于并不影响本发明的技术方案的实施,所以,本发明对此不作具体限定;使用时,用户通过转动位于移动式弓形部件上的转动轮盘带动该弓形部件在位于车体1上的滑槽中平移,当移动式弓形部件平移到与挂接主体紧密结合时启动转动轮盘上的锁止装置,此时,即可实现对夹持挂接主体的夹持固定,而对于平移的具体实现方式可以是基于丝杆、齿轮等结构,由于平移及锁止结构属于现有技术,本领域技术人员可以基于现有技术进行自主选择,例如,可基于专利公开号为CN206200170U、CN107855932A所公开的原理进行适应性变形来实现本发明的移动式弓形部件的平移及锁止,本发明对此不作限定。两个弓形部件除了可移动式与固定式这一区别之外的主体结构均是相同的,具体地,弓形部件的上部具有锯齿形的构造,下部具有凸出的连接柱7.4,中部具有承接缓冲连接柱6.4的小凹槽;与此相对应的,连接于作业机构的挂接主体的上部与弓形部件的上述锯齿形构造对应的设有软体部6.6,挂接主体的下部则设有凹型的容纳件6.5。于是,在弓形部件与挂接结构相接触时:在上部,弓形部件的锯齿形构造压入挂接主体的软体部6.6从而实现上部的牢固接触,不易出现滑动的情况;在下部,弓形部件的凸出连接柱7.4插入连接主体的下部的凹型容纳件6.5,实现了下部的牢固安装;在中部,弓形部件的小凹槽承接了缓冲柱6.4,从而实现了中部的稳定连接。由于挂接主体的中部还设有位于挂接主体内部并从挂接主体两侧边凸出一部分的连接柱6.4,该连接柱6.4是独立的两个,且二者在挂接主体的内部通过弹簧连接在一起,下部的凹形容纳件也具有类似的机构,于是,基于该特殊结构,可以实现在弓形部件与挂接主体接触时起到缓冲的作用,避免了粗暴操作对部件的损坏,而且,在具体执行作业任务时该结构还提高了部件间的阻尼度,进一步避免了金属刚性部件之间硬性接触导致的损坏。综上所述,本发明的挂接方式同时达到了牢固挂接与韧性挂接两方面的技术效果。
另外,由于本发明的农业机械是机器人,即其具备自动工作模式,所以,本发明还在弓形部件和连接主体上分别设置了通信及供电接口、通信及供电线缆。于是,在完成了作业模块与车辆本体的机械连接之后,用户此时只需要简单的将通信及供电线缆插入通信及供电接口就可以实现作业模块6与车辆本体1的通信连接及电力供应。对于具有自动工作模式的履带式多功能机器人来说,其作业模块可以在车辆本体上的控制模块的控制下实现各种作业任务的执行。当然,各作业模块也可以具备完全独立的控制模块,此时则只需要作业模块与车体实现电力连接即可;除此之外,各作业模块也可以具备半独立的控制模块,即,车体上的控制模块与作业模块自身的控制模块、或者车体上的控制模块、手持遥控器8与作业模块自身的控制模块多方共同实现对作业模块的作业任务的控制,本发明对此不作限定。
根据本发明实施例,所述采摘机构包括挂接模块、升降平台、可伸缩机械臂、采摘机构、第二摄像模块及测距模块,所述挂接模块与所述升降平台固定连接,所述可伸缩机械臂安装在所述升降平台上,所述可伸缩机械臂的末端安装有采摘机构、第二摄像模块及测距模块。基于该构造,可以基于第二摄像模块识别定位果实的方位、基于测距模块测得果实与采摘机构的距离,从而可以准确的摘取果实。
根据本发明实施例,所述喷药机构包括电动伸缩杆一、药液箱、加压器、导液管及喷头,所述导液管经所述加压器与药液箱连接,所述导液管与喷头连接,所述导液管及喷头设置于电动伸缩杆一上。
根据本发明实施例,所述巡检机构包括电动伸缩杆二及第三摄像模块,所述第三摄像模块设置于电动伸缩杆的顶部。
本发明还提供了第二实施方式,该实施方式与第一实施方式相比,主要改进之处在于:在第一实施方式的基础上增加了车辆的自动控制功能,从而可以实现车辆按照预定轨迹(例如,可以是用户事先输入的作业轨迹、农业机器人自主确定的作业轨迹还可以是农业机器人在用户输入的作业轨迹的基础上进一步基于检测到的实施障碍物信息规划出的新轨迹,等等),通过车辆自主运行作业任务,可以解放人力,进一步提高用户的使用体验。
根据本发明实施例,在第一实施方式的基础上,本发明的所述感知模块3包括测速传感器、姿态传感器、定位器及第一摄像模块;所述控制模块用于基于测速传感器测得的所述车速、姿态传感器测得的姿态、定位器测得的位置信息及第一摄像模块测得的环境图像实时调整车辆的行进速度及方向,以实现按照规划路线行驶及自动避障。
需要说明的是,在农业机器人执行作业任务之前,用户可以将设定好的作业任务及作业轨迹输入到农业机器人中,然后连接好对应的作业模块之后就可以启动农业机器人的作业功能。对于作业指令的输入方式,既可以是数据卡输入、程序烧录,也可以是通过有线或无线连接的外置终端实现,例如,该外置终端可以是手持遥控器,具体地,还可以是智能手机、平板电脑、PDA等移动终端,本发明对此不做限定。同时,农业机器人在行驶的过程中可以通过车载的第一摄像模块、定位模块、测速传感器、姿态传感器等实时了解自身的运动状况及周边障碍物信息,并与预设的轨迹进行比较从而确定是否需要调整运动状态;与此同时,手持遥控器也可以通过无线通信与所述控制模块连接以从所述通信模块接收并显示车辆的实时运动状态,于是,在用户需要临时改变作业轨迹或、农业机器人的作业轨迹偏离或未躲避障碍物等情况下,由用户向所述通信模块发送行驶控制指令,即实现人工控制的接管或短时干预,进一步提升了农业机器人的作业效果。所述手持遥控器不仅局限于对车辆运动状态的控制,还可以包括向控制模块发送对各作业模块的控制指令,例如,升降杆的升/降、摄像模块的启/闭、启动/停止喷药等。
根据本发明实施例,还包括电力模块,所述电力模块包括蓄电池及充电模块。
需要说明的是,蓄电池可以为农业机器人提供足够的电力支持,同时,由于农业机器人在户外作业,所以,可以选择进一步设置太阳能充电板与蓄电池连接,进一步增强其续航能力。另外,也可以设置自动充电功能,即,农业机器人实时监测其蓄电情况,并在电力不足以支持后续作业时及时返回充电装置处进行自动充电,由于自动充电的轨迹规划等属于现有技术,本发明对此不再赘述。
本发明还提供了第三实施方式,本实施方式与前述实施方式的主要区别在于,增加了对巡检机构的具体限定。为了进一步实现农业作业的自动化,本发明增加了农业机器人的巡检功能,即,由农业机器人在农田中按一定轨迹对农田作物进行巡检,并基于本地图像智能化处理对包括杂草、农作物长势(包括作物高低、果实情况、病害情况等)等农情进行识别及统计分析,并生成巡检报告指导种植户及时浇水、施肥、打药等。
下面以对农情中的杂草为例进行巡检过程的说明:
S1:履带式多功能机器人行驶至巡检初始位置,控制第三摄像模块实时获取农田图像,并传输至控制模块4;
S2:所述控制模块4对所述农田图像进行处理以识别杂草,具体为:
S21、图像预处理:基于绿色植物检测算法去除图像中的土壤像素,再通过中值滤波算法去除噪声影响以保留绿色植物的边缘,最后将图像转换为二进制。该步骤中,由于检测的对象是植物,所以需要首先通过绿色植物检测算法来去除非检测目标的土壤像素,其中的绿色植物的检测公式为:
I=2×G-R-B
式中,I表示处理后绿色植物图像,R表示RGB图像中的红色像素,G表示RGB图像中的绿色像素,B表示RGB图像中的蓝色像素。
S22、基于连通域面积值将预处理后的图像中的小对象去除。该步骤中,由于草体幼苗及落叶等较小的对象并不会影响农作物的生长,所以,有必要将其去除以减轻控制模块的处理负荷。
S23、通过阈值分割算法提取出多个绿色植物区域,并对各个区域附加标签;用邻域跟踪算法提取所述绿色植物区域的叶片的面积S、周长P、最小外接矩长L和最小外接矩宽W;
S24、将步骤S23中获得的参数S、P、L、W以及预存的杂草特征数据库中的参数s、p、l、w按照统一标准进行归一化,然后,基于下述公式计算各绿色植物区域与预存的杂草特征数据的相似度,将相似度大于阈值的绿色植物区域识别为杂草。该步骤中的相似度计算方法可以为
Figure BDA0002444955550000111
式中,Di表示第i个绿色植物区域与杂草特征的相似度,ω14表示权重,
Figure BDA0002444955550000112
分别表示所述各个绿色植物区域的叶片的面积、周长、最小外接矩长和最小外接矩宽的归一化数据,
Figure BDA0002444955550000113
分别表示预存的杂草特征数据中的叶片的面积、周长、最小外接矩长和最小外接矩宽的归一化数据,以上预存的杂草特征数据可以通过预先建立训练模型获得,这属于本领域的现有技术,本申请对此不作限定。基于该步骤,本发明在对杂草进行识别了同时考虑了作物植株与杂草在叶片的面积、周长、最小外接矩长和最小外接矩宽方面的相似程度,显著提高了杂草的识别准确度。
S3、控制模块4将识别出的杂草数量与从定位器获得的位置信息进行关联存储;
S4、农业机器人行驶至后续目标点并同样执行上述步骤S2-S3,直至行驶至预设巡检轨迹的终点;
S5、控制模块4对前述存储的杂草数量与对应的位置信息进行统计分析以生成巡检报告,并将巡检报告进行本地存储及通过通信模块发送至手持遥控器。
需要说明的是,基于本实施方式的上述巡检过程,农业机器人可以在农田中按设定轨迹自动执行巡检任务,通过视觉识别算法快速识别当前农情,并能够基于实时农情生成对应的巡检报告,用户则可以在手持遥控器及时查看巡检报告,从而可以确定是否需要执行采摘、喷药等作业任务,极大的提高了农业生产的效率,同时,由于该履带式多功能机器人的车体可快速连接采摘、喷药、巡检等多种不同的作业模块,也极大的降低了农业生产的成本。
对于本领域普通技术人员明显的是,上述公开的算法可以以多种形式被传送至处理装置,该处理装置可包括任何现有的电子控制单元或专用的电子控制单元。所述形式包括但不限于,永久存储在非可写的存储介质(例如,ROM装置)上的信息以及可更改地存储在刻写的存储介质(例如,软盘、磁盘、磁带、CD、RAM装置)和其他磁性和光学介质上的信息。所述算法还可以在软件可执行的对象中实现。或者,可利用合适的硬件组件(例如,专用集成电路(ASIC)、状态机、控制器)或其它硬件组件或装置或者硬件、软件和固件组件的组合整体或部分地实现所述算法。
以上依据本发明的理想实施例为启示,通过上述的说明内容,相关人员完全可以在不偏离本项发明技术思想的范围内,进行多样的变更以及修改。本项发明的技术性范围并不局限于说明书上的内容,必须要根据权利要求范围来确定技术性范围。

Claims (10)

1.一种基于履带式多功能机器人,其特征在于,包括车体、行走模块、感知模块、控制模块、通信模块、作业模块及挂接平台;其中,所述行走模块、感知模块、控制模块、通信模块、挂接平台均设置于车体上,所述作业模块通过挂接平台与车体连接;所述行走模块、感知模块、通信模块、作业模块、挂接平台均与控制模块电连接;所述作业模块为采摘机构或喷药机构或巡检机构;所述行走模块包括驱动模块及履带。
2.根据权利要求1所述的履带式多功能机器人,其特征在于:所述挂接平台包括左弓形部件、右弓形部件、转动轮盘、滑动装置,其中,所述左弓形部件、右弓形部件之一与车体固定连接,另一通过转动轮盘及滑动装置与车体滑动连接,所述左弓形部件、右弓形部件的弓形上部具有锯齿状区域、弓形下部具有凸出的连接柱、中部具有小凹槽;所述挂接平台上还设有通信及供电接口;所述转动轮盘具有锁止装置。
3.根据权利要求2所述的履带式多功能机器人,其特征在于:所述作业模块包括作业机构及挂接主体,所述挂接主体包括作业安装部、上挂接部、下挂接部;其中,所述作业安装部设有用于安装作业机构的安装槽;所述上挂接部包括上挂接主体及设于上挂接主体内且分别凸出上挂接主体两侧的两个缓冲连接柱,所述两个缓冲连接柱在上挂接主体内部通过第一弹簧连接;所述上挂接主体的上部左右侧部设有软体部;所述下挂接部包括下挂接主体及分别设于下挂接主体下部两侧的两个凹形容纳件,所述两个凹形容纳件在所述下挂接主体内通过第二弹簧连接;所述挂接主体上还设有通信及供电线缆。
4.根据权利要求1-3任一项所述的履带式多功能机器人,其特征在于:所述采摘机构包括挂接模块、升降平台、可伸缩机械臂、采摘机构、第二摄像模块及测距模块,所述挂接模块与所述升降平台固定连接,所述可伸缩机械臂安装在所述升降平台上,所述可伸缩机械臂的末端安装有采摘机构、第二摄像模块及测距模块。
5.根据权利要求1-3任一项所述的履带式多功能机器人,其特征在于:所述喷药机构包括电动伸缩杆一、药液箱、加压器、导液管及喷头,所述导液管经所述加压器与药液箱连接,所述导液管与喷头连接,所述导液管及喷头设置于电动伸缩杆一上。
6.根据权利要求1-3任一项所述的履带式多功能机器人,其特征在于:所述巡检机构包括电动伸缩杆及第三摄像模块,所述摄像头设置于电动伸缩杆的顶部。
7.根据权利要求1所述的履带式多功能机器人,其特征在于:所述感知模块包括测速传感器、姿态传感器、定位器及第一摄像模块;所述控制模块用于基于测速传感器测得的所述车速、姿态传感器测得的姿态、定位器测得的位置信息及第一摄像模块测得的环境图像实时调整车辆的行进速度及方向,以实现按照规划路线行驶及自动避障。
8.根据权利要求1所述的履带式多功能机器人,其特征在于:还包括电力模块,所述电力模块包括蓄电池及充电模块。
9.根据权利要求8所述的履带式多功能机器人,其特征在于:还包括与蓄电池连接的太阳能充电板。
10.一种基于履带式多功能机器人巡检过程中的杂草识别方法,应用于权利要求1-9中任意一项所述的履带式多功能机器人,其特征在于:
S21、图像预处理:基于绿色植物检测算法去除图像中的土壤像素,再通过中值滤波算法去除噪声影响以保留绿色植物的边缘,最后将图像转换为二进制;该步骤中,由于检测的对象是植物,所以需要首先通过绿色植物检测算法来去除非检测目标的土壤像素,其中的绿色植物的检测公式为:
I=2×G-R-B
式中,I表示处理后绿色植物图像,R表示RGB图像中的红色像素,G表示RGB图像中的绿色像素,B表示RGB图像中的蓝色像素;
S22、基于连通域面积值将预处理后的图像中的小对象去除,该步骤中,由于草体幼苗及落叶等较小的对象并不会影响农作物的生长,所以,有必要将其去除以减轻控制模块的处理负荷;
S23、通过阈值分割算法提取出多个绿色植物区域,并对各个区域附加标签;用邻域跟踪算法提取所述绿色植物区域的叶片的面积S、周长P、最小外接矩长L和最小外接矩宽W;
S24、将步骤S23中获得的参数S、P、L、W以及预存的杂草特征数据库中的参数s、p、l、w按照统一标准进行归一化,然后,基于下述公式计算各绿色植物区域与预存的杂草特征数据的相似度,将相似度大于阈值的绿色植物区域识别为杂草;
该步骤中的相似度计算方法为
Figure FDA0002444955540000031
式中,Di表示第i个绿色植物区域与杂草特征的相似度,ω14表示权重,
Figure FDA0002444955540000032
分别表示所述各个绿色植物区域的叶片的面积、周长、最小外接矩长和最小外接矩宽的归一化数据,
Figure FDA0002444955540000033
分别表示预存的杂草特征数据中的叶片的面积、周长、最小外接矩长和最小外接矩宽的归一化数据;
以上预存的杂草特征数据通过预先建立训练模型获得。
CN202010276452.8A 2020-04-09 2020-04-09 一种基于履带式多功能机器人及杂草识别方法 Active CN111347388B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010276452.8A CN111347388B (zh) 2020-04-09 2020-04-09 一种基于履带式多功能机器人及杂草识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010276452.8A CN111347388B (zh) 2020-04-09 2020-04-09 一种基于履带式多功能机器人及杂草识别方法

Publications (2)

Publication Number Publication Date
CN111347388A true CN111347388A (zh) 2020-06-30
CN111347388B CN111347388B (zh) 2024-03-08

Family

ID=71189327

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010276452.8A Active CN111347388B (zh) 2020-04-09 2020-04-09 一种基于履带式多功能机器人及杂草识别方法

Country Status (1)

Country Link
CN (1) CN111347388B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112937216A (zh) * 2021-03-26 2021-06-11 吉林大学 一种玉米行间作业机器人及其行间行驶控制方法

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0779681A (ja) * 1993-06-28 1995-03-28 Mayekawa Mfg Co Ltd 異種植物検出方法と該検出方法を用いた雑草駆除方法
CN102184392A (zh) * 2011-05-25 2011-09-14 中国水稻研究所 基于dsp的水稻杂草识别系统及其识别方法
CN103778427A (zh) * 2012-10-23 2014-05-07 内蒙古大学 绿色作物特征提取方法以及农业机械视觉导航系统
CN204907029U (zh) * 2015-09-08 2015-12-30 陕西煜琦农业科技有限公司 一种多功能田园管理机
CN207295860U (zh) * 2017-05-27 2018-05-01 福建西河卫浴科技有限公司 一种手持花洒用固定架
WO2018146518A1 (en) * 2017-02-10 2018-08-16 Airmow Holdings Pty Ltd Method and apparatus for estimating area
CN109522929A (zh) * 2018-10-16 2019-03-26 南京农业大学 一种基于多源图像融合的自然环境下麦田杂草识别方法
CN209012603U (zh) * 2018-09-30 2019-06-21 宁波兴明液压器材有限公司 一种便于连接的液压系统用管接头
CN213290258U (zh) * 2020-04-09 2021-05-28 内蒙古自治区生物技术研究院 一种基于履带式多功能机器人

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0779681A (ja) * 1993-06-28 1995-03-28 Mayekawa Mfg Co Ltd 異種植物検出方法と該検出方法を用いた雑草駆除方法
CN102184392A (zh) * 2011-05-25 2011-09-14 中国水稻研究所 基于dsp的水稻杂草识别系统及其识别方法
CN103778427A (zh) * 2012-10-23 2014-05-07 内蒙古大学 绿色作物特征提取方法以及农业机械视觉导航系统
CN204907029U (zh) * 2015-09-08 2015-12-30 陕西煜琦农业科技有限公司 一种多功能田园管理机
WO2018146518A1 (en) * 2017-02-10 2018-08-16 Airmow Holdings Pty Ltd Method and apparatus for estimating area
CN207295860U (zh) * 2017-05-27 2018-05-01 福建西河卫浴科技有限公司 一种手持花洒用固定架
CN209012603U (zh) * 2018-09-30 2019-06-21 宁波兴明液压器材有限公司 一种便于连接的液压系统用管接头
CN109522929A (zh) * 2018-10-16 2019-03-26 南京农业大学 一种基于多源图像融合的自然环境下麦田杂草识别方法
CN213290258U (zh) * 2020-04-09 2021-05-28 内蒙古自治区生物技术研究院 一种基于履带式多功能机器人

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112937216A (zh) * 2021-03-26 2021-06-11 吉林大学 一种玉米行间作业机器人及其行间行驶控制方法
CN112937216B (zh) * 2021-03-26 2024-01-23 吉林大学 一种玉米行间作业机器人及其行间行驶控制方法

Also Published As

Publication number Publication date
CN111347388B (zh) 2024-03-08

Similar Documents

Publication Publication Date Title
CN213290258U (zh) 一种基于履带式多功能机器人
Scarfe et al. Development of an autonomous kiwifruit picking robot
CN110122073B (zh) 一种基于机器视觉的草莓采摘机器人
Moorehead et al. Automating orchards: A system of autonomous tractors for orchard maintenance
CN111837640A (zh) 一种基于视觉识别的山地果园智能采摘机器人
CN212146406U (zh) 一种基于空中轨道式多功能机器人
CN108811766B (zh) 一种人机交互式温室果蔬采收机器人系统及其采收方法
CN114080905B (zh) 基于数字双胞胎的采摘方法及云采摘机器人系统
CN216058333U (zh) 一种智能移动水果采摘机器人
CN211745437U (zh) 一种高架果蔬智能采摘机器人
CN113330915B (zh) 双目视觉识别的自适应棉花收获方法及智能机械收获装置
CN111347388B (zh) 一种基于履带式多功能机器人及杂草识别方法
CN209787899U (zh) 一种园林式水果采摘机器人
CN111360782A (zh) 一种基于空中轨道式多功能机器人
CN111338357A (zh) 一种基于轮式多功能机器人
CN212232163U (zh) 一种基于图像处理的自捡拾花生收获机
CN212083995U (zh) 一种基于轮式多功能机器人
CN210093992U (zh) 一种山楂采摘机器人
Yang et al. Vision based fruit recognition and positioning technology for harvesting robots
Feng et al. Design and test of harvesting robot for table-top cultivated strawberry
CN116749173A (zh) 水果采摘机器人的管控方法及系统、水果采摘机器人
CN116257081A (zh) 无人机与地面无人车协同去雄作业系统
CN113812334A (zh) 一种农业生产领域人工智能机器人装置
CN220528640U (zh) 一种击打式松果采摘机器人
CN117016202A (zh) 一种设施农业智能巡检采收装置及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant