CN108271765A - 一种多功能爪头监控环境机器人及其植物识别方法 - Google Patents
一种多功能爪头监控环境机器人及其植物识别方法 Download PDFInfo
- Publication number
- CN108271765A CN108271765A CN201810011691.3A CN201810011691A CN108271765A CN 108271765 A CN108271765 A CN 108271765A CN 201810011691 A CN201810011691 A CN 201810011691A CN 108271765 A CN108271765 A CN 108271765A
- Authority
- CN
- China
- Prior art keywords
- plant
- color space
- plant image
- controller
- claw head
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 25
- 238000012544 monitoring process Methods 0.000 title claims abstract description 16
- 238000005507 spraying Methods 0.000 claims abstract description 46
- 239000003814 drug Substances 0.000 claims abstract description 28
- 238000009333 weeding Methods 0.000 claims abstract description 12
- 230000008569 process Effects 0.000 claims abstract description 3
- 210000000078 claw Anatomy 0.000 claims description 66
- 239000000575 pesticide Substances 0.000 claims description 41
- 238000012545 processing Methods 0.000 claims description 22
- 239000013598 vector Substances 0.000 claims description 19
- 230000009467 reduction Effects 0.000 claims description 18
- 239000007788 liquid Substances 0.000 claims description 10
- 238000004364 calculation method Methods 0.000 claims description 9
- 238000000605 extraction Methods 0.000 claims description 9
- 230000011218 segmentation Effects 0.000 claims description 9
- 238000003860 storage Methods 0.000 claims description 8
- 230000003044 adaptive effect Effects 0.000 claims description 6
- 238000006243 chemical reaction Methods 0.000 claims description 5
- 238000004140 cleaning Methods 0.000 claims description 4
- 229940079593 drug Drugs 0.000 abstract 1
- 241000196324 Embryophyta Species 0.000 description 113
- 241000234435 Lilium Species 0.000 description 10
- 238000001514 detection method Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 239000003086 colorant Substances 0.000 description 3
- 238000005286 illumination Methods 0.000 description 3
- 239000002689 soil Substances 0.000 description 3
- 238000013461 design Methods 0.000 description 2
- 238000009826 distribution Methods 0.000 description 2
- 230000005520 electrodynamics Effects 0.000 description 2
- 230000005484 gravity Effects 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 206010063385 Intellectualisation Diseases 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000009412 basement excavation Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000009529 body temperature measurement Methods 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 239000004744 fabric Substances 0.000 description 1
- 238000009313 farming Methods 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 239000000447 pesticide residue Substances 0.000 description 1
- 230000000704 physical effect Effects 0.000 description 1
- 231100000572 poisoning Toxicity 0.000 description 1
- 230000000607 poisoning effect Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 239000007921 spray Substances 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A01—AGRICULTURE; FORESTRY; ANIMAL HUSBANDRY; HUNTING; TRAPPING; FISHING
- A01M—CATCHING, TRAPPING OR SCARING OF ANIMALS; APPARATUS FOR THE DESTRUCTION OF NOXIOUS ANIMALS OR NOXIOUS PLANTS
- A01M21/00—Apparatus for the destruction of unwanted vegetation, e.g. weeds
- A01M21/04—Apparatus for destruction by steam, chemicals, burning, or electricity
- A01M21/043—Apparatus for destruction by steam, chemicals, burning, or electricity by chemicals
-
- A—HUMAN NECESSITIES
- A01—AGRICULTURE; FORESTRY; ANIMAL HUSBANDRY; HUNTING; TRAPPING; FISHING
- A01B—SOIL WORKING IN AGRICULTURE OR FORESTRY; PARTS, DETAILS, OR ACCESSORIES OF AGRICULTURAL MACHINES OR IMPLEMENTS, IN GENERAL
- A01B39/00—Other machines specially adapted for working soil on which crops are growing
- A01B39/12—Other machines specially adapted for working soil on which crops are growing for special purposes, e.g. for special culture
- A01B39/18—Other machines specially adapted for working soil on which crops are growing for special purposes, e.g. for special culture for weeding
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J11/00—Manipulators not otherwise provided for
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/56—Extraction of image or video features relating to colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/10—Terrestrial scenes
Landscapes
- Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Environmental Sciences (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Mechanical Engineering (AREA)
- Multimedia (AREA)
- General Health & Medical Sciences (AREA)
- Robotics (AREA)
- Health & Medical Sciences (AREA)
- Soil Sciences (AREA)
- Toxicology (AREA)
- Insects & Arthropods (AREA)
- Pest Control & Pesticides (AREA)
- Wood Science & Technology (AREA)
- Zoology (AREA)
- Image Processing (AREA)
- Catching Or Destruction (AREA)
Abstract
本发明公开了一种多功能爪头监控环境机器人及其识别方法。该机器人包括:移动平台、药箱、摄像机、数字信号处理器、控制器、机械臂以及与机械臂末端连接的多功能爪头;药箱上设有药箱继电器,机械臂内设有喷液管路,喷液管路与所述与药箱继电器相连通;多功能爪头上设有温度传感器、湿度传感器、喷药枪以及除草爪头;喷药枪与喷液管路相连通;多功能爪头与控制器电连接;摄像机通过拍摄植物图像,并将植物图像通过连接支架传输到数字信号处理器处理成控制器能够识别的控制信号,控制器根据控制信号控制多功能爪头转动并作出相应的操作。采用本发明所提供的机器人及其识别方法,能够提高种植植物识别精度,降低污染,避免对人体造成伤害。
Description
技术领域
本发明涉及农业机械领域,特别是涉及一种多功能爪头监控环境机器人及其植物识别方法。
背景技术
目前,常见的喷药方式是工作人员背负机械式或电动式喷药机对某一区域需要除草的田地或者植物大面积喷洒,但是传统的机械式或电动式喷药机都需要大量人工投入,效率低,而且由于农药中含有大量化学成分,对耕作使用者的身体危害大且对农作物及环境的污染严重。
发明内容
本发明的目的是提供一种多功能爪头监控环境机器人及其植物识别方法,以解决现有技术中中工作效率低、污染严重的问题。
为实现上述目的,本发明提供了如下方案:
一种多功能爪头监控环境机器人,包括:移动平台、设于所述移动平台上的药箱、设于所述药箱一面的摄像机,所述摄像机通过连接支架固定在所述移动平台上、、数字信号处理器、控制器、设于所述药箱另一面的机械臂以及与所述机械臂末端连接的多功能爪头;
所述摄像机通过连接支架固定在所述移动平台上,所述摄像机与所述数字信号处理器电连接,所述数字信号处理器与所述控制器电连接;
所述药箱上设有药箱继电器,所述机械臂内设有喷液管路,所述喷液管路与所述药箱继电器相连通;
所述多功能爪头上设有温度传感器、湿度传感器、喷药枪以及除草爪头;所述喷药枪与所述喷液管路相连通;所述多功能爪头与所述控制器电连接;
所述摄像机拍摄植物图像,并将所述植物图像通过所述连接支架传输到数字信号处理器,所述数字信号处理器将所述植物图像处理成所述控制器能够识别的控制信号,所述控制器根据所述控制信号控制所述多功能爪头转动并作出相应的操作。
可选的,所述摄像机通过螺栓固定设置在所述连接支架上,所述连接支架的上方设置有螺母调节结构,用于调节摄像机的姿态和方位。
可选的,所述机械臂的末端与所述多功能爪头之间设有爪头继电器,所述控制器控制所述爪头继电器吸合,进而控制多功能爪头电机转动除草。
可选的,所述移动平台由履带支撑;所述移动平台包括4个所述履带;
所述履带包括车轮、转轴、减速齿轮箱、直流电机和支架;所述减速齿轮箱与车轮之间由所述转轴连接,所述直流电机与所述减速齿轮箱通过螺栓螺母固定在支架上,所述支架通过螺栓螺母固定在移动平台上,所述直流电机与所述控制器电连接,所述控制器控制所述直流电机驱动所述履带运动。
可选的,所述机器人还包括:供电系统;所述供电系统包括蓄电池和太阳能光伏电板;
所述太阳能光伏电板为所述蓄电池充电,所述蓄电池为所述摄像头、所述数字信号处理器以及所述控制器提供电源。
可选的,所述蓄电池电压为24V,输出功率为600W。
一种植物识别方法,所述方法应用于一种多功能爪头监控环境机器人,所述机器人包括:
移动平台、设于所述移动平台上的药箱、设于所述药箱一面的摄像机,所述摄像机通过连接支架固定在所述移动平台上、与所述连接支架电连接的数字信号处理器、与所述数字信号处理器电连接的控制器、设于所述药箱另一面的机械臂以及与所述机械臂末端连接的多功能爪头;所述药箱上设有药箱继电器,所述机械臂内设有喷液管路,所述喷液管路与所述与所述药箱继电器相连通;所述多功能爪头上设有温度传感器、湿度传感器、喷药枪以及除草爪头;所述喷药枪与所述喷液管路相连通;所述多功能爪头与所述控制器电连接;所述摄像机拍摄植物图像,并将所述植物图像通过所述连接支架传输到数字信号处理器处理成所述控制器能够识别的控制信号,所述控制器根据所述控制信号控制所述多功能爪头转动并作出相应的操作;
所述方法包括:
提取所述摄像机拍摄的植物图像的RGB颜色空间;
将所述RGB颜色空间转换为HSV颜色空间;H表示为颜色的色调、S表示为颜色的饱和度,V表示为颜色的亮度;
提取所述HSV颜色空间内的色调向量,得到含有色调向量的植物图像;
对所述含有色调向量的植物图像进行自适应阈值分割处理,得到二值化植物图像;
对所述二值化植物图像进行降噪处理,得到所述植物图像内的植物轮廓;
根据所述植物轮廓判断所述植物图像内的植物是否为种植植物,得到第一判断结果;
若所述第一判断结果表示为所述植物图像内的植物为种植植物,提取对下一幅植物图像的RGB颜色空间;
若所述第一判断结果表示为所述植物图像内的植物不是种植植物,控制所述多功能爪头进行清除处理。
可选的,所述将所述RGB颜色空间转换为HSV颜色空间,具体包括:
根据公式计算所述HSV颜色空间的H值;
根据公式计算所述HSV颜色空间的S值;
根据公式V=Cmax计算所述HSV颜色空间的V值;
其中,R′=R/255,G′=G/255,B′=B/255,Cmax=max(R′,G′,B′),Cmin=min(R′,G′,B′),Δ=Cmax-Cmin,R是红色通道,B是蓝色通道,G是绿色通道,C是中间变量。
一种植物识别系统,所述系统包括:
第一RGB颜色空间提取模块,用于提取所述摄像机拍摄的植物图像的RGB颜色空间;
HSV颜色空间转换模块,用于将所述RGB颜色空间转换为HSV颜色空间;H表示为颜色的色调、S表示为颜色的饱和度,V表示为颜色的亮度;
含有色调向量的植物图像提取模块,用于提取所述HSV颜色空间内的色调向量,得到含有色调向量的植物图像;
自适应阈值分割处理模块,用于对所述含有色调向量的植物图像进行自适应阈值分割处理,得到二值化植物图像;
降噪处理模块,用于对所述二值化植物图像进行降噪处理,得到所述植物图像内的植物轮廓;
第一判断模块,用于根据所述植物轮廓判断所述植物图像内的植物是否为种植植物,得到第一判断结果;
第二RGB颜色空间提取模块,用于若所述第一判断结果表示为所述植物图像内的植物为种植植物,提取对下一幅植物图像的RGB颜色空间;
控制模块,用于若所述第一判断结果表示为所述植物图像内的植物不是种植植物,控制所述多功能爪头进行清除处理。
可选的,所述HSV颜色空间转换模块,具体包括:
H值计算单元,用于根据公式计算所述HSV颜色空间的H值;
S值计算单元,用于根据公式计算所述HSV颜色空间的S值;
V值计算单元,用于根据公式V=Cmax计算所述HSV颜色空间的V值;
其中,R′=R/255,G'=G/255,B'=B/255,Cmax=max(R',G',B'),Cmin=min(R',G',B'),Δ=Cmax-Cmin,R是红色通道,B是蓝色通道,G是绿色通道,C是中间变量。
根据本发明提供的具体实施例,本发明公开了以下技术效果:本发明通过提供一种多功能爪头监控机器人,利用多功能爪头采用不同的操作方式,即喷药或者直接挖掘,对杂草进行清除,并能够通过多功能爪头上的温度传感器、湿度传感器监测植物周围环境,从而能够得到周围环境是否遭受污染,提前做出相应的处理手段,采用本发明所提供的监控机器人不需要人工进行喷药,从而降低了对人体的损害,节省了人力,提高了工作效率。
此外,本发明还提供了一种植物识别方法及系统,根据本发明所提供的识别方法及系统根据基于图像识别,从而实现了精确识别种植植物,避免误除、漏除等操作,提高除草精度。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明所提供的多功能爪头监控环境机器人结构图;
图2为本发明所提供的多功能爪头结构图;
图3为本发明所提供的植物识别方法流程图;
图4为本发明所提供的识别系统结构图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明的目的是提供一种多功能爪头监控环境机器人及其识别方法,以提高工作效率,降低对人体的危害,降低对环境的污染。
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明作进一步详细的说明。
图1为本发明所提供的多功能爪头监控环境机器人结构图,如图1所示,一种多功能爪头监控环境机器人,包括:移动平台1、设于所述移动平台1上的药箱2、设于所述药箱2一面的摄像机3,所述摄像机3通过连接支架4固定在所述移动平台1上、与所述连接支架4电连接的数字信号处理器5、与所述数字信号处理器5电连接的控制器6、设于所述药箱2另一面的机械臂7以及与所述机械臂7末端连接的多功能爪头8;所述药箱2上设有药箱继电器2-1,所述机械臂7内设有喷液管路,所述喷液管路与所述药箱继电器2-1相连通;图2为本发明所提供的多功能爪头结构图,如图2所示,所述多功能爪头8上设有温度传感器8-1、湿度传感器8-2、喷药枪8-3以及除草爪头8-4;所述喷药枪8-3与所述喷液管路相连通;所述多功能爪头8与所述控制器6电连接;通过所述摄像机3拍摄植物图像,并将所述植物图像通过所述连接支架4传输到数字信号处理器5,所述数字信号处理器将所述织物图像处理成所述控制器6能够识别的控制信号,所述控制器6根据所述控制信号控制所述多功能爪头8转动并作出除草、温度测量、湿度测量、喷药等操作,所述多功能爪头8可转动。
所述机械臂7的末端与所述多功能爪头8之间设有爪头继电器8-5,所述控制器6控制所述爪头继电器8-5吸合,进而控制多功能爪头8电机转动除草。
所述控制器6上还设有无线视频收发装置,无线视频收发装置包括无线视频发射装置和无线视频接收器,喷洒农药时,无线视频发射装置将摄像机3采集的视频实时传输给无线视频接收器,所述无线视频接收器通过AV线与监控显示器连接,工作人员通过监控显示器可以实时观测机器人所处区域的工作环境和工作状态;通过ZigBee协调器发射信号,ZigBee节点接收信号后传输给stm32f4控制器,所述stm32f4控制器控制摄像机3的图像采集范围,本发明对机器人所在区域的视频进行实时传输,使操作人员易于控制和干预。
所述移动平台1由履带支撑;所述移动平台1包括4个所述履带;所述履带包括车轮、转轴、减速齿轮箱、直流电机和支架;所述减速齿轮箱与车轮之间由所述转轴连接,所述直流电机与所述减速齿轮箱通过螺栓螺母固定在支架上,所述支架通过螺栓螺母固定在移动平台上,所述直流电机与所述控制器6电连接,所述控制器控制所述直流电机驱动所述履带运动。
本发明所提供的机器人通过摄像机3实时采集农田区域农作物的图像,并将采集到的农作物图像送入数字信号处理器5分析和处理,数字信号处理器5将处理结果送至控制器6,控制器6根据移动平台1所在农田区域内植物和杂草的分布情况,控制云台移动至农作物待喷药位置附近;控制器6通过控制机械臂7将喷药枪8-3送到待喷药农作物的区域位置;控制器6控制多功能爪头8进而转动机械爪头清除杂草;还可以通过控制喷药枪8-3转动喷洒除虫剂,在除草爪头8-4发生故障或存在大面积杂草时,首先利用温度传感器8-1、湿度传感器8-2检测植物周围环境是否存在污染,若不存在污染或不在污染范围内,通过控制喷药枪8-3转动喷洒除草剂;同时喷药枪8-3转动能够达到喷洒均匀的目的,且所述摄像机3通过螺栓固定设置在所述连接支架4上,所述连接支架4的上方设置有螺母调节结构,用于调节摄像机3的姿态和方位,实现全方位的检测。
控制器6控制多功能爪头8转动能够将具有温度传感器8-1的检测针和具有湿度传感器8-2的检测针插入土壤中以达到土壤温度检测的目的。
所述机器人还包括:供电系统;所述供电系统为蓄电池和太阳能光伏电板;
所述太阳能光伏电板为所述蓄电池充电,所述蓄电池为所述摄像头、所述数字信号处理器5以及所述控制器6提供电源,所述蓄电池电压为24V,输出功率为600W,为机器人在工作过程中提供充足的电源。
本发明能正确的辨别特定的作物和杂草,利用摄像机3对需要除草区域的作物和杂草进行图像采集,分析作物和杂草位置,避免了错挖、漏挖的情况,并根据需要喷药的作物和杂草分布状况进行定点精准控流对靶喷药,即:对杂草进行铲除挖掘,对作物喷洒相应的除虫剂等药物,从而实现人工无干扰下的智能喷药;因此,本发明所提供的机器人不仅降低了工作人员的劳动强度和喷药成本,也降低了农药的用量,减少了土壤环境下的农药残留,对于提高我国农业喷药智能化、现代化、加快农业精准化具有不可估量的意义;同时,利用喷药机械臂7实现自动喷药,无需人工干预,极大地降低了生产成本,同时减少了农药对工作人员的身体伤害;本发明还采用湿度传感器8-2和温度传感器8-1的双针头,对农田区域进行检测,具有双重功能,充分了解什么环境对作物生长更好,有利于环农作物的产量提高。
目前,中国植保机械80%仍为背负式等手动喷雾器,“跑、冒、滴、漏”现象严重,农药利用率只有20%左右,同时因施药中毒人数每年都在递增,特别是在温室等设施农业环境。因此,本发明提供了一种多功能爪头监控环境机器人以代替人类工作,并针对机器人提出了一种植物识别方法以提高植物的识别精度,本发明运用了机器视觉技术及机械结构设计等知识进行环保农业机器人设计,满足核心功能创新点要求,以百合植物为例,经过在试验田中对百合根茎进行喷药测试,机器人单次喷药工作时间可控制在5s以内,百合根茎部对点喷药准确度高达84%;使用大范围农药喷洒需要农药550ml左右,而机器人精准喷洒的用药量在350—400ml之间,减少农药使用量38.9%,能有效提高环保性能。
图3为本发明所提供的植物识别方法流程图,其特征在于,一种植物识别方法,述方法包括:
步骤301:提取所述摄像机拍摄的植物图像的RGB颜色空间。
RGB颜色空间的主要缺点是其R、G、B三个值不仅要表示颜色,还要表示颜色的亮度关系,所以说在颜色相近的情况下,如果亮度变化较大,RGB颜色空间的距离可能相当大,自然环境下的农业环境易受光照强度,茎叶遮挡等条件影响,即对亮度信息比较敏感,而亮度对RGB三个值有较大的影响,随着亮度的改变,三个分量也会随之改变,使同一物体在不同的光照强度下,RGB值可能会有较大的偏差。因此根据RGB信息去识别物体比较困难,对于真实的农田场景下,RGB颜色空间不适合作为机器人的识别图像的颜色空间。
而HSV颜色空间用3种特征量,即色调H、饱和度S和亮度V感知颜色,而光照等因素带来的直接影响只与分量V有关,所以HSV颜色空间可以避免颜色分量间的耦合性,使得在进行图像处理时针对性更强,通过对比,选取HSV颜色空间图像处理操作,由于H分量有物体表面的物理性质决定,不同颜色的物体其H分量有差异,所以使用H分量作为颜色判断的主要处理对象。
步骤302:将所述RGB颜色空间转换为HSV颜色空间;H表示为颜色的色调、S表示为颜色的饱和度,V表示为颜色的亮度。
所述将所述RGB颜色空间转换为HSV颜色空间,具体包括:根据公式
计算所述HSV颜色空间的H值;根据公式计算所述HSV颜色空间的S值;根据公式V=Cmax计算所述HSV颜色空间的V值;其中,R'=R/255,G'=G/255,B'=B/255,Cmax=max(R,G,B),Cmin=min(R,G,B),Δ=Cmax-Cmin。
步骤303:提取所述HSV颜色空间内的色调向量,得到含有色调向量的植物图像。
步骤304:对所述含有色调向量的植物图像进行自适应阈值分割处理,得到二值化植物图像。
步骤305:对所述二值化植物图像进行降噪处理,得到所述植物图像内的植物轮廓。
步骤306:根据所述植物轮廓判断所述植物图像内的植物是否为种植植物,得到第一判断结果。
步骤307:若所述第一判断结果表示为所述植物图像内的植物为种植植物,提取对下一幅植物图像的RGB颜色空间。
步骤308:若所述第一判断结果表示为所述植物图像内的植物不是种植植物,控制所述多功能爪头进行清除处理。
还可以通过求解百合叶面的狭长程度(轮廓顶点,外接矩形),拟合根茎形态,从而得到确定每一簇百合在图像中的坐标,对于不能识别的植物进行清除。
因叶片之间存在相互遮挡、粘连等复杂情况,在进行叶片检测时,使得检测出来的叶片通常存在冗余面积,为提高百合检测性能,作出如下规定:1)百合整体区域面积大于单一叶片面积;2)所有的无遮挡的叶片重心都位于百合图像区域内;3)叶片面积在限定范围之内。
利用检索条件检测百合植物在图像中的坐标。
其中,Sgrape一株百合的区域面积,Si为第i个叶片的面积;(xcenter,ycenter)为叶片重心坐标,regiongrape为百合图像域。
采用本发明所提供的识别方法,能够避免漏除或除错的问题,从而提高了对种植植物的识别精度。
图4为本发明所提供的识别系统结构图,如图4所示,一种植物识别系统,所述系统包括:
第一RGB颜色空间提取模块401,用于提取所述摄像机拍摄的植物图像的RGB颜色空间。
HSV颜色空间转换模块402,用于将所述RGB颜色空间转换为HSV颜色空间;H表示为颜色的色调、S表示为颜色的饱和度,V表示为颜色的亮度。所述HSV颜色空间转换模块,具体包括:H值计算单元,用于根据公式
计算所述HSV颜色空间的H值;S值计算单元,用于根据公式计算所述HSV颜色空间的S值;V值计算单元,用于根据公式V=Cmax计算所述HSV颜色空间的V值;其中,R′=R/255,G′G/255,B′=B/255,Cmax=max(R′,G′,B′),Cmin=min(R′,G′,B′),Δ=Cmax-Cmin,R是红色通道,B是蓝色通道,G是绿色通道,C是中间变量。
含有色调向量的植物图像提取模块403,用于提取所述HSV颜色空间内的色调向量,得到含有色调向量的植物图像。
自适应阈值分割处理模块404,用于对所述含有色调向量的植物图像进行自适应阈值分割处理,得到二值化植物图像。
降噪处理模块405,用于对所述二值化植物图像进行降噪处理,得到所述植物图像内的植物轮廓。
第一判断模块406,用于根据所述植物轮廓判断所述植物图像内的植物是否为种植植物,得到第一判断结果。
第二RGB颜色空间提取模块407,用于若所述第一判断结果表示为所述植物图像内的植物为种植植物,提取对下一幅植物图像的RGB颜色空间。
控制模块408,用于若所述第一判断结果表示为所述植物图像内的植物不是种植植物,控制所述多功能爪头进行清除处理。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对于实施例公开的系统而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处。综上所述,本说明书内容不应理解为对本发明的限制。
Claims (10)
1.一种多功能爪头监控环境机器人,其特征在于,包括:移动平台、设于所述移动平台上的药箱、设于所述药箱一面的摄像机、数字信号处理器、控制器、设于所述药箱另一面的机械臂以及与所述机械臂末端连接的多功能爪头;
所述摄像机通过连接支架固定在所述移动平台上,所述摄像机与所述数字信号处理器电连接,所述数字信号处理器与所述控制器电连接;
所述药箱上设有药箱继电器,所述机械臂内设有喷液管路,所述喷液管路与所述药箱继电器相连通;
所述多功能爪头上设有温度传感器、湿度传感器、喷药枪以及除草爪头;所述喷药枪与所述喷液管路相连通;所述多功能爪头与所述控制器电连接;
所述摄像机拍摄植物图像,并将所述植物图像通过所述连接支架传输到数字信号处理器,所述数字信号处理器将所述植物图像处理成所述控制器能够识别的控制信号,所述控制器根据所述控制信号控制所述多功能爪头转动并作出相应的操作。
2.根据权利要求1所述的机器人,其特征在于,所述摄像机通过螺栓固定设置在所述连接支架上,所述连接支架的上方设置有螺母调节结构,用于调节摄像机的姿态和方位。
3.根据权利要求1所述的机器人,其特征在于,所述机械臂末端与所述多功能爪头之间设有爪头继电器,所述控制器控制所述爪头继电器吸合,进而控制多功能爪头电机转动除草。
4.根据权利要求1所述的机器人,其特征在于,所述移动平台由履带支撑;所述移动平台包括4个所述履带;
所述履带包括车轮、转轴、减速齿轮箱、直流电机和支架;所述减速齿轮箱与车轮之间由所述转轴连接,所述直流电机与所述减速齿轮箱通过螺栓螺母固定在支架上,所述支架通过螺栓螺母固定在移动平台上,所述直流电机与所述控制器电连接,所述控制器控制所述直流电机驱动所述履带运动。
5.根据权利要求1所述的机器人,其特征在于,所述机器人还包括:供电系统;所述供电系统包括蓄电池和太阳能光伏电板;
所述太阳能光伏电板为所述蓄电池充电,所述蓄电池为所述摄像头、所述数字信号处理器以及所述控制器提供电源。
6.根据权利要求5所述的机器人,其特征在于,所述蓄电池的电压为24V,输出功率为600W。
7.一种植物识别方法,其特征在于,所述方法应用于一种多功能爪头监控环境机器人,所述机器人包括:
移动平台、设于所述移动平台上的药箱、设于所述药箱一面的摄像机,所述摄像机通过连接支架固定在所述移动平台上、与所述连接支架电连接的数字信号处理器、与所述数字信号处理器电连接的控制器、设于所述药箱另一面的机械臂以及与所述机械臂末端连接的多功能爪头;所述药箱上设有药箱继电器,所述机械臂内设有喷液管路,所述喷液管路与所述与所述药箱继电器相连通;所述多功能爪头上设有温度传感器、湿度传感器、喷药枪以及除草爪头;所述喷药枪与所述喷液管路相连通;所述多功能爪头与所述控制器电连接;所述摄像机拍摄植物图像,并将所述植物图像通过所述连接支架传输到数字信号处理器处理成所述控制器能够识别的控制信号,所述控制器根据所述控制信号控制所述多功能爪头转动并作出相应的操作;
所述方法包括:
提取所述摄像机拍摄的植物图像的RGB颜色空间;
将所述RGB颜色空间转换为HSV颜色空间;H表示为颜色的色调、S表示为颜色的饱和度,V表示为颜色的亮度;
提取所述HSV颜色空间内的色调向量,得到含有色调向量的植物图像;
对所述含有色调向量的植物图像进行自适应阈值分割处理,得到二值化植物图像;
对所述二值化植物图像进行降噪处理,得到所述植物图像内的植物轮廓;
根据所述植物轮廓判断所述植物图像内的植物是否为种植植物,得到第一判断结果;
若所述第一判断结果表示为所述植物图像内的植物为种植植物,提取对下一幅植物图像的RGB颜色空间;
若所述第一判断结果表示为所述植物图像内的植物不是种植植物,控制所述多功能爪头进行清除处理。
8.根据权利要求7所述的识别方法,其特征在于,所述将所述RGB颜色空间转换为HSV颜色空间,具体包括:
根据公式计算所述HSV颜色空间的H值;
根据公式计算所述HSV颜色空间的S值;
根据公式计算所述HSV颜色空间的V值;
其中, R是红色通道,B是蓝色通道,G是绿色通道,C是中间变量。
9.一种植物识别系统,其特征在于,所述系统包括:
第一RGB颜色空间提取模块,用于提取所述摄像机拍摄的植物图像的RGB颜色空间;
HSV颜色空间转换模块,用于将所述RGB颜色空间转换为HSV颜色空间;H表示为颜色的色调、S表示为颜色的饱和度,V表示为颜色的亮度;
含有色调向量的植物图像提取模块,用于提取所述HSV颜色空间内的色调向量,得到含有色调向量的植物图像;
自适应阈值分割处理模块,用于对所述含有色调向量的植物图像进行自适应阈值分割处理,得到二值化植物图像;
降噪处理模块,用于对所述二值化植物图像进行降噪处理,得到所述植物图像内的植物轮廓;
第一判断模块,用于根据所述植物轮廓判断所述植物图像内的植物是否为种植植物,得到第一判断结果;
第二RGB颜色空间提取模块,用于若所述第一判断结果表示为所述植物图像内的植物为种植植物,提取对下一幅植物图像的RGB颜色空间;
控制模块,用于若所述第一判断结果表示为所述植物图像内的植物不是种植植物,控制所述多功能爪头进行清除处理。
10.根据权利要求9所述的识别系统,其特征在于,所述HSV颜色空间转换模块,具体包括:
H值计算单元,用于根据公式计算所述HSV颜色空间的H值;
S值计算单元,用于根据公式计算所述HSV颜色空间的S值;
V值计算单元,用于根据公式计算所述HSV颜色空间的V值;
其中, R是红色通道,B是蓝色通道,G是绿色通道,C是中间变量。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810011691.3A CN108271765B (zh) | 2018-01-05 | 2018-01-05 | 一种多功能爪头监控环境机器人及其植物识别方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810011691.3A CN108271765B (zh) | 2018-01-05 | 2018-01-05 | 一种多功能爪头监控环境机器人及其植物识别方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108271765A true CN108271765A (zh) | 2018-07-13 |
CN108271765B CN108271765B (zh) | 2021-01-12 |
Family
ID=62803341
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810011691.3A Active CN108271765B (zh) | 2018-01-05 | 2018-01-05 | 一种多功能爪头监控环境机器人及其植物识别方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108271765B (zh) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108858125A (zh) * | 2018-09-11 | 2018-11-23 | 李汉彭 | 一种机器人 |
CN110495443A (zh) * | 2019-07-30 | 2019-11-26 | 中国南方电网有限责任公司超高压输电公司曲靖局 | 一种除苔装置 |
CN112136381A (zh) * | 2020-09-29 | 2020-12-29 | 郑州轻工业大学 | 一种用于玉米地除草机器人及其控制系统 |
CN115157257A (zh) * | 2022-07-22 | 2022-10-11 | 山东大学 | 基于uwb导航和视觉识别的智能植物管理机器人及系统 |
US11832609B2 (en) | 2020-12-21 | 2023-12-05 | Deere & Company | Agricultural sprayer with real-time, on-machine target sensor |
US11944087B2 (en) | 2020-12-21 | 2024-04-02 | Deere & Company | Agricultural sprayer with real-time, on-machine target sensor |
CN115157257B (zh) * | 2022-07-22 | 2024-08-27 | 山东大学 | 基于uwb导航和视觉识别的智能植物管理机器人及系统 |
Citations (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1564657A (zh) * | 2001-08-09 | 2005-01-12 | 道农业科学有限公司 | 虫害的检测与防治 |
CN1945601A (zh) * | 2005-10-08 | 2007-04-11 | 中国农业机械化科学研究院 | 一种自动识别田间杂草的方法与喷药装置 |
CN101107908A (zh) * | 2007-07-16 | 2008-01-23 | 内蒙古自治区农牧业机械技术推广站 | 农牧交错区保护性耕作小麦田杂草控制方法 |
CN101412217A (zh) * | 2008-12-04 | 2009-04-22 | 南京农业大学 | 自主式田间机器人 |
CN201319820Y (zh) * | 2008-12-22 | 2009-10-07 | 孟鲁军 | 新型锄草喷药器 |
CN101990796A (zh) * | 2010-09-13 | 2011-03-30 | 中国农业大学 | 基于机器视觉的锄草机器人系统及方法 |
CN102172233A (zh) * | 2011-03-04 | 2011-09-07 | 江苏大学 | 一种棉田杂草实时识别对靶喷施的方法 |
CN102613162A (zh) * | 2012-04-23 | 2012-08-01 | 西北农林科技大学 | 一种自走式自动对靶精准施药机 |
US20120195496A1 (en) * | 2011-01-31 | 2012-08-02 | Zaman Qamar-Uz | Variable rate sprayer system and method of variably applying agrochemicals |
CN103530643A (zh) * | 2013-10-11 | 2014-01-22 | 中国科学院合肥物质科学研究院 | 基于农作物行间自动识别技术的农药定位喷洒方法及系统 |
CN203675938U (zh) * | 2014-01-20 | 2014-07-02 | 合肥多加农业科技有限公司 | 一种高效的遥控式农药喷洒植保车 |
CN103918636A (zh) * | 2014-04-29 | 2014-07-16 | 青岛农业大学 | 基于图像处理的智能喷药方法及喷药机器人 |
WO2016025848A1 (en) * | 2014-08-15 | 2016-02-18 | Monsanto Technology Llc | Apparatus and methods for in-field data collection and sampling |
CN205143313U (zh) * | 2015-11-24 | 2016-04-13 | 江苏省农业科学院 | 一种自动避障果园多功能割草喷药装置 |
CN205492227U (zh) * | 2016-03-11 | 2016-08-24 | 武汉科技大学 | 一种农用机器人 |
CN106355592A (zh) * | 2016-08-19 | 2017-01-25 | 上海葡萄纬度科技有限公司 | 一种教育玩具套件及其电路元件和电线的识别方法 |
US9655356B1 (en) * | 2017-02-07 | 2017-05-23 | Bradley Davis Lytle, Jr. | Selective herbicide and responsible pesticide allocation apparatus and system |
CN206453057U (zh) * | 2016-12-30 | 2017-09-01 | 西安智道科技有限责任公司 | 一种农药喷雾智能机器人 |
-
2018
- 2018-01-05 CN CN201810011691.3A patent/CN108271765B/zh active Active
Patent Citations (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1564657A (zh) * | 2001-08-09 | 2005-01-12 | 道农业科学有限公司 | 虫害的检测与防治 |
CN1945601A (zh) * | 2005-10-08 | 2007-04-11 | 中国农业机械化科学研究院 | 一种自动识别田间杂草的方法与喷药装置 |
CN101107908A (zh) * | 2007-07-16 | 2008-01-23 | 内蒙古自治区农牧业机械技术推广站 | 农牧交错区保护性耕作小麦田杂草控制方法 |
CN101412217A (zh) * | 2008-12-04 | 2009-04-22 | 南京农业大学 | 自主式田间机器人 |
CN201319820Y (zh) * | 2008-12-22 | 2009-10-07 | 孟鲁军 | 新型锄草喷药器 |
CN101990796A (zh) * | 2010-09-13 | 2011-03-30 | 中国农业大学 | 基于机器视觉的锄草机器人系统及方法 |
US20120195496A1 (en) * | 2011-01-31 | 2012-08-02 | Zaman Qamar-Uz | Variable rate sprayer system and method of variably applying agrochemicals |
CN102172233A (zh) * | 2011-03-04 | 2011-09-07 | 江苏大学 | 一种棉田杂草实时识别对靶喷施的方法 |
CN102613162A (zh) * | 2012-04-23 | 2012-08-01 | 西北农林科技大学 | 一种自走式自动对靶精准施药机 |
CN103530643A (zh) * | 2013-10-11 | 2014-01-22 | 中国科学院合肥物质科学研究院 | 基于农作物行间自动识别技术的农药定位喷洒方法及系统 |
CN203675938U (zh) * | 2014-01-20 | 2014-07-02 | 合肥多加农业科技有限公司 | 一种高效的遥控式农药喷洒植保车 |
CN103918636A (zh) * | 2014-04-29 | 2014-07-16 | 青岛农业大学 | 基于图像处理的智能喷药方法及喷药机器人 |
WO2016025848A1 (en) * | 2014-08-15 | 2016-02-18 | Monsanto Technology Llc | Apparatus and methods for in-field data collection and sampling |
CN205143313U (zh) * | 2015-11-24 | 2016-04-13 | 江苏省农业科学院 | 一种自动避障果园多功能割草喷药装置 |
CN205492227U (zh) * | 2016-03-11 | 2016-08-24 | 武汉科技大学 | 一种农用机器人 |
CN106355592A (zh) * | 2016-08-19 | 2017-01-25 | 上海葡萄纬度科技有限公司 | 一种教育玩具套件及其电路元件和电线的识别方法 |
CN206453057U (zh) * | 2016-12-30 | 2017-09-01 | 西安智道科技有限责任公司 | 一种农药喷雾智能机器人 |
US9655356B1 (en) * | 2017-02-07 | 2017-05-23 | Bradley Davis Lytle, Jr. | Selective herbicide and responsible pesticide allocation apparatus and system |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108858125A (zh) * | 2018-09-11 | 2018-11-23 | 李汉彭 | 一种机器人 |
CN110495443A (zh) * | 2019-07-30 | 2019-11-26 | 中国南方电网有限责任公司超高压输电公司曲靖局 | 一种除苔装置 |
CN112136381A (zh) * | 2020-09-29 | 2020-12-29 | 郑州轻工业大学 | 一种用于玉米地除草机器人及其控制系统 |
US11832609B2 (en) | 2020-12-21 | 2023-12-05 | Deere & Company | Agricultural sprayer with real-time, on-machine target sensor |
US11944087B2 (en) | 2020-12-21 | 2024-04-02 | Deere & Company | Agricultural sprayer with real-time, on-machine target sensor |
CN115157257A (zh) * | 2022-07-22 | 2022-10-11 | 山东大学 | 基于uwb导航和视觉识别的智能植物管理机器人及系统 |
CN115157257B (zh) * | 2022-07-22 | 2024-08-27 | 山东大学 | 基于uwb导航和视觉识别的智能植物管理机器人及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN108271765B (zh) | 2021-01-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108271765B (zh) | 一种多功能爪头监控环境机器人及其植物识别方法 | |
CN110692352B (zh) | 一种智能农业机器人及其控制方法 | |
CN110122073B (zh) | 一种基于机器视觉的草莓采摘机器人 | |
CN106688705A (zh) | 一种智能种植大棚及其采用的监测方法 | |
CN102172233A (zh) | 一种棉田杂草实时识别对靶喷施的方法 | |
CN205353825U (zh) | 一种温室大棚自动化控制系统 | |
CN201600330U (zh) | 成熟菠萝识别与定位系统 | |
CN202085493U (zh) | 番茄采摘机器人系统 | |
CN109122634A (zh) | 一种基于机器视觉的无人机区域对靶变量施药控制装置与方法 | |
CN102564593A (zh) | 基于计算机视觉及物联网的植物生长状况监测系统 | |
CN107272739A (zh) | 一种基于子母系统的喷药系统及方法 | |
CN104704990B (zh) | 一种石榴树电子化自动采摘方法 | |
WO2021226900A1 (zh) | 一种基于计算机视觉的棉花作物行检测方法、装置及存储介质 | |
CN103348964B (zh) | 一种智能除草设备及其使用方法 | |
CN107121535B (zh) | 一种有效的农作物生长环境监测系统 | |
Yuan et al. | An autonomous pollination robot for hormone treatment of tomato flower in greenhouse | |
CN109832246A (zh) | 一种基于北斗导航的植保无人机数据综合采集系统 | |
CN206101173U (zh) | 一种分析植物和手势图像信息的自动灌溉系统 | |
CN107610172A (zh) | 一种基于图像识别的大宗作物株高测量方法 | |
CN205381389U (zh) | 一种农作物作业无人机 | |
Ji et al. | Research on key technology of truss tomato harvesting robot in greenhouse | |
CN115560754A (zh) | 一种基于杂草去除的视觉导航方法 | |
CN113331160B (zh) | 一种烟草专用精准喷药系统 | |
Chatzimichali et al. | Design of an advanced prototype robot for white asparagus harvesting | |
Li et al. | Design of multifunctional seedbed planting robot based on MobileNetV2-SSD |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |