CN108734277A - 一种基于卷积神经网络的靶向药物喷洒方法 - Google Patents

一种基于卷积神经网络的靶向药物喷洒方法 Download PDF

Info

Publication number
CN108734277A
CN108734277A CN201810477485.1A CN201810477485A CN108734277A CN 108734277 A CN108734277 A CN 108734277A CN 201810477485 A CN201810477485 A CN 201810477485A CN 108734277 A CN108734277 A CN 108734277A
Authority
CN
China
Prior art keywords
pest
input
image
convolutional neural
neural networks
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810477485.1A
Other languages
English (en)
Inventor
古万荣
施玉健
毛宜军
李海良
朱韬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Top & Amp Guangzhou (gene) Precision Medical Technology Co Ltd
Original Assignee
Top & Amp Guangzhou (gene) Precision Medical Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Top & Amp Guangzhou (gene) Precision Medical Technology Co Ltd filed Critical Top & Amp Guangzhou (gene) Precision Medical Technology Co Ltd
Priority to CN201810477485.1A priority Critical patent/CN108734277A/zh
Publication of CN108734277A publication Critical patent/CN108734277A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology
    • G06N3/045—Combinations of networks
    • A—HUMAN NECESSITIES
    • A01—AGRICULTURE; FORESTRY; ANIMAL HUSBANDRY; HUNTING; TRAPPING; FISHING
    • A01M—CATCHING, TRAPPING OR SCARING OF ANIMALS; APPARATUS FOR THE DESTRUCTION OF NOXIOUS ANIMALS OR NOXIOUS PLANTS
    • A01M1/00—Stationary means for catching or killing insects
    • A—HUMAN NECESSITIES
    • A01—AGRICULTURE; FORESTRY; ANIMAL HUSBANDRY; HUNTING; TRAPPING; FISHING
    • A01M—CATCHING, TRAPPING OR SCARING OF ANIMALS; APPARATUS FOR THE DESTRUCTION OF NOXIOUS ANIMALS OR NOXIOUS PLANTS
    • A01M7/00—Special adaptations or arrangements of liquid-spraying apparatus for purposes covered by this subclass
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods

Landscapes

  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Pest Control & Pesticides (AREA)
  • Biophysics (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • Evolutionary Computation (AREA)
  • General Health & Medical Sciences (AREA)
  • Molecular Biology (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Artificial Intelligence (AREA)
  • Health & Medical Sciences (AREA)
  • Insects & Arthropods (AREA)
  • Wood Science & Technology (AREA)
  • Zoology (AREA)
  • Environmental Sciences (AREA)
  • Image Analysis (AREA)
  • Catching Or Destruction (AREA)

Abstract

本发明公开了一种基于卷积神经网络的靶向药物喷洒方法，包括步骤：S1、输入样本图像和选定的迭代次数训练能够识别N类目标害虫的CNN卷积神经网络，输入目标图像，得出该图像对应N类目标害虫的判定得分；S2、根据步骤S1得出图像的N类判定得分，与预先设定的害虫识别阀值比较，如果得分大于害虫识别阀值，则判别该害虫种类，进行步骤S3，如果小于害虫的识别阀值，则判断为无害虫，无需靶向药物喷洒；S3、根据步骤S2判别的害虫种类，输入到针对害虫所训练的RCNN区域网络模型，统计该害虫的数据，并用框图显示害虫的区域位置，从而进行药物喷洒。本发明可以在低配置环境下高效实施准确率较高的靶向药物喷洒，同时工程适用性强。

Description

一种基于卷积神经网络的靶向药物喷洒方法
技术领域
本发明涉及深度学习、图像识别的技术领域，尤其是指一种基于卷积神经网络的靶向药物喷洒方法。
背景技术
害虫给我国的棉花种植成长中带来了严重的困扰，有效的解决方法就是利用杀虫剂消灭害虫。但是害虫种类繁多，农业生产者缺乏足够的农业知识去判断害虫种类，不能使用正确的灭虫剂，同时地毯式的喷洒药物，也会污染大量区域的环境。因此精准化、智能化的药物喷洒技术势在必行。
要实现靶向药物喷洒技术，其主要的前提是如何精确地找出害虫的种类、位置等。目前对于害虫识别的研究方法基本上分为基于关系结构匹配的害虫识别以及基于机器学习的害虫识别。对比人工识别，数字化图像处理技术有着高效识别、低错误率的优点。但是也存在一下的问题：1)抽取的特征较为单一，主要为颜色特征、形状特征、纹理特征。2)特征需要人工选择，大多数学者都是选取自定的特征参数作为识别的标准，缺少对整体害虫特征的提取，因而构建模型的性能往往依赖于特征选择的优劣，因此模型的拟合度会因所取特征的优劣而出现较大波动。即当前的方法中，还未能全面提取目标特征，主观因素较大。
发明内容
本发明的目的在于克服现有技术的缺点与不足，提出了一种基于卷积神经网络的靶向药物喷洒方法，主要通过CNN(Convolutional Neural Network,CNN)、RCNN(Region-CNN,RCNN)两种网络相结合的方法，对害虫进行种类检测和数目统计，从而在标注的目标区域喷洒靶向药物。本发明的特色在于利用CNN卷积神经网络检测效率高的特点，对目标图像进行分类，在有害虫的识别结果下再结合对应的RCNN区域神经网络检测数量，精准识别目标区域。使用本发明可以在低配置环境下高效实施准确率较高的靶向药物喷洒，同时工程适用性强。
为实现上述目的，本发明所提供的技术方案为：一种基于卷积神经网络的靶向药物喷洒方法，包括以下步骤：
S1、在训练好的CNN卷积神经网络检测图像的分类
输入样本图像和选定的迭代次数训练能够识别N类目标害虫的CNN卷积神经网络，输入目标图像，得出该图像对应N类目标害虫的判定得分；
S2、根据步骤S1得出图像对应N类目标害虫的判定得分，与预先设定的害虫识别阀值比较，如果得分大于害虫识别阀值，则判别该害虫种类，进行步骤S3，如果小于害虫的识别阀值，则判断为无害虫，无需靶向药物喷洒；
S3、根据步骤S2判别的害虫种类，输入到针对害虫所训练的RCNN区域网络模型，统计该害虫的数据，并用框图显示害虫的区域位置，从而进行药物喷洒。
在步骤S1中，输入的N个图像样本其中xi表示第i个输入图像，y表示第i个图像的标签；CNN训练过程包括向前传播阶段和后传播阶段，在前向传播阶段，当一个训练样本(xi，yi)作为网络输入时，xi将一步步地从输入层转移到输出层，最后得到实际输出oi，这个过程表示为：
oi＝FL(...F2(F1(xiwi)w2)...)wL
其中，L表示层数，wj为第j层Fj的权重向量，Fj定义为一系列的层，执行内核函数的卷积、最大池或非线性激活操作，在一系列的操作之后，估计向量w1，w2，…wL用以下优化问题来解决：
其中，l为交叉熵损失函数；
l(o,y)＝ylno+(1-y)ln(1-o)
使用后向传播和随机梯度下降来更新向量w1，w2，…的方法能够求解优化问题，训练好网络后，输入目标图像到固定权重向量的CNN网络中，得出该图像对应N类目标害虫的判定得分。
在步骤S3中，根据步骤S2判别的结果，输入目标图片，在RCNN网络中，利用Selective Search算法在图像中从上到下提取K个左右的候选框，将每个候选框缩放成n×m的大小并输入到预训练的CNN，将CNN的最后一个全连接层的输出作为特征，将这些特征输入支持向量中进行分类，将分类好的候选框进行边框回归，用边框回归值校正原来的建议窗口，生成预测窗口坐标，统计该害虫的数据，显示出害虫的位置，从而进行药物喷洒。
本发明与现有技术相比，具有如下优点与有益效果：
1、本发明利用CNN卷积神经网络检测率高的特点，先对图像进行分类检测判断。与直接使用RCNN模型对比，解决了RCNN训练和测试效率慢的问题。
2、本发明只使用单一的RCNN模型对目标图像进行数目统计和区域识别，从而解决训练复杂RCNN模型而导致的害虫检测性能差异大、效率低的问题。
3、本发明采用CNN检测分类结合RCNN检测数量的方法，如果检测到无害虫结果，则不再进行RCNN检测，节省了大量无效运算，并且全面地提取目标特征，减少主观因素，使得识别结果更具有客观性和普遍性。
附图说明
图1为本发明方法的处理步骤流程图。
具体实施方式
下面结合具体实施例对本发明作进一步说明。
如图1所示，本实施例所提供的基于卷积神经网络的靶向药物喷洒方法，包括以下步骤：
S1、输入样本图像和选定的迭代次数训练能够识别N类目标害虫的CNN卷积神经网络，输入目标图像，得出该图像对应N类目标害虫的判定得分；其中，输入的N个图像样本其中xi表示第i个输入图像，y表示第i个图像的标签；CNN训练过程包括向前传播阶段和后传播阶段，在前向传播阶段，当一个训练样本(xi，yi)作为网络输入时，xi将一步步地从输入层转移到输出层，最后得到实际输出oi，这个过程可以表示为：
oi＝FL(...F2(F1(xiwi)w2)...)wL
其中，L表示层数，wj为第j层Fj的权重向量，Fj定义为一系列的层，执行诸如与内核函数的卷积、最大池或非线性激活等操作。在一系列的操作之后，估计向量w1，w2，…wL可以用以下优化问题来解决：
其中，l为交叉熵损失函数；
l(o,y)＝ylno+(1-y)ln(1-o)
使用后向传播和随机梯度下降来更新向量w1，w2，…的方法可以求解优化问题，训练好网络后，输入目标图像到固定权重向量的CNN网络中，得出该图像对应N类目标害虫的判定得分。
S2、根据步骤S1得出图像对应N类目标害虫的判定得分，与预先设定的害虫识别阀值比较，如果得分大于害虫识别阀值，则判别该害虫种类，进行步骤S3，如果小于害虫的识别阀值，则判断为无害虫，无需靶向药物喷洒。
S3、根据步骤S2判别的害虫种类，输入到针对害虫所训练的RCNN区域网络模型，统计该害虫的数据，并用框图显示害虫的区域位置，从而进行药物喷洒；具体如下：
根据步骤S2判别的结果，输入目标图片，在RCNN网络中，利用Selective Search算法在图像中从上到下提取K个左右的候选框，将每个候选框缩放成n×m的大小并输入到预训练的CNN，将CNN的最后一个全连接层的输出作为特征，将这些特征输入支持向量中进行分类，将分类好的候选框进行边框回归，用边框回归值校正原来的建议窗口，生成预测窗口坐标，统计该害虫的数据，显示出害虫的位置，从而进行药物喷洒。
以上所述实施例只为本发明之较佳实施例，并非以此限制本发明的实施范围，故凡依本发明之形状、原理所作的变化，均应涵盖在本发明的保护范围内。

Claims (3)

1.一种基于卷积神经网络的靶向药物喷洒方法，其特征在于，包括以下步骤：
S1、在训练好的CNN卷积神经网络检测图像的分类
输入样本图像和选定的迭代次数训练能够识别N类目标害虫的CNN卷积神经网络，输入目标图像，得出该图像对应N类目标害虫的判定得分；
S2、根据步骤S1得出图像对应N类目标害虫的判定得分，与预先设定的害虫识别阀值比较，如果得分大于害虫识别阀值，则判别该害虫种类，进行步骤S3，如果小于害虫的识别阀值，则判断为无害虫，无需靶向药物喷洒；
S3、根据步骤S2判别的害虫种类，输入到针对害虫所训练的RCNN区域网络模型，统计该害虫的数据，并用框图显示害虫的区域位置，从而进行药物喷洒。
2.根据权利要求1所述的一种基于卷积神经网络的靶向药物喷洒方法，其特征在于：在步骤S1中，输入的N个图像样本其中xi表示第i个输入图像，y表示第i个图像的标签；CNN训练过程包括向前传播阶段和后传播阶段，在前向传播阶段，当一个训练样本(xi，yi)作为网络输入时，xi将一步步地从输入层转移到输出层，最后得到实际输出oi，这个过程表示为：
oi＝FL(...F2(F1(xiwi)w2)...)wL
其中，L表示层数，wj为第j层Fj的权重向量，Fj定义为一系列的层，执行内核函数的卷积、最大池或非线性激活操作，在一系列的操作之后，估计向量w1，w2，…wL用以下优化问题来解决：
其中，为交叉熵损失函数；
使用后向传播和随机梯度下降来更新向量w1，w2，…的方法能够求解优化问题，训练好网络后，输入目标图像到固定权重向量的CNN网络中，得出该图像对应N类目标害虫的判定得分。
3.根据权利要求1所述的一种基于卷积神经网络的靶向药物喷洒方法，其特征在于：在步骤S3中，根据步骤S2判别的结果，输入目标图片，在RCNN网络中，利用Selective Search算法在图像中从上到下提取K个左右的候选框，将每个候选框缩放成n×m的大小并输入到预训练的CNN，将CNN的最后一个全连接层的输出作为特征，将这些特征输入支持向量中进行分类，将分类好的候选框进行边框回归，用边框回归值校正原来的建议窗口，生成预测窗口坐标，统计该害虫的数据，显示出害虫的位置，从而进行药物喷洒。
CN201810477485.1A 2018-05-18 2018-05-18 一种基于卷积神经网络的靶向药物喷洒方法 Pending CN108734277A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810477485.1A CN108734277A (zh) 2018-05-18 2018-05-18 一种基于卷积神经网络的靶向药物喷洒方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810477485.1A CN108734277A (zh) 2018-05-18 2018-05-18 一种基于卷积神经网络的靶向药物喷洒方法

Publications (1)

Publication Number Publication Date
CN108734277A true CN108734277A (zh) 2018-11-02

Family

ID=63938689

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810477485.1A Pending CN108734277A (zh) 2018-05-18 2018-05-18 一种基于卷积神经网络的靶向药物喷洒方法

Country Status (1)

Country Link
CN (1) CN108734277A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110009702A (zh) * 2019-04-16 2019-07-12 聊城大学 用于智能喷药机器人的美国白蛾幼虫网幕图像定位方法
CN111027380A (zh) * 2019-11-05 2020-04-17 北京海益同展信息科技有限公司 喷头控制方法、装置、计算机设备和存储介质
CN111248180A (zh) * 2020-02-26 2020-06-09 嘉应学院 一种基于实例分割的喷药精准控制方法及装置
CN112841154A (zh) * 2020-12-29 2021-05-28 长沙湘丰智能装备股份有限公司 一种基于人工智能的病虫害防治系统
WO2021250444A1 (en) * 2020-06-09 2021-12-16 Rynan Technologies Pte. Ltd. Insect monitoring system and method

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102541030A (zh) * 2012-02-07 2012-07-04 蔡诗伟 作物病虫害智能监测防治系统
CN105488536A (zh) * 2015-12-10 2016-04-13 中国科学院合肥物质科学研究院 一种基于多特征深度学习技术的农田害虫图像识别方法
CN106845401A (zh) * 2017-01-20 2017-06-13 中国科学院合肥物质科学研究院 一种基于多空间卷积神经网络的害虫图像识别方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102541030A (zh) * 2012-02-07 2012-07-04 蔡诗伟 作物病虫害智能监测防治系统
CN105488536A (zh) * 2015-12-10 2016-04-13 中国科学院合肥物质科学研究院 一种基于多特征深度学习技术的农田害虫图像识别方法
CN106845401A (zh) * 2017-01-20 2017-06-13 中国科学院合肥物质科学研究院 一种基于多空间卷积神经网络的害虫图像识别方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
YUFENG SHEN等: "Detection of stored-grain insects using deep learning", 《COMPUTERS AND ELECTRONICS IN AGRICULTURE》 *

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110009702A (zh) * 2019-04-16 2019-07-12 聊城大学 用于智能喷药机器人的美国白蛾幼虫网幕图像定位方法
CN110009702B (zh) * 2019-04-16 2023-08-04 聊城大学 用于智能喷药机器人的美国白蛾幼虫网幕图像定位方法
CN111027380A (zh) * 2019-11-05 2020-04-17 北京海益同展信息科技有限公司 喷头控制方法、装置、计算机设备和存储介质
WO2021088700A1 (zh) * 2019-11-05 2021-05-14 京东数科海益信息科技有限公司 喷头控制方法、装置、计算机设备和存储介质
CN111248180A (zh) * 2020-02-26 2020-06-09 嘉应学院 一种基于实例分割的喷药精准控制方法及装置
WO2021250444A1 (en) * 2020-06-09 2021-12-16 Rynan Technologies Pte. Ltd. Insect monitoring system and method
CN112841154A (zh) * 2020-12-29 2021-05-28 长沙湘丰智能装备股份有限公司 一种基于人工智能的病虫害防治系统

Similar Documents

Publication Publication Date Title
CN108734277A (zh) 一种基于卷积神经网络的靶向药物喷洒方法
CN107016405B (zh) 一种基于分级预测卷积神经网络的害虫图像分类方法
CN104217214B (zh) 基于可配置卷积神经网络的rgb‑d人物行为识别方法
Swasono et al. Classification of tobacco leaf pests using VGG16 transfer learning
CN109961024A (zh) 基于深度学习的小麦田间杂草检测方法
CN104992223A (zh) 基于深度学习的密集人数估计方法
CN108710919A (zh) 一种基于多尺度特征融合深度学习的裂缝自动化勾画方法
CN107818302A (zh) 基于卷积神经网络的非刚性多尺度物体检测方法
CN109902806A (zh) 基于卷积神经网络的噪声图像目标边界框确定方法
CN109635875A (zh) 一种基于深度学习的端到端网口检测方法
CN108388896A (zh) 一种基于动态时序卷积神经网络的车牌识别方法
WO2018052587A1 (en) Method and system for cell image segmentation using multi-stage convolutional neural networks
CN108109160A (zh) 一种基于深度学习的免交互式GrabCut舌体分割方法
CN109376747A (zh) 一种基于双流卷积神经网络的视频火焰检测方法
CN109102515A (zh) 一种基于多列深浅卷积神经网络的细胞计数方法
CN107145889A (zh) 基于具有RoI池化的双CNN网络的目标识别方法
CN106529499A (zh) 基于傅里叶描述子和步态能量图融合特征的步态识别方法
CN109191455A (zh) 一种基于ssd卷积网络的大田作物病虫害检测方法
CN106156765A (zh) 基于计算机视觉的安全检测方法
CN106815604A (zh) 基于多层信息融合的注视点检测方法
CN102930249A (zh) 基于颜色和模型的农田害虫识别和计数方法
CN109410204A (zh) 一种基于cam的皮质白内障图像处理及增强方法
CN112862849B (zh) 一种基于图像分割和全卷积神经网络的田间稻穗计数方法
CN107220596A (zh) 基于级联纠错机制的人体姿态估计方法
CN104463243B (zh) 基于平均脸特征的性别检测方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
AD01 Patent right deemed abandoned
AD01 Patent right deemed abandoned

Effective date of abandoning: 20220311