CN114627467B - 基于改进神经网络的水稻生育期识别方法及系统 - Google Patents
基于改进神经网络的水稻生育期识别方法及系统 Download PDFInfo
- Publication number
- CN114627467B CN114627467B CN202210163798.6A CN202210163798A CN114627467B CN 114627467 B CN114627467 B CN 114627467B CN 202210163798 A CN202210163798 A CN 202210163798A CN 114627467 B CN114627467 B CN 114627467B
- Authority
- CN
- China
- Prior art keywords
- image
- growth period
- rice
- neural network
- image block
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 235000007164 Oryza sativa Nutrition 0.000 title claims abstract description 185
- 235000009566 rice Nutrition 0.000 title claims abstract description 185
- 238000013528 artificial neural network Methods 0.000 title claims abstract description 85
- 238000000034 method Methods 0.000 title claims abstract description 41
- 240000007594 Oryza sativa Species 0.000 title 1
- 241000209094 Oryza Species 0.000 claims abstract description 184
- 238000012549 training Methods 0.000 claims abstract description 45
- 238000012795 verification Methods 0.000 claims abstract description 24
- 238000007781 pre-processing Methods 0.000 claims abstract description 6
- 230000006870 function Effects 0.000 claims description 37
- 238000005286 illumination Methods 0.000 claims description 21
- 230000008569 process Effects 0.000 claims description 12
- 238000012545 processing Methods 0.000 claims description 6
- 210000000481 breast Anatomy 0.000 claims description 4
- 238000004590 computer program Methods 0.000 claims description 4
- 238000002372 labelling Methods 0.000 claims description 4
- 238000000605 extraction Methods 0.000 claims description 3
- 230000008447 perception Effects 0.000 claims description 3
- 238000000638 solvent extraction Methods 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 5
- 238000012360 testing method Methods 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 235000013339 cereals Nutrition 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000006698 induction Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000008267 milk Substances 0.000 description 1
- 210000004080 milk Anatomy 0.000 description 1
- 235000013336 milk Nutrition 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000003062 neural network model Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000005070 ripening Effects 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/045—Combinations of networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
- G06N3/084—Backpropagation, e.g. using gradient descent
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Evolutionary Computation (AREA)
- Life Sciences & Earth Sciences (AREA)
- Artificial Intelligence (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Software Systems (AREA)
- Molecular Biology (AREA)
- Computing Systems (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- Mathematical Physics (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Evolutionary Biology (AREA)
- Image Analysis (AREA)
Abstract
本发明提出一种基于改进神经网络的水稻生育期识别方法及系统，包括获取水稻田间图像，对所述水稻田间图像进行预处理以构建训练集和验证集；建立包括条件卷积模块和CBAM注意力模块的水稻生育期识别神经网络，利用训练集和验证集对水稻生育期识别神经网络进行训练并优化，将待识别的水稻田间图像输入网络中，得到水稻生育期的识别结果。本发明通过建立包括条件卷积模块和CBAM注意力模块的水稻生育期识别神经网络，能够实现针对水稻生育期的不同阶段进行实时识别，有效提高水稻生育期的识别效率与准确率。
Description
技术领域
本发明涉及深度学习领域，更具体地，涉及一种基于改进神经网络的水稻生育期识别方法及系统。
背景技术
水稻是我国三大主要粮食作物之一，其产量和质量在我国一直备受重视。为了保持和提高稻米的产量和品质，必须利用来自稻田的信息对水稻生育期进行准确的监测识别和分析。水稻的整个生育期包括移栽期、返青期、分蘖期、拔节期、孕穗期、抽穗期、乳熟期以及成熟期。水稻生育期是重要的农业信息，识别关键生育期对水稻田间生产和管理起着重要的作用，也是监测水稻长势和进行水稻产量分析的重要依据。目前传统的人工观测水稻生育期方式难以满足农业现代化发展的需求，迫切需要对自动识别水稻发育期的方法进行研究，以减少劳动成本，提高观测准确性和实时性。
现有一种作物生育期预测方法，其通过获取预测年份上一年的逐日气象因子信息并将其输入预设气象因子预测模型，得到预测年份逐日气象因子信息；将所述预测年份逐日气象因子信息输入预设生育期预测模型，得到预测年份生育期预测天数；通过将能够预测逐日气象因子信息的预设气象因子预测模型和能够预测年份生育期预测天数的预设生育期预测模型结合，得到一个完整的生育期预测方案。
然而，上述方法过于依赖预测年份上一年的气象因子信息和生育期信息，无法根据预测年份下的气象信息和种植情况，实时进行预测生育期，预测的效率低且结果不准确。
发明内容
本发明为克服现有技术不能在水稻生育期的不同阶段进行实时识别，导致水稻生育期的识别效率低且识别结果不准确的缺陷，提供一种基于改进神经网络的水稻生育期识别方法及系统。
为解决上述技术问题，本发明的技术方案如下：
第一个方面，本发明提出一种基于改进神经网络的水稻生育期识别方法，包括以下步骤：
S1：获取水稻田间图像，对所述水稻田间图像进行预处理，利用经过预处理后的水稻田间图像构建训练集和验证集。
S2：建立包括条件卷积模块和CBAM注意力模块的水稻生育期识别神经网络。
S3：将一组训练集输入所述水稻生育期识别神经网络进行训练后，利用验证集对水稻生育期识别神经网络进行一次验证并调参，直至将所有训练集输入水稻生育期识别神经网络，完成训练。
S4：将待识别的水稻田间图像输入训练后的水稻生育期识别神经网络，水稻生育期识别神经网络输出水稻生育期的识别结果。
将待识别的水稻田间图像输入优化后的水稻生育期识别神经网络。水稻生育期识别神经网络的条件卷积模块中针对水稻生育期每一个阶段的水稻田间图像样例，定制有相应的卷积核。利用所述卷积核对水稻生育期每一个阶段的水稻田间图像样例做卷积得到对应的输出，并将输出结果输入CBAM注意力模块中，CBAM注意力模块从输出结果中提取出重要特征，并将提取的重要特征输入到全连接层中，全连接层输出分类结果，作为水稻生育期的识别结果。
作为优选方案，S2中，选取ResNet网络结构作为基本网络结构，建立水稻生育期识别神经网络，所述水稻生育期识别神经网络还包括Bottleneck模块和全连接层，所述CBAM注意力模块包括第一CBAM注意力模块和第二CBAM注意力模块；所述条件卷积模块、第一CBAM注意力模块、Bottleneck模块、第二CBAM注意力模块和全连接层依次连接。
作为优选方案，所述第一CBAM注意力模块和第二CBAM注意力模块均包括通道注意力模块和空间注意力模块。
作为优选方案，S1具体包括以下步骤：
S1.1：对水稻田间图像作分块处理，得到若干个图像块；根据不同的图像风格，将所述图像块划分为正样本图像块和负样本图像块。
S1.2：构建CycleGAN网络，使用所述CycleGAN网络将负样本图像块转换为正样本图像块。
S1.3：根据水稻的生育期的不同阶段，将所述正样本图像块进行标注分类，得到若干水稻生育期的不同阶段的正样本图像块。
S1.4：利用S1.3中进行标注后的正样本图像块构建训练集和验证集。
作为优选方案，S1.2中，构建CycleGAN网络的具体过程如下：
结合感知损失函数Lp(G,F)构建CycleGAN网络的改进目标损失函数，所述感知损失函数Lp(G,F)的表达式如下所示：
其中，W表示图像的宽度，H表示图像的高度，D表示图像的提取特征的深度分别，表示特征提取函数，G表示生成器模型G，F表示生成器模型F，G(x)表示生成器模型G生成的图像，x表示X图像域图像，F(y)生成器模型F生成的图像，y表示Y图像域图像。
则CycleGAN网络的改进目标损失函数L′的表达式如下所示：
L′＝LGAN(G,DY,X,Y)+LGAN(F,DX,X,Y)+αLcyc(G,F,X,Y)+βLp(G,F)
其中，LGAN(G,DY,X,Y)为对应生成器模型G和判别器DY的生成对抗过程建立的对抗损失函数，LGAN(F,DX,X,Y)为对应生成器模型F和判别器DY的生成对抗过程建立的对抗损失函数，Lcyc(G,F,X,Y)为通过直接计算生成器模型G和生成器模型F转换后的图像与原始图像的L1范数，α循环一致损失函数在目标损失函数中的调节权重，β为感知损失函数在目标损失函数中的调节权重，X表示X图像域，Y表示Y图像域。
作为优选方案，S1.2中，使用所述CycleGAN网络将负样本图像块转换为正样本图像块，具体包括以下步骤：
(a)将负样本图像块imge_x输入到CycleGAN网络的生成器模型G中，生成器模型G输出生成图像Fake_y；将生成图像Fake_y输入到生成器模型F中，生成器模型F输出近似负样本图像块的图像Cyc_x；将正样本图像块imge_y和生成图像Fake_y输入到判别器模型DY中，判别器模型DY输出分类标签为1的图像和标签为0的图像；判定分类标签为1的图像为正样本图像块imge_y，判定分类标签为0的图像为生成图像Fake_y。
(b)将正样本图像块imge_y输入到生成器模型F中，生成器模型F输出生成图像Fake_x；将生成图像Fake_x输入到生成器模型G中，生成器模型G输出近似正样本图像块的图像Cyc_y；将负样本图像块imge_x和生成图像Fake_x输入到判别器模型DX中，判别器模型DX输出分类标签为1的图像和分类标签为0的图像，判定分类标签为1的图像为负样本图像块imge_x，判定分类标签为0的图像为生成图像Fake_x。
(c)重复步骤(a)-(b)，迭代训练生成器模型G、生成器模型F、判别器模型DY和判别器模型DX，当判别器模型DY无法正确判别生成图像Fake_y与正样本图像块imge_y，且生成图像Fake_y与正样本图像块imge_y之间的差异最小时，停止迭代训练，判定负样本图像块转换为正样本图像块。
作为优选方案，S1.3中，根据水稻的生育期的不同阶段，将所述正样本图像块进行标注分类，将正样本图像块分为返青期图像块、分蘖期图像块、拔节期图像块、抽穗期图像块、乳熟期图像块和成熟期图像块。
作为优选方案，所述负样本图像块为曝光风格图像块，所述正样本图像块为温和光照风格图像块。
第二个方面，本发明还提出一种基于改进神经网络的水稻生育期识别系统，包括：
数据处理模块，用于获取水稻田间图像，对所述水稻田间图像进行预处理，并利用经过预处理后的水稻田间图像构建训练集和验证集。
水稻生育期识别神经网络，所述水稻生育期识别神经网络中包括条件卷积模块和CBAM注意力模块；将待识别的水稻田间图像输入水稻生育期识别神经网络中，水稻生育期识别神经网络输出水稻生育期的识别结果。
训练模块，用于利用训练集对水稻生育期识别神经网络进行训练。
验证模块，用于利用验证集对水稻生育期识别神经网络进行验证，优化水稻生育期识别网络参数。
第三个方面，本发明还提出一种计算机系统，包括存储器和处理器，所述存储器上存储有计算机程序，所述处理器执行存储器中的计算机程序时实现如基于改进神经网络的水稻生育期识别方法中任一方案的步骤。
与现有技术相比，本发明技术方案的有益效果是：本发明建立了包括条件卷积模块和CBAM注意力模块的水稻生育期识别神经网络，有效提高了水稻生育期的识别效率和识别结果的准确性。其中，条件卷积模块中针对水稻生育期每一个阶段的水稻田间图像样例，定制有相应的卷积核，CBAM注意力模块同时在通道与空间上关注水稻生育期每一个阶段重要特征并对每一个阶段的重要特征进行提取和学习，提高水稻生育期每一个阶段的分类准确率，使得水稻生育期识别神经网络能够准确以及有效地对水稻生育期的不同阶段进行实时识别。
附图说明
图1为基于改进神经网络的水稻生育期识别方法的流程图。
图2为实施例1中水稻生育期识别神经网络的原理图。
图3为实施例2中基于改进神经网络的水稻生育期识别方法的流程图。
图4为传统的CycleGAN网络的原理图。
图5为基于改进神经网络的水稻生育期识别系统的架构图。
具体实施方式
附图仅用于示例性说明，不能理解为对本专利的限制；
下面结合附图和实施例对本发明的技术方案做进一步的说明。
实施例1
请参阅图1，本实施例提出一种基于改进神经网络的水稻生育期识别方法，包括以下步骤：
S1：获取水稻田间图像，对所述水稻田间图像进行预处理，利用经过预处理后的水稻田间图像构建训练集和验证集。
S2：建立包括条件卷积模块和CBAM注意力模块的水稻生育期识别神经网络。
本实施例中，选取ResNet网络结构作为基本网络结构，建立水稻生育期识别神经网络。如图2所示，图2为本实施例中水稻生育期识别神经网络的原理图。
本实施例将ResNet网络结构原有的第一个卷积层由条件卷积模块代替，并在条件卷积模块之后插入第一CBAM注意力模块，以及全连接层之前插入第二CBAM注意力模块，即构建的水稻生育期识别神经网络具体包括依次连接的条件卷积模块、第一CBAM注意力模块、Bottleneck模块、第二CBAM注意力模块和全连接层。
使用条件卷积替换普通卷积，能够针对水稻生育期每一个阶段的水稻田间图像样例，定制相应的卷积核，然后利用卷积核对水稻生育期每一个阶段的水稻田间图像样例做卷积得到对应的输出，能够在提高水稻生育期识别神经网络的模型容量和性能的同时，保持高效的推理，对水稻生育期每一个阶段进行实时识别。
本实施例中，所述Bottleneck模块包括依次连接第一Bottleneck模块、第二Bottleneck模块、第三Bottleneck模块和第四Bottleneck模块；所述第一Bottleneck模块包括三个依次连接的Bottleneck；所述第二Bottleneck模块包括四个依次连接的Bottleneck；所述第三Bottleneck模块包括六个依次连接的Bottleneck；所述第四Bottleneck模块包括三个依次连接的Bottleneck。
所述第一CBAM注意力模块和第二CBAM注意力模块均包括通道注意力模块和空间注意力模块。轻量级的CBAM注意力模块包括两个独立的通道注意力模块和空间注意力模块，使得水稻生育期识别神经网络能够同时在通道与空间上关注图像的重要特征，以加强网络在空间和通道上的注意力；其中通道注意力模块关注什么样的特征是有意义的，空间注意力模块关注哪里的特征是有意义的。CBAM注意力模块可使网络更好的关注待识别图像的重要特征并自动提取学习，提升各个生育期分类准确率的方法。
S3：将一组训练集输入所述水稻生育期识别神经网络进行训练后，利用验证集对水稻生育期识别神经网络进行一次验证并调参，直至将所有训练集输入水稻生育期识别神经网络，完成训练。
本实施例中，在一轮训练后，将验证集输入到训练后的水稻生育期识别神经网络，计算水稻生育期识别神经网络输出的准确率和耗时。在下一轮训练开始前，使用反向传播等方法进行参数调整，优化水稻生育期识别网络的参数，使下一轮训练结束后能得到更好的训练结果。
S4：将待识别的水稻田间图像输入优化后的水稻生育期识别神经网络，水稻生育期识别神经网络输出水稻生育期的识别结果。
在具体实施过程中，将待识别的水稻田间图像输入优化后的水稻生育期识别神经网络。水稻生育期识别神经网络的条件卷积模块中针对水稻生育期每一个阶段的水稻田间图像样例，定制有相应的卷积核。利用所述卷积核对水稻生育期每一个阶段的水稻田间图像样例做卷积得到对应的输出，并将输出结果输入CBAM注意力模块中，依次经过第一CBAM注意力模块、Bottleneck模块和第二CBAM注意力模块提取出重要特征，并将提取的重要特征输入到全连接层中，全连接层输出分类结果，作为水稻生育期的识别结果。
针对水稻生育期不同阶段需要进行实时监控和识别的特点，本发明建立了包括条件卷积模块和CBAM注意力模块的水稻生育期识别神经网络，有效提高了水稻生育期的识别效率和识别结果的准确性。其中，条件卷积模块中针对水稻生育期每一个阶段的水稻田间图像样例，定制有相应的卷积核，CBAM注意力模块同时在通道与空间上关注水稻生育期每一个阶段重要特征并对每一个阶段的重要特征进行提取和学习，提高水稻生育期每一个阶段的分类准确率，使得水稻生育期识别神经网络能够准确以及有效地对水稻生育期的不同阶段进行实时识别。
实施例2
请参阅图3，本实施例在实施例2提出的基于改进神经网络的水稻生育期识别方法的基础上作出改进。
本实施例中，S1具体包括以下步骤：
S1.1：对水稻田间图像作分块处理，得到若干个图像块；根据不同的图像风格，将所述图像块划分为正样本图像块和负样本图像块。
本实施例中，所述负样本图像块为曝光风格图像块，所述正样本图像块为温和光照风格图像块。
本实施例通过架设在水稻田旁的图像采集设备实时采集一系列的水稻田间图像，根据水稻生育期识别神经网络模型对输入图像大小的需求，使用图像批量分块算法将每一张原始图像进行自适应裁剪，获得若干个小图像块；并根据图像块的特点，对图像块进行风格归纳分类。由于自然环境下光照条件复杂，水面反光会增加图像的曝光度，需要将图像块分为曝光风格图像块和温和光照风格图像块。
S1.2：构建CycleGAN网络，使用所述CycleGAN网络将曝光风格图像块转换为温和光照风格图像块。
由于曝光风格图像中高光部分的水稻细节难以显现，会影响后续的图像分类，所以需要将曝光风格的图像转为温和光照风格。
如图4所示，图4为传统的CycleGAN网络的原理图，传统的CycleGAN网络的目标损失函数L如下所示：
L＝LGAN(G,DY,X,Y)+LGAN(F,DX,X,Y)+λLcyc(G,F,X,Y)
其中，LGAN(G,DY,X,Y)为对应生成器模型G和判别器DY的生成对抗过程建立的对抗损失函数，LGAN(F,DX,X,Y)为对应生成器模型F和判别器DY的生成对抗过程建立的对抗损失函数，Lcyc(G,F,X,Y)为通过直接计算生成器模型G和生成器模型F转换后的图像与原始图像的L1范数。
在图像转换过程中，为了既能够捕获图像的纹理信息又能够捕获对象级风格，本发明在传统的CycleGAN网络的目标损失函数中加入感知损失函数Lp(G,F)，构造一个改进目标损失函数。感知损失函数中“感知”的含义是将通过预训练好的网络提取的真实图像与生成图像的高层特征作比较，使高层信息(内容和结构)非常接近，感知损失函数Lp(G,F)通过L2范数被定义，其表达式如下所示：
其中，W表示图像的宽度，H表示图像的高度，D表示图像的提取特征的深度分别，表示特征提取函数，G表示生成器模型G，F表示生成器模型F，G(x)表示生成器模型G生成的图像，x表示X图像域图像，F(y)生成器模型F生成的图像，y表示Y图像域图像。
则CycleGAN网络的改进目标损失函数的表达式L′如下所示：
L′＝LGAN(G,DY,X,Y)+LGAN(F,DX,X,Y)+αLcyc(G,F,X,Y)+βLp(G,F)
其中，LGAN(G,DY,X,Y)为对应生成器模型G和判别器DY的生成对抗过程建立的对抗损失函数，LGAN(F,DX,X,Y)为对应生成器模型F和判别器DY的生成对抗过程建立的对抗损失函数，Lcyc(G,F,X,Y)为通过直接计算生成器模型G和生成器模型F转换后的图像与原始图像的L1范数，α循环一致损失函数在目标损失函数中的调节权重，β为感知损失函数在目标损失函数中的调节权重，X表示X图像域，Y表示Y图像域。
本实施例中，在构建好新的CycleGAN网络后，使用所述CycleGAN网络对所述曝光风格图像块进行训练，将曝光风格图像块转换为温和光照风格图像块，具体包括以下步骤：
(a)将曝光风格图像块imge_x输入到CycleGAN网络的生成器模型G中，生成器模型G输出生成图像Fake_y；将生成图像Fake_y输入到生成器模型F中，生成器模型F输出近似曝光风格图像块的图像Cyc_x；将温和光照风格图像块imge_y和生成图像Fake_y输入到判别器模型DY中，判别器模型DY输出分类标签为1图像和分类标签为0的图像；判定分类标签为1的图像为温和光照风格图像块imge_y，判定分类标签为0的图像为生成图像Fake_y。
(b)将温和光照风格图像块imge_y输入到生成器模型F中，生成器模型F输出生成图像Fake_x；将生成图像Fake_x输入到生成器模型G中，生成器模型G输出近似温和光照风格图像块的图像Cyc_y；将曝光风格图像块imge_x和生成图像Fake_x输入到判别器模型DX中，判别器模型DX分类标签为1图像和分类标签为0的图像，判定分类标签为1的图像为曝光风格图像块imge_x，判定分类标签为0的图像为生成图像Fake_x。
(c)重复步骤(a)-(b)，迭代训练生成器模型G、生成器模型F、判别器模型DY和判别器模型DX，当判别器模型DY无法正确判别生成图像Fake_y与温和光照风格图像块imge_y，生成图像Fake_y与温和光照风格图像块imge_y之间的差异最小时，表明曝光风格图像块均转换为温和光照风格图像块。
本实施例中，图像Cyc_x和图像Cyc_y作用于CycleGAN网络的改进目标损失函数L′中的Lcyc(G,F,X,Y)，图像Cyc_x与负样本图像块imge_x，以及图像Cyc_y与正样本图像块imge_y组成L1范数，生成L′值以训练CycleGAN网络。
S1.3：根据水稻的生育期的不同阶段，将所述温和光照风格图像块进行标注分类，得到若干不同类型的温和光照风格图像块。
本实施例中，根据水稻的生育期，将所述温和光照风格图像块进行标注，将温和光照风格图像块分为返青期图像块、分蘖期图像块、拔节期图像块、抽穗期图像块、乳熟期图像块和成熟期图像块。
S1.4：利用S1.3中进行标注后的温和光照风格图像块构建训练集和验证集。
本实施例中，按照6:2:2的比例将进行标注后的温和光照风格图像块分成训练集、验证集和测试集，利用训练集中的水稻田间图像对水稻生育期识别神经网络进行训练，并利用验证集中的水稻田间图像对水稻生育期识别神经网络进行验证，优化水稻生育期识别网络参数；将测试集中的水稻田间图像输入优化后的水稻生育期识别神经网络，水稻生育期识别神经网络输出水稻生育期的识别结果。
最后通过在测试集上的4032张不同生育期水稻田间图像进行测试，本发明方法在识别水稻生育期的准确率为99.851％，平均对单张图像的识别耗时为0.013s，具有较高的识别效率和准确率。
实施例3
本实施例提出一种基于改进神经网络的水稻生育期识别系统，包括：
数据处理模块、水稻生育期识别神经网络、训练模块和验证模块。
在具体实施过程中，数据处理模块获取水稻田间图像，并对水稻田间图像作分块处理，得到若干个图像块；根据图像风格，将所述图像块分为负样本图像块和正样本图像块。数据处理模块中的CycleGAN网络将负样本图像块转换为正样本图像块，然后根据水稻的生育期，将所述正样本图像块进行标注分类，得到若干不同类型的正样本图像块。最后利用进行标注后的正样本图像块构建训练集和验证集。
本实施例中，所述负样本图像块为曝光风格图像块，所述正样本图像块为温和光照风格图像块。
本实施例中，根据水稻的生育期，将所述温和光照风格图像块进行标注，将温和光照风格图像块分为返青期图像块、分蘖期图像块、拔节期图像块、抽穗期图像块、乳熟期图像块和成熟期图像块。
训练模块利用训练集中的水稻田间图像对水稻生育期识别神经网络每进行一次训练后，验证模块利用验证集中的水稻田间图像对水稻生育期识别神经网络进行验证，计算水稻生育期识别神经网络输出的准确率和耗时，在下一轮训练开始前，使用反向传播等方法进行参数调整，优化水稻生育期识别网络参数。将待识别的水稻田间图像输入优化后的水稻生育期识别神经网络，水稻生育期识别神经网络输出水稻生育期的识别结果。
其中，所述水稻生育期识别神经网络采用ResNet网络结构作为基本网络结构，将ResNet网络结构原有的第一个卷积层由条件卷积模块代替，并在条件卷积模块之后插入第一CBAM注意力模块，以及全连接层之前插入第二CBAM注意力模块，构成包括依次连接的条件卷积模块、第一CBAM注意力模块、Bottleneck模块、第二CBAM注意力模块和全连接层的网络结构。
附图中描述位置关系的用语仅用于示例性说明，不能理解为对本专利的限制；
显然，本发明的上述实施例仅仅是为清楚地说明本发明所作的举例，而并非是对本发明的实施方式的限定。对于所属领域的普通技术人员来说，在上述说明的基础上还可以做出其它不同形式的变化或变动。这里无需也无法对所有的实施方式予以穷举。凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明权利要求的保护范围之内。
Claims (7)
1.基于改进神经网络的水稻生育期识别方法，其特征在于，包括以下步骤：
S1：获取水稻田间图像，对所述水稻田间图像进行预处理，利用经过预处理后的水稻田间图像构建训练集和验证集，包括：
S1.1：对水稻田间图像作分块处理，得到若干个图像块；根据不同的图像风格，将所述图像块划分为正样本图像块和负样本图像块；
S1.2：构建CycleGAN网络，使用所述CycleGAN网络将负样本图像块转换为正样本图像块；
S1.3：根据水稻的生育期的不同阶段，将所述正样本图像块进行标注分类，得到若干水稻生育期的不同阶段的正样本图像块，包括：
根据水稻的生育期的不同阶段，将所述正样本图像块进行标注分类，将正样本图像块分为返青期图像块、分蘖期图像块、拔节期图像块、抽穗期图像块、乳熟期图像块和成熟期图像块；
S1.4：利用S1.3中进行标注后的正样本图像块构建训练集和验证集；
S2：建立包括条件卷积模块和CBAM注意力模块的水稻生育期识别神经网络，包括：
选取ResNet网络结构作为基本网络结构，建立水稻生育期识别神经网络，所述水稻生育期识别神经网络还包括Bottleneck模块和全连接层，所述CBAM注意力模块包括第一CBAM注意力模块和第二CBAM注意力模块；所述条件卷积模块、第一CBAM注意力模块、Bottleneck模块、第二CBAM注意力模块和全连接层依次连接；
S3：将一组训练集输入所述水稻生育期识别神经网络进行训练后，利用验证集对水稻生育期识别神经网络进行一次验证并调参，直至将所有训练集输入水稻生育期识别神经网络，完成训练；
S4：将待识别的水稻田间图像输入训练后的水稻生育期识别神经网络，水稻生育期识别神经网络输出水稻生育期的识别结果。
2.根据权利要求1所述的基于改进神经网络的水稻生育期识别方法，其特征在于，所述第一CBAM注意力模块和第二CBAM注意力模块均包括通道注意力模块和空间注意力模块。
3.根据权利要求1所述的基于改进神经网络的水稻生育期识别方法，其特征在于，S1.2中，构建CycleGAN网络的具体过程如下：
结合感知损失函数L p（G,F）构建CycleGAN网络的改进目标损失函数，所述感知损失函数L p(G,F)的表达式如下所示：
其中，W表示图像的宽度，H表示图像的高度，D表示图像的提取特征的深度，表示特征提取函数，G表示生成器模型G，F表示生成器模型F，/>表示生成器模型G生成的图像，/>表示X图像域图像，/>表示生成器模型F生成的图像，/>表示Y图像域图像；
则CycleGAN网络的改进目标损失函数的表达式如下所示：
其中，为对应生成器模型G和判别器D Y的生成对抗过程建立的对抗损失函数，/>为对应生成器模型F和判别器D X的生成对抗过程建立的对抗损失函数，/>为通过直接计算生成器模型G和生成器模型F转换后的图像与原始图像的L1范数，α循环一致损失函数在目标损失函数中的调节权重，β为感知损失函数在目标损失函数中的调节权重，X表示X图像域，Y表示Y图像域。
4.根据权利要求3所述的基于改进神经网络的水稻生育期识别方法，其特征在于，S1.2中，使用所述CycleGAN网络将负样本图像块转换为正样本图像块，具体包括以下步骤：
(a)将负样本图像块imge_x输入到CycleGAN网络的生成器模型G中，生成器模型G输出生成图像Fake_y；将生成图像Fake_y输入到生成器模型F中，生成器模型F输出近似负样本图像块的图像Cyc_x；将正样本图像块imge_y和生成图像Fake_y输入到判别器模型D Y中，判别器模型D Y输出分类标签为1的图像和标签为0的图像；判定分类标签为1的图像为正样本图像块imge_y，判定分类标签为0的图像为生成图像Fake_y；
(b)将正样本图像块imge_y输入到生成器模型F中，生成器模型F输出生成图像Fake_x；将生成图像Fake_x输入到生成器模型G中，生成器模型G输出近似正样本图像块的图像Cyc_y；将负样本图像块imge_x和生成图像Fake_x输入到判别器模型D X中，判别器模型D X输出分类标签为1的图像和分类标签为0的图像，判定分类标签为1的图像为负样本图像块imge_x，判定分类标签为0的图像为生成图像Fake_x；
(c)重复步骤(a)-(b)，迭代训练生成器模型G、生成器模型F、判别器模型D Y和判别器模型D X，当判别器模型D Y无法正确判别生成图像Fake_y与正样本图像块imge_y，且生成图像Fake_y与正样本图像块imge_y之间的差异最小时，停止迭代训练，判定负样本图像块转换为正样本图像块。
5.根据权利要求1所述的基于改进神经网络的水稻生育期识别方法，其特征在于，所述负样本图像块为曝光风格图像块，所述正样本图像块为温和光照风格图像块。
6.基于改进神经网络的水稻生育期识别系统，应用于如权利要求1~5所述的基于改进神经网络的水稻生育期识别方法，其特征在于，包括：
数据处理模块，用于获取水稻田间图像，对所述水稻田间图像进行预处理，并利用经过预处理后的水稻田间图像构建训练集和验证集；
水稻生育期识别神经网络，所述水稻生育期识别神经网络中包括条件卷积模块和CBAM注意力模块；将待识别的水稻田间图像输入水稻生育期识别神经网络中，水稻生育期识别神经网络输出水稻生育期的识别结果；
训练模块，用于利用训练集对水稻生育期识别神经网络进行训练；
验证模块，用于利用验证集对水稻生育期识别神经网络进行验证，优化水稻生育期识别网络参数。
7.一种计算机系统，其特征在于，包括存储器和处理器，所述存储器上存储有计算机程序，所述处理器执行存储器中的计算机程序时实现如权利要求1~5任一项所述基于改进神经网络的水稻生育期识别方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210163798.6A CN114627467B (zh) | 2022-02-22 | 2022-02-22 | 基于改进神经网络的水稻生育期识别方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210163798.6A CN114627467B (zh) | 2022-02-22 | 2022-02-22 | 基于改进神经网络的水稻生育期识别方法及系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN114627467A CN114627467A (zh) | 2022-06-14 |
| CN114627467B true CN114627467B (zh) | 2024-05-10 |
Family
ID=81900992
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210163798.6A Active CN114627467B (zh) | 2022-02-22 | 2022-02-22 | 基于改进神经网络的水稻生育期识别方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114627467B (zh) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115131670B (zh) * | 2022-09-02 | 2022-12-20 | 广州艾米生态人工智能农业有限公司 | 一种水稻图片智能审核方法、系统、装置及设备 |
| CN116052141B (zh) * | 2023-03-30 | 2023-06-27 | 北京市农林科学院智能装备技术研究中心 | 作物生育期的识别方法、装置、设备及介质 |
| CN116453003B (zh) * | 2023-06-14 | 2023-09-01 | 之江实验室 | 一种基于无人机监测智能识别水稻生长势的方法和系统 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109492665A (zh) * | 2018-09-28 | 2019-03-19 | 江苏省无线电科学研究所有限公司 | 水稻生育期的检测方法、装置及电子设备 |
| CN112580671A (zh) * | 2020-12-31 | 2021-03-30 | 华南农业大学 | 一种基于深度学习的稻穗多发育期自动检测方法及系统 |
| CN113140019A (zh) * | 2021-05-13 | 2021-07-20 | 电子科技大学 | 一种基于融合弥补生成对抗网络的文本生成图像的方法 |
| CN113505810A (zh) * | 2021-06-10 | 2021-10-15 | 长春工业大学 | 基于池化视觉Transformer杂草生长周期检测方法 |
-
2022
- 2022-02-22 CN CN202210163798.6A patent/CN114627467B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109492665A (zh) * | 2018-09-28 | 2019-03-19 | 江苏省无线电科学研究所有限公司 | 水稻生育期的检测方法、装置及电子设备 |
| CN112580671A (zh) * | 2020-12-31 | 2021-03-30 | 华南农业大学 | 一种基于深度学习的稻穗多发育期自动检测方法及系统 |
| CN113140019A (zh) * | 2021-05-13 | 2021-07-20 | 电子科技大学 | 一种基于融合弥补生成对抗网络的文本生成图像的方法 |
| CN113505810A (zh) * | 2021-06-10 | 2021-10-15 | 长春工业大学 | 基于池化视觉Transformer杂草生长周期检测方法 |
Non-Patent Citations (1)
| Title |
|---|
| 基于无线传感器的作物图像传输方法;张连宽 等;广东农业科学;20130810(第15期);第182-185页 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN114627467A (zh) | 2022-06-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN114627467B (zh) | 基于改进神经网络的水稻生育期识别方法及系统 | |
| WO2022160771A1 (zh) | 基于自适应多尺度特征提取模型的高光谱图像分类方法 | |
| CN110751019B (zh) | 基于深度学习的高分辨率影像农作物自动提取方法及装置 | |
| CN110472575B (zh) | 一种基于深度学习和计算机视觉的串番茄成熟度检测方法 | |
| CN114092832B (zh) | 一种基于并联混合卷积网络的高分辨率遥感影像分类方法 | |
| CN111696101A (zh) | 一种基于SE-Inception的轻量级茄科病害识别方法 | |
| CN114092769B (zh) | 基于联邦学习的变电站多场景巡检分析方法 | |
| CN109344738A (zh) | 农作物病虫草害识别方法及装置 | |
| CN109800795A (zh) | 一种果蔬识别方法及系统 | |
| CN114676773B (zh) | 基于sar数据的北极海冰分类方法 | |
| CN112488963A (zh) | 一种用于农作物病害数据的增强方法 | |
| WO2023197496A1 (zh) | 一种机采棉脱叶效果综合评价指标监测与评价方法及系统 | |
| CN115879817A (zh) | 一种区域减碳量评估方法、装置、电子设备及存储介质 | |
| CN116843952A (zh) | 一种面向果蔬病害识别的小样本学习分类方法 | |
| CN110705698A (zh) | 尺度自适应感知的目标计数深度网络设计方法 | |
| CN115063602A (zh) | 基于改进yolox-s网络的农作物病虫害识别方法 | |
| Poorni et al. | Detection of rice leaf diseases using convolutional neural network | |
| CN114663791A (zh) | 一种非结构化环境下面向剪枝机器人的枝条识别方法 | |
| CN115017990A (zh) | 一种交通流量预测方法、装置、设备及存储介质 | |
| CN114511848B (zh) | 一种基于改进标签平滑算法的葡萄物候期识别方法及系统 | |
| CN117437554B (zh) | 基于机器学习的平原水网地区非正式绿地识别方法和系统 | |
| CN117909691B (zh) | 一种海洋工程设计数据的获取系统及方法 | |
| CN117710966B (zh) | 基于YOLOv7-MEF模型的玉米籽粒品质检测方法 | |
| CN117095291A (zh) | 一种作物生长期精确识别方法及系统 | |
| Yang | Field weed classification based on modified LBP and local sparse representation |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |