CN116416532A - 一种病株诊断及缺株检测方法、系统、设备及存储介质 - Google Patents
一种病株诊断及缺株检测方法、系统、设备及存储介质 Download PDFInfo
- Publication number
- CN116416532A CN116416532A CN202211720821.3A CN202211720821A CN116416532A CN 116416532 A CN116416532 A CN 116416532A CN 202211720821 A CN202211720821 A CN 202211720821A CN 116416532 A CN116416532 A CN 116416532A
- Authority
- CN
- China
- Prior art keywords
- target
- image
- disease
- plant
- training
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 90
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 title claims abstract description 76
- 201000010099 disease Diseases 0.000 title claims abstract description 75
- 238000003745 diagnosis Methods 0.000 title claims abstract description 26
- 238000003860 storage Methods 0.000 title claims abstract description 12
- 238000000034 method Methods 0.000 claims abstract description 54
- 238000010801 machine learning Methods 0.000 claims abstract description 14
- 238000012549 training Methods 0.000 claims description 66
- 238000012360 testing method Methods 0.000 claims description 18
- 238000013528 artificial neural network Methods 0.000 claims description 16
- 238000005070 sampling Methods 0.000 claims description 13
- 238000004590 computer program Methods 0.000 claims description 9
- 238000012545 processing Methods 0.000 claims description 8
- 238000012795 verification Methods 0.000 claims description 6
- 230000003902 lesion Effects 0.000 claims 2
- 241000196324 Embryophyta Species 0.000 description 76
- 241000700605 Viruses Species 0.000 description 23
- 235000014787 Vitis vinifera Nutrition 0.000 description 21
- 241000219095 Vitis Species 0.000 description 18
- 235000009754 Vitis X bourquina Nutrition 0.000 description 14
- 235000012333 Vitis X labruscana Nutrition 0.000 description 14
- 241000607479 Yersinia pestis Species 0.000 description 10
- 230000007812 deficiency Effects 0.000 description 10
- 238000013135 deep learning Methods 0.000 description 9
- 240000006365 Vitis vinifera Species 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 7
- 238000009826 distribution Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 208000024891 symptom Diseases 0.000 description 5
- 238000004422 calculation algorithm Methods 0.000 description 4
- 238000011156 evaluation Methods 0.000 description 4
- 238000011835 investigation Methods 0.000 description 4
- 238000011176 pooling Methods 0.000 description 4
- 238000005096 rolling process Methods 0.000 description 4
- 238000013145 classification model Methods 0.000 description 3
- 230000006835 compression Effects 0.000 description 3
- 238000007906 compression Methods 0.000 description 3
- 238000012544 monitoring process Methods 0.000 description 3
- 238000011160 research Methods 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 241000238631 Hexapoda Species 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 235000013399 edible fruits Nutrition 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000005284 excitation Effects 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 208000015181 infectious disease Diseases 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000003752 polymerase chain reaction Methods 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 230000003595 spectral effect Effects 0.000 description 2
- 230000003612 virological effect Effects 0.000 description 2
- 241000119250 Sesbania punicea Species 0.000 description 1
- 241000726445 Viroids Species 0.000 description 1
- 241000219094 Vitaceae Species 0.000 description 1
- 230000023852 carbohydrate metabolic process Effects 0.000 description 1
- 235000021256 carbohydrate metabolism Nutrition 0.000 description 1
- 238000007635 classification algorithm Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013527 convolutional neural network Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000001066 destructive effect Effects 0.000 description 1
- 238000012850 discrimination method Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000001747 exhibiting effect Effects 0.000 description 1
- 235000021021 grapes Nutrition 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000007170 pathology Effects 0.000 description 1
- 230000029553 photosynthesis Effects 0.000 description 1
- 238000010672 photosynthesis Methods 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 238000002310 reflectometry Methods 0.000 description 1
- 241000894007 species Species 0.000 description 1
- 238000005507 spraying Methods 0.000 description 1
- 238000010200 validation analysis Methods 0.000 description 1
- 238000011514 vinification Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/10—Terrestrial scenes
- G06V20/17—Terrestrial scenes taken from planes or by drones
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/764—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
- G06V10/765—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects using rules for classification or partitioning the feature space
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/77—Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
- G06V10/774—Generating sets of training patterns; Bootstrap methods, e.g. bagging or boosting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/77—Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
- G06V10/776—Validation; Performance evaluation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/10—Terrestrial scenes
- G06V20/188—Vegetation
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Medical Informatics (AREA)
- General Health & Medical Sciences (AREA)
- Databases & Information Systems (AREA)
- Computing Systems (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Computation (AREA)
- Software Systems (AREA)
- Biomedical Technology (AREA)
- Public Health (AREA)
- Remote Sensing (AREA)
- Data Mining & Analysis (AREA)
- Pathology (AREA)
- Epidemiology (AREA)
- Primary Health Care (AREA)
- Image Processing (AREA)
Abstract
本发明提供一种病株诊断及缺株检测方法、系统、设备及存储介质,涉及病株诊断及缺株检测领域;该方法包括:获取目标园区内植株的目标图像,并根据目标图像生成目标正射影像;采用设定滑动窗口将目标正射影像划分为多个目标窗口图像;将多个目标窗口图像输入至检测模型,得到各个目标窗口图像对应的检测信息;检测信息包括:植株的地理位置和植株的发病等级;当发病等级为零时,表示缺株;检测模型采用机器学习的方法建立;本发明能够快速准确的对植株进行检测。
Description
技术领域
本发明涉及病株诊断及缺株检测领域,特别是涉及一种病株诊断及缺株检测方法、系统、设备及存储介质。
背景技术
中国是世界葡萄生产大国,随着种植面积的增长、树龄的增加,病害发生频率及危害程度也逐渐加剧,病害成为制约葡萄与葡萄酒产业持续发展最为重要的因素之一。
葡萄是多年生果树中感染病毒最多的树种。迄今为止,全世界已报道的葡萄病毒及类病毒约70种。葡萄卷叶病(Grapevine leafroll disease,GLD)是葡萄最严重的病毒病害,被认为是在世界范围内最普遍、造成经济损失最严重的病毒。葡萄卷叶病毒能够抑制葡萄的长势,缩短树体寿命,降低光合作用,影响碳水化合物代谢,尤其是对红色品种影响显著。葡萄卷叶病毒感染引起的减产、果实品质下降造成的经济损失大约在每公顷25000至40000美金。
葡萄园精细化管理作为智慧农业的一部分,减少卷叶病带来经济损失的管理决策制定建立在对葡萄园卷叶病病情持续监测的基础上。葡萄卷叶病带病毒株在葡萄园区内的空间分布,及其严重度的评估数据是制定有效的管理决策的最主要的根据。卷叶病带病毒株的鉴定主要依靠聚合酶链反应(polymerase chainreaction,PCR)检测技术、高光谱技术或者人工田间调查。然而,这些方法都在叶片尺度上进行鉴定,难以适应葡萄园的种植规模。对于整株葡萄的卷叶病严重程度鉴定仍然依赖人工调查的方法,通过评估表现出病症的叶片数量实现。在实际生产中,基于这些方法,葡萄园管理者只能实现抽样调查,无法获取覆盖全葡萄园区域的带病毒株的空间分布,从而导致对植株的检测结果不准确。
因此,有必要开发自动化的田块尺度酿酒葡萄卷叶病检测解决方案,实用、可靠、经济且高效准确地检测葡萄园中卷叶病带病毒株的空间分布,完成对其病情严重度的评估,为决策过程提供有意义的信息。
发明内容
本发明的目的是提供一种病株诊断及缺株检测方法、系统、设备及存储介质,能快速准确的对植株进行检测。
为实现上述目的,本发明提供了如下方案:
一种病株诊断及缺株检测方法,所述方法包括:
获取目标园区内植株的目标图像,并根据所述目标图像生成目标正射影像;
采用设定滑动窗口将所述目标正射影像划分为多个目标窗口图像;
将多个所述目标窗口图像输入至检测模型,得到各个所述目标窗口图像对应的检测信息;所述检测信息包括:植株的地理位置和植株的发病等级;
当所述发病等级为零时,表示缺株;
所述检测模型采用机器学习的方法建立。
可选地,所述采用设定滑动窗口将所述目标正射影像划分为多个目标窗口图像,具体包括:
将所述设定滑动窗口按照设定运动轨迹在所述目标正射影像上移动,得到多个目标窗口图像;所述设定运动轨迹是由所述目标正射影像的起始位置和所述正射影像的结束位置确定的。
可选地,所述设定滑动窗口的大小是根据所述目标园区内植株的株距确定的。
可选地,所述检测模型的确定方法为:
获取训练数据;所述训练数据是采用数据增强的方法对原始训练数据进行扩充得到的;所述原始训练数据包括:试验区内各个采样点区域内的植株在不同发病等级下的原始正射影像;
采用设定滑动窗口在所述训练数据的正射影像上移动,得到多个训练窗口图像;
将多个所述训练窗口图像划分为训练集和验证集;
构建共享神经网络;
将所述训练集输入至所述共享神经网络,以误差最小为目标对所述共享神经网络中的参数进行训练,得到训练后的共享神经网络;
采用所述验证集对所述训练后的共享神经网络的参数进行调整,得到所述检测模型。
可选地,所述根据所述目标图像生成目标正射影像,具体包括:
采用超分辨网络将所述目标图像转换成目标正射影像;所述目标正射影像的分辨率大于设定分辨率值;其中,所述超分辨网络是采用机器学习的方法确定的。
可选地,所述超分辨网络的确定方法为:
获取训练图像;所述训练图像包括试验区内各个采样点区域内的植株的原始图像;
构建训练网络;
将所述训练图像输入到所述训练网络,以损失最小为目标对所述训练网络的峰值信噪比进行调整,得到调整后的训练网络;
将所述调整后的训练网络确定为超分辨网络。
可选地,所述方法还包括:
对所述检测信息按照所述发病等级进行分类并保存。
一种病株诊断及缺株检测系统,所述系统包括:
图像处理模块,用于获取目标园区内植株的目标图像,并根据所述目标图像生成目标正射影像;
目标窗口图像获取模块,用于采用设定滑动窗口将所述目标正射影像划分为多个目标窗口图像;
检测信息确定模块,用于将多个所述目标窗口图像输入至检测模型,得到各个所述目标窗口图像对应的检测信息;所述检测信息包括:植株的地理位置和植株的发病等级;
当所述发病等级为零时,表示缺株;
所述检测模型采用机器学习的方法建立。
一种电子设备,包括存储器及处理器,所述存储器用于存储计算机程序,所述处理器运行所述计算机程序以使所述电子设备执行上述任意一项所述的病株诊断及缺株检测方法。
一种计算机可读存储介质,其存储有计算机程序,所述计算机程序被处理器执行时实现上述任意一项所述的病株诊断及缺株检测方法。
根据本发明提供的具体实施例,本发明公开了以下技术效果:
本发明提供了一种病株诊断及缺株检测方法、系统、设备及存储介质,该方法通过获取目标园区内植株的目标图像,并根据目标图像生成目标正射影像;采用设定滑动窗口将目标正射影像划分为多个目标窗口图像;将多个目标窗口图像输入至检测模型,得到各个目标窗口图像对应的检测信息;检测信息包括:植株的地理位置和植株的发病等级;当发病等级为零时,表示缺株;由于采用滑动窗口以及根据机器学习的方法建立的检测模型实现对目标园区内植株的诊断检测处理,能够使得诊断检测更加的迅速,并且还能够提高准确性,因此本发明能够快速准确的对植株进行检测。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的病株诊断及缺株检测方法的流程图;
图2为本发明实施例提供的病株诊断及缺株检测系统的结构图;
图3为本发明实施例提供的检测模型各个层级对应的参数示意图。
符号说明:
图像处理模块-1;目标窗口图像获取模块-2;检测信息确定模块-3。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明的目的是提供一种病株诊断及缺株检测方法、系统、设备及存储介质;由于遥感技术具有获取数据迅速、覆盖面积广及时效性的特点,可以快速、大范围地调查卷叶病病情且不具有破坏性。基于遥感技术的植物病虫害检测可以被看作是植物“放射诊断”的一种方法,它能够有效地提供对病虫害的非接触和空间连续监测。这方面的早期研究和应用可以追溯到1980年代。通过航空或卫星图像的目视解译,可以识别因植物病虫害而受损的区域。遥感数据可从多平台获取,包括近地遥感设备、航空、卫星平台。根据不同平台的高度以及传感器类型可得到多尺度下不同空间、时间以及不同光谱分辨率、空间分辨率的多源遥感数据。随着计算机科学、传感器技术的快速发展,广泛的遥感数据已被用于田块尺度植物病虫害检测。在过去的几十年里,计算机视觉算法、特征提取和机器学习算法的研究在多个尺度上进行,揭示了区域范围内监测植物病虫害的新可能性。
通过理解遥感数据与植物病理学理论之间的联系,从而在许多方面拓宽了农情信息获取的范围,从而为智慧农业中有效决策的制定提供基础。现有研究不仅侧重于检测特定病虫害的发生,而且还评估其感染严重程度,并绘制其在地块或区域级别的分布图。在某些情况下,基于遥感的植物病虫害检测结果已经开始在一些实际应用中显示出巨大的潜力,例如促进田间病虫害精准喷洒或支持植物的高通量表型分析。
近年来,使用机器学习处理遥感数据为植物病虫害检测提供了新的特征提取和建模思路,超越了传统的光谱特征和统计判别方法。计算机视觉技术结合深度学习是用于识别和分类对象的技术前沿,大量研究表明,结合计算机视觉技术、深度学习处理遥感影像大大提高了植物病虫害检测的准确性。
为实现卷叶病带病毒株检测及其严重度评估,无人机遥感因其获取的影像数据空间分辨率高、纹理信息丰富等特点,弥补了卫星遥感数据的空间分辨率低的缺陷,更适合获取种植规模较大的葡萄园内的带病毒株空间分布信息。结合计算机视觉技术、深度学习处理无人机遥感影像,可以为解决田块尺度上快速、高效、高精度调查葡萄园内酿酒葡萄卷叶病流行情况及带病毒株定位的问题提供解决方案。因此,本发明提供一种病株诊断及缺株检测方法、系统、设备及存储介质,以快速准确的对植株进行检测。
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明作进一步详细的说明。
实施例1
如图1所示,本发明实施例提供了一种病株诊断及缺株检测方法,该方法包括:
步骤100:获取目标园区内植株的目标图像,并根据目标图像生成目标正射影像。可以采用无人机获取目标园区内植株的目标图像。
具体地,根据目标图像生成目标正射影像,具体包括:
采用超分辨网络将目标图像转换成目标正射影像;目标正射影像的分辨率大于设定分辨率值;其中,超分辨网络是采用机器学习的方法确定的。
该超分辨网络的确定方法为:
获取训练图像;训练图像包括试验区内各个采样点区域内的植株的原始图像。
构建训练网络。
将训练图像输入到训练网络,以损失最小为目标对训练网络的峰值信噪比进行调整,得到调整后的训练网络。以损失最小为目标是以损失函数的最小值为目标。该处的损失函数是均方误差所对应的函数。
将调整后的训练网络确定为超分辨网络。
步骤200:采用设定滑动窗口将目标正射影像划分为多个目标窗口图像。
具体地,步骤200,具体包括:
将设定滑动窗口按照设定运动轨迹在目标正射影像上移动,得到多个目标窗口图像;设定运动轨迹是由目标正射影像的起始位置和正射影像的结束位置确定的。
进一步地,设定滑动窗口的大小是根据目标园区内植株的株距确定的。
可以使用MATLAB编程,处理目标正射影像。通过人机交互的方式获取正射影像中的目标园区内植株的端头两点位置,即目标正射影像的起始位置和正射影像的结束位置。滑动窗口在正射影像上的设定运动轨迹可以是由目标园区内植株端头两点位置确定的直线。
此外,根据目标园区内植株的株距设置滑动窗口大小。以葡萄园内种植的葡萄为例,某一葡萄园酿酒葡萄或者普通葡萄种植的一般株距为1至2米,则设置滑动窗口的像素大小为96*96。在该实例中,正射影像的地面采样距离为1.74cm,即一像素对应1.74cm,因此96*96像素对应实际的距离为167cm*167cm。
步骤300:将多个目标窗口图像输入至检测模型,得到各个目标窗口图像对应的检测信息;检测信息包括:植株的地理位置和植株的发病等级。
当发病等级为零时,表示缺株;检测模型采用机器学习的方法建立。
其中,检测模型的确定方法为:
获取训练数据;训练数据是采用数据增强的方法对原始训练数据进行扩充得到的;原始训练数据包括:试验区内各个采样点区域内的植株在不同发病等级下的原始正射影像。
采用设定滑动窗口在训练数据的正射影像上移动,得到多个训练窗口图像。
将多个训练窗口图像划分为训练集和验证集。
构建共享神经网络。
将训练集输入至共享神经网络,以误差最小为目标对共享神经网络中的参数进行训练,得到训练后的共享神经网络。
采用验证集对训练后的共享神经网络的参数进行调整,得到检测模型。
作为一种可选的实施方式,该方法还包括:
对检测信息按照发病等级进行分类并保存。
即调用检测模型检测滑动窗口获取的图像,按分类结果将滑动窗口的中心点位置保存,根据正射影像的地理信息,将图像位置转为地理坐标,写入存储模块(或SHP文件),对植株中带病毒株的分布及缺株情况实现可视化。以葡萄园为例,植株中的带病毒株可以是存在卷叶病的葡萄园中的葡萄植株。检测模型可以采用的是SE-Resnet分类模型。
该实施例提供的病株诊断及缺株检测方法,在实际应用中的实施步骤还可以如下:以葡萄园为例,病株为卷叶病带病毒株。
步骤1:采集无人机数据
使用携带可见光相机的无人机获取葡萄园冠层的可见光图像,可见光图像即照片或者目标图像。无人机在晴朗天气下执行飞行任务,可以设置飞行路线的纵向重叠率85%,旁向重叠率为75%,飞行高度为60米,采集到的图像数据空间分辨率为1.74厘米。所采用的无人机,单块电池的续航时间可支持该飞行任务调查区域面积约为173亩。在无人机执行飞行任务前,使用0.2米×0.2米的白光参考板获取辐射校准的参考数据,以考虑相机特性、反射率特性和环境变化产生的影响。
步骤2:处理无人机图像
处理获取的无人机可见光图像数据即目标图像,将目标图像经几何校正、特征点匹配、图像拼接、地理配准过程后,生成酿酒葡萄冠层的正射影像。正射影像包含R、G、B、A共计4个通道的信息。A通道指透明度。在该实例中,A通道为100%,对应值为255。根据目标图像生成目标正射影像可以采用Pix4D mapper软件实现。
步骤3:构建酿酒葡萄冠层诊断模型,即构建检测模型
使用深度学习分类算法实现带病毒株的严重程度精准诊断。深度学习网络结构使用增加了SE(Squeeze-and-ExcitationNetworks)模块的SE-ResNet18。具体的诊断模型构建步骤如下:
第一步:构建数据集即获取训练数据
数据集即训练数据中包括正射影像图像和正射影像图像对应的分类标签。首先,要获取葡萄植株在不同发病等级下的原始正射影像。
通过实地调查的方法对试验区域内的采样点相应的葡萄植株是否患病进行评估,按5级标准记录带病毒株发病严重程度。可以使用巡检手持机(精度为0.01米)记录采样点的地理信息,采用WGS-84坐标系作为定位坐标系。
发病严重程度的评估标准是:
1级:无症状;2级:仅在枝条基部老叶上有轻微卷叶病症状;3级:植株有三分之一以下的叶片有卷叶病的病状;4级:植株有三分之一到二分之一的叶片有卷叶病症状;5级:植株有二分之一以上的叶片有卷叶病症状。
卷叶病症状表现为患病叶片的叶肉呈浅红色斑驳状,随后斑点的颜色逐渐加深,色斑将扩展到整个叶片。
利用采样点的地理信息,检索正射影像对应的图像位置,找到正射影像中对应的带病毒株所在区域的中心点。每个采样点的采样区域大小为1.67米×1.67米。根据区域位置,剪裁正射影像。分类标签来源于该采样点对应的实地调查中记录的带病毒株发病严重程度。
每个发病等级的原始正射影像的大小为600幅图像,分类标签一共是6种,分别是缺株0级、带病毒株1级、带病毒株2级、带病毒株3级、带病毒株4级、带病毒株5级。其中,选取每个类别中的60个样本输入至该发病等级的原始正射影像中,选取29个样本作为测试集。采用数据增强的方法对该发病等级的原始训练数据进行扩充得到该发病等级对应的训练数据;即使用包括增加高斯噪声的数据增强方法进行数据的扩充,最终每个发病等级的原始正射影像包含600个样本,将所有发病等级的原始正射影像组合在一起,得到训练数据;然后选取其中的75%作为训练集,25%作为验证集。
第二步:基于VDSR的图像超分辨率
数据集中的图像初始分辨率为96*96,使用VDSR的方法将其超分辨率为224*224。VDSR是通过训练41层CNN网络得出将图像中的低频信息恢复出高频信息的超分辨率模型。使用空间分辨率为0.69厘米和5.34厘米的数据集,作为训练模型的高分辨率和低分辨率图像。通过地理配准的方式使匹配图像的区域一致,低分辨率图像使用双三次插值方式与高分辨率图像大小保持一致。输入图像的像素大小为96×96。以均方误差MSE作为损失函数以获得最佳峰值信噪比(PSNR),一共训练了100个图像对得到了超分辨率模型。
即采用超分辨网络将目标图像转换成目标正射影像;目标正射影像的分辨率大于设定分辨率值。
第三步,构建分类模型即检测模型
检测模型设置的训练最小批次量为8,训练步长为20,学习率为0.01。将最终得到的检测模型保存为*.MAT格式。学习率指的是在训练共享神经网络时,对参数训练更新的幅度。检测模型包括:cnn卷积层,maxpool最大池化层,averpool全局池化层。cnn卷积层采用的是conv向量卷积运算。图3为检测模型各个层级对应的参数。图3中的FC层指的是全连接层,可以表示为投影的过程。
步骤4:基于滑动窗口法检测带病毒株
使用MATLAB编程,处理目标正射影像。通过人机交互的方式获取目标正射影像中的葡萄行端头两点位置。根据葡萄园酿酒葡萄种植的一般株距1至2米,设置滑动窗口大小为96*96。滑动窗口在正射影像上的运动轨迹为葡萄行端头两点位置确定的直线。
调用步骤3中的检测模型,即SE-Resnet分类模型,检测滑动窗口获取的目标窗口图像。并按分类结果将滑动窗口的中心点位置保存,根据正射影像的地理信息,将图像位置转为地理坐标,写入SHP文件,对葡萄园卷叶病带病毒株的分布及缺株情况进行可视化处理。
上述提到的步骤1-步骤4,在实际应用中,并不是必须按照此步骤的顺序进行操作,只要能够保证各个步骤按照逻辑关系,达到最终的检测目的即可。
通过应用无人机遥感技术快速调查葡萄园的冠层长势情况,结合计算机视觉算法及深度学习算法实现了葡萄园内卷叶病病株的精准定位与发病严重度的精确诊断,同时检测了卷叶病导致的缺株情况,并将诊断结果显示在葡萄园的地理信息系统中,对葡萄园卷叶病的流行情况进行了可视化。酿酒葡萄冠层诊断模型在测试集上的精确度为0.92。这个结果可以为葡萄园的精细管理决策提供参考。
实施例2
为了执行上述实施例1对应的方法,以实现相应的功能和技术效果,下面提供一种病株诊断及缺株检测系统,该系统包括:图像处理模块1、目标窗口图像获取模块2和检测信息确定模块3。
图像处理模块1,用于获取目标园区内植株的目标图像,并根据目标图像生成目标正射影像。
目标窗口图像获取模块2,用于采用设定滑动窗口将目标正射影像划分为多个目标窗口图像。
检测信息确定模块3,用于将多个目标窗口图像输入至检测模型,得到各个目标窗口图像对应的检测信息;检测信息包括:植株的地理位置和植株的发病等级。
当发病等级为零时,表示缺株;检测模型采用机器学习的方法建立。
实施例3
本实施例提供一种电子设备,包括存储器及处理器,存储器用于存储计算机程序,处理器运行计算机程序以使电子设备执行实施例1的病株诊断及缺株检测方法。
可选地,上述电子设备可以是服务器。
另外,本发明实施例还提供一种计算机可读存储介质,其存储有计算机程序,该计算机程序被处理器执行时实现实施例1的病株诊断及缺株检测方法。
本发明所采用的检测模型和超分辨网络的优点:
(1)检测模型采用的是机器学习中的深度学习网络结构构建的,其优点为:
相比于其他深度学习网络结构,ResNet-50在测试集上的精确度为0.66,GoogLeNet在测试集上的精确度为0.52,GoogLeNet为一种全新的深度学习结构;Mobile V2在测试集上的精确度为0.58,轻量级网络ShuffleNet在测试集上的精确度为0.60,NasNet在测试集上的精确度为0.62,Place365-InceptionV3在测试集上的精确度为0.52,VGG-16在测试集上的精确度为0.52,ResNet-18在测试集上的精确度为0.64。
通过加入SE模块提升了分类精度。SE模块包括了压缩和激发两个部分,压缩(Squeeze)通过在特征图(Feature Map)层上执行全局平均池化(Global AveragePooling),得到当前Feature Map的全局压缩特征量;激发(Excitation)通过两层全连接的bottleneck结构(沙漏型结构)得到Feature Map中每个通道的权值,并将加权后的FeatureMap作为下一层网络的输入。
(2)超分辨网络即VDSR超分辨方法的优点
使用每个图像相对于参考图像的峰值信噪比(PSNR)、每个图像的结构相似性指数(SSIM)作为评估这种超分辨率方法的定量指标。SSIM评估图像的三个特征对参考图像的视觉影响:亮度、对比度和结构。SSIM值越接近1,测试图像与参考图像的一致性越好。PSNR值越大通常表示图像质量越好。
通过设置三个梯度的比例因子对PNSR及SSIM进行评估,结果表明,在三个梯度上,使用VDSR获取低分辨率图像的超分辨图像结果是优于传统的双三次插值方法。当比例因子为2时,使用VDSR的PNSR为40.3710,SSIM为0.9909;而双三次插值方法的PSNR为38.5543,SSIM为0.9866。当比例因子为3时,使用VDSR的PNSR为33.6644,SSIM为0.9670;而双三次插值方法的PSNR为33.4460,SSIM为0.9643。当比例因子为4时,使用VDSR的PNSR为33.7361,SSIM为0.9610;而双三次插值方法的PSNR为32.7132,SSIM为0.9542。
因此,本发明能够快速准确的对植株进行检测。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对于实施例公开的系统而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处。综上所述,本说明书内容不应理解为对本发明的限制。
Claims (10)
1.一种病株诊断及缺株检测方法,其特征在于,所述方法包括:
获取目标园区内植株的目标图像,并根据所述目标图像生成目标正射影像;
采用设定滑动窗口将所述目标正射影像划分为多个目标窗口图像;
将多个所述目标窗口图像输入至检测模型,得到各个所述目标窗口图像对应的检测信息;所述检测信息包括:植株的地理位置和植株的发病等级;
当所述发病等级为零时,表示缺株;
所述检测模型采用机器学习的方法建立。
2.根据权利要求1所述的病株诊断及缺株检测方法,其特征在于,所述采用设定滑动窗口将所述目标正射影像划分为多个目标窗口图像,具体包括:
将所述设定滑动窗口按照设定运动轨迹在所述目标正射影像上移动,得到多个目标窗口图像;所述设定运动轨迹是由所述目标正射影像的起始位置和所述正射影像的结束位置确定的。
3.根据权利要求1所述的病株诊断及缺株检测方法,其特征在于,所述设定滑动窗口的大小是根据所述目标园区内植株的株距确定的。
4.根据权利要求1所述的病株诊断及缺株检测方法,其特征在于,所述检测模型的确定方法为:
获取训练数据;所述训练数据是采用数据增强的方法对原始训练数据进行扩充得到的;所述原始训练数据包括:试验区内各个采样点区域内的植株在不同发病等级下的原始正射影像;
采用设定滑动窗口在所述训练数据的正射影像上移动,得到多个训练窗口图像;
将多个所述训练窗口图像划分为训练集和验证集;
构建共享神经网络;
将所述训练集输入至所述共享神经网络,以误差最小为目标对所述共享神经网络中的参数进行训练,得到训练后的共享神经网络;
采用所述验证集对所述训练后的共享神经网络的参数进行调整,得到所述检测模型。
5.根据权利要求1所述的病株诊断及缺株检测方法,其特征在于,所述根据所述目标图像生成目标正射影像,具体包括:
采用超分辨网络将所述目标图像转换成目标正射影像;所述目标正射影像的分辨率大于设定分辨率值;其中,所述超分辨网络是采用机器学习的方法确定的。
6.根据权利要求5所述的病株诊断及缺株检测方法,其特征在于,所述超分辨网络的确定方法为:
获取训练图像;所述训练图像包括试验区内各个采样点区域内的植株的原始图像;
构建训练网络;
将所述训练图像输入到所述训练网络,以损失最小为目标对所述训练网络的峰值信噪比进行调整,得到调整后的训练网络;
将所述调整后的训练网络确定为超分辨网络。
7.根据权利要求1所述的病株诊断及缺株检测方法,其特征在于,所述方法还包括:
对所述检测信息按照所述发病等级进行分类并保存。
8.一种病株诊断及缺株检测系统,其特征在于,所述系统包括:
图像处理模块,用于获取目标园区内植株的目标图像,并根据所述目标图像生成目标正射影像;
目标窗口图像获取模块,用于采用设定滑动窗口将所述目标正射影像划分为多个目标窗口图像;
检测信息确定模块,用于将多个所述目标窗口图像输入至检测模型,得到各个所述目标窗口图像对应的检测信息;所述检测信息包括:植株的地理位置和植株的发病等级;
当所述发病等级为零时,表示缺株;
所述检测模型采用机器学习的方法建立。
9.一种电子设备,其特征在于,包括存储器及处理器,所述存储器用于存储计算机程序,所述处理器运行所述计算机程序以使所述电子设备执行如权利要求1至7中任意一项所述的病株诊断及缺株检测方法。
10.一种计算机可读存储介质,其特征在于,其存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至7中任意一项所述的病株诊断及缺株检测方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211720821.3A CN116416532A (zh) | 2022-12-30 | 2022-12-30 | 一种病株诊断及缺株检测方法、系统、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211720821.3A CN116416532A (zh) | 2022-12-30 | 2022-12-30 | 一种病株诊断及缺株检测方法、系统、设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116416532A true CN116416532A (zh) | 2023-07-11 |
Family
ID=87053834
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211720821.3A Pending CN116416532A (zh) | 2022-12-30 | 2022-12-30 | 一种病株诊断及缺株检测方法、系统、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116416532A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117132423A (zh) * | 2023-08-22 | 2023-11-28 | 珠海市经典电子有限公司 | 园区管理系统 |
-
2022
- 2022-12-30 CN CN202211720821.3A patent/CN116416532A/zh active Pending
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117132423A (zh) * | 2023-08-22 | 2023-11-28 | 珠海市经典电子有限公司 | 园区管理系统 |
CN117132423B (zh) * | 2023-08-22 | 2024-04-12 | 深圳云创友翼科技有限公司 | 园区管理系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113392775B (zh) | 一种基于深度神经网络的甘蔗幼苗自动识别与计数方法 | |
Li et al. | A new sensor bias-driven spatio-temporal fusion model based on convolutional neural networks | |
CN103364781B (zh) | 基于遥感数据与地理信息系统的粮田地面参照点筛选方法 | |
CN113505635B (zh) | 基于光学和雷达的冬小麦与大蒜混种区识别方法及装置 | |
CN112766155A (zh) | 一种基于深度学习的海水养殖区提取方法 | |
CN111582234A (zh) | 基于uav和深度学习的大范围油茶林果智能检测与计数方法 | |
CN113657326A (zh) | 一种基于多尺度融合模块和特征增强的杂草检测方法 | |
Xu et al. | Classification method of cultivated land based on UAV visible light remote sensing | |
Grocholsky et al. | A camera and laser system for automatic vine balance assessment | |
CN112836725A (zh) | 基于时序遥感数据的弱监督lstm循环神经网络稻田识别方法 | |
CN114612794A (zh) | 一种细碎化农业区土地覆被与种植结构的遥感识别方法 | |
CN116129260A (zh) | 基于深度学习的牧草图像识别方法 | |
CN116416532A (zh) | 一种病株诊断及缺株检测方法、系统、设备及存储介质 | |
CN113537293A (zh) | 基于无人机和全卷积神经网络的小麦倒伏区域识别方法 | |
Ouyang et al. | Assessment of canopy size using UAV-based point cloud analysis to detect the severity and spatial distribution of canopy decline | |
CN112465821A (zh) | 一种基于边界关键点感知的多尺度害虫图像检测方法 | |
CN116052141B (zh) | 作物生育期的识别方法、装置、设备及介质 | |
CN117274803A (zh) | 基于dsc-dc卷积神经网络的树种分类方法及系统 | |
CN116503740A (zh) | 一种精准识别作物种类的无人机视觉系统 | |
CN115372281A (zh) | 一种土壤物理结构和化学构成的监测系统及方法 | |
CN110929739A (zh) | 一种自动化的不透水面范围遥感迭代提取方法 | |
KR102576427B1 (ko) | 구름 이미지를 이용한 실시간 강수량 예측 장치, 이를 이용한 강수량 예측 방법 및 이를 제공하기 위한 컴퓨터 프로그램이 기록된 컴퓨터-판독가능매체 | |
CN115171099A (zh) | 一种基于改进Faster R-CNN网络的小麦锈病图像识别方法 | |
CN115063610A (zh) | 基于Sentinel-1、2影像的大豆种植区识别方法及其面积测算方法 | |
CN114863296A (zh) | 一种松材线虫病危害木的识别与定位的方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |