CN115024298A - 一种基于轻量级神经网络的计数杀虫灯及计数方法 - Google Patents
一种基于轻量级神经网络的计数杀虫灯及计数方法 Download PDFInfo
- Publication number
- CN115024298A CN115024298A CN202210843230.9A CN202210843230A CN115024298A CN 115024298 A CN115024298 A CN 115024298A CN 202210843230 A CN202210843230 A CN 202210843230A CN 115024298 A CN115024298 A CN 115024298A
- Authority
- CN
- China
- Prior art keywords
- module
- convolution
- counting
- image
- output
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000000749 insecticidal effect Effects 0.000 title claims abstract description 58
- 238000000034 method Methods 0.000 title claims abstract description 23
- 238000013528 artificial neural network Methods 0.000 title claims abstract description 16
- 241000607479 Yersinia pestis Species 0.000 claims abstract description 97
- 238000000605 extraction Methods 0.000 claims description 50
- 238000005070 sampling Methods 0.000 claims description 36
- 238000010606 normalization Methods 0.000 claims description 29
- 238000004140 cleaning Methods 0.000 claims description 25
- 241000238631 Hexapoda Species 0.000 claims description 17
- 238000012549 training Methods 0.000 claims description 16
- 230000006698 induction Effects 0.000 claims description 13
- 238000007781 pre-processing Methods 0.000 claims description 10
- 238000001514 detection method Methods 0.000 claims description 9
- 238000012360 testing method Methods 0.000 claims description 9
- 238000004891 communication Methods 0.000 claims description 8
- 239000002418 insect attractant Substances 0.000 claims description 8
- 238000003860 storage Methods 0.000 claims description 8
- 239000013589 supplement Substances 0.000 claims description 8
- 230000001133 acceleration Effects 0.000 claims description 6
- 238000006243 chemical reaction Methods 0.000 claims description 6
- 238000001914 filtration Methods 0.000 claims description 6
- 230000006870 function Effects 0.000 claims description 6
- 238000012795 verification Methods 0.000 claims description 6
- 238000012545 processing Methods 0.000 claims description 4
- 238000000137 annealing Methods 0.000 claims description 3
- 230000000694 effects Effects 0.000 claims description 3
- 238000009499 grossing Methods 0.000 claims description 3
- 238000002156 mixing Methods 0.000 claims description 3
- 230000011218 segmentation Effects 0.000 claims description 3
- 238000013461 design Methods 0.000 abstract description 3
- 230000002265 prevention Effects 0.000 abstract description 2
- 240000007651 Rubus glaucus Species 0.000 description 8
- 235000011034 Rubus glaucus Nutrition 0.000 description 8
- 235000009122 Rubus idaeus Nutrition 0.000 description 8
- 238000010586 diagram Methods 0.000 description 7
- 238000012271 agricultural production Methods 0.000 description 4
- 230000007547 defect Effects 0.000 description 3
- 230000001502 supplementing effect Effects 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 230000004913 activation Effects 0.000 description 2
- 239000005667 attractant Substances 0.000 description 2
- 230000031902 chemoattractant activity Effects 0.000 description 2
- 239000000575 pesticide Substances 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 206010063385 Intellectualisation Diseases 0.000 description 1
- 239000011358 absorbing material Substances 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 239000013043 chemical agent Substances 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 238000007619 statistical method Methods 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A01—AGRICULTURE; FORESTRY; ANIMAL HUSBANDRY; HUNTING; TRAPPING; FISHING
- A01M—CATCHING, TRAPPING OR SCARING OF ANIMALS; APPARATUS FOR THE DESTRUCTION OF NOXIOUS ANIMALS OR NOXIOUS PLANTS
- A01M1/00—Stationary means for catching or killing insects
- A01M1/22—Killing insects by electric means
- A01M1/223—Killing insects by electric means by using electrocution
-
- A—HUMAN NECESSITIES
- A01—AGRICULTURE; FORESTRY; ANIMAL HUSBANDRY; HUNTING; TRAPPING; FISHING
- A01M—CATCHING, TRAPPING OR SCARING OF ANIMALS; APPARATUS FOR THE DESTRUCTION OF NOXIOUS ANIMALS OR NOXIOUS PLANTS
- A01M1/00—Stationary means for catching or killing insects
- A01M1/02—Stationary means for catching or killing insects with devices or substances, e.g. food, pheronones attracting the insects
- A01M1/026—Stationary means for catching or killing insects with devices or substances, e.g. food, pheronones attracting the insects combined with devices for monitoring insect presence, e.g. termites
-
- A—HUMAN NECESSITIES
- A01—AGRICULTURE; FORESTRY; ANIMAL HUSBANDRY; HUNTING; TRAPPING; FISHING
- A01M—CATCHING, TRAPPING OR SCARING OF ANIMALS; APPARATUS FOR THE DESTRUCTION OF NOXIOUS ANIMALS OR NOXIOUS PLANTS
- A01M1/00—Stationary means for catching or killing insects
- A01M1/02—Stationary means for catching or killing insects with devices or substances, e.g. food, pheronones attracting the insects
- A01M1/04—Attracting insects by using illumination or colours
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B08—CLEANING
- B08B—CLEANING IN GENERAL; PREVENTION OF FOULING IN GENERAL
- B08B1/00—Cleaning by methods involving the use of tools
- B08B1/10—Cleaning by methods involving the use of tools characterised by the type of cleaning tool
- B08B1/12—Brushes
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01D—MEASURING NOT SPECIALLY ADAPTED FOR A SPECIFIC VARIABLE; ARRANGEMENTS FOR MEASURING TWO OR MORE VARIABLES NOT COVERED IN A SINGLE OTHER SUBCLASS; TARIFF METERING APPARATUS; MEASURING OR TESTING NOT OTHERWISE PROVIDED FOR
- G01D21/00—Measuring or testing not otherwise provided for
- G01D21/02—Measuring two or more variables by means not covered by a single other subclass
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/44—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/82—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30242—Counting objects in image
Landscapes
- Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Pest Control & Pesticides (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Evolutionary Computation (AREA)
- Insects & Arthropods (AREA)
- Wood Science & Technology (AREA)
- Zoology (AREA)
- Environmental Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Artificial Intelligence (AREA)
- Software Systems (AREA)
- Health & Medical Sciences (AREA)
- Computing Systems (AREA)
- Multimedia (AREA)
- General Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- Medical Informatics (AREA)
- Databases & Information Systems (AREA)
- Quality & Reliability (AREA)
- Biophysics (AREA)
- Computational Linguistics (AREA)
- Data Mining & Analysis (AREA)
- Molecular Biology (AREA)
- General Engineering & Computer Science (AREA)
- Mathematical Physics (AREA)
- Catching Or Destruction (AREA)
Abstract
本发明公开了一种基于轻量级神经网络的计数杀虫灯及计数方法,涉及计数杀虫灯设备技术领域。包括顶盖和检测计数杀虫灯周边环境的传感器组件,顶盖的下方设置有杀虫组件,杀虫组件的下方设置有用于对害虫计数的计数收集箱;计数收集箱内设置有控制器,控制器内装载有用于识别害虫的轻量级神经网络PestNet模型。本发明通过对计数杀虫灯的结构设计,将杀虫组件杀死的害虫通过计数收集箱进行计数、收集,在完成对环境中害虫的防治的同时,记录收集得到环境中害虫的数量,从而确定本计数杀虫灯设置位置的害虫侵害程度;能够帮助收集得到害虫数量分别与季节、时间或天气环境等关系。
Description
技术领域
本发明涉及计数杀虫灯设备技术领域,具体涉及一种基于轻量级神经网络的计数杀虫灯及计数方法。
背景技术
现代农业生产中,害虫侵害农作物一直是难以解决的问题,因此杀灭害虫成为农业生产中不可或缺的步骤。目前农业生产主要采用三种方式进行杀虫。一是使用化学药剂(农药)进行杀虫。随着人们对健康意识不断提高以及种植业绿色防控的要求,喷洒农药已逐渐不被市场消费者认可,且该方式不能统计杀虫数量。二是使用粘虫板进行杀虫,粘虫板表面附着有诱虫剂和黏性物质,可将害虫引诱并吸附在板上,缺点是需要频繁更换粘虫板,且由于害虫大小不一,通过人力统计杀虫数量难免漏检,存在效率低下、难以感知虫情信息的缺点。三是使用计数杀虫灯进行杀虫,市面上的计数杀虫灯使用特定频率的光源、诱虫剂和风吸等方式进行吸引害虫,并通过高压电网实现对害虫的击杀。
公开号为CN110447612A提出的一种带有杀虫计数功能的计数杀虫灯,其计数模块采集虫体在触碰电网时产生电流脉冲信号,并对脉冲信号产生次数以统计杀虫数量,缺点是无法区分单只害虫因多次电击而产生多次脉冲信号情况从而重复计数的情况,致使准确度较低。公开号为CN108133255A提出的一种计数杀虫灯电网触电害虫计数系统和统计方法,通过声音识别模块对害虫在电网触电时产生的声响进行识别并计数,同样存在因单只害虫多次电击产生多次声响造成重复计数的情况,同时易受到周围环境噪音的影响,无法准确统计杀虫数量。
综上,目前农业生产过程中所采用的杀虫技术均无法有效准确地统计杀虫数量,无法感知当前位置被害虫侵害的程度。随着智慧农业的大力发展,杀虫设备智能化、物联化更是未来的趋势,因此需要一款智能的计数杀虫灯,以解决计数不精确的问题。
发明内容
针对现有技术的上述不足,本发明提供了一种能够对害虫精准计数的基于轻量级神经网络的计数杀虫灯及计数方法。
为达到上述发明目的,本发明所采用的技术方案为:
提供一种基于轻量级神经网络的计数杀虫灯,其包括顶盖和检测计数杀虫灯周边环境的传感器组件,顶盖的下方设置有杀虫组件,杀虫组件的下方设置有用于对害虫计数的计数收集箱;计数收集箱内设置有控制器;传感器组件、杀虫组件、计数收集箱均与控制器电连接;计数收集箱内设置有用于给本计数杀虫灯供电的电池。
进一步的,杀虫组件包括回形电网,回形电网的中心处设置有诱虫灯;
回形电网的外侧设置有电网清洁组件,电网清洁组件包括用于清洁回形电网的环形清洁刷;环形清洁刷上设置有驱动环形清洁刷沿回形电网长度方向移动的移动组件;
移动组件包括中心对称设置在环形清洁刷对角上的两个螺杆,环形清洁刷上设置有与螺杆配合连接的螺孔,两个螺杆的上端均设置有驱动螺杆转动的驱动电机,螺杆的下端与计数收集箱的顶部转动连接;
回形电网、诱虫灯和两个驱动电机均与控制器电连接。
进一步的,计数收集箱包括箱体,箱体的顶部设置有漏斗,漏斗的上端设置有水平的固定架,杀虫组件与固定架固定连接;漏斗的下端连通有第一下落通道;
第一下落通道的底端设置有重量感应台,重量感应台与控制器电连接;重量感应台的两侧分别设置有水平设置的电动推杆和计数组件;电动推杆的活动端连接有推板,推板的底端与重量感应台抵接;推板的上端固定连接有水平设置的挡板;电动推杆与控制器电连接,电动推杆带动推板水平移动;
计数组件包括暗箱,电动推杆最大伸长状态下推板与暗箱远离第一下落通道的侧壁抵接;
暗箱与第一下落通道连通,暗箱上设置有隔离第一下落通道的暗箱门,暗箱的顶端设置有驱动暗箱门上下移动的直线舵机;暗箱内设置有通过电动转轴与暗箱侧壁转动连接的暗箱台,暗箱台的表面覆有白色反光层;暗箱台的上表面与重量感应台的上表面的留有间隙,暗箱的顶端设置有对准暗箱台拍摄的CCD相机和为暗箱内补光的LED补光灯;直线舵机、电动转轴、CCD相机和LED补光灯均与控制器电连接;
重量感应台远离暗箱的一侧向下倾斜,且重量感应台远离暗箱的一侧设置有供雨水流出的导流道;重量感应台与水平面成5°的夹角;推板的下端设置有弹性滤网;
箱体外表面上还设置有用于放置诱虫剂的诱虫剂盒;计数收集箱的下端可拆卸连接有集虫箱;暗箱的底端与集虫箱连通;电池位于箱体的内部。
进一步的,控制器设置在箱体的内部,控制器连接有物联网通信模块;控制器还连接有LCD屏幕和信号天线;LCD屏幕和信号天线均设置在箱体的侧壁上,箱体上还设置有凹槽,凹槽的顶端设置有按键;按键与控制器电连接。
进一步的,传感器组件包括雨量传感器、光量传感器、温湿度传感器以及加速度传感器,光量传感器设置在顶盖上,顶盖上设置有储雨槽,雨量传感器设置在储雨槽中;温湿度传感器和加速度传感器均设置在计数收集箱内。
一种采用基于轻量级神经网络的计数杀虫灯的计数方法,包括如下步骤:
S1:计数收集箱对杀虫组件杀死的害虫进行拍摄收集得到原始图像;
S2:对原始图像进行预处理得到预处理图像;
S3:将预处理图像输入优化PestNet模型,得到害虫数量。
进一步的,优化PestNet模型包括依次连接的转换层、第一主干特征提取模块、第二主干特征提取模块、第三主干特征提取模块、加强特征提取模块和预测模块;
转换层包括Resize模块,Resize模块连接有3×3卷积模块;3×3卷积模块与第一主干特征提取模块连接;
第一主干特征提取模块包括依次连接的第一bneck 3×3卷积模块、第二bneck 3×3卷积模块、bneck 5×5卷积模块、第一bneck 5×5卷积注意力模块和第二bneck 5×5卷积注意力模块;第一bneck 3×3卷积模块与3×3卷积模块连接;第二bneck 5×5卷积注意力模块分别与第二主干特征提取模块和加强特征提取模块连接;
第二主干特征提取模块包括依次连接的第三bneck 3×3卷积模块、第四bneck 3×3卷积模块、第三bneck 5×5卷积注意力模块和第四bneck 5×5卷积注意力模块;第三bneck 3×3卷积模块与第二bneck 5×5卷积注意力模块连接;第四bneck 5×5卷积注意力模块分别与第三主干特征提取模块和加强特征提取模块连接;
第三主干特征提取模块包括依次连接的第五bneck 3×3卷积模块、bneck 3×3卷积注意力模块、第五bneck 5×5卷积注意力模块、第六bneck 5×5卷积注意力模块、SPPF模块和第一1×1卷积模块;第五bneck 3×3卷积模块与第四bneck 5×5卷积注意力模块连接;第一1×1卷积模块与加强特征提取模块连接;
加强特征提取模块包括与第一1×1卷积模块连接的第二1×1卷积模块,第一1×1卷积模块输出第三有效特征层传递至第二1×1卷积模块,第二1×1卷积模块产生第一输出和第二输出,第一输出传递至第三上采样模块;第三上采用模块对第一输出进行采样操作后输出第三采样层,第四bneck 5×5卷积注意力模块输出第二有效特征层,第二有效特征层与第三采样层进行堆叠操作后输入至第一DWLayer模块,第一DWLayer模块连接有第三1×1卷积模块;第三1×1卷积模块产生第三输出和第四输出,第四输出传递到第二上采样模块;第二上采样模块对第四输出进行采样操作后输出第二采样层,第二bneck 5×5卷积注意力模块输出第一有效特征层,第一有效特征层与第二采样层进行堆叠操作后输入至第二DWLayer模块,第二DWLayer模块产生第五输出和第六输出;第五输出传递到预测模块;第六输出传递至第一下采样模块,第一下采样模块对第六输出进行下采样后得到第一采样层,第一采样层与第三输出进行堆叠操作后产生第七输出和第八输出;第七输出传递至第三DWLayer模块,第三DWLayer模块与预测模块连接;第八输出传递至第二下采样模块进行下采样后与第二输出进行堆叠操作后传递至第四DWLayer模块,第四DWLayer模块与预测模块连接;
预测模块包括与第二DWLayer模块连接的第一Detect Head模块,与第三DWLayer模块连接的第二Detect Head模块以及与第四DWLayer模块连接的第三Detect Head模块;预测模块将第一Detect Head模块、第二Detect Head模块和第三Detect Head模块的结果共同输出得到计数结果。
进一步的,第一DWLayer模块、第二DWLayer模块、第三DWLayer模块以及第四DWLayer模块结构均相同,任意DWLayer模块包括与DWLayer模块输入端连接的残差分支和主干分支;主干分支包括依次连接的第一卷积归一化SiLu模块和第一深度可分离卷积归一化SiLU模块;残差分支包括第二卷积归一化SiLu模块;第一深度可分离卷积归一化SiLU模块和第二卷积归一化SiLu模块堆叠后连接有第三卷积归一化SiLu模块;第三卷积归一化SiLu模块与DWLayer模块输出端连接。
进一步的,对原始图像的预处理包括如下具体步骤:
A1:对原始图像进行高斯滤波处理,得到ImageI图像;
A2:对ImageI图像使用最大类间方差法进行分割,得到ImageII图像;
A2.1:设ImageI图像背景区域为B,害虫区域为P,ImageI图像中灰度值为i的像素点共有ni个,阈值T为ImageI图像的像素分割界限;
A2.2:将ImageI图像中属于害虫的像素点数量占整幅ImageI图像的比例记为ωP,计算得到害虫像素的平均灰度值μP;
A2.3:将ImageI图像中属于背景的像素点数量占整幅ImageI图像的比例记为ωB,计算得到背景像素的平均灰度值μB;
A2.4:计算ImageI图像的平均灰度值μ;
A2.5:利用平均灰度值μP和平均灰度值μB计算最大类间方差值σ2=ωPωB(μP-μB)2;
A2.6:使用最大类间方差值对ImageI图像进行分割,得到二值化图像即ImageII图像;
A3:对ImageII图像进行腐蚀处理,得到ImageIII图像;
A4:对ImageIII图像使用中值滤波进行边缘平滑处理,得到ImageIV图像即预处理图像。
进一步的,步骤S3中对优化PestNet模型进行训练的方法包括如下步骤:
C1:通过计数收集箱内CCD摄像机采集X张害虫的原始图像;
C2:对所有原始图像进行预处理后得到预处理图像,并使用Labelimg工具对预处理图像进行人工标注害虫区域,得到标注图像;
C3:将标注图像采用随机旋转和随机缩放的方式进行数据增强,得到3X张增强图像;
C4:将标注图像和增强图像混合后按照7∶2∶1的比例随机划分得到训练集、测试集和验证集;
C5:采用余弦退火策略和SGD优化器使用训练集对优化PestNet模型进行训练,初始训练参数Epoch为300,学习率为0.001,动量为0.9;
C6:使用测试集对优化PestNet模型的检测效果进行精度测试;
C7:使用验证集对优化PestNet模型进行参数调整;
C8:重复进行步骤C6-C7直至损失函数趋于收敛状态,得到训练后的优化PestNet模型。
本发明的有益效果为:
1、本发明通过对计数杀虫灯的结构设计,将杀虫组件杀死的害虫通过计数收集箱进行计数、收集,在完成对环境中害虫防治的同时,有效统计环境中的害虫数量,从而确定本计数杀虫灯设置位置的害虫侵害程度;能够帮助收集得到害虫数量分别与季节、时间或天气环境等关系,从而能够帮助优化环境的害虫防治手段。
2、优化PestNet模型中多个主干特征提取模块中采用bneck(深度可分离)卷积模块对拍摄的害虫图像进行特征提取,并通过加强特征提取模块对多个主干特征提取模块提取的特征进行多层加强融合设计,在保持和普通卷积模型的相同精度下,能够有效缩小模型运算量,从而方便将优化PestNet模型部署在性能受限的控制器的内部,从而实现害虫图像本地化处理与计数,能够及时地对害虫进行计数;解决了现有计数杀虫灯对害虫漏数、多数等问题,实现对害虫的精准计数。
附图说明
图1为计数杀虫灯的结构示意图;
图2为计数收集箱的结构示意图;
图3为优化PestNet模型的结构示意图;
图4为bneck 5×5卷积注意力模块的结构示意图;
图5为Detect Head模块的结构示意图;
图6为DWLayer模块的结构示意图;
图7为优化PestNet模型训练步骤示意图;
图8为计数杀虫灯工作流程示意图。
其中,1、顶盖;2、杀虫组件;201、回型电网;202、诱虫灯;203、电网清洁组件;2031环形清洁刷;2032、螺杆;2033、驱动电机;3、计数收集箱;301、箱体;302、漏斗;303、第一下落通道;304、固定架;305、重量感应台;306、电动推杆;307、推板;308、挡板;309、暗箱;310、暗箱门;311、直线舵机;312、暗箱台;313、CCD相机;314、LED补光灯;315、导流道;316、弹性滤网;317、诱虫剂盒;318、集虫箱;319、第二下落通道;4、LCD屏幕;5、信号天线;601、雨量传感器;602、光量传感器;603、储雨槽。
具体实施方式
下面对本发明的具体实施方式进行描述,以便于本技术领域的技术人员理解本发明,但应该清楚,本发明不限于具体实施方式的范围,对本技术领域的普通技术人员来讲,只要各种变化在所附的权利要求限定和确定的本发明的精神和范围内,这些变化是显而易见的,一切利用本发明构思的发明创造均在保护之列。
如图1所示,一种基于轻量级神经网络的计数杀虫灯,其包括顶盖1和检测计数杀虫灯周边环境的传感器组件,传感器组件包括雨量传感器601、光量传感器602、温湿度传感器以及加速度传感器,光量传感器602设置在顶盖1上,顶盖1上设置有储雨槽603,雨量传感器601设置在储雨槽603中。顶盖1的下方设置有杀虫组件2,杀虫组件2的下方设置有用于对害虫计数的计数收集箱3;计数收集箱3内设置有控制器;传感器组件、杀虫组件2、计数收集箱3均与控制器电连接;计数收集箱3内设置有用于给本计数杀虫灯供电的电池。电池包括对控制器供电的12V电池,杀虫组件采用大容量蓄电池或DC直流供电。
杀虫组件2包括回形电网201,回形电网201的中心处设置有诱虫灯202;回形电网201的外侧设置有电网清洁组件203,电网清洁组件203包括用于清洁回形电网201的环形清洁刷2031;环形清洁刷2031上设置有驱动环形清洁刷2031沿回形电网201长度方向移动的移动组件;移动组件包括中心对称设置在环形清洁刷2031对角上的两个螺杆2032,环形清洁刷2031上设置有与螺杆2032配合连接的螺孔,两个螺杆2032的上端均设置有驱动螺杆2032转动的驱动电机2033,螺杆2032的下端与计数收集箱3的顶部转动连接;回形电网201、诱虫灯202和两个驱动电机2033均与控制器电连接。
如图2所示,计数收集箱3包括箱体301,箱体301的顶部设置有漏斗302,漏斗302的上端设置有水平的固定架304,杀虫组件2与固定架304固定连接;漏斗302的下端连通有第一下落通道303;
第一下落通道303的底端设置有重量感应台305,重量感应台305与控制器电连接;重量感应台305的两侧分别设置有水平设置的电动推杆306和计数组件;电动推杆306的活动端连接有推板307,推板307的底端与重量感应台305抵接;推板307的上端固定连接有水平设置的挡板308;电动推杆306与控制器电连接,电动推杆306带动推板307水平移动;
计数组件包括暗箱309,电动推杆306最大伸长状态下推板307与暗箱309远离第一下落通道303的侧壁抵接;
暗箱309与第一下落通道303连通,暗箱309上设置有隔离第一下落通道303的暗箱门310,暗箱309的顶端设置有驱动暗箱门310上下移动的直线舵机311;暗箱309内设置有通过电动转轴与暗箱309侧壁转动连接的暗箱台312,暗箱台312的表面覆有白色反光层;暗箱台312的上表面与重量感应台305的上表面的留有间隙,暗箱309的顶端设置有对准暗箱台312拍摄的CCD相机313和为暗箱309内补光的LED补光灯314;直线舵机311、电动转轴、CCD相机313和LED补光灯314均与控制器电连接;
重量感应台305远离暗箱309的一侧向下倾斜,且重量感应台305远离暗箱309的一侧设置有供雨水流出的导流道315;重量感应台305与水平面成5°的夹角;推板307的下端设置有弹性滤网316;
箱体301外表面上还设置有用于放置诱虫剂的诱虫剂盒317;计数收集箱3的下端通过T型卡扣与集虫箱318可拆卸连接;暗箱309的底端与集虫箱318连通;电池位于箱体301的内部。集虫箱318可选用吸热材料制作成,将未被完全电击死的害虫进一步闷死,提高杀虫的可靠性。
控制器设置在箱体301的内部,控制器连接有物联网通信模块;控制器还连接有LCD屏幕4和信号天线5;LCD屏幕4和信号天线5均设置在箱体301的侧壁上,箱体301上还设置有凹槽,凹槽的顶端设置有按键;按键与控制器电连接。
控制器包括单片机和具有一定计算能力的嵌入式设备。
本实施例中单片机的芯片型号为STM32F407VGT6,但不限制于此型号。单片机中的ADC采集器通过线束与传感器组件以及重量感应台305连接,采集传感器的模拟信号,并由程序转换为相应的参数量。单片机通过GPIO接口与保险丝、变频驱动电路、驱动电机2033、电动推杆306、诱虫灯202以及电动转轴电连接,单片机控制驱动电机2033、电动推杆306以及电动转轴工作。单片机含有升压电路,将输入电压升高至7KV±300V为回型电网201供电。单片机接收按键传输的信号用于控制回型电网201和诱虫灯202的开关。
单片机上设置有型号为移远BC95的物联网通信模块,但不限制于此型号,支持B1/B3/B5/B8/B20/B28频段,兼容移动GSM网络,单多频下载速率可达25.2kbps,支持IPv4/IPv6/UDP/TCP/MQTT协议。能够稳定高速的传输数据,方便远程收集害虫侵害数据,并通过物联网平台对计数杀虫灯进行远程管理。
本实施例中具有一定计算能力的嵌入式设备为树莓派4B,但不限制于此型号。树莓派通过串口与单片机通信连接,且树莓派与CCD相机313、LED补光灯314以及LCD屏幕4电连接。
计数杀虫灯的杀虫组件2和计数收集箱3的工作原理如下:
如图8所示,害虫在诱虫灯202和诱虫剂的作用下与回型电网201发生触碰,回型电网201释放高压电击杀害虫。害虫掉入箱体301的顶部漏斗302,害虫从漏斗302滑向第一下落通道303紧接着掉至重量感应台305。单片机采集重量感应台305产生模拟电压,并转换为压力值,记录模拟电压的持续时长。结合压力值和模拟电压的持续时长,判断当前的压力信息(压力值+模拟电压持续时长)是否有效,若为无效值则继续等待害虫触碰回型电网201,若为有效值,直线舵机311驱动暗箱门310向上运动,电动推杆306驱动推板307向右推出,此时处于重量感应台305上害虫被推板307推至暗箱台312上,推板307的底端与暗箱台312留有间隙,推板307向右移动,在重量感应台305的上的害虫尸体较多时,推板307将害虫尸体平铺在暗箱台312上;推板307将害虫推到暗箱台312的过程中,挡板308将第一下落通道303挡住,避免在推板307工作的过程中有害虫从第一下落通道303落至推板307的左侧,随后电动推杆306带动推板307复位,同时直线舵机311带动暗箱门310复位。若有害虫尸体落在挡板308上,推板307复位时,第一下落通道303的侧壁将害虫尸体推至重量感应台305上;下雨时,飘飞的雨水从第一下落通道303落至重量感应台305时,雨水从导流道315流出,在弹性滤网316的作用下,害虫尸体不会将导流道315滑落或堵塞导流道315。
当害虫处于暗箱台312上时,LED灯先持续点亮,将暗箱309内部照亮后,CCD相机313拍摄得到原始图像;原始图像传入树莓派4B,树莓派4B对原始图像先进行步骤A1-A4进行预处理得到预处理图像,预处理图像输入至优化PestNet模型对害虫进行检测。原始图像传入树莓派4B的同时电动转轴工作使暗箱台312逆时针转动,使暗箱台312上的害虫尸体经第二下落通道319落至集虫箱318中。
优化PestNet模型返回树莓派4B对应的检测结果(害虫数量),树莓派4B对害虫数量进行分时统计(按年、月、周、日、时统计数量),随后将结果显示于LCD屏幕4并通过物联网通信模块上传至物联网平台。
单片机中内置有检测程序,检测程序包括传感器检测、按键检测、物联网指令检测,实现对外界环境的全面监控和设备保护。
传感器检测满足以下任意条件时,单片机自动关闭诱虫灯202和回型电网201:
1)雨量传感器601:检测到当前的雨水量为15ML时;
2)光量传感器602:根据环境光照度单独开启或关闭诱捕灯和回型电网201,当LUX值小于100时默认为晚上,大于100时默认为白天。默认处于白天时仅开启回型电网201,处于晚上时开启诱捕灯和回型电网201;
3)温湿度传感器:当前的温度大于50℃或小于0℃;当周围或自身发生过热或夏季干燥时回型电网201将害虫尸体点燃时,将关闭诱虫灯202和回型电网201避免引发火灾等危险。
4)加速度传感器:检测到计数杀虫灯与水平面的夹角小于75°时;计数杀虫灯在摔落或发生倾斜时,将关闭诱虫灯202和回型电网201避免引发火灾等危险。
按键检测:检测按键是否被按下,用于开启或关闭诱捕灯和回型电网201。
物联网指令检测:通过物联网通信模块接收来自物联网平台的指令,用于开启或关闭诱捕灯和回型电网201。
无论使用何种方式改变诱捕灯和回型电网201的状态时,该状态均传回物联网端。
一种采用基于轻量级神经网络的计数杀虫灯的计数方法,包括如下步骤:
S1:计数收集箱对杀虫组件杀死的害虫进行拍摄收集得到原始图像;
S2:对原始图像进行预处理得到预处理图像;
S3:将预处理图像输入优化PestNet模型,得到害虫数量。
如图3所示,优化PestNet模型包括依次连接的转换层(Part 1)、第一主干特征提取模块(Part 2)、第二主干特征提取模块(Part 3)、第三主干特征提取模块(Part 4)、加强特征提取模块(Part 5)和预测模块(Part 6);
转换层包括Resize模块,Resize模块连接有3×3卷积模块(Conv2D 3×3模块);3×3卷积模块与第一主干特征提取模块连接;转换层将预处理后的图像等比例缩放后添加灰条,后使用卷积进一步将图像道数扩张至16后输入至Part2。
第一主干特征提取模块包括依次连接的第一bneck 3×3卷积模块、第二bneck 3×3卷积模块、bneck 5×5卷积模块、第一bneck 5×5卷积注意力模块和第二bneck 5×5卷积注意力模块;第一bneck 3×3卷积模块与3×3卷积模块连接;第二bneck 5×5卷积注意力模块分别与第二主干特征提取模块和加强特征提取模块连接;第一主干特征提取模块中的5个bneck模块对Part 1传入的图像进行深度可分离卷积,提取图像中的浅层语义信息并输出第一有效特征层。
第二主干特征提取模块包括依次连接的第三bneck 3×3卷积模块、第四bneck 3×3卷积模块、第三bneck 5×5卷积注意力模块和第四bneck 5×5卷积注意力模块;第三bneck 3×3卷积模块与第二bneck 5×5卷积注意力模块连接;第四bneck 5×5卷积注意力模块分别与第三主干特征提取模块和加强特征提取模块连接;第二主干特征提取模块将第一主干特征提取模块输出的浅层特征利用4个bneck模块进行深度可分离卷积,输出第二有效特征层;
第三主干特征提取模块包括依次连接的第五bneck 3×3卷积模块、bneck 3×3卷积注意力模块、第五bneck 5×5卷积注意力模块、第六bneck 5×5卷积注意力模块、SPPF模块和第一1×1卷积模块;第五bneck 3×3卷积模块与第四bneck 5×5卷积注意力模块连接;第一1×1卷积模块与加强特征提取模块连接;第三主干特征提取模块利用4个bneck模块进行深层特征提取,后串接SPPF模块连接不同尺度的深层特征后输出第三有效特征层。
加强特征提取模块包括与第一1×1卷积模块连接的第二1×1卷积模块,第一1×1卷积模块输出第三有效特征层传递至第二1×1卷积模块,第三有效特征层输出尺寸为(20,20,160)的特征图。第二1×1卷积模块产生第一输出和第二输出,第一输出传递至第三上采样模块;第三上采用模块对第一输出进行采样操作后输出第三采样层,第四bneck 5×5卷积注意力模块输出第二有效特征层,第二有效特征层与第三采样层进行堆叠操作后输入至第一DWLayer模块,第一DWLayer模块连接有第三1×1卷积模块;第三1×1卷积模块产生第三输出和第四输出,第四输出传递到第二上采样模块;第二上采样模块对第四输出进行采样操作后输出第二采样层,第二bneck 5×5卷积注意力模块输出第一有效特征层,第一有效特征层输出尺寸为(40,40,80)的特征图。第一有效特征层与第二采样层进行堆叠操作后输入至第二DWLayer模块,第二DWLayer模块产生第五输出和第六输出;第五输出传递到预测模块;第六输出传递至第一下采样模块,第一下采样模块对第六输出进行下采样后得到第一采样层,第一采样层与第三输出进行堆叠操作后产生第七输出和第八输出;第七输出传递至第三DWLayer模块,第三DWLayer模块与预测模块连接;第八输出传递至第二下采样模块进行下采样后与第二输出进行堆叠操作后传递至第四DWLayer模块,第四DWLayer模块与预测模块连接。加强特征提取模块对语义信息进行加强特征提取。Part2、Part3、Part4提取的三个有效特征层分别进行上采样、下采样和堆叠操作,对三层特征进行浓缩提取并融合,解析图像中的深层语义信息,提取出更好的特征,获得更为有效的三个特征层。
预测模块包括与第二DWLayer模块连接的第一Detect Head模块,与第三DWLayer模块连接的第二Detect Head模块以及与第四DWLayer模块连接的第三Detect Head模块;预测模块将第一Detect Head模块、第二Detect Head模块和第三Detect Head模块的结果共同输出得到计数结果。预测模块利用更为有效的三个特征层,分别对图像的不同尺度特征进行预测,得到害虫图像的目标预测结果,并根据结果进行计数。
如图4所示,bneck 5×5卷积注意力模块(bneck 5×5,SE模块)由主干分支和残差分支组成。主干分支由上至下依次连接的卷积归一化HSwish模块(Conv2D-BN-HSwish模块)、深度可分离卷积归一化模块(DWConv-BN模块)、通道注意力模块(SE)和卷积归一化模块(Conv2D-BN模块)。残差分支为bneck5×5卷积注意力模块的原始输入部分。主干分支和残差分支线性相加构成bneck5×5卷积注意力模块的输出部分。“5×5”指的是深度可分离卷积归一化模块中的卷积核大小为5×5。当模块中没有“SE”则不使用通道注意力模块。bneck3×3卷积注意力模块与bneck 5×5卷积注意力模块的差别在于深度可分离卷积归一化模块中的卷积核大小为3×3。卷积归一化HSwish模块的HSwish激活函数为
如图5所示,Detect Head模块包括依次连接的第四卷积归一化SiLu模块(Conv2D-BN-SiLU模块)、第二深度可分离卷积归一化SiLU模块(DWConv-BN-SiLU模块)和第五卷积归一化SiLu模块。Detect Head模块对特征进行回归、分类和预测。
第一DWLayer模块、第二DWLayer模块、第三DWLayer模块以及第四DWLayer模块结构均相同,如图6所示,任意DWLayer模块包括与DWLayer模块输入端连接的残差分支和主干分支;主干分支包括依次连接的第一卷积归一化SiLu模块(Conv2D-BN-SiLU模块)和第一深度可分离卷积归一化SiLU模块(DWConv-BN-SiLU模块);残差分支包括第二卷积归一化SiLu模块;第一深度可分离卷积归一化SiLU模块和第二卷积归一化SiLu模块堆叠后连接有第三卷积归一化SiLu模块;第三卷积归一化SiLu模块与DWLayer模块输出端连接。卷积归一化SiLu模块或深度可分离卷积归一化SiLU模块的SiLU激活函数为
如图7所示,步骤S3中对优化PestNet模型进行训练的方法包括如下步骤:
C1:通过CCD相机拍摄采集X=1000张害虫的原始图像;本发明的其他实施例中X还可以为1100、1200、1300、1400或1500等。
C2:对所有原始图像进行预处理后得到预处理图像,并使用Labelimg工具对预处理图像进行人工标注害虫区域,得到标注图像;
原始图像的预处理包括如下具体步骤:
A1:对原始图像进行高斯滤波处理,得到ImageI图像;
A2:对ImageI图像使用最大类间方差法进行分割,得到ImageII图像;
A2.1:设ImageI图像背景区域为B,害虫区域为P,ImageI图像中灰度值为i的像素点共有ni个,阈值T为ImageI图像的像素分割界限;
A2.2:将ImageI图像中属于害虫的像素点数量占整幅ImageI图像的比例记为ωP,计算得到害虫像素的平均灰度值μP(将害虫区域中每个像素点的灰度值叠加后取平均值);
A2.3:将ImageI图像中属于背景的像素点数量占整幅ImageI图像的比例记为ωB,计算得到背景像素的平均灰度值μB(将背景区域中每个像素点的灰度值叠加后取平均值);
A2.4:计算ImageI图像的平均灰度值μ(图像所有像素点的灰度值加起来取平均值);
A2.5:利用平均灰度值μP和平均灰度值μB计算最大类间方差值σ2=ωPωB(μP-μB)2;
A2.6:使用最大类间方差值对ImageI图像进行分割,得到二值化图像即ImageII图像;
A3:对ImageII图像进行腐蚀处理,得到ImageIII图像;
使用为3×3的卷积核对ImageIII(二值化图像)每个像素点进行遍历,像素点以卷积核为单位的周围像素点都是白色(值为1),则该像素点设为白色(值为1);像素点以卷积核为单位的周围像素点存在黑色(值为0),则该像素点设为黑色(值为0)。
A4:对ImageIII图像使用中值滤波进行边缘平滑处理,得到ImageIV图像即预处理图像。
C3:将标注图像采用随机旋转和随机缩放的方式进行数据增强,得到3X=3000张增强图像;
C4:将标注图像和增强图像混合后按照7∶2∶1的比例随机划分得到训练集、测试集和验证集;
C5:采用余弦退火策略和SGD优化器使用训练集对优化PestNet模型进行训练,初始训练参数Epoch为300,学习率为0.001,动量为0.9;
C6:使用测试集对优化PestNet模型的检测效果进行精度测试;
C7:使用验证集对优化PestNet模型进行参数调整;
C8:重复进行步骤C6-C7直至损失函数趋于收敛状态,得到训练后的优化PestNet模型。训练后的优化PestNet模型装载至树莓派中。
Claims (10)
1.一种基于轻量级神经网络的计数杀虫灯,其特征在于,包括顶盖(1)和检测计数杀虫灯周边环境的传感器组件,所述顶盖(1)的下方设置有杀虫组件(2),所述杀虫组件(2)的下方设置有用于对害虫计数的计数收集箱(3);所述计数收集箱(3)内设置有控制器;所述控制器内装载有用于对害虫计数的优化PestNet模型;所述传感器组件、杀虫组件(2)、计数收集箱(3)均与控制器电连接;所述计数收集箱(3)内设置有用于给本计数杀虫灯供电的电池。
2.根据权利要求1所述的基于轻量级神经网络的计数杀虫灯,其特征在于,所述杀虫组件(2)包括回型电网(201),所述回型电网(201)的中心处设置有诱虫灯(202);
所述回型电网(201)的外侧设置有电网清洁组件(203),所述电网清洁组件(203)包括用于清洁回型电网(201)的环形清洁刷(2031);所述环形清洁刷(2031)上设置有驱动环形清洁刷(2031)沿回型电网(201)长度方向移动的移动组件;
所述移动组件包括中心对称设置在环形清洁刷(2031)对角上的两个螺杆(2032),所述环形清洁刷(2031)上设置有与螺杆(2032)配合连接的螺孔,两个所述螺杆(2032)的上端均设置有驱动螺杆(2032)转动的驱动电机(2033),所述螺杆(2032)的下端与计数收集箱(3)的顶部转动连接;
所述回型电网(201)、诱虫灯(202)和两个驱动电机(2033)均与控制器电连接。
3.根据权利要求1所述的基于轻量级神经网络的计数杀虫灯,其特征在于,所述计数收集箱(3)包括箱体(301),所述箱体(301)的顶部设置有漏斗(302),所述漏斗(302)的上端设置有水平的固定架(304),所述杀虫组件(2)与固定架(304)固定连接;所述漏斗(302)的下端连通有第一下落通道(303);
所述第一下落通道(303)的底端设置有重量感应台(305),所述重量感应台(305)与控制器电连接;所述重量感应台(305)的两侧分别设置有水平设置的电动推杆(306)和计数组件;所述电动推杆(306)的活动端连接有推板(307),所述推板(307)的底端与重量感应台(305)抵接;所述推板(307)的上端固定连接有水平设置的挡板(308);所述电动推杆(306)与控制器电连接,电动推杆(306)带动推板(307)水平移动;
所述计数组件包括暗箱(309),所述电动推杆(306)最大伸长状态下推板(307)与暗箱(309)远离第一下落通道(303)的侧壁抵接;
所述暗箱(309)与第一下落通道(303)连通,所述暗箱(309)上设置有隔离第一下落通道(303)的暗箱门(310),所述暗箱(309)的顶端设置有驱动暗箱门(310)上下移动的直线舵机(311);所述暗箱(309)内设置有通过电动转轴与暗箱(309)侧壁转动连接的暗箱台(312),所述暗箱台(312)的表面覆有白色反光层;所述暗箱台(312)的上表面与重量感应台(305)的上表面的留有间隙,所述暗箱(309)的顶端设置有对准暗箱台(312)拍摄的CCD相机(313)和为暗箱(309)内补光的LED补光灯(314);所述直线舵机(311)、电动转轴、CCD相机(313)和LED补光灯(314)均与控制器电连接;
所述重量感应台(305)远离暗箱(309)的一侧向下倾斜,且重量感应台(305)远离暗箱(309)的一侧设置有供雨水流出的导流道(315);所述重量感应台(305)与水平面成5°的夹角;所述推板(307)的下端设置有弹性滤网(316);
所述箱体(301)外表面上还设置有用于放置诱虫剂的诱虫剂盒(317);所述计数收集箱(3)的下端可拆卸连接有集虫箱(318);所述暗箱(309)的底端与集虫箱(318)连通;所述电池位于箱体(301)的内部。
4.根据权利要求3所述的基于轻量级神经网络的计数杀虫灯,其特征在于,所述控制器设置在箱体(301)的内部,所述控制器连接有物联网通信模块;所述控制器还连接有LCD屏幕(4)和信号天线(5);所述LCD屏幕(4)和信号天线(5)均设置在箱体(301)的侧壁上,所述箱体(301)上还设置有凹槽,所述凹槽的顶端设置有按键;所述按键与控制器电连接。
5.根据权利要求1所述的基于轻量级神经网络的计数杀虫灯,其特征在于,所述传感器组件包括雨量传感器(601)、光量传感器(602)、温湿度传感器以及加速度传感器,所述光量传感器(602)设置在顶盖(1)上,所述顶盖(1)上设置有储雨槽(603),所述雨量传感器(601)设置在储雨槽(603)中;所述温湿度传感器和加速度传感器均设置在计数收集箱(3)内。
6.采用权利要求1-5任一所述的基于轻量级神经网络的计数杀虫灯的计数方法,其特征在于,包括如下步骤:
S1:所述计数收集箱对杀虫组件杀死的害虫进行拍摄收集得到原始图像;
S2:对原始图像进行预处理得到预处理图像;
S3:将预处理图像输入优化PestNet模型,得到害虫数量。
7.根据权利要求6所述的计数方法,其特征在于,所述优化PestNet模型包括依次连接的转换层、第一主干特征提取模块、第二主干特征提取模块、第三主干特征提取模块、加强特征提取模块和预测模块;
所述转换层包括Resize模块,所述Resize模块连接有3×3卷积模块;所述3×3卷积模块与第一主干特征提取模块连接;
所述第一主干特征提取模块包括依次连接的第一bneck 3×3卷积模块、第二bneck 3×3卷积模块、bneck 5×5卷积模块、第一bneck 5×5卷积注意力模块和第二bneck 5×5卷积注意力模块;所述第一bneck 3×3卷积模块与3×3卷积模块连接;所述第二bneck 5×5卷积注意力模块分别与第二主干特征提取模块和加强特征提取模块连接;
所述第二主干特征提取模块包括依次连接的第三bneck 3×3卷积模块、第四bneck 3×3卷积模块、第三bneck 5×5卷积注意力模块和第四bneck 5×5卷积注意力模块;所述第三bneck 3×3卷积模块与第二bneck 5×5卷积注意力模块连接;所述第四bneck 5×5卷积注意力模块分别与第三主干特征提取模块和加强特征提取模块连接;
所述第三主干特征提取模块包括依次连接的第五bneck 3×3卷积模块、bneck3×3卷积注意力模块、第五bneck 5×5卷积注意力模块、第六bneck 5×5卷积注意力模块、SPPF模块和第一1×1卷积模块;所述第五bneck 3×3卷积模块与第四bneck 5×5卷积注意力模块连接;所述第一1×1卷积模块与加强特征提取模块连接;
所述加强特征提取模块包括与第一1×1卷积模块连接的第二1×1卷积模块,所述第一1×1卷积模块输出第三有效特征层传递至第二1×1卷积模块,所述第二1×1卷积模块产生第一输出和第二输出,所述第一输出传递至第三上采样模块;所述第三上采用模块对第一输出进行采样操作后输出第三采样层,所述第四bneck 5×5卷积注意力模块输出第二有效特征层,所述第二有效特征层与第三采样层进行堆叠操作后输入至第一DWLayer模块,所述第一DWLayer模块连接有第三1×1卷积模块;所述第三1×1卷积模块产生第三输出和第四输出,所述第四输出传递到第二上采样模块;所述第二上采样模块对第四输出进行采样操作后输出第二采样层,所述第二bneck 5×5卷积注意力模块输出第一有效特征层,所述第一有效特征层与第二采样层进行堆叠操作后输入至第二DWLayer模块,所述第二DWLayer模块产生第五输出和第六输出;所述第五输出传递到预测模块;所述第六输出传递至第一下采样模块,所述第一下采样模块对第六输出进行下采样后得到第一采样层,所述第一采样层与第三输出进行堆叠操作后产生第七输出和第八输出;所述第七输出传递至第三DWLayer模块,所述第三DWLayer模块与预测模块连接;所述第八输出传递至第二下采样模块进行下采样后与第二输出进行堆叠操作后传递至第四DWLayer模块,所述第四DWLayer模块与预测模块连接;
所述预测模块包括与第二DWLayer模块连接的第一Detect Head模块,与第三DWLayer模块连接的第二Detect Head模块以及与第四DWLayer模块连接的第三Detect Head模块;所述预测模块将第一Detect Head模块、第二Detect Head模块和第三Detect Head模块的结果共同输出得到计数结果。
8.根据权利要求7所述的计数方法,其特征在于,所述第一DWLayer模块、第二DWLayer模块、第三DWLayer模块以及第四DWLayer模块结构均相同,所述任意DWLayer模块包括与DWLayer模块输入端连接的残差分支和主干分支;所述主干分支包括依次连接的第一卷积归一化SiLu模块和第一深度可分离卷积归一化SiLU模块;所述残差分支包括第二卷积归一化SiLu模块;所述第一深度可分离卷积归一化SiLU模块和第二卷积归一化SiLu模块堆叠后连接有第三卷积归一化SiLu模块;所述第三卷积归一化SiLu模块与DWLayer模块输出端连接。
9.所述根据权利要求6所述的计数方法,其特征在于,所述对原始图像的预处理包括如下具体步骤:
A1:对原始图像进行高斯滤波处理,得到ImageI图像;
A2:对ImageI图像使用最大类间方差法进行分割,得到ImageII图像;
A2.1:设ImageI图像背景区域为B,害虫区域为P,ImageI图像中灰度值为i的像素点共有ni个,阈值T为ImageI图像的像素分割界限;
A2.2:将ImageI图像中属于害虫的像素点数量占整幅ImageI图像的比例记为ωP,计算得到害虫像素的平均灰度值μP;
A2.3:将ImageI图像中属于背景的像素点数量占整幅ImageI图像的比例记为ωB,计算得到背景像素的平均灰度值μB;
A2.4:计算ImageI图像的平均灰度值μ;
A2.5:利用平均灰度值μP和平均灰度值μB计算最大类间方差值σ2=ωPωB(μP-μB)2;
A2.6:使用最大类间方差值对ImageI图像进行分割,得到二值化图像即ImageII图像;
A3:对ImageII图像进行腐蚀处理,得到ImageIII图像;
A4:对ImageIII图像使用中值滤波进行边缘平滑处理,得到ImageIV图像即预处理图像。
10.根据权利要求6所述的计数方法,其特征在于,所述步骤S3中对优化PestNet模型进行训练的方法包括如下步骤:
C1:通过计数收集箱内CCD摄像机采集X张害虫的原始图像;
C2:对所有原始图像进行预处理后得到预处理图像,并使用Labelimg工具对预处理图像进行人工标注害虫区域,得到标注图像;
C3:将标注图像采用随机旋转和随机缩放的方式进行数据增强,得到3X张增强图像;
C4:将标注图像和增强图像混合后按照7∶2∶1的比例随机划分得到训练集、测试集和验证集;
C5:采用余弦退火策略和SGD优化器使用训练集对优化PestNet模型进行训练,初始训练参数Epoch为300,学习率为0.001,动量为0.9;
C6:使用测试集对优化PestNet模型的检测效果进行精度测试;
C7:使用验证集对优化PestNet模型进行参数调整;
C8:重复进行步骤C6-C7直至损失函数趋于收敛状态,得到训练后的优化PestNet模型。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210843230.9A CN115024298B (zh) | 2022-07-18 | 2022-07-18 | 一种基于轻量级神经网络的计数杀虫灯及计数方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210843230.9A CN115024298B (zh) | 2022-07-18 | 2022-07-18 | 一种基于轻量级神经网络的计数杀虫灯及计数方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115024298A true CN115024298A (zh) | 2022-09-09 |
CN115024298B CN115024298B (zh) | 2023-09-26 |
Family
ID=83128277
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210843230.9A Active CN115024298B (zh) | 2022-07-18 | 2022-07-18 | 一种基于轻量级神经网络的计数杀虫灯及计数方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115024298B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115500331A (zh) * | 2022-09-15 | 2022-12-23 | 河北省农林科学院植物保护研究所 | 一种点蜂缘蝽的害虫诱集装置及控制方法 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002000154A (ja) * | 2000-06-27 | 2002-01-08 | Ikeda Rika:Kk | フェロモントラップを利用した飛翔性害虫の計数方法及びその装置 |
CN104904693A (zh) * | 2015-05-29 | 2015-09-16 | 成都比昂科技有限公司 | 基于物联网的太阳能杀虫装置及其控制方法 |
CN205756722U (zh) * | 2016-06-28 | 2016-12-07 | 济南祥辰科技有限公司 | 一种基于物联网的多功能太阳能自动虫情测报灯 |
CN107578089A (zh) * | 2017-09-13 | 2018-01-12 | 中国水稻研究所 | 一种农作物灯诱测报害虫的自动识别与计数方法 |
CN107926887A (zh) * | 2017-10-31 | 2018-04-20 | 四川农业大学 | 农作物病虫害精准识别与智能控制系统 |
CN110122449A (zh) * | 2019-05-29 | 2019-08-16 | 重庆工程职业技术学院 | 具有人工智能预测害虫的智能杀虫灯 |
CN209732354U (zh) * | 2019-03-18 | 2019-12-06 | 新乡市绿色园林新能源有限公司 | 一种基于物联网的杀虫灯 |
CN111428602A (zh) * | 2020-03-18 | 2020-07-17 | 浙江科技学院 | 卷积神经网络边缘辅助增强的双目显著性图像检测方法 |
CN215074930U (zh) * | 2021-05-27 | 2021-12-10 | 华南农业大学 | 一种基于重力传感计数的物联网杀虫灯 |
CN114220035A (zh) * | 2021-12-23 | 2022-03-22 | 中科合肥智慧农业协同创新研究院 | 一种基于改进yolo v4的快速害虫检测方法 |
-
2022
- 2022-07-18 CN CN202210843230.9A patent/CN115024298B/zh active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002000154A (ja) * | 2000-06-27 | 2002-01-08 | Ikeda Rika:Kk | フェロモントラップを利用した飛翔性害虫の計数方法及びその装置 |
CN104904693A (zh) * | 2015-05-29 | 2015-09-16 | 成都比昂科技有限公司 | 基于物联网的太阳能杀虫装置及其控制方法 |
CN205756722U (zh) * | 2016-06-28 | 2016-12-07 | 济南祥辰科技有限公司 | 一种基于物联网的多功能太阳能自动虫情测报灯 |
CN107578089A (zh) * | 2017-09-13 | 2018-01-12 | 中国水稻研究所 | 一种农作物灯诱测报害虫的自动识别与计数方法 |
CN107926887A (zh) * | 2017-10-31 | 2018-04-20 | 四川农业大学 | 农作物病虫害精准识别与智能控制系统 |
CN209732354U (zh) * | 2019-03-18 | 2019-12-06 | 新乡市绿色园林新能源有限公司 | 一种基于物联网的杀虫灯 |
CN110122449A (zh) * | 2019-05-29 | 2019-08-16 | 重庆工程职业技术学院 | 具有人工智能预测害虫的智能杀虫灯 |
CN111428602A (zh) * | 2020-03-18 | 2020-07-17 | 浙江科技学院 | 卷积神经网络边缘辅助增强的双目显著性图像检测方法 |
CN215074930U (zh) * | 2021-05-27 | 2021-12-10 | 华南农业大学 | 一种基于重力传感计数的物联网杀虫灯 |
CN114220035A (zh) * | 2021-12-23 | 2022-03-22 | 中科合肥智慧农业协同创新研究院 | 一种基于改进yolo v4的快速害虫检测方法 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115500331A (zh) * | 2022-09-15 | 2022-12-23 | 河北省农林科学院植物保护研究所 | 一种点蜂缘蝽的害虫诱集装置及控制方法 |
CN115500331B (zh) * | 2022-09-15 | 2023-12-05 | 河北省农林科学院植物保护研究所 | 一种点蜂缘蝽的害虫诱集装置及控制方法 |
Also Published As
Publication number | Publication date |
---|---|
CN115024298B (zh) | 2023-09-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110235873B (zh) | 一种农林有害昆虫虫情自动监测预报系统 | |
CN103168762B (zh) | 田间灯诱昆虫图像采集装置 | |
CN205390083U (zh) | 智能病虫害监测预警系统 | |
CA3172012C (en) | Insect monitoring system and method | |
CN108244071B (zh) | 虫情预测系统 | |
WO2016045593A1 (zh) | 自移动机器人 | |
CN203812266U (zh) | 一种害虫诱捕计数装置 | |
CN103914733A (zh) | 一种害虫诱捕计数装置及计数系统 | |
CN103798205B (zh) | 一种3g实时监测捕杀农作物病虫害的灯塔 | |
CN108174832A (zh) | 杀灭蚊虫的方法及装置 | |
CN104918007A (zh) | 基于计算机视觉的大田虫情监控采样装置及采样方法 | |
CN115024298A (zh) | 一种基于轻量级神经网络的计数杀虫灯及计数方法 | |
CN113313737B (zh) | 一种基于计算机视觉的诱虫瓶昆虫计数方法以及计数装置 | |
Hadi et al. | Development of an automated multidirectional pest sampling detection system using motorized sticky traps | |
CN108594814B (zh) | 一种农林病虫害监控机器人 | |
CN113475477A (zh) | 一种节能风吸式杀虫灯诱捕装置及诱捕方法 | |
CN113693041B (zh) | 一种应用于无公害蔬菜的虫害防控装置及防控方法 | |
CN106603993B (zh) | 基于立体视觉的灯诱昆虫图像采集装置及方法 | |
CN111202035B (zh) | 一种用于农林业虫害预测的害虫自动收集装置及方法 | |
CN205608767U (zh) | 一种斜纹夜蛾诱捕自动计数系统 | |
CN110547271B (zh) | 害虫高空诱控捕杀装置 | |
CN210432686U (zh) | 一种基于图像识别的害虫自动计数系统 | |
CN115443960A (zh) | 一种基于活虫拍照识别的方法及设备 | |
CN215454853U (zh) | 一种便携式昆虫诱捕分类计数装置 | |
CN210929277U (zh) | 害虫高空诱控捕杀装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |