CN107992863A - 多分辨率粮虫种类视觉识别方法 - Google Patents

多分辨率粮虫种类视觉识别方法 Download PDF

Info

Publication number
CN107992863A
CN107992863A CN201810022600.6A CN201810022600A CN107992863A CN 107992863 A CN107992863 A CN 107992863A CN 201810022600 A CN201810022600 A CN 201810022600A CN 107992863 A CN107992863 A CN 107992863A
Authority
CN
China
Prior art keywords
grain worm
image
resolution
grain
worm
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810022600.6A
Other languages
English (en)
Other versions
CN107992863B (zh
Inventor
王贵财
张梦
白浩
费选
侯营
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Henan University of Technology
Original Assignee
Henan University of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Henan University of Technology filed Critical Henan University of Technology
Priority to CN201810022600.6A priority Critical patent/CN107992863B/zh
Publication of CN107992863A publication Critical patent/CN107992863A/zh
Application granted granted Critical
Publication of CN107992863B publication Critical patent/CN107992863B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/20Scenes; Scene-specific elements in augmented reality scenes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/24Aligning, centring, orientation detection or correction of the image
    • G06V10/245Aligning, centring, orientation detection or correction of the image by locating a pattern; Special marks for positioning

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Multimedia (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Engineering & Computer Science (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种多分辨率粮虫种类视觉识别方法,对拍摄的低、中、高分辨率三幅粮虫图像分别运用OTSU算法对其进行二值化,利用Blob算法分别提取低、中、高三种分辨率的粮虫图像的连通区域,在低分辨率粮虫图像上对疑似粮虫目标区域定位;根据中、低分辨率图像放大率和低分辨率粮虫图像上疑似粮虫目标区域进行反定位,计算面积参数与周长参数,确定是否为粮虫区域;最后在Blob算法提取的高分辨率粮虫图像连通区域基础上,根据高、中分辨率图像放大率和已确定中分辨率粮虫区域进行反定位,采用局部二值模式粮虫纹理特征和随机森林分类器对粮虫实现识别。本发明利用开发工具和图像处理算法的优点实现对粮虫种类的高效准确的识别。

Description

多分辨率粮虫种类视觉识别方法
技术领域
本发明涉及储粮粮情检测领域,尤其是涉及多分辨率粮虫种类视觉识别方法。
背景技术
维持一定数量、品种和品质粮食的储备,是保障国家粮食安全的重要措施。其中,储粮害虫的危害问题是该领域长期以来表现较为突出的问题之一。粮虫识别是进行粮虫综合防治的一种有效手段。主要方法有扦样法、诱集法、声音识别法、近红外法和视觉检测法等。自从美国学者Zayas采用视觉技术对散装小麦仓中的谷蠹成虫进行离线研究,为粮虫的快速检测和分类开辟了新途径。视觉识别法具有准确度高、劳动量小、粮虫图像可视化、不局限于粮库的分散性和地域限制,便于同粮库现有软件系统集成等优点。因此,如何高效、准确、便捷地实现粮虫识别,近年来一直是粮虫识别领域的研究热点。
发明内容
本发明目的在于提供一种多分辨率粮虫种类视觉识别方法,以解决现有粮虫视觉检测方法无法克服实际粮仓存储复合环境的影响。
为实现上述目的,本发明采取下述技术方案:
本发明所述多分辨率粮虫种类视觉识别方法,在多分辨率镜头基础上,对拍摄的低分辨率(小于 )、中分辨率(介于之间)、高分辨率(高于)三幅粮虫图像分别运用OTSU算法对其进行二值化,然后利用Blob算法分别提取低、中、高三种分辨率的粮虫图像的连通区域,并在所述低分辨率粮虫图像上对疑似粮虫目标区域定位;在所述Blob算法提取的所述中分辨率粮虫图像连通区域的基础上,根据中、低分辨率图像放大率和低分辨率粮虫图像上疑似粮虫目标区域进行反定位,并计算其面积参数与周长参数,据此确定是否为粮虫区域;最后在Blob算法提取的高分辨率粮虫图像连通区域基础上,根据高、中分辨率图像放大率和已确定中分辨率粮虫区域进行反定位,然后采用局部二值模式(英文:Local Binary Patterns,简称LBP)粮虫纹理特征和随机森林分类器(英文Random Forest, 简称RF)对粮虫实现识别。
为抑制复合干扰源下凸显粮虫目标来提高粮虫视觉检测效果,构造结构元素,同时使用水平方向和垂直方向的线性结构元素,对二值化的所述低、中、高三种分辨率粮虫图像进行膨胀运算,实现粮虫目标增强进而提高粮虫检测识别率。
根据中、低分辨率图像放大率和低分辨率粮虫图像上疑似粮虫目标区域进行反定位,并计算其面积参数与周长参数的方法为:
a、采用面积参数度量目标区域大小,对于斑块区域定义为该区域中像素点的数目,即:
式中:为像素坐标值,为该点的像素值;
b、采用周长参数度量目标区域特征,对于斑块区域定义为斑块区域边界上像素点的个数。即:
式中:为像素坐标值,为该点的像素值。
采用局部二值模式粮虫纹理特征和随机森林分类器对粮虫实现识别的方法为:
利用像素点邻域内灰度变化来表示高分辨率粮虫图像像素点的纹理模式;变换公式如下:
其中表示图像在像素点的邻域内的灰度变化,取值为:
表示图像在该像素点处的二值纹理模式,代表邻域内像素点的灰度值相对于中心点的变化情况;为变换系数,构成变换系数矩阵
为便于表示和计算,将邻域的纹理基元映射为之间的值,用其值代替原邻域中间像素的像素值;粮虫纹理模式的值作为像素值即得到相应粮虫纹理谱图像;统计变换后图像各像素点的纹理值的频数,即得到粮虫图像的纹理谱直方图;
然后引用随机森林分类器按照生成分类树的规则生成多棵分类树,通过重抽样术生成多个树分类器,其中是独立同分布的随机向量,每棵树分类器进行投票并按得票结果而定;
每次抽样生成自助样本集,全体样本中不在自助样本中的剩余样本称为OOB(Out-Of-Bag)数据,OOB数据用来预测分类正确率,每次预测结果进行汇总得到错误率的OOB估计,以测试样本进行评估组合分类器的分类效果;利用随机森林分类器通过在每个节点处随机选择局部二值模式粮虫纹理特征进行分支,最小化各分类树之问的相关性进而提高分类精确性;
在分类阶段,类标签是由所有决策树的分类结果综合而成,也即由每个分类树投票和概率平均得到;对于测试样例,预测类标签可以得到:
其中为森林中决策树的数目,为示性函数,为树对类别的分类结果,是树的叶子节点数,是森林中棵决策树的权重;
采用投票方式决定粮虫类标签,即测试集遍历森林中的每棵树并记录其对每个粮虫目标的分类结果,得票高于预定阈值类标签即为目标粮虫种类标签。
拍摄的所述低、中、高三种分辨率的粮虫图像,是由多个不同焦距镜头基于同一场景采集得到;选用低、中、高分辨率粮虫图像并对其进行重建方法为:
首先以低分辨率粮虫图像中的疑似粮虫区域作为基准图像,并以低分辨率粮虫图像的倍建立中分辨率粮虫图像, 即: 若低分辨率粮虫图像的分辨率为,则重定位中分辨率粮虫图像的分辨率为的取值由镜头焦距获取;将中分辨率粮虫图像的像素值依照倍采样直接填充到高分辨率粮虫图像上,并以中分辨率粮虫图像的倍建立高分辨率粮虫图像, 即: 若中分辨率粮虫图像的分辨率为,则重建高分辨率粮虫图像的分辨率为的取值由镜头焦距获取。
根据变焦缩放变换矩阵,所述重定位后的高一级分辨率图像中的每一个像素点与低一级分辨率图像中的相应像素点有如下约束形式:
其中:分别是轴和轴上的比例系数,考虑到像素大小为标准方形,所以;由于不同分辨率粮虫图像的焦距已知,低分辨率粮虫图像与中分辨率粮虫图像之间缩放倍数为,即;中分辨率粮虫图像与高分辨率粮虫图像之间的缩放倍数为,即
利用双线性插值法将低分辨率粮虫图像中每个Blob块像素映射到中、高分辨率粮虫图像中,然后计算中、高分辨率粮虫图像中每个像素点的灰度值, 实现粮虫目标区域重定位。
本发明在多分辨率镜头基础上,旨在利用开发工具和图像处理算法的优点来实现对粮虫种类的高效准确的识别。该方法首先对低、中、高三种分辨率图像分别运用OTSU算法对其进行二值化,进而利用Blob算法提取粮虫图像的连通区域并在低分辨率图像上对疑似粮虫目标区域定位;其次在Blob算法提取的中分辨率粮虫图像连通区域的基础上,根据中、低图像放大率和低分辨率粮虫图像疑似粮虫目标区域进行反定位,并计算其面积参数与周长参数来据此确定是否为粮虫区域;最后在高分辨率粮虫图像Blob算法提取的连通区域基础上,根据高、中图像放大率和已确定中分辨率粮虫区域进行反定位,进而利采用局部二值模式粮虫纹理特征提取和随机森林分类器对粮虫实现识别。实验结果分析表明该方法既能精确标记粮虫位置又能准确识别粮虫种类,对完善粮虫实时检测技术和实现粮食安全管理具有重要意义。
附图说明
图1是本发明的流程图。
图2是本发明所述多分辨率图像的示意图。
具体实施方式
下面结合附图对本发明的实施例作详细说明,本实施例在以本发明技术方案为前提下进行实施,给出了详细的实施方式和具体的操作过程,但本发明的保护范围不限于下述实施例。
如图1所示,本发明所述多分辨率粮虫种类视觉识别方法,由多分辨率粮虫图像二值化、Blob检测、多分辨率粮虫图像反定位、局部二值模式(英文:Local Binary Patterns,简称LBP)特征提取和随机森林分类器(英文Random Forest, 简称RF)分类步骤组成。通过对低()、中()、高()三种分辨率粮虫图像分别运用OTSU算法对其进行二值化处理,然后利用Blob算法分别提取低、中、高三种分辨率粮虫图像的连通区域并在低分辨率粮虫图像上对疑似粮虫目标区域定位;在Blob算法提取的中分辨率粮虫图像连通区域的基础上,根据中、低粮虫图像放大率和低分辨率粮虫图像疑似粮虫目标区域进行反定位,并计算其面积参数与周长参数,据此确定是否为粮虫区域;最后在高分辨率粮虫图像Blob算法提取的连通区域基础上,根据高、中粮虫图像放大率和已确定中分辨率粮虫图像粮虫区域进行反定位,进而采用粮虫局部二值模式纹理特征和随机森林分类器对粮虫实现识别。
1、二值化处理
本发明采用OTSU算法对粮虫图像快捷准确进行二值化;对于一幅粮虫图像通过图像的总平均灰度级、标的平均灰度级与背景的平均灰度级以及其分别所占图像面积的比例,依照类间方差实现目标和背景分割,最终完成图像二值化。
膨胀能使物体边界扩大,具体的膨胀结果与图像本身和结构元素的形状有关,膨胀常用于将图像中原本断裂开来的同一物体桥接起来;由于粮虫属于弱小目标,粮虫图像二值化后易使粮虫区域更弱化甚至本来完整的粮虫断裂为两部分,给后续的粮虫图像分析造成困扰,因此必须借助膨胀算法扩大或桥接断裂的粮虫图像区域缝隙。
为凸显粮虫目标来提高粮虫种类识别效果,本发明构造结构元素,同时使用水平方向和垂直方向的线性结构元素对二值图像膨胀运算,实现粮虫目标增强进而提高粮虫检测识别率。
膨胀:其含义为二值图像中使结构元素击中的所有点的集合,膨胀运算表示为:
这样可消除视觉传感器某些情况下会受残缺粮粒、粮食品质、光照条件和镜头成像状态等干扰源的影响。
2、Blob块检测
本发明对二值化后的粮虫图像进行Blob连通域分析从而达到粮虫检测目的,算法实现如下:
(1) 采用面积参数度量目标区域大小;对于斑块区域定义为该区域中像素点的数目,即:
式中:为像素坐标值,为该点的像素值。
(2) 采用周长参数度量目标区域特征;对于斑块区域定义为斑块区域边界上像素点的个数,即:
式中:为像素坐标值,为该点的像素值( 黑点为0,白点为1)。
相比传统方法本发明基于视觉检测法通过面积参数和周长参数能快速、准确、无损自动检测粮虫。
3、多分辨率重建
如图2所示,多分辨率图像是多个不同焦距镜头基于同一场景采集得到,这样有助于依据分辨率的不同特征分别处理,从而达到增强对比度和抑制噪声干扰的目的,非常适合于粮虫这类弱小目标检测。为了简化问题和着重关注算法对不同分辨率图像序列的重建性能, 假设拍摄对象为静态场景, 且拍摄相机与场景之间相对静止, 仅调节焦距或更换不同焦距镜头就能获得一系列不同缩放尺度的多分辨率图像。
对低、中、高不同分辨率粮虫图像进行重建,如图1、2所示,首先以低分辨率粮虫图像中的疑似粮虫区域作为基准图像, 并以分辨率图像的倍建立中分辨率图像, 即: 若的分辨率为, 则重定位中分辨率图像的分辨率为, 一般地, 取的值可由镜头焦距获取。将的像素值依照倍采样直接填充到高分辨率粮虫图像上,并以分辨率图像的倍建立高分辨率图像, 即: 若的分辨率为, 则重建高分辨率图像的分辨率为,一般地, 取的值可由镜头焦距获取。
4、反定位
根据变焦缩放变换矩阵,重定位后的高一级分辨率图像中的每一个像素点与低一级分辨率图像中的相应像素点有如下约束形式:
其中:分别是轴和轴上的比例系数,考虑到像素大小为标准方形,所以;由于不同分辨率粮虫图像焦距已知,之间缩放倍数为,即之间其缩放倍数为,即
对低一级分辨率粮虫图像的每个Blob块像素利用公式
反定位后的高一级分辨率粮虫图像相对应的像素坐标,由于计算出的坐标值可能为非整数坐标,导致反定位后的图像存在空洞的情况;为避免这一现象,采用图像插值技术求取该点的像素值,然后令;目前常用的插值方法有:最近邻法、双线性法和立方卷积法等;考虑到均方误差反映插值图像与原图像的逼近程度,而双线性法的均方误差较小,插值效果越好。本发明中采用双线性插值法:假定内插点像素浮点坐标为的四个顶点围成的区域内的灰度变化是线性的,根据四个近邻像素的灰度值,利用线性内插方法计算出内插点的灰度值;具体计算如下式:
其中:为正整数,区间的纯小数。
本发明中利用双线性插值法将低分辨率粮虫图像中所有像素点映射到中、高分辨率粮虫图像中,计算中、高分辨率粮虫图像中每个像素点的灰度值,实现粮虫目标区域重定位。
5、局部二值模式特征提取
局部二值模式特征对粮虫图像具有良好的局域特性,利用像素点邻域内灰度变化来表示粮虫图像像素点的纹理模式,变换公式如下式所示:
其中表示图像在像素点的邻域内的灰度变化,取值为:
表示图像在该像素点处的二值纹理模式,代表邻域内像素点的灰度值相对于中心点的变化情况;为变换系数,构成变换系数矩阵如下:
为便于表示和计算,将邻域的粮虫纹理基元映射为之间的值,用其值代替原邻域中间像素的像素值;粮虫纹理模式的值作为像素值可得到相应纹理谱图像。
统计变换后图像各像素点的纹理值的频数,即可得到图像的纹理谱直方图;假设用表示图像在像素点处的纹理值,表示图像的纹理谱直方图,则有:
其中,分别为粮虫图像高度和宽度。
本发明中局部二值模式纹理模式简单的通过粮虫邻域像素与中心像素灰度的比较得到,由于粮虫纹理谱的局域特性,粮虫纹理谱图像也具有粮虫原图的视觉特性。
6、分类识别
随机森林分类器按照生成分类树的规则生成多棵分类树,能很好地解决多类分类问题;其基本思想是将很多弱分类器集成为一个强分类器,其原理是通过重抽样术,生成多个树分类器,其中是独立同分布的随机向量,每棵树分类器进行投票并按得票结果而定;生成随机森林分类器的步骤是:
(1) 从粮虫局部二值模式特征原始训练数掘中生成个自助样本集,每个自助样本集是每棵分类树的全部训练数据。
(2) 每个粮虫局部二值模式特征自助样本集生长为单棵分类树;对于树的每个节点,从个特征中随机挑选个特征(),通常假设;按照节点不纯度最小的原则挑选,从个特征中选出一个特征进行分支生长,为使每个节点的不纯度达到最小,不进行剪枝操作。
(3) 根据生成的多棵树分类器对新的数据进行预测,分类结果按每棵树分类器的投票数量而定。
OOB数据用来预测分类正确率,每次预测结果进行汇总得到错误率的OOB估计,以测试样本来评估组合分类器的分类效果;随机森林分类器通过在每个节点处随机选择特征进行分支,最小化各棵分类树之问的相关性,提高分类精确性。
由于该模型训练过程中存在一组随机向量,在训练中就是要最大可能的离散化随机森林分类器从而减少泛化误差;在分类阶段,类标签是由所有决策树的分类结果综合而成,也即由每个分类树投票和概率平均得到;对于测试样例,预测类标签可得到:
其中为森林中决策树的数目,为示性函数,为树对类别的分类结果,是树的叶子节点数,是森林中棵决策树的权重。
本发明中采用投票方式决定粮虫类标签,即测试集遍历森林中的每棵树并记录其对每个粮虫目标的分类结果,这样得票高于预定阈值类标签即为目标粮虫种类标签。
实验结果
目前粮虫图像多用常规设备拍摄的粮虫标本图像。为接近真实粮储环境下的活体粮虫,实验中选取自然环境中培育的活体粮虫,并通过机器视觉图像处理研究开发平台MV-KB200B的多分辨率镜头拍摄作为实验图像来源。限于篇幅,给出6组粮虫图像来评估本发明提出的方法,每幅图像中包含3种类别共5只粮虫。
表1给出了本发明对粮虫种类视觉识别的性能比较,从实验结果来看,本发明的粮虫种类视觉识别效果好,不仅能准确检测粮虫数目还能准确识别粮虫种类;不论从识别的成功率还是时间的消耗上,对完善粮虫实时检测技术和实现粮食安全管理具有重要意义。
从实验图中可看出检测到5只粮虫,分为3种类型;实验结果显示该发明能顺利将粮虫从待检测图片中识别出来,识别效果较为明显,进而能看出多分辨率粮虫种类识别方法为完善粮食安全问题提供了一种可靠的方法。
表1
实验具体步骤:
1、实验中选取自然环境中培育的活体粮虫并通过机器视觉图像处理研究开发平台MV-KB200B的多分辨率镜头拍摄作为实验图像来源。限于篇幅,给出6组粮虫图像来评估本发明提出的方法,每幅图像中包含3种类别共5只粮虫。
2、利用OTSU方法对低()、中()、高()不同分辨率粮虫图像作二值化处理,有助于提高粮虫检测准确度;二值化后易使粮虫图像区域弱化甚至本来完整的粮虫断裂为两部分,例如头与背部连接处;构造适当的结构元素通过膨胀算法对粮虫图像区域扩大或桥接可使粮虫边界扩大,这样可将原本断裂开来或细化的同一物体桥接起来有助于凸显粮虫目标,方便后续的粮虫图像进一步识别处理。
3、利用Blob 算法中的连通域分析快速准确提取出粮虫图像中存在的连通区域,进而得到各区域的链码表和线性表并据此计算连通域的面积参数与周长参数,最终实现粮虫目标区域定位与计数。
4、多分辨率图像是多个不同焦距镜头基于同一场景采集,这样有助于依据分辨率的不同特征分别处理,从而达到增强对比度和抑制噪声干扰的目的,非常适合于粮虫这类弱小目标检测;为简化问题和着重关注算法对不同分辨率图像序列的重建性能, 假设拍摄对象为静态场景, 且拍摄相机与场景之间相对静止, 仅调节焦距获得一系列不同缩放尺度的粮虫图像。
5、根据变焦缩放变换矩阵和双线性插值法,将低分辨率粮虫图像中Blob块像素点映射到中、高分辨率粮虫图像中, 实现粮虫目标区域重定位;这样既能勾勒出粮虫的大致轮廓,又能呈现粮虫的细节部分。
6、局部二值模式特征对粮虫图像具有良好的局域特性;局部二值模式纹理模式通过粮虫邻域像素与中心像素灰度的比较得到,由于粮虫纹理谱的局域特性,粮虫纹理谱图像也具有粮虫原图的视觉特性。
7、随机森林分类器按照生成分类树的规则生成多棵分类树,能很好地解决多类分类问题。具体采用投票方式决定粮虫类标签,即测试集遍历森林中的每棵树并记录其对每个粮虫目标的分类结果,这样得票高于预定阈值类标签即为目标粮虫种类标签。因为生成每棵树的速度很快,所以随机森林分类器的分类速度很快,并且易于实现并行处理。

Claims (6)

1.一种多分辨率粮虫种类视觉识别方法,其特征在于:在多分辨率镜头基础上,对拍摄的低分辨率、中分辨率、高分辨率三幅粮虫图像分别运用OTSU算法对其进行二值化,然后利用Blob算法分别提取低、中、高三种分辨率的粮虫图像的连通区域,并在所述低分辨率粮虫图像上对疑似粮虫目标区域定位;在所述Blob算法提取的所述中分辨率粮虫图像连通区域的基础上,根据中、低分辨率图像放大率和低分辨率粮虫图像上疑似粮虫目标区域进行反定位,并计算其面积参数与周长参数,据此确定是否为粮虫区域;最后在Blob算法提取的高分辨率粮虫图像连通区域基础上,根据高、中分辨率图像放大率和已确定中分辨率粮虫区域进行反定位,然后采用局部二值模式粮虫纹理特征和随机森林分类器对粮虫实现识别。
2.根据权利要求1所述多分辨率粮虫种类视觉识别方法,其特征在于:为抑制复合干扰源下凸显粮虫目标来提高粮虫视觉检测效果,构造结构元素,同时使用水平方向和垂直方向的线性结构元素,对二值化的所述低、中、高三种分辨率粮虫图像进行膨胀运算,实现粮虫目标增强进而提高粮虫检测识别率。
3.根据权利要求1所述多分辨率粮虫种类视觉识别方法,其特征在于:根据中、低分辨率图像放大率和低分辨率粮虫图像上疑似粮虫目标区域进行反定位,并计算其面积参数与周长参数的方法为:
a、采用面积参数度量目标区域大小,对于斑块区域定义为该区域中像素点的数目,即:
式中:为像素坐标值,为该点的像素值;
b、采用周长参数度量目标区域特征,对于斑块区域定义为斑块区域边界上像素点的个数;
即:
式中:为像素坐标值,为该点的像素值。
4.根据权利要求1所述多分辨率粮虫种类视觉识别方法,其特征在于:采用局部二值模式粮虫纹理特征和随机森林分类器对粮虫实现识别的方法为:
利用像素点邻域内灰度变化来表示高分辨率粮虫图像像素点的纹理模式;变换公式如下:
其中表示图像在像素点的邻域内的灰度变化,取值为:
表示图像在该像素点处的二值纹理模式,代表邻域内像素点的灰度值相对于中心点的变化情况;为变换系数,构成变换系数矩阵
为便于表示和计算,将邻域的纹理基元映射为之间的值,用其值代替原邻域中间像素的像素值;粮虫纹理模式的值作为像素值即得到相应粮虫纹理谱图像;统计变换后图像各像素点的纹理值的频数,即得到粮虫图像的纹理谱直方图;
然后引用随机森林分类器按照生成分类树的规则生成多棵分类树,通过重抽样术生成多个树分类器,其中是独立同分布的随机向量,每棵树分类器进行投票并按得票结果而定;
每次抽样生成自助样本集,全体样本中不在自助样本中的剩余样本称为OOB(Out-Of-Bag)数据,OOB数据用来预测分类正确率,每次预测结果进行汇总得到错误率的OOB估计,以测试样本进行评估组合分类器的分类效果;利用随机森林分类器,通过在每个节点处随机选择局部二值模式粮虫纹理特征进行分支,最小化各分类树之问的相关性进而提高分类精确性;
在分类阶段,类标签是由所有决策树的分类结果综合而成,也即由每个分类树投票和概率平均得到;对于测试样例,预测类标签可以得到:
其中为森林中决策树的数目,为示性函数,为树对类别的分类结果,是树的叶子节点数,是森林中棵决策树的权重;
采用投票方式决定粮虫类标签,即测试集遍历森林中的每棵树并记录其对每个粮虫目标的分类结果,得票高于预定阈值类标签即为目标粮虫种类标签。
5.根据权利要求1所述多分辨率粮虫种类视觉识别方法,其特征在于:拍摄的所述低、中、高三种分辨率的粮虫图像,是由多个不同焦距镜头基于同一场景采集得到;选用低、中、高分辨率粮虫图像并对其进行重建方法为:
首先以低分辨率粮虫图像中的疑似粮虫区域作为基准图像,并以低分辨率粮虫图像的倍建立中分辨率粮虫图像, 即: 若低分辨率粮虫图像的分辨率为,则重定位中分辨率粮虫图像的分辨率为的取值由镜头焦距获取;将中分辨率粮虫图像的像素值依照倍采样直接填充到高分辨率粮虫图像上,并以中分辨率粮虫图像的倍建立高分辨率粮虫图像,即:若中分辨率粮虫图像的分辨率为, 则重建高分辨率粮虫图像的分辨率为,的取值由镜头焦距获取。
6.根据权利要求5所述多分辨率粮虫种类视觉识别方法,其特征在于:根据变焦缩放变换矩阵,所述重定位后的高一级分辨率图像中的每一个像素点与低一级分辨率图像中的相应像素点有如下约束形式:
其中:分别是轴和轴上的比例系数,考虑到像素大小为标准方形,所以;由于不同分辨率粮虫图像的焦距已知,低分辨率粮虫图像与中分辨率粮虫图像之间缩放倍数为,即;中分辨率粮虫图像与高分辨率粮虫图像之间的缩放倍数为,即
利用双线性插值法将低分辨率粮虫图像中每个Blob块像素映射到中、高分辨率粮虫图像中,然后计算中、高分辨率粮虫图像中每个像素点的灰度值, 实现粮虫目标区域重定位。
CN201810022600.6A 2018-01-10 2018-01-10 多分辨率粮虫种类视觉识别方法 Active CN107992863B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810022600.6A CN107992863B (zh) 2018-01-10 2018-01-10 多分辨率粮虫种类视觉识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810022600.6A CN107992863B (zh) 2018-01-10 2018-01-10 多分辨率粮虫种类视觉识别方法

Publications (2)

Publication Number Publication Date
CN107992863A true CN107992863A (zh) 2018-05-04
CN107992863B CN107992863B (zh) 2021-12-24

Family

ID=62041011

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810022600.6A Active CN107992863B (zh) 2018-01-10 2018-01-10 多分辨率粮虫种类视觉识别方法

Country Status (1)

Country Link
CN (1) CN107992863B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110222688A (zh) * 2019-06-10 2019-09-10 重庆邮电大学 一种基于多层次相关滤波的仪表定位方法
CN110348302A (zh) * 2019-06-05 2019-10-18 广州瑞丰生物科技有限公司 一种图像识别系统及图像识别装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2010206078A1 (en) * 2010-03-10 2011-09-29 Total Manufacturing Co. System and method for detection of insect infestation
CN103034982A (zh) * 2012-12-19 2013-04-10 南京大学 一种基于变焦视频序列的图像超分辨率重建方法
CN106254722A (zh) * 2016-07-15 2016-12-21 北京邮电大学 一种视频超分辨率重建方法和装置
CN106815819A (zh) * 2017-01-24 2017-06-09 河南工业大学 多策略粮虫视觉检测方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2010206078A1 (en) * 2010-03-10 2011-09-29 Total Manufacturing Co. System and method for detection of insect infestation
CN103034982A (zh) * 2012-12-19 2013-04-10 南京大学 一种基于变焦视频序列的图像超分辨率重建方法
CN106254722A (zh) * 2016-07-15 2016-12-21 北京邮电大学 一种视频超分辨率重建方法和装置
CN106815819A (zh) * 2017-01-24 2017-06-09 河南工业大学 多策略粮虫视觉检测方法

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
DAI TING ET AL: "On The Intelligent Detection Of Insects In Stored Grain", 《2011 INTERNATIONAL CONFERENCE ON ELECTRONIC&MECHANICAL ENGINEERING AND INFORMATION TECHNOLOGY》 *
王贵财: "粮虫视觉检测技术的现状与展望", 《中国粮油学报》 *
罗鸣威等: "变焦序列图像超分辨率重建算法研究", 《南京大学学报(自然科学)》 *
胡玉霞: "基于多分辨率分析的储粮害虫图像预处理研究", 《农机化研究》 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110348302A (zh) * 2019-06-05 2019-10-18 广州瑞丰生物科技有限公司 一种图像识别系统及图像识别装置
CN110222688A (zh) * 2019-06-10 2019-09-10 重庆邮电大学 一种基于多层次相关滤波的仪表定位方法

Also Published As

Publication number Publication date
CN107992863B (zh) 2021-12-24

Similar Documents

Publication Publication Date Title
US10984532B2 (en) Joint deep learning for land cover and land use classification
EP3614308B1 (en) Joint deep learning for land cover and land use classification
Huang et al. A new building extraction postprocessing framework for high-spatial-resolution remote-sensing imagery
Ke et al. A review of methods for automatic individual tree-crown detection and delineation from passive remote sensing
CN103049763B (zh) 一种基于上下文约束的目标识别方法
Topouzelis et al. Detection and discrimination between oil spills and look-alike phenomena through neural networks
Tang et al. Automatic plankton image recognition
Li et al. Automatic pavement crack recognition based on BP neural network
CN107730515B (zh) 基于区域增长和眼动模型的全景图像显著性检测方法
CN108346159A (zh) 一种基于跟踪-学习-检测的视觉目标跟踪方法
CN109961049A (zh) 一种复杂场景下香烟品牌识别方法
CN108288271A (zh) 基于三维残差网络的图像检测系统及方法
CN106650812B (zh) 一种卫星遥感影像的城市水体提取方法
CN108898065A (zh) 候选区快速筛选与尺度自适应的深度网络舰船目标检测方法
CN108090906A (zh) 一种基于区域提名的宫颈图像处理方法及装置
CN106557740B (zh) 一种遥感图像中油库目标的识别方法
CN108664838A (zh) 基于改进rpn深度网络的端到端的监控场景行人检测方法
CN105046259B (zh) 基于多特征融合的日冕物质抛射检测方法
Patil et al. Enhanced radial basis function neural network for tomato plant disease leaf image segmentation
Nurmasari et al. Oil palm plantation detection in Indonesia using Sentinel-2 and Landsat-8 optical satellite imagery (case study: Rokan Hulu regency, Riau Province)
CN112069985A (zh) 基于深度学习的高分辨率大田图像稻穗检测与计数方法
Ngugi et al. A new approach to learning and recognizing leaf diseases from individual lesions using convolutional neural networks
CN106295498A (zh) 光学遥感图像目标区域检测装置与方法
CN108734200A (zh) 基于bing特征的人体目标视觉检测方法和装置
Zhang et al. Citrus canker detection based on leaf images analysis

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant