CN103077529B - 基于图像扫描的植物叶片特征分析系统 - Google Patents

基于图像扫描的植物叶片特征分析系统 Download PDF

Info

Publication number
CN103077529B
CN103077529B CN201310061389.6A CN201310061389A CN103077529B CN 103077529 B CN103077529 B CN 103077529B CN 201310061389 A CN201310061389 A CN 201310061389A CN 103077529 B CN103077529 B CN 103077529B
Authority
CN
China
Prior art keywords
image
point
leaf
value
blade
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201310061389.6A
Other languages
English (en)
Other versions
CN103077529A (zh
Inventor
刘贵松
屈鸿
邱钊
蔡庆
解修蕊
陈文宇
王晓彬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
University of Electronic Science and Technology of China
Original Assignee
University of Electronic Science and Technology of China
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by University of Electronic Science and Technology of China filed Critical University of Electronic Science and Technology of China
Priority to CN201310061389.6A priority Critical patent/CN103077529B/zh
Publication of CN103077529A publication Critical patent/CN103077529A/zh
Application granted granted Critical
Publication of CN103077529B publication Critical patent/CN103077529B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

本发明公开了一种基于图像扫描的植物叶片特征分析系统,其包括以下步骤:(1)、图像预处理,(2)、叶子图像特征分析计算,(3)、叶片模板匹配,(4)、颜色聚类,(5)、病斑分析。本发明具有很高的自动化水平,减少了分析过程中的人工操作,提高了自动化的程度,同时免除了人工操作引入的误差;相较传统的canny算子、罗盘算子,有更快地执行效率;具有较高的精确性。能够对残叶进行自动补全操作,并且可以自动计算残叶被补全的面积。

Description

基于图像扫描的植物叶片特征分析系统
技术领域
本发明涉及形态学图像处理领域和植物学领域,具体涉及一种采用数字形态学技术来分割处理叶片图像的检测方法、提取图像的轮廓特征值、对叶片进行模板匹配、颜色聚类和病斑分析。
背景技术
叶面积作为标定植物生长发育、长势、遗传特性等生理生化反应过程的主要参数,广泛应用于农业科研服务和生产中。在农业气象试验、研究和常规业务观测中,叶面积是衡量作物长势、生长动态的主要指标,可为农业气象情报服务提供有效、科学、适用的数据。传统测量叶面积的方法主要有方格法、称重法、求积仪法、光电法以及调整系数法等等,这些方法在过去的研究中发挥过巨大的作用。但这些方法都分别存在着测定手续繁锁、工作量大、受仪器条件限制、误差大等缺点。专业性的叶面积仪虽然克服了部分确点,但是价格昂贵。
随着现代科技的发展,这些问题都可能借助于计算机图像处理和分析技术来解决。通过将对应植物数字图像输入计算机,利用图像处理技术、模式识别技术且辅助以软件系统可以实现对植物的快速识别。
1985年,Clarke等在用叶片数字图像测量叶面积方面进行了研究,将叶片从植株上分离后,再对其进行拍照并将照片输入计算机,通过图像处理进行测量。1991年,FranzE等人将曲率用于完全可见和部份可见的叶片的边界描述。对于完全可见的叶片,将实测的曲率函数和模型相匹配即可对叶片进行辨识;对于部份可见的叶片,利用傅立叶-梅林(Fourier-Mellin)相关性变换对曲率函数进行重建后再与模型进行匹配。当叶片与茎杆的旋转角度超过30°时,模型要进行相应角度的旋转。2001年,纪寿文等利用图像处理测得的投影面积、叶长、叶宽等形状描述参数,对苗期的玉米和杂草进行识别,确定杂草的分布密度,为精确喷洒除草剂提高依据。但是,简单地把水平扫描的最大叶片长度定义为最大叶长,把垂直扫描的最大叶片宽度定义为最大叶宽,没有考虑图像中叶片的位置取向,误差较大。2008年,贺鹏将形状特征和纹理特征结合,然后以概率神经网络为分类器,实现对宽叶树种类的识别。
目前叶片特征检测的精度不够高,不能实现叶子各个部分的自动分割,对病斑检测的效果不够理想。
发明内容
本发明所要解决的技术问题是如何寻找一种能精确分割叶片图像的方法,同时要解决叶柄和叶片智能分割的问题,克服现有叶片分割方法中所存在的缺陷。
本发明的技术方案为:基于扫描图像的植物叶片特征分析系统,其特征在于,其包括以下步骤:
(1)、图像预处理
将从扫描仪获取的叶子图像进行图像预处理,去除图像中存在的杂点;
(2)、叶子图像特征分析计算
①采用大律法对预处理过后的图像进行阈值分割,得到一个二值图像;
②采用形态学滤波器对得到的二值图像进行处理,实现叶片和叶柄的自动分割;
③将形态学滤波后得到的图像进行形态学梯度检测,得到叶片和叶柄的轮廓;再根据得到的轮廓计算叶片和叶柄的周长与面积,对得到的轮廓进行增长方向检测,得出叶子的锯齿数目,并将得到的参数保存到数据表中;
(3)、叶片模板匹配
①将模板图像和预处理过的残叶图片转化为灰度图像;
②采用SIFT算法对模板图片和残叶图片进行关键点检测;
③根据关键点计算图像的特征向量;
④根据图像特征向量进行匹配,如果达到设定的匹配值,则认为匹配成功,绘出匹配轮廓,对残叶图片进行补全;
(4)、颜色聚类
①对图片进行预处理,去除杂点;
②将图片通过矩阵转换到YUV颜色空间;
③分离健康叶色,对非健康的叶子颜色做聚类,将健康的叶子的颜色从叶子从分离出去;
④使用k均值方法对非健康叶片颜色在YUV颜色空间进行聚类;
(5)、病斑分析
①对图片进行预处理,去除杂点;
②将图片通过矩阵转换到YUV颜色空间;
③分离健康叶色,将健康的叶子的颜色从叶子从分离出去;
④运用边缘检测的方法根据用户指定的病斑的大致区域提取的病斑的边缘;
⑤对病斑边缘进行调整,使之更加精细的覆盖病斑;
⑥计算病斑面积并得出计算结果。
进一步地,步骤(1)中所述的图像预处理的方法为:采用中值滤波,将数字序列中一点的值用该点的一个邻域中各点值的均值代替,让周围的像素值接近真实值,从而消除孤立的噪声点;中值滤波去除图像的噪声方法为:遍历图像,求每个像素点和与其八连通像素点的平均灰度值,将该像素点的灰度值设为平均灰度值。
进一步地,步骤(2)中大律法对预处理过后的图像进行阈值分割的步骤如下:
Step1:遍历图像,求取图像最大最小灰度值min,max;
Step2:让阈值t依次取[min,max]之间的值,取t时,前景点数占图像比例为w0,平均灰度为u0,背景点数占图像比例为w1,平均灰度为u1,图像的总平均灰度为:u=w0*u0+w1*u1;求取T,使得当t=T时,使g=w0*(u0-u)2+w1*(u1-u)2取得最大值;
Step3:用阈值T对图像进行分割,当图像的灰度值大于T,将该像素灰度值设为255,若该像素点的灰度值小于T,将该像素点的灰度值设为0,完成对图像的阈值分割。
进一步地,步骤(2)中所述的采用形态学滤波器对得到的二值图像进行处理,实现叶片和叶柄的自动分割的方法为:采用同一个核来对图像先进行腐蚀后进行膨胀,在实现叶子分割的前提下保证图像特征不丢失,具体包括以下步骤:A、将输入的图像进行二值化操作,得到二值化图像;B、利用基于最小二乘法的椭圆拟合算法寻找二值图像的椭圆形包络,找到椭圆包络的短轴w;C、取短轴的一半作为图像形态学操作的结构元素s的边长,以该结构元素对图像进行腐蚀,这样叶子的叶柄就从图像中去除掉了;接下来以结构元素对图像进行膨胀,这样就得到了一个不含叶柄的叶片;D、将初始的二值图像与腐蚀膨胀后的图像做相减,找到最大的那个块,就得到了叶柄图像p1;E、将最初的二值图像与叶柄图像相减,得到叶片图像p2;这样就完成了叶子叶片和叶柄的自动分割;
叶片阈值分割:对叶子图片进行阈值分割时采用大律法,具体步骤是:A、对图像进行遍历找到图像的最小灰度值w,记t=w为前景与背景的分割阈值;B、再次遍历图像,前景点数占图像比例为w0,平均灰度为u0,背景点数占图像比例为w1,平均灰度为u1,图像的总平均灰度为:u=w0*u0+w1*u1;C、从最小灰度值到最大灰度值遍历t,当t使得值g=w0*(u0-u)2+w1*(u1-u)2最大时t即为分割的最佳阈值;D、以t为阈值对图像进行分割,灰度值大于t的分为前景,值为1,灰度值小于t的为背景,值为0;
叶子边缘检测:对二值图像进行边缘检测,我们采用的是形态学腐蚀膨胀的方法;具体步骤如下:A、构建一个3*3的结构元素,用于以后对图像的形态学操作;B、对二值图像进行腐蚀操作,达到去除图像的边缘部分的效果;C、用原二值图像减去腐蚀后的图像,得到图像的轮廓;D、提取图像轮廓,将其保存在一个数组队列中。
进一步地,步骤(2)中采用形态学滤波器对得到的二值图像进行处理,实现叶片和叶柄的自动分割的具体方法为:
Step1:使用最小二乘法对叶子二值图像进行椭圆拟合,拟合椭圆求取过程为:构建一个椭圆函数,Ax2+Bxy+Cy2+Dx+Ey+F=0,计算二值图像边缘轮廓上的点到椭圆的距离,使轮廓上的所有点到椭圆的距离和最小;即求使函数f(A,B,C,D,E.F)=Σ(Ax2+Bxy+Cy2+Dx+Ey+F)2取得最小值的参数值,通过求导数
,得到所求椭圆,找到该图像的椭圆包络;
Step2:以该椭圆短半轴为腐蚀结构元素的边长对二值图像进行腐蚀操作,然后用该结构元素对图像进行膨胀操作,使图像未被完全腐蚀的部分恢复为原来的图像,得到图像Img2;
Step3:原始的二值图像与图像Img2做差值运算,得到图像Img3,Img3即为叶柄图像;
Step4:原始的二值图像与叶柄图像Img3做差值运算,得到图像Img4,Img4即为叶片图像。
进一步地,步骤(2)中所述的将形态学滤波后得到的图像进行形态学梯度检测,得到叶片和叶柄的轮廓的方法为:采用了一种针对二值图像的边缘检测方法,该方法的具体检测步骤如下:
Step1:构建一个3*3的结构元素S,作为以后腐蚀图像的核;
Step2:用结构元素来腐蚀二值图像,得到图像Img5,该图像即为损失边缘的二值图像;
Step3:用腐蚀前的二值图像与腐蚀后的图像Img5做差值运算,得到图像Img6,Img6即为图像的轮廓。
进一步地,步骤(3)中所述的采用SIFT算法对模板图片和残叶图片进行关键点检测的方法为:尺度空间极值检测,搜索所有尺度上的图像位置,通过高斯微分函数来识别潜在的对于尺度和旋转不变的兴趣点;关键点的定位,在每个候选的位置上,通过一个拟合精细的模型来确定位置和尺度,关键点的选择依据于它们的稳定程度;方向的确定,基于图像局部的梯度方向,分配给每个关键点位置一个或多个方向,所有后面的对图像数据的操作都相对于关键点的方向、尺度和位置进行变换,从而提供对于这些变换的不变性;关键点描述,在每个关键点周围的邻域内,在选定的尺度上测量图像局部的梯度,这些梯度被变换成一种表示,这种表示允许比较大的局部形状的变形和光照变化,这样就找到了图像的关键点。
进一步地,步骤(3)中所述的采用SIFT算法对模板图片和残叶图片进行关键点检测的具体步骤为:
Step1:空间尺度上进行极值检测,首先对图像进行高斯平滑,构建5层5组的高斯金字塔;构建过程如下:首先对原图像进行高斯平滑,平滑函数如下:
,高斯函数如下:的取值为
1.6,然后将乘以一个比例系数k作为新的平滑因子来平滑第一组第二层,得到第一组第三层,重复5次,得到5层,他们分别对应的平滑参数为0,,k,k2 ,k3 ,将最后一幅图像做比例因子为2的降采样,得到第二组的第一层,然后按照第一组的操作依次得到第二组第二层、第三层,直到第五层,重复上面的操作创建第三层、第四层、第五层,这样就得到了一个高斯金字塔,接下来创建DoG金字塔,DoG金字塔是由高斯金字塔构造出来的,他的第一组第一层是由高斯金字塔的第一组第二层减第一组第一层,他的第一组第二层是由高斯金字塔的第一组第三层减第一组第二层得到,每组都这样就生成了一个DoG金字塔,用函数表示为:,得到DoG金字塔后,寻找3*3*3邻阈的极值点,这样就找到了空间尺度上的极值点;
Step2:关键点精确定位,通过拟和三维二次函数以精确确定关键点的位置和尺度,同时去除低对比度的关键点和不稳定的边缘响应点,以增强匹配稳定性、提高抗噪声能力,空间尺度函数泰勒展开式如下:
(1)
(2)
(3)
对(1)求导,并令其为0,得到精确地位置(2),在已经检测到的特征点中,要去掉低对比度的特征点和不稳定的边缘响应点,去掉低对比度的点:把公式(2)代入到公式(1),可得公式(3),如果(3)的值大于0.03,该特征点就保存下来,否则丢弃;
Step3:关键点方向匹配,利用关键点邻域像素的梯度方向分布特性为每个关键点指定方向参数,使算子具备旋转不变性,梯度大小和方向计算如下:
将0~360度分到36个区间中,每个区间的高度计算如下:Σm(xi,yi)*g(x0,y0,1.5),其中为当前的尺度,主方向定义为拥有最高高度的那个区间,其他区间高度为最大高度0.8倍以上的区间方向可以认为是该特征点的辅方向,这样增加了模板匹配的鲁棒性;
Step4:当叶子模板图像和残叶图像的SIFT特征向量都生成后,采用关键点特征向量的欧氏距离作为两幅图像中关键点的相似性判定度量,取残叶图像中的某个关键点,找出其与模板图像中欧氏距离最近的前两个关键点,在这个两个关键点中,如果最近的距离除以次近的距离小于0.5,则接受这一对匹配点,如果匹配点数目大于10,则判断叶子模板与残叶匹配。
进一步地,步骤(4)中所述的颜色聚类的具体方法为:使用YUV空间,其中Y分量是亮度,UV分量是色差,首先选取k(k是聚类数目,由用户指定)个中心点,然后计算每个节点到各个中心点的聚类并将其归到距离(距离使用改点周围3*3的平均值与聚类中心在UV分量上的欧式距离)最小的那个中心点所代表的类上,之后再计算每个点到各自所属的类的中心点的聚类的平均值M,更新中心点:选择各个类的点的平均值作为该类新的中心点,重新计算各个点的归属(根据他们到新的聚类中心点的距离),重新计算M,当新旧M之间变化小到一定程度时即表示聚类结束。
进一步地,步骤(5)中所述的病斑分析的方法为:病斑分析在YUV颜色空间上进行,首先将健康叶色的颜色分离出去,分离方法是对于每一个点,取其周围3*3的平均,然后计算其与用户选择的一个或者多个健康叶片颜色的点的差距(用UV分量的欧式距离表示),当其与任意一个健康颜色的点的差距小到一定的阈值(由用户指定)时即表明该点是健康颜色,否则不是健康颜色,然后根据用户选择的病斑的大致范围根据上文提到的边缘检测的方法检测出病斑的边缘,之后再对该边缘进行优化,最后计算病斑面积,导出计算结果。
本发明有如下功能特点
①具有很高的自动化水平,可以自动分割叶柄和叶片,相较传统的方法,减少了人工操作的过程,提高了自动化的程度,同时免除了人工操作引入的误差;
②直接对二值图像进行轮廓提取,将数字形态学的腐蚀操作方法应用到图像轮廓提取中来,相较传统的canny算子、罗盘算子,有更快地执行效率;
③具有较高的精确性。系统中对图像处理的操作,都尽量保持较高的精度。采用数字形态学来处理图像,达到图像变化过程中尽量保持图像的细节的目的;
④能够对残叶进行自动补全操作,并且可以自动计算残叶被补全的面积;
⑤使用更加符合人眼对颜色感知的YUV颜色空间对病斑颜色进行聚类,相对于传统的RGB等颜色空间上的聚类可得到更好的效果。
附图说明
图1是本发明的工作流程图;
图2是叶子图像特征提取流程图;
图3是叶子模板匹配(残叶补全)流程图;
图4是叶子颜色聚类流程图;
图5是病斑分析流程图;
图6是叶子叶柄和叶片自动分割算法流程图;
图7是寻找叶子边缘算法流程图;
具体实施方式
下面结合附图以及实施例对本发明作进一步的说明。如图1所示,矩形框代表处理的步骤,实线代表数据处理流程。
基于扫描图像的植物叶片特征分析系统,其包括以下步骤:
(1)、图像预处理
将从扫描仪获取的叶子图像进行图像预处理,去除图像中存在的杂点;
(2)、叶子图像特征分析计算
①采用大律法对预处理过后的图像进行阈值分割,得到一个二值图像;
②采用形态学滤波器对得到的二值图像进行处理,实现叶片和叶柄的自动分割;
③将形态学滤波后得到的图像进行形态学梯度检测,得到叶片和叶柄的轮廓;再根据得到的轮廓计算叶片和叶柄的周长与面积,对得到的轮廓进行增长方向检测,得出叶子的锯齿数目,并将得到的参数保存到数据表中;
(3)、叶片模板匹配
①将模板图像和预处理过的残叶图片转化为灰度图像;
②采用SIFT算法对模板图片和残叶图片进行关键点检测;
③根据关键点计算图像的特征向量;
④根据图像特征向量进行匹配,如果达到设定的匹配值,则认为匹配成功,绘出匹配轮廓,对残叶图片进行补全;
(4)、颜色聚类
①对图片进行预处理,去除杂点;
②将图片通过矩阵转换到YUV颜色空间;
③分离健康叶色,对非健康的叶子颜色做聚类,将健康的叶子的颜色从叶子从分离出去;
④使用k均值方法对非健康叶片颜色在YUV颜色空间进行聚类;
(5)、病斑分析
①对图片进行预处理,去除杂点;
②将图片通过矩阵转换到YUV颜色空间;
③分离健康叶色,将健康的叶子的颜色从叶子从分离出去;
④运用边缘检测的方法根据用户指定的病斑的大致区域提取的病斑的边缘;
⑤对病斑边缘进行调整,使之更加精细的覆盖病斑;
⑥计算病斑面积并得出计算结果。
图像预处理采用中值滤波,其原理是将数字序列中一点的值用该点的一个邻域中各点值的均值代替,让周围的像素值接近的真实值,从而消除孤立的噪声点。中值滤波去除图像的噪声方法为:遍历图像,求每个像素点和与其八连通像素点的平均灰度值,将该像素点的灰度值设为平均灰度值。然后采用大律法对图像进行阈值分割。
大律法分割叶片图像步骤如下:
Step1:遍历图像,求取图像最大最小灰度值min,max;
Step2:让阈值t依次取[min,max]之间的值,取t时,前景点数占图像比例为w0,平均灰度为u0,背景点数占图像比例为w1,平均灰度为u1,图像的总平均灰度为:u=w0*u0+w1*u1;求取T,使得当t=T时,使g=w0*(u0-u)2+w1*(u1-u)2取得最大值;
Step3:用阈值T对图像进行分割,当图像的灰度值大于T,将该像素灰度值设为255,若该像素点的灰度值小于T,将该像素点的灰度值设为0,完成对图像的阈值分割。
阈值分割之后,对叶子的二值图像进行叶柄和叶片的自动分割。对叶子进行自动分割的算法见下图6。
叶片和叶柄自动分割的步骤如下所示:
Step1:使用最小二乘法对叶子二值图像进行椭圆拟合,拟合椭圆求取过程为:构建一个椭圆函数,Ax2+Bxy+Cy2+Dx+Ey+F=0,计算二值图像边缘轮廓上的点到椭圆的距离,使轮廓上的所有点到椭圆的距离和最小。即求使函数f(A,B,C,D,E.F)=Σ(Ax2+Bxy+Cy2+Dx+Ey+F)2取得最小值的参数值,通过求导数
,得到所求椭圆,找到该图像的椭圆包络。
Step2:以该椭圆短半轴为腐蚀结构元素的边长对二值图像进行腐蚀操作(该结构元素可以确保把叶子的叶柄部分完全腐蚀掉)。然后用该结构元素对图像进行膨胀操作,使图像未被完全腐蚀的部分恢复为原来的图像,得到图像Img2。
Step3:原始的二值图像与图像Img2做差值运算,得到图像Img3。Img3即为叶柄图像。
Step4:原始的二值图像与叶柄图像Img3做差值运算,得到图像Img4,Img4即为叶片图像。
要对叶子的各个部分做特征分析与提取,关键是要找到其轮廓。这里我们没有采用传统的Canny算子或算子来查找轮廓,为了提高效率,我们采用了一种针对二值图像的边缘检测方法,该方法的具体检测步骤如下:
Step1:构建一个3*3的结构元素S,作为以后腐蚀图像的核。
Step2:用结构元素来腐蚀二值图像,得到图像Img5,该图像即为损失边缘的二值图像。
Step3:用腐蚀前的二值图像与腐蚀后的图像Img5做差值运算,得到图像Img6。Img6即为图像的轮廓。
应用SIFT算法寻找叶片图像特征点,根据特征向量进行模板匹配的具体步骤如下:
Step1:空间尺度上进行极值检测。首先对图像进行高斯平滑,构建5层5组的高斯金字塔;构建过程如下:首先对原图像进行高斯平滑,平滑函数如下:
,高斯函数如下:的取值为
1.6。然后将乘以一个比例系数k作为新的平滑因子来平滑第一组第二层,得到第一组第三层,重复5次,得到5层。他们分别对应的平滑参数为0,,k,k2 ,k3 。将最后一幅图像做比例因子为2的降采样,得到第二组的第一层。然后按照第一组的操作依次得到第二组第二层、第三层,直到第五层。重复上面的操作创建第三层、第四层、第五层,这样就得到了一个高斯金字塔。接下来创建DoG金字塔。DoG金字塔是由高斯金字塔构造出来的,他的第一组第一层是由高斯金字塔的第一组第二层减第一组第一层,他的第一组第二层是由高斯金字塔的第一组第三层减第一组第二层得到。每组都这样就生成了一个DoG金字塔。用函数表示为:,得到DoG金字塔后,寻找3*3*3邻阈的极值点,这样就找到了空间尺度上的极值点。
Step2:关键点精确定位。通过拟和三维二次函数以精确确定关键点的位置和尺度,同时去除低对比度的关键点和不稳定的边缘响应点,以增强匹配稳定性、提高抗噪声能力。空间尺度函数泰勒展开式如下:
(1)
(2)
(3)
对(1)求导,并令其为0,得到精确地位置(2)。在已经检测到的特征点中,要去掉低对比度的特征点和不稳定的边缘响应点,去掉低对比度的点:把公式(2)代入到公式(1),可得公式(3)。如果(3)的值大于0.03,该特征点就保存下来,否则丢弃。
Step3:关键点方向匹配。利用关键点邻域像素的梯度方向分布特性为每个关键点指定方向参数,使算子具备旋转不变性。梯度大小和方向计算如下:
将0~360度分到36个区间中,每个区间的高度计算如下:Σm(xi,yi)*g(x0,y0,1.5),其中为当前的尺度。主方向定义为拥有最高高度的那个区间,其他区间高度为最大高度0.8倍以上的区间方向可以认为是该特征点的辅方向,这样增加了模板匹配的鲁棒性。
Step4:当叶子模板图像和残叶图像的SIFT特征向量都生成后,采用关键点特征向量的欧氏距离作为两幅图像中关键点的相似性判定度量。取残叶图像中的某个关键点,找出其与模板图像中欧氏距离最近的前两个关键点。在这个两个关键点中,如果最近的距离除以次近的距离小于0.5,则接受这一对匹配点。如果匹配点数目大于10,则判断叶子模板与残叶匹配。

Claims (8)

1.基于扫描图像的植物叶片特征的分析方法,其特征在于,其包括以下步骤:
(1)、图像预处理
将从扫描仪获取的叶片图像进行图像预处理,去除图像中存在的杂点;
具体方法为:采用中值滤波,将数字序列中一点的值用该点的一个邻域中各点值的均值代替,从而消除孤立的噪声点;中值滤波去除图像的噪声方法为:遍历图像,求每个像素点和与其八连通像素点的平均灰度值,将该像素点的灰度值设为平均灰度值;
(2)、叶片图像特征分析计算
①采用大律法对预处理过后的图像进行阈值分割,得到一个二值图像;
具体方法为:A、对图像进行遍历找到图像的最小灰度值w,记t=w为前景与背景的分割阈值;B、再次遍历图像,前景点数占图像比例为w0,平均灰度为u0,背景点数占图像比例为w1,平均灰度为u1,图像的总平均灰度为:u=w0*u0+w1*u1;C、从最小灰度值到最大灰度值遍历t,当t使得值g=w0*(u0-u)2+w1*(u1-u)2最大时t即为分割的最佳阈值;D、以t为阈值对图像进行分割,灰度值大于t的分为前景,灰度值为255,灰度值小于t的为背景,值为0;
②采用形态学滤波器对得到的二值图像进行处理,实现叶片和叶柄的自动分割;
具体方法为:采用同一个核来对图像先进行腐蚀后进行膨胀,在实现叶片分割的前提下保证图像特征不丢失,具体包括以下步骤:A、将输入的图像进行二值化操作,得到二值图像;B、利用基于最小二乘法的椭圆拟合算法寻找二值图像的椭圆形包络,找到椭圆包络的短轴w;C、取短轴的一半作为图像形态学操作的结构元素s的边长,以该结构元素对图像进行腐蚀,这样叶片的叶柄就从图像中去除掉了;接下来以结构元素对图像进行膨胀,这样就得到了一个不含叶柄的叶片;D、将初始的二值图像与腐蚀膨胀后的图像做相减,找到最大的那个块,就得到了叶柄图像Img3;E、将最初的二值图像与叶柄图像相减,得到叶片图像Img4;这样就完成了叶片图像的叶片和叶柄的自动分割;
③将形态学滤波后得到的图像进行形态学梯度检测,得到叶片和叶柄的轮廓;再根据得到的轮廓计算叶片和叶柄的周长与面积,对得到的轮廓进行增长方向检测,得出叶片的锯齿数目,并将得到的参数保存到数据表中;
(3)、叶片模板匹配
①将模板图像和经步骤(1)图像预处理后的形态残损的叶片图像转化为灰度图像;
②采用SIFT算法对模板图像和形态残损的叶片图像进行关键点检测;
③根据关键点计算图像的特征向量;
④根据图像特征向量进行匹配,如果达到设定的匹配值,则认为匹配成功,绘出匹配轮廓,对残叶图像进行补全;
(4)、颜色聚类
①将步骤(1)图像预处理后的非健康状态的叶片图像通过矩阵转换到YUV颜色空间;
②分离健康叶色,对非健康的叶片颜色做聚类,将健康的叶片的颜色从叶片中分离出去;
③使用k均值方法对非健康叶片颜色在YUV颜色空间进行聚类;
(5)、病斑分析
①将步骤(1)图像预处理后的非健康状态的叶片图像通过矩阵转换到YUV颜色空间;
②分离健康叶色,将健康的叶片的颜色从叶片中分离出去;
③运用边缘检测的方法根据用户指定的病斑的大致区域提取的病斑的边缘;
④对病斑边缘进行调整,使之更加精细的覆盖病斑;
⑤计算病斑面积并得出计算结果。
2.根据权利要求1所述的基于扫描图像的植物叶片特征的分析方法,其特征在于,步骤(2)中大律法对预处理过后的图像进行阈值分割的步骤如下:
Step1:遍历图像,求取图像最大灰度值max和最小灰度值min;
Step2:让阈值t依次取[min,max]之间的值,取t时,前景点数占图像比例为w0,平均灰度为u0,背景点数占图像比例为w1,平均灰度为u1,图像的总平均灰度为:u=w0*u0+w1*u1;求取T,使得当t=T时,使g=w0*(u0-u)2+w1*(u1-u)2取得最大值;
Step3:用阈值T对图像进行分割,当图像的灰度值大于T时,将该像素灰度值设为255,若该像素点的灰度值小于T,将该像素点的灰度值设为0,完成对图像的阈值分割。
3.根据权利要求1所述的基于扫描图像的植物叶片特征的分析方法,其特征在于,采用形态学滤波器对得到的二值图像进行处理,实现叶片和叶柄的自动分割的具体方法为:
Step1:使用最小二乘法对叶片二值图像进行椭圆拟合,拟合椭圆求取过程为:构建一个椭圆函数,Ax2+Bxy+Cy2+Dx+Ey+F=0,计算二值图像边缘轮廓上的点到椭圆的距离,使轮廓上的所有点到椭圆的距离和最小;即求使函数f(A,B,C,D,E.F)=Σ(Ax2+Bxy+Cy2+Dx+Ey+F)2取得最小值的参数值,通过求导数得到所求椭圆,找到该图像的椭圆包络;
Step2:以该椭圆短半轴为腐蚀结构元素的边长对二值图像进行腐蚀操作,然后用该结构元素对图像进行膨胀操作,使图像未被完全腐蚀的部分恢复为原来的图像,得到图像Img2;
Step3:原始的二值图像与图像Img2做差值运算,得到图像Img3,Img3即为叶柄图像;
Step4:原始的二值图像与叶柄图像Img3做差值运算,得到图像Img4,Img4即为叶片图像。
4.根据权利要求1所述的基于扫描图像的植物叶片特征的分析方法,其特征在于,步骤(2)中所述的将形态学滤波后得到的图像进行形态学梯度检测,得到叶片和叶柄的轮廓的方法为:采用了一种针对二值图像的边缘检测方法,该方法的具体检测步骤如下:
Step1:构建一个3*3的结构元素S,作为以后腐蚀图像的核;
Step2:用结构元素来腐蚀二值图像,得到图像Img5,该图像即为损失边缘的二值图像;
Step3:用腐蚀前的二值图像与腐蚀后的图像Img5做差值运算,得到图像Img6,Img6即为图像的轮廓。
5.根据权利要求1所述的基于扫描图像的植物叶片特征的分析方法,其特征在于,步骤(3)中所述的采用SIFT算法对模板图像和形态残损的叶片图像进行关键点检测的方法为:尺度空间极值检测,搜索所有尺度上的图像位置,通过高斯微分函数来识别潜在的对于尺度和旋转不变的兴趣点;关键点的定位,在每个候选的位置上,通过一个拟合精细的模型来确定位置和尺度,关键点的选择依据于它们的稳定程度;方向的确定,基于图像局部的梯度方向,分配给每个关键点位置一个或多个方向,所有后面的对图像数据的操作都相对于关键点的方向、尺度和位置进行变换,从而提供对于这些变换的不变性;关键点描述,在每个关键点周围的邻域内,在选定的尺度上测量图像局部的梯度,这些梯度被变换成一种表示,这种表示允许比较大的局部形状的变形和光照变化,这样就找到了图像的关键点。
6.根据权利要求1所述的基于扫描图像的植物叶片特征的分析方法,其特征在于,步骤(3)中所述的采用SIFT算法对模板图像和形态残损的叶片图像进行关键点检测的具体步骤为:
Step1:空间尺度上进行极值检测,首先对图像进行高斯平滑,构建5层5组的高斯金字塔;构建过程如下:首先对原图像进行高斯平滑,平滑函数如下:L(x,y,σ)=G(x,y,σ)*I(x,y),高斯函数如下:σ的取值为1.6,然后将σ乘以一个比例系数k作为新的平滑因子来平滑第一组第二层,得到第一组第三层,重复5次,得到5层,他们分别对应的平滑参数为0,σ,kσ,k2σ,k3σ,将最后一幅图像做比例因子为2的降采样,得到第二组的第一层,然后按照第一组的操作依次得到第二组第二层、第三层,直到第五层,重复上面的操作创建第三组、第四组、第五组,这样就得到了一个高斯金字塔,接下来创建DoG金字塔,DoG金字塔是由高斯金字塔构造出来的,他的第一组第一层是由高斯金字塔的第一组第二层减第一组第一层,他的第一组第二层是由高斯金字塔的第一组第三层减第一组第二层得到,每组都这样就生成了一个DoG金字塔,用函数表示为:D(x,y,σ)=(G(x,y,kσ)-G(x,y,σ))*I(x,y)=L(x,y,kσ)-L(x,y,σ),得到DoG金字塔后,寻找3*3*3邻阈的极值点,这样就找到了空间尺度上的极值点;
Step2:关键点精确定位,通过拟和三维二次函数以精确确定关键点的位置和尺度,同时去除低对比度的关键点和不稳定的边缘响应点,以增强匹配稳定性、提高抗噪声能力,空间尺度函数泰勒展开式如下:
D ( x ) = D + ∂ D T ∂ x x + 1 2 x T ∂ 2 D ∂ x 2 x - - - ( 1 )
x ^ = - ∂ 2 D - 1 ∂ x 2 ∂ D ∂ x - - - ( 2 )
D ( x ^ ) = D + 1 2 ∂ D T ∂ x x ^ - - - ( 3 )
对(1)求导,并令其为0,得到精确的位置(2),在已经检测到的特征点中,要去掉低对比度的特征点和不稳定的边缘响应点,去掉低对比度的点:把公式(2)代入到公式(1),可得公式(3),如果(3)的值大于0.03,该特征点就保存下来,否则视为低对比度点,该特征点丢弃;
Step3:关键点方向匹配,利用关键点邻域像素的梯度方向分布特性为每个关键点指定方向参数,使算子具备旋转不变性,梯度大小和方向计算如下:
m ( x , y ) = ( L ( x + 1 , y ) - L ( x - 1 , y ) ) 2 + ( L ( x , y + 1 ) - L ( x , y - 1 ) ) 2
θ(x,y)=tan-1(L(x,y+1)-L(x,y-1))/(L(x+1,y)-L(x-1,y))
将0~360度分到36个区间中,每个区间的高度计算如下:Σm(xi,yi)*g(x0,y0,1.5σ),其中σ为当前的尺度,主方向定义为拥有最高高度的那个区间,其他区间高度为最大高度0.8倍以上的区间方向可以认为是该特征点的辅方向,这样增加了模板匹配的鲁棒性;
Step4:当模板图像和形态残损的叶片图像的SIFT特征向量都生成后,采用关键点特征向量的欧氏距离作为两幅图像中关键点的相似性判定度量,取形态残损的叶片图像中的某个关键点,找出其与模板图像中欧氏距离最近的前两个关键点,在这个两个关键点中,如果最近的距离除以次近的距离的值小于0.5,则接受这一对匹配点,如果匹配点数目大于10,则判断模板图像与形态残损的叶片图像匹配。
7.根据权利要求1所述的基于扫描图像的植物叶片特征的分析方法,其特征在于,步骤(4)中所述的颜色聚类的具体方法为:使用YUV空间,其中Y分量是亮度,UV分量是色差,首先选取k个中心点,然后计算每个节点到各个中心点的聚类并将其归到距离最小的那个中心点所代表的类上,距离使用该点周围3*3的平均值与聚类中心在UV分量上的欧式距离,之后再计算每个点到各自所属的类的中心点的聚类的平均值M,更新中心点:选择各个类的点的平均值作为该类新的中心点,重新计算各个点的归属,根据他们到新的聚类中心点的距离,重新计算M,当新旧M之间变化小到一定程度时即表示聚类结束。
8.根据权利要求1所述的基于扫描图像的植物叶片特征的分析方法,其特征在于,步骤(5)中所述的病斑分析的方法为:病斑分析在YUV颜色空间上进行,首先将健康叶色的颜色分离出去,分离方法是对于每一个点,取其周围3*3的平均,然后计算其与用户选择的一个或者多个健康叶片颜色的点的差距,用UV分量的欧式距离表示,当其与任意一个健康颜色的点的差距小到一定阈值时即表明该点是健康颜色,否则不是健康颜色,然后根据用户选择的病斑的大致范围根据所述的边缘检测的方法检测出病斑的边缘,之后再对该边缘进行优化,最后计算病斑面积,导出计算结果。
CN201310061389.6A 2013-02-27 2013-02-27 基于图像扫描的植物叶片特征分析系统 Active CN103077529B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310061389.6A CN103077529B (zh) 2013-02-27 2013-02-27 基于图像扫描的植物叶片特征分析系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310061389.6A CN103077529B (zh) 2013-02-27 2013-02-27 基于图像扫描的植物叶片特征分析系统

Publications (2)

Publication Number Publication Date
CN103077529A CN103077529A (zh) 2013-05-01
CN103077529B true CN103077529B (zh) 2016-04-06

Family

ID=48154048

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310061389.6A Active CN103077529B (zh) 2013-02-27 2013-02-27 基于图像扫描的植物叶片特征分析系统

Country Status (1)

Country Link
CN (1) CN103077529B (zh)

Families Citing this family (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103139436A (zh) * 2013-03-11 2013-06-05 安徽科技学院 一种用平台式扫描仪保存植物样品图像的技术
JP6303332B2 (ja) * 2013-08-28 2018-04-04 富士通株式会社 画像処理装置、画像処理方法および画像処理プログラム
CN104424639B (zh) * 2013-09-04 2017-07-28 中国环境科学研究院 基于形态学腐蚀的叶柄与叶片分割方法
CN103473550B (zh) * 2013-09-23 2016-04-13 广州中医药大学 基于Lab空间和局域动态阈值的植物叶片图像分割方法
CN103593652B (zh) * 2013-10-28 2016-08-24 西京学院 一种基于黄瓜叶片症状图像处理的黄瓜病害识别方法
CN103778628B (zh) * 2014-01-10 2017-01-18 北京农业信息技术研究中心 田间开放环境下的叶片病害程度获取方法及系统
CN105279748B (zh) * 2014-06-18 2017-11-17 江南大学 一种快速的像素尺度计算方法
CN104166990B (zh) * 2014-07-22 2018-08-24 中国农业大学 一种利用分辨率调整进行图像分割的方法和系统
CN104484408A (zh) * 2014-12-16 2015-04-01 百度在线网络技术(北京)有限公司 植物信息的搜索处理方法和系统
CN104705080B (zh) * 2015-03-20 2016-11-30 温弘成 瓶养植株种植控制方法
CN104778686B (zh) * 2015-03-23 2017-09-22 无锡中科智能农业发展有限责任公司 一种基于病斑监测的组培预警方法
CN105354836B (zh) * 2015-10-14 2018-08-28 合肥安晶龙电子股份有限公司 色选方法
CN105844610B (zh) * 2016-01-23 2018-08-21 重庆布委科技有限公司 基于机器视觉的植物叶片锈斑自动检测系统及方法
CN105787519A (zh) * 2016-03-21 2016-07-20 浙江大学 一种基于叶脉检测的树种分类方法
CN106097308A (zh) * 2016-05-31 2016-11-09 长沙理工大学 一种基于机器视觉的新能源电动车辆充电孔检测与定位方法
CN106504258B (zh) * 2016-08-31 2019-04-02 北京农业信息技术研究中心 一种植物叶片图像提取方法及装置
CN107833199B (zh) * 2016-09-12 2020-03-27 南京大学 一种用于临摹卡通图像质量分析的方法
CN106483130B (zh) * 2016-10-13 2018-12-28 扬州大学 一种水稻病害的检测方法及其自动检测装置
CN106778889A (zh) * 2016-12-28 2017-05-31 天津普达软件技术有限公司 一种基于梯度强度和方向的模板匹配方法
CN107066981A (zh) * 2017-04-20 2017-08-18 上海博历机械科技有限公司 针对小型无人机自主降落的视觉分级地标定位识别系统
CN107239761B (zh) * 2017-06-05 2020-03-27 山东农业大学 基于骨架角点检测的果树拉枝效果评价方法
CN107451999B (zh) * 2017-08-16 2020-07-03 中惠创智无线供电技术有限公司 基于图像识别的异物检测方法和装置
CN107578035B (zh) * 2017-09-30 2020-06-16 深圳市颐通科技有限公司 基于超像素-多色彩空间的人体轮廓提取方法
CN107971240B (zh) * 2017-11-21 2019-06-04 合肥工业大学 一种动力电池电芯破碎产物铜铝箔颗粒的色选方法
CN108234868B (zh) * 2017-12-26 2020-10-16 五邑大学 一种基于案例推理的智能拍摄系统及方法
CN108805865B (zh) * 2018-05-22 2019-12-10 杭州智微信息科技有限公司 一种基于饱和度聚类的骨髓白细胞定位方法
CN109214367A (zh) * 2018-10-25 2019-01-15 东北大学 一种基于视觉注意机制的人脸检测方法
CN109754423B (zh) * 2018-11-28 2020-09-15 中国农业科学院农业信息研究所 一种叶片病斑覆盖区域的提取方法和设备
CN109685792B (zh) * 2018-12-25 2021-01-26 宁波智能装备研究院有限公司 一种基于图像差分空间频率特性的瓦楞纸智能识别算法
CN109631821A (zh) * 2019-01-14 2019-04-16 江西农业大学 一种快速无损测量竹子叶片面积的方法
CN109886315B (zh) * 2019-01-29 2022-05-03 电子科技大学 一种基于核保持的图像相似性度量方法
CN111145876B (zh) * 2019-12-27 2023-12-29 成都牙讯科技有限公司 一种牙科图片排列方法、系统、设备及存储介质
CN113569880A (zh) * 2020-04-28 2021-10-29 福建省烟草公司龙岩市公司 一种烤后自然卷曲烟叶的快速初分系统及初分方法
CN112413449B (zh) * 2020-11-13 2022-10-28 北国之光(深圳)科技有限公司 一种植物生长灯的智能配光系统及植物智能配光方法
CN113066095B (zh) * 2021-03-18 2024-02-23 上海烟草集团有限责任公司 重建烟叶轮廓的方法、系统及计算机可读存储介质
CN113470034A (zh) * 2021-06-10 2021-10-01 六盘水市农业科学研究院 一种自动测量离体植物软腐病斑面积的装置
CN113792708B (zh) * 2021-11-10 2022-03-18 湖南高至科技有限公司 基于arm的远距离目标清晰成像系统及方法
CN114241033B (zh) * 2021-12-17 2022-07-22 贵州省山地资源研究所 一种植株叶面积垂直结构的异位获取方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101901477A (zh) * 2010-07-27 2010-12-01 中国农业大学 植物叶片田间图像边缘提取方法及其系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5033525B2 (ja) * 2007-07-20 2012-09-26 ジェイティエンジニアリング株式会社 異物検査装置

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101901477A (zh) * 2010-07-27 2010-12-01 中国农业大学 植物叶片田间图像边缘提取方法及其系统

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
基于计算机视觉的农作物病害识别方法的研究;宋凯;《中国博士学位论文全文数据库信息科技辑》;20090115(第01期);第12-47页 *
植物叶片测量方法的研究;胡迪;《中国优秀硕士学位论文全文数据库信息科技辑》;20120715(第07期);第5-38页 *

Also Published As

Publication number Publication date
CN103077529A (zh) 2013-05-01

Similar Documents

Publication Publication Date Title
CN103077529B (zh) 基于图像扫描的植物叶片特征分析系统
CN108364280B (zh) 结构裂缝自动化描绘及宽度精准测量方法与设备
Khoshelham et al. Performance evaluation of automated approaches to building detection in multi-source aerial data
Maurya et al. Road extraction using k-means clustering and morphological operations
CN110120042B (zh) 一种基于slic超像素和自动阈值分割的农作物图像病虫害区域提取方法
Zhou et al. An integrated skeleton extraction and pruning method for spatial recognition of maize seedlings in MGV and UAV remote images
CN104463164B (zh) 一种基于伞骨法与冠高比的树木冠层结构信息提取方法
CN109146948A (zh) 基于视觉的作物长势表型参数量化与产量相关性分析方法
CN105574527A (zh) 一种基于局部特征学习的快速物体检测方法
CN103886589A (zh) 面向目标的自动化高精度边缘提取方法
CN105868717B (zh) 一种基于分类的高分辨率遥感图像单木树冠信息提取方法
CN108052886A (zh) 一种小麦条锈病菌夏孢子自动统计计数方法
CN111598780A (zh) 一种适用于机载LiDAR点云的地形自适应插值滤波方法
CN106228136A (zh) 基于聚合通道特征的全景街景隐私保护方法
CN111487643B (zh) 一种基于激光雷达点云和近红外影像的建筑物检测方法
Robb et al. Semi-automated field plot segmentation from UAS imagery for experimental agriculture
CN116523898A (zh) 一种基于三维点云的烟草表型性状提取方法
CN104933723A (zh) 基于稀疏表示的舌图像分割方法
CN114898118A (zh) 基于多源点云的输电线路房屋拆迁量自动统计方法及系统
Xiao et al. Individual tree detection and crown delineation with 3D information from multi-view satellite images
CN107507192B (zh) 一种水稻剑叶夹角在体测量便携装置及在体测量方法
CN104899592A (zh) 一种基于圆形模板的道路半自动提取方法及系统
CN105894501B (zh) 一种高分辨率遥感图像单木探测和树冠描绘方法
CN116524344A (zh) 一种基于rgb-d信息融合的番茄串采摘点检测方法
Kalapala Estimation of tree count from satellite imagery through mathematical morphology

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant