CN109978875A - 一种电容器外观缺陷识别方法及识别装置 - Google Patents
一种电容器外观缺陷识别方法及识别装置 Download PDFInfo
- Publication number
- CN109978875A CN109978875A CN201910264445.3A CN201910264445A CN109978875A CN 109978875 A CN109978875 A CN 109978875A CN 201910264445 A CN201910264445 A CN 201910264445A CN 109978875 A CN109978875 A CN 109978875A
- Authority
- CN
- China
- Prior art keywords
- image
- feature vector
- capacitor
- sample
- cut zone
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0004—Industrial image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20081—Training; Learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20084—Artificial neural networks [ANN]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30108—Industrial image inspection
- G06T2207/30148—Semiconductor; IC; Wafer
Landscapes
- Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Image Analysis (AREA)
Abstract
本发明公开了一种电容器外观缺陷识别方法及识别装置,识别方法包括:获取待识别的目标电容器的图像;对目标电容器的图像进行图像分割,得到目标电容器的分割区域图像,分割区域图像包括针脚区域图像、胶盖区域图像及胶管区域图像中的一种或多种;在预设的特征类型范围内,计算分割区域图像的特征值,并将计算得到的特征值合并为分割区域图像的特征向量;将分割区域图像的特征向量输入到预训练的电容器外观缺陷识别神经网络模型中,得到缺陷识别判定结果。本发明通过数据降维自主选择只对分类结果起作用的核心特征,其特征值进入神经网络进行训练,让算法自动计算特征值和最终判定结果之间的联系,找到最优的数值设定,电容缺陷识别成功率提高。
Description
技术领域
本发明涉及电容缺陷检测领域,尤其涉及一种电容器外观缺陷识别方法及识别装置。
背景技术
电容缺陷检测是电容产生过程中的一个重要环节,以往通常采用人工对电容进行识别。随着图像识别技术的进步,出现了简单的图像识别缺陷的技术,数字图像经过图像分割后,根据人为设定的特征范围,作出OK或NG的判断,例如计算分割图像面积为100,而人为设定的合格特征范围为20-50,则面积超限,进而判定为NG。现有的方案依赖于调试人员的经验,对于随机出现的各类缺陷,其特征值并不能完全保证出现在某个特定范围内,并且选取的特种也不能保证区分所有种类的缺陷,因此容易出现漏报、误报等情况。例如假设人为设定面积范围在20-50,灰度范围在0-20的区间为NG,而当某种缺陷的面积为25,灰度为21时,算法就会因为灰度值不满足条件而判定为OK,然而实际上这仍然是NG的。现有方案中,特征、特征值范围完全由开发人员根据经验设定,因此,检测的准确率严重依赖于调试人员的经验,检测的准确率受到人为主观因素的影响比较大,其设定的参数往往不能直接与瑕疵的标准挂钩,需要反复调整,难以保证检测的稳定性。
发明内容
为了解决现有技术的问题,本发明提供了一种电容器外观缺陷识别方法及识别装置,利用所述技术方案如下:
本发明提供了一种电容器外观缺陷识别方法,包括以下步骤:
S1、获取待识别的目标电容器的图像;
S2、对所述目标电容器的图像进行图像分割,得到目标电容器的分割区域图像,所述分割区域图像包括针脚区域图像、胶盖区域图像及胶管区域图像中的一种或多种;
S3、在预设的特征类型范围内,计算所述分割区域图像的特征值,并将计算得到的特征值合并为所述目标电容器的图像的特征向量;
S4、将所述分割区域图像的特征向量输入到预先完成训练的电容器外观缺陷识别神经网络模型中,得到缺陷识别判定结果。
进一步地,所述电容器外观缺陷识别神经网络模型通过以下步骤完成训练:
组建样本库,所述样本库中包括多个训练样本,每个训练样本包括电容器的样本图像及其对应的分类结果;
对每一个训练样本的样本图像进行图像分割,得到样本图像的一个或多个分割区域图像,并将所有的分割区域图像的特征值合并得到每个样本图像的特征向量;
将所述样本库中所有样本图像的特征向量组成初始矩阵特征向量,并对所述初始矩阵特征向量进行数据降维操作,得到降维特征向量;
将所述降维特征向量作为输入量,结合对应的样本图像的分类结果,采用反向传播算法对多层感知器模型进行训练至收敛,得到电容器外观缺陷识别神经网络模型。
进一步地,所述对所述初始矩阵特征向量进行数据降维操作包括以下步骤:
对所述初始矩阵特征向量中同一个特征向量类型求平均特征值;
将初始矩阵特征向量中特征向量类型的原始特征值减去对应的平均特征值,得到矩阵特征差值;
对所述矩阵特征差值求协方差矩阵,并求协方差矩阵的特征值和特征向量;
将协方差矩阵的特征值按照从大到小的顺序排序,选择排在前k个的特征值,然后将其对应的k个特征向量分别作为列向量组成特征向量降维矩阵;
将所述矩阵特征差值中的特征值投影到选取的k个特征向量上,得到降维矩阵特征向量。
进一步地,所述S3中预设的特征类型范围与所述降维特征向量包含的特征类型相同,所述特征类型包括面积、灰度、矩形度和圆度。
进一步地,步骤S2中图像分割包括以下步骤:
对目标电容器的图像进行一次固定阈值分割,得到电容表面区域图像;
对所述电容表面区域图像进行三次动态阈值分割,分别得到针脚区域图像、胶盖区域图像及胶管区域图像。
进一步地,所述电容器外观缺陷识别神经网络模型的训练过程还包括对收敛的电容器外观缺陷识别神经网络模型进行验证,验证过程包括以下步骤:
获取测试样本,每个测试样本包括电容器的测试图像及其对应的分类结果;
对所述测试图像进行图像分割,得到分割区域测试图像;
在降维特征向量包含的特征类型范围内,计算所述分割区域测试图像的特征值,并将计算得到的特征值合并为所述分割区域测试图像的特征向量;
将所述分割区域测试图像的特征向量输入到所述收敛的电容器外观缺陷识别神经网络模型中,得到缺陷识别测试结果;
统计所述缺陷识别测试结果与对应的分类结果一致的概率,若一致的概率达到预设的准确率阈值,则所述神经网络训练完成,否则重新对所述神经网络进行训练。
进一步地,步骤S1中目标电容器的图像通过全外观扫描方式获取,对所述电容器的拍摄方向包括拍摄底凸、拍摄胶盖凸和胶盖倾斜、拍摄极偏、拍摄极反,每次拍摄的曝光时间至少预留100ms。
另一方面,本发明提供了一种电容器外观缺陷识别装置,包括以下模块:
图像接收模块,用于获取待识别的目标电容器的图像;
图像分割模块,用于对所述目标电容器的图像进行图像分割,得到目标电容器的分割区域图像,所述分割区域图像包括针脚区域图像、胶盖区域图像及胶管区域图像中的一种或多种;
特征向量模块,用于在预设的特征类型范围内,计算所述分割区域图像的特征值,并将计算得到的特征值合并为所述目标电容器的图像的特征向量;
模型判定模块,用于将所述分割区域图像的特征向量输入到预先完成训练的电容器外观缺陷识别神经网络模型中,得到缺陷识别判定结果。
进一步地,所述缺陷识别装置还包括模型训练模块,所述模型训练模块包括以下单元:
训练样本单元,用于组建样本库,所述样本库中包括多个训练样本,每个训练样本包括电容器的样本图像及其对应的分类结果;
样本图像分割单元,用于对每一个训练样本的样本图像进行图像分割,得到样本图像的一个或多个分割区域图像,并将所有的分割区域图像的特征值合并得到每个样本图像的特征向量;
降维单元,用于将所述样本库中所有样本图像的特征向量组成初始矩阵特征向量,并对所述初始矩阵特征向量进行数据降维操作,得到降维特征向量;
模型收敛单元,用于将所述降维特征向量作为输入量,结合对应的样本图像的分类结果,采用反向传播算法对多层感知器模型进行训练至收敛,得到电容器外观缺陷识别神经网络模型。
进一步地,所述模型训练模块还包括模型验证单元,所述模型验证单元包括以下子单元:
测试样本子单元,用于获取测试样本,每个测试样本包括电容器的测试图像及其对应的分类结果;
测试图像分割子单元,用于对所述测试图像进行图像分割,得到分割区域测试图像;
特征向量子单元,用于在降维特征向量包含的特征类型范围内,计算所述分割区域测试图像的特征值,并将计算得到的特征值合并为所述分割区域测试图像的特征向量;
测试结果子单元,用于将所述分割区域测试图像的特征向量输入到所述收敛的电容器外观缺陷识别神经网络模型中,得到缺陷识别测试结果;
统计子单元,用于统计所述缺陷识别测试结果与对应的分类结果一致的概率,若一致的概率达到预设的准确率阈值,则所述神经网络训练完成,否则调用模型训练模块重新对所述神经网络进行训练。
本发明提供的技术方案带来的有益效果如下:
a.通过组合使用数据降维和神经网络算法,减少人为干预导致的算法不稳定;
b.数据降维的目的是让算法自主选择只对分类结果起作用的核心特征,舍弃那些对分类结果不起作用、甚至是有干扰的特征;
c.数据降维后得到的特征值,进入神经网络进行训练,可以让算法自动计算特征值和最终判定结果之间的联系,找到最优的数值设定;
d.人工只需要提前帮算法准备好带有OK/NG标签的数据,让算法自主进行模型训练即可,操作难度降低,调试成功率提高。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的基于神经网络的电容器外观缺陷识别方法流程图;
图2是本发明实施例提供的图像分割的方法流程图;
图3是本发明实施例提供的电容器外观缺陷识别神经网络模型的训练方法流程图;
图4是本发明实施例提供的对所述初始矩阵特征向量进行数据降维操作的方法流程图;
图5是本发明实施例提供的对收敛的电容器外观缺陷识别神经网络模型进行验证的方法流程图;
图6是本发明实施例提供的基于神经网络的电容器外观缺陷识别装置的模块框图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、装置、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其他步骤或单元。
在本发明的一个实施例中,提供了一种基于神经网络的电容器外观缺陷识别方法,本发明的电容器外观缺陷识别方法从时间上划分主要包括以下几个步骤:
第一步为训练分类模型:对已经分类好的电容器图像中的可疑区域进行特征提取,然后进行神经网络训练;
第二步为验证模型准确率:对测试图片进行同样的提取特征操作,并放入模型中计算得到OK/NG的结果,与实际结果做对比。当模型准确率达到要求时(如≥98%),则训练完成;
第三步为在模型训练完毕后,每次程序读取到电容器的图片后,就做同样的特征提取操作,然后将特征值传入神经网络模型进行计算,并在模型最后得到结果。
在现有技术中,深度学习是另一种自学习分类算法。深度学习的特点是从步骤1开始,无需对输入图片做任何操作,直接对原图进行深度神经网络学习。因此深度学习的网络训练速度很慢,并且需要大量(以万计)的样本图片进行训练。在工业环境中,往往无法在短期内提供大量的样本图片,因此很难适用。综上,本发明采用神经网络与降维算法结合的形式,对输入的电容器图片进行外观缺陷识别,如图1所示,所述识别方法包括以下步骤:
S1、获取待识别的目标电容器的图像。
具体地,所述目标电容器的图像通过全外观扫描方式获取,对所述电容器的拍摄方向包括拍摄底凸、拍摄胶盖凸和胶盖倾斜、拍摄极偏、拍摄极反,每次拍摄的曝光时间至少预留100ms。可针对不同的检测品项选择相应的拍摄方式,如下表所示:
电容全外观18项检测验证状况
其中,对于面阵拍摄,主要用于面阵瑕疵检测,包括胶管收缩不良、焊点外露、电解纸外露、铝壳底部脏、胶管切割不良、底部压伤、底部漏液等;面阵侧拍主要用于检测底凸、混料、胶盖倾斜、胶盖凸、极反等缺陷,线扫条光拍摄主要用于检测侧爆、胶管起泡、本体不良等缺陷。
S2、对所述目标电容器的图像进行图像分割,得到目标电容器的分割区域图像,所述分割区域图像包括针脚区域图像、胶盖区域图像及胶管区域图像中的一种或多种。
如图2所示,图像分割包括以下步骤:
S21、对目标电容器的图像进行一次固定阈值分割,得到电容表面区域图像。
S22、对所述电容表面区域图像进行三次动态阈值分割,分别得到针脚区域图像、胶盖区域图像及胶管区域图像。动态阈值是指在图像中寻找局部区域比周边区域灰度值明显高或低的区域,通常会设定一个周边区域的范围mean_size以及灰度值偏差阈值dyn_threshold,在本实施例中,mean_size优选设定为51,dyn_threshold优选设定为20,需要说明的是,这里优选的设定值并非唯一值,不作为限定本发明的保护范围。
S3、在预设的特征类型范围内,计算所述分割区域图像的特征值,并将计算得到的特征值合并为所述目标电容器的图像的特征向量。
这里所说的预设的特征类型范围,为经过筛减后的特征类型,比如面积、灰度、矩形度和圆度等,优选地,所述预设的特征类型范围是经过算法降维后得到的,降维方式在下文中详述。
计算特征值之后,将一目标电容器的图像分割得到的分割图像的预设的特征类型的特征值合并成一组值,即为该电容器图像的特征向量。
S4、将所述分割区域图像的特征向量输入到预先完成训练的电容器外观缺陷识别神经网络模型中,得到缺陷识别判定结果。
所述电容器外观缺陷识别神经网络模型预先完成了训练,针对该神经网络模型,以电容器图像为输入值,经过计算,输出电容器缺陷识别判定结果,比如输出00表示没有缺陷(OK),输出01表示存在缺陷(NG),更进一步地,输出10表示类型一的缺陷,输出11表示类型二的缺陷,等等。以下对神经网络模型的训练方法作出说明:
如图3所示,所述电容器外观缺陷识别神经网络模型通过以下步骤完成训练:
T1、组建样本库,所述样本库中包括多个训练样本,每个训练样本包括电容器的样本图像及其对应的分类结果。
具体地,需要人工提前帮算法准备好样本图像附带的OK或NG标签的数据。
T2、对每一个训练样本的样本图像进行图像分割,得到样本图像的一个或多个分割区域图像。
具体地,这里的图像分割方法参见步骤S21-S22,在此不再赘述。
T3、将所有的分割区域图像的特征值合并得到每个样本图像的特征向量。
这里的分割区域图像的特征值为所有的特征的特征值,针对得到的针脚区域图像、胶盖区域图像及胶管区域图像,将其所有的特征都计算一遍,数字图像经过图像分割后,得到感兴趣区域(ROI),然后针对感兴趣区域计算其特征值,通常特征值有几十到几百项,例如:灰度、面积、轮廓、梯度、二阶矩、三阶矩等等,所有特征会合并为特征向量1,进入下一轮的计算,所述所有的特征包括如下:
T4、将所述样本库中所有样本图像的特征向量组成初始矩阵特征向量,并对所述初始矩阵特征向量进行数据降维操作,得到降维特征向量。
如图4所示,对所述初始矩阵特征向量进行数据降维操作包括以下步骤:
T41、对所述初始矩阵特征向量中同一个特征向量类型求平均特征值;
以数据集X={x1,x2,x3,...,xn}需要由n维降到k维为例,首先求取n维上各自的平均值:
T42、将初始矩阵特征向量中特征向量类型的原始特征值减去对应的平均特征值,得到矩阵特征差值;
即计算得到矩阵特征差值如下:X'={x1',x2',x3',...,xn'}
T43、计算协方差矩阵,并求协方差矩阵的特征值和特征向量;
所述协方差矩阵的计算公式为:并通过SVD计算其特征值和特征向量。
T44、将协方差矩阵的特征值按照从大到小的顺序排序,选择排在前k个的特征值,然后将其对应的k个特征向量分别作为列向量组成特征向量降维矩阵。
T45、将所述矩阵特征差值中的特征值投影到选取的k个特征向量上,得到降维矩阵特征向量,即将数据集转换到k个特征向量构建的新空间内。
上述步骤S3中所述预设的特征类型范围即优选采用上述步骤T34中排在前k个的特征值对应的k个特征类型。
T5、将所述降维特征向量作为输入量,结合对应的样本图像的分类结果,采用反向传播算法对多层感知器模型进行训练至收敛,得到电容器外观缺陷识别神经网络模型。
通过上述降维操作,可以排除训练阶段初期的大量无效特征,这些无效特征是指对最终分类结果不起作用的特征值,计算并处理这些无效特征值会占用大量计算机资源,因此,在训练阶段,需要对所有的特征值进行数据降维操作,即减少特征值数量,加快计算速度。数据降维后,得到所述降维矩阵特征向量作为新的特征向量,以随后软件加载所述神经网络模型时,对所述新的特征向量进行计算,得到判定结果。
在本发明中,优选多层感知器Multi-layerPerceptron(MLP)作为模型原型,采用反向传播算法对多层感知器模型进行训练至收敛,得到一个训练好的MLP模型,即为所述电容器外观缺陷识别神经网络模型。
在本发明实施例中,经过降维计算,步骤T34中得到的所述降维特征向量包含的特征类型包括面积、灰度、矩形度和圆度。
在执行步骤T4之后,还包括执行对收敛的电容器外观缺陷识别神经网络模型进行验证的操作,如图5所示,具体包括以下步骤:
T61、获取测试样本,每个测试样本包括电容器的测试图像及其对应的分类结果;优选地,所述测试样本可以选取步骤T1中组件的样本库中的部分(或全部)图像及其对应的分类结果(OK/NG)。
T62、对所述测试图像进行图像分割,得到分割区域测试图像;分割方法如上S21-S22所述,在此不再赘述。
T63、在降维特征向量包含的特征类型范围内,计算所述分割区域测试图像的特征值,并将计算得到的特征值合并为所述分割区域测试图像的特征向量;
T64、将所述分割区域测试图像的特征向量输入到所述收敛的电容器外观缺陷识别神经网络模型中,得到缺陷识别测试结果;
T65、统计所述缺陷识别测试结果与对应的分类结果一致的概率,若一致的概率达到预设的准确率阈值,则所述神经网络训练完成,否则重新对所述神经网络进行训练。
实际上,验证的过程与使用训练好的电容器外观缺陷识别神经网络模型进行缺陷判定的区别在于,在验证中,得到缺陷识别测试结果后,还需要与所述测试图像对应的分类结果比较是否一致,若一致,则表明模型的判定结果准确,否则错误,统计所述神经网络模型对所述测试样本的判定结果准确率,若准确率达到预设的阈值(比如说98%),则训练完成,可以将训练得到的神经网络模型以文件的形式存储在计算机中,待算法需要时对其文件进行加载。
在本发明的一个实施例中,提供了一种电容器外观缺陷识别装置,参见图6,所述识别装置包括以下模块:
图像接收模块610,用于获取待识别的目标电容器的图像;
图像分割模块620,用于对所述目标电容器的图像进行图像分割,得到目标电容器的分割区域图像,所述分割区域图像包括针脚区域图像、胶盖区域图像及胶管区域图像中的一种或多种;
特征向量模块630,用于在预设的特征类型范围内,计算所述分割区域图像的特征值,并将计算得到的特征值合并为所述目标电容器的图像的特征向量;
模型判定模块640,用于将所述分割区域图像的特征向量输入到预先完成训练的电容器外观缺陷识别神经网络模型中,得到缺陷识别判定结果。
进一步地,所述缺陷识别装置还包括模型训练模块650,参见图6,所述模型训练模块650包括以下单元:
训练样本单651,用于组建样本库,所述样本库中包括多个训练样本,每个训练样本包括电容器的样本图像及其对应的分类结果;
样本图像分割单元652,用于对每一个训练样本的样本图像进行图像分割,得到样本图像的一个或多个分割区域图像,并将所有的分割区域图像的特征值合并得到每个样本图像的特征向量;
降维单元653,用于将所述样本库中所有样本图像的特征向量组成初始矩阵特征向量,并对所述初始矩阵特征向量进行数据降维操作,得到降维特征向量;
模型收敛单元654,用于将所述降维特征向量作为输入量,结合对应的样本图像的分类结果,采用反向传播算法对多层感知器模型进行训练至收敛,得到电容器外观缺陷识别神经网络模型。
进一步地,所述模型训练模块还包括模型验证单元655,参加图6,所述模型验证单元655包括以下子单元:
测试样本子单元6551,用于获取测试样本,每个测试样本包括电容器的测试图像及其对应的分类结果;
测试图像分割子单元6552,用于对所述测试图像进行图像分割,得到分割区域测试图像;
特征向量子单元6553,用于在降维特征向量包含的特征类型范围内,计算所述分割区域测试图像的特征值,并将计算得到的特征值合并为所述分割区域测试图像的特征向量;
测试结果子单元6554,用于将所述分割区域测试图像的特征向量输入到所述收敛的电容器外观缺陷识别神经网络模型中,得到缺陷识别测试结果;
统计子单元6555,用于统计所述缺陷识别测试结果与对应的分类结果一致的概率,若一致的概率达到预设的准确率阈值,则所述神经网络训练完成,否则调用模型训练模块重新对所述神经网络进行训练。
需要说明的是:上述实施例提供的电容器外观缺陷识别装置在进行电容器外观缺陷识别时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将电容器外观缺陷识别装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,本实施例提供的电容器外观缺陷识别装置实施例与上述实施例提供的电容器外观缺陷识别方法属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
本发明通过数据降维自主选择只对分类结果起作用的核心特征,其特征值进入神经网络进行训练,让算法自动计算特征值和最终判定结果之间的联系,找到最优的数值设定,电容缺陷识别成功率提高。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (10)
1.一种电容器外观缺陷识别方法,其特征在于,包括以下步骤:
S1、获取待识别的目标电容器的图像;
S2、对所述目标电容器的图像进行图像分割,得到目标电容器的分割区域图像,所述分割区域图像包括针脚区域图像、胶盖区域图像及胶管区域图像中的一种或多种;
S3、在预设的特征类型范围内,计算所述分割区域图像的特征值,并将计算得到的特征值合并为所述目标电容器的图像的特征向量;
S4、将所述分割区域图像的特征向量输入到预先完成训练的电容器外观缺陷识别神经网络模型中,得到缺陷识别判定结果。
2.根据权利要求1所述的缺陷识别方法,其特征在于,所述电容器外观缺陷识别神经网络模型通过以下步骤完成训练:
组建样本库,所述样本库中包括多个训练样本,每个训练样本包括电容器的样本图像及其对应的分类结果;
对每一个训练样本的样本图像进行图像分割,得到样本图像的一个或多个分割区域图像,并将所有的分割区域图像的特征值合并得到每个样本图像的特征向量;
将所述样本库中所有样本图像的特征向量组成初始矩阵特征向量,并对所述初始矩阵特征向量进行数据降维操作,得到降维特征向量;
将所述降维特征向量作为输入量,结合对应的样本图像的分类结果,采用反向传播算法对多层感知器模型进行训练至收敛,得到电容器外观缺陷识别神经网络模型。
3.根据权利要求2所述的缺陷识别方法,其特征在于,所述对所述初始矩阵特征向量进行数据降维操作包括以下步骤:
对所述初始矩阵特征向量中同一个特征向量类型求平均特征值;
将初始矩阵特征向量中特征向量类型的原始特征值减去对应的平均特征值,得到矩阵特征差值;
对所述矩阵特征差值求协方差矩阵,并求协方差矩阵的特征值和特征向量;
将协方差矩阵的特征值按照从大到小的顺序排序,选择排在前k个的特征值,然后将其对应的k个特征向量分别作为列向量组成特征向量降维矩阵;
将所述矩阵特征差值中的特征值投影到选取的k个特征向量上,得到降维矩阵特征向量。
4.根据权利要求2所述的缺陷识别方法,其特征在于,所述S3中预设的特征类型范围与所述降维特征向量包含的特征类型相同,所述特征类型包括面积、灰度、矩形度和圆度。
5.根据权利要求1所述的缺陷识别方法,其特征在于,步骤S2中图像分割包括以下步骤:
对目标电容器的图像进行一次固定阈值分割,得到电容表面区域图像;
对所述电容表面区域图像进行三次动态阈值分割,分别得到针脚区域图像、胶盖区域图像及胶管区域图像。
6.根据权利要求2所述的缺陷识别方法,其特征在于,所述电容器外观缺陷识别神经网络模型的训练过程还包括对收敛的电容器外观缺陷识别神经网络模型进行验证,验证过程包括以下步骤:
获取测试样本,每个测试样本包括电容器的测试图像及其对应的分类结果;
对所述测试图像进行图像分割,得到分割区域测试图像;
在降维特征向量包含的特征类型范围内,计算所述分割区域测试图像的特征值,并将计算得到的特征值合并为所述分割区域测试图像的特征向量;
将所述分割区域测试图像的特征向量输入到所述收敛的电容器外观缺陷识别神经网络模型中,得到缺陷识别测试结果;
统计所述缺陷识别测试结果与对应的分类结果一致的概率,若一致的概率达到预设的准确率阈值,则所述神经网络训练完成,否则重新对所述神经网络进行训练。
7.根据权利要求1所述的缺陷识别方法,其特征在于,步骤S1中目标电容器的图像通过全外观扫描方式获取,对所述电容器的拍摄方向包括拍摄底凸、拍摄胶盖凸和胶盖倾斜、拍摄极偏、拍摄极反,每次拍摄的曝光时间至少预留100ms。
8.一种电容器外观缺陷识别装置,其特征在于,包括以下模块:
图像接收模块,用于获取待识别的目标电容器的图像;
图像分割模块,用于对所述目标电容器的图像进行图像分割,得到目标电容器的分割区域图像,所述分割区域图像包括针脚区域图像、胶盖区域图像及胶管区域图像中的一种或多种;
特征向量模块,用于在预设的特征类型范围内,计算所述分割区域图像的特征值,并将计算得到的特征值合并为所述目标电容器的图像的特征向量;
模型判定模块,用于将所述分割区域图像的特征向量输入到预先完成训练的电容器外观缺陷识别神经网络模型中,得到缺陷识别判定结果。
9.根据权利要求8所述的缺陷识别装置,其特征在于,还包括模型训练模块,所述模型训练模块包括以下单元:
训练样本单元,用于组建样本库,所述样本库中包括多个训练样本,每个训练样本包括电容器的样本图像及其对应的分类结果;
样本图像分割单元,用于对每一个训练样本的样本图像进行图像分割,得到样本图像的一个或多个分割区域图像,并将所有的分割区域图像的特征值合并得到每个样本图像的特征向量;
降维单元,用于将所述样本库中所有样本图像的特征向量组成初始矩阵特征向量,并对所述初始矩阵特征向量进行数据降维操作,得到降维特征向量;
模型收敛单元,用于将所述降维特征向量作为输入量,结合对应的样本图像的分类结果,采用反向传播算法对多层感知器模型进行训练至收敛,得到电容器外观缺陷识别神经网络模型。
10.根据权利要求9所述的缺陷识别装置,其特征在于,所述模型训练模块还包括模型验证单元,所述模型验证单元包括以下子单元:
测试样本子单元,用于获取测试样本,每个测试样本包括电容器的测试图像及其对应的分类结果;
测试图像分割子单元,用于对所述测试图像进行图像分割,得到分割区域测试图像;
特征向量子单元,用于在降维特征向量包含的特征类型范围内,计算所述分割区域测试图像的特征值,并将计算得到的特征值合并为所述分割区域测试图像的特征向量;
测试结果子单元,用于将所述分割区域测试图像的特征向量输入到所述收敛的电容器外观缺陷识别神经网络模型中,得到缺陷识别测试结果;
统计子单元,用于统计所述缺陷识别测试结果与对应的分类结果一致的概率,若一致的概率达到预设的准确率阈值,则所述神经网络训练完成,否则调用模型训练模块重新对所述神经网络进行训练。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910264445.3A CN109978875A (zh) | 2019-04-03 | 2019-04-03 | 一种电容器外观缺陷识别方法及识别装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910264445.3A CN109978875A (zh) | 2019-04-03 | 2019-04-03 | 一种电容器外观缺陷识别方法及识别装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN109978875A true CN109978875A (zh) | 2019-07-05 |
Family
ID=67082584
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910264445.3A Pending CN109978875A (zh) | 2019-04-03 | 2019-04-03 | 一种电容器外观缺陷识别方法及识别装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109978875A (zh) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111062919A (zh) * | 2019-12-12 | 2020-04-24 | 韦士肯(厦门)智能科技有限公司 | 一种轴承套圈外观缺陷检测方法 |
CN111089865A (zh) * | 2019-12-19 | 2020-05-01 | 国网甘肃省电力公司电力科学研究院 | 一种基于f-rcnn的缺陷电缆检测方法 |
WO2021082923A1 (zh) * | 2019-10-28 | 2021-05-06 | 上海悦易网络信息技术有限公司 | 一种电子设备屏幕区域瑕疵检测方法与设备 |
CN112862744A (zh) * | 2019-12-04 | 2021-05-28 | 电子科技大学 | 一种基于超声图像的电容内部缺陷智能检测方法 |
CN113421271A (zh) * | 2021-05-17 | 2021-09-21 | 江苏大学 | 基于mlp多层神经网络的天然皮革缺陷分割方法 |
CN114550020A (zh) * | 2022-04-21 | 2022-05-27 | 深圳一心一医智能科技有限公司 | 一种消毒机器人的生物体图像智能识别方法及系统 |
CN114577410A (zh) * | 2022-03-04 | 2022-06-03 | 浙江蓝能燃气设备有限公司 | 一种用于瓶组容器氦气泄漏的自动检漏系统及应用方法 |
WO2022120665A1 (zh) * | 2020-12-09 | 2022-06-16 | 电子科技大学 | 一种基于深度学习的电容缺陷智能检测方法 |
CN115880285A (zh) * | 2023-02-07 | 2023-03-31 | 南通南铭电子有限公司 | 一种铝电解电容器引出线异常识别方法 |
WO2024044942A1 (zh) * | 2022-08-30 | 2024-03-07 | 宁德时代新能源科技股份有限公司 | 视觉检测系统的点检方法和装置 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102854191A (zh) * | 2012-07-18 | 2013-01-02 | 湖南大学 | 高速铁轨表面缺陷的实时视觉检测与识别方法 |
CN105044114A (zh) * | 2015-04-27 | 2015-11-11 | 中国人民解放军理工大学 | 一种电解电容外观包装缺陷图像检测系统与方法 |
CN204903416U (zh) * | 2015-07-14 | 2015-12-23 | 南京工程学院 | 柱式电容外观自动检测装置 |
CN105425076A (zh) * | 2015-12-11 | 2016-03-23 | 厦门理工学院 | 一种基于bp神经网络算法进行变压器故障识别的方法 |
CN106053479A (zh) * | 2016-07-21 | 2016-10-26 | 湘潭大学 | 一种基于图像处理的工件外观缺陷的视觉检测系统 |
CN106934803A (zh) * | 2017-03-13 | 2017-07-07 | 珠海格力智能装备有限公司 | 电子器件表面缺陷的检测方法及装置 |
CN107560640A (zh) * | 2017-09-21 | 2018-01-09 | 甘肃远效科技信息咨询有限公司 | 电容检测装置及系统 |
CN108596274A (zh) * | 2018-05-09 | 2018-09-28 | 国网浙江省电力有限公司 | 基于卷积神经网络的图像分类方法 |
CN109085181A (zh) * | 2018-09-14 | 2018-12-25 | 河北工业大学 | 一种用于管路连接件的表面缺陷检测装置及检测方法 |
-
2019
- 2019-04-03 CN CN201910264445.3A patent/CN109978875A/zh active Pending
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102854191A (zh) * | 2012-07-18 | 2013-01-02 | 湖南大学 | 高速铁轨表面缺陷的实时视觉检测与识别方法 |
CN105044114A (zh) * | 2015-04-27 | 2015-11-11 | 中国人民解放军理工大学 | 一种电解电容外观包装缺陷图像检测系统与方法 |
CN204903416U (zh) * | 2015-07-14 | 2015-12-23 | 南京工程学院 | 柱式电容外观自动检测装置 |
CN105425076A (zh) * | 2015-12-11 | 2016-03-23 | 厦门理工学院 | 一种基于bp神经网络算法进行变压器故障识别的方法 |
CN106053479A (zh) * | 2016-07-21 | 2016-10-26 | 湘潭大学 | 一种基于图像处理的工件外观缺陷的视觉检测系统 |
CN106934803A (zh) * | 2017-03-13 | 2017-07-07 | 珠海格力智能装备有限公司 | 电子器件表面缺陷的检测方法及装置 |
CN107560640A (zh) * | 2017-09-21 | 2018-01-09 | 甘肃远效科技信息咨询有限公司 | 电容检测装置及系统 |
CN108596274A (zh) * | 2018-05-09 | 2018-09-28 | 国网浙江省电力有限公司 | 基于卷积神经网络的图像分类方法 |
CN109085181A (zh) * | 2018-09-14 | 2018-12-25 | 河北工业大学 | 一种用于管路连接件的表面缺陷检测装置及检测方法 |
Non-Patent Citations (2)
Title |
---|
崔雪红: "基于深度学习的轮胎缺陷无损检测与分类技术研究", 《中国博士学位论文全文数据库 工程科技Ⅱ辑》 * |
苏朝阳: "基于图像处理的电容器外观缺陷检测系统研究与开发", 《中国优秀硕士学位论文全文数据库 工程科技Ⅱ辑》 * |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021082923A1 (zh) * | 2019-10-28 | 2021-05-06 | 上海悦易网络信息技术有限公司 | 一种电子设备屏幕区域瑕疵检测方法与设备 |
CN112862744A (zh) * | 2019-12-04 | 2021-05-28 | 电子科技大学 | 一种基于超声图像的电容内部缺陷智能检测方法 |
CN112862744B (zh) * | 2019-12-04 | 2023-03-14 | 电子科技大学 | 一种基于超声图像的电容内部缺陷智能检测方法 |
CN111062919B (zh) * | 2019-12-12 | 2023-11-03 | 苏州韦士肯检测科技有限公司 | 一种轴承套圈外观缺陷检测方法 |
CN111062919A (zh) * | 2019-12-12 | 2020-04-24 | 韦士肯(厦门)智能科技有限公司 | 一种轴承套圈外观缺陷检测方法 |
CN111089865A (zh) * | 2019-12-19 | 2020-05-01 | 国网甘肃省电力公司电力科学研究院 | 一种基于f-rcnn的缺陷电缆检测方法 |
CN111089865B (zh) * | 2019-12-19 | 2024-02-27 | 国网甘肃省电力公司电力科学研究院 | 一种基于f-rcnn的缺陷电缆检测方法 |
WO2022120665A1 (zh) * | 2020-12-09 | 2022-06-16 | 电子科技大学 | 一种基于深度学习的电容缺陷智能检测方法 |
CN113421271A (zh) * | 2021-05-17 | 2021-09-21 | 江苏大学 | 基于mlp多层神经网络的天然皮革缺陷分割方法 |
CN114577410A (zh) * | 2022-03-04 | 2022-06-03 | 浙江蓝能燃气设备有限公司 | 一种用于瓶组容器氦气泄漏的自动检漏系统及应用方法 |
CN114550020A (zh) * | 2022-04-21 | 2022-05-27 | 深圳一心一医智能科技有限公司 | 一种消毒机器人的生物体图像智能识别方法及系统 |
WO2024044942A1 (zh) * | 2022-08-30 | 2024-03-07 | 宁德时代新能源科技股份有限公司 | 视觉检测系统的点检方法和装置 |
CN115880285A (zh) * | 2023-02-07 | 2023-03-31 | 南通南铭电子有限公司 | 一种铝电解电容器引出线异常识别方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109978875A (zh) | 一种电容器外观缺陷识别方法及识别装置 | |
KR102114357B1 (ko) | 풀링 타입에 대한 정보를 포함하는 테이블을 작성하기 위한 방법, 장치 및 이를 이용한 테스팅 방법, 테스팅 장치 | |
CN104063876B (zh) | 一种交互式图像分割方法 | |
CN108345911A (zh) | 基于卷积神经网络多级特征的钢板表面缺陷检测方法 | |
CN110738101A (zh) | 行为识别方法、装置及计算机可读存储介质 | |
CN107945153A (zh) | 一种基于深度学习的路面裂缝检测方法 | |
CN108665005A (zh) | 一种利用dcgan提高基于cnn图像识别性能的方法 | |
CN105574550A (zh) | 一种车辆识别方法及装置 | |
CN108830285A (zh) | 一种基于Faster-RCNN的加强学习的目标检测方法 | |
CN107358223A (zh) | 一种基于yolo的人脸检测与人脸对齐方法 | |
CN110414559A (zh) | 智能零售柜商品目标检测统一框架的构建方法及商品识别方法 | |
CN108961675A (zh) | 基于卷积神经网络的跌倒检测方法 | |
CN109598287A (zh) | 基于深度卷积生成对抗网络样本生成的外观瑕疵检测方法 | |
WO2020192442A1 (zh) | 利用少数标注图像生成分类器的方法 | |
CN109886357A (zh) | 一种基于特征融合的自适应权重深度学习目标分类方法 | |
CN106022273A (zh) | 基于动态样本选择策略的bp神经网络手写体识别系统 | |
CN112417990B (zh) | 一种考试学生违规行为识别方法及系统 | |
CN105893946A (zh) | 一种正面人脸图像的检测方法 | |
CN109993057A (zh) | 语义识别方法、装置、设备及计算机可读存储介质 | |
CN101667245A (zh) | 基于支持向量新颖检测分类器级联的人脸检测方法 | |
CN109598307A (zh) | 数据筛选方法、装置、服务器及存储介质 | |
CN110264444A (zh) | 基于弱分割的损伤检测方法及装置 | |
CN108197636A (zh) | 一种基于深度多视点特征的稻谷检测和分类方法 | |
CN108764302A (zh) | 一种基于颜色特征和词袋特征的票据图像分类方法 | |
CN108460336A (zh) | 一种基于深度学习的行人检测方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190705 |