CN105938563A - 一种基于图像纹理的焊缝表面缺陷识别方法 - Google Patents

一种基于图像纹理的焊缝表面缺陷识别方法 Download PDF

Info

Publication number
CN105938563A
CN105938563A CN201610231852.0A CN201610231852A CN105938563A CN 105938563 A CN105938563 A CN 105938563A CN 201610231852 A CN201610231852 A CN 201610231852A CN 105938563 A CN105938563 A CN 105938563A
Authority
CN
China
Prior art keywords
image
weld
sigma
error
texture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610231852.0A
Other languages
English (en)
Inventor
焦敬品
李思源
常予
何存富
吴斌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing University of Technology
Original Assignee
Beijing University of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing University of Technology filed Critical Beijing University of Technology
Priority to CN201610231852.0A priority Critical patent/CN105938563A/zh
Publication of CN105938563A publication Critical patent/CN105938563A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/211Selection of the most significant subset of features
    • G06F18/2111Selection of the most significant subset of features by using evolutionary computational techniques, e.g. genetic algorithms
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8851Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2413Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on distances to training or reference patterns
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • G06N3/084Backpropagation, e.g. using gradient descent
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8851Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • G01N2021/8887Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges based on image processing techniques
    • G01N2021/8893Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges based on image processing techniques providing a video image and a processed signal for helping visual decision

Abstract

一种基于图像纹理的焊缝表面缺陷识别方法,根据采集图像标准,设置微型CCD相机拍摄参数;将采集到的真彩色图像转化为灰度图,创建灰度共生矩阵;分别提取0°、45°、90°和135°方向上的能量、对比度、相关性、同质性、熵和方差共24个特征参数,并将提取的特征参数进行归一化处理;利用训练样本图像训练BP神经网络,设置神经网络的神经元数、隐含层传递函数、输出层传递函数和训练算法传递函数;将测试样本特征参数输入到训练后的BP神经网络中,进行分类识别;计算测试样本与各类不同表面焊接质量训练样本的匹配度,完成测试样本表面焊接质量的自动分类识别。

Description

一种基于图像纹理的焊缝表面缺陷识别方法
技术领域
本发明涉及一种焊缝表面缺陷分类识别的方法,特别是基于灰度共生矩阵和BP神经网络的自动分类识别方法。该方法适用于焊缝表面缺陷的分类识别,属于无损检测领域。
背景技术
焊接技术广泛应用在工业生产中,目前大型工件多采用自动焊接工艺完成。在生产线式自动焊接过程中,难免会出现影响产品质量的孔洞、焊瘤、偏焊和断焊等缺陷。焊缝表面缺陷的存在会大大降低焊接产品在服役期内的安全性,轻则出现产品失效泄漏,重则导致产品发生脆性断裂,引起严重的人员伤亡。因此,针对工件焊缝表面焊接质量的检测,作为排除工件重大安全隐患的方法,具有重要的工程实用价值。
常用的焊接检测手段有目视检测、射线检测、超声波检测和渗透检测等,其中目视检测是焊件外观检测中最为常用的检测方式。目视检测是焊件检测人员通过放大镜、游标卡尺以及咬边测量器等检测工具,结合产品的检验标准、焊件检测人员的专业知识及检测经验,对焊件表面的质量状况进行检测评判,以确定该构件是否达到设计要求。目视检测法由于其检测方法灵活性强、操作简单等优点得到了广泛应用。然而,由于检测人员长期注视焊缝,眼部疲劳,容易出现漏检、误判等情况。此外,由于检验人员素质、技能和经验的不同,对质量检验标准的把握多有偏差,导致检测等级受检测人员的主观影响因素较大,很难对缺陷做出规范化、客观化和标准化的判断。为了提高焊缝的焊接质量,改善检测人员的检测条件,迫切需要实现焊缝焊接质量自动化检测。
灰度共生矩阵分析法广泛应用在地质学、农林业学和医学的检测和分类中,但目前并没有应用到焊缝的缺陷识别检测中,Soh等[Texture analysis ofSAR sea iceimagery using gray level co-occurrence matrices[J].Geoscience&Remote SensingIEEE Transactions on,1999,37(2):780-795]研究海水冰块的纹理特征,确定海冰形状的灰度共生矩阵描述参数、方向特性和位移参数,研究结果表明基于灰度共生矩阵可以定量分析海冰表面形状。Narvankar等[Assessment ofsoftX-ray imaging for detection offungal infection inwheat[J].Biosystems Engineering,2009,103(1):49-56]对利用X射线采集到的小麦图像分析研究,确定小麦纹理的灰度共生矩阵描述参数,结合神经网络有效的对健康的小麦和受真菌感染的小麦识别分类。
针对目前焊缝表面缺陷检测,研究不同焊接质量焊缝表面的纹理特征,借助图像识别与人工智能网络技术,提出一种焊缝表面缺陷图像自动分类识别的方法,用于实现自动焊接工艺下多种焊缝表面缺陷的自动识别与分类。本方法采用CCD相机采集焊缝焊接表面图像,直观、可靠且易操作。在缺陷识别分类方面,利用灰度共生矩阵识别图片中焊缝缺陷的多种特征参数,同时,通过训练BP神经网络实现不同类型缺陷的自动分类。
发明内容
本发明的设计在于提供一种焊缝表面缺陷分类识别的方法,特别是基于图像智能技术的自动分类识别方法。本方法基于灰度共生矩阵获取分类识别的特征参数,分类器采用BP神经网络对焊件工件焊缝表面缺陷分类与识别。本发明提出的一种基于图像纹理的焊缝表面缺陷图像自动分类识别的方法是通过以下步骤实现的:
步骤一:图像采集。
对表面焊接质量不同的焊缝进行图像采集,为了保证图像的清晰度,修正外部光线所造成的误差。对相机的内参进行修改,使其达到最好的成像效果
步骤二:图像前期处理。
将真彩色RGB图像转化为灰度图像,并将灰度图像创建为灰度共生矩阵。步骤三:训练样本焊缝表面特征参数提取。
(1)为减小由拍摄角度引起的操作误差,并根据焊缝缺陷纹理的差异性及计算效率,设置灰度共生矩阵计算中的像素距离,设置步进方向为0°、45°、90°和135°方向,生成灰度共生矩阵。
(2)提取灰度共生矩阵中的能量、对比度、相关性、同质性、熵和方差等特征参数,并将提取的特征参数进行归一化处理。
步骤四:BP神经网络的创建。
(1)将训练样本输入到神经网络中,对神经网络的神经元数、隐含层传递函数、输出层传递函数和训练算法传递函数进行设置。
(2)对神经网络进行多次训练,确定最终的权值与阈值矩阵。优化出最佳的神经网络结构参数。
步骤五:测试样本缺陷分类识别。
将测试样本图像重复步骤二和步骤三。并将得到的测试样本特征参数输入到步骤四创建的BP神经网络中,进行分类识别。
步骤六:焊接质量评定。
测试样本经过神经网络识别,计算出测试样本与各类不同表面焊接质量训练样本的匹配度,选取与5类不同表面焊接质量测试样本匹配度最高的一类,识别出测试样本的表面焊接质量。
本发明提出的一种基于图像纹理的焊缝表面缺陷识别方法,其基本原理如下:
对表面焊接质量不同的焊缝进行图像采集,图像中的纹理通常体现了焊缝表面的纹理特性信息,即物体表面的凹凸不平特性。焊接质量良好的焊缝呈鱼鳞纹状,其纹理较为均匀。而焊接质量较差的焊缝其表面纹理较为杂乱,变化不规则,而不同的缺陷的纹理特征也各不相同。而灰度共生矩阵能够很好的描述不规则的纹理,区分微小的形态差异,能较好的提取焊缝表面的有效特征参数。从焊缝图像中提取出其灰度共生矩阵,获取焊缝表面的特征参数,实现焊缝表面纹理特征的数学表征。
G(i,j)表示灰度共生矩阵,为了简化运算,矩阵元素常用概率值表示,即将元素G(i,j)除以各元素之和S,得到各元素都小于1的归一化值
(1)能量(ASM)
A S M = Σ i = 1 k Σ j = 1 k ( G ^ ( i , j ) ) 2 - - - ( 1 )
能量反映了焊缝图像灰度分布的均匀程度和纹理粗细度。若共生矩阵中的全部数值均相等,则能量值较小,反之,若矩阵数值不等,则能量值较大。即能量值可表明焊缝纹理变化的均匀度和规则程度。
(2)对比度(Contrast)
C O N = Σ n = 0 k - 1 n 2 { Σ | i - j | = n G ^ ( i , j ) } - - - ( 2 )
焊缝图像的对比度可以理解为焊缝图像的清晰度,即焊缝纹理清晰程度。在焊缝图像中,纹理的纹沟越深,则其对比度CON越大。
(3)相关性(Correlation)
C O R = Σ i = 1 k Σ j = 1 k ( i j ) G ^ ( i , j ) - u i u j S i S j - - - ( 3 )
其中:
u i = Σ i = 1 k Σ j = 1 k i · G ^ ( i , j ) - - - ( 4 )
u j = Σ i = 1 k Σ j = 1 k j · G ^ ( i , j ) - - - ( 5 )
s 2 i = Σ i = 1 k Σ j = 1 k G ^ ( i , j ) ( i - u i ) 2 - - - ( 6 )
s 2 j = Σ i = 1 k Σ j = 1 k G ^ ( i , j ) ( j - u j ) 2 - - - ( 7 )
相关性反应了焊缝图像纹理的一致性。如果焊缝图像中有水平方向纹理,则水平方向矩阵的COR大于其余方向矩阵的COR值。相关性可度量空间灰度共生矩阵元素在行列方向上的相似程度,其值大小反映了焊缝图像中局部灰度的相关性。当矩阵元素值均匀相等时,相关值大,反之相关值较小。
(4)同质性(Homogeneity)
H O M = Σ i = 1 k Σ j = 1 k G ^ ( i , j ) 1 + | i - j | - - - ( 8 )
同质性可度量焊缝图像纹理局部变化量的大小。若某区域内焊缝图像纹理的变化量较小,则该区域的同质性较大。
(5)熵(entropy)
E N T = - Σ i = 1 k Σ j = 1 k G ^ ( i , j ) log G ^ ( i , j ) - - - ( 9 )
熵能反映焊缝图像所具有的信息量,表示焊缝图像中纹理的非均匀程度或复杂程度。
(6)方差(variance)
V A R = Σ i = 1 k Σ j = 1 k ( i - u ) 2 G ^ ( i , j ) - - - ( 10 )
其中u为灰度共生矩阵各元素的均值。
本方法采用BP神经网络对焊缝表面缺陷图像进行分类识别,BP网络能学习和存贮大量的输入-输出模式映射关系。它的学习规则是使用最速下降法,通过反向传播来不断调整网络的权值和阈值,使网络的误差平方和最小。BP神经网络模型拓扑结构包括输入层、隐含层和输出层。
BP算法由数据流的前向计算(正向传播)和误差信号的反向传播两个过程构成。正向传播时,数据流的传播方向为从输入层到隐含层再到输出层,每层神经元的状态只影响下一层神经元。若在输出层得不到期望的输出,则转向误差信号的反向传播流程,误差信号的传播方向为输出层到隐含层再到输入层。通过这两个过程的交替进行,在权向量空间执行误差函数梯度下降策略,动态迭代搜索一组权向量,使网络误差函数达到最小值,从而完成信息提取和记忆过程。
设BP神经网络的输入层有n个节点,隐含层有q个神经元,输出层有m个神经元,输入层与隐含层之间的权值为vki,隐含层与输出层之间的权值为wjk,隐含层的传递函数为f1(·),输出层的传递函数为f2(·)。
隐含层节点的输出为(将阈值写入求和项中):
z k = f 1 ( Σ i = 0 n v k i x i ) , ( k = 1 , 2 , ... , q ) - - - ( 11 )
输出层节点的输出为:
y j = f 2 ( Σ k = 0 q w j k z k ) , ( j = 1 , 2 , ... , m ) - - - ( 12 )
由式(11)和式(12),BP神经网络就完成了n维空间向量(输入层)对m维空间向量(输出层)的近似映射。
误差函数即目标函数设输入P个学习样本(x1x2…xp),第p个样本输入网络后得到输出为定义第p个样本的误差为Ep,P个样本的均方误差为E。为了避免迭代次数增加,运算速度减慢,保证每个样本的误差减少,因此选取均方误差作为目标函数。
均方误差:
根据公式(13)计算网络全局误差E,并与预设的期望误差比较,判断网络误差是否满足要求。当误差达到期望误差的精度或学习次数大于设定的迭代次数时,则网络学习结束;否则,选取下一个学习样本及对应的期望输出,返回到神经元的净输入值进行数据的正向传播,进入下一轮学习,直至满足误差精度或学习次数时结束学习过程。最终显示出焊缝焊接质量的识别结果。
本发明具有以下优点:1)将灰度共生矩阵作为分类识别的特征参数,有效区分焊缝表面不同焊接质量的纹理特征。2)基于BP神经网络对焊缝表面焊接质量进行评定,避免了图像拍摄对缺陷识别的影响,实现了焊缝表面缺陷的分类识别。
附图说明
图1训练样本图像示意图
图2焊接质量良好样本特征参数示意表
图3断焊样本特征参数示意表
图4孔洞样本特征参数示意表
图5焊偏样本特征参数示意表
图6焊瘤样本特征参数示意表
图7 BP神经网络训练特征表现曲线图
图8 BP神经网络训练拟合曲线图
图9 BP神经网络输出结果表
图10为本方法的实施流程图
具体实施方式
下面结合具体实验对本发明作进一步说明:
本实验实施过程包括以下步骤:
实验选取5类不同表面焊接质量的图像(良好、孔洞、焊偏、焊瘤和断焊),共5×50幅图像作为训练样本。另外采集5×8幅图像作为测试样本。
步骤一:图像采集。
对表面焊接质量不同的焊缝进行图像采集,为了保证图像的清晰度,修正外部光线所造成的误差。采集前对相机的白平衡红设置为112、白平衡绿设置为62、白平衡蓝设置为123、色相设置为15、饱和度设置为130和对比度设置为-4。采集的图像为真彩色RGB图像。(不同焊接质量的焊缝如图1所示)
步骤二:图像前期处理。
将真彩色RGB图像转化为灰度图像,并将灰度图像创建为灰度共生矩阵。步骤三:样本焊缝表面特征参数提取。
(1)为减小由拍摄角度引起的操作误差,并根据焊缝缺陷纹理的差异性及计算效率,设置灰度共生矩阵计算中的像素距离为3,设置步进方向为0°、45°、90°和135°方向,生成灰度共生矩阵。
(2)提取灰度共生矩阵中的能量、对比度、相关性、同质性、熵和方差等特征参数,并将提取的特征参数进行归一化处理(不同焊接质量的焊缝的特征参数如图2到图6所示)
步骤四:BP神经网络的创建。
(1)将训练样本输入到神经网络中,并设置神经网络的初始值参数,其中输入层设置为24,输出层设置为5,隐含层神经元设置为20。隐含层传递函数选择logsig传递函数,输出层传递函数选择logsig传递函数,训练算法选择梯度下降自适应学习训练函数。设定最大训练次数为3000次,训练精度为0.01,学习率为0.01,显示训练间隔为50。
(2)对神经网络进行多次训练,确定最终的权值与阈值矩阵。优化出最佳的神经网络结构参数。(训练特征表现曲线如图7所示)
步骤五:测试样本缺陷分类识别。
将测试样本的40幅图像重复步骤二和步骤三。将得到的测试样本特征参数输入到步骤四训练完成的BP神经网络中,进行分类识别。(训练拟合曲线如图8所示)
步骤六:焊接质量评定。
测试样本经过神经网络识别,计算出测试样本与各类不同表面焊接质量训练样本的匹配度,选取与5类不同表面焊接质量测试样本匹配度最高的一类,识别出测试样本的表面焊接质量。本实验中,共40幅测试样本图片,其中37幅测试图像的焊接缺陷识别准确,1幅出现断焊误判(将断焊缺陷误判为焊瘤缺陷),2幅出现偏焊误判(将偏焊缺陷误判为焊瘤缺陷),此方法的总体分类识别正确率为92.5%。(BP神经网络输出结果如图9所示)。
本方法的实施流程图如图10所示。
以上是本发明的一个典型应用,本发明的应用不限于此。

Claims (4)

1.一种基于图像纹理的焊缝表面缺陷识别方法,其特征在于:本方法是通过以下步骤实现的,
步骤一:图像采集;
对表面焊接质量不同的焊缝进行图像采集,为了保证图像的清晰度,修正外部光线所造成的误差;对相机的内参进行修改,使其达到最好的成像效果
步骤二:图像前期处理;
将真彩色RGB图像转化为灰度图像,并将灰度图像创建为灰度共生矩阵;
步骤三:训练样本焊缝表面特征参数提取;
(1)为减小由拍摄角度引起的操作误差,并根据焊缝缺陷纹理的差异性及计算效率,设置灰度共生矩阵计算中的像素距离,设置步进方向为0°、45°、90°和135°方向,生成灰度共生矩阵;
(2)提取灰度共生矩阵中的能量、对比度、相关性、同质性、熵和方差等特征参数,并将提取的特征参数进行归一化处理;
步骤四:BP神经网络的创建;
(1)将训练样本输入到神经网络中,对神经网络的神经元数、隐含层传递函数、输出层传递函数和训练算法传递函数进行设置;
(2)对神经网络进行多次训练,确定最终的权值与阈值矩阵;优化出最佳的神经网络结构参数;
步骤五:测试样本缺陷分类识别;
将测试样本图像重复步骤二和步骤三;并将得到的测试样本特征参数输入到步骤四创建的BP神经网络中,进行分类识别;
步骤六:焊接质量评定;
测试样本经过神经网络识别,计算出测试样本与各类不同表面焊接质量训练样本的匹配度,选取与5类不同表面焊接质量测试样本匹配度最高的一类,识别出测试样本的表面焊接质量。
2.根据权利要求1所述的一种基于图像纹理的焊缝表面缺陷识别方法,其特征在于:其基本原理如下,
对表面焊接质量不同的焊缝进行图像采集,图像中的纹理通常体现了焊缝表面的纹理特性信息,即物体表面的凹凸不平特性;焊接质量良好的焊缝呈鱼鳞纹状,其纹理较为均匀;而焊接质量较差的焊缝其表面纹理较为杂乱,变化不规则,而不同的缺陷的纹理特征也各不相同;而灰度共生矩阵能够很好的描述不规则的纹理,区分微小的形态差异,能较好的提取焊缝表面的有效特征参数;从焊缝图像中提取出其灰度共生矩阵,获取焊缝表面的特征参数,实现焊缝表面纹理特征的数学表征;
G(i,j)表示灰度共生矩阵,为了简化运算,矩阵元素常用概率值表示,即将元素G(i,j)除以各元素之和S,得到各元素都小于1的归一化值
(1)能量
A S M = Σ i = 1 k Σ j = 1 k ( G ^ ( i , j ) ) 2 - - - ( 1 )
能量反映了焊缝图像灰度分布的均匀程度和纹理粗细度;若共生矩阵中的全部数值均相等,则能量值较小,反之,若矩阵数值不等,则能量值较大;即能量值可表明焊缝纹理变化的均匀度和规则程度;
(2)对比度
C O N = Σ n = 0 k - 1 n 2 { Σ | i - j | = n G ^ ( i , j ) } - - - ( 2 )
焊缝图像的对比度可以理解为焊缝图像的清晰度,即焊缝纹理清晰程度;在焊缝图像中,纹理的纹沟越深,则其对比度CON越大;
(3)相关性(Correlation)
C O R = Σ i = 1 k Σ j = 1 k ( i j ) G ^ ( i , j ) - u i u j S i S j - - - ( 3 )
其中:
u i = Σ i = 1 k Σ j = 1 k i · G ^ ( i , j ) - - - ( 4 )
u j = Σ i = 1 k Σ j = 1 k j · G ^ ( i , j ) - - - ( 5 )
s 2 i = Σ i = 1 k Σ j = 1 k G ^ ( i , j ) ( i - u i ) 2 - - - ( 6 )
s 2 j = Σ i = 1 k Σ j = 1 k G ^ ( i , j ) ( j - u j ) 2 - - - ( 7 )
相关性反应了焊缝图像纹理的一致性;如果焊缝图像中有水平方向纹理,则水平方向矩阵的COR大于其余方向矩阵的COR值;相关性可度量空间灰度共生矩阵元素在行列方向上的相似程度,其值大小反映了焊缝图像中局部灰度的相关性;当矩阵元素值均匀相等时,相关值大,反之相关值较小;
(4)同质性
H O M = Σ i = 1 k Σ j = 1 k G ^ ( i , j ) 1 + | i - j | - - - ( 8 )
同质性可度量焊缝图像纹理局部变化量的大小;若某区域内焊缝图像纹理的变化量较小,则该区域的同质性较大;
(5)熵
E N T = - Σ i = 1 k Σ j = 1 k G ^ ( i , j ) log G ^ ( i , j ) - - - ( 9 )
熵能反映焊缝图像所具有的信息量,表示焊缝图像中纹理的非均匀程度或复杂程度;
(6)方差
V A R = Σ i = 1 k Σ j = 1 k ( i - u ) 2 G ^ ( i , j ) - - - ( 10 )
其中u为灰度共生矩阵各元素的均值;
本方法采用BP神经网络对焊缝表面缺陷图像进行分类识别,BP网络能学习和存贮大量的输入-输出模式映射关系;它的学习规则是使用最速下降法,通过反向传播来不断调整网络的权值和阈值,使网络的误差平方和最小;BP神经网络模型拓扑结构包括输入层、隐含层和输出层。
3.根据权利要求2所述的一种基于图像纹理的焊缝表面缺陷识别方法,其特征在于:BP算法由数据流的前向计算即正向传播和误差信号的反向传播两个过程构成;正向传播时,数据流的传播方向为从输入层到隐含层再到输出层,每层神经元的状态只影响下一层神经元;若在输出层得不到期望的输出,则转向误差信号的反向传播流程,误差信号的传播方向为输出层到隐含层再到输入层;通过这两个过程的交替进行,在权向量空间执行误差函数梯度下降策略,动态迭代搜索一组权向量,使网络误差函数达到最小值,从而完成信息提取和记忆过程;
设BP神经网络的输入层有n个节点,隐含层有q个神经元,输出层有m个神经元,输入层与隐含层之间的权值为vki,隐含层与输出层之间的权值为wjk,隐含层的传递函数为f1(·),输出层的传递函数为f2(·);
隐含层节点的输出为(将阈值写入求和项中):
z k = f 1 ( Σ i = 0 n v k i x i ) , ( k = 1 , 2 , ... , q ) - - - ( 11 )
输出层节点的输出为:
y j = f 2 ( Σ k = 0 q w j k z k ) , ( j = 1 , 2 , ... , m ) - - - ( 12 )
由式(11)和式(12),BP神经网络就完成了n维空间向量即输入层对m维空间向量即输出层的近似映射;
误差函数即目标函数设输入P个学习样本(x1x2…xp),第p个样本输入网络后得到输出为定义第p个样本的误差为Ep,P个样本的均方误差为E;为了避免迭代次数增加,运算速度减慢,保证每个样本的误差减少,因此选取均方误差作为目标函数;
均方误差:
根据公式(13)计算网络全局误差E,并与预设的期望误差比较,判断网络误差是否满足要求;当误差达到期望误差的精度或学习次数大于设定的迭代次数时,则网络学习结束;否则,选取下一个学习样本及对应的期望输出,返回到神经元的净输入值进行数据的正向传播,进入下一轮学习,直至满足误差精度或学习次数时结束学习过程;最终显示出焊缝焊接质量的识别结果。
4.根据权利要求1所述的一种基于图像纹理的焊缝表面缺陷识别方法,其特征在于:
本实验实施过程包括以下步骤:
实验选取5类不同表面焊接质量的图像,图像分别为良好、孔洞、焊偏、焊瘤和断焊,共5×50幅图像作为训练样本;另外采集5×8幅图像作为测试样本;
步骤一:图像采集;
对表面焊接质量不同的焊缝进行图像采集,为了保证图像的清晰度,修正外部光线所造成的误差;采集前对相机的白平衡红设置为112、白平衡绿设置为62、白平衡蓝设置为123、色相设置为15、饱和度设置为130和对比度设置为-4;采集的图像为真彩色RGB图像;
步骤二:图像前期处理;
将真彩色RGB图像转化为灰度图像,并将灰度图像创建为灰度共生矩阵;步骤三:样本焊缝表面特征参数提取;
(1)为减小由拍摄角度引起的操作误差,并根据焊缝缺陷纹理的差异性及计算效率,设置灰度共生矩阵计算中的像素距离为3,设置步进方向为0°、45°、90°和135°方向,生成灰度共生矩阵;
(2)提取灰度共生矩阵中的能量、对比度、相关性、同质性、熵和方差等特征参数,并将提取的特征参数进行归一化处理(
步骤四:BP神经网络的创建;
(1)将训练样本输入到神经网络中,并设置神经网络的初始值参数,其中输入层设置为24,输出层设置为5,隐含层神经元设置为20;隐含层传递函数选择logsig传递函数,输出层传递函数选择logsig传递函数,训练算法选择梯度下降自适应学习训练函数;设定最大训练次数为3000次,训练精度为0.01,学习率为0.01,显示训练间隔为50;
(2)对神经网络进行多次训练,确定最终的权值与阈值矩阵;优化出最佳的神经网络结构参数;
步骤五:测试样本缺陷分类识别;
将测试样本的40幅图像重复步骤二和步骤三;将得到的测试样本特征参数输入到步骤四训练完成的BP神经网络中,进行分类识别;
步骤六:焊接质量评定;
测试样本经过神经网络识别,计算出测试样本与各类不同表面焊接质量训练样本的匹配度,选取与5类不同表面焊接质量测试样本匹配度最高的一类,识别出测试样本的表面焊接质量。
CN201610231852.0A 2016-04-14 2016-04-14 一种基于图像纹理的焊缝表面缺陷识别方法 Pending CN105938563A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610231852.0A CN105938563A (zh) 2016-04-14 2016-04-14 一种基于图像纹理的焊缝表面缺陷识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610231852.0A CN105938563A (zh) 2016-04-14 2016-04-14 一种基于图像纹理的焊缝表面缺陷识别方法

Publications (1)

Publication Number Publication Date
CN105938563A true CN105938563A (zh) 2016-09-14

Family

ID=57151351

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610231852.0A Pending CN105938563A (zh) 2016-04-14 2016-04-14 一种基于图像纹理的焊缝表面缺陷识别方法

Country Status (1)

Country Link
CN (1) CN105938563A (zh)

Cited By (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106373124A (zh) * 2016-09-21 2017-02-01 哈尔滨工业大学 基于灰度共生矩阵与ransac的工业产品表面缺陷视觉检测方法
CN106442543A (zh) * 2016-10-14 2017-02-22 龚新林 一种在线识别金属工件连续激光焊缝表面质量的检测方法
CN106845524A (zh) * 2016-12-28 2017-06-13 田欣利 一种渗碳淬火钢磨削表层组织与烧伤智能识别方法
CN107657633A (zh) * 2017-09-28 2018-02-02 哈尔滨工业大学 一种基于bp神经网络和传感器数据采集的土地秸秆覆盖率测算方法
CN108008006A (zh) * 2017-12-07 2018-05-08 广东工业大学 一种焊缝缺陷检测方法、装置、设备及系统
CN108037190A (zh) * 2017-11-03 2018-05-15 大连理工大学 一种基于神经网络的高温炉管损伤级别智能评定方法
CN108053479A (zh) * 2017-11-23 2018-05-18 河海大学 一种基于扩展有限元法的多缺陷群无损识别方法
CN108053024A (zh) * 2017-11-17 2018-05-18 江西理工大学 钥匙牙花识别方法
CN108061735A (zh) * 2017-12-01 2018-05-22 工业互联网创新中心(上海)有限公司 零部件表面缺陷的识别方法和装置
CN108154502A (zh) * 2017-12-22 2018-06-12 王华锋 一种基于卷积神经网络的通孔焊点识别方法
CN108645865A (zh) * 2018-05-10 2018-10-12 中国石油天然气集团有限公司 一种基于ccd的埋弧焊钢管焊缝焊偏量参数的测量方法
CN108956653A (zh) * 2018-05-31 2018-12-07 广东正业科技股份有限公司 一种焊点质量检测方法、系统、装置及可读存储介质
CN109115812A (zh) * 2018-08-23 2019-01-01 中国石油大学(北京) 一种焊缝底片缺陷识别方法及系统
CN109239206A (zh) * 2018-06-20 2019-01-18 诸暨市逍遥管道科技有限公司 缺陷自动识别辅助电熔接头智能相控阵的超声检测方法
CN109300116A (zh) * 2018-09-03 2019-02-01 广东工业大学 基于机器学习的激光焊接在线缺陷识别方法
CN109859199A (zh) * 2019-02-14 2019-06-07 浙江科技学院 一种sd-oct图像的淡水无核珍珠质量检测的方法
CN110009011A (zh) * 2019-03-20 2019-07-12 华南理工大学 一种基于图像处理的焊点识别方法
CN110147570A (zh) * 2019-04-11 2019-08-20 江苏大学 一种基于纹理和形状特征的电子元件识别的方法
CN110188734A (zh) * 2019-06-06 2019-08-30 秒针信息技术有限公司 焊缝类型的识别方法及装置
CN110378407A (zh) * 2019-07-12 2019-10-25 台州宏创电力集团有限公司 基于纹理参数和神经网络的电力设备图像识别方法和装置
CN110487403A (zh) * 2019-09-02 2019-11-22 常州市武进区半导体照明应用技术研究院 一种led光谱功率分布的预测方法
CN110930352A (zh) * 2019-02-25 2020-03-27 研祥智能科技股份有限公司 物体色差缺陷检测方法、装置、计算机设备及存储介质
CN110977292A (zh) * 2019-12-12 2020-04-10 天津博迈科海洋工程有限公司 一种海洋平台模块结构焊缝自动检测方法
WO2020077694A1 (zh) * 2018-10-17 2020-04-23 深圳市微埃智能科技有限公司 基于神经网络的焊接工艺参数推荐方法、装置及机器人
CN111239160A (zh) * 2020-03-24 2020-06-05 刘素青 应用大数据服务器的分布均匀等级测量平台
CN111429761A (zh) * 2020-02-28 2020-07-17 中国人民解放军陆军军医大学第二附属医院 一种骨髓细胞形态学人工智能模拟教学系统及其方法
CN111462092A (zh) * 2020-04-02 2020-07-28 浙江工业大学 一种基于深度学习的保温杯表面的缺陷检测方法
CN111950395A (zh) * 2020-07-24 2020-11-17 中南大学 一种车辆识别方法、装置及计算机存储介质
CN112098417A (zh) * 2020-09-07 2020-12-18 中国工程物理研究院激光聚变研究中心 环形抛光中沥青抛光盘表面钝化状态在线监测装置与方法
US10875125B2 (en) 2017-06-20 2020-12-29 Lincoln Global, Inc. Machine learning for weldment classification and correlation
CN112233116A (zh) * 2020-12-11 2021-01-15 常州微亿智造科技有限公司 基于邻域决策与灰度共生矩阵描述的凹凸痕视觉检测方法
CN112288066A (zh) * 2020-10-28 2021-01-29 杭州海康威视数字技术股份有限公司 图形码打码和识别方法、装置及系统
CN113207286A (zh) * 2018-12-19 2021-08-03 松下知识产权经营株式会社 外观检查装置及使用该外观检查装置判定焊接部位有无形状不良及形状不良的种类的判定精度的提高方法、焊接系统及使用该焊接系统的工件的焊接方法
CN113252666A (zh) * 2021-04-30 2021-08-13 大连恒锐科技股份有限公司 能够同时采集多角度鞋面图像的足迹采集仪及其图像处理方法
CN113291055A (zh) * 2021-04-14 2021-08-24 西安理工大学 一种人工智能的柔版印刷压力预测方法
CN113436162A (zh) * 2021-06-23 2021-09-24 湖南国天电子科技有限公司 一种水下机器人液压油管道表面焊缝缺陷识别方法及装置
CN113538325A (zh) * 2020-04-21 2021-10-22 通用汽车环球科技运作有限责任公司 评估点焊完整性的系统和方法
CN114445403A (zh) * 2022-04-02 2022-05-06 武汉亿联塑胶有限公司 一种基于图像处理的pe塑料管焊接控制方法
CN116805416A (zh) * 2023-08-21 2023-09-26 中国电建集团华东勘测设计研究院有限公司 排水管道缺陷识别模型训练方法、排水管道缺陷识别方法
CN117032095A (zh) * 2023-07-21 2023-11-10 泰安市特种设备检验研究院 一种数字化特种设备焊工考试车间管理方法及系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100288734A1 (en) * 2009-05-14 2010-11-18 Dave Vivek R Controlled weld pool volume control of welding processes
CN103425990A (zh) * 2012-05-15 2013-12-04 中国科学院声学研究所 一种基于纹理特征的合成孔径声纳目标检测方法
CN105488528A (zh) * 2015-11-26 2016-04-13 北京工业大学 基于改进自适应遗传算法的神经网络图像分类方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100288734A1 (en) * 2009-05-14 2010-11-18 Dave Vivek R Controlled weld pool volume control of welding processes
CN103425990A (zh) * 2012-05-15 2013-12-04 中国科学院声学研究所 一种基于纹理特征的合成孔径声纳目标检测方法
CN105488528A (zh) * 2015-11-26 2016-04-13 北京工业大学 基于改进自适应遗传算法的神经网络图像分类方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
史进伟等: ""基于BP神经网络的枪弹外观缺陷识别与分类"", 《中国测试》 *
吴斌等: ""基于神经网络的超导波钢杆缺陷识别"", 《工程力学》 *

Cited By (52)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106373124B (zh) * 2016-09-21 2019-01-08 哈尔滨工业大学 基于灰度共生矩阵与ransac的工业产品表面缺陷视觉检测方法
CN106373124A (zh) * 2016-09-21 2017-02-01 哈尔滨工业大学 基于灰度共生矩阵与ransac的工业产品表面缺陷视觉检测方法
CN106442543A (zh) * 2016-10-14 2017-02-22 龚新林 一种在线识别金属工件连续激光焊缝表面质量的检测方法
CN106845524B (zh) * 2016-12-28 2020-01-03 田欣利 一种渗碳淬火钢磨削表层组织与烧伤智能识别方法
CN106845524A (zh) * 2016-12-28 2017-06-13 田欣利 一种渗碳淬火钢磨削表层组织与烧伤智能识别方法
US10875125B2 (en) 2017-06-20 2020-12-29 Lincoln Global, Inc. Machine learning for weldment classification and correlation
CN107657633A (zh) * 2017-09-28 2018-02-02 哈尔滨工业大学 一种基于bp神经网络和传感器数据采集的土地秸秆覆盖率测算方法
CN108037190A (zh) * 2017-11-03 2018-05-15 大连理工大学 一种基于神经网络的高温炉管损伤级别智能评定方法
CN108053024A (zh) * 2017-11-17 2018-05-18 江西理工大学 钥匙牙花识别方法
CN108053479A (zh) * 2017-11-23 2018-05-18 河海大学 一种基于扩展有限元法的多缺陷群无损识别方法
CN108053479B (zh) * 2017-11-23 2020-05-12 河海大学 一种基于扩展有限元法的多缺陷群无损识别方法
CN108061735A (zh) * 2017-12-01 2018-05-22 工业互联网创新中心(上海)有限公司 零部件表面缺陷的识别方法和装置
CN108008006A (zh) * 2017-12-07 2018-05-08 广东工业大学 一种焊缝缺陷检测方法、装置、设备及系统
CN108154502A (zh) * 2017-12-22 2018-06-12 王华锋 一种基于卷积神经网络的通孔焊点识别方法
CN108645865A (zh) * 2018-05-10 2018-10-12 中国石油天然气集团有限公司 一种基于ccd的埋弧焊钢管焊缝焊偏量参数的测量方法
CN108956653A (zh) * 2018-05-31 2018-12-07 广东正业科技股份有限公司 一种焊点质量检测方法、系统、装置及可读存储介质
CN109239206B (zh) * 2018-06-20 2023-05-23 诸暨市逍遥管道科技有限公司 缺陷自动识别辅助电熔接头智能相控阵的超声检测方法
CN109239206A (zh) * 2018-06-20 2019-01-18 诸暨市逍遥管道科技有限公司 缺陷自动识别辅助电熔接头智能相控阵的超声检测方法
CN109115812A (zh) * 2018-08-23 2019-01-01 中国石油大学(北京) 一种焊缝底片缺陷识别方法及系统
CN109300116A (zh) * 2018-09-03 2019-02-01 广东工业大学 基于机器学习的激光焊接在线缺陷识别方法
WO2020077694A1 (zh) * 2018-10-17 2020-04-23 深圳市微埃智能科技有限公司 基于神经网络的焊接工艺参数推荐方法、装置及机器人
CN113207286A (zh) * 2018-12-19 2021-08-03 松下知识产权经营株式会社 外观检查装置及使用该外观检查装置判定焊接部位有无形状不良及形状不良的种类的判定精度的提高方法、焊接系统及使用该焊接系统的工件的焊接方法
CN109859199A (zh) * 2019-02-14 2019-06-07 浙江科技学院 一种sd-oct图像的淡水无核珍珠质量检测的方法
CN109859199B (zh) * 2019-02-14 2020-10-16 浙江科技学院 一种sd-oct图像的淡水无核珍珠质量检测的方法
CN110930352A (zh) * 2019-02-25 2020-03-27 研祥智能科技股份有限公司 物体色差缺陷检测方法、装置、计算机设备及存储介质
CN110930352B (zh) * 2019-02-25 2024-02-13 研祥智慧物联科技有限公司 物体色差缺陷检测方法、装置、计算机设备及存储介质
WO2020173177A1 (zh) * 2019-02-25 2020-09-03 研祥智能科技股份有限公司 物体色差缺陷检测方法、装置、计算机设备及存储介质
CN110009011A (zh) * 2019-03-20 2019-07-12 华南理工大学 一种基于图像处理的焊点识别方法
CN110147570A (zh) * 2019-04-11 2019-08-20 江苏大学 一种基于纹理和形状特征的电子元件识别的方法
CN110188734A (zh) * 2019-06-06 2019-08-30 秒针信息技术有限公司 焊缝类型的识别方法及装置
CN110378407A (zh) * 2019-07-12 2019-10-25 台州宏创电力集团有限公司 基于纹理参数和神经网络的电力设备图像识别方法和装置
CN110487403A (zh) * 2019-09-02 2019-11-22 常州市武进区半导体照明应用技术研究院 一种led光谱功率分布的预测方法
CN110977292A (zh) * 2019-12-12 2020-04-10 天津博迈科海洋工程有限公司 一种海洋平台模块结构焊缝自动检测方法
CN111429761A (zh) * 2020-02-28 2020-07-17 中国人民解放军陆军军医大学第二附属医院 一种骨髓细胞形态学人工智能模拟教学系统及其方法
CN111239160B (zh) * 2020-03-24 2020-12-25 航天云网数据研究院(广东)有限公司 应用大数据服务器的分布均匀等级测量平台
CN111239160A (zh) * 2020-03-24 2020-06-05 刘素青 应用大数据服务器的分布均匀等级测量平台
CN111462092A (zh) * 2020-04-02 2020-07-28 浙江工业大学 一种基于深度学习的保温杯表面的缺陷检测方法
CN113538325A (zh) * 2020-04-21 2021-10-22 通用汽车环球科技运作有限责任公司 评估点焊完整性的系统和方法
CN113538325B (zh) * 2020-04-21 2023-09-15 通用汽车环球科技运作有限责任公司 评估点焊完整性的系统和方法
CN111950395A (zh) * 2020-07-24 2020-11-17 中南大学 一种车辆识别方法、装置及计算机存储介质
CN111950395B (zh) * 2020-07-24 2023-11-24 中南大学 一种车辆识别方法、装置及计算机存储介质
CN112098417A (zh) * 2020-09-07 2020-12-18 中国工程物理研究院激光聚变研究中心 环形抛光中沥青抛光盘表面钝化状态在线监测装置与方法
CN112288066A (zh) * 2020-10-28 2021-01-29 杭州海康威视数字技术股份有限公司 图形码打码和识别方法、装置及系统
CN112288066B (zh) * 2020-10-28 2023-05-09 杭州海康威视数字技术股份有限公司 图形码打码和识别方法、装置及系统
CN112233116A (zh) * 2020-12-11 2021-01-15 常州微亿智造科技有限公司 基于邻域决策与灰度共生矩阵描述的凹凸痕视觉检测方法
CN113291055A (zh) * 2021-04-14 2021-08-24 西安理工大学 一种人工智能的柔版印刷压力预测方法
CN113252666A (zh) * 2021-04-30 2021-08-13 大连恒锐科技股份有限公司 能够同时采集多角度鞋面图像的足迹采集仪及其图像处理方法
CN113436162A (zh) * 2021-06-23 2021-09-24 湖南国天电子科技有限公司 一种水下机器人液压油管道表面焊缝缺陷识别方法及装置
CN114445403B (zh) * 2022-04-02 2022-06-24 武汉亿联塑胶有限公司 一种基于图像处理的pe塑料管焊接控制方法
CN114445403A (zh) * 2022-04-02 2022-05-06 武汉亿联塑胶有限公司 一种基于图像处理的pe塑料管焊接控制方法
CN117032095A (zh) * 2023-07-21 2023-11-10 泰安市特种设备检验研究院 一种数字化特种设备焊工考试车间管理方法及系统
CN116805416A (zh) * 2023-08-21 2023-09-26 中国电建集团华东勘测设计研究院有限公司 排水管道缺陷识别模型训练方法、排水管道缺陷识别方法

Similar Documents

Publication Publication Date Title
CN105938563A (zh) 一种基于图像纹理的焊缝表面缺陷识别方法
CN105957086B (zh) 一种基于优化神经网络模型的遥感图像变化检测方法
CN106530284A (zh) 基于图像识别的焊点类型检测和装置
CN106022380A (zh) 基于深度学习的个体身份识别方法
CN105046277B (zh) 特征显著性在图像质量评价中的鲁棒机理研究方法
CN105938620A (zh) 一种小口径管内焊缝表面缺陷识别装置
CN107657603A (zh) 一种基于智能视觉的工业外观检测方法
CN108021938A (zh) 一种冷轧带钢表面缺陷在线检测方法以及检测系统
CN107862331A (zh) 一种基于时间序列及cnn的不安全行为识别方法及系统
CN107844797A (zh) 一种基于深度图像的哺乳母猪姿态自动识别的方法
CN110097129A (zh) 基于轮廓波分组特征金字塔卷积的遥感目标检测方法
CN106920215A (zh) 一种全景图像配准效果的检测方法
CN104103033B (zh) 图像实时处理方法
CN106920224A (zh) 一种评估拼接图像清晰度的方法
CN106204618A (zh) 基于机器视觉的产品包装表面缺陷检测与分类方法
CN109684967A (zh) 一种基于ssd卷积网络的大豆植株茎荚识别方法
CN106910192A (zh) 一种基于卷积神经网络的图像融合效果评估方法
CN105528638A (zh) 灰色关联分析法确定卷积神经网络隐层特征图个数的方法
CN106991666A (zh) 一种适用于多尺寸图片信息的病害图像识别方法
CN104680524A (zh) 一种叶类蔬菜病害诊断方法
CN109001211A (zh) 基于卷积神经网络的长输管道焊缝检测系统及方法
CN106991428A (zh) 基于自适应池化模型的害虫图像识别方法
CN111161224A (zh) 基于深度学习的铸件内部缺陷分级评估系统及方法
CN113657294B (zh) 一种基于计算机视觉的作物病虫害检测方法及系统
CN110503623A (zh) 一种基于卷积神经网络的识别输电线路上鸟巢缺陷的方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20160914

RJ01 Rejection of invention patent application after publication