CN104537363A - 基于视觉检测系统的橱柜调节脚全自动装配控制方法 - Google Patents

基于视觉检测系统的橱柜调节脚全自动装配控制方法 Download PDF

Info

Publication number
CN104537363A
CN104537363A CN201510033222.8A CN201510033222A CN104537363A CN 104537363 A CN104537363 A CN 104537363A CN 201510033222 A CN201510033222 A CN 201510033222A CN 104537363 A CN104537363 A CN 104537363A
Authority
CN
China
Prior art keywords
profile
sample
port
represent
screw thread
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510033222.8A
Other languages
English (en)
Inventor
尹珅
王光
黄增辉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Harbin Institute of Technology
Original Assignee
Harbin Institute of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Harbin Institute of Technology filed Critical Harbin Institute of Technology
Priority to CN201510033222.8A priority Critical patent/CN104537363A/zh
Publication of CN104537363A publication Critical patent/CN104537363A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2411Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on the proximity to a decision surface, e.g. support vector machines
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00Programme-control systems
    • G05B19/02Programme-control systems electric
    • G05B19/04Programme control other than numerical control, i.e. in sequence controllers or logic controllers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/19Recognition using electronic means
    • G06V30/192Recognition using electronic means using simultaneous comparisons or correlations of the image signals with a plurality of references
    • G06V30/194References adjustable by an adaptive method, e.g. learning

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Data Mining & Analysis (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Automation & Control Theory (AREA)
  • Databases & Information Systems (AREA)
  • Multimedia (AREA)
  • Image Analysis (AREA)

Abstract

基于视觉检测系统的橱柜调节脚全自动装配控制方法,属于全自动装配领域。现有的塑料橱柜调节脚全自动装配过程中,由于采用人工装配方法,存在装配效率低、装配成品误差率高的问题。一种基于视觉检测系统的橱柜调节脚全自动装配控制方法,选取两组工件图片作为训练样本;对选取的训练样本进行图像缩放和去噪声处理,得到两种原始灰度图像,对灰度图像分别进行二值化处理,提取ROI区域,提取ROI区域的轮廓特征得到轮廓图像,利用轮廓图像的像素值计算得到轮廓Hu矩,将轮廓Hu矩作为样本,生成训练模型;对待检测工件进行拍摄,重复上述过程获得待测图像的轮廓Hu矩,利用训练模型惊醒识别判定;若判定结果为需要翻转,通过控制系统实现对待检测调节脚元件进行翻转操作。

Description

基于视觉检测系统的橱柜调节脚全自动装配控制方法
技术领域
本发明涉及一种基于视觉检测系统的橱柜调节脚全自动装配控制方法。
背景技术
调节脚在人类生活和生产中随处可见,主要用于在家具下方,利用其具有的螺纹进行调节,实现调节家具高度、防滑、防震等目的。目前调节脚装配过程主要依靠工人手工装配,人为因素导致组装效率低、组装件精度差等诸多弊端。特别地,由于圆柱型调节脚元件B两端中的一端具有内螺纹,另一端为光滑的,在装配的过程中,需要人工鉴别出有内螺纹的一端,使之与原件A配合,现在主要是依靠人工操作,由于人为因素,导致安装工件误差率高,安装效率低。圆柱型原件B的材质为塑料,重量较轻,端口有无内螺纹无法从重量、形状上区分,无法利用提升机这一类机械系统识别端口有无内螺纹。
由于上述提升机自身原理的限制,只能保证圆柱型原件B的轴线平行于传送带的运动方向,不能保证有内螺纹的端口朝向运动方向,因此,需要一个全自动的识别翻转装置,使圆柱型原件B的带内螺纹端口朝向运动方向。
发明内容
本发明的目的是为了解决现有的塑料橱柜调节脚全自动装配过程中,由于采用人工装配方法,存在装配效率低、装配成品误差率高的问题,而提出一种基于视觉检测系统的橱柜调节脚全自动装配控制方法。
一种基于视觉检测系统的橱柜调节脚全自动装配控制方法,所述翻转判定方法通过以下步骤实现:
步骤一、将调节脚元件的两种端口分类为带内螺纹端口和无内螺纹端口,分别选取一组内螺纹端口和一组无内螺纹端口的图片作为训练样本;
步骤二、分别对步骤一选取的训练样本进行图像缩放和去噪声处理,得到两种原始灰度图像;
步骤三、分别对步骤二得到的原始灰度图像进行二值化处理,并从二值化处理后得到的图像中提取出含有调节脚元件端口的ROI区域;
步骤四、分别利用步骤三提取的含有调节脚元件端口的ROI区域,在步骤二得到的原始灰度图像中提取相应的含有调节脚元件端口的ROI区域;
步骤五、分别提取步骤四中相应的含有调节脚元件端口的ROI区域的轮廓特征,获得轮廓图像;计算轮廓图像的轮廓Hu矩并进行归一化;
步骤六:将步骤五获得的轮廓Hu矩作为样本,利用基于机器学习的分类器对轮廓Hu矩样本进行训练,生成训练集的训练模型:支持向量机SVM分类器和费舍尔判别FDA分类器;
步骤七、利用所述塑料橱柜调节脚全自动装配设备的视觉检测箱内部安装的摄像头和红外光源,对传送至视觉检测箱内部的待检测调节脚元件进行拍摄,将拍摄得到待检测调节脚元件的测试图像进行与步骤二至步骤五相同的预处理,以计算测试图像含有调节脚元件端口的ROI区域的轮廓Hu矩,并进行归一化处理,作为待分类样本;
步骤八、将步骤七计算得到的归一化后的ROI区域的轮廓Hu矩利用步骤六生成的两个训练模型进行识别,其中,费舍尔判别FDA分类器判别公式为:式中,nj表示第j类观测样本的样本个数,Wu表示经过降维选取的u个FDA向量组成的变换矩阵,表示第j类轮廓Hu矩样本的类内离散度矩阵,xi表示轮廓Hu矩样本的向量,表示第j类样本的平均值;支持向量机SVM分类器的判别公式为超平面 f ( x ) = Σ k = 1 M w k x k + q = 0 , 满足 min 1 2 | | w | | 2 + C Σ k = 1 M ζ k , y k ( w T x k + q ) ≥ 1 - ζ k ζ k ≥ 0 , k = 1 , . . . M ;
步骤九、当两个训练模型识别出的结果不一致,则重新执行步骤七和步骤八,直到两个训练模型识别出的结果均为带内螺纹端口朝向传送方向,则将待检测调节脚元件直接用于装配;当两个训练模型识别出的结果均为带内螺纹端口未朝向传送方向,则对该工件进行标记,且执行步骤十;
步骤十、当待检测调节脚元件传送至翻转装置功能区域时,翻转装置则对带有标记的待检测调节脚元件进行首尾调换的翻转操作。
本发明的有益效果为:
本发明方法具有通用性,对不同型号的待检测调节脚元件的拍摄图像均能进行检测,实现通过视觉检测的方法判断出带内螺纹的端口朝向,使调节脚的翻转过程不需人工干扰,进而将调节脚装配过程自动化,使调节脚装配效率提高了60%。
本发明具体是对获得的所需检测的两种端口进行分类,即带内螺纹端口和无内螺纹端口;分别获得这两类端口的若干清晰图片作为训练样本;对训练样本进行缩放、去噪声处理、二值化的预处理,对于预处理后的训练样本进行特征提取并进行处归一化处理;根据获得的处理后的特征空间,利用基于机器学习的分类器进行训练,生成训练集的两种训练模型。二者结合判定,判定结果相同后再进行翻转的判定,识别准确率达到98%,且体现了实时检测的性能。对于待检测的测试图像进行预处理和特征提取后,利用已经生成的训练模型进行识别,利用支持向量机SVM分类器和费舍尔判别FDA分类器进行训练。通过寻求结构化风险最小来提高学习机泛化能力,实现经验风险和置信范围的最小化,从而达到在统计样本较少的情况下,获得良好的统计规律的目的。
附图说明
图1为本发明涉及的翻转判定方法的流程图;
图2为本发明涉及的带内螺纹端口图片训练样本的原灰度图像;
图3为本发明涉及的无内螺纹端口图片训练样本的原灰度图像;
图4为本发明涉及的二值化后得到的灰度图像;
图5为将图4中白色部分提取出来得到的灰度图像;
图6为将图5边缘检测得到轮廓;
具体实施方式
具体实施方式一:本实施方式的基于视觉检测系统的橱柜调节脚全自动装配控制方法,所述翻转判定方法通过以下步骤实现,如图1所示:
步骤一、将调节脚元件的两种端口分类为带内螺纹端口和无内螺纹端口,分别选取一组内螺纹端口和一组无内螺纹端口的图片作为训练样本,如图2、图3所示;
步骤二、分别对步骤一选取的训练样本进行图像缩放和去噪声处理,得到两种原始灰度图像;
步骤三、分别对步骤二得到的原始灰度图像进行二值化处理,并从二值化处理后得到的图像中提取出含有调节脚元件端口的ROI区域;
步骤四、分别利用步骤三提取的含有调节脚元件端口的ROI区域,在步骤二得到的原始灰度图像中提取相应的含有调节脚元件端口的ROI区域;
步骤五、分别提取步骤四中相应的含有调节脚元件端口的ROI区域的轮廓特征,获得轮廓图像;计算轮廓图像的轮廓Hu矩并进行归一化;
步骤六:将步骤五获得的轮廓Hu矩作为样本,利用基于机器学习的分类器对轮廓Hu矩样本进行训练,生成训练集的训练模型:支持向量机SVM分类器和费舍尔判别FDA分类器;
步骤七、利用所述塑料橱柜调节脚全自动装配设备的视觉检测箱内部安装的摄像头和红外光源,对传送至视觉检测箱内部的待检测调节脚元件进行拍摄,将拍摄得到待检测调节脚元件的测试图像进行与步骤二至步骤五相同的预处理,以计算测试图像含有调节脚元件端口的ROI区域的轮廓Hu矩,并进行归一化处理,作为待分类样本;
步骤八、将步骤七计算得到的归一化后的ROI区域的轮廓Hu矩利用步骤六生成的两个训练模型进行识别,其中,费舍尔判别FDA分类器判别公式为:式中,nj表示第j类观测样本的样本个数,Wu表示经过降维选取的u个FDA向量组成的变换矩阵,表示第j类轮廓Hu矩样本的类内离散度矩阵,xi表示轮廓Hu矩样本的向量,表示第j类样本的平均值;支持向量机SVM分类器的判别公式为超平面 f ( x ) = Σ k = 1 M w k x k + q = 0 , 满足 min 1 2 | | w | | 2 + C Σ k = 1 M ζ k , y k ( w T x k + q ) ≥ 1 - ζ k ζ k ≥ 0 , k = 1 , . . . M ;
步骤九、当两个训练模型识别出的结果不一致,则重新执行步骤七和步骤八,直到两个训练模型识别出的结果均为带内螺纹端口朝向传送方向,则将待检测调节脚元件直接用于装配;当两个训练模型识别出的结果均为带内螺纹端口未朝向传送方向,则对该工件进行标记,且执行步骤十;
步骤十、当待检测调节脚元件传送至翻转装置功能区域时,翻转装置则对带有标记的待检测调节脚元件进行首尾调换的翻转操作。
具体实施方式二:
与具体实施方式一不同的是,本实施方式的基于视觉检测系统的橱柜调节脚全自动装配控制方法步骤二所述去噪声处理过程为,根据椒盐噪声和高斯噪声,设计噪声抑制滤波器:式中,抑制噪声是选用以(x,y)为中心的一个图像块内所有像素值,通过该公式重新计算(x,y)点的像素值;a、b表示常数参量,分别代表距离坐标(x,y)的横、纵最远像素距离,f(x,y)表示原图像坐标(x,y)的图像值;w(s,t)表示滤波器系数,g(xz,yz)表示去噪声处理以后图像坐标(x,y)的图像值。
具体实施方式三:
与具体实施方式一或二不同的是,本实施方式的所述基于视觉检测系统的橱柜调节脚全自动装配控制方法,步骤三所述二值化处理的过程为,将灰度值属于[0,255]的灰度图像上的像素点通过公式 g ( x , y ) = 0 , f ( x , y ) < &delta; 255 , f ( x , y ) &GreaterEqual; &delta; 进行处理,使灰度图像各像素点的灰度值设置为0或255;式中,f(x,y)为原图像坐标(x,y)像素点的灰度值;g(x,y)为二值化处理后的图像坐标(x,y)像素点的灰度值;δ为阈值,由图像阈值分割求取:选用双峰法,在原灰度图像中,背景和目标在图像的直方图各自形成一个波峰,两个波峰之间形成一个波谷,选择波谷对应的灰度值作为阈值δ。
具体实施方式四:
与具体实施方式三不同的是,本实施方式的基于视觉检测系统的橱柜调节脚全自动装配控制方法,步骤四所述在原始灰度图像中提取相应的含有调节脚元件端口的ROI区域的过程为,通过HOUGH变换算法开源,成熟的算法,在步骤三中二值化处理后的灰度图像中,如图4,将圆柱型待检测调节脚元件的端口区域的白色圆形提取出来,并在原始灰度图像中提取出相同图像区域,如图5,作为对应灰度图像,也就是含有调节脚元件端口的ROI区域。
具体实施方式五:
与具体实施方式一、二或四不同的是,本实施方式的基于视觉检测系统的橱柜调节脚全自动装配控制方法,步骤五所述提取步骤四中相应的含有调节脚元件端口的ROI区域的轮廓特征,利用跨平台计算机视觉库Opencv中的canny算法提取轮廓特征,如图6。
具体实施方式六:
与具体实施方式五不同的是,本实施方式的基于视觉检测系统的橱柜调节脚全自动装配控制方法,步骤五所述计算轮廓图像的轮廓Hu矩的过程为,利用利用跨平台计算机视觉库Opencv中的cvContoursMoments算法计算轮廓Hu矩,轮廓Hu矩为m维向量X=[x1 x2 … xm]。
具体实施方式七:
与具体实施方式一、二、四或六不同的是,本实施方式的基于视觉检测系统的橱柜调节脚全自动装配控制方法,步骤五所述归一化处理过程为,通过归一化处理公式:对轮廓Hu矩进行处理,得到归一化处理范围为0-1之间的归一化轮廓Hu矩Y=[y1 y2 … ym],以提高学习机泛化能力,实现经验风险和置信范围的最小化,从而达到在统计样本较少的情况下,获得良好的统计规律的目的;式中,xi表示样本的向量,xj表示第j维的数据,yj代表归一化后的第j维的数据。
具体实施方式八:
与具体实施方式七不同的是,本实施方式的基于视觉检测系统的橱柜调节脚全自动装配控制方法,步骤八所述利用步骤六生成的两个训练模型进行识别的过程为,选用支持向量机SVM分类器和费舍尔判别FDA分类器分别对传送方向的待检测调节脚元件的端口种类进行判定,若支持向量机SVM分类器和费舍尔判别FDA分类器对传送方向的待检测调节脚元件的端口种类的判定结果同为带内螺纹端口或同为无内螺纹端口,则判定结束;若支持向量机SVM分类器和费舍尔判别FDA分类器对传送方向的待检测调节脚元件的端口种类的判定结果不是同为带内螺纹端口或同为无内螺纹端口,则重复步骤七至步骤九,重新拍摄图像,对图像处理,并利用支持向量机SVM分类器和费舍尔判别FDA分类器分别进行判定,直到判定结果相同。
具体实施方式九:
与具体实施方式六不同的是,本实施方式的基于视觉检测系统的橱柜调节脚全自动装配控制方法,所述支持向量机SVM分类器进行识别的过程为:
第一、利用样本集对支持向量机SVM分类器进行训练确定出一个分界线,带内螺纹端口和无内螺纹端口两种状态的轮廓Hu矩样本在高维空间分界线为超平面:wk表示对应权值,且
超平面需要满足: min 1 2 | | w | | 2 + C &Sigma; k = 1 M &zeta; k , y k ( w T e k + v ) &GreaterEqual; 1 - &zeta; k &zeta; k &GreaterEqual; 0 , k = 1 , . . . M ; 式中w表示权重向量,q表示常数,C表示惩罚参数,M表示输入的训练样本的数量,
第二、将确定的超平面通过拉格朗日方法解得:用于判定预处理后的训练样本种类;式中ei是第i个支持向量所对应的标签,当有内螺纹的标记为-1,无内螺纹的标记为1,αi是第i个支持向量所对应的拉格朗日乘子,ei是第i个支持向量,ej是第j个输入的预处理后的训练样本,K为核函数且K(ei,ej)=exp(-r||ei-ej||2),核函数K是为了将特征空间从低维空间映射到高维空间,r表示常数常量,有成熟的最优选用方法。
具体实施方式十:
与具体实施方式八或九不同的是,本实施方式的基于视觉检测系统的橱柜调节脚全自动装配控制方法,所述费舍尔判别FDA分类器进行识别的过程为,
第一、FDA分类器中,令n表示带内螺纹端口轮廓Hu矩特征样本和无内螺纹端口轮廓Hu矩样本的总和;m表示轮廓Hu矩的维数;p表示轮廓Hu矩样本类别个数;nj表示第j类观测样本的样本个数;Xi表示第i个轮廓Hu矩样本的轮廓Hu矩;将所有的训练样本存入矩阵Γ∈Rn×m中,则矩阵Γ第i行的转置就是向量Xi
第二、利用上一步设置的量值,定义总体离散度矩阵式中,表示带内螺纹端口观测样本和无内螺纹端口观测样本的总和的平均值向量,得第j类轮廓Hu矩样本的类内离散度矩阵式中,Γj表示属于第j类轮廓Hu矩样本的向量Xi的集合,表示第j类轮廓Hu矩样本的平均值;
定义类内离散度矩阵:
定义类内离散度矩阵:nj表示第j类观测样本的样本个数,即带内螺纹端口观测样本或无内螺纹端口样本数量;
第三、利用上一步定义的类内离散度矩阵Sw和类内离散度矩阵Sw获得FDA目标函数: max v &NotEqual; 0 v T S b v v T S w v ;
第四、利用Sbwk=λkSwwk求取特征值特征向量wk,通过特征值特征向量wk计算出FDA向量;
第五、在模式分类系统中,带内螺纹端口观测样本或者无内螺纹端口观测样本被分配到i类的最大判别函数值:gi(x)≥gj(x),i≠j中,寻求出最小结构化风险;gi(x)表示i类轮廓Hu矩样本判别函数,即为对待检测工件的带内螺纹端口是否朝向传送方向进行判定的判定公式: g i ( x ) = - 1 2 ( x - x &OverBar; j ) T W u ( 1 n j - 1 W u T S j W u ) - 1 W u T ( x - x &OverBar; j ) + ln [ p ( w i ) ] - 1 2 ln [ det ( 1 n j - 1 W u T S j W u ) ] , x∈Rm表示一个m维轮廓Hu矩,p(wi)表示先验经验概率,Wu表示经过降维选取的u个FDA向量组成的变换矩阵。
具体实施方式十一:
与具体实施方式八或九不同的是,本实施方式的基于视觉检测系统的橱柜调节脚全自动装配控制方法,所述特征值特征向量wk为广义特征值特征向量wk

Claims (10)

1.一种基于视觉检测系统的橱柜调节脚全自动装配控制方法,其特征在于:所述翻转判定方法通过以下步骤实现:
步骤一、将调节脚元件的两种端口分类为带内螺纹端口和无内螺纹端口,分别选取一组内螺纹端口和一组无内螺纹端口的图片作为训练样本;
步骤二、分别对步骤一选取的训练样本进行图像缩放和去噪声处理,得到两种原始灰度图像;
步骤三、分别对步骤二得到的原始灰度图像进行二值化处理,并从二值化处理后得到的图像中提取出含有调节脚元件端口的ROI区域;
步骤四、分别利用步骤三提取的含有调节脚元件端口的ROI区域,在步骤二得到的原始灰度图像中提取相应的含有调节脚元件端口的ROI区域;
步骤五、分别提取步骤四中相应的含有调节脚元件端口的ROI区域的轮廓特征,获得轮廓图像;计算轮廓图像的轮廓Hu矩并进行归一化;
步骤六:将步骤五获得的轮廓Hu矩作为样本,利用基于机器学习的分类器对轮廓Hu矩样本进行训练,生成训练集的训练模型:支持向量机SVM分类器和费舍尔判别FDA分类器;
步骤七、利用所述塑料橱柜调节脚全自动装配设备的视觉检测箱内部安装的摄像头和红外光源,对传送至视觉检测箱内部的待检测调节脚元件进行拍摄,将拍摄得到待检测调节脚元件的测试图像进行与步骤二至步骤五相同的预处理,以计算测试图像含有调节脚元件端口的ROI区域的轮廓Hu矩,并进行归一化处理,作为待分类样本;
步骤八、将步骤七计算得到的归一化后的ROI区域的轮廓Hu矩利用步骤六生成的两个训练模型进行识别,其中,费舍尔判别FDA分类器判别公式为:式中,nj表示第j类观测样本的样本个数,Wu表示经过降维选取的u个FDA向量组成的变换矩阵,表示第j类轮廓Hu矩样本的类内离散度矩阵,xi表示轮廓Hu矩样本的向量,表示第j类样本的平均值;支持向量机SVM分类器的判别公式为超平面 f ( x ) = &Sigma; k = 1 M w k x k + q = 0 , 满足 min 1 2 | | w | | 2 + C &Sigma; k = 1 M &zeta; k , y k ( w T x k + q ) &GreaterEqual; 1 - &zeta; k &zeta; k &GreaterEqual; 0 , k = 1 , . . . M ;
步骤九、当两个训练模型识别出的结果不一致,则重新执行步骤七和步骤八,直到两个训练模型识别出的结果均为带内螺纹端口朝向传送方向,则将待检测调节脚元件直接用于装配;当两个训练模型识别出的结果均为带内螺纹端口未朝向传送方向,则对该工件进行标记,且执行步骤十;
步骤十、当待检测调节脚元件传送至翻转装置功能区域时,翻转装置则对带有标记的待检测调节脚元件进行首尾调换的翻转操作。
2.根据权利要求1所述基于视觉检测系统的橱柜调节脚全自动装配控制方法,其特征在于:步骤二所述去噪声处理过程为,根据椒盐噪声和高斯噪声,设计噪声抑制滤波器: g ( x z , y z ) = &Sigma; s = - a a &Sigma; t = - b b w ( s , t ) f ( x + s , y + t ) &Sigma; s = - a a &Sigma; t = - b b w ( s , t ) , 以保持原有信息的真实性;式中,抑制噪声是选用以(x,y)为中心的一个图像块内所有像素值,通过该公式重新计算(x,y)点的像素值;a、b表示常数参量,分别代表距离坐标(x,y)的横、纵最远像素距离,f(x,y)表示原图像坐标(x,y)的图像值;w(s,t)表示滤波器系数,g(xz,yz)表示去噪声处理以后图像坐标(x,y)的图像值。
3.根据权利要求1或2所述基于视觉检测系统的橱柜调节脚全自动装配控制方法,其特征在于:步骤三所述二值化处理的过程为,将灰度值属于[0,255]的灰度图像上的像素点通过公式 g ( x , y ) = 0 , f ( x , y ) < &delta; 255 , f ( x , y ) &GreaterEqual; &delta; 进行处理,使灰度图像各像素点的灰度值设置为0或255;式中,f(x,y)为原图像坐标(x,y)像素点的灰度值;g(x,y)为二值化处理后的图像坐标(x,y)像素点的灰度值;δ为阈值,由图像阈值分割求取。
4.根据权利要求3所述基于视觉检测系统的橱柜调节脚全自动装配控制方法,其特征在于:步骤四所述在原始灰度图像中提取相应的含有调节脚元件端口的ROI区域的过程为,通过HOUGH变换算法,在步骤三中二值化处理后的灰度图像中,将圆柱型待检测调节脚元件的端口区域提取出来,并在原始灰度图像中提取出相同图像区域,作为对应灰度图像,也就是含有调节脚元件端口的ROI区域。
5.根据权利要求1、2或4所述基于视觉检测系统的橱柜调节脚全自动装配控制方法,其特征在于:步骤五所述提取步骤四中相应的含有调节脚元件端口的ROI区域的轮廓特征,利用跨平台计算机视觉库Opencv中的canny算法提取轮廓特征。
6.根据权利要求5所述基于视觉检测系统的橱柜调节脚全自动装配控制方法,其特征在于:步骤五所述计算轮廓图像的轮廓Hu矩的过程为,利用利用跨平台计算机视觉库Opencv中的cvContoursMoments算法计算轮廓Hu矩,轮廓Hu矩为m维向量X=[x1 x2 … xm]。
7.根据权利要求1、2、4或6所述基于视觉检测系统的橱柜调节脚全自动装配控制方法,其特征在于:步骤五所述归一化处理过程为,通过归一化处理公式:对轮廓Hu矩进行处理,得到归一化处理范围为0-1之间的归一化轮廓Hu矩Y=[y1 y2 … ym];式中,xi表示轮廓Hu矩样本的向量,xj表示第j维的数据,yj代表归一化后的第j维的数据。
8.根据权利要求7所述基于视觉检测系统的橱柜调节脚全自动装配控制方法,其特征在于:步骤八所述利用步骤六生成的两个训练模型进行识别的过程为,选用支持向量机SVM分类器和费舍尔判别FDA分类器分别对传送方向的待检测调节脚元件的端口种类进行判定,若支持向量机SVM分类器和费舍尔判别FDA分类器对传送方向的待检测调节脚元件的端口种类的判定结果同为带内螺纹端口或同为无内螺纹端口,则判定结束;若支持向量机SVM分类器和费舍尔判别FDA分类器对传送方向的待检测调节脚元件的端口种类的判定结果不是同为带内螺纹端口或同为无内螺纹端口,则重复步骤七至步骤九,重新拍摄图像,对图像处理,并利用支持向量机SVM分类器和费舍尔判别FDA分类器分别进行判定,直到判定结果相同。
9.根据权利要求8所述基于视觉检测系统的橱柜调节脚全自动装配控制方法,其特征在于:所述支持向量机SVM分类器进行识别的过程为:
第一、利用样本集对支持向量机SVM分类器进行训练确定出一个分界线,带内螺纹端口和无内螺纹端口两种状态的轮廓Hu矩样本在高维空间分界线为超平面: f ( e ) = &Sigma; k = 1 M w k e k + q = 0 , wk表示对应权值,且
超平面需要满足: min 1 2 | | w | | 2 + C &Sigma; k = 1 M &zeta; k , y k ( w T e k + v ) &GreaterEqual; 1 - &zeta; k &zeta; k &GreaterEqual; 0 , k = 1 , . . . M ; 式中w表示权重向量,q表示常数,C表示惩罚参数,M表示输入的训练样本的数量,
第二、将确定的超平面通过拉格朗日方法解得:
用于判定预处理后的训练样本种类;式中ei是第i个支持向量所对应的标签,αi是第i个支持向量所对应的拉格朗日乘子,ei是第i个支持向量,ej是第j个输入的预处理后的训练样本,K为核函数且K(ei,ej)=exp(-r||ei-ej||2),核函数K是为了将特征空间从低维空间映射到高维空间,r表示常数常量,有成熟的最优选用方法。
10.根据权利要求8或9所述基于视觉检测系统的橱柜调节脚全自动装配控制方法,其特征在于:所述费舍尔判别FDA分类器进行识别的过程为,
第一、FDA分类器中,令n表示带内螺纹端口轮廓Hu矩特征样本和无内螺纹端口轮廓Hu矩样本的总和;m表示轮廓Hu矩的维数;p表示轮廓Hu矩样本类别个数;nj表示第j类观测样本的样本个数;Xi表示第i个轮廓Hu矩样本的轮廓Hu矩;将所有的训练样本存入矩阵Γ∈Rn×m中,则矩阵Γ第i行的转置就是向量Xi
第二、利用上一步设置的量值,定义总体离散度矩阵式中,表示带内螺纹端口观测样本和无内螺纹端口观测样本的总和的平均值向量,得第j类轮廓Hu矩样本的类内离散度矩阵式中,Γj表示属于第j类轮廓Hu矩样本的向量Xi的集合,表示第j类轮廓Hu矩样本的平均值;
定义类内离散度矩阵:
定义类内离散度矩阵:nj表示第j类观测样本的样本个数,即带内螺纹端口观测样本或无内螺纹端口样本数量;
第三、利用上一步定义的类内离散度矩阵Sw和类内离散度矩阵Sw获得FDA目标函数: max v &NotEqual; 0 v T S b v v T S w v ;
第四、利用Sbwk=λkSwwk求取特征值特征向量wk,通过特征值特征向量wk计算出FDA向量;
第五、在模式分类系统中,带内螺纹端口观测样本或者无内螺纹端口观测样本被分配到i类的最大判别函数值:gi(x)≥gj(x),i≠j中,寻求出最小结构化风险;gi(x)表示i类轮廓Hu矩样本判别函数,即为对待检测工件的带内螺纹端口是否朝向传送方向进行判定的判定公式:
g i ( x ) = - 1 2 ( x - x &OverBar; j ) W u ( 1 n j - 1 W u T S j W u ) - 1 W u T ( x - x &OverBar; j ) + ln [ p ( w i ) ] - 1 2 ln [ det ( 1 n j - 1 W u T S j W u ) ] , x∈Rm表示一个m维轮廓Hu矩,p(wi)表示先验经验概率,Wu表示经过降维选取的u个FDA向量组成的变换矩阵。
CN201510033222.8A 2015-01-22 2015-01-22 基于视觉检测系统的橱柜调节脚全自动装配控制方法 Pending CN104537363A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510033222.8A CN104537363A (zh) 2015-01-22 2015-01-22 基于视觉检测系统的橱柜调节脚全自动装配控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510033222.8A CN104537363A (zh) 2015-01-22 2015-01-22 基于视觉检测系统的橱柜调节脚全自动装配控制方法

Publications (1)

Publication Number Publication Date
CN104537363A true CN104537363A (zh) 2015-04-22

Family

ID=52852883

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510033222.8A Pending CN104537363A (zh) 2015-01-22 2015-01-22 基于视觉检测系统的橱柜调节脚全自动装配控制方法

Country Status (1)

Country Link
CN (1) CN104537363A (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104915641A (zh) * 2015-05-27 2015-09-16 上海交通大学 基于android平台获取人脸图像光源方位的方法
CN105160656A (zh) * 2015-08-05 2015-12-16 哈尔滨工业大学 一种基于灰度共生矩阵的管件内螺纹视觉识别系统及方法
CN108182439A (zh) * 2017-12-20 2018-06-19 电子科技大学 一种基于多分类增量学习的分窗口计数方法及装置
CN110210366A (zh) * 2019-07-05 2019-09-06 青岛理工大学 装配拧紧过程样本采集系统、深度学习网络及监测系统
CN111524184A (zh) * 2020-04-21 2020-08-11 湖南视普瑞智能科技有限公司 一种基于3d视觉的智能拆垛方法及拆垛系统
CN111989194A (zh) * 2018-04-17 2020-11-24 Abb瑞士股份有限公司 用于控制机器人臂的方法
CN112420074A (zh) * 2020-11-18 2021-02-26 麦格纳(太仓)汽车科技有限公司 一种汽车后视镜电机异响声音的诊断方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8824742B2 (en) * 2012-06-19 2014-09-02 Xerox Corporation Occupancy detection for managed lane enforcement based on localization and classification of windshield images

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8824742B2 (en) * 2012-06-19 2014-09-02 Xerox Corporation Occupancy detection for managed lane enforcement based on localization and classification of windshield images

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
朱旭锋: ""基于图像不变量特征的自动目标识别技术研究"", 《中国博士学位论文全文数据库 信息科技辑》 *
甘志杰: ""基于Hu矩和支持向量机的静态手势识别及应用"", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *
赵立兴等: ""一种自适应窗口滤波算法研究"", 《燕山大学学报》 *

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104915641A (zh) * 2015-05-27 2015-09-16 上海交通大学 基于android平台获取人脸图像光源方位的方法
CN104915641B (zh) * 2015-05-27 2018-02-02 上海交通大学 基于android平台获取人脸图像光源方位的方法
CN105160656A (zh) * 2015-08-05 2015-12-16 哈尔滨工业大学 一种基于灰度共生矩阵的管件内螺纹视觉识别系统及方法
CN105160656B (zh) * 2015-08-05 2017-11-03 哈尔滨工业大学 一种基于灰度共生矩阵的管件内螺纹视觉识别系统及方法
CN108182439A (zh) * 2017-12-20 2018-06-19 电子科技大学 一种基于多分类增量学习的分窗口计数方法及装置
CN108182439B (zh) * 2017-12-20 2022-03-15 电子科技大学 一种基于多分类增量学习的分窗口计数方法及装置
CN111989194A (zh) * 2018-04-17 2020-11-24 Abb瑞士股份有限公司 用于控制机器人臂的方法
CN110210366A (zh) * 2019-07-05 2019-09-06 青岛理工大学 装配拧紧过程样本采集系统、深度学习网络及监测系统
CN111524184A (zh) * 2020-04-21 2020-08-11 湖南视普瑞智能科技有限公司 一种基于3d视觉的智能拆垛方法及拆垛系统
CN111524184B (zh) * 2020-04-21 2024-01-16 湖南视普瑞智能科技有限公司 一种基于3d视觉的智能拆垛方法及拆垛系统
CN112420074A (zh) * 2020-11-18 2021-02-26 麦格纳(太仓)汽车科技有限公司 一种汽车后视镜电机异响声音的诊断方法

Similar Documents

Publication Publication Date Title
CN104537363A (zh) 基于视觉检测系统的橱柜调节脚全自动装配控制方法
CN108830188B (zh) 基于深度学习的车辆检测方法
CN106096557B (zh) 一种基于模糊训练样本的半监督学习人脸表情识别方法
CN100380396C (zh) 目标检测装置、学习装置、目标检测系统及目标检测方法
CN102609686B (zh) 一种行人检测方法
CN102208038B (zh) 基于视觉词典的图像分类方法
CN102184419B (zh) 基于敏感部位检测的色情图像识别方法
CN101944174B (zh) 车牌字符的识别方法
CN105354568A (zh) 基于卷积神经网络的车标识别方法
CN102930300B (zh) 一种飞机目标识别方法及系统
CN104680127A (zh) 手势识别方法及系统
CN106529578A (zh) 一种基于深度学习的车辆品牌型号精细识别方法与系统
CN106682586A (zh) 一种复杂光照条件下基于视觉的实时车道线检测的方法
CN102867195B (zh) 一种遥感图像多类目标检测和识别方法
CN104021375A (zh) 一种基于机器学习的车型识别方法
CN106682641A (zh) 基于fhog‑lbph特征的图像行人识别方法
CN104636749A (zh) 目标对象检测方法及装置
CN103020582A (zh) 计算机通过视频图像识别车辆类型的方法
CN109785366A (zh) 一种针对遮挡的相关滤波目标跟踪方法
Khan et al. Multi class fruit classification using efficient object detection and recognition techniques
CN104751475B (zh) 一种面向静态图像对象识别的特征点优选匹配方法
CN106503748A (zh) 一种基于s‑sift特征和svm训练器的车型识别算法
Khairdoost et al. Front and rear vehicle detection using hypothesis generation and verification
CN104050460A (zh) 多特征融合的行人检测方法
CN105447457A (zh) 一种基于自适应特征的车牌字符识别方法

Legal Events

Date Code Title Description
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20150422