发明内容
本发明提供一种基于图像处理的塑料制品成型控制方法,以解决现有的问题。获取目标灰度图像;对灰度图像进行滑窗,获取每个滑窗区域灰度共生矩阵,对每个滑窗区域的对比度值进行聚类,得到可能凹坑像素;计算其向心率;获取大于第一阈值所有像素点坐标;以同一凹坑像素点坐标均值做圆,计算梯度符合率;改变设定半径,获取所有最大梯度符合率进行高斯平滑,得到对应角度的边界圆,进行拟合得到凹坑边界。计算梯度变化率,计算凹坑区域破损程度调整对应注塑工艺。
根据本发明提出的技术手段,通过灰度和纹理特征筛选出可能凹陷的像素,可以排除光线与目标本身纹理的干扰,然后通过凹陷的近圆特征并通过梯度进行筛选,能够准确的得到凹陷的清晰边界和破损程度,从而根据凹坑的破损程度进行对应工艺的处理,有效的去除了目标生产过程中的凹坑缺陷,显著提升了生产效率。
本发明采用如下技术方案,一种基于图像处理的塑料制品成型控制方法,包括:
采集目标图像,并进行灰度化处理,得到目标灰度图像。
以设定窗口对所述灰度图像进行滑窗,得到多个滑窗区域,获取每个滑窗区域的灰度共生矩阵,根据所述灰度共生矩阵计算每个滑窗区域的对比度值。
对每个滑窗区域中所有像素点的对比度值进行聚类,得到每个滑窗区域中所有疑似凹坑像素点。
获取每个滑窗区域内每个疑似凹坑像素的梯度方向向量,根据所述梯度方向向量计算每个滑窗区域内每个疑似凹坑像素点的向心率。
将所述每个滑窗区域内每个疑似凹坑像素点的最大向心率作为凹坑概率,获取所述凹坑概率大于第一阈值的所有滑窗,对所述凹坑概率大于第一阈值的所有滑窗进行密度聚类,得到属于同一凹坑的滑窗集合。
获取同一凹坑的滑窗集合中每个凹坑的所有中心点,计算所述每个中心点在不同角度的梯度符合率。
获取所述每个凹坑的所有中心点最大梯度符合率对应角度的边界圆,对所有凹坑中心点对应角度的边界圆进行拟合得到凹坑边界。
根据所述每个凹坑中心点的最大梯度符合率计算凹坑区域的梯度变化率,根据所述凹坑区域的面积和所述梯度变化率计算凹坑区域破损程度;根据所述凹坑区域破损程度调整对应注塑工艺。
进一步的,一种基于图像处理的塑料制品成型控制方法,根据所述每个凹坑中心点的最大梯度符合率计算凹坑区域的梯度变化率,根据所述凹坑区域的面积和所述梯度变化率计算凹坑区域破损程度的方法如下:
计算所述凹坑区域的梯度变化率,表达式为:
其中,
表示以第
个凹坑中心在第
方向的与第
个像素距离为半径的边界圆上像素的梯度均值,g表示第r个凹坑中心在第
个方向上的像素点个数,
表示以第r个凹坑中心在第
个方向上的最大梯度符合率,
表示所述凹坑区域的梯度变化率,
表示第
个方向上边界圆的半径。
根据所述凹坑区域的面积和所述梯度变化率的乘积计算得到凹坑区域破损程度
。
进一步的,一种基于图像处理的塑料制品成型控制方法,计算所述每个凹坑中心点在不同半径圆的边界上每个角度的梯度符合率的方法为:
通过计算同一凹坑中心坐标均值得到每个凹坑中心坐标均值,从坐标均值为射线起点,以水平方向增加角度,计算所述每个凹坑中心点在每个方向的梯度符合率
,表达式为:
其中,
表示第r个凹坑中心点在第
个方向的梯度符合率,
表示第
个凹坑中心在第
方向的第
个像素的梯度值,
表示以第
个凹坑中心在第
方向的与第
个像素距离为半径的边界圆上像素的梯度均值,
表示以第r个凹坑中心点在第
个方向上第h个像素的梯度方向角度,
表示在第
方向的第
个像素基于第
个凹坑中心的标准方向角度,g表示第r个凹坑中心在第
个方向上的像素点个数。
进一步的,一种基于图像处理的塑料制品成型控制方法,获取所述每个凹坑的所有中心点最大梯度符合率对应角度的边界圆,对所有凹坑中心点对应角度的边界圆进行拟合得到凹坑边界,包括:
将第
个方向上的每个凹坑中心点在不同半径的圆的所有最大梯度符合率进行高斯平滑,计算梯度符合率方差,将符合率方差趋于零的方向上半径构成的圆作为边界圆;将每个方向上凹坑中心点对应的边界圆进行拟合,得到凹坑的边界。
进一步的,一种基于图像处理的塑料制品成型控制方法,根据所述梯度方向向量计算每个滑窗区域内每个凹坑像素点的向心率的方法为:
以滑窗内第j个可能凹坑像素为凹坑中心,从水平方向出发,将滑窗划分为8个方向;
获取第j个凹坑中心的梯度方向向量,根据该凹坑中心的梯度方向向量计算该像素8个方向上的平均向心率L,表达式为:
其中,
表示第j个像素的平均向心率,
表示第j个像素的梯度方向向量,
表示第j个像素的标准向心向量,
表示第j个像素所在滑窗内像素的个数。
进一步,一种基于图像处理的塑料制品成型控制方法,将所述每个滑窗区域内每个疑似凹坑像素点的最大向心率作为凹坑概率,获取所述凹坑概率大于第一阈值的所有滑窗的方法为:
当所述最大向心率
时,该滑窗内存在凹坑,保留该滑窗内的像素;
为第一阈值。
进一步的,一种基于图像处理的塑料制品成型控制方法,根据所述凹坑区域破损程度调整对应注塑工艺:
当破损程度
时,将每个注射压力间隔增加
,持续增加压力观测后续目标的破损程度变化情况,直至凹坑消失;
当破损程度
时,将每个注射压力间隔增加
,持续增加压力观测后续目标的破损程度变化情况,直至凹坑消失;
本发明的有益效果是:根据本发明提出的技术手段,通过灰度和纹理特征筛选出可能凹陷的像素,可以排除光线与目标本身纹理的干扰,然后通过凹陷的近圆特征并通过梯度进行筛选,能够准确的得到凹陷的清晰边界和破损程度,从而根据凹坑的破损程度进行对应工艺的处理,有效的去除了目标生产过程中的凹坑缺陷,显著提升了生产效率。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
实施例1
如图1所示,给出了本发明实施例的一种基于图像处理的塑料制品成型控制方法结构示意图,包括:
101.采集目标图像,并进行灰度化处理,得到目标灰度图像。
在本实施例中,目标选择为注塑件,在目标生产线正上方设置一组平行光源和相机,当目标移动至相机正下方时拍摄一张目标图片。
将目标图片从RGB颜色空间转化为灰度图。
102.以设定窗口对所述灰度图像进行滑窗,得到多个滑窗区域,获取每个滑窗区域的灰度共生矩阵,根据所述灰度共生矩阵计算每个滑窗区域的对比度值。
以目标灰度图上的第i行第j列像素为中心,设置一个滑窗,获取滑窗所在位置的图像,并统计生成滑窗内图像的灰度共生矩阵并计算灰度共生矩阵的对比度值。
103.对每个滑窗区域中所有像素点的对比度值进行聚类,得到每个滑窗区域中所有疑似凹坑像素点。
由于目标纹理分为对比度较大的设计结构纹理,该类型纹理有明显的边缘。
对比度处于中间水平的缺陷纹理,该类型的纹理边界不清晰。
对比度较小的小纹理,该类型的纹理长度较小,因而可以通过聚类方式粗略分割出疑似的凹坑像素。
利用K-means聚类对滑窗集合求得的对比度值进行聚类处理,计算各类别的对比度均值,选择对比度均值处于中间的类别集合,该类别集合所对应的滑窗内的像素即为疑似凹坑像素。
104.获取每个滑窗区域内每个疑似凹坑像素的梯度方向向量,根据所述梯度方向向量计算每个滑窗区域内每个疑似凹坑像素点的向心率。
本实施例中分析的是生产过程中的目标凹坑,该凹坑多由于目标在冷却时,发生体积收缩,发生向中心的拉拽力所得到,由于材料的各项同性,该方式所造成的凹坑多成圆形凹坑。同时由于光线处于目标的正上方,因而在该光照条件下,目标凹坑多呈现中间量,四侧暗的一个区域,因而即会出现梯度向心性。
以滑窗内第j个像素为中心,从水平方向出发,每间隔45度,将滑窗划分为8个方向。
获取第k个滑窗第j个像素为中心第q方向直线所通过的第i个像素的梯度方向向量
,并将该梯度方向向量进行单位化处理,所述梯度方向向量计算每个滑窗区域内每个凹坑像素点的向心率。
105.将所述每个滑窗区域内每个疑似凹坑像素点的最大向心率作为凹坑概率,获取所述凹坑概率大于第一阈值的所有滑窗,对所述凹坑概率大于第一阈值的所有滑窗进行密度聚类,得到属于同一凹坑的滑窗集合。
当滑窗内存在凹坑的概率
时则认为该滑窗内高概率存在凹坑,保留该滑窗的像素。
判定可能属于同一凹坑的滑窗集合:基于高概率凹坑中心进行分析,通过密度聚类得聚类结果,因而一个类别内的高概率凹坑中心像素点属于同一凹坑。
106.获取同一凹坑的滑窗集合中每个凹坑的所有中心点,计算所述每个中心点在不同角度的梯度符合率。
获取同一凹坑的凹坑中心集合,通过计算凹坑中心集合坐标均值得到凹坑中心坐标均值坐标
。
以均值凹坑中心坐标为中心像素做半径为R的圆,从圆心为射线起点,以水平方向为0度方向,逆时针密集增加角度,遍历所有像素,计算第r个凹坑中心像素点在第
个角度上的综合梯度符合率。
107.获取所述每个凹坑的所有中心点最大梯度符合率对应角度的边界圆,对所有凹坑中心点对应角度的边界圆进行拟合得到凹坑边界。
改变半径R,将第
个凹坑中心拟合的圆对第
角度方向上像素的弧线描述符合率作为第
个凹坑中心拟合的圆对第
角度方向上像素的弧线描述符合率,此处取名为梯度符合率,该值越大,表明第
个凹坑中心为圆心拟合的圆弧对
方向上像素的描述符合率越大。
类比该方式得到以所有凹坑中心为圆心的所有拟合圆第
方向上像素的描述符合率。
选取第
方向上最大的梯度符合率
所对应的凹坑中心
,类比该方式得到其它方向上的最大梯度符合率所对应的凹坑中心
。
获取以凹坑中心
为圆心在
方向所有圆的符合率,组成符合率序列
,类比该方式得到其他方向上最大符合率所对凹坑中心的各圆上的符合率序列。
将第
个方向上的各圆的符合序列进行高斯平滑,计算各圆梯度符合率最外侧圆的的梯度符合率方差,判断符合率方差趋于零的开始位置,该处圆即为边界圆。
类比该方式得到个方向上的边界圆。利用这些边界圆拟合出凹坑边界。
108.根据所述每个凹坑中心点的最大梯度符合率计算凹坑区域的梯度变化率,根据所述凹坑区域的面积和所述梯度变化率计算凹坑区域破损程度;根据所述凹坑区域破损程度调整对应注塑工艺。
根据凹坑面积和凹坑梯度变化率计算破损度。
凹坑面积为的上述圆拟合出的边界面积S,单位长度内综合梯度变化率
越大,说明该凹坑的凹陷程度越大。
通过破损程度来调整注射压力。
根据本发明提出的技术手段,通过灰度和纹理特征筛选出可能凹陷的像素,可以排除光线与目标本身纹理的干扰,然后通过凹陷的近圆特征并通过梯度进行筛选,能够准确的得到凹陷的清晰边界和破损程度,从而根据凹坑的破损程度进行对应工艺的处理,有效的去除了目标生产过程中的凹坑缺陷,显著提升了生产效率。
实施例2
如图2所述,给出了本发明实施例另一种基于图像处理的塑料制品成型控制方法,包括:
201.采集目标图像,并进行灰度化处理,得到目标灰度图像。
本实施例所针对的情景为:在目标生产线正上方设置一组平行光源和相机,当目标移动至相机正下方时拍摄一张目标图片,通过处理拍摄到的目标图片实现凹坑检测,并计算出破损程度,从而针对性的调整注塑机参数,实现智能控制。
为了减少复杂光线的干扰在目标生产流水线正上方设置一组平行光源;
为了防止出现拍摄到的图片存在较大的透视形变,在流水线正上方设置相机。
当目标随着流水线移动至相机正下方时,相机拍摄一张目标图片,将目标图片从RGB颜色空间转化为灰度图。
202.以设定窗口对所述灰度图像进行滑窗,得到多个滑窗区域,获取每个滑窗区域的灰度共生矩阵,根据所述灰度共生矩阵计算每个滑窗区域的对比度值。
由于需要通过灰度共生矩阵的对比度来分割可能凹坑像素,所以需先获得图像中纹理的主要方向,便于下面获取该方向上的灰度共生矩阵。
利用PCA获得目标灰度图的特征值最大的主成分方向
,该方向为该图像的出现频率最大的纹理方向。
以目标灰度图上的第i行第j列像素为中心,设置一个滑窗,本实施例中,滑窗的大小为11*11,获取滑窗所在位置的图像,并统计生成滑窗内图像的灰度共生矩阵,该灰度共生矩阵基于步长为1,方向为
方向的点对分析生成。计算灰度共生矩阵的对比度值。
2031.对每个滑窗区域中所有像素点的对比度值进行聚类,得到每个滑窗区域中所有疑似凹坑像素点。
由于目标纹理分为对比度较大的设计结构纹理,该类型纹理有明显的边缘,还有对比度处于中间水平的缺陷纹理,该类型的纹理边界不清晰,以及对比度较小的小纹理,该类型的纹理长度较小,因而可以通过聚类方式粗略分割出可能的凹坑像素。
利用K-means聚类对滑窗集合求得的对比度值进行聚类处理,聚类处理的所需的类别数为3。
计算各类别的对比度均值,选择对比度均值处于中间的类别集合,该类别集合所对应的滑窗内的像素即为可能凹坑像素。
2032.获取每个滑窗区域内每个疑似凹坑像素的梯度方向向量,根据所述梯度方向向量计算每个滑窗区域内每个疑似凹坑像素点的向心率。
本实施例分析的是生产过程中的目标凹坑,该凹坑多由于目标在冷却时,发生体积收缩,发生向中心的拉拽力所得到,由于材料的各项同性,该方式所造成的凹坑多成圆形凹坑。同时由于光线处于目标的正上方,因而在该光照条件下,目标凹坑多呈现中间量,四侧暗的一个区域,因而即会出现梯度向心性。
获取每个滑窗区域内每个凹坑像素点的梯度方向向量,根据所述梯度方向向量计算每个滑窗区域内每个凹坑像素点的向心率,包括:
以滑窗内第j个可能凹坑像素为凹坑中心,从水平方向出发,将滑窗划分为8个方向;
获取第j个凹坑中心的梯度方向向量,根据该凹坑中心的梯度方向向量计算该像素8个方向上的平均向心率L,表达式为:
其中,
表示第j个像素的平均向心率,
表示第j个像素的梯度方向向量,
表示第j个像素的标准向心向量,
表示第j个像素所在滑窗内像素的个数。
表示一个凹坑中心像素点的的一个梯度向量与标准向心向量的点积,该值越趋近于1,说明该向量与标准向心向量越同向,即表明梯度向量的向心性越高。
2033.将所述每个滑窗区域内每个疑似凹坑像素点的最大向心率作为凹坑概率,获取所述凹坑概率大于第一阈值的所有滑窗,对所述凹坑概率大于第一阈值的所有滑窗进行密度聚类,得到属于同一凹坑的滑窗集合。
当所述向心率
时,将每个滑窗区域中向心率大于第一阈值对应的像素点作为凹坑中心点,通过对所有凹坑中心点进行密度聚类,得到同一类的像素点属于同一个凹坑,获取每个凹坑中所有凹坑中心点的坐标;
为所述第一阈值。
当每个滑窗区域中所有所述向心率
认为该滑窗内存在凹坑,本实施例中
取0.8。
获取该滑窗中大于第一阈值的像素,通过进行密度聚类得聚类结果,得到一个类别内的大于第一阈值的像素点属于同一凹坑的滑窗集合。
204.获取同一凹坑的滑窗集合中每个凹坑的所有中心点,计算所述每个中心点在不同角度的梯度符合率。
获取同一凹坑的凹坑中心集合,通过计算凹坑中心集合坐标均值得到凹坑中心坐标均值坐标
以均值凹坑中心坐标为中心像素,做半径为R的圆,从圆心为射线起点,以水平方向为0度方向,逆时针密集增加角度,遍历所有像素。
通过计算同一凹坑中心坐标均值得到每个凹坑中心坐标均值,从坐标均值为射线起点,以水平方向增加角度,计算所述每个凹坑中心点在每个方向的梯度符合率
,表达式为:
其中,
表示第r个凹坑中心点在第
个方向的梯度符合率,
表示第
个凹坑中心在第
方向的第
个像素的梯度值,
表示以第
个凹坑中心在第
方向的与第
个像素距离为半径的边界圆上像素的梯度均值,
表示以第r个凹坑中心点在第
个方向上第h个像素的梯度方向角度,
表示在第
方向的第
个像素基于第
个凹坑中心的标准方向角度,g表示第r个凹坑中心在第
个方向上的像素点个数。
所述角度为与以第r个凹坑中心为圆心以该圆心与该像素构成的半径向量同线,方向为指向该圆心方向的角度),
表示该像素的角度偏差影响值,该值越大说明梯度方向角度与标准方向角度偏差越大,
表示以第
个角度上所有像素的综合的梯度偏差值,该值越大,表明圆上像素梯度值与标准梯度值相似性越差,越不能满足凹坑的像素梯度分布规律,造成该现象的原因有,以该凹坑中心拟合的圆不能精确描述第
角度范围内的凹坑弧线,
为第
个凹坑中心拟合的圆对第
角度方向上像素的弧线描述符合率,此处取名为梯度符合率,该值越大,表明第
个凹坑中心为圆心拟合的圆弧对
方向上像素的描述符合率越大。
类比该方式得到以所有凹坑中心为圆心的所拟合圆第
方向上像素的描述符合率。
类比该方式得到以r个凹坑中心为圆心的所拟合圆在所有方向上的描述符合率。
205.获取所述每个凹坑的所有中心点最大梯度符合率对应角度的边界圆,对所有凹坑中心点对应角度的边界圆进行拟合得到凹坑边界。
选取第
方向上最大的梯度符合率
所对应的凹坑中心
,类比该方式得到其它方向上的最大梯度符合率所对应的凹坑中心
。
获取以凹坑中心
为圆心在
方向所有圆的符合率,组成符合率序列,类比该方式得到其他方向上最大符合率所对凹坑中心的各圆上的符合率序列。
将第
个方向上的每个凹坑中心点在不同半径的圆的所有最大梯度符合率进行高斯平滑,计算梯度符合率方差,将符合率方差趋于零的方向上半径构成的圆作为边界圆;将每个方向上凹坑中心点对应的边界圆进行拟合,得到凹坑的边界。
206.根据所述每个凹坑中心点的最大梯度符合率计算凹坑区域的梯度变化率,根据所述凹坑区域的面积和所述梯度变化率计算凹坑区域破损程度;根据所述凹坑区域破损程度调整对应注塑工艺。
计算凹坑区域的梯度变化率,根据所述凹坑区域的面积和所述梯度变化率计算凹坑区域破损程度,包括:
所述凹坑区域的面积为拟合圆构成的凹坑边界面积S;
计算所述凹坑区域的梯度变化率,表达式为:
其中,
表示以第
个凹坑中心在第
方向的与第
个像素距离为半径的边界圆上像素的梯度均值,g表示第r个凹坑中心在第
个方向上的像素点个数,
表示以第r个凹坑中心在第
个方向上的最大梯度符合率,
表示所述凹坑区域的梯度变化率,
表示第
个方向上边界圆的半径。
根据所述凹坑区域的面积和所述梯度变化率计算得到凹坑区域破损程度
。
根据所述凹坑区域破损程度调整对应注塑工艺,包括:
当破损程度
时,将每个注射压力间隔增加
,持续增加压力观测后续目标的破损程度变化情况,直至凹坑消失;
当破损程度
时,将每个注射压力间隔增加
,持续增加压力观测后续目标的破损程度变化情况,直至凹坑消失;
其中,
、
、
为破损阈值,本实施例中,
取值为0,
取值为5,
取值为10。
根据本发明提出的技术手段,通过灰度和纹理特征筛选出可能凹陷的像素,可以排除光线与目标本身纹理的干扰,然后通过凹陷的近圆特征并通过梯度进行筛选,能够准确的得到凹陷的清晰边界和破损程度,从而根据凹坑的破损程度进行对应工艺的处理,有效的去除了目标生产过程中的凹坑缺陷,显著提升了生产效率。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。