CN107301637A - 近矩形平面状工业产品表面瑕疵检测方法 - Google Patents

近矩形平面状工业产品表面瑕疵检测方法 Download PDF

Info

Publication number
CN107301637A
CN107301637A CN201710361053.XA CN201710361053A CN107301637A CN 107301637 A CN107301637 A CN 107301637A CN 201710361053 A CN201710361053 A CN 201710361053A CN 107301637 A CN107301637 A CN 107301637A
Authority
CN
China
Prior art keywords
mrow
msub
msup
image
det
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710361053.XA
Other languages
English (en)
Other versions
CN107301637B (zh
Inventor
袁夏
岳娟
王雪飞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing University of Science and Technology
Original Assignee
Nanjing University of Science and Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing University of Science and Technology filed Critical Nanjing University of Science and Technology
Priority to CN201710361053.XA priority Critical patent/CN107301637B/zh
Publication of CN107301637A publication Critical patent/CN107301637A/zh
Application granted granted Critical
Publication of CN107301637B publication Critical patent/CN107301637B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • G06T7/001Industrial image inspection using an image reference approach
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/13Edge detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20048Transform domain processing
    • G06T2207/20056Discrete and fast Fourier transform, [DFT, FFT]

Abstract

本发明公开一种近矩形平面状工业产品表面瑕疵检测方法,包括以下步骤:(10)模板图像生成:采集表面完好的标准产品的外观灰度图像,获取产品外轮廓线,裁剪出标准产品外观模板图像;(20)待检测产品图像生成:采集待检测产品外观灰度图像,裁剪出待检测产品区域,得到待检测产品图像,将模板图像与待检测产品图像拼接形成一张整体图像;(30)疑似瑕疵区域检测:在经傅里叶反变换的整体图像中剪裁出待检测产品图像对应区块,二值化得到疑似瑕疵区域;(40)瑕疵区域检测:将疑似瑕疵区域与模板图像中相同位置附近区域进行对比,最小差异超出阈值范围处确定存在表面瑕疵。本发明的工业产品表面瑕疵检测方法,计算量小、实时性好。

Description

近矩形平面状工业产品表面瑕疵检测方法
技术领域
本发明属于工业产品表面瑕疵检测方法技术领域,特别是一种计算量小、实时性好的近矩形平面状工业产品表面瑕疵检测方法。
背景技术
流水线生产过程中有可能在产品外壳上形成划痕、擦伤等表面瑕疵,表面完好度检测是很多工业产品出厂合格检测的必检项目之一。
表面瑕疵检测传统上主要依靠人工目测检查的方式。长时间从事这种单调的外观瑕疵检测极易引起质检员视觉疲劳,从而影响检测效率和正确率。工业生产线光照条件稳定,单一流水线产品类型固定,比较适合采用机器视觉的方式在线自动检测产品表面瑕疵。基于机器视觉的工业品外观瑕疵检测方案在纺织、通信等行业都有应用案例,已有应用案例大都在空间域进行数字图像处理,通过与预存的标准产品外观模板对比评估待检产品表面是否存在瑕疵。为了发现一些较为细小的划痕、污点等瑕疵,用于表面瑕疵检测的机器视觉系统一般选择分辨率较高的工业相机采集数字图像。
目前大部分检测系统采用空间域处理的方式比对待检产品和标准图像,在图像分辨率较高的情况下,计算量较大,实时性差。
发明内容
本发明的目的在于提供一种近矩形平面状工业产品表面瑕疵检测方法,计算量小、实时性好。
实现本发明目的的技术解决方案为:
一种近矩形平面状工业产品表面瑕疵检测方法,包括以下步骤:
(10)模板图像生成:在流水线正常照明状态下采集表面完好的标准产品的外观灰度图像,检测该图像边缘,获取产品外轮廓线,依据外轮廓线裁剪出标准产品外观模板图像;
(20)待检测产品图像生成:采集待检测产品外观灰度图像,寻找产品外轮廓矩形,裁剪出待检测产品区域,调整分辨率,得到待检测产品图像,将模板图像与待检测产品图像拼接形成一张整体图像;
(30)疑似瑕疵区域检测:将整体图像进行二维离散傅里叶变换和傅里叶反变换,在经反变换后的图像中剪裁出拼接时的待检测产品图像对应区块,将其二值化得到疑似瑕疵区域;
(40)瑕疵区域检测:将疑似瑕疵区域与模板图像中相同位置附近区域进行对比,如最小差异超出阈值范围,则确定该处存在表面瑕疵。
本发明与现有技术相比,其显著优点为:
1、计算量小:本发明首先通过高效的频域分析检测疑似瑕疵区域,然后仅针对这些疑似瑕疵区域实施计算量较大的瑕疵区域精细比较过程。由于一张待检测产品图像中疑似瑕疵区域数量较少,因此与常用的逐像素对比方法相比明显减小了计算量。
2、实时性好:本发明使用的图像快速傅里叶变换有很高的计算效率,同时得益于提取的疑似瑕疵区域待对比数据量较小,因此比常见的基于空间域分析的方法效率更高。
下面结合附图和具体实施方式对本发明作进一步的详细描述。
附图说明
图1为本发明近矩形平面状工业产品表面瑕疵检测方法的主流程图。
图2为图1中模板图像生成步骤的流程图。
图3为模板图像生成结果示例图。
其中,图3a为标准产品灰度图像,图3b为边缘检测与外轮廓矩形检测结果,图3c为裁剪得到的产品模板图像。
图4为图1中待检测产品图像生成步骤的流程图。
图5为待检测产品图像生成结果示例图。
其中,图5a为待检测产品灰度图像,图5b为边缘检测与外轮廓矩形检测结果,图5c为裁剪得到的待检测产品图像。
图6为图1中疑似瑕疵区域检测步骤的流程图。
图7为模板图像与待检测产品图像拼接结果示例图。
图8为图1中瑕疵区域检测步骤的流程图。
图9为待检测产品外观瑕疵检测结果示例图。
其中,图9a为疑似瑕疵区域,图9b为确定瑕疵区域,图9c为瑕疵检测结果。
具体实施方式
如图1所示,本发明近矩形平面状工业产品表面瑕疵检测方法,包括以下步骤:
(10)模板图像生成:在流水线正常照明状态下采集表面完好的标准产品的外观灰度图像,检测该图像边缘,获取产品外轮廓线,依据外轮廓线裁剪出标准产品外观模板图像;
如图2所示,所述(10)模板图像生成步骤包括:
(11)边缘图像获取:在流水线正常照明状态下,采集表面完好的标准产品的外观灰度图像Itemp-o,测量外观灰度图像中产品外轮廓矩形的宽度、高度,使用标准canny边缘检测算子检测外观灰度图像Itemp-o边缘,得到二值化边缘图像Itemp-edge
(12)外轮廓线获取:在二值化边缘图像Itemp-edge中使用标准Hough变换方法检测直线,在检测得到的直线簇中选择长度与产品外轮廓矩形长和宽差异不超过Δl的直线段作为疑似外轮廓线,先选择二值化边缘图像Itemp-edge中位于最左恻和最上恻的疑似外轮廓线作为实际轮廓线,然后以步骤1-1中测量的产品外轮廓矩形在Itemp-o中的宽和高作为先验知识,选择与左侧和上侧轮廓线平行且与其距离最接近产品宽和高的直线段作为右侧和下侧轮廓线;
(13)外观模板图像获取:用标准图像旋转方法旋转四条轮廓线围成的区域,使上侧轮廓线旋转后呈水平,然后将旋转后轮廓线围成的区域保存为产品外观模板图像Itemp
图3所示为模板图像生成的结果示例图。其中,图3a为标准产品灰度图像,图3b为边缘检测与外轮廓矩形检测结果,图3c为裁剪得到的产品模板图像。
(20)待检测产品图像生成:采集待检测产品外观灰度图像,寻找产品外轮廓矩形,裁剪出待检测产品区域,调整分辨率,得到待检测产品图像,将模板图像与待检测产品图像拼接形成一张整体图像;
如图4所示,所述(20)待检测产品图像生成步骤包括:
(21)外观灰度图像采集:采集待检测产品的外观灰度图像;
(22)外轮廓矩形寻找:使用canny边缘检测算子,在外观灰度图像中寻找产品外轮廓矩形;
(23)待检测产品图像获取:旋转外观灰度图像,使产品外轮廓矩形上边缘水平,依据外轮廓裁剪出待检测产品区域,并将该区域缩放至与模板图像Itemp同分辨率,得到待检测产品图像Itest,
(24)图像拼接:将m*n-1个模板图像Itemp与1个待检测产品图像Itest整体按照m*n排列拼接形成一张整体图像Idet。
所述(24)图像拼接步骤包括:
(241)图像缩放:在拍摄的包含待检测图像的原始图像中裁剪出待检测产品图像Itest并缩放至与模板图像Itemp4相同分辨率;
(242)图像排列:将m*n-1个模板图像Itemp与1个待检测产品图像Itest分别作为整体图像块,按照m*n排列拼接形成一张图像Idet,其中将Itest放置于行,列,形成一张整体图像Idet,符号表示向下取整。
图5为待检测产品图像生成结果示例图。
其中,图5a为待检测产品灰度图像,图5b为边缘检测与外轮廓矩形检测结果,图5c为裁剪得到的待检测产品图像。
(30)疑似瑕疵区域检测:将整体图像进行二维离散傅里叶变换和傅里叶反变换,在经反变换后的图像中剪裁出拼接时的待检测产品图像对应区块,将其二值化得到疑似瑕疵区域;
如图6所示,所述(30)疑似瑕疵区域检测步骤包括:
(31)傅里叶变换:将整体图像Idet进行二维离散傅里叶变换得到Idet-F,如式(1)
其中Mdet,Ndet为Idet的高和宽,udet-F、vdet-F、xtest、ytest为像素坐标,j为虚数单位,R(udet-F,vdet-F)为傅里叶变换后的实数部分,I(udet-F,vdet-F)为虚数部分,以下公式中类似参数含义相似仅以下标区别,式(1)中:
(32)幅度谱计算:使用式(2)计算傅里叶变换后Idet-F的幅度谱令A(udet-F,vdet-F)=1,则Idet-F成为式(3)所示Idet-F'的形式,即
(33)傅里叶逆变换:然后使用式(4)对Idet-F'进行二维离散傅里叶逆变换,即
在Idet'中剪裁出原Itest放置位置的图像块保存为Itest';
(34)疑似瑕疵区域获取:使用标准otsu算法将Itest'二值化,二值化图像中亮度为255的像素点为疑似瑕疵区域。
图7为模板图像与待检测产品图像拼接结果示例图。
(40)瑕疵区域检测:将疑似瑕疵区域与模板图像中相同位置附近区域进行对比,如最小差异超出阈值范围,则确定该处存在表面瑕疵。
如图8所示,所述(40)瑕疵区域检测步骤包括:
(41)待对比图像块选取:依次选择疑似瑕疵区域中的疑似瑕疵点作为中心像素点,取边长WN像素的正方形窗口内的近邻像素与中心像素点一起作为待对比图像块;
(42)待对比图像块差异计算:记该待对比图像块为ImgPatchTest(i),其中心像素在Itest'中的图像坐标为(xi,yi),在模板图像Itemp中,以(xi,yi)为中心,取边长WT的正方形对比窗口SW,依次以窗口SW中的像素为中心像素,在模板图像Itemp中取中心像素与边长WN像素的正方形窗口内的近邻像素组成对比图像块ImgPatchTemp(j),0<j<WT 2+1,将WT 2个ImgPatchTemp(j)分别与ImgPatchTest(i)对比计算差异;
所述(42)待对比图像块差异计算步骤中,对比计算差异具体为:
假设当前带对比图像块为ImgPatchTest(i),对比模板图像块为ImgPatchTemp(j),每个图像块中包含WN 2个像素,使用式(5)计算ImgPatchTest(i)与ImgPatchTemp(j)的差异值:
式中,gmax为所使用灰度图像格式的可取灰度级最大值,Itest'中的每个ImgPatchTest(i)与Item中的WT 2个对比图像块做对比得到WT 2个差异值。
(43)瑕疵判定:记取最小的差异值为Emin,如果Emin大于设定的差异阈值Eth,则待检测产品图像Itest中(xi,yi)处即确定为瑕疵,否则不为瑕疵。
图9为待检测产品外观瑕疵检测结果示例图。
其中,图9a为疑似瑕疵区域,图9b为确定瑕疵区域,图9c为瑕疵检测结果。
本发明使用快速频域变换技术,利用频域滤波检测疑似瑕疵区域,然后在空间域中仅把疑似瑕疵区域与模板图像对比,通过频率域与空间域混合分析方法显著减少了对比时的计算量;利用单张图像重复排列拼接方法人为构造图像中的整体重复模式,使用简单的频域滤波算法即可发现待检测图像与模板图像不一致的区域,从而实现瑕疵检测;与一般使用SIFT等特征算子匹配方法匹配模板图像与待检测图像不同,本方法通过检测产品轮廓矩形的方法在图像中裁剪出产品区域并调整角度使产品上边缘平行,然后将裁剪出的待检测产品图像缩放至和裁剪出的模板图像同分辨率实现图像匹配,在确定的生产线环境下,检测摄像机安装位置固定,产品区域在模板图像和待检测图像中实际缩放比例很小,因此这种方法比稠密特征算子匹配方法更加简便、高效。

Claims (7)

1.一种近矩形平面状工业产品表面瑕疵检测方法,其特征在于,包括以下步骤:
(10)模板图像生成:在流水线正常照明状态下采集表面完好的标准产品的外观灰度图像,检测该图像边缘,获取产品外轮廓线,依据外轮廓线裁剪出标准产品外观模板图像;
(20)待检测产品图像生成:采集待检测产品外观灰度图像,寻找产品外轮廓矩形,裁剪出待检测产品区域,调整分辨率,得到待检测产品图像,将模板图像与待检测产品图像拼接形成一张整体图像;
(30)疑似瑕疵区域检测:将整体图像进行二维离散傅里叶变换和傅里叶反变换,在经反变换后的图像中剪裁出拼接时的待检测产品图像对应区块,将其二值化得到疑似瑕疵区域;
(40)瑕疵区域检测:将疑似瑕疵区域与模板图像中相同位置附近区域进行对比,如最小差异超出阈值范围,则确定该处存在表面瑕疵。
2.根据权利要求1所述的检测方法,其特征在于,所述(10)模板图像生成步骤包括:
(11)边缘图像获取:在流水线正常照明状态下,采集表面完好的标准产品的外观灰度图像Itemp-o,测量外观灰度图像中产品外轮廓矩形的宽度、高度,使用标准canny边缘检测算子检测外观灰度图像Itemp-o边缘,得到二值化边缘图像Itemp-edge
(12)外轮廓线获取:在二值化边缘图像Itemp-edge中使用标准Hough变换方法检测直线,在检测得到的直线簇中选择长度与产品外轮廓矩形长和宽差异不超过Δl的直线段作为疑似外轮廓线,先选择二值化边缘图像Itemp-edge中位于最左恻和最上恻的疑似外轮廓线作为实际轮廓线,然后以步骤1-1中测量的产品外轮廓矩形在Itemp-o中的宽和高作为先验知识,选择与左侧和上侧轮廓线平行且与其距离最接近产品宽和高的直线段作为右侧和下侧轮廓线;
(13)外观模板图像获取:用标准图像旋转方法旋转四条轮廓线围成的区域,使上侧轮廓线旋转后呈水平,然后将旋转后轮廓线围成的区域保存为产品外观模板图像Itemp
3.根据权利要求1或2所述的检测方法,其特征在于,所述(20)待检测产品图像生成步骤包括:
(21)外观灰度图像采集:采集待检测产品的外观灰度图像;
(22)外轮廓矩形寻找:使用canny边缘检测算子,在外观灰度图像中寻找产品外轮廓矩形;
(23)待检测产品图像获取:旋转外观灰度图像,使产品外轮廓矩形上边缘水平,依据外轮廓裁剪出待检测产品区域,并将该区域缩放至与模板图像Itemp同分辨率,得到待检测产品图像Itest,
(24)图像拼接:将m*n-1个模板图像Itemp与1个待检测产品图像Itest整体按照m*n排列拼接形成一张整体图像Idet。
4.根据权利要求3所述的检测方法,其特征在于,所述(24)图像拼接步骤包括:
(241)图像缩放:在拍摄的包含待检测图像的原始图像中裁剪出待检测产品图像Itest并缩放至与模板图像Itemp4相同分辨率;
(242)图像排列:将m*n-1个模板图像Itemp与1个待检测产品图像Itest分别作为整体图像块,按照m*n排列拼接形成一张图像Idet,其中将Itest放置于行,列,形成一张整体图像Idet,符号表示向下取整。
5.根据权利要求3所述的检测方法,其特征在于,所述(30)疑似瑕疵区域检测步骤包括:
(31)傅里叶变换:将整体图像Idet进行二维离散傅里叶变换得到Idet-F,如式(1)
其中,Mdet,Ndet为Idet的高和宽,udet-F、vdet-F、xtest、ytest为像素坐标,j为虚数单位,R(udet-F,vdet-F)为傅里叶变换后的实数部分,I(udet-F,vdet-F)为虚数部分,以下公式中类似参数含义相似仅以下标区别,
式(1)中:
<mrow> <mo>|</mo> <mi>F</mi> <mrow> <mo>(</mo> <msub> <mi>u</mi> <mrow> <mi>det</mi> <mo>-</mo> <mi>F</mi> </mrow> </msub> <mo>,</mo> <msub> <mi>v</mi> <mrow> <mi>det</mi> <mo>-</mo> <mi>F</mi> </mrow> </msub> <mo>)</mo> </mrow> <mo>|</mo> <mo>=</mo> <msqrt> <mrow> <msup> <mi>R</mi> <mn>2</mn> </msup> <mrow> <mo>(</mo> <msub> <mi>u</mi> <mrow> <mi>det</mi> <mo>-</mo> <mi>F</mi> </mrow> </msub> <mo>,</mo> <msub> <mi>v</mi> <mrow> <mi>det</mi> <mo>-</mo> <mi>F</mi> </mrow> </msub> <mo>)</mo> </mrow> <mo>+</mo> <msup> <mi>I</mi> <mn>2</mn> </msup> <mrow> <mo>(</mo> <msub> <mi>u</mi> <mrow> <mi>det</mi> <mo>-</mo> <mi>F</mi> </mrow> </msub> <mo>,</mo> <msub> <mi>v</mi> <mrow> <mi>det</mi> <mo>-</mo> <mi>F</mi> </mrow> </msub> <mo>)</mo> </mrow> </mrow> </msqrt> <mo>,</mo> </mrow>
<mrow> <mi>&amp;phi;</mi> <mrow> <mo>(</mo> <msub> <mi>u</mi> <mrow> <mi>det</mi> <mo>-</mo> <mi>F</mi> </mrow> </msub> <mo>,</mo> <msub> <mi>v</mi> <mrow> <mi>det</mi> <mo>-</mo> <mi>F</mi> </mrow> </msub> <mo>)</mo> </mrow> <mo>=</mo> <mi>a</mi> <mi>t</mi> <mi>c</mi> <mi> </mi> <mi>tan</mi> <mo>&amp;lsqb;</mo> <mfrac> <mrow> <mi>I</mi> <mrow> <mo>(</mo> <msub> <mi>u</mi> <mrow> <mi>det</mi> <mo>-</mo> <mi>F</mi> </mrow> </msub> <mo>,</mo> <msub> <mi>v</mi> <mrow> <mi>det</mi> <mo>-</mo> <mi>F</mi> </mrow> </msub> <mo>)</mo> </mrow> </mrow> <mrow> <mi>R</mi> <mrow> <mo>(</mo> <msub> <mi>u</mi> <mrow> <mi>det</mi> <mo>-</mo> <mi>F</mi> </mrow> </msub> <mo>,</mo> <msub> <mi>v</mi> <mrow> <mi>det</mi> <mo>-</mo> <mi>F</mi> </mrow> </msub> <mo>)</mo> </mrow> </mrow> </mfrac> <mo>&amp;rsqb;</mo> <mo>;</mo> </mrow>
(32)幅度谱计算:使用式(2)计算傅里叶变换后Idet-F的幅度谱A(udet-F,vdet-F),
令A(udet-F,vdet-F)=1,则Idet-F成为式(3)所示Idet-F'的形式,即
<mrow> <msup> <msub> <mi>I</mi> <mrow> <mi>det</mi> <mo>-</mo> <mi>F</mi> </mrow> </msub> <mo>&amp;prime;</mo> </msup> <mrow> <mo>(</mo> <msub> <mi>u</mi> <mrow> <mi>det</mi> <mo>-</mo> <msup> <mi>F</mi> <mo>&amp;prime;</mo> </msup> </mrow> </msub> <mo>,</mo> <msub> <mi>v</mi> <mrow> <mi>det</mi> <mo>-</mo> <msup> <mi>F</mi> <mo>&amp;prime;</mo> </msup> </mrow> </msub> <mo>)</mo> </mrow> <mo>=</mo> <msup> <mi>e</mi> <mrow> <mi>j</mi> <mi>&amp;phi;</mi> <mrow> <mo>(</mo> <msub> <mi>u</mi> <mrow> <mi>det</mi> <mo>-</mo> <msup> <mi>F</mi> <mo>&amp;prime;</mo> </msup> </mrow> </msub> <mo>,</mo> <msub> <mi>v</mi> <mrow> <mi>det</mi> <mo>-</mo> <msup> <mi>F</mi> <mo>&amp;prime;</mo> </msup> </mrow> </msub> <mo>)</mo> </mrow> </mrow> </msup> <mo>-</mo> <mo>-</mo> <mo>-</mo> <mrow> <mo>(</mo> <mn>3</mn> <mo>)</mo> </mrow> </mrow>
(33)傅里叶逆变换:然后使用式(4)对Idet-F'进行二维离散傅里叶逆变换,即
<mrow> <mfenced open='' close=''> <mtable> <mtr> <mtd> <mrow> <msup> <msub> <mi>I</mi> <mi>det</mi> </msub> <mo>&amp;prime;</mo> </msup> <mo>=</mo> <mrow> <mo>(</mo> <msub> <mi>x</mi> <msup> <mi>det</mi> <mo>&amp;prime;</mo> </msup> </msub> <mo>,</mo> <msub> <mi>y</mi> <msup> <mi>det</mi> <mo>&amp;prime;</mo> </msup> </msub> <mo>)</mo> </mrow> <mo>=</mo> </mrow> </mtd> </mtr> <mtr> <mtd> <mrow> <munderover> <mo>&amp;Sigma;</mo> <mrow> <msub> <mi>u</mi> <mrow> <mi>det</mi> <mo>-</mo> <msup> <mi>F</mi> <mo>&amp;prime;</mo> </msup> </mrow> </msub> <mo>=</mo> <mn>0</mn> </mrow> <mrow> <msub> <mi>M</mi> <msup> <mi>det</mi> <mo>&amp;prime;</mo> </msup> </msub> <mo>-</mo> <mn>1</mn> </mrow> </munderover> <munderover> <mo>&amp;Sigma;</mo> <mrow> <msub> <mi>v</mi> <mrow> <mi>det</mi> <mo>-</mo> <msup> <mi>F</mi> <mo>&amp;prime;</mo> </msup> </mrow> </msub> <mo>=</mo> <mn>0</mn> </mrow> <mrow> <msub> <mi>N</mi> <msup> <mi>det</mi> <mo>&amp;prime;</mo> </msup> </msub> <mo>-</mo> <mn>1</mn> </mrow> </munderover> <msup> <msub> <mi>I</mi> <mrow> <mi>det</mi> <mo>-</mo> <mi>F</mi> </mrow> </msub> <mo>&amp;prime;</mo> </msup> <mrow> <mo>(</mo> <msub> <mi>u</mi> <mrow> <mi>det</mi> <mo>-</mo> <msup> <mi>F</mi> <mo>&amp;prime;</mo> </msup> </mrow> </msub> <mo>,</mo> <msub> <mi>v</mi> <mrow> <mi>det</mi> <mo>-</mo> <msup> <mi>F</mi> <mo>&amp;prime;</mo> </msup> </mrow> </msub> <mo>)</mo> </mrow> <mi>exp</mi> <mo>&amp;lsqb;</mo> <mi>j</mi> <mn>2</mn> <mi>&amp;pi;</mi> <mrow> <mo>(</mo> <msub> <mi>u</mi> <mrow> <mi>det</mi> <mo>-</mo> <msup> <mi>F</mi> <mo>&amp;prime;</mo> </msup> </mrow> </msub> <msub> <mi>x</mi> <msup> <mi>det</mi> <mo>&amp;prime;</mo> </msup> </msub> <mo>/</mo> <msub> <mi>M</mi> <msup> <mi>det</mi> <mo>&amp;prime;</mo> </msup> </msub> <mo>+</mo> <msub> <mi>v</mi> <mrow> <mi>det</mi> <mo>-</mo> <msup> <mi>F</mi> <mo>&amp;prime;</mo> </msup> </mrow> </msub> <msub> <mi>y</mi> <msup> <mi>det</mi> <mo>&amp;prime;</mo> </msup> </msub> <mo>/</mo> <msub> <mi>N</mi> <msup> <mi>det</mi> <mo>&amp;prime;</mo> </msup> </msub> <mo>)</mo> </mrow> <mo>&amp;rsqb;</mo> </mrow> </mtd> </mtr> </mtable> </mfenced> <mo>-</mo> <mo>-</mo> <mo>-</mo> <mrow> <mo>(</mo> <mn>4</mn> <mo>)</mo> </mrow> </mrow> 2
在Idet'中剪裁出原Itest放置位置的图像块保存为Itest';
(34)疑似瑕疵区域获取:使用标准otsu算法将Itest'二值化,二值化图像中亮度为255的像素点为疑似瑕疵区域。
6.根据权利要求5所述的检测方法,其特征在于,所述(40)瑕疵区域检测步骤包括:
(41)待对比图像块选取:依次选择疑似瑕疵区域中的疑似瑕疵点作为中心像素点,取边长WN像素的正方形窗口内的近邻像素与中心像素点一起作为待对比图像块;
(42)待对比图像块差异计算:记该待对比图像块为ImgPatchTest(i),其中心像素在Itest'中的图像坐标为(xi,yi),在模板图像Itemp中,以(xi,yi)为中心,取边长WT的正方形对比窗口SW,依次以窗口SW中的像素为中心像素,在模板图像Itemp中取中心像素与边长WN像素的正方形窗口内的近邻像素组成对比图像块ImgPatchTemp(j),0<j<WT 2+1,将WT 2个ImgPatchTemp(j)分别与ImgPatchTest(i)对比计算差异;
(43)瑕疵判定:记取最小的差异值为Emin,如果Emin大于设定的差异阈值Eth,则待检测产品图像Itest中(xi,yi)处即确定为瑕疵,否则不为瑕疵。
7.根据权利要求6所述的检测方法,其特征在于,所述(42)待对比图像块差异计算步骤中,对比计算差异具体为:
假设当前带对比图像块为ImgPatchTest(i),对比模板图像块为ImgPatchTemp(j),每个图像块中包含WN 2个像素,使用式(5)计算ImgPatchTest(i)与ImgPatchTemp(j)的差异值:
<mrow> <mi>E</mi> <mo>=</mo> <mfrac> <mn>1</mn> <mrow> <msubsup> <mi>W</mi> <mi>N</mi> <mn>2</mn> </msubsup> <msubsup> <mi>g</mi> <mrow> <mi>m</mi> <mi>a</mi> <mi>x</mi> </mrow> <mn>2</mn> </msubsup> </mrow> </mfrac> <munder> <mo>&amp;Sigma;</mo> <mrow> <mo>(</mo> <msup> <mi>x</mi> <mo>&amp;prime;</mo> </msup> <mo>,</mo> <msup> <mi>y</mi> <mo>&amp;prime;</mo> </msup> <mo>)</mo> <mo>&amp;Element;</mo> <msub> <mi>W</mi> <mi>N</mi> </msub> </mrow> </munder> <msup> <mrow> <mo>&amp;lsqb;</mo> <mi>Im</mi> <mi>g</mi> <mi>P</mi> <mi>a</mi> <mi>t</mi> <mi>c</mi> <mi>h</mi> <mi>T</mi> <mi>e</mi> <mi></mi> <msub> <mi>mp</mi> <mi>j</mi> </msub> <mrow> <mo>(</mo> <msup> <mi>x</mi> <mo>&amp;prime;</mo> </msup> <mo>,</mo> <msup> <mi>y</mi> <mo>&amp;prime;</mo> </msup> <mo>)</mo> </mrow> <mo>-</mo> <mi>Im</mi> <mi>g</mi> <mi>P</mi> <mi>a</mi> <mi>t</mi> <mi>c</mi> <mi>h</mi> <mi>T</mi> <mi>e</mi> <mi></mi> <msub> <mi>st</mi> <mi>i</mi> </msub> <mrow> <mo>(</mo> <msup> <mi>x</mi> <mo>&amp;prime;</mo> </msup> <mo>,</mo> <msup> <mi>y</mi> <mo>&amp;prime;</mo> </msup> <mo>)</mo> </mrow> <mo>&amp;rsqb;</mo> </mrow> <mn>2</mn> </msup> <mo>-</mo> <mo>-</mo> <mo>-</mo> <mrow> <mo>(</mo> <mn>5</mn> <mo>)</mo> </mrow> </mrow>
式中,gmax为所使用灰度图像格式的可取灰度级最大值,Itest'中的每个ImgPatchTest(i)与Item中的WT 2个对比图像块做对比得到WT 2个差异值。
CN201710361053.XA 2017-05-22 2017-05-22 近矩形平面状工业产品表面瑕疵检测方法 Active CN107301637B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710361053.XA CN107301637B (zh) 2017-05-22 2017-05-22 近矩形平面状工业产品表面瑕疵检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710361053.XA CN107301637B (zh) 2017-05-22 2017-05-22 近矩形平面状工业产品表面瑕疵检测方法

Publications (2)

Publication Number Publication Date
CN107301637A true CN107301637A (zh) 2017-10-27
CN107301637B CN107301637B (zh) 2020-08-11

Family

ID=60138095

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710361053.XA Active CN107301637B (zh) 2017-05-22 2017-05-22 近矩形平面状工业产品表面瑕疵检测方法

Country Status (1)

Country Link
CN (1) CN107301637B (zh)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109544541A (zh) * 2018-11-27 2019-03-29 云南大学 烟支外观瑕疵检测方法及装置
CN109579720A (zh) * 2018-12-07 2019-04-05 广州大学 一种边缘距离测量的引伸计动态测量方法
CN109584241A (zh) * 2019-01-18 2019-04-05 福建伟易泰智能科技有限公司 一种钢筘的检测方法及装置
CN109596620A (zh) * 2018-11-10 2019-04-09 江苏网进科技股份有限公司 基于机器视觉的产品表面形状缺陷检测方法和系统
CN109612394A (zh) * 2019-01-07 2019-04-12 成都中电熊猫显示科技有限公司 测量方法、装置和存储介质
CN111062941A (zh) * 2019-12-31 2020-04-24 深圳爱克莱特科技股份有限公司 点光源灯点故障检测装置及方法
CN111242899A (zh) * 2019-12-31 2020-06-05 河南裕展精密科技有限公司 基于图像的瑕疵检测方法及计算机可读存储介质
CN111445431A (zh) * 2018-12-28 2020-07-24 Tcl集团股份有限公司 一种图像分割方法、终端设备及计算机可读存储介质
CN112270687A (zh) * 2020-10-16 2021-01-26 鲸斛(上海)智能科技有限公司 布料瑕疵识别模型的训练方法和布料瑕疵的检测方法
CN113406092A (zh) * 2021-08-18 2021-09-17 阿里巴巴(中国)有限公司 数字化生产检测系统、方法、装置、设备及存储介质
CN115330770A (zh) * 2022-10-12 2022-11-11 南通宝江家用纺织品有限公司 一种布匹区域类疵点识别方法
CN115753791A (zh) * 2022-11-10 2023-03-07 哈尔滨耐是智能科技有限公司 基于机器视觉的缺陷检测方法、装置以及系统
CN116993682A (zh) * 2023-07-10 2023-11-03 欧几里德(苏州)医疗科技有限公司 基于图像数据分析的角膜塑形镜瑕疵区域提取方法
CN116740065B (zh) * 2023-08-14 2023-11-21 山东伟国板业科技有限公司 基于大数据的人造板瑕疵品快速溯源方法及系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6408696B1 (en) * 1999-12-06 2002-06-25 Ai Signal Research, Inc. Coherent phase line enhancer spectral analysis technique
CN102136061A (zh) * 2011-03-09 2011-07-27 中国人民解放军海军航空工程学院 一种矩形石英晶片缺陷自动检测分类识别方法
CN104112271A (zh) * 2014-06-19 2014-10-22 深圳市大族激光科技股份有限公司 移动终端外壳侧面缺陷检测方法和系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6408696B1 (en) * 1999-12-06 2002-06-25 Ai Signal Research, Inc. Coherent phase line enhancer spectral analysis technique
CN102136061A (zh) * 2011-03-09 2011-07-27 中国人民解放军海军航空工程学院 一种矩形石英晶片缺陷自动检测分类识别方法
CN104112271A (zh) * 2014-06-19 2014-10-22 深圳市大族激光科技股份有限公司 移动终端外壳侧面缺陷检测方法和系统

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
DROR AIGER ET AL.: ""The phase only transform for unsupervised surface defect detection"", 《2010 IEEE COMPUTER SOCIETY CONFERENCE ON COMPUTER VISION AND PATTERN RECOGNITION》 *
牛生鹏: ""计算机视觉在织物疵点自动检测中的应用研究"", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *
郭象昱 等: ""一种基于相位变换的布匹疵点检测方法"", 《工业控制计算机》 *

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109596620A (zh) * 2018-11-10 2019-04-09 江苏网进科技股份有限公司 基于机器视觉的产品表面形状缺陷检测方法和系统
CN109544541A (zh) * 2018-11-27 2019-03-29 云南大学 烟支外观瑕疵检测方法及装置
CN109579720B (zh) * 2018-12-07 2021-09-24 广州大学 一种边缘距离测量的引伸计动态测量方法
CN109579720A (zh) * 2018-12-07 2019-04-05 广州大学 一种边缘距离测量的引伸计动态测量方法
CN111445431B (zh) * 2018-12-28 2023-10-20 Tcl科技集团股份有限公司 一种图像分割方法、终端设备及计算机可读存储介质
CN111445431A (zh) * 2018-12-28 2020-07-24 Tcl集团股份有限公司 一种图像分割方法、终端设备及计算机可读存储介质
CN109612394A (zh) * 2019-01-07 2019-04-12 成都中电熊猫显示科技有限公司 测量方法、装置和存储介质
CN109584241A (zh) * 2019-01-18 2019-04-05 福建伟易泰智能科技有限公司 一种钢筘的检测方法及装置
CN109584241B (zh) * 2019-01-18 2020-12-18 福建伟易泰智能科技有限公司 一种钢筘的检测方法及装置
CN111242899B (zh) * 2019-12-31 2023-09-26 富联裕展科技(河南)有限公司 基于图像的瑕疵检测方法及计算机可读存储介质
CN111242899A (zh) * 2019-12-31 2020-06-05 河南裕展精密科技有限公司 基于图像的瑕疵检测方法及计算机可读存储介质
CN111062941A (zh) * 2019-12-31 2020-04-24 深圳爱克莱特科技股份有限公司 点光源灯点故障检测装置及方法
CN111062941B (zh) * 2019-12-31 2024-04-19 深圳爱克莱特科技股份有限公司 点光源灯点故障检测装置及方法
CN112270687A (zh) * 2020-10-16 2021-01-26 鲸斛(上海)智能科技有限公司 布料瑕疵识别模型的训练方法和布料瑕疵的检测方法
CN113406092A (zh) * 2021-08-18 2021-09-17 阿里巴巴(中国)有限公司 数字化生产检测系统、方法、装置、设备及存储介质
CN113406092B (zh) * 2021-08-18 2022-01-11 阿里巴巴(中国)有限公司 数字化生产检测系统、方法、装置、设备及存储介质
CN115330770A (zh) * 2022-10-12 2022-11-11 南通宝江家用纺织品有限公司 一种布匹区域类疵点识别方法
CN115753791A (zh) * 2022-11-10 2023-03-07 哈尔滨耐是智能科技有限公司 基于机器视觉的缺陷检测方法、装置以及系统
CN115753791B (zh) * 2022-11-10 2024-03-01 哈尔滨耐是智能科技有限公司 基于机器视觉的缺陷检测方法、装置以及系统
CN116993682A (zh) * 2023-07-10 2023-11-03 欧几里德(苏州)医疗科技有限公司 基于图像数据分析的角膜塑形镜瑕疵区域提取方法
CN116993682B (zh) * 2023-07-10 2024-02-23 欧几里德(苏州)医疗科技有限公司 基于图像数据分析的角膜塑形镜瑕疵区域提取方法
CN116740065B (zh) * 2023-08-14 2023-11-21 山东伟国板业科技有限公司 基于大数据的人造板瑕疵品快速溯源方法及系统

Also Published As

Publication number Publication date
CN107301637B (zh) 2020-08-11

Similar Documents

Publication Publication Date Title
CN107301637A (zh) 近矩形平面状工业产品表面瑕疵检测方法
CN110431404B (zh) 表面缺陷检查方法及表面缺陷检查装置
CN112630222B (zh) 一种基于机器视觉的手机盖板玻璃缺陷检测方法
US10803573B2 (en) Method for automated detection of defects in cast wheel products
JP7094028B2 (ja) ガラスシートの光学特性をオンライン測定するためのシステム及び関連方法
JP2005277395A5 (zh)
US9429527B1 (en) Automatic optical inspection method of periodic patterns
CN111539927B (zh) 汽车塑料组合件紧固卡扣缺装检测装置的检测方法
CN110751604A (zh) 一种基于机器视觉的钢管焊缝缺陷在线检测方法
CN115018846B (zh) 基于ai智能相机的多目标裂纹缺陷检测方法和装置
CN113610850A (zh) 一种基于图像处理的装饰纸纹理异常检测方法
KR20180115646A (ko) 비전 카메라를 이용한 비드 인식 장치 및 그 방법
CN107316287A (zh) 一种矩形铁氧体磁片表面的缺陷识别方法
CN111739012A (zh) 基于转盘的摄像头模组白斑检测系统
JP2023024482A (ja) 画像処理装置、画像処理方法、及び画像処理プログラム
CN115272256A (zh) 亚像素级传感光纤路径高斯提取方法及系统
CN114187267B (zh) 基于机器视觉的冲压件缺陷检测方法
CN114199127A (zh) 基于机器视觉的汽车零件尺寸检测系统及方法
JP3913517B2 (ja) 欠陥検出方法
CN117333467A (zh) 基于图像处理的玻璃瓶瓶身瑕疵识别检测方法及系统
CN114882035B (zh) 一种基于图像处理的面料熨烫质量预测评估方法及装置
JP2004185019A5 (zh)
WO2004083835A1 (en) Method to determine the optical quality of a glazing
CN114166849B (zh) 一种湿度传感器印刷碳线缺陷和感湿膜缺陷的检测方法
CN112669321B (zh) 一种基于特征提取及算法分类的喷砂不均检测方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant