CN111462080A - 玻璃平坦区的缺陷检测方法 - Google Patents

玻璃平坦区的缺陷检测方法 Download PDF

Info

Publication number
CN111462080A
CN111462080A CN202010244489.2A CN202010244489A CN111462080A CN 111462080 A CN111462080 A CN 111462080A CN 202010244489 A CN202010244489 A CN 202010244489A CN 111462080 A CN111462080 A CN 111462080A
Authority
CN
China
Prior art keywords
image
screening
algorithm
area
defect
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010244489.2A
Other languages
English (en)
Inventor
都卫东
王岩松
和江镇
吴健雄
赵梦逸
夏子涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Focusight Technology Co Ltd
Original Assignee
Focusight Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Focusight Technology Co Ltd filed Critical Focusight Technology Co Ltd
Priority to CN202010244489.2A priority Critical patent/CN111462080A/zh
Publication of CN111462080A publication Critical patent/CN111462080A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/13Edge detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/136Segmentation; Edge detection involving thresholding

Abstract

本发明涉及一种玻璃平坦区的缺陷检测方法,包括以下步骤,1)采集图像并输入,进行图像预处理算法;2)经过图像预处理算法,输出预处理图像;3)对预处理图像进行图像间运算算法,输出运算后的图像;4)将运算后的图像,结合输入的检测区域,进行区域筛选算法,输出筛选后的区域;将筛选后的区域,经过区域连接算法,输出连接后的区域;5)若连接后的区域满足检测要求,即为需要检测的缺陷,则直接输出区域;否则循环步骤4)~5)。本发明通过一种通用的算法用来检测玻璃平坦区的成像缺陷,不需要在检测玻璃平坦区缺陷时每次都进行算法开发,只需要在通用算法上设置参数即可,节约了项目开发时间,简化了开发流程,降低了开发人员专业要求。

Description

玻璃平坦区的缺陷检测方法
技术领域
本发明涉及图像成像检测技术领域,尤其是一种玻璃平坦区成像时的缺陷检测方法。
背景技术
对于玻璃平坦区的缺陷检测,现有的技术是跟根据不同的玻璃平坦区内的缺陷进行成像,开发不同的算法进行缺陷检测。硬件配置上有相机、镜头、光源、光源控制器及电脑,根据不同的产品选择不同的相机(面阵相机、线扫相机、黑白相机、彩色相机),不同的镜头(普通镜头、远心镜头),不同的光源等。对采集的图像进行图像处理、缺陷检测,目前常用的缺陷提取算法有阈值分割、动态阈值分割、轮廓提取等,针对不同的成像及缺陷用不同的缺陷提取算法。
因此,现有技术中这种针对不同的成像开发不同的缺陷检测算法,在项目开发中占用了一定的时间和人力。而玻璃平坦区的缺陷种类往往较多,比如玻璃的丝划、丝白、水印、丝灰尘、丝脏、溢镀、崩边、凹凸、Lens划、Lens白点、Lens灰尘、Lens脏等缺陷,每一种缺陷都要开发一种专门的检测算法,在实际项目开发中耗时耗力。
发明内容
本发明要解决的技术问题是:提供一种玻璃平坦区的缺陷检测方法,解决了玻璃平坦区成像时不同缺陷需要开发不同的算法进行缺陷检测的技术缺陷。
本发明解决其技术问题所采用的技术方案是:一种玻璃平坦区的缺陷检测方法,包括以下步骤,
1)采集图像并输入,进行图像预处理算法;
2)经过图像预处理算法,输出预处理图像;
3)对预处理图像进行图像间运算算法,输出运算后的图像;
4)将运算后的图像,结合输入的检测区域,进行区域筛选算法,输出筛选后的区域;将筛选后的区域,经过区域连接算法,输出连接后的区域;
5)若连接后的区域满足检测要求,即为需要检测的缺陷,则直接输出区域;否则循环步骤4)~5)。
进一步的说,本发明所述的步骤2)中,图像预处理算法包括图像滤波、图像几何变换和/或图像增强。
进一步的说,本发明所述的步骤3)中,图像间运算算法包括加、减、乘、除和/或取模运算。
进一步的说,本发明所述的步骤4)中,区域筛选算法包括对比度筛选、区域自身形态筛选、线状区域筛选、散点筛选、多线筛选、点线筛选、投影筛选、大块脏污筛选、酒精痕筛选和/或吸嘴印筛选。
进一步的说,本发明所述的步骤4)包括以下步骤:
A)获取所有可疑缺陷区域的位姿相关信息;
B)获取所有可疑缺陷区域的形态特征;
C)获取所有可疑缺陷区域的灰度特征;
D)根据任意两个可疑缺陷区域的各项相关性得分,加权计算连结得分,将符合要求的两个区域进行连结。
本发明的有益效果是,解决了背景技术中存在的缺陷,本发明通过一种通用的算法用来检测玻璃平坦区的成像缺陷,不需要在检测玻璃平坦区缺陷时每次都进行算法开发,只需要在通用算法上设置参数即可,节约了项目开发时间,简化了开发流程,降低了开发人员专业要求。
附图说明
图1是本发明的流程图;
图2是本发明自适应优选算法流程图。
具体实施方式
现在结合附图和优选实施例对本发明作进一步详细的说明。这些附图均为简化的示意图,仅以示意方式说明本发明的基本结构,因此其仅显示与本发明有关的构成。
如图1-2所示的一种玻璃平坦区的缺陷检测方法,首先输入的是采集得到的原图以及平坦检测区ROI,ROI(region of interest),感兴趣区域。机器视觉、图像处理中,从被处理的图像以方框、圆、椭圆、不规则多边形等方式勾勒出需要处理的区域,称为感兴趣区域,ROI。在Halcon、OpenCV、Matlab等机器视觉软件上常用到各种算子(Operator)和函数来求得感兴趣区域ROI,并进行图像的下一步处理。
输入到图像预处理算法进行图像预处理,用户选用不同的预处理算法就会得到效果不同预处理图片,可以只选择其中一种预处理算法,也可以选择几种或者选择不进行预处理只使用原图。图像预处理是可以根据实际需求来选择是否需要以及需要用哪种方法来进行图像预处理,可供选择的图像预处理有Sobel滤波、拉普拉斯滤波、中值滤波、水平中值滤波、垂直中值滤波、低通滤波、高通滤波、带通滤波、高斯滤波、微分滤波、水平微分滤波、垂直微分滤波、边缘锐化、对比度拉伸、坐标系转换、图像缩放等。
图像预处理结束后就进入图像间运算算法,图像间运算有图像强调(图像间对应像素点灰度值加权相加偏置)、图像差分(图像间对应像素点灰度值加权相减偏置)、图像最大值(图像间对应像素点灰度值较大者)、图像最小值(图像间对应像素点灰度值较小者)、图像平均值(图像间对应像素点灰度值平均值)等方法可供选择,用来得到待分割图像;通过对预处理图片或者原图进行加、减、乘、除、取模等的运算得到可用来进行缺陷提取的图片,即可以进行可疑缺陷提取;可疑缺陷提取可以选择阈值分割、动态阈值分割、边缘提取等方法;可疑缺陷提取算法的输入除了有运算后的图片,还应该有检测区,这个检测区可以是刚开始输入的ROI,也可以是之后经过缺陷连结后的ROI,提取出的可疑缺陷有区域和线状两种形式。
提取出可疑缺陷后进入筛选连结算法,筛选连结算法分别对区域及线状缺陷先进行初步筛选再进行连结,将特征类似、空间位置接近的缺陷连结在一起看做一个缺陷;将缺陷连结算法的输出区域及线状结合运算后的图片作为缺陷筛选算法的输入,进行缺陷筛选,缺陷筛选包括对比度筛选(灰度、对比度)、区域自身形态筛选(长、宽、长宽比、圆度)、线状区域筛选(线长、宽、单条尾勾)、散点筛选(范围内聚集多点、点状成线型分布)、多线筛选(交叉、范围内多条)、点线筛选(小圆点、短线)、投影筛选(特定方向投影判断)、大块脏污筛选(面积、长宽比、对比度)、酒精痕筛选(同一方向多条平行、对比度)、吸嘴印筛选(圆环半径、面积、对比度),根据产品的实际缺陷对应缺陷类型设置参数进行缺陷筛选,符合缺陷条件的则被判定为缺陷。
先筛选后连结,连结后的缺陷可以再次作为筛选的输入,是一个不断迭代更新的过程,直到输入样本的检测率达到要求或者是达到设置的迭代次数终止。
筛选连结详细步骤如下:
1.获取所有可疑缺陷区域的位姿相关信息。
1)计算每个可疑缺陷区域的重心坐标(Xi,Yi),以及其对应的主轴长Li,主轴宽Wi
2)计算任意两个可疑缺陷区域的重心距离与两区域主轴半长的比值Rij,公式如下:
Figure BDA0002433625620000051
3)计算任意两个可疑区域间的相邻度得分ScoreDisij,Rij越小,得分越高,0≤ScoreDisij≤100;
4)计算每个可疑缺陷区域的长宽比Q,公式如下:
Figure BDA0002433625620000052
5)筛选出Qi>1.5的可疑缺陷区域,获取这些区域的主轴方向α;
6)计算Qi>1.5的区域主轴方向夹角θij,公式如下:
θij=|αij|,i=1,…,m,j=1,…,m,m≤n
7)计算任意两个可疑区域间的方向性得分ScoreDirij,θij越接近0或者π,得分越高,越接近
Figure BDA0002433625620000053
得分越低,Qi<1.5的可疑区域ScoreDirij=50,0≤ScoreDisij≤100。
2.获取所有可疑缺陷区域的形态特征。
1)计算每个可疑缺陷区域的圆度CircleC,公式如下:
CircleC=min(1,CircleC')
Figure BDA0002433625620000054
其中,S为区域面积,rmax为区域边缘点到区域重心的最大距离;
2)计算每个可疑缺陷区域的长宽比RatioLW,公式如下:
Figure BDA0002433625620000061
其中,L为区域主轴长,W为区域主轴宽;
3)计算每个可疑缺陷区域的紧密度CompactnessC,公式如下:
CompactnessC=max(1,CompactnessC')
Figure BDA0002433625620000062
其中,P为区域周长,S为区域面积;
4)计算每个可疑缺陷区域的矩形度RectangleC,首先计算一个与可疑区域有相同一阶矩和二阶矩的矩形,最终基于计算出的矩形与按矩形面积归一化的输入区域之差的面积计算矩形度;
5)计算每个可疑缺陷区域的凸度ConvexC,公式如下:
Figure BDA0002433625620000063
其中So为区域面积,Se为凸包面积,ConvexC≤1,矩形与原的凸度均为1.
6)计算任意两个可疑缺陷区域的圆度相关得分ScoreCirij、主轴长相关得分ScoreLij、主轴宽相关得分ScoreWij、长宽比相关得分ScoreRatij、紧密度相关得分ScoreComij、矩形度ScoreRecij、凸度ScoreConij,特征值越接近得分越高,所有特征值得分区间均为[0,100]。
3.获取所有可疑缺陷区域的灰度特征。
1)计算每个可疑缺陷区域的灰度均值GrayAver;
2)计算任意两个可疑缺陷区域的灰度均值相关得分ScoreGraij,灰度均值越接近得分越高,0≤ScoreGraij≤100。
4.根据上面计算的任意两个可疑缺陷区域各项相关性得分,加权计算连结得分,公式如下:
Scoreij=a*ScoreDisij+b*ScoreDirij+c*ScoreCirij+d*ScoreLij+e*ScoreWij+f*ScoreRatij+g*ScoreComij+h*ScoreRecij+i*ScoreConij+j*ScoreGraij
其中,加权系数a、b、c、d、e、f、g、h、i、j的取值区间均为[0,1],可设置。最终得到连结得分Scoreij,Scoreij≥ScoreTh的两个区域进行连结,ScoreTh可设置。
通过整个逻辑说明可以看出,该通用算法可以同时检测多种类型的缺陷,不需要逐一开发不同的缺陷检测算法,针对不同的缺陷表现进行合理的参数设置可以检测到需要的缺陷,有效的缩短了开发周期。
以上说明书中描述的只是本发明的具体实施方式,各种举例说明不对本发明的实质内容构成限制,所属技术领域的普通技术人员在阅读了说明书后可以对以前所述的具体实施方式做修改或变形,而不背离发明的实质和范围。

Claims (5)

1.一种玻璃平坦区的缺陷检测方法,其特征在于:包括以下步骤,
1)采集图像并输入,进行图像预处理算法;
2)经过图像预处理算法,输出预处理图像;
3)对预处理图像进行图像间运算算法,输出运算后的图像;
4)将运算后的图像,结合输入的检测区域,进行区域筛选算法,输出筛选后的区域;将筛选后的区域,经过区域连接算法,输出连接后的区域;
5)若连接后的区域满足检测要求,即为需要检测的缺陷,则直接输出区域;否则循环步骤4)~5)。
2.如权利要求1所述的玻璃平坦区的缺陷检测方法,其特征在于:所述的步骤2)中,图像预处理算法包括图像滤波、图像几何变换和/或图像增强。
3.如权利要求1所述的玻璃平坦区的缺陷检测方法,其特征在于:所述的步骤3)中,图像间运算算法包括加、减、乘、除和/或取模运算。
4.如权利要求1所述的玻璃平坦区的缺陷检测方法,其特征在于:所述的步骤4)中,区域筛选算法包括对比度筛选、区域自身形态筛选、线状区域筛选、散点筛选、多线筛选、点线筛选、投影筛选、大块脏污筛选、酒精痕筛选和/或吸嘴印筛选。
5.如权利要求1所述的玻璃平坦区的缺陷检测方法,其特征在于:所述的步骤4)包括以下步骤:
A)获取所有可疑缺陷区域的位姿相关信息;
B)获取所有可疑缺陷区域的形态特征;
C)获取所有可疑缺陷区域的灰度特征;
D)根据任意两个可疑缺陷区域的各项相关性得分,加权计算连结得分,将符合要求的两个区域进行连结。
CN202010244489.2A 2020-03-31 2020-03-31 玻璃平坦区的缺陷检测方法 Pending CN111462080A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010244489.2A CN111462080A (zh) 2020-03-31 2020-03-31 玻璃平坦区的缺陷检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010244489.2A CN111462080A (zh) 2020-03-31 2020-03-31 玻璃平坦区的缺陷检测方法

Publications (1)

Publication Number Publication Date
CN111462080A true CN111462080A (zh) 2020-07-28

Family

ID=71679380

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010244489.2A Pending CN111462080A (zh) 2020-03-31 2020-03-31 玻璃平坦区的缺陷检测方法

Country Status (1)

Country Link
CN (1) CN111462080A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113295698A (zh) * 2021-04-29 2021-08-24 苏州天准软件有限公司 一种缺陷检测方法、存储介质和检测系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108830851A (zh) * 2018-06-29 2018-11-16 凌云光技术集团有限责任公司 一种lcd粗糙斑缺陷检测方法
KR101982347B1 (ko) * 2018-06-11 2019-05-24 주식회사 에이치비테크놀러지 오토 리페어 시스템의 불량 검출장치 및 방법
CN110021012A (zh) * 2019-03-27 2019-07-16 安徽皓视光电科技有限公司 基于机器视觉技术的手机镜头视窗玻璃缺陷检测方法
CN110378902A (zh) * 2019-09-11 2019-10-25 征图新视(江苏)科技股份有限公司 一种高噪声背景下的划痕检测方法
CN110648330A (zh) * 2019-11-28 2020-01-03 征图新视(江苏)科技股份有限公司 摄像头玻璃的缺陷检测方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101982347B1 (ko) * 2018-06-11 2019-05-24 주식회사 에이치비테크놀러지 오토 리페어 시스템의 불량 검출장치 및 방법
CN108830851A (zh) * 2018-06-29 2018-11-16 凌云光技术集团有限责任公司 一种lcd粗糙斑缺陷检测方法
CN110021012A (zh) * 2019-03-27 2019-07-16 安徽皓视光电科技有限公司 基于机器视觉技术的手机镜头视窗玻璃缺陷检测方法
CN110378902A (zh) * 2019-09-11 2019-10-25 征图新视(江苏)科技股份有限公司 一种高噪声背景下的划痕检测方法
CN110648330A (zh) * 2019-11-28 2020-01-03 征图新视(江苏)科技股份有限公司 摄像头玻璃的缺陷检测方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113295698A (zh) * 2021-04-29 2021-08-24 苏州天准软件有限公司 一种缺陷检测方法、存储介质和检测系统

Similar Documents

Publication Publication Date Title
CN107844750B (zh) 一种水面全景图像目标检测识别方法
CN102426649B (zh) 一种简单的高准确率的钢印数字自动识别方法
US6941016B1 (en) Method for finding contours in an image of an object
CN116664559B (zh) 基于机器视觉的内存条损伤快速检测方法
JP2003511651A (ja) 光学検査システム
JPH09138471A (ja) 特定形状領域の抽出方法、特定領域の抽出方法及び複写条件決定方法
CN115791822A (zh) 晶圆表面缺陷的视觉检测算法及检测系统
CN115578374A (zh) 一种机械零件铸造质量评估方法与系统
CN110648330B (zh) 摄像头玻璃的缺陷检测方法
CN108171674B (zh) 针对任意视角投影仪图像的视觉矫正方法
CN104597057A (zh) 一种基于机器视觉的柱状二极管表面缺陷检测装置
CN110268442B (zh) 在图像中检测背景物上的外来物的计算机实现的方法、在图像中检测背景物上的外来物的设备以及计算机程序产品
CN110807763A (zh) 一种陶瓦表面鼓包检测方法及系统
CN114863492B (zh) 一种低质量指纹图像的修复方法及修复装置
CN111583193A (zh) 基于几何轮廓模板匹配的开心果骨架提取装置及其算法
CN110348307B (zh) 一种起重机金属结构攀爬机器人的路径边缘识别方法及系统
CN115272664A (zh) 仪表盘示数展示方法、装置、电子设备和存储介质
CN111354047B (zh) 一种基于计算机视觉的摄像模组定位方法及系统
WO2023019793A1 (zh) 一种确定方法、清洁机器人和计算机存储介质
CN111462080A (zh) 玻璃平坦区的缺陷检测方法
JP2003271932A (ja) 視線方向検出装置
CN115661110B (zh) 一种透明工件识别与定位的方法
CN111290582B (zh) 一种基于改进型直线检测的投影交互区域定位方法
CN112184619A (zh) 一种基于深度学习的金属部件表面缺陷检测方法
CN112285876A (zh) 基于图像处理与气泡检测的相机自动对焦方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20200728

RJ01 Rejection of invention patent application after publication