CN108416766B - 双侧入光式导光板缺陷视觉检测方法 - Google Patents
双侧入光式导光板缺陷视觉检测方法 Download PDFInfo
- Publication number
- CN108416766B CN108416766B CN201810096003.8A CN201810096003A CN108416766B CN 108416766 B CN108416766 B CN 108416766B CN 201810096003 A CN201810096003 A CN 201810096003A CN 108416766 B CN108416766 B CN 108416766B
- Authority
- CN
- China
- Prior art keywords
- light guide
- image
- guide plate
- gray
- executing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0004—Industrial image inspection
- G06T7/0008—Industrial image inspection checking presence/absence
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/88—Investigating the presence of flaws or contamination
- G01N21/8851—Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/136—Segmentation; Edge detection involving thresholding
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/88—Investigating the presence of flaws or contamination
- G01N21/8851—Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
- G01N2021/8887—Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges based on image processing techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20048—Transform domain processing
- G06T2207/20056—Discrete and fast Fourier transform, [DFT, FFT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20092—Interactive image processing based on input by user
- G06T2207/20104—Interactive definition of region of interest [ROI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30108—Industrial image inspection
- G06T2207/30121—CRT, LCD or plasma display
Landscapes
- Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- Biochemistry (AREA)
- General Health & Medical Sciences (AREA)
- Immunology (AREA)
- Pathology (AREA)
- Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
Abstract
本发明提供一种双侧入光式导光板缺陷视觉检测方法,同时对导光板线扫灰度图像和导光板面阵灰度图像进行检测,导光板线扫灰度图像可以检测出划痕、压伤、亮暗点等细微缺陷,导光板面阵灰度图像可以检测出导光板经光照后是否存在暗影,本发明对光照变化和导光板类型变化适应性强;面阵相机和线扫相机同时检测,不增加检测时间的前提下提高了检测精度;大幅提升检测准确性;本发明的运行效率高,稳定性和鲁棒性强,不仅能够识别常见的缺陷,对于不常见的微小缺陷也具有比较高的检测能力。
Description
技术领域
本发明涉及一种基于机器视觉技术的导光板表面缺陷提取方法,属于计算机视觉领域,具体说是一种缺陷检测算法。
背景技术
导光板(Light Guide Plate,LGP)主要材料为光学压克力(PMMA)板,其化学名称是甲基丙烯酸甲脂,经过特殊的科学的加工后的透明压克力板,只要在边上装上发光体(视导光板面积大小可选择普通日光灯管、CCFL冷阴极灯管、发光二极管等光源,一般装在长度的两边),通电后压克力板整个平面就会发出明亮均匀柔和的光。透明压克力板材具有很高的透光率,扩冲击能力强,广泛应用于各种电子产品的屏幕。在导光板的丝印制作、化学蚀刻、激光加工和撞点加工等生产制造过程中,由于原料成分、设备使用情况、加工工艺以及工人操作等因素的影响,其表面不可避免地会出现亮点、漏点、黑点、网面油墨、线刮伤、镜面点伤、暗影等加工缺陷。因此,在导光板出厂前必须对其进行质量检测,将含有缺陷的导光板剔除出去。
由于导光板的缺陷具有种类繁多、表现形式各异、边缘模糊或没有明显边缘、对比度低等特点,国内导光板生产企业主要用经过专业训练的检测人员在各种角度打强光来人工检测。人工检测存在很多局限性和问题:(1)员工作业环境差,强光作业容易使员工视力变差,长时间可能使员工患有职业病;(2)由于要多角度的强光下才可能发现缺陷,对员工的技能和经验要求很高,员工不容易熟练掌握工作技能;(3)受员工经验、工作情绪波动变化、专注度降低等影响,产品缺陷不易全部拦截,造成产品质量波动;(4)由于使用人眼识别的判断,辅助的计量工具很难形成可量化的质量标准。数字图像处理技术具有信息含量大、表现形式直观、传输存储方便等优点,随着电子、计算机和通信技术的发展,基于机器视觉的表面缺陷检测成为可能,国内外学者对此开展了广泛的研究,一些研究成果已经成功应用于钢珠、铁轨等产品的表面缺陷检。
检测算法最终要应用于导光板表面缺陷的在线检测。由于导光板的制作精度要求比较高,导光板的缺陷一般非常微小,为了检测导光板缺陷需要采用高分辨率的线阵相机成像,一幅导光板图像有近500MB,这对缺陷在线检测的效率提出了很高的要求。而群创光电等导光板生产企业的一般要求每块导光板的检测速度在5秒以内,所以检测算法除了需要有比较高的表面缺陷正确识别率,还应具有很高的运行效率。采用Curvelet变换、非下采样Contourlet变换、shearlet变换、小波变换凳多尺度分析技术,算法运行效率不能满足要求,而且在嵌入式系统中难以实现;有的表面缺陷正确识别率比较低,不能满足精度要求。
因此,需要对现有技术进行改进。
发明内容
本发明要解决的技术问题是提供一种准确的双侧入光式导光板缺陷视觉检测方法。
为解决上述技术问题,本发明提供一种双侧入光式导光板缺陷视觉检测方法,包括以下步骤:
同时执行步骤S1和步骤一;
S1、获取导光板线扫灰度图像,执行步骤S2;
S2、提取导光板线扫灰度图像的边缘,得到导光板线扫灰度图像本体部分图像H(x,y),执行步骤S3;
S3、获取导光板线扫灰度图像本体部分图像H(x,y)的高度M1和长度N1,执行步骤S4;
S4、对导光板线扫灰度图像本体部分图像H(x,y)进行图像分区,执行步骤S5;
S5、利用均值滤波去除导光板线扫灰度图像本体部分图像H(x,y)中的噪声干扰,得到新图像J(x,y),执行步骤S6;
S6、对新图像J(x,y)进行分段灰度变换,得到增强后的图像K(x,y),执行步骤S7;
S7、对增强后的图像K(x,y)进行图像分割,分割出导光点像素,得到导光点区域像素I(mi,ni),执行步骤S8;
S8、遍历导光板线扫灰度图像本体部分图像H(x,y)中导光点区域像素I(mi,ni),计算每个导光点像素的灰度值的平均值Gave,执行步骤S9;
S9、设定最大评判值Gmax和最小评判值Gmin,若Gave>Gmax,导光板存在亮点,直接判断为不合格品;若Gave<Gmin,导光板存在暗点,直接判断为不合格品;若Gmin≤Gave≤Gmax,则不存在亮暗点,导光板线扫灰度图像合格,执行步骤S10;
S10、分析导光点区域像素I(mi,ni)的所有连通域特征,计算每一块连通域的面积Si;执行步骤S11;
S11、设定判定值Smax,如果满足Si<Smax,则线扫图像无缺陷,执行步骤九;反之则导光板存在压伤或者异物,直接判断为不合格品;
步骤一、获取导光板面阵灰度图像,执行步骤二;
步骤二、提取导光板面阵灰度图像的边缘,得到导光板面阵灰度图像本体部分P(x,y),执行步骤三;
步骤三、获取导光板面阵灰度图像本体部分图像P(x,y)的高度M2、长度N2,执行步骤四;
步骤四、生成导光板面阵灰度图像本体部分图像P(x,y)的背景模版背景模板Q(x,y),执行步骤五;
步骤五、对导光板面阵灰度图像本体部分图像P(x,y)和背景模版背景模板Q(x,y)进行背景差分,得到新图像S(x,y),执行步骤六;
步骤六、对新图像S(x,y)进行中值滤波,得到中值滤波后的图像W(x,y),执行步骤七;
步骤七、对图像W(x,y)作固定阈值分割,得到分割后的图像T(x,y),执行步骤八;
步骤八、遍历分割后的图像T(x,y)的所有区域长度Li,设定判别长度标准Lmax,若Li>Lmax,则导光板存在暗影缺陷,判定为不合格品;若Li≤Lmax,则导光板不存在暗影缺陷,导光板面阵灰度图像合格,执行步骤九;
步骤九、判断导光板线扫灰度图像和导光板面阵灰度图像是否都判定为合格,如果都为合格,则相应导光板为合格品;否则,则相应导光板为不合格品。
作为对本发明双侧入光式导光板缺陷视觉检测方法的改进,步骤S12包括以下步骤:
S12.1、用常量函数g(r,c)=gsub与边缘函数f(r,c)相交得到边界轮廓;组成2×3区域的6个相邻像素,选取导光板线扫灰度图像本体部分图像H(x,y)中6个像素中心点,分别为Qi,j、Qi,j+1、Qi+1,j、Qi+1,j+1、Qi+2,j、Qi+2,j+1,插值点为pi+x,j+y点,通过插入三个点R1,R2,R3,选取其中四个像素点,比如Qi,j、Qi,j+1、Qi+1,j、Qi+1,j+1,插值点pi+x,j+y对这四个像素灰度权重影响分别为:
S12.2、分别在x方向和y方向进行插值
在x方向上对R1、R2、R3进行插值,可以得到:
在y方向上对R1、R3进行插值,可得f1(p);对R2、R3进行插值,可得f2(p)
S12.3、对获得的边界轮廓采取非极大值抑制并进行拟合,分割出线划伤区域并计算出区域长度Li(i=0,1,2...N)。
作为对本发明双侧入光式导光板缺陷视觉检测方法的进一步改进,步骤四包括以下步骤:
步骤4.1、将导光板面阵灰度图像本体部分图像P(x,y)进行快速傅里叶变换,使其变换到频域中;执行步骤4.2;
步骤4.2、对于步骤4.1傅里叶变换后的图像,使用高斯滤波器,消除高斯噪声;执行步骤4.3;
步骤4.3、对于步骤4.2消除高斯噪声的图像,作傅里叶反变换,得到就是背景模板Q(x,y)。
作为对本发明双侧入光式导光板缺陷视觉检测方法的进一步改进,还包括以下步骤:
对判定为不合格品的导光板,把相应的导光板线扫灰度图像本体部分图像H(x,y)或者导光板面阵灰度图像本体部分P(x,y)的像素点作为随机变量值f(x,y);
将目标的质心移动到参考坐标系的原点位置,得出中心距:
类似的,求出u00、u20、u02等;那么感兴趣区域T的最小外接矩形的长与宽:
得到含有感兴趣区域T的图像。
本发明双侧入光式导光板缺陷视觉检测方法技术优势为:
(1)本发明对光照变化和导光板类型变化适应性强;
(2)在生产安装时只需调节几个控制参数,之后全部自动检测无需人工看守;
(3)面阵相机和线扫相机同时检测,不增加检测时间的前提下提高了检测精度;
(4)本发明搭建双目检测系统,即线扫相机和面阵相机,大幅提升检测准确性;本发明的运行效率高,稳定性和鲁棒性强,不仅能够识别常见的缺陷,对于不常见的微小缺陷也具有比较高的检测能力。
附图说明
下面结合附图对本发明的具体实施方式作进一步详细说明。
图1是本发明双侧入光式导光板缺陷视觉检测方方法的流程图;
图2是导光板线扫灰度图像均值滤波图像;
图3是导光板线扫灰度图像灰度变换图像;
图4是导光板线扫灰度图像基于小波变换的阈值分割图像;
图5是导光板面阵灰度图像生成的背景模版图像;
图6是导光板面阵灰度图像背景差分图像;
图7是导光板面阵灰度图像中值滤波图像;
图8是导光板面阵灰度图像固定阈值分割图像;
图9是导光板面阵灰度图像暗影原图;
图10是导光板面阵灰度图像暗影边界提取图像;
图11是导光板线扫灰度图像亮点缺陷提取图像;
图12是导光板线扫灰度图像线划伤缺陷提取图像;
图13是导光板线扫灰度图像压伤缺陷提取图像;
图14是导光板线扫灰度图像使用传统阈值分割得到的线划伤图像;
图15是导光板线扫灰度图像使用本发明改进的亚像素精度阈值分割得到的线划伤图像。
具体实施方式
下面结合具体实施例对本发明进行进一步描述,但本发明的保护范围并不仅限于此。
实施例1、双侧入光式导光板缺陷视觉检测方法,如图1-15所示,本发明首先搭建双目检测平台,线扫相机负责检查划痕、压伤、亮暗点等细微缺陷,面帧相机负责检测导光板经光照后是否有暗影问题。其次,对于存在缺陷的导光板图像,识别缺陷类型,计算缺陷区域的尺寸,并根据导光板不同缺陷技术要求判断其是否合格。最后,搭建实验平台和开发缺陷检测系统,并通过实验对检测系统的准确性、实时性和鲁棒性进行完善。
具体解决方案如下:
开始后同时进行步骤S1和步骤一;
S1、采用Dalsa公司16k线扫相机,获取导光板线扫灰度图像,用于检测细微缺陷;执行步骤S2;
S2、导光板本体图像提取
对目标物体的识别先是得到它的轮廓,机器视觉系统也是如此,要想识别目标物体首先要获取表现目标物体或图像轮廓的关键信息,本发明采用Sobel算子提取导光板边缘,获得导光板本体图像。
该算子包含两组3x3的矩阵,分别为横向及纵向,将之与图像作平面卷积,即可分别得出横向及纵向的亮度差分近似值。如果以A代表原始图像(导光板线扫灰度图像),Hx及Hy分别代表经横向及纵向边缘检测的图像灰度值,其公式如下:
具体计算如下:
Hx=[f(x+1,y-1)+2f(x+1,y)+f(x+1,y+1)]
-[f(x-1,y-1)+2f(x-1,y)+f(x-1,y+1)]
Hy=[f(x-1,y-1)+2f(x,y-1)+f(x+1,y-1)]
-[f(x-1,y+1)+2f(x,y+1)+f(x+1,y+1)]
其中f(x,y)表示输入原始图像A点的灰度值;
图像H(x,y)的每一个像素的横向及纵向灰度值通过以下公式,来计算该点灰度的大小:
为了提高效率,使用不开平方的近似值:|H|=|Hx|+|Hy|
如果梯度H大于某一阀值,则认为该点(x,y)在图像H(x,y)中为边缘点。
Sobel算子根据像素点上下、左右邻点灰度加权差,在边缘处达到极值这一现象检测边缘。对噪声具有平滑作用,提供较为精确的边缘方向信息。原始图像A减去边缘点的部分,即为导光板线扫灰度图像本体部分图像H(x,y)。执行步骤S3;
S3、获取导光板本体的尺寸,导光板线扫灰度图像的本体部分图像H(x,y)的高度M1、长度N1;执行步骤S4;
S4、图像分区,执行步骤S5;
由于传统生产线人工检测将导光板分成9个均等区域,为了方便最终的缺陷产品人工复检,本发明用3*3的网格将M1*N1的导光板线扫灰度图像本体部分图像H(x,y)平均分为9块,并标记Ni(i=1,2,3...9),以便确定缺陷位置。
S5、利用均值滤波去除导光板线扫灰度图像本体部分图像H(x,y)中的噪声干扰,得到新图像J(x,y);执行步骤S6;如图2所示;
由于电噪声等干扰,导光板图像不可避免会存在噪声,本发明采用均值滤波避免图像噪声对检测造成影响。
对于导光板线扫灰度图像本体部分图像H(x,y)中的每个像素点P,取其邻域S。设邻域S中含有T个像素,取其加权平均值作为处理后所得图像像素P处的灰度值。用一个像素邻域内各像素灰度的加权平均值来代替该像素原来灰度值的方法,就是邻域加权平均技术。一般邻域S的形状为正方形、矩形或者十字形等。邻域加权平均技术即可得到噪声n(i,j)和未受噪声污染的图像g(x,y)。
设噪声n(i,j)为加性噪声,且各点互不相关,其期望为0,方差为σ2,g(i,j)是未受噪声污染的图像,含有噪声的图像H(x,y)经过均值滤波后如下所示:
S6、由于导光点的颜色和背景区分性不强,需要采用分段灰度变换,将对比度扩大,得到增强后的图像K(x,y);执行步骤S7;如图3所示;
设步骤S5得到的新图像J(x,y)中每个像素为h(x,y),灰度变换后的像素为k(x,y),对图像中每个点用以下公式进行处理,得到增强后的图像K(x,y):
x1、x2代表需要需要转换的灰度范围,y1、y2代表转换后输出的灰度范围。
S7、使用基于小波变换的阈值分割,对S6得到增强后的图像K(x,y)进行图像分割,分割出导光点像素:如图4所示;
S7.1将图像映射成图
令G=(V,E)是一个连通图,其中集合V={v1,v2,...,vN}称为节点集,集合E={e1,e2,...,eM}称为边集。令Ψj k:V→R是一个小波信号,其在(j,k)处局部化,其中,j代表尺度因子,k代表平移因子。
图像中相邻像素的强度值沿着连续段移动平缓变化,像素强度值的突变部分可以看作两个不同像素集群之间的边缘。一个二维、无向、稀疏的图像G=(V,E)可以由大小为M1×N1的增强后的图像K(x,y)映射形成,如下:
S7.1.1增强后的图像K(x,y)中像素点形成图的节点:I(m,n)→Vi,其中m∈{1,2,...,M1},n∈{1,2,...N1},i=M1(n-1)+m。执行步骤S7.1.2;
S7.1.2图像中相邻像素点之间的关系形成图中节点之间的边:
Ei,j=h(I(mi,ni),I(mj,nj)),
其中τ∈{1,2,...,N},j=0,1,2…N,i≠j。τ值决定了相邻像素的范围。例如,τ=1,那么相邻像素由8个最近邻像素组成。执行步骤S7.1.3;
S7.1.3图像像素的强度值形成定义在图上的节点函数:
f(Vi)=I(m,n),其中,I(m,n)为图像像素的强度值。执行步骤S7.2;
S7.2计算小波系数Wi;
利用GWT结合哈尔小波(j=1)的方法对图像I(m,n)计算小波系数Wi。由于哈尔函数是最简单的小波函数,并且可以有效地检测出信号的突变部分,因此选择哈尔小波对图像进行研究分析。此外,由于更高的尺度小波分解需要考虑更多的相邻像素,然而感兴趣的只是第一尺度的分析,因此选择j=1。执行步骤S7.3;
S7.3局部阈值处理
对计算得到的小波系数进行局部阈值处理,从而提取导光点的区域:
其中Wi为对应于节点Vi的小波系数,th为设定的阈值,I(mi,ni)为导光点区域像素(为一个个的点)。执行步骤S8;
S8、根据步骤S7提取的导光点区域像素I(mi,ni),遍历导光板线扫灰度图像本体部分图像H(x,y)所有导光点区域像素I(mi,ni)的灰度范围,利用公式:
计算每一颗导光点灰度值的平均值Gave,式中Ni为第i个导光点的像素总数,Gi为第i个导光点所有像素的灰度总和;
然后执行步骤S9;
S9、设定最大评判值Gmax和最小评判值Gmin,若Gave>Gmax,导光板存在亮点,如图11所示,直接判断为不合格品;若Gave<Gmin,导光板存在暗点,直接判断为不合格品;若Gmin≤Gave≤Gmax,则不存在亮暗点,执行步骤S10。导光板存在亮点和暗点都判定为不合格品。
S10、遍历所有导光点区域面积;执行步骤S11;
遍历所有导光点区域面积;分析I(mi,ni)的所有连通域特征,这里计算每一块连通域的面积Si。
S11、设定判定值Smax。对于所有的连通域,如果满足Si<Smax(所有的Si都小于Smax),则线扫图像无压伤或者异物,导光板线扫灰度图像合格,执行步骤九;反之则存在压伤或者异物,如图13所示,直接结束检测。
S12、基于改进的亚像素精度阈值分割算法,提取细微线划伤区域;如图12所示;
观察发现,某些细小线划伤宽度甚至不及一个像素大小,利用传统边缘检测或者阈值分割,都无法提速出来。本发明采用改进的亚像素精度阈值分割算法,传统算法根据边缘相邻像素的灰度值进行双线性插值处理,从而达到像素细分的目的。为了进一步提高插值精度,本发明进行了三点插值法,并先后从水平、垂直两个方向进行线性插值,最终亚像素精度阈值分割处理的结果就可以用常量函数g(r,c)=gsub(gsub为阈值)与“连续”的边缘函数f(r,c)相交得到,插值具体过程如下:
S12.1以组成2×3区域的6个相邻像素为例,选取导光板线扫灰度图像本体部分图像H(x,y)中6个像素中心点分别为Qi,j、Qi,j+1、Qi+1,j、Qi+1,j+1、Qi+2,j、Qi+2,j+1,插值点为pi+x,j+y点,通过插入三个点R1,R2,R3,选取其中四个像素点(任意选取),比如Qi,j、Qi,j+1、Qi+1,j、Qi+1,j+1,插值点pi+x,j+y对这四个像素灰度权重影响分别为:
S12.2分别在x方向和y方向进行插值
在x方向上对R1、R2、R3进行插值,可以得到:
在y方向上对R1、R3进行插值,可得f1(p);对R2、R3进行插值,可得f2(p)
S12.3确定阈值分割大小,经实验测试,本发明采用阈值gsub=38并与该区域相交得到边界轮廓,如图10所示,对获得的边界轮廓采取非极大值抑制并进行拟合,分割出线划伤区域并计算出区域长度Li(i=0,1,2...N)。
图14和图15分别为导光板线扫灰度图像使用传统阈值分割和本发明改进的亚像素精度阈值得到的线划伤图像,可见使用本发明改进的亚像素精度阈值得到的线划伤图像更加准确。
S13、设定判定值Lmax。对于所有的Li,如果满足Li<Lmax(每个Li都小于Lmax),则线扫图像不存在线划伤,导光板线扫灰度图像合格,执行步骤九;反之则存在线划伤,直接结束检测。
图14为导光板线扫灰度图像使用传统阈值分割得到的线划伤图像;图15是导光板线扫灰度图像使用本发明改进的亚像素精度阈值分割得到的线划伤图像。
对于导光板面阵灰度图像,含有以下步骤:
步骤一、采用Dalsa公司500w面阵相机,获取导光板面阵灰度图像,用于检测暗影缺陷;执行步骤二;
步骤二、等同于步骤S2,其中的A代表原始图像(导光板面阵灰度图像),最后得到的是导光板面阵灰度图像本体部分图像P(x,y)。执行步骤三;
步骤三、获取导光板本体的尺寸,导光板面阵灰度图像本体部分图像P(x,y)的高度M2、长度N2;执行步骤四;
步骤四、生成背景模版;如图5;
步骤4.1、将图像进行快速傅里叶变换,使其变换到频域中;执行步骤4.2;
由步骤二可以得到,导光板面阵灰度图像本体部分图像P(x,y)大小为M2×N2,则图像P(x,y)即为周期的M2×N2离散信号,傅立叶变换类型为2-DFT,其表达公式如下:
其中F(u,v)为f(x,y)的像函数,f(x,y)为原函数P(x,y)。u=0,1,2,...,M2-1;v=0,1,2,...,N2-1,且u,v为频率值。x,y为空域中的频率值。M2和N2为尺寸大小,j为复平面上的点。
步骤4.2、使用高斯滤波器,消除高斯噪声;执行步骤4.3;
构造一个二维高斯滤波器,相对于均值滤波(meanfilter),它的平滑效果更柔和,而且边缘保留的也更好。该滤波器可以用以下公式描述:
步骤4.3、对于步骤4.2消除高斯噪声的图像,通过以下公式,作傅里叶反变换,将频域中的图像变换回空间域,该步骤得到的图像就是背景模板Q(x,y);执行步骤五;
其中f(x,y)为背景模板Q(x,y)。u=0,1,2,...,M2-1;v=0,1,2,...,N2-1,且u,v为频率值。x,y为空域中的频率值,M2和N2为尺寸大小。
步骤五、背景差分,增强两幅图像的差异,得到新图像S(x,y);如图6所示;执行步骤六;
S(x,y)=P(x,y)-Q(x,y)
步骤六、对新图像S(x,y)进行中值滤波,抑制图像上的小斑点,得到中值滤波后的图像W(x,y);如图7所示;执行步骤七;
中值滤波是一种非线性的图像平滑方法,与均值滤波器以及其他线性滤波器相比,它能够很好地滤除脉冲噪声,同时又能够保护目标图像边缘。它是一种邻域运算,类似于卷积,但计算的不是加权求和,而是把邻域中的像素按灰度级进行排序,然后选择该组的中间值作为输出像素值,中值滤波可定义为:
g(x,y)=median{f(x-i,y-j)}(i,j)∈W
式中:g(x,y)和f(x-i,y-i)分别为输出和输入像素灰度值,W为模板窗口,取方形区域。
经实验验证,本发明采用5*5的模版进行中值滤波,得到中值滤波后的图像W(x,y)。
步骤七、对W(x,y)图像作固定阈值分割;如图8所示;执行步骤八;
式中W(x,y)为步骤六得到的中值滤波后的图像,T(x,y)为分割后的图像,TH为分割阈值。对采集的样品进行反复的算法验证,确定了针对于本实验条件的最佳阈值TH=138。
步骤八、判断连通域长度范围;执行步骤九;
遍历步骤七得到的分割后的图像T(x,y)的所有区域长度Li(i=0,1,2,3…N),设定判别长度标准Lmax,若Li>Lmax,则导光板存在暗影缺陷,判定为不合格品;若Li≤Lmax,则导光板不存在暗影缺陷,导光板面阵灰度图像合格,执行步骤九;
步骤九、判断导光板线扫灰度图像和导光板面阵灰度图像是否都判定为合格,如果都为合格,则导光板为合格品;否则,则导光板为不合格品;
经以上步骤,可提取导光板的所有缺陷区域,最后借助最小外界矩形,将缺陷区域表示出来,并计算缺陷区域数学特征,具体为:
对判定为不合格品的导光板,把相应图像的像素点作为随机变量值f(x,y);(缺陷为存在亮暗点或者压伤异物,则使用相应的导光板线扫灰度图像的本体部分图像H(x,y);缺陷为存在暗影缺陷,则使用相应的导光板面阵灰度图像的本体部分图像P(x,y));
将目标的质心移动到参考坐标系的原点位置,得出中心距:
类似的,求出u00、u20、u02等。那么ROI的最小外接矩形的长与宽:
得到含有感兴趣区域T的图像。
实验一:
(1)利用线扫相机和面阵相机,获得灰度图像;
(2)对两种相机采集的图像分别作Sobel边缘检测,提取导光板本体部分;
(3)对线扫图像进行7*7均值滤波,获得如图2所示的均值滤波图像(实验得出);
(4)对均值滤波图像按照用公式进行灰度分段线性变换,将对比度进一步扩大,得到增强都的图像K(x,y)
式中x1=40,x2=140,y1=20,y2=200(实验得出);
(5)使用基于小波变换的阈值分割,对步骤4得到的K(x,y)进行图像分割,分割出导光点像素;
5.1将图像映射成图
5.2计算小波系数Wi
5.3局部阈值处理
(7)计算每一块连通域的面积Si,并且按照设定值进行判别;
(8)使用基于改进的亚像素精度阈值分割算法,提取细微线划伤区域;
8.1选取三个插值点R1,R2,R3
8.3确定分割阈值gsub=38
(9)计算每一道线划伤的长度Li,并且按照设定值进行判别;
(10)按照如下公式,对图像做快速傅立叶变换;
(11)构造一个二维高斯滤波器G(x,y)
(12)作傅里叶反变换,将频域中的图像变换回空间域,该步骤得到的图像就是背景模板Q(x,y);
(13)背景差分,得到新图像S(x,y);
S(x,y)=P(x,y)-Q(x,y)
(14)对S(x,y)进行中值滤波,抑制图像上的小斑点,得到W(x,y);
g(x,y)=median{f(x-i,y-j)}(i,j)∈W
(15)固定阈值TH=138,利用如下公式,分割出暗影边缘;
(16)判断连通域Li长度范围,并且按照设定值进行判别;
(17)对提取的缺陷区域作最小外接矩形Mpq,将缺陷显示出来;
最后,还需要注意的是,以上列举的仅是本发明的若干个具体实施例。显然,本发明不限于以上实施例,还可以有许多变形。本领域的普通技术人员能从本发明公开的内容直接导出或联想到的所有变形,均应认为是本发明的保护范围。
Claims (3)
1.双侧入光式导光板缺陷视觉检测方法,其特征在于,包括以下步骤:
同时执行步骤S1和步骤一;
S1、获取导光板线扫灰度图像,执行步骤S2;
S2、提取导光板线扫灰度图像的边缘,得到导光板线扫灰度图像本体部分图像H(x,y),执行步骤S3;
S3、获取导光板线扫灰度图像本体部分图像H(x,y)的高度M1和长度N1,执行步骤S4;
S4、对导光板线扫灰度图像本体部分图像H(x,y)进行图像分区,执行步骤S5;
S5、利用均值滤波去除导光板线扫灰度图像本体部分图像H(x,y)中的噪声干扰,得到新图像J(x,y),执行步骤S6;
S6、对新图像J(x,y)进行分段灰度变换,得到增强后的图像K(x,y),执行步骤S7;
S7、对增强后的图像K(x,y)进行图像分割,分割出导光点像素,得到导光点区域像素I(mi,ni),执行步骤S8;
S8、遍历导光板线扫灰度图像本体部分图像H(x,y)中导光点区域像素I(mi,ni),计算每个导光点像素的灰度值的平均值Gave,执行步骤S9;
S9、设定最大评判值Gmax和最小评判值Gmin,若Gave>Gmax,导光板存在亮点,直接判断为不合格品;若Gave<Gmin,导光板存在暗点,直接判断为不合格品;若Gmin≤Gave≤Gmax,则不存在亮暗点,导光板线扫灰度图像合格,执行步骤S10;
S10、分析导光点区域像素I(mi,ni)的所有连通域特征,计算每一块连通域的面积Si;执行步骤S11;
S11、设定判定值Smax,如果满足Si<Smax,则线扫图像无缺陷,执行步骤九;反之则导光板存在压伤或者异物,直接判断为不合格品;
步骤一、获取导光板面阵灰度图像,执行步骤二;
步骤二、提取导光板面阵灰度图像的边缘,得到导光板面阵灰度图像本体部分P(x,y),执行步骤三;
步骤三、获取导光板面阵灰度图像本体部分图像P(x,y)的高度M2、长度N2,执行步骤四;
步骤四、生成导光板面阵灰度图像本体部分图像P(x,y)的背景模版背景模板Q(x,y),执行步骤五;
步骤五、对导光板面阵灰度图像本体部分图像P(x,y)和背景模版背景模板Q(x,y)进行背景差分,得到新图像S(x,y),执行步骤六;
步骤六、对新图像S(x,y)进行中值滤波,得到中值滤波后的图像W(x,y),执行步骤七;
步骤七、对图像W(x,y)作固定阈值分割,得到分割后的图像T(x,y),执行步骤八;
步骤八、遍历分割后的图像T(x,y)的所有区域长度Li,设定判别长度标准Lmax,若Li>Lmax,则导光板存在暗影缺陷,判定为不合格品;若Li≤Lmax,则导光板不存在暗影缺陷,导光板面阵灰度图像合格,执行步骤九;
步骤九、判断导光板线扫灰度图像和导光板面阵灰度图像是否都判定为合格,如果都为合格,则相应导光板为合格品;否则,则相应导光板为不合格品。
2.根据权利要求1所述的双侧入光式导光板缺陷视觉检测方法,其特征在于,步骤S12包括以下步骤:
S12.1、用常量函数g(r,c)=gsub与边缘函数f(r,c)相交得到边界轮廓;组成2×3区域的6个相邻像素,选取导光板线扫灰度图像本体部分图像H(x,y)中6个像素中心点,分别为Qi,j、Qi,j+1、Qi+1,j、Qi+1,j+1、Qi+2,j、Qi+2,j+1,插值点为pi+x,j+y点,通过插入三个点R1,R2,R3,选取其中四个像素点,比如Qi,j、Qi,j+1、Qi+1,j、Qi+1,j+1,插值点pi+x,j+y对这四个像素灰度权重影响分别为:
S12.2、分别在x方向和y方向进行插值
在x方向上对R1、R2、R3进行插值,可以得到:
在y方向上对R1、R3进行插值,可得f1(p);对R2、R3进行插值,可得f2(p)
S12.3、对获得的边界轮廓采取非极大值抑制并进行拟合,分割出线划伤区域并计算出区域长度Li(i=0,1,2...N);
S13、设定判定值Lmax:
对于所有的Li,如果满足每个Li都小于Lmax,则线扫图像不存在线划伤,导光板线扫灰度图像合格,执行步骤九;反之则存在线划伤,直接结束检测。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810096003.8A CN108416766B (zh) | 2018-01-31 | 2018-01-31 | 双侧入光式导光板缺陷视觉检测方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810096003.8A CN108416766B (zh) | 2018-01-31 | 2018-01-31 | 双侧入光式导光板缺陷视觉检测方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108416766A CN108416766A (zh) | 2018-08-17 |
CN108416766B true CN108416766B (zh) | 2021-10-22 |
Family
ID=63126707
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810096003.8A Active CN108416766B (zh) | 2018-01-31 | 2018-01-31 | 双侧入光式导光板缺陷视觉检测方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108416766B (zh) |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109272525B (zh) * | 2018-09-17 | 2020-12-22 | 浙江理工大学 | 一种导光板白点缺陷检测方法 |
CN109377485B (zh) * | 2018-10-12 | 2022-09-06 | 深圳市众智视觉科技有限公司 | 一种方便面包装缺陷机器视觉检测方法 |
CN110296994B (zh) * | 2019-06-21 | 2021-10-22 | 金名山光电(吴江)有限公司 | 导光板v-cut结构视觉检测方法 |
CN110389127B (zh) * | 2019-07-03 | 2020-08-14 | 浙江大学 | 一种金属陶瓷零件识别及表面缺陷检测系统和方法 |
CN110514406B (zh) * | 2019-07-12 | 2021-04-06 | 佛山市青松科技股份有限公司 | 一种led灯板的检测方法、电子设备及存储介质 |
CN110987954B (zh) * | 2019-12-30 | 2021-10-22 | 江南大学 | 一种消除皮革表面缺陷检测盲区的方法及系统 |
CN112365439B (zh) * | 2020-09-24 | 2023-10-03 | 南昌大学 | 一种镀锌钢gmaw焊缝成形特征与焊枪方向同步实时检测方法 |
CN112651968B (zh) * | 2021-01-20 | 2021-09-07 | 广东工业大学 | 一种基于深度信息的木板形变与凹坑检测方法 |
CN113706498A (zh) * | 2021-08-25 | 2021-11-26 | 广东奥普特科技股份有限公司 | 一种锂电池极片视觉检测装置 |
CN114323579B (zh) * | 2021-12-15 | 2024-10-18 | 东莞精贸五金塑胶有限公司 | 一种透明导光件异色自动检测方法 |
CN117392127B (zh) * | 2023-12-11 | 2024-04-12 | 深圳精智达技术股份有限公司 | 一种显示面板边框的检测方法、装置和电子设备 |
CN118279301A (zh) * | 2024-05-31 | 2024-07-02 | 江苏瀚阳新材料科技有限公司 | 基于图像处理的导光板质量监测方法和系统 |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101699273A (zh) * | 2009-10-29 | 2010-04-28 | 北京交通大学 | 一种在线钢轨探伤的图像处理辅助检测装置及方法 |
JP2010145353A (ja) * | 2008-12-22 | 2010-07-01 | Dainippon Printing Co Ltd | 外観検査装置 |
CN101770032A (zh) * | 2010-01-15 | 2010-07-07 | 电子科技大学 | 一种激光锁定成像方法及装置 |
CN101871895A (zh) * | 2010-05-10 | 2010-10-27 | 重庆大学 | 连铸热坯表面缺陷激光扫描成像无损检测方法 |
CN102288613A (zh) * | 2011-05-11 | 2011-12-21 | 北京科技大学 | 一种灰度和深度信息融合的表面缺陷检测方法 |
JP2014164194A (ja) * | 2013-02-26 | 2014-09-08 | Japan Display Inc | 表示装置及び電子機器 |
CN104422698A (zh) * | 2013-09-04 | 2015-03-18 | 昆山钞票纸业有限公司 | 随动式防伪纸定位施放荧光纤维在线检测装置 |
CN105203570A (zh) * | 2015-09-28 | 2015-12-30 | 中北大学 | 气缸套缺陷的x射线自动检测装置和方法 |
CN105784713A (zh) * | 2016-03-11 | 2016-07-20 | 南京理工大学 | 基于机器视觉的密封圈表面缺陷检测方法 |
CN106053479A (zh) * | 2016-07-21 | 2016-10-26 | 湘潭大学 | 一种基于图像处理的工件外观缺陷的视觉检测系统 |
CN106122697A (zh) * | 2016-08-31 | 2016-11-16 | 中国电子科技集团公司第四十五研究所 | 相机多维度支撑调整装置及其调整方法 |
CN106733701A (zh) * | 2016-12-23 | 2017-05-31 | 郑州轻工业学院 | 马铃薯多级联合智能缺陷检测系统及检测方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011128411A (ja) * | 2009-12-18 | 2011-06-30 | Konica Minolta Business Technologies Inc | 静電荷像現像用グレートナーおよび画像形成方法 |
-
2018
- 2018-01-31 CN CN201810096003.8A patent/CN108416766B/zh active Active
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010145353A (ja) * | 2008-12-22 | 2010-07-01 | Dainippon Printing Co Ltd | 外観検査装置 |
CN101699273A (zh) * | 2009-10-29 | 2010-04-28 | 北京交通大学 | 一种在线钢轨探伤的图像处理辅助检测装置及方法 |
CN101770032A (zh) * | 2010-01-15 | 2010-07-07 | 电子科技大学 | 一种激光锁定成像方法及装置 |
CN101871895A (zh) * | 2010-05-10 | 2010-10-27 | 重庆大学 | 连铸热坯表面缺陷激光扫描成像无损检测方法 |
CN102288613A (zh) * | 2011-05-11 | 2011-12-21 | 北京科技大学 | 一种灰度和深度信息融合的表面缺陷检测方法 |
JP2014164194A (ja) * | 2013-02-26 | 2014-09-08 | Japan Display Inc | 表示装置及び電子機器 |
CN104422698A (zh) * | 2013-09-04 | 2015-03-18 | 昆山钞票纸业有限公司 | 随动式防伪纸定位施放荧光纤维在线检测装置 |
CN105203570A (zh) * | 2015-09-28 | 2015-12-30 | 中北大学 | 气缸套缺陷的x射线自动检测装置和方法 |
CN105784713A (zh) * | 2016-03-11 | 2016-07-20 | 南京理工大学 | 基于机器视觉的密封圈表面缺陷检测方法 |
CN106053479A (zh) * | 2016-07-21 | 2016-10-26 | 湘潭大学 | 一种基于图像处理的工件外观缺陷的视觉检测系统 |
CN106122697A (zh) * | 2016-08-31 | 2016-11-16 | 中国电子科技集团公司第四十五研究所 | 相机多维度支撑调整装置及其调整方法 |
CN106733701A (zh) * | 2016-12-23 | 2017-05-31 | 郑州轻工业学院 | 马铃薯多级联合智能缺陷检测系统及检测方法 |
Non-Patent Citations (1)
Title |
---|
周子淳." 基于亚像素分析的轴类零件自动检测技术".《中国优秀硕士学位论文全文数据库(电子期刊)信息科技辑》.2016, * |
Also Published As
Publication number | Publication date |
---|---|
CN108416766A (zh) | 2018-08-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108416766B (zh) | 双侧入光式导光板缺陷视觉检测方法 | |
CN112419250B (zh) | 路面裂缝数字图像提取、裂缝修补及裂缝参数计算方法 | |
CN106651872B (zh) | 基于Prewitt算子的路面裂缝识别方法及系统 | |
CN108629775B (zh) | 一种热态高速线材表面图像处理方法 | |
CN108346141B (zh) | 单边侧入光式导光板缺陷提取方法 | |
CN107784669A (zh) | 一种光斑提取及其质心确定的方法 | |
CN114140679A (zh) | 一种缺陷融合方法、装置、识别系统及存储介质 | |
CN115908269A (zh) | 视觉缺陷检测方法、装置、存储介质和计算机设备 | |
JP2004294202A (ja) | 画面の欠陥検出方法及び装置 | |
CN109102497B (zh) | 高分辨率的导光板图像缺陷检测方法 | |
CN109166125A (zh) | 一种基于多边缘融合机制的三维深度图像分割算法 | |
CN109685760A (zh) | 一种基于matlab的slm粉床铺粉图像凸包凹陷缺陷检测方法 | |
CN111080636A (zh) | 彩钢瓦表面缺陷的cnn语义分割自学习检测方法 | |
CN109949294A (zh) | 一种基于OpenCV的断口形貌图裂纹缺陷提取方法 | |
CN107545557A (zh) | 粪便图像中的虫卵检测方法和装置 | |
WO2019181072A1 (ja) | 画像処理方法、コンピュータプログラムおよび記録媒体 | |
CN110807763A (zh) | 一种陶瓦表面鼓包检测方法及系统 | |
CN110246139B (zh) | 基于双阈值的浮游生物原位图像roi快速提取方法 | |
CN116485719A (zh) | 一种用于裂缝检测的自适应canny方法 | |
CN114937003A (zh) | 一种针对玻璃面板的多类型缺陷检测系统和方法 | |
CN110530894B (zh) | 导光板亮点缺陷检测方法 | |
JP2005165387A (ja) | 画面のスジ欠陥検出方法及び装置並びに表示装置 | |
CN110349133B (zh) | 物体表面缺陷检测方法、装置 | |
JP3860540B2 (ja) | エントロピーフィルタ及び該フィルタを用いた領域抽出法 | |
CN100371944C (zh) | 基于反射或透射光强分布特性的灰度图像分割方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20210819 Address after: 311215 room 806-6, building 1, No. 371, Xingxing Road, Xiaoshan District, Hangzhou City, Zhejiang Province Applicant after: Hangzhou Hengdian Technology Co.,Ltd. Address before: 310018, No. 2, No. 5, Xiasha Higher Education Park, Hangzhou, Zhejiang Applicant before: Zhejiang University of Technology |
|
GR01 | Patent grant | ||
GR01 | Patent grant |