CN1297943C - 图像缺陷检查装置和图像缺陷检查方法 - Google Patents
图像缺陷检查装置和图像缺陷检查方法 Download PDFInfo
- Publication number
- CN1297943C CN1297943C CN03105144.8A CN03105144A CN1297943C CN 1297943 C CN1297943 C CN 1297943C CN 03105144 A CN03105144 A CN 03105144A CN 1297943 C CN1297943 C CN 1297943C
- Authority
- CN
- China
- Prior art keywords
- image
- data
- template
- unit
- template image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 30
- 230000007547 defect Effects 0.000 title abstract description 21
- 238000007689 inspection Methods 0.000 claims abstract description 21
- 238000004364 calculation method Methods 0.000 claims abstract description 20
- 230000002950 deficient Effects 0.000 claims description 41
- 238000012360 testing method Methods 0.000 claims description 26
- 239000000284 extract Substances 0.000 claims description 24
- 238000000605 extraction Methods 0.000 claims description 9
- 238000010606 normalization Methods 0.000 claims description 9
- 238000010587 phase diagram Methods 0.000 claims description 8
- 238000012545 processing Methods 0.000 abstract description 32
- 238000006243 chemical reaction Methods 0.000 description 13
- 238000012937 correction Methods 0.000 description 13
- 230000008569 process Effects 0.000 description 10
- 230000008859 change Effects 0.000 description 7
- 238000001514 detection method Methods 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 5
- 238000002594 fluoroscopy Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 238000012423 maintenance Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 238000007639 printing Methods 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 238000011112 process operation Methods 0.000 description 2
- 230000007704 transition Effects 0.000 description 2
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 230000001915 proofreading effect Effects 0.000 description 1
- 238000002310 reflectometry Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
- 238000009966 trimming Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/00002—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for
- H04N1/00007—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for relating to particular apparatus or devices
- H04N1/00015—Reproducing apparatus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0004—Industrial image inspection
- G06T7/001—Industrial image inspection using an image reference approach
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/00002—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/00002—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for
- H04N1/00026—Methods therefor
- H04N1/00031—Testing, i.e. determining the result of a trial
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/00002—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for
- H04N1/00026—Methods therefor
- H04N1/00047—Methods therefor using an image not specifically designed for the purpose
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/00002—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for
- H04N1/00026—Methods therefor
- H04N1/0005—Methods therefor in service, i.e. during normal operation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/00002—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for
- H04N1/00026—Methods therefor
- H04N1/00068—Calculating or estimating
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/00002—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for
- H04N1/00071—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for characterised by the action taken
- H04N1/00074—Indicating or reporting
- H04N1/00076—Indicating or reporting locally
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/00002—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for
- H04N1/00071—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for characterised by the action taken
- H04N1/00074—Indicating or reporting
- H04N1/00079—Indicating or reporting remotely
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30108—Industrial image inspection
- G06T2207/30144—Printing quality
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
- Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
- Complex Calculations (AREA)
Abstract
本发明的图像缺陷检查装置包括:模板图像产生部,用于根据参考图像数据产生模板图像;对应图像提取部,用于从用于检查的扫描图像的数字数据中提取位于与模板图像对应的位置处的预定图像;数据嵌入部,用于把希望的相同图形数据嵌入模板图像和由对应图像提取部提取的图像;正规化相关值计算处理单元,用于根据被嵌入了图形数据的模板图像和所提取图像来获得一个正规化相关系数;和缺陷判断部,用于通过把由正规化相关值计算处理单元获得的正规化相关系数与预定阈值进行比较以获得二者之间的大小关系,来判断是否存在缺陷。
Description
技术领域
本发明涉及图像检查装置和图像检查方法,具体涉及在用于输出基于图像数据记录了图像的图像记录介质的图像输出装置中使用的图像检查装置及其图像检查方法。
背景技术
在传统上,作为用于检查一个输出图像中包含的缺陷的方法,已经提出了一种基于正规化相关方法的缺陷检查方法。这种缺陷检查方法的一个优点是,甚至当由于照明条件的变化使得用于检查的扫描图像的对比度与一个参考图像的对比度不同时,也能以正确方式进行缺陷检查。
根据以下公式1计算从参考图像数据产生的具有N×M像素的模板图像T(i,j)与从用于检查的扫描图像提取的图像I(i,j)之间的正规化相关值C:
当模板图像与从用于检查的扫描图像提取的图像完全一致时,正规化相关值C变为1。另一方面,当模板图像与从用于检查的扫描图像提取的图像完全不一致时(当模板图像和所提取的图像代表明暗彼此反转的图形时),正规化相关值C变为-1。
在实际的缺陷检查装置中,模板图像对应于不包含噪声的理想无缺陷数据,而用于检查的扫描图像对应于以下这种图像数据,即在图像记录介质上记录的、从图像输出装置输出的、从一个图像转换得到的数字数据。因此,由一个用于把图像转换到数字数据的转换单元产生的误差和噪声被混合到用于检查的扫描图像中。
结果,甚至当用于检查的扫描图像没有缺陷时,它的正规化相关值也不总是等于1。因此,当正规化相关值大于或等于一个预定阈值时,可以判断出参考图像与用于检查的扫描图像一致,因此检查对象图像没有缺陷。
对于该基于正规化相关的缺陷检查方法,在以下现有技术中已经提出几个问题和解决手段。
在JP-A-Hei.9-62841中揭示的“图像匹配方法和图像匹配装置”中,当一个图像具有诸如图像背景的低灰度级级值(暗图像部分)时,这种强制找出一个具有较高相关值的部分的基于正规化相关值的缺陷检查方法存在一个问题。在本例中,在计算相关值C时,采用灰度级级值自身的累积值,而不是已经根据平均电平和灰度级级值之间的差校正的灰度级级值后获得的累积值。因此,在不具有灰度级级值的暗背景中可以避免正规化相关值中包含的这种误差。
而且,在JP-A-Hei.7-121711中揭示的“图形匹配中的正规化相关的相关值的的相关值校正装置/方法”中指出了以下问题。即,甚至当正规化相关的相关值等于1时,用于检查的扫描图像和参考图像二者也不总是从具有相同反射率分布的对象上捕获的。在本例中,基于参考图像的灰度级级值的平均值、用于检查的扫描图像的灰度级级值的平均值、用于检查的扫描图像的标准偏差、和参考图像的标准偏差来确定校正量,以校正相关值。
但是,鉴于缺陷检查是在输出图像的整个区域上执行的,存在一些不能通过从参考图像产生的模板图像来计算正规化相关值的情况。
例如,可以是这样一种情况,即,参考图像的模板图像中没有灰度级值变化并且模板图像是在位于写有字符的文件的外围部分处的空白部分或具有均匀灰度级值的部分(例如图像)中产生的。在此情况下,上述公式中定义的模板图像T(i,j)不依赖于i和j;模板图像中的每个灰度级值变为一个平均值(T(i,j)=μT),上述公式右侧的分母和分子变为零;因此,正规化相关值C变得不稳定。换句话说,当在用于检查的扫描图像的该部分的一个位置处存在缺陷时,不能进行缺陷检查。
根据JP-A-Hei.62841中揭示的该技术,甚至当参考图像的模板图像中没有灰度级值变化时,也可以计算相关值。但是,该技术具有以下严重问题。也就是说,相对于图像匹配装置的正规化相关带来的缺陷检查的优点,即图像灰度级值的偏移变化和照明光量的变化,丧失了该图像匹配装置的较高强健性。
而且,在JP-A-Hei.7-121711中揭示的技术中,当参考图像的模板图像中没有灰度级值变化时,无法解决以下一个基本问题,即,该技术不能计算正规化相关值。
发明内容
本发明的目的是提供一种图像缺陷检查装置。也就是说,在利用正规化相关方法的图像缺陷检查装置中,甚至当参考图像的模板图像中没有灰度级值变化时,也可以计算正规化相关值,可以以高精度检测缺陷,并且该图像缺陷检查装置可以具有非常宽的应用范围而不受图像对象的任何限制。
本发明可以实现该目的。本发明提供一种图像缺陷检查装置,用于把参考图像数据与用于检查的扫描图像进行比较以判断用于检查的扫描图像中是否存在缺陷,该检查的扫描图像是基于参考图像数据从一个图像输出装置中输出的,并且被形成在一个图像记录介质上,该图像缺陷检查装置包括:
图像获取单元,用于获取从图像输出装置输出的用于检查的扫描图像以把所获取的用于检查的扫描图像转换为数字数据;
存储单元,用于存储参考图像数据和由图像获取单元转换的数字数据;
模板图像产生单元,用于根据参考图像数据产生模板图像;
对应图像提取单元,用于从存储单元中存储的数字数据中提取位于与模板图像对应的位置处的预定图像;
数据嵌入单元,用于把希望的相同图形数据嵌入模板图像和由对应图像提取单元提取的预定图像;
正规化相关值计算单元,用于根据被数据嵌入单元嵌入了相同图形数据的模板图像和所提取图像来计算一个正规化相关系数;和
缺陷判断单元,用于把由正规化相关值计算单元计算的正规化相关系数与预定阈值进行比较以获得二者之间的大小关系,从而判断用于检查的扫描图像是否包含缺陷。
在根据本发明的图像缺陷检查装置中,数据嵌入单元把预定数据图形嵌入参考图像数据和用于检查的扫描图像的数字数据的相同位置。因此,正规化相关值计算单元通过采用已经被嵌入了图形数据的这些图像数据来计算正规化相关系数。结果,甚至当图像数据没有灰度级值变化时,也可以由于嵌入的图形数据而发生灰度级变化,从而可以计算正规化相关系数。
本发明还提供一种图像缺陷检查方法,用于把参考图像数据与用于检查的扫描图像进行比较以判断用于检查的扫描图像中是否存在缺陷,该检查的扫描图像是基于参考图像数据从一个图像输出装置中输出的,并且被形成在一个图像记录介质上,该图像缺陷检查方法包括:
获取从图像输出装置输出的用于检查的扫描图像以把所获取的用于检查的扫描图像转换为数字数据;
存储参考图像数据和由图像获取单元转换的数字数据;
根据参考图像数据产生模板图像;
从存储的数字数据中提取位于与模板图像对应的位置处的预定图像;
把希望的相同图形数据嵌入模板图像和所提取的预定图像;
根据被嵌入了相同图形数据的模板图像和所提取图像来计算一个正规化相关系数;和
把计算的正规化相关系数与预定阈值进行比较以获得二者之间的大小关系,从而判断用于检查的扫描图像是否包含缺陷。
附图说明
图1是用于解释根据本发明一个实施例模式的图像缺陷检查装置的方框图;
图2是图像缺陷检查装置的外观图;
图3是用于说明图像缺陷检查装置的处理顺序操作的流程图;
图4是用于表示通过划分一个参考图像获得一个模板图像的图;
图5是用于表示所嵌入数据的布置的图;
图6是用于表示在所嵌入数据中以棋盘图形布置多个像素的布置示例的图;
图7是用于表示在所嵌入数据中以棋盘图形布置多个像素的另一个布置示例的图;
图8是用于表示在所嵌入数据中以行形状布置多个像素的布置示例的图;
图9是在采用接触传感器的情况下图像缺陷检查装置的外观图。
具体实施方式
现在参考附图对本发明的实施例模式进行说明。在该说明中,本发明被构造为一个激光打印机的打印处理系统(图像输出装置)的一部分。
图1是用于解释应用了本发明图像缺陷检查装置的打印处理系统的示意方框图。图像缺陷检查装置被安装在图2的激光打印机(此后称为“打印机”)201上。
如图1所示,在打印处理系统中,CPU 101,RAM 102,硬盘驱动器(HDD)103,外部接口电路(外部接口)104,IOT控制器105(IOT:图像输出终端),和用于CCD相机的CCD相机接口107通过数据总线108相互连接。采用外部接口104以便从外部输入打印数据。打印数据以页面描述语言描述。IOT控制器105对应于一个用于连接图像输出终端(IOT未示出)的接口电路。图像输出终端通过利用从激光束产生的光束以输出打印纸基于静电潜像在纸上打印一个图像。CCD相机106作为一个用于把打印图像转换为数字数据的单元。CCD相机接口电路107用于连接打印处理系统的CCD相机106。
用于存储程序的ROM 109连接到CPU 101。CPU 101从ROM 109读出该程序,从而适当地定时执行所读取的程序,以便控制打印控制处理操作和图像缺陷检查处理操作(将在后面说明)。
而且,CPU 101通过数据总线108向/从其它硬件发送/接收在打印处理操作和图像缺陷处理操作中使用的图像数据。作为接口电路104的接口部分,例如可以采用一个连接到个人计算机(PC)的打印机板的并行端口和/或一个以太网(R)接口。
硬盘驱动器103具有用于存储通过外部接口104输入的打印数据的存储区域和用于存储通过把打印数据扩展为位图所产生的打印处理后的一页图像数据的另一个存储区域。
RAM 102包含一个用于执行打印处理操作的区域,即一个用于执行打印处理操作的工作区域,和一个用于缓冲待发送到IOT控制器105的图像数据(通过把打印数据扩展为位图所获得的图像数据,即原始图像数据)的缓冲区域。此外,RAM 102包含一个用于执行图像缺陷检查/处理操作的区域,即一个用于执行用于输出检查的图像处理操作的工作区域,和一个用于存储捕获的图像数据(即用于检查的扫描图像数据)的区域。
IOT控制器105以IOT的处理顺序把图像数据重新布置,并控制IOT以产生激光二极管的信号。用于CCD相机106的CCD相机接口电路107对CCD相机106的输出数据进行模数转换(此后称为A/D转换),然后把A/D转换的输出数据存储在RAM 102中。
如图2所示,该CCD相机106被设置在一位置使得它可以捕获打印机201的出纸盒203的上表面上的经打印处理后的纸202的整个区域。
图像缺陷检测处理部100主要由用于检查的扫描图像数据预处理部、参考图像数据预处理部、和正规化相关计算处理部构成。
用于检查的扫描图像数据预处理部包括明暗校正部110、光学失真校正部111、透视转换部112、和区域提取部113。用于检查的扫描图像数据(捕获图像)通过数据总线108被输入明暗校正部110。进行明暗校正和光学失真校正以便校正CCD相机106的特性、捕获操作的照明条件等等。
透视转换部112对打印图像(纸尺寸的图像)进行校正。换句话说,执行荧光透视转换以便校正经打印处理后的纸202的图像(用于检查的扫描图像),该图像是由图2所示位于出纸盒203上方的CCD相机106沿着倾斜方向捕获的。区域提取部113执行从用于检查的扫描图像(捕获图像)提取一个所需纸尺寸的区域的处理操作。
参考图像数据预处理部包括分辨率转换部114、模糊(渐晕)处理校正系数计算单元115、和模糊处理单元116。参考图像数据通过数据总线108被输入分辨率转换部114。分辨率转换部转换该参考图像,使得参考图像的分辨率与由区域提取部113提取的图像的分辨率一致。而且,模糊处理校正系数计算单元115计算一个模糊处理校正系数,该系数把参考图像的边沿部分的模糊程度校正到基本等于捕获图像的边沿部分的模糊程度。然后模糊处理单元116基于该模糊处理校正系数执行该参考图像的模糊处理。
正规化相关计算处理部包括模板图像产生部117、对应图像提取部118、灰度级确定部119、数据嵌入部120和121、正规化相关值计算处理部122、和缺陷判断部123。
CPU 101通过数据总线108把模板图像的尺寸发送到模板图像产生部117。模板图像产生部117从参考图像数据预处理部获得的数据中切出一个正规化相关值计算所需的模板图像。具体地,模板图像产生部117对由参考图像数据预处理部处理的参考图像进行划分,以生成多个模板图像,并继而为每个模板图像分配号码。对应图像提取部118从用于检查的扫描图像数据预处理操作获得的数据中提取一个对应图像。对应图像具有与模板图像相同的尺寸,并且位于与模板图像相同的位置。具体地,首先对应图像提取部118对由用于检查的扫描图像预处理部处理的捕获数据进行划分,并为每个划分后的捕获图像分配号码。然后,对应图像提取部118输出,例如,对应于模板图像No.1的划分后的捕获图像No.1(即,对应图像)。
灰度级值确定部119根据模板图像的灰度级值数据确定待嵌入的数据的灰度级。在数据嵌入部120和121中,具有由灰度级值确定部119确定的灰度级值的预定图形的数据分别被嵌入模板图像和对应图像。正规化相关值计算处理部122根据模板图像和对应图像计算正规化相关值。基于计算结果,缺陷判断部123判断是否存在缺陷。
接着,将参考图3所示流程图对根据本实施例的打印处理系统的处理操作进行说明。当打印机进入等待状态时(S300),CCD相机106响应于来自CPU 101的指令,以周期性方式捕获位于出纸盒203上方的区域以输出一个捕获图像。
CPU 101把捕获图像与存储器中存储的出纸盒203的图像进行比较,并由此判断出纸盒203上是否有纸。当出纸盒203上有纸时,CPU 101把一个图像可检查标志设置为OFF,并继续处于等待状态。当出纸盒203上没有纸时,CPU 101把图像可检查标志设置为ON,并连续处于等待状态。
当CPU 101在等待状态下接收到一个打印作业(S301)并且图像可检查标志(S302)被设置为OFF时,CPU 101执行正常打印处理操作(S304)。当图像可检查标志(S302)被设置为ON时,CPU 101在打印作业的第一张图像上执行图像检查。
CPU 101执行第一张图像的打印处理操作(S303),把扩展的图像数据发送到IOT控制器105,并且还把扩展的图像数据存储到HDD 103中。当完成了最后图像数据的表现(rendering)处理操作时,CPU 101等待从IOT控制器105发出的第一张图像处理完成信号(S308)。当发送了第一张图像处理完成信号时,CPU 101在经过预定时间后把一个触发信号发送到CCD相机106(S309)。
CCD相机106与该触发信号同步地打开一个快门。此时,该快门恰在经打印后的纸已经被输出到出纸盒203上后打开。当一个打印作业打印多张图像并且在步骤S303中定义的一张图像的打印处理操作结束时,CPU101与上述图像处理操作并行地执行剩余的打印处理操作。CCD相机接口电路107把由CCD相机106捕获的图像数据转换为数字图像信号,然后,数字图像信号被存储在存储器(RAM 102)中。
所存储的图像数据由明暗校正进行处理(S310),然后,由光学失真校正进行处理(S311)。接着,利用边沿检测操作提取一个梯形原始图像中的坐标值(S312)以计算荧光透视转换操作之前的校正系数(S313)。
接着,通过实际地进行荧光透视转换处理操作把具有梯形形状的原始区域几何地转换为矩形形状的原始区域(S314)。接着,通过利用作为背景的出纸盒203的颜色与纸边沿的白色之间的差,从所转换的图像中提取矩形原始区域中的坐标值(S315),然后,把该坐标值发送到原始图像数据的分辨率转换处理操作(S316)。
接着,重新计算矩形区域的校正系数,使得在步骤S313计算的校正系数可以应用于矩形转换的图像(S317)。接着,仅从在步骤S315中提取的坐标值中切出原始区域(S318),然后,把切出的原始区域存储在存储器(RAM 102)中。
另一方面,对于HDD 103中存储的图像数据,通过基于在步骤S315中提取的矩形原始区域的坐标值,使用线性插值方法等来执行分辨率转换处理操作(S316)。随后,执行模糊处理操作(S319),然后,把所得图像数据存储在存储器(RAM 102)中。该图像数据被用作参考图像数据。
执行模糊处理操作的原因如下:即,由于参考图像数据具有理想的可变灰度级色标特性,因此执行与不能从捕获图像中去除的模糊特性等同的模糊处理操作,使得在进行正规化相关值计算处理操作(将在后面说明)时发生的误差可以变得最小。
接着,把计数器(未示出)设置为(i=1)(S320)。如图4所示,在模板图像产生部117中把参考图像数据划分为N个模板图像Ti(i=1到N)(S321)。在图4所示的例子中,各划分图像数据的像素数量彼此相等并且具有矩形形状。划分的总数和划分方法可以根据希望确定(当参考图像数据较小时,不需要对小参考图像数据进行划分)。而且,当不进行整个原始图像的缺陷检查时,可以划分它的一个部分区域。
尽管位置分辨率和尺寸分辨率与CCD相机的像素数和捕获条件有关,但是一般来说,划分得越窄,在缺陷检测操作中图像缺陷的位置分辨率和尺寸分辨率的改善就越大。
在本实施例模式中,当把A4尺寸(由JIS定义)的图像用作缺陷用于检查的扫描图像时,该图像最好被划分为大约50到1000个图像区域。但是,本发明不限于上述划分。可以构想另一种划分方法。即,当选择划分数为一个较小的数时,可以首先进行是否存在缺陷的粗略判断。然后,当更精细地划分图像时,可以进行是否存在缺陷的精确判断。也就是说,当判断出存在缺陷时,可以把模板图像划分为多个小模板图像。
接着,把这些划分的图像中的一个图像作为在缺陷检查中使用的模板图像401(参见图4)。然后,由数据嵌入部120把数据嵌入模板图像401(S322)。
灰度级值确定部119基于模板图像的像素数据的统计值(例如平均值、方差值、峰值、谷值等)确定待嵌入的数据的灰度级值(在本实施例中,使用平均值作为统计值)。而且,可以通过采用所提取的图像数据的一个统计值而不是模板数据的统计值来确定待嵌入的数据的灰度级值。
当模板图像的像素数据的平均值大于一个图像的中间灰度级值(例如,256灰度级级的情况下的128)时,灰度级值确定部119把使模板图像的像素数据的平均值变小的值确定为待嵌入的数据的灰度级值。反之,当模板图像的像素数据的平均值小于图像的中间灰度级值时,灰度级值确定部119把使模板图像的像素数据的平均值变大的值确定为待嵌入的数据的灰度级值。
希望的是,以如下方式设置待嵌入的数据的灰度级值,即,使得当不存在缺陷时,正规化相关值在用于检查的扫描图像的整个区域上不怎么变化。例如,当使用图4所示的白色部分的模板图像时的正规化相关值与当采用图4所示的字符部分的模板图像时的另一个正规化相关值之间没有特定变化。
在本实施例模式中,当模板图像的平均灰度级值大于或等于128时,那么灰度级值数据50作为256灰度级级的图像数据被嵌入。另一方面,当模板图像的平均灰度级值小于或等于128时,那么灰度级值200作为256灰度级级的图像数据被嵌入。另选地,可以根据平均灰度级值的一个相对值来确定待嵌入的数据的灰度级值。
待嵌入的数据的布置方式如下确定,即,被嵌入了数据的模板图像的像素数据的方差值(或者,标准偏差)不变为零。图5表示已经嵌入了数据的像素500和未嵌入数据的像素501被交替布置的示例。待嵌入的数据可以被布置为,使得分别包括多个像素的多个单元形成图6和图7所示的棋盘图形。否则,待嵌入的数据可以被布置为图8所示的行形状。
接着,以与参考图像数据完全相同的方式对已经执行了区域切出处理操作(S318)的图像进行划分。从用于检查的扫描图像中提取与模板图像的位置和尺寸对应的Tn图像。
由于处理系统中包含的噪声,即使这种没有缺陷的用于检查的扫描图像也不能完全与参考图像数据一致。结果,提取与模板图像的位置对应的图像和位于该对应图像的附近(几个像素内,例如,10个像素)的所有图像(S324)。
此外,基于模板图像产生的待嵌入数据以与S322完全相同的方式被嵌入多个所提取的图像中。正规化相关值计算处理部122计算多个所提取的图像与模板图像之间的正规化相关值(S326)。
假设一个具有计算结果中的最大正规化相关值(S327)的所提取图像对应于模板图像。判断最大正规化相关值是否大于随后设置的缺陷判断部123的阈值(S328)。
当不具有缺陷的用于检查的扫描图像的位置与参考图像数据的位置完全一致时,仅可以提取对应于该位置的模板图像的图像(S324)。在此情况下,由于对于正规化相关值仅有一个计算结果(S326),不再需要用于选择正规化相关值的最大值(S327)的处理操作。
当计算结果大于阈值时,判断出用于检查的扫描图像没有缺陷。当计算结果小于阈值时,判断出用于检查的扫描图像有缺陷。对于缺陷判断部123的阈值,预先根据一个没有缺陷的打印图像计算一个平均正规化相关值,然后采用该平均正规化相关值作为阈值。
还应该注意,对于数据嵌入操作,仅当模板图像的灰度级值的方差(或标准偏差)等于零或近似等于零时,才可以嵌入数据(例如,不超过0.01)。
当选择最大正规化相关值时(S327),把计数器的计数值递增1(S329),并且把其结果与模板图像的数量N进行比较(S330)。当该结果不等于模板图像的数量N时,在步骤S321定义的处理操作中选择第i个模板图像,然后重复进行相同处理操作。在步骤S330中i等于N的情况下,完成缺陷检查(S331)。
当步骤S328中定义的处理操作中检测到图像缺陷时,把划分数量(即与缺陷尺寸有关的信息)、i的值(即位置信息)、和正规化相关值(即与缺陷的尺寸和浓度有关的信息)提供给对应处理操作。因此,可以掌握与用于检查的扫描图像中的缺陷的尺寸、浓度和位置有关的近似值。
在此阶段,可以在用户界面上发出一个警告通知,并且可以把警告通知发到一个试图利用打印管理软件通过网络来打印图像的个人计算机。此外,可以利用一个远程维护系统通过网络把通知发送到一个打印机维护商(S332)。
还应该注意,在本实施例中,采用CCD相机106作为一个用于把用于检查的扫描图像转换为数字数据的单元。另选地,如图9所示,可以在出纸口提供一个接触传感器(例如,线路传感器(line sensor))。在该另选情况中,不再需要光学失真校正处理(S311),梯形原始区域坐标提取处理(S312),荧光透视转换处理操作之前的校正系数计算(S313),和荧光透视转换处理操作(S314)。
如前面详细说明的,根据本发明,甚至在模板图像的像素的方差值等于零的情况下,也可以通过利用非常简单的处理方法执行正规化相关值的计算,来找出对应于该模板图像的捕获图像(用于检查的扫描图像)中存在的缺陷。此外,由于对是否存在缺陷的判断是以块单位进行的,因此可以检测缺陷的近似位置、缺陷的近似尺寸以及缺陷的近似浓度。而且,在接收到该缺陷检测结果时,可以在打印机和复印机的维护中有效地利用该缺陷检测,从而可以减少维修成本。
Claims (13)
1.一种图像缺陷检查装置,用于把参考图像数据与用于检查的扫描图像进行比较以判断用于检查的扫描图像中是否存在缺陷,该检查的扫描图像是基于参考图像数据从一个图像输出装置中输出的,并且被形成在一个图像记录介质上,该图像缺陷检查装置包括:
图像获取单元,用于获取从图像输出装置输出的用于检查的扫描图像以把所获取的用于检查的扫描图像转换为数字数据;
存储单元,用于存储参考图像数据和由图像获取单元转换的数字数据;
模板图像产生单元,用于根据参考图像数据产生模板图像;
对应图像提取单元,用于从存储单元中存储的数字数据中提取位于与模板图像对应的位置处的预定图像;
数据嵌入单元,用于把希望的相同图形数据嵌入模板图像和由对应图像提取单元提取的预定图像;
正规化相关值计算单元,用于根据被数据嵌入单元嵌入了相同图形数据的模板图像和所提取图像来计算一个正规化相关系数;和
缺陷判断单元,用于把由正规化相关值计算单元计算的正规化相关系数与预定阈值进行比较以获得二者之间的大小关系,从而判断用于检查的扫描图像是否包含缺陷。
2.根据权利要求1所述的图像缺陷检查装置,
其中模板图像产生单元把参考图像数据划分为具有任意形状的划分图像数据;并且
其中划分图像数据中的一个被用作模板图像。
3.根据权利要求2所述的图像缺陷检查装置,其中模板图像产生单元划分参考图像数据,使得各划分图像数据的像素数量彼此相等并且具有矩形形状。
4.根据权利要求1所述的图像缺陷检查装置,其中数据嵌入单元使用模板图像和所提取图像之一中的灰度级值的统计值来确定待嵌入的图形数据的灰度级值。
5.根据权利要求1所述的图像缺陷检查装置,
其中当模板图像的像素数据的平均值大于一个中间灰度级值时,数据嵌入单元把使模板图像的像素数据的平均值变小的值确定为待嵌入的图形数据的灰度级值;并且
其中当模板图像的像素数据的平均值小于中间灰度级值时,数据嵌入单元把使模板图像的像素数据的平均值变大的值确定为待嵌入的图形数据的灰度级值。
6.根据权利要求1所述的图像缺陷检查装置,其中数据嵌入单元确定模板图像和所提取图像之一中的图形数据的布置,使得被嵌入了图形数据的模板图像和所提取图像之一中的灰度级值的方差值不等于0。
7.根据权利要求1所述的图像缺陷检查装置,其中仅当模板图像的灰度级值的方差值不超过0.01时,数据嵌入单元才嵌入图形数据。
8.根据权利要求1所述的图像缺陷检查装置,其中数据嵌入单元确定模板图像和所提取图像中图形数据的布置,使得其中的分别包括图形数据的至少一个像素的多个单元形成一个棋盘图形。
9.根据权利要求1所述的图像缺陷检查装置,其中除了模板图像和所提取图像之间的一致程度和对用于检查的扫描图像中是否存在缺陷的判断以外,缺陷判断单元还可以获得缺陷的近似位置、近似尺寸和近似浓度。
10.根据权利要求1所述的图像缺陷检查装置,其中模板图像产生单元包括一个划分单元,当缺陷判断单元判断出存在缺陷时,该划分单元把模板图像划分为多个小模板图像。
11.根据权利要求1所述的图像缺陷检查装置,其中模板图像产生单元提取模板图像和位于该模板图像的10个像素之内的多个图像。
12.根据权利要求1所述的图像缺陷检查装置,其中对应图像提取单元提取位于与模板图像对应的位置处的、具有与模板图像相同形状和尺寸的预定图像,和位于模板图像的10个像素之内的多个位置处的、具有与模板图像相同形状和尺寸的多个图像。
13.一种图像缺陷检查方法,用于把参考图像数据与用于检查的扫描图像进行比较以判断用于检查的扫描图像中是否存在缺陷,该检查的扫描图像是基于参考图像数据从一个图像输出装置中输出的,并且被形成在一个图像记录介质上,该图像缺陷检查方法包括:
获取从图像输出装置输出的用于检查的扫描图像以把所获取的用于检查的扫描图像转换为数字数据;
存储参考图像数据和由图像获取单元转换的数字数据;
根据参考图像数据产生模板图像;
从存储的数字数据中提取位于与模板图像对应的位置处的预定图像;
把希望的相同图形数据嵌入模板图像和所提取的预定图像;
根据被嵌入了相同图形数据的模板图像和所提取图像来计算一个正规化相关系数;和
把计算的正规化相关系数与预定阈值进行比较以获得二者之间的大小关系,从而判断用于检查的扫描图像是否包含缺陷。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2002267919A JP4265183B2 (ja) | 2002-09-13 | 2002-09-13 | 画像欠陥検査装置 |
JP267919/2002 | 2002-09-13 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN1482579A CN1482579A (zh) | 2004-03-17 |
CN1297943C true CN1297943C (zh) | 2007-01-31 |
Family
ID=31986732
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN03105144.8A Expired - Fee Related CN1297943C (zh) | 2002-09-13 | 2003-03-04 | 图像缺陷检查装置和图像缺陷检查方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US7239738B2 (zh) |
JP (1) | JP4265183B2 (zh) |
CN (1) | CN1297943C (zh) |
Families Citing this family (32)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7136191B2 (en) * | 2002-06-24 | 2006-11-14 | Eastman Kodak Company | Method for inspecting prints |
CN1323545C (zh) * | 2004-06-22 | 2007-06-27 | 东软飞利浦医疗设备系统有限责任公司 | 医学影像坏点自动检测门限确定方法 |
JP2006098152A (ja) * | 2004-09-29 | 2006-04-13 | Dainippon Screen Mfg Co Ltd | 欠陥検出装置および欠陥検出方法 |
JP4687060B2 (ja) * | 2004-10-07 | 2011-05-25 | 富士ゼロックス株式会社 | 認証情報生成装置及び認証装置 |
KR100694092B1 (ko) * | 2004-12-07 | 2007-03-12 | 삼성전자주식회사 | 템플릿을 이용한 이미지 프린팅 방법 및 시스템과 그방법을 수행하기 위한 프로그램이 저장된 기록 매체 |
US7450778B2 (en) * | 2005-03-17 | 2008-11-11 | Hewlett-Packard Development Company, L.P. | Artifact reduction in a digital video |
US8219940B2 (en) * | 2005-07-06 | 2012-07-10 | Semiconductor Insights Inc. | Method and apparatus for removing dummy features from a data structure |
US20100119142A1 (en) * | 2008-11-11 | 2010-05-13 | Sean Miceli | Monitoring Multiple Similar Objects Using Image Templates |
JP5365392B2 (ja) * | 2009-07-22 | 2013-12-11 | 富士ゼロックス株式会社 | 画像欠陥診断システム、画像形成装置、およびプログラム |
JP5440162B2 (ja) * | 2009-12-26 | 2014-03-12 | 富士ゼロックス株式会社 | 白抜け検出装置、画像形成装置および白抜け検出プログラム |
JP6717286B2 (ja) * | 2012-09-14 | 2020-07-01 | 株式会社リコー | 画像検査装置、画像検査方法及び画像検査装置の制御プログラム |
JP6241120B2 (ja) * | 2012-09-14 | 2017-12-06 | 株式会社リコー | 画像検査装置、画像検査方法及び画像検査装置の制御プログラム |
CN102901445B (zh) * | 2012-09-28 | 2015-06-10 | 华中科技大学 | 基于光热成像的微电子封装工艺质量检测装置及方法 |
TWI508517B (zh) * | 2012-10-18 | 2015-11-11 | Avision Inc | 能判斷掃描影像受到靜電干擾之掃描裝置 |
JP6295561B2 (ja) * | 2013-09-17 | 2018-03-20 | 株式会社リコー | 画像検査結果判断装置、画像検査システム及び画像検査結果の判断方法 |
DE102016204506A1 (de) * | 2015-04-20 | 2016-10-20 | Heidelberger Druckmaschinen Ag | Fortdruckinspektion mit lokaler Optimierung |
CN105618740B (zh) * | 2016-01-07 | 2017-08-22 | 西安理工大学 | 激光金属成形中熔道材质缺陷的在线检测消除装置及方法 |
CN106290375A (zh) * | 2016-07-14 | 2017-01-04 | 北京航信增材科技有限公司 | 基于激光选区烧结技术的非接触式在线缺陷自动检测系统 |
US11255310B2 (en) * | 2016-11-14 | 2022-02-22 | Vestas Wind Systems A/S | Wind turbine noise analysis and control |
JP6569697B2 (ja) * | 2017-04-11 | 2019-09-04 | コニカミノルタ株式会社 | 検査装置及び検査プログラム |
CN108389184A (zh) * | 2017-10-20 | 2018-08-10 | 同济大学 | 一种基于机器视觉的工件制孔数检测方法 |
CN108830809B (zh) * | 2018-06-05 | 2022-05-03 | 陕西师范大学 | 一种基于膨胀卷积图像去噪方法 |
CN109724988B (zh) * | 2019-02-01 | 2021-05-18 | 佛山市南海区广工大数控装备协同创新研究院 | 一种基于多模板匹配的pcb板缺陷定位方法 |
CN110632094B (zh) * | 2019-07-24 | 2022-04-19 | 北京中科慧眼科技有限公司 | 一种基于逐点比对分析的图纹质量检测方法,装置与系统 |
US11468554B2 (en) * | 2019-10-18 | 2022-10-11 | Electronics For Imaging, Inc. | Assessing printer quality by assigning quality scores to images |
CN111507177B (zh) * | 2020-02-19 | 2023-04-07 | 广西云涌科技有限公司 | 一种用于计量周转柜的识别方法及装置 |
CN111257329A (zh) * | 2020-02-24 | 2020-06-09 | 汕头大学 | 一种智能手机摄像头缺陷检测方法以及检测系统 |
US11501426B2 (en) * | 2020-09-17 | 2022-11-15 | International Business Machines Corporation | Tracking of mass-produced products |
US11373294B2 (en) | 2020-09-28 | 2022-06-28 | Ricoh Company, Ltd. | Print defect detection mechanism |
CN112802022B (zh) * | 2021-04-14 | 2021-10-29 | 高视科技(苏州)有限公司 | 智能检测缺陷玻璃图像的方法、电子设备以及存储介质 |
US20230067659A1 (en) * | 2021-08-24 | 2023-03-02 | Ford Global Technologies, Llc | Systems and methods for detecting vehicle defects |
CN116091505B (zh) * | 2023-04-11 | 2023-06-30 | 青岛芯康半导体科技有限公司 | 一种蓝宝石衬底自动缺陷检测分类的方法和系统 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07121711A (ja) | 1993-08-30 | 1995-05-12 | Omron Corp | パターン・マッチングにおける正規化相互相関の相関値補正装置および方法 |
JP2994233B2 (ja) | 1995-08-21 | 1999-12-27 | 日本電気ロボットエンジニアリング株式会社 | 画像マッチング装置 |
US6363381B1 (en) * | 1998-11-03 | 2002-03-26 | Ricoh Co., Ltd. | Compressed document matching |
JP4254204B2 (ja) * | 2001-12-19 | 2009-04-15 | 富士ゼロックス株式会社 | 画像照合装置、画像形成装置及び画像照合プログラム |
-
2002
- 2002-09-13 JP JP2002267919A patent/JP4265183B2/ja not_active Expired - Fee Related
-
2003
- 2003-03-04 US US10/377,663 patent/US7239738B2/en not_active Expired - Fee Related
- 2003-03-04 CN CN03105144.8A patent/CN1297943C/zh not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2004108779A (ja) | 2004-04-08 |
JP4265183B2 (ja) | 2009-05-20 |
US7239738B2 (en) | 2007-07-03 |
US20040052410A1 (en) | 2004-03-18 |
CN1482579A (zh) | 2004-03-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN1297943C (zh) | 图像缺陷检查装置和图像缺陷检查方法 | |
US8619278B2 (en) | Printed matter examination apparatus, printed matter examination method, and printed matter examination system | |
US5652804A (en) | Automatic inspection of printing plates or cylinders | |
EP2288135B1 (en) | Deblurring and supervised adaptive thresholding for print-and-scan document image evaluation | |
US7991244B2 (en) | Variable skew correction system and method | |
US20110181919A1 (en) | Image reading apparatus, control method thereof and computer-readable storage medium | |
JP2003219184A (ja) | 明確で判読可能な二値画像を作成する画像化プロセス | |
CN1229964C (zh) | 图像读取设备及其控制方法 | |
US8587834B2 (en) | Shading correction apparatus in image scanning apparatus | |
CN101055560A (zh) | 一种打印质量评估方法和评估系统 | |
CN110940670A (zh) | 基于机器视觉的柔印标签印刷首稿检测系统及其实现方法 | |
JP6411684B1 (ja) | 印刷物の検査方法および装置 | |
JP2005208847A (ja) | 画像欠陥検出装置、画像形成装置 | |
CN1525155A (zh) | 已印刷纸张的检查方法和设备 | |
US20020149784A1 (en) | System for improving digital copiers and multifunction peripheral devices | |
CN114863147A (zh) | 一种拼大版印刷图像的智能比对方法、系统及其应用 | |
CN1215700C (zh) | 自动校正方法 | |
KR100467565B1 (ko) | 화상 시스템의 국부 이치화 방법. | |
JP2005227142A (ja) | 傾き検出機能付き画像検査装置 | |
WO2022211064A1 (ja) | 情報読取装置 | |
JP2006058155A (ja) | 印刷検査装置 | |
JPH0520459A (ja) | パターン認識方法およびその装置 | |
JP2022158916A (ja) | 情報読取装置 | |
CN114148094A (zh) | 激光码字机械检验平台及方法 | |
JP2001307097A (ja) | パターン検出装置及び方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20070131 Termination date: 20150304 |
|
EXPY | Termination of patent right or utility model |