CN102376528A - 词典标记适当化向导装置以及方法 - Google Patents

Abstract

提供词典标记适当化向导装置以及方法，即使是不懂位置对准时图像处理所需条件的人员也能够适当地进行将包含对被制造物等进行位置对准的基准即对准标记的图像作为词典图像进行登记的作业。具备操作部及控制部，操作部用于在拍摄附加于位置对准对象物上的对准标记而得到的图像中设定作为词典图像进行登记的区域；控制部进行处理：使显示拍摄对准标记(31)而得到的图像的显示装置的画面(20)上显示用于设定作为词典图像进行登记的区域的GUI(21～23)，并以视窗方式显示设定作为词典图像进行登记的区域时的操作向导(24)；制作与当前设定区域内图像的浓度或亮度的水平值相关的直方图(25)数据，使其以视窗方式显示在画面(20)上。

Description

词典标记适当化向导装置以及方法

技术领域

本发明涉及一种在平板显示面板装配装置中使用的词典标记适当化向导装置以及程序，例如进行引导以适当地进行词典图像的登记作业，该词典图像是包含成为平板显示面板的位置对准基准的对准标记的图像。

背景技术

在制造平板显示面板(例如液晶面板、有机EL显示面板等)时，在平板显示面板上附加对准标记，该对准标记成为对平板显示面板进行位置对准的基准。

图9是表示这种对准标记的一例(对准标记的示例)的图。在平板显示面板30框体的正面的左右下端附近附加有十字状的对准标记31。

在平板显示面板的制造工序中，使用未图示的照相机对附加有这种对准标记的平板显示面板30进行拍摄，通过图像处理，来搜索与预先登记的词典图像(包含对准标记的区域的图像)相关度较高的区域，从而求出附加在平板显示面板30上的对准标记31的位置。然后，以所求出的对准标记3 1的位置为基准来使载置有平板显示面板30的输送台移动，由此对平板显示面板30进行位置对准。

对在这样进行位置对准时所使用的词典图像进行预先登记的作业，该登记作业如下进行：对附加在平板显示面板上的对准标记进行拍摄来得到图像，在显示该图像的画面上，通过鼠标操作等来设定作为词典图像进行登记的区域的大小、位置等(例如专利文献1的段落0004、0032等)。

专利文献1：日本特开2001-284408号公报

发明内容

发明要解决的问题

但是，对于不懂得在位置对准时进行的图像处理所需的条件(图像的状态、照明照度等)的人员来说，这种词典图像的登记作业很难懂。因此，在作业不熟练的情况下，无法适当地进行登记，有时导致在制造过程中生产次品、成品率下降。

图10示出没有适当地进行词典图像登记的情况的一例，是表示相对于对准标记的大小而将作为词典图像的区域(用于设定区域的登记框的尺寸)设定得过大的例子(过大的登记框的示例)的图。如图10的A所示，在进行登记作业时，相对于某个对准标记40的大小来说登记框4 1的尺寸过大。并且，如图10的B所示，在位置对准时的图像处理中，对准标记40存在于图像视野的边缘附近。于是，在进行登记作业时由登记框41包围而作为词典图像进行登记的区域(图10的B的虚线内的区域)的一部分处于图像视野外，因此发现不到与词典图像相关度高的区域，从而导致搜索错误。

本发明是鉴于上述点而完成的，目的在于使即使不懂得位置对准时进行的图像处理所需的条件的人员，也能够适当地进行将包含对准标记的图像登记为词典图像的作业。

用于解决问题的方案

本发明所涉及的词典标记适当化向导装置具备操作部以及控制部，其中，该操作部用于在拍摄附加于位置对准对象物的对准标记而得到的图像中设定作为词典图像进行登记的区域；控制部进行以下处理：使显示通过拍摄对准标记而得到的图像的显示装置的画面上显示GUI(Graphical User Interface：图形用户界面)，该GUI用于通过操作部的操作来设定上述作为词典图像进行登记的区域。另外，控制部使上述显示装置的画面上以视窗方式显示设定作为词典图像进行登记的区域时的操作向导，制作与通过操作部的操作而当前设定的区域内的图像的浓度或者亮度的水平值有关的直方图的数据，使该数据以视窗方式显示在显示装置的画面上。

一种在平板显示面板装配装置中使用的词典标记适当化向导方法，其包括以下步骤：在显示拍摄附加于位置对准对象物上的对准标记而得到的图像的显示装置的画面上显示图形用户界面，该图形用户界面用于设定作为词典图像进行登记的区域，并且在上述显示装置的画面上以视窗方式显示设定上述作为词典图像进行登记的区域时的操作向导；以及制作与当前设定的区域内的图像的浓度或者亮度的水平值相关的直方图的数据，将该数据以视窗方式显示在上述显示装置的画面上。

发明的效果

根据本发明，即使是不懂得位置对准时进行的图像处理所需条件的人员来说，也能够按照在显示对准标记图像的显示装置的画面上以视窗方式显示的操作向导来对登记为词典图像的区域进行设定。并且，通过在相同画面上以视窗方式显示与当前设定区域内的图像的浓度或者亮度的水平值有关的直方图来进行确认，由此能够适当地进行将包含对准标记的图像登记为词典图像的作业。

附图说明

图1是表示本发明的一个实施方式所涉及的词典标记适当化向导装置的设置例的图。

图2是表示本发明的一个实施方式所涉及的词典标记适当化向导装置的结构的框图。

图3是表示本发明的一个实施方式所涉及的控制部的搜索处理的流程图。

图4是表示本发明的一个实施方式所涉及的进行词典图像登记作业时的监视器的画面显示布局的图。

图5是表示本发明的一个实施方式所涉及的直方图的显示内容的一例的图。

图6是表示本发明的一个实施方式所涉及的投影的显示内容的一例的图。

图7是表示本发明的一个实施方式所涉及的操作向导的显示内容的一例的图。

图8是表示本发明的一个实施方式所涉及的操作向导的显示时机的图。

图9是表示对准标记的一例的图。

图10是表示登记框的尺寸过大的示例的图。

附图标记说明

1：词典标记适当化向导装置；2：控制部；3：操作部；4：存储部；10：CCD照相机；11：监视器；21：登记框；22：中心标记；24：操作向导；25：直方图；26：投影；27：像素数比/最小线宽向导；30：平板显示面板；31：对准标记；50～56：向导内容。

具体实施方式

下面，参照附图说明用于实施本发明的方式。

图1是表示本发明的一个实施方式所涉及的词典标记适当化向导装置的设置例的图。该词典标记适当化向导装置1在平板显示面板30(图9例示那样附加有对准标记的面板)的制造工序中进行设置，使用于平板显示面板装配装置中。并且，将词典标记适当化向导装置1兼用作进行词典图像登记作业的装置以及在对平板显示面板30进行位置对准时进行图像处理的装置。

在与使用词典标记适当化向导装置1的工序相同的制造工序中设置对平板显示面板30进行拍摄的CCD照相机10、监视器11以及载置平板显示面板30以进行其位置对准的载置台12。

图2是表示词典标记适当化向导装置1的结构例的框图。词典标记适当化向导装置1是安装有固件的硬件装置，具备控制部2、包括鼠标和键盘的操作部3以及存储部4。操作部3用于在词典图像登记作业时、位置对准时的图像处理时进行各种操作。存储部4用于存储词典图像数据、图像处理时的搜索结果。

如图1以及图2所示，将使用CCD照相机10拍摄得到的平板显示面板30的图像数据发送到词典标记适当化向导装置1之后，通过控制部2发送到监视器11。另外，根据词典标记适当化向导装置1的操作部3的操作，由词典标记适当化向导装置1的控制部2对CCD照相机10的透镜10a的倍率进行可变控制。

本发明的特征在于进行词典图像登记作业时的控制部2的处理，但是作为说明登记作业时的处理的前提，先要说明对平板显示面板30进行位置对准时的控制部2的图像处理。

图3是表示位置对准时的控制部2的图像处理即搜索处理(控制部的搜索处理的示例)的流程图。当由操作部3进行确定成为搜索对象的图像的操作即图像定格(取入画面)(步骤S1)时以及进行设定该图像中成为搜索对象的区域的操作(步骤S2)时，控制部2进行词典图像搜索处理(步骤S3)。

在该步骤S3的词典图像搜索处理中，作为第一阶段，控制部2通过间隔剔除处理对搜索区域内的图像数据以及预先登记而存储在存储部4中的词典图像数据进行压缩(步骤S31)，在这些压缩图像数据之间进行图案匹配(步骤S32)，由此通过粗略的搜索来求出多个检测点。检测点例如为图10所示那样的四角形的登记框的左上角的顶点。

接着，作为第二阶段，控制部2将在步骤S32中求出的多个检测点作为候选点，通过归一化相关搜索，在压缩前的搜索区域内的图像候选点附近搜索压缩前的词典图像(步骤S33)，将相关系数超过预先设定的阈值的候选点设定为最终检测点(步骤S34)。与最初就在非压缩的图像数据之间进行搜索处理的情况相比，通过进行这种两个阶段的处理能够使搜索处理高速化。

当结束步骤S3的词典图像搜索处理时，控制部2判断检测是否成功(是否存在相关系数超过阈值的候选点)(步骤S4)，在成功的情况下，将搜索结果存储到存储部4(步骤S5)。如果失败则进行在监视器11上进行报错显示等报错处理(步骤S6)，结束搜索处理。

在进行位置对准时，根据在该搜索处理的步骤S5中存储的搜索结果，在图1的载置台12上，以对准标记的位置为基准对平板显示面板30进行位置对准。

接着，说明词典图像登记作业时的控制部2的处理。在词典图像登记作业时，控制部2使显示使用CCD照相机10拍摄得到的平板显示面板30的图像的监视器11的画面上，显示GUI以及各种视窗，该GUI用于通过操作部3的操作来设定作为词典图像进行登记的区域。

图4是表示该词典图像登记作业时的监视器11的画面显示布局(登记作业时的监视器画面显示布局的示例)的图。在显示平板显示面板30的图像(在附图中还显示其中的十字状的对准标记31的图像)的监视器11的画面20上，显示登记框21、中心标记22以及鼠标光标23作为GUI，用来设定作为词典图像进行登记的区域。

登记框21是用于对作为词典图像进行登记的区域的大小以及位置进行设定的框。对于登记框21，通过操作部3的鼠标拖拽操作能够对框的尺寸进行变更以及在画面上进行框的位置的移动。

中心标记22是用于将对准标记的中心设定为坐标通知点的标记。并且，中心标记22具有偏移信息的作用，在如针对图3的步骤S32所说明的那样在进行搜索处理时求出登记框21的顶点作为检测点的情况下，表示对准标记的中心相对于检测点的位置。中心标记22也是，能够通过鼠标操作来移动其在画面上的位置。

另外，在监视器11的画面20上，以视窗方式来显示操作向导24、直方图25、投影26以及像素数比/最小线宽向导27。这些操作向导24和直方图25也是，能够通过鼠标拖拽操作来移动它们在画面上的位置。

操作向导24是通过操作部3的操作来设定作为词典图像进行登记的区域时的向导内容。操作向导24的显示内容根据操作阶段变化而发生变化，后面说明具体显示内容。

直方图25是与登记框21包围的区域内的图像的浓度或者亮度的水平值有关的直方图。每当登记框21包围的区域的大小、位置发生变化时，控制部2重复进行制作登记框21当前包围的区域内的图像的直方图数据的处理，将制作出的直方图数据显示为直方图25。

图5是表示直方图25的显示内容的一例(直方图的显示例)的图。对于登记框21包围的区域，以横轴表示浓度水平(由监视器11的各像素的8位值表示的256色调)、以纵轴表示像素数来显示直方图。在本例中，在登记框21包围的区域内包含一个对准标记，对准标记的浓度水平高于背景部分的浓度水平，并且对准标记的像素数少于背景部分的像素数。此外，虽然未图示，但是控制部2还在与直方图25相同的视窗内显示登记框21当前包围的区域内的像素的浓度水平的最大值以及最小值。

图4示出的投影26是进行将显示在画面20上的图像投影到纵向方向和横向方向上的处理(分别求出在画面20的纵向方向上排列的像素的浓度水平之和以及在画面20的横向方向上排列的像素的浓度水平之和)而得到的图。

图6是与画面20上的对准标记31的位置对应地示出投影26的显示内容的一例(投影的显示例)的图。在本例中，在画面20上显示一个对准标记31，对准标记31的浓度水平高于背景部分的浓度水平。

图4示出的像素数比/最小线宽向导27是以下向导内容：建议使登记框21包围的区域内的对准标记的像素数与背景部分的像素数的比率成为规定值(作为一例设定为大约2∶1)，建议使画面20上的对准标记的最小线宽(在图4示出的十字状对准标记31的情况下，是从画面20的横向方向上的左端至右端的宽)为规定像素数以上(作为一例设定为8像素以上)。

登记框21包围的区域内的图像在该区域内包含两个对准标记这种极少出现的情况下三极化，在一般情况下二极化为对准标记和背景部分(图5也示出处于这样二极化的状态的直方图)。像素数比/最小线宽向导27中的大约2∶1这种像素数比率是这样二极化的情况下的经验性建议值。

另外，如图3所示，在位置对准时的搜索处理中通过间隔剔除处理对图像数据进行压缩(步骤S31)。因此，当画面20上的对准标记的最小线宽小于固定的像素数时，在进行压缩时对准标记部分的图像被间隔剔除而丢失，从而难以通过图案匹配来求出检测点(步骤S32)。该步骤S31中的压缩率是可变的，当将压缩率设定为较高时搜索速度变快，但是即使最小线宽较粗，对准标记部分的图像也容易被间隔剔除掉。另外，当将压缩率设定为较低时，即使最小线宽较细，对准标记部分的图像也不容易被间隔剔除掉，但是搜索速度会变慢。像素数比/最小线宽向导27中的八个像素以上这种最小线宽是在以满足所需搜索速度的压缩率进行压缩时不会丢失对准标记部分的图像的经验性建议值。

图7是表示图4示出的操作向导24的显示内容的一例(操作向导的显示例)的图。另外，图8是表示在词典图像登记作业的过程中将图7示出的内容作为操作向导24显示的时机(操作向导的显示时机的示例)的图。在图7中，对在各显示时机(黑圆的部分)要被显示的向导内容附加与图8相同的附图标记50～56来示出。

如图8所示，词典标记适当化向导装置1的操作员通过操作部3进行开始词典图像登记作业的操作60。在此，在操作员选择操作结束的情况下，结束处理。另一方面，在操作员继续进行操作的情况下，控制部2使在图7中以向导内容50显示的、催促设定登记框(图4的登记框21)的尺寸、位置以及中心标记(图4的中心标记22)的位置的向导内容作为操作向导24而以视窗方式显示在监视器11的画面上。

操作员按照该向导内容50，通过操作部3进行选择操作来选择首先对登记框的尺寸进行设定。于是，控制部2使在图7中以向导内容51显示的、催促调整登记框的尺寸以使在登记框内包含对准标记的向导内容作为操作向导24而以视窗方式显示在监视器11的画面上。

然后，操作员通过操作部3开始图8示出的登记框尺寸的设定操作61。此时，控制部2使在图7中以向导内容52表示的、催促注意以避免登记框的尺寸过大或者过小的向导内容作为操作向导24而以视窗方式显示在监视器11的画面上。

如用图10说明的那样，当登记框的尺寸相对于对准标记的大小过大时，在进行搜索处理时在对准标记存在于图像视野的边缘附近的情况下会导致搜索错误。因此，通过显示该向导内容5 2来催促注意以使登记框的尺寸相对于对准标记的大小变得适当。

此外，如图7中也示出的“显示直方图25、投影26、像素数比/最小线宽27”那样，将已经说明了显示内容的直方图25、投影26、像素数比/最小线宽27以与操作向导24不同的视窗也显示在监视器11的画面上。由此，在登记框包围对准标记的情况下，显示图5中例示出的示出了对准标记、背景部分各自的像素数的直方图25。

操作员参照像素数比/最小线宽向导27中建议使登记框包围的区域内的对准标记与背景部分的像素数的比率大约成为2∶1的向导内容。然后，一边对直方图25中示出的当前的对准标记、背景部分各自的像素数进行确认，一边对登记框的尺寸进行调整，设定登记框的尺寸以使这些像素数的比率成为大约2∶1。由此，能够更进一步适当地设定登记框的尺寸。

另外，操作员参照像素数比/最小线宽向导27中建议使画面上的对准标记的最小线宽为八个像素以上的向导内容。然后，在当前的对准标记的最小线宽小于八个像素的情况下，通过操作部3进行操作来增加CCD照相机10的透镜10a的倍率。或者，在存在线宽不同的多个对准标记的情况下，操作者使登记框包围线宽较粗的对准标记。这样，能够更进一步适当地进行词典图像登记作业。

另外，操作员参照投影26，例如在对准标记与背景部分的浓度水平之差过小的情况下，将对平板显示面板30进行照射的照明装置调得更亮。另外，在背景部分的一部分反射照明光而浓度水平较高的情况下，将照明装置调得更暗。通过这样进行调整，能够更进一步适当地进行词典图像登记作业。

接着，操作员按照图7示出的向导内容50，通过操作部3进行选择操作来选择对登记框的位置进行设定。于是，控制部2使在图7中以向导内容53显示的、催促对登记框的位置进行调整以使对准标记处于登记框的中央的向导内容作为操作向导24而以视窗方式显示在监视器11的画面上。

并且，操作员通过操作部3开始图8示出的登记框的位置设定操作62。此时，控制部2使在图7中以向导内容54显示的、催促注意对准标记是否处于登记框的中央的向导内容作为操作向导24而以视窗方式显示在监视器11的画面上。

另外，如图7也示出的那样，此时，直方图25、投影26、像素数比/最小线宽27通过与操作向导24不同的视窗也显示在监视器11的画面上。

接着，操作员按照向导内容50，通过操作部3进行选择操作来选择对中心标记(坐标通知点)的位置进行设定。于是，控制部2使在图7中以向导内容55显示的、催促使中心标记的位置移动至对准标记的中心的向导内容作为操作向导24而以视窗方式显示在监视器11的画面上。

然后，操作员通过操作部3开始图8示出的中心标记的位置设定操作63。此时，控制部2使在图7中以向导内容56显示的、催促注意中心标记是否位于对准标记的中心的向导内容作为操作向导24而以视窗方式显示在监视器11的画面上。

另外，如图7也示出的那样，此时，直方图25、投影26、像素数比/最小线宽27通过与操作向导24不同的视窗也显示在监视器11的画面上。

然后，操作员完成对登记框的尺寸和位置的设定以及对中心标记的位置的设定，通过操作部3进行确定设定内容的操作。此时，控制部2将登记框内的图像数据作为词典图像存储在存储部4中，并且将中心标记相对于登记框的位置信息存储在存储部4中。

这样，根据该词典标记适当化向导装置1，操作员能够按照在显示对准标记的图像的监视器11上以视窗方式显示的操作向导24来对登记框的尺寸和位置进行设定以及对中心标记的位置进行设定。另外，能够通过在相同画面上的视窗显示来确认与登记框当前包围的区域内的图像的浓度或者亮度的水平值有关的直方图25，并且能够通过监视器11的视窗显示来确认投影26、像素数比/最小线宽向导27。因此，即使是不懂得位置对准时进行的图像处理所需的条件的人员，也能够适当地进行将包含对准标记的图像作为词典图像进行登记的作业。

此外，在上述实施方式中，将安装有固件的专用硬件装置用作词典标记适当化向导装置1，但是作为其它示例，还可以将普通计算机用作词典标记适当化向导装置1。在这种情况下，将用于执行与上述控制部2的处理相当的处理的软件程序通过USB存储器、光盘等存储介质或者网络提供给普通计算机即可。

另外，在上述实施方式中，词典标记适当化向导装置1构成为兼用作进行词典图像登记作业的装置以及在平板显示面板30的位置对准时进行图像处理的装置。但是作为其它示例，词典标记适当化向导装置1还可以构成为进行词典图像登记作业的专用装置。在这种情况下，将通过词典标记适当化向导装置1登记的词典图像通过网络等提供给位置对准时进行图像处理的专用装置即可。

另外，在上述实施方式中，为了将包含对准标记的图像作为词典图像进行登记而应用本发明，其中，该对准标记是为了在制造工序中进行位置对准而附加到平板显示面板30的标记。但是，本发明并不限于此，还能够如下应用：将包含如附加于平板显示面板30以外的被制造物的对准标记、附加于被检查物的对准标记这种附加在成为通过图像处理而进行位置对准的对象的所有物品上的对准标记的图像作为词典图像进行登记。

另外，本发明当然并不限于上述实施方式，只要在不脱离权利要求范围所述的本发明的宗旨的范围内，能够得到其它各种应用例、变形例。

Claims (7)

1.一种在平板显示面板装配装置中使用的词典标记适当化向导装置，其特征在于，

具备操作部以及控制部，

其中，上述操作部用于在拍摄附加于位置对准对象物上的对准标记而得到的图像中设定作为词典图像进行登记的区域；

上述控制部进行以下处理：

使显示拍摄上述对准标记而得到的图像的显示装置的画面上显示图形用户界面，该图形用户界面用于通过上述操作部的操作来设定上述作为词典图像进行登记的区域，并且使上述显示装置的画面上以视窗方式显示设定上述作为词典图像进行登记的区域时的操作向导；以及

制作与通过上述操作部的操作而当前设定的区域内的图像的浓度或者亮度的水平值相关的直方图的数据，使该数据以视窗方式显示在上述显示装置的画面上。

2.根据权利要求1所述的在平板显示面板装配装置中使用的词典标记适当化向导装置，其特征在于，

上述控制部使上述显示装置的画面上至少显示用于调整上述作为词典图像进行登记的区域相对于上述对准标记的大小以及位置的向导作为上述操作向导。

3.根据权利要求2所述的在平板显示面板装配装置中使用的词典标记适当化向导装置，其特征在于，

上述控制部使上述显示装置的画面上进一步以视窗方式显示建议将上述作为词典图像进行登记的区域内的上述对准标记的像素数与背景部分的像素数的比率设定为规定值的向导。

4.根据权利要求2或3所述的在平板显示面板装配装置中使用的词典标记适当化向导装置，其特征在于，

上述控制部使上述显示装置的画面上进一步以视窗方式显示建议将上述显示装置的画面上的上述对准标记的最小线宽设为规定像素数以上的向导。

5.根据权利要求2～4中的任一项所述的在平板显示面板装配装置中使用的词典标记适当化向导装置，其特征在于，

上述控制部使上述显示装置的画面上进一步显示将上述对准标记的中心设定为坐标通知点的向导作为上述操作向导。

6.根据权利要求2～5中的任一项所述的在平板显示面板装配装置中使用的词典标记适当化向导装置，其特征在于，

上述控制部使上述显示装置的画面上进一步以视窗方式显示对拍摄上述对准标记而得到的图像进行投影到上述画面的纵向方向以及横向方向上的处理而得到的图。

7.一种在平板显示面板装配装置中使用的词典标记适当化向导方法，其包括以下步骤：

在显示拍摄附加于位置对准对象物上的对准标记而得到的图像的显示装置的画面上显示图形用户界面，该图形用户界面用于设定作为词典图像进行登记的区域，并且在上述显示装置的画面上以视窗方式显示设定上述作为词典图像进行登记的区域时的操作向导；以及

制作与当前设定的区域内的图像的浓度或者亮度的水平值相关的直方图的数据，将该数据以视窗方式显示在上述显示装置的画面上。

Images