CN111757002B - 图像处理方法、输出控制方法、图像采集设备及显示设备 - Google Patents

Abstract

本申请公开了一种图像处理方法、输出控制方法、图像采集设备及显示设备，图像处理方法包括：图像采集设备获得第一时刻对应的第一图像，所述第一图像用于进行第一处理；所述图像采集设备获得所述第一时刻之后的第二时刻对应的第二图像，所述第二图像用于进行第二处理，以确定所述第二图像是否满足图像切换条件；如果所述第二图像满足所述图像切换条件，所述图像采集设备获得所述第二时刻之后的第三时刻对应的第三图像，所述第三图像用于第三处理，所述第三处理与所述第一处理为相同类型的处理方式。

Description

图像处理方法、输出控制方法、图像采集设备及显示设备

技术领域

本申请涉及图像处理技术领域，尤其涉及一种图像处理方法、输出控制方法、图像采集设备及显示设备。

背景技术

目前，在对显示设备进行测试时，需要将图像采集设备与显示设备通过额外的控制设备使用测试线连接，由此控制设备同时控制图像采集设备和显示设备，实现同步通信，以使得图像采集设备采集到包含显示设备输出图像的图像。

但是，这种通过控制设备进行图像采集控制的方式中，需要与图像采集设备和显示设备之间进行较为复杂的控制流程，由此会增加图像采集的控制复杂度，使得图像采集的效率较低。

发明内容

有鉴于此，本申请提供一种图像处理方法、输出控制方法、图像采集设备及显示设备，如下：

一种图像处理方法，包括：

图像采集设备获得第一时刻对应的第一图像，所述第一图像用于进行第一处理；

所述图像采集设备获得所述第一时刻之后的第二时刻对应的第二图像，所述第二图像用于进行第二处理，以确定所述第二图像是否满足图像切换条件；

如果所述第二图像满足所述图像切换条件，所述图像采集设备获得所述第二时刻之后的第三时刻对应的第三图像，所述第三图像用于第三处理，所述第三处理与所述第一处理为相同类型的处理方式。

上述方法，优选的，所述第二图像满足图像切换条件，包括：

在所述第二图像中，存在至少部分第一像素点的输出像素值与第二像素点的输出像素值的变化增量大于或等于增量阈值，所述第二像素点为所述第一图像中与所述第一像素点相对应的像素点。

上述方法，优选的，所述第三时刻为所述第二时刻与第四时刻之间的任意时刻，所述第四时刻为所述第二时刻之后的时刻，且所述第四时刻对应的第四图像满足所述图像切换条件。

上述方法，优选的，所述第一图像为至少包含显示区域的图像，所述显示区域为显示设备中用于依次输出多帧待测图像的区域。

上述方法，优选的，在图像采集设备获得第一时刻对应的第一图像之前，所述方法还包括：

所述图像采集设备采集第五图像，所述第五图像为至少包含所述显示区域的图像；

所述图像采集设备对所述第五图像进行识别，以得到所述第五图像中的第一标识信息，所述第一标识信息表征所述显示设备的设备参数。

上述方法，优选的，所述设备参数中至少包含所述显示设备的输出参数；

其中，在图像采集设备获得第一时刻对应的第一图像之前，所述方法还包括：

所述图像采集设备根据所述显示设备的输出参数，设置图像采集参数。

上述方法，优选的，在图像采集设备获得第一时刻对应的第一图像之前，所述方法还包括：

所述图像采集设备采集第六图像，所述第六图像为至少包含所述显示区域的图像；

所述图像采集设备对所述第六图像进行识别，以得到所述显示区域的区域位置信息，所述区域位置信息至少用于进行所述第二处理，以确定所述第二图像中所述区域位置信息对应的图像区域是否满足图像切换条件。

一种输出控制方法，包括：

显示设备获得第七图像；

所述显示设备在识别出所述第七图像中包含图像采集设备的情况下，所述显示设备在显示区域上依次输出多帧待测图像，以使得：

所述图像采集设备获得第一时刻对应的第一图像，所述第一图像为至少包含所述显示区域的图像，所述第一图像用于进行第一处理；

所述图像采集设备获得所述第一时刻之后的第二时刻对应的第二图像，所述第二图像用于进行第二处理，以确定所述第二图像是否满足图像切换条件；

如果所述第二图像满足所述图像切换条件，所述图像采集设备获得所述第二时刻之后的第三时刻对应的第三图像，所述第三图像用于第三处理，所述第三处理与所述第一处理为相同类型的处理方式。

一种图像采集设备，包括：

采集装置，用于采集图像；

处理装置，用于获得第一时刻对应的第一图像，所述第一图像用于进行第一处理；获得所述第一时刻之后的第二时刻对应的第二图像，所述第二图像用于进行第二处理，以确定所述第二图像是否满足图像切换条件；如果所述第二图像满足所述图像切换条件，获得所述第二时刻之后的第三时刻对应的第三图像，所述第三图像用于第三处理，所述第三处理与所述第一处理为相同类型的处理方式。

一种显示设备，包括：

采集装置，用于获得第七图像；

显示装置，用于在识别出所述第七图像中包含图像采集设备的情况下，在显示区域上依次输出多帧待测图像，以使得：

所述图像采集设备获得第一时刻对应的第一图像，所述第一图像为至少包含所述显示区域的图像，所述第一图像用于进行第一处理；获得所述第一时刻之后的第二时刻对应的第二图像，所述第二图像用于进行第二处理，以确定所述第二图像是否满足图像切换条件；如果所述第二图像满足所述图像切换条件，获得所述第二时刻之后的第三时刻对应的第三图像，所述第三图像用于第三处理，所述第三处理与所述第一处理为相同类型的处理方式。

由上述方案可知，本申请提供的一种图像处理方法、输出控制方法、图像采集设备及显示设备中，图像采集设备在获得到第一时刻上对应的用于第一处理的第一图像之后，对后续时刻上对应的图像进行第二处理，由此在确定第一时刻之后的第二时刻上对应的第二图像满足图像切换条件的情况下，再获得之后的第三时刻对应的用于与第一处理同类型的第三处理的第三图像。可见，本申请中图像采集装置根据自己所获得到的图像进行第二处理就可以确定发生图像切换的时刻，进而获取到后续的用于第三处理的图像，由此，无需图像采集设备建立与其他设备之间的通信连接，也就避免了图像采集设备与其他设备之间的过多的控制流程，由此能够降低图像采集设备进行图像采集时的控制复杂度，实现图像采集的自动控制，进而提高图像采集的效率。

附图说明

为了更清楚地说明本申请实施例的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本申请实施例一提供的一种图像处理方法的流程图；

图2-图5分别为本申请实施例的示例图；

图6为本申请实施例一提供的一种图像处理方法的部分流程图；

图7-图8分别为本申请实施例的另一示例图；

图9为本申请实施例一提供的一种图像处理方法的另一部分流程图；

图10为本申请实施例的又一示例图；

图11为本申请实施例二提供的一种输出控制方法的流程图；

图12为本申请实施例的又一示例图；

图13为本申请实施例三提供的一种图像采集设备的结构示意图；

图14为本申请实施例四提供的一种显示设备的结构示意图；

图15-图17为本申请实施例适用于LCD的检测场景的示例图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

参考图1，为本申请实施例一提供的一种图像处理方法的实现流程图，该方法适用于能够进行图像采集及图像处理的图像采集设备中，如工业相机等设备。本实施例中的技术方案主要用于提高图像采集的效率。

具体的，本实施例中的方法可以包括以下步骤：

步骤101：图像采集设备获得第一时刻对应的第一图像。

其中，本实施例中的图像采集设备可以为黑白相机或RGB彩色相机，可以采集到黑白图像或者彩色图像，黑白图像中每个像素点的输出像素值以灰度值表示，而彩色图像中每个像素点的输出像素值可以为RGB(red green blue)色彩模式中在红(R)、绿(G)、蓝(B)三个颜色通道上任意一个对应的色值，或者，彩色图像中每个像素点的输出像素值可以为RGBY(red green blue yellow)色彩模式中在红(R)、绿(G)、蓝(B)、黄(Y)四个颜色通道上任意一个对应的值。图像采集设备持续采集每个时刻对应的图像，该图像可以为包含某个目标物的图像，图像采集设备在其持续采集到的图像中获得第一时刻对应的第一图像，第一时刻可以为当前时刻或者也可以为某个历史时刻，图像采集设备所获得的第一时刻对应的第一图像用于进行第一处理。

需要说明的是，第一处理可以是由图像采集设备对第一图像进行的，或者，第一处理可以是在图像采集设备将第一图像进行存储之后后其他设备对存储的第一图像进行的，最终得到第一图像对应的处理结果。

步骤102：图像采集设备获得第一时刻之后的第二时刻对应的第二图像。

其中，图像采集设备在其持续采集到的图像中获得第二时刻所对应的第二图像，如图2中所示，第二时刻为第一时刻之后的一个时刻。

步骤103：图像采集设备对第二图像进行第二处理，以确定第二图像是否满足图像切换条件，如果第二图像满足图像切换条件，执行步骤104。

其中，第二图像满足图像切换条件是指，第二时刻对应的第二图像与在第二时刻之前的时刻对应的图像是不同的。在第二时刻之前的时刻中是包含第一时刻的，也就是说，图像采集设备在获得到用于第一处理的第一图像之后，持续对第一时刻之后的每个第二时刻所对应的图像进行第二处理，直到第二时刻上对应的第二图像与第一时刻对应的第一图像不同，或者第二时刻上对应的第二图像与第一时刻之后至第二时刻之前的任意时刻上对应的图像不同，即第二图像满足图像切换条件。

步骤104：图像采集设备获得第二时刻之后的第三时刻对应的第三图像。

其中，如图2中所示，第三时刻为第二时刻之后的时刻，也就是说，图像采集设备在第二时刻上对应的第二图像满足图像切换条件的情况下，即发现第二时刻上对应的第二图像已经是新的图像的情况下，图像采集设备获得第二时刻之后的第三时刻对应的第三图像，该第三图像用于第三处理，第三处理与第一处理为相同类型的处理方式，第三处理可以是由图像采集设备对第三图像进行的，或者，第三处理可以是在图像采集设备将第三图像进行存储之后由其他设备对存储的第三图像进行的，最终得到第三图像对应的处理结果。

需要说明的是，第一处理和第三处理与第二处理为不同类型的处理方式，例如，第一处理和第三处理分别为：判断是否满足质量条件，而第二处理为判断是否满足图像切换条件。

由上述方案可知，本申请实施例一提供的一种图像处理方法中，图像采集设备在获得到第一时刻上对应的用于第一处理的第一图像之后，对后续时刻上对应的图像进行第二处理，由此在确定第一时刻之后的第二时刻上对应的第二图像满足图像切换条件的情况下，再获得之后的第三时刻对应的用于与第一处理同类型的第三处理的第三图像。可见，本申请中图像采集装置根据自己所获得到的图像进行第二处理就可以确定发生图像切换的时刻，进而获取到后续的用于第三处理的图像，由此，无需图像采集设备建立与其他设备之间的通信连接，也就避免了图像采集设备与其他设备之间的过多的控制流程，由此能够降低图像采集设备进行图像采集时的控制复杂度，实现图像采集设备上图像采集的自动控制，进而提高图像采集的效率

在一种实现方式中，第一图像为至少包含显示区域的图像，如图3中所示，显示区域为显示设备中用于依次输出多帧待测图像的区域。如图4中所示，图像采集设备的图像采集方向朝向显示设备中的显示区域的所在方向，由此，图像采集设备能够采集到至少包含显示区域的图像，另外，图像采集设备所采集到的图像中可能还包含有非显示区域的图像区域，如图3中所示的第一图像中，除了包含有显示区域的图像区域A，还包含显示设备上非显示区域的图像区域B，还可能包含非显示设备的图像区域C。

基于此，图像采集设备在获得到第一时刻对应的第一图像之后，第一图像的第一处理可以为：图像采集设备将第一图像保存到存储设备，以便于与存储设备相连接的处理设备根据第一图像判断显示区域是否满足质量条件，进而获得显示区域的质量检测结果，例如，处理设备对第一图像中每个像素点进行检测，以获得到显示区域中每个像素显示位置上是否存在瑕疵的质量检测结果；

或者，图像采集设备在获得到第一时刻对应的第一图像之后，第一图像的第一处理可以为：图像采集设备根据第一图像判断显示区域是否满足质量条件，以获得显示区域的质量检测结果，例如，图像采集设备对第一图像中每个像素点进行检测，以获得到显示区域中每个像素显示位置上是否存在瑕疵的质量检测结果。

相应的，图像采集设备在获得到第三时刻对应的第三图像之后，第三图像的第三处理可以为：图像采集设备将第三图像保存到存储设备，以便于与存储设备相连接的处理设备根据第三图像判断显示区域是否满足质量条件，以获得显示区域的质量检测结果，例如，处理设备对第三图像中每个像素点进行检测，以获得到显示区域中每个像素显示位置上是否存在瑕疵的质量检测结果；

或者，图像采集设备在获得到第三时刻对应的第三图像之后，第三图像的第三处理可以为：图像采集设备根据第三图像判断显示区域是否满足质量条件，以获得显示区域的质量检测结果，例如，图像采集设备对第三图像中每个像素点进行检测，以获得到显示区域中每个像素显示位置上是否存在瑕疵的质量检测结果。

在具体实现中，显示设备中可以按照待测图像之间的顺序依次输出这些多帧待测图像，而每帧待测图像在显示区域中具有输出时长，每隔该输出时长的时间段显示区域中切换一帧待测图像，相邻待测图像之间是不同的。

其中，为了检测显示区域中各像素显示位置上显示各种像素值是否存在瑕疵，显示区域上所输出的待测图像包含多种单一像素值对应的图像，例如，多帧待测图像中包含有：全红色图像、全绿色图像、全蓝色图像，当然为了进一步提高显示区域的检测准确率，可以丰富待测图像的像素范围，如在待测图像中增加全白色图像、全黑色图像及全灰色图像等。而如果显示设备为四基色的显示设备，那么在显示区域中还可以增加全黄色图像作为待测图像，由此，实现对显示区域的全面检测，提高所得到的质量检测结果的完整性和准确性。

基于此，本实施例中的第二图像满足图像切换条件是指：

在第二图像中，存在至少部分第一像素点的输出像素值与第二像素点的输出像素值的变化增量大于或等于增量阈值，第二像素点为第一图像中与第一像素点相对应的像素点。

其中，第二图像中第一像素点的输出像素值可以为第一像素点的灰度值，也就是说，图像采集设备为黑白相机的情况下，所采集到的第二图像为由黑白灰三种像素值组成的黑白图像，也可以称为灰度图像，此时，第一像素点的输出像素值为相应的灰度值，而在图像采集设备为RGB彩色相机的情况下，所采集到的第二图像为RGB彩色相机采集到的图像进行灰度处理所得到的黑白图像；

或者，第一像素点的输出像素值可以为第一像素点的色彩分量值，也就是说，图像采集设备为彩色相机的情况下，所采集到的第二图像为红绿蓝或者红绿蓝黄多种像素值组成的图像，此时，第一像素点的输出像素值为相应的颜色通道的值；

或者，第一像素点的输出像素值可以为第一像素点在相应的一个颜色通道上的值进行灰度处理后得到的灰度值。

基于此，输出像素值之间的变化增量可以为：在灰度值上的灰度变化增量，如从0变化到255的变化增量；或者，输出像素点值之间的变化增量可以为：在一个或多个色彩分量上对应的色值变化增量，如在红色通道上从255变化为0的变化增量，或者在蓝色通道上从255变化为245的变化增量。

如果第一像素点的输出像素值与第二像素点的输出像素值的变化增量大于或等于增量阈值，可以确定：第一像素点相对于其对应的第二像素点发生了变化，如果第一像素点的输出像素值与第二像素点的输出像素值的变化增量小于增量阈值，那么，可以确定：第一像素点相对于其对应的第二像素点没有发生变化，如图5中所示。基于此，图像采集设备对第二图像进行第二处理，具体可以为：

首先，图像采集设备获得第二图像中各第一像素点的输出像素值与第一图像中各第二像素点的输出像素值之间的变化增量，之后，图像采集设备判断每个第一像素点对应的变化增量是否大于或等于增量阈值，如果第一像素点对应的变化增量大于或等于增量阈值，那么确定这个第一像素点相对于第二像素点发生了变化，如果第一像素点对应的变化增量小于增量阈值，那么确定这个第一像素点相对于第二像素点没有发生变化，基于此，图像采集设备统计发生变化的第一像素点的数量，如果存在部分或者全部像素点发生了变化，具体可以为有超过像素点阈值的像素点发生了变化，那么图像采集设备可以确定第二图像满足图像切换条件，如果所有像素点都没有发生变化或者发生变化的像素点数量小于像素点阈值，那么图像采集设备可以确定第二图像不满足图像切换条件。

可选方案中，输出像素值的变化增量可以根据在显示区域上相邻输出的待测图像之间的像素值差值确定，如设置为10或者20等，在发现对应于同一像素点对应的输出像素值的变化增量超过10或20，则确定该像素点发生输出像素值变化。基于此，在发现至少部分像素点发生变化的情况下，则确定第二图像满足图像切换条件，如果发现所有像素点均没有发生变化或者只有小于像素点阈值的像素点发生了变化，那么确定第二图像不满足图像切换条件。

需要说明的是，在显示区域上可以将其输出的相邻待测图像设置为像素值之间的差值大于一定的阈值的图像，由此，通过增加相邻待测图像之间的差异性，来提高后续进行第二处理时确定是否满足图像切换条件的准确性。

基于以上实现，图像采集设备或者处理设备在对第一图像进行第一处理或者对第三图像进行第三处理时，由于待测图像为单一像素值的图像，因此，以图像采集设备对第三图像进行第三处理为例，具体的确定显示区域是否满足质量条件的实现方式如下：

图像采集设备识别第三图像中各个像素点上的输出像素值，具体可以为像素点原始的灰度值、像素点在相应颜色通道上的值或者对像素点在相应颜色通道上的值进行处理后的灰度值；之后，图像采集设备对每个像素点的输出像素值是否与相邻像素点的输出像素值相同进行判断，以得到每个像素点与其相邻像素点在输出像素值上的差值，如灰度值差值或者相应颜色通道上的值的差值等，之后，通过对该差值进行判断来确定每个像素点是否出现瑕疵，例如，判断每个像素点对应的差值是否大于或等于特定的阈值，如果差值大于阈值，那么说明这个像素点与其相邻像素点在输出像素值上不同的，那么可以初步确定这个像素点是存在瑕疵的，最后在对每个像素点的输出像素值与其相邻像素点的输出像素值之间的差值进行判断之后，统计出所有像素点是否存在瑕疵的检测结果，即可得到显示区域是否满足质量条件的质量检测结果。

在一种实现方式中，图像采集设备在确定第二图像满足图像切换条件的情况下，即可对第二时刻之后的后一时刻即第三时刻对应的第三图像进行获取，该第三图像用于进行第三处理，以获得显示区域是否满足质量条件的质量检测结果；

在另一种实现方式中，为了避免在刚刚发生图像切换时所采集到的第三图像关于待测图像的区域存在不清晰的情况，图像采集设备在第二时刻之后间隔一定时长后的第三时刻上获得第三图像，从而保证第三图像上待测图像的清晰度，以提高第三处理所得到的质量检测结果的准确性。例如，第三图像所对应的第三时刻为第二时刻与第四时刻之间的任意时刻，如图2中所示，第四时刻为第二时刻之后的且其对应的第四图像被确定为满足图像切换条件。可选的，第三时刻为两个满足图像切换条件的图像所对应的时刻即第二时刻和第四时刻之间的中间时刻。由此，图像采集设备所获得到的用于第三处理或第一处理的图像是在显示设备切换新待测图像之后在显示设备再次切换新待测设备之前的中间时刻上图像采集设备所采集的图像，由此，在显示设备的显示区域上稳定输出待测图像的情况下，图像采集设备采集用于第三处理的图像，避免显示设备正在切换、刚完成切换或准确切换之前的时刻上图像采集设备所采集到的图像存在像素点模糊的情况，从而通过提高用于第三处理或第一处理的图像的清晰度来提高后续对显示区域的检测结果的准确性。

在一种实现方式中，在图像采集设备获得第一时刻对应的第一图像之前，本实施例中的方法还可以包括以下步骤，如图6中所示：

步骤105：图像采集设备采集第五图像。

其中，第五图像为至少包含显示区域的图像。需要说明的是，步骤105和后续的步骤106可以在步骤101之前执行。

需要说明的是，图像采集设备在开机之后持续采集其朝向区域上的图像，以监测在图像采集设备的朝向区域上是否有显示设备。

步骤106：图像采集设备对第五图像进行识别，以得到第五图像中的第一标识信息。

其中，第一标识信息表征显示设备的设备参数。第一标识信息可以为二维码或者条形码等信息，以表征显示设备的设备参数，其中，显示设备的设备参数可以可以包括有显示设备的设备标识如编码等、显示设备的显示分辨率、显示设备的显示亮度、待测图像的输出时长等参数。

具体实现中，第一标识信息可以在显示区域上输出待测图像之前输出在显示区域上，如图7中所示；或者，第一标识信息被投影或者设置在显示设备的预设位置上，如图8中所示，由此，图像采集设备能够获得到包含该第一标识信息的第五图像，并对第五图像进行识别，得到表征设备参数的第一标识信息。

可选方案中，设备参数中至少包含显示设备的输出参数，如输出分辨率、亮度等参数，基于此，图像采集设备在获得第一时刻对应的第一图像之前，图像采集设备还根据显示设备的输出参数，设置图像采集参数。例如，图像采集设备根据显示设备的输出分辨率、亮度、色彩模式(三基色或四基色)等参数设置图像采集设备进行图像采集时的拍照参数，如焦距、视角、亮度、曝光度、色彩采集等拍照参数中的任意一种或任意多种。

基于此，图像采集设备在采集到第五图像并且在第五图像中识别出第一标识信息，就可以确定图像采集设备的朝向区域即采集范围内有显示设备存在，此时，图像采集设备就可以开始执行步骤101，由此，图像采集设备中无需等待任何设备的通知，就可以开始进行第一图像采集及后续流程，由此，实现自动启动图像采集及检测，进一步提高图像采集的效率。

在一种实现方式中，在图像采集设备获得第一时刻对应的第一图像之前，或者，在图像采集设备获得第三时刻对应的第三图像之前，图像采集设备还执行以下流程，如图9中所示：

步骤107：图像采集设备采集第六图像。

其中，第六图像为至少包含显示区域的图像。需要说明的是，步骤107可以在步骤101之前执行，且步骤107在步骤106之后执行。

步骤108：图像采集设备对第六图像进行识别，以得到显示区域的区域位置信息。

其中，区域位置信息至少用于进行第二处理，以确定第二图像中区域位置信息对应的图像区域是否满足图像切换条件。具体的，区域位置信息可以以区域顶点坐标来表示，如图10中所示，图像采集设备可以先对第六图像进行图像特征识别，以识别出第六图像中的显示区域并获得到该显示区域的区域顶点坐标，来表示显示区域的区域位置信息。

基于此，第二图像中区域位置信息对应的图像区域满足图像切换条件，可以为：

在第二图像中区域位置信息对应的图像区域中，存在至少部分第一像素点的输出像素值与第二像素点的输出像素值的变化增量大于或等于增量阈值，第二像素点为第一图像中与区域位置信息相对应的图像区域中的与第一像素点相对应的像素点。

具体实现中，图像采集设备对第二图像进行第二处理，具体为：

首先，图像采集设备获得第二图像中与区域位置信息相对应的第一图像区域，图像采集设备获得第一图像区域中各第一像素点的输出像素值与第二图像区域中相应的第二像素点的输出像素值之间的变化增量；第二图像区域为第一图像中与区域位置信息相对应的图像区域；之后，图像采集设备判断每个第一像素点对应的变化增量是否大于或等于增量阈值，如果至少部分像素点对应的变化增量大于或等于增量阈值，那么图像采集设备确定第二图像的区域位置信息对应的图像区域满足图像切换条件，如果全部第一像素点对应的变化增量均小于增量阈值，或者对应的变化增量小于增量阈值的第一像素点的数量低于像素点阈值，那么图像采集设备确定第二图像的区域位置信息对应的图像区域不满足图像切换条件。

相应的，图像采集设备或者处理设备在对第一图像进行第一处理或者对第三图像进行第三处理时，由于待测图像为单一像素值的图像，因此，以图像采集设备对第三图像进行第三处理为例，具体的确定显示区域是否满足质量条件的实现方式如下：

图像采集设备识别第三图像中与区域位置信息相对应的目标图像区域中各个像素点上的输出像素值，具体可以为像素点原始的灰度值、像素点在相应颜色通道上的值或者对像素点在相应颜色通道上的值进行处理后的灰度值；之后，图像采集设备对目标图像区域中每个像素点的输出像素值是否与相邻像素点的输出像素值相同进行判断，以得到每个像素点与其相邻像素点在输出像素值上的差值，如灰度值差值或者相应颜色通道上的值的差值等，之后，通过对该差值进行判断来确定每个像素点是否出现瑕疵，例如，判断每个像素点对应的差值是否大于或等于特定的阈值，如果差值大于阈值，那么说明这个像素点与其相邻像素点在输出像素值上不同的，那么可以初步确定这个像素点是存在瑕疵的，最后在对目标图像区域中每个像素点的输出像素值与其相邻像素点的输出像素值之间的差值进行判断之后，统计出目标图像区域中所有像素点是否存在瑕疵的检测结果，即可得到显示区域是否满足质量条件的质量检测结果。

可见，图像采集设备中通过对第六图像的处理来实现对显示区域的区域位置信息的识别，进而在后续进行第二处理及第三处理时可以自动定位到显示区域所在的图像区域，进而后续的图像切换条件的检测以及显示区域的质量检测，由此通过精确定位来加快切换检测和质量检测的速度，进一步提高工作效率。

参考图11，为本申请实施例二提供的一种输出控制方法的实现流程图，该方法可以适用于能够进行图像输出的显示设备中，如显示屏或触摸屏等。本实施例中的技术方案主要用于提高图像采集设备采集图像的效率。

具体的，本实施例中的方法可以包括以下步骤：

步骤1101：显示设备获得第七图像。

其中，显示设备上可以设置有能够进行图像采集的摄像头等采集部件，用以采集可能包含有图像采集设备的图像区域的第七图像，如图12中所示，显示设备处于图像采集设备的采集范围内，图像采集设备处于显示设备上摄像头等采集部件的采集范围内。

步骤1102：显示设备识别第七图像中是否包含有图像采集设备，在识别出第七图像中包含图像采集设备的情况下，执行步骤1103。

其中，显示设备可以通过其内部设置的处理装置对第七图像进行图像特征提取，通过提取出的图像特征识别出第七图像中是否包含有图像采集设备。

具体的，图像采集设备在其所在位置或者近邻的区域或位置上设置二维码或者条形码等能够表征图像采集设备的第二标识信息，如图12中所示，图像采集设备在其摄像头一侧设置有二维码，显示设备通过对其所获得到的第七图像进行二维码识别，在识别出第七图像中的二维码为图像采集设备的二维码的情况下，确定第七图像中包含图像采集设备，此时执行步骤1103。

步骤1103：显示设备在显示区域上依次输出多帧待测图像，以使得：

图像采集设备获得第一时刻对应的第一图像，第一图像为至少包含显示区域的图像，第一图像用于进行第一处理；图像采集设备获得第一时刻之后的第二时刻对应的第二图像，第二图像用于进行第二处理，以确定第二图像是否满足图像切换条件；如果第二图像满足图像切换条件，图像采集设备获得第二时刻之后的第三时刻对应的第三图像，第三图像用于第三处理，第三处理与第一处理为相同类型的处理方式。

其中，显示设备中可以按照待测图像之间的顺序依次输出这些多帧待测图像，而每帧待测图像在显示区域中具有输出时长，每隔该输出时长的时间段显示区域中切换一帧待测图像，相邻待测图像之间是不同，具体可以为：相邻待测图像之间在相应像素点上至少有部分像素点的输出像素值是不同的，例如，相邻两帧待测图像在对应于相同像素坐标上的输出像素值是不同的。

需要说明的是，第三处理和第一处理为：根据图像对显示区域进行输出检测的处理，具体为：根据图像对显示区域上每个像素点进行检测，以得到显示区域上每个像素点是否存在瑕疵的检测结果。

由上述方案可知，本申请实施例二提供的一种输出控制方法中，显示设备通过识别其获得到的图像中是否包含有图像采集设备，进而在包含图像采集设备的情况下，显示设备可以开始输出多帧待测图像，基于此，图像采集设备在获得到第一时刻上对应的包含显示区域的第一图像之后，对后续时刻上对应的图像进行第二处理，由此在确定第一时刻之后的第二时刻上对应的第二图像满足图像切换条件的情况下，再获得之后的第三时刻对应的包含显示区域的第三图像，而第一图像和第三图像均用于相同类型的处理，如对显示区域进行检测的处理。可见，本申请中无需显示设备与图像采集设备之间建立有线或者无线的通信连接，也就避免了显示设备与图像采集设备之间的过多的控制流程，显示设备可以通过图像识别来确定是否开始输出待测图像，而图像采集设备就可以通过第二处理来确定发生图像切换的时刻，进而获取到后续的用于第三处理的图像，从而能够降低显示设备输出待测图像的控制复杂度也可以降低图像采集设备进行图像采集时的控制复杂度，实现显示设备上图像输出的自动控制以及图像采集设备上图像采集的自动控制，进而提高工作效率。

进一步的，显示设备在输出待测图像之前，可以先输出第一标识信息，如至少包含显示设备的显示参数的二维码或者条形码等，如图7中所示；或者，显示设备将第一标识信息投影在显示设备的预设位置上或者设置在显示设备的预设位置上，如图8中所示。

基于此，图像采集设备在采集到包含有第一标识信息的第五图像的情况下，确定显示设备即将或者已经开始输出待测图像，此时，图像采集设备开始执行步骤101及后续步骤，实现图像采集的自动启动，提高图像采集的效率。即：在显示设备开始输出待测图像之后，图像采集设备获得第一时刻对应的能够用于第一处理的第一图像，该第一图像中包含有显示区域，能够用于对显示区域进行检测，之后，图像采集设备会持续对后续第二时刻上对应的第二图像进行第二处理，以确定第二图像是否满足图像切换条件，即确定显示区域上所输出的待测图像是否发生切换，进而图像采集设备在第二时刻上对应的第二图像满足图像切换条件的情况下，获得到后续的第三时刻对应的能够用于第三处理的第三图像，第三图像中包含有显示区域，能够用于对显示区域进行检测，之后，图像采集设备仍然持续对后续时刻上对应的图像进行第二处理，以确定后续时刻对应的图像是否满足图像切换条件，以此类推，直到所获得到的用于第三处理的图像的数量满足需求，如数量超过数量阈值，此时图像采集设备结束图像采集。

参考图13，为本申请实施例三提供的一种图像采集设备的结构示意图，该图像采集设备可以为能够进行图像采集及图像处理的设备，如工业相机等。本实施例中的技术方案主要用于提高图像采集设备采集图像的效率。

具体的，本实施例中的图像采集设备中可以包含有以下结构：

采集装置1301，如摄像头等，用于采集图像；

处理装置1302，如处理器等，用于获得第一时刻对应的第一图像，第一图像用于进行第一处理；获得第一时刻之后的第二时刻对应的第二图像，第二图像用于进行第二处理，以确定第二图像是否满足图像切换条件；如果第二图像满足图像切换条件，获得第二时刻之后的第三时刻对应的第三图像，第三图像用于第三处理，第三处理与第一处理为相同类型的处理方式。

由上述方案可知，本申请实施例三提供的一种图像采集设备中，图像采集设备在获得到第一时刻上对应的用于第一处理的第一图像之后，对后续时刻上对应的图像进行第二处理，由此在确定第一时刻之后的第二时刻上对应的第二图像满足图像切换条件的情况下，再获得之后的第三时刻对应的用于与第一处理同类型的第三处理的第三图像。可见，本申请中图像采集装置根据自己所获得到的图像进行第二处理就可以确定发生图像切换的时刻，进而获取到后续的用于第三处理的图像，由此，无需图像采集设备建立与其他设备之间的通信连接，也就避免了图像采集设备与其他设备之间的过多的控制流程，由此能够降低图像采集设备进行图像采集时的控制复杂度，实现图像采集设备上图像采集的自动控制，进而提高图像采集的效率。

需要说明的是，本实施例中处理装置的具体实现可以参考前文中相应内容，此处不再详述。

参考图14，为本申请实施例四提供的一种显示设备的结构示意图，该显示设备可以为能够进行图像输出的显示设备，如显示屏或触摸屏等。本实施例中的技术方案主要用于提高图像采集设备采集图像的效率。

具体的，本实施例中的显示设备可以包括以下结构：

采集装置1401，如摄像头等，用于获得第七图像；

显示装置1402，如显示屏或触摸屏等，用于在识别出第七图像中包含图像采集设备的情况下，在显示区域上依次输出多帧待测图像，以使得：

图像采集设备获得第一时刻对应的第一图像，第一图像为至少包含显示区域的图像，第一图像用于进行第一处理；获得第一时刻之后的第二时刻对应的第二图像，第二图像用于进行第二处理，以确定第二图像是否满足图像切换条件；如果第二图像满足图像切换条件，获得第二时刻之后的第三时刻对应的第三图像，第三图像用于第三处理，第三处理与第一处理为相同类型的处理方式。

具体实现中，显示装置1402中可以设置有处理器等能够对第七图像进行处理的部件，由此在处理器识别出第七图像中包含图像采集设备的情况下，在显示装置1402的显示区域上依次输出多帧待测图像，进而是的图像采集设备能够进行图像采集。

由上述方案可知，本申请实施例四提供的一种显示设备中，显示设备通过识别其获得到的图像中是否包含有图像采集设备，进而在包含图像采集设备的情况下，显示设备可以开始输出多帧待测图像，基于此，图像采集设备在获得到第一时刻上对应的包含显示区域的第一图像之后，对后续时刻上对应的图像进行第二处理，由此在确定第一时刻之后的第二时刻上对应的第二图像满足图像切换条件的情况下，再获得之后的第三时刻对应的包含显示区域的第三图像，而第一图像和第三图像均用于相同类型的处理，如对显示区域进行检测的处理。可见，本申请中无需显示设备与图像采集设备之间建立有线或者无线的通信连接，也就避免了显示设备与图像采集设备之间的过多的控制流程，显示设备可以通过图像识别来确定是否开始输出待测图像，而图像采集设备就可以通过第二处理来确定发生图像切换的时刻，进而获取到后续的用于第三处理的图像，从而能够降低显示设备输出待测图像的控制复杂度也可以降低图像采集设备进行图像采集时的控制复杂度，实现显示设备上图像输出的自动控制以及图像采集设备上图像采集的自动控制，进而提高工作效率。

以笔记本屏幕瑕疵的检测场景为例，对本申请中的技术方案进行举例说明：

人工检测屏幕瑕疵的方式存在检测准确率和效率均较差的问题，为此，目前在智能制造中，使用工控机同时控制屏幕和相机进行图像采集测试，但是这种方案不仅存在前文中提到的采集效率较低的问题，还会因为使用有线模式导致成本增加，并且会增加屏幕被划伤的风险。

为此，为了实现笔记本的安全高效的检测，基于本申请的技术方案，本实施例中提出一种利用已有的工业相机，通过机器视觉技术算法定位屏幕切换图像的准确时刻，进而实现屏幕测试的笔记本与工业相机之间的“无线”同步技术，具体方案如下：

结合图15中所示的工业相机的图像采集及处理流程，本实施例中实现LCD检测的工作流程如下：

1、生产线上的笔记本DUT流进测试设备，如图16中所示，笔记本上自带的相机识别到工业相机上的二维码信息，说明笔记本已经到达能够被工业相机采集图像的指定位置，此时，笔记本触发DUT的切屏程序开始运行，即在LCD上开始输出待测图像pattern，而且在每隔一定时长如1s等切换一帧待测图像，待测图像之间具有特定的图像输出顺序，由此，笔记本进入切换程序之后，以特定的图像依次快速播放；

2、笔记本上的切屏程序在输出待测图像之前，调用DUT内部的各种信息，如产品序列号SN(Serial Number)、LCD类型、当前切屏状态等，进而根据这些信息生成笔记本的二维码，再将笔记本的二维码显示在笔记本的LCD上面，如图16中所示；

3、工业相机采集包含LCD所输出的笔记本二维码的图像，进而通过机器视觉如图像处理算法等获取LCD上所输出的二维码所包含的相关信息，如LCD分辨率等，工业相机根据这些信息调用所需的拍照参数，如曝光度等；

4、工业相机不间断的持续采集当前时刻下的当前图像，形成图像流，通过视觉算法对所采集到的包含LCD的图像进行图像处理，以定位LCD的边框，进而计算出LCD的四个点坐标系；

5、工业相机对持续采集到的每个时刻对应的图像进行取流，持续分析拍照得到的每帧图像的LCD的灰度值；

6、根据不同pattern对应不同灰度值的原理，工业相机判断图像中LCD灰度值是否发生了变化，以确认当前切屏程序是否进行了图像切换，得到笔记本上所输出的图像状态；

7、工业相机上一旦发现灰度值变动，说明pattern已更换到下一张，在继续对图像进行取流处理的同时，工业相机根据图像的显示时间即在LCD上的持续时长，在持续时长的中间时间点如1s中的中间点进行拍照，如图17中所示，获得到LCD上图像的显示时间进行到中间时的包含LCD区域的图像，这些图像可以用于对LCD是否出现瑕疵进行检测，以此类推，直到工业相机获得到满足需求的图像的数量。

需要说明的是，如果在每帧图像被切换的开始时刻点或者结束时刻点进行LCD拍照，可能会存在与前后图像的切换图像不稳定及虚拍等问题，因此，为了提高检测准确性，本实施例中在每帧图像被切换后持续一半的显示时间的时候，进行LCD图像采集。

可见，本申请的技术方案中，能够通过机器视觉实现端对端的无线通信，从而精确的进行拍照同步，并且不会错位，也不会虚拍，无需在工业相机和笔记本之间进行有线连接，不仅能够减少夹具和测试线的成本，还可以通过无接触同步以减少DUT被划伤的风险，并且通过图像处理算法可以满足毫秒级别的响应时间，实现高通信响应以及高同步效率，由此，从而提高图像采集效率及准确性，进而提高后续屏幕检测的效率和准确性，达到提高生产效果的目的。

需要说明的是，本申请的技术方案适用于对多种屏幕进行检测，如液晶显示器LCD(Liquid Crystal Display)、发光二极管显示器LED(Light Emitting Diode)、发光二极管显示器OLED(Organic Light Emitting Display)等。

本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。

专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。

结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。

对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下，在其它实施例中实现。因此，本申请将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (9)

1.一种图像处理方法，包括：

图像采集设备获得第一时刻对应的第一图像，所述第一图像为至少包含显示区域的图像，所述显示区域为显示设备中用于依次输出多帧待测图像的区域，所述第一图像用于进行第一处理；

所述图像采集设备获得所述第一时刻之后的第二时刻对应的第二图像，所述第二图像用于进行第二处理，以确定所述第二图像是否满足图像切换条件，所述第二图像满足图像切换条件是指，第二时刻对应的第二图像与在第二时刻之前的时刻对应的图像是不同的；

如果所述第二图像满足所述图像切换条件，所述图像采集设备获得所述第二时刻之后的第三时刻对应的第三图像，所述第三图像用于第三处理，所述第三处理与所述第一处理为相同类型的处理方式。

2.根据权利要求1所述的方法，所述第二图像满足图像切换条件，包括：

在所述第二图像中，存在至少部分第一像素点的输出像素值与第二像素点的输出像素值的变化增量大于或等于增量阈值，所述第二像素点为所述第一图像中与所述第一像素点相对应的像素点。

3.根据权利要求1所述的方法，所述第三时刻为所述第二时刻与第四时刻之间的任意时刻，所述第四时刻为所述第二时刻之后的时刻，且所述第四时刻对应的第四图像满足所述图像切换条件。

4.根据权利要求1所述的方法，在图像采集设备获得第一时刻对应的第一图像之前，所述方法还包括：

所述图像采集设备采集第五图像，所述第五图像为至少包含所述显示区域的图像；

所述图像采集设备对所述第五图像进行识别，以得到所述第五图像中的第一标识信息，所述第一标识信息表征所述显示设备的设备参数。

5.根据权利要求4所述的方法，所述设备参数中至少包含所述显示设备的输出参数；

其中，在图像采集设备获得第一时刻对应的第一图像之前，所述方法还包括：

所述图像采集设备根据所述显示设备的输出参数，设置图像采集参数。

6.根据权利要求1所述的方法，在图像采集设备获得第一时刻对应的第一图像之前，所述方法还包括：

所述图像采集设备采集第六图像，所述第六图像为至少包含所述显示区域的图像；

所述图像采集设备对所述第六图像进行识别，以得到所述显示区域的区域位置信息，所述区域位置信息至少用于进行所述第二处理，以确定所述第二图像中所述区域位置信息对应的图像区域是否满足图像切换条件。

7.一种输出控制方法，包括：

显示设备获得第七图像；

所述显示设备在识别出所述第七图像中包含图像采集设备的情况下，所述显示设备在显示区域上依次输出多帧待测图像，以使得：

所述图像采集设备获得第一时刻对应的第一图像，所述第一图像为至少包含所述显示区域的图像，所述第一图像用于进行第一处理；

所述图像采集设备获得所述第一时刻之后的第二时刻对应的第二图像，所述第二图像用于进行第二处理，以确定所述第二图像是否满足图像切换条件，所述第二图像满足图像切换条件是指，第二时刻对应的第二图像与在第二时刻之前的时刻对应的图像是不同的；

如果所述第二图像满足所述图像切换条件，所述图像采集设备获得所述第二时刻之后的第三时刻对应的第三图像，所述第三图像用于第三处理，所述第三处理与所述第一处理为相同类型的处理方式。

8.一种图像采集设备，包括：

采集装置，用于采集图像；

处理装置，用于获得第一时刻对应的第一图像，所述第一图像为至少包含显示区域的图像，所述显示区域为显示设备中用于依次输出多帧待测图像的区域，所述第一图像用于进行第一处理；获得所述第一时刻之后的第二时刻对应的第二图像，所述第二图像用于进行第二处理，以确定所述第二图像是否满足图像切换条件，所述第二图像满足图像切换条件是指，第二时刻对应的第二图像与在第二时刻之前的时刻对应的图像是不同的；如果所述第二图像满足所述图像切换条件，获得所述第二时刻之后的第三时刻对应的第三图像，所述第三图像用于第三处理，所述第三处理与所述第一处理为相同类型的处理方式。

9.一种显示设备，包括：

采集装置，用于获得第七图像；

显示装置，用于在识别出所述第七图像中包含图像采集设备的情况下，在显示区域上依次输出多帧待测图像，以使得：

所述图像采集设备获得第一时刻对应的第一图像，所述第一图像为至少包含所述显示区域的图像，所述第一图像用于进行第一处理；获得所述第一时刻之后的第二时刻对应的第二图像，所述第二图像用于进行第二处理，以确定所述第二图像是否满足图像切换条件，所述第二图像满足图像切换条件是指，第二时刻对应的第二图像与在第二时刻之前的时刻对应的图像是不同的；如果所述第二图像满足所述图像切换条件，获得所述第二时刻之后的第三时刻对应的第三图像，所述第三图像用于第三处理，所述第三处理与所述第一处理为相同类型的处理方式。

Images