CN104217400A - 一种图像处理的方法及电子设备 - Google Patents

Abstract

本发明公开了一种图像处理的方法及电子设备，该图像处理的方法包括：通过图像采集单元获得第一图像，第一图像中包括第一显示内容的第一显示内容图像和目标物图像；同时，通过显示单元获取只包含第一显示内容的第二图像；获取第一图像中各个像素点对应的第一像素值，及第二图像中与第一图像中的每个像素点对应的预设相邻像素点的至少两个第二像素值；获取第一图像中各个像素点与所述至少两个第二像素值的最小差值；将每个最小差值作为对应的每个像素点的第三像素值，生成第三图像。本申请通过上述方法，解决现有技术在提取显示屏上的目标物时存在提取目标物图像失真的技术问题，提高提取目标物图像的保真度。

Description

一种图像处理的方法及电子设备

技术领域

本发明涉及多媒体技术领域，特别涉及一种图像处理的方法及电子设备。

背景技术

随着科学技术的不断发展，图像处理技术越来越成熟，处理能力也越来越高，如图像识别、目标物提取等。在目标物提取中一般包括两种方法：第一种，先从数据库提取目标物参照图，然后将目标物参照图与被提取图像进行对比从而提取目标物图像；第二种，直接从被提取图像中提取目标物图像。

现有技术中，第二种方法往往通过以下方式提取目标物图像：首先获得被提取图像和背景图像，然后将被提取图像和背景图像进行对应相减的运算，即从被提取图像中去除背景图像从而得到被提取图像中的目标物图像。

本申请发明人在实现本申请实施例中技术方案的过程中，发现现有技术存在如下技术问题：

在提取显示器屏面上的目标物时，由于目标物的不确定性，无法从数据库中获取目标物参照图，所以通常采用第二种方法提取目标物图像。在获得被提取图像时，目标物置于显示器的屏幕上，被提取图像往往不能通过显示器本身获得，需要通过其他设备如相机等获得，由于拍摄的角度、焦距等不同，导致被提取图像与背景图像的像素点往往不是一一对应的，对被提取图像和背景图像进行对应相减来提取目标物图像，将导致目标物图像失真，可见现有技术中在提取显示器屏面上的目标物时存在提取目标物图像失真的技术问题。

发明内容

本发明实施例提供一种图像处理的方法及电子设备，用于解决现有技术在提取显示器屏面上的目标物时存在提取目标物图像失真的技术问题，提高提取目标物图像的保真度。

本申请实施例提供一种图像处理的方法，应用于一电子设备，所述电子设备包含图像采集单元和显示单元，所述方法包括：

在第一时刻，当所述显示单元上放置有目标物时，通过所述图像采集单元获得第一图像，所述第一图像中包括所述显示单元的第一显示内容对应的第一显示内容图像和所述目标物的目标物图像；

在所述第一时刻，通过所述显示单元获取只包含所述第一显示内容的第二图像，其中所述第一图像与所述第二图像的像素点个数相同；

依次取i从1至N，获取所述第一图像中第i个像素点对应的第一像素值，及所述第二图像中对应的所述第i个像素点和所述第i个像素点的预设相邻像素点对应的J个第二像素值，其中1≤i≤N且i为整数，N为所述第一图像的像素个数，J为大于等于2的整数；

依次取i从1至N，获取所述第i个像素点对应的所述第一像素值与J个所述第二像素值的最小差值；

当i为N时，获得N个所述最小差值，将N个所述最小差值中第i个最小差值作为对应的所述第i个像素点的第三像素值，生成第三图像，使得所述电子设备能够基于所述第三图像获取所述目标物图像。

可选的，在所述生成第三图像之后，所述方法具体包括：

获取所述第三图像中像素值小于等于预设门限值的第一像素点集，及所述第三图像中除所述第一像素点集以外的第二像素点集；

将所述第一像素点集中所述包括的像素点的像素值重置为第四像素值，将所述第二像素点集中所包括的像素点的像素值重置为第五像素值，生成只包含所述目标物图像的第四图像，其中，所述第四像素值小于等于所述第一像素点集中的最小像素值，所述第五像素值大于等于所述第二像素点集中的最大像素值。

可选的，在所述生成只包含所述目标物的第四图像之后，所述方法具体包括：

通过对所述第四图像进行种子图填充处理，将像素值为第五像素值的像素点填充到第一填充像素点所在的区域，获得包含所述目标物的边界图像的第五图像，其中，所述第一填充像素点为与种子像素点相邻的预设区域内的像素点，所述种子像素点为所述第四图像中像素值为第五像素值的像素点。

可选的，在所述获得所述目标物所在区域的像素值一致的第五图像之后，所述方法具体包括：

通过对所述第五图像进行膨胀腐蚀处理，将第一断裂像素点的像素值设置为第五像素值，获得包含所述目标物的内部图像的第六图像，其中，所述第一断裂像素点与亮点之间的距离最大不超过预设数目的像素点，所述亮点为像素值为第五像素值的像素点；

将所述第六图像作为所述目标物图像。

可选的，所述通过所述显示单元获取只包含所述第一显示内容的第二图像，具体包括：

在所述第一时刻，获取所述显示单元的屏幕截图，并将所述屏幕截图作为所述第二图像。

本申请实施例还提供一种电子设备，包含图像采集单元和显示单元，所述电子设备包括：

第一图像获取单元，用于在第一时刻，当所述显示单元上放置有目标物时，通过所述图像采集单元获得第一图像，所述第一图像中包括所述显示单元的第一显示内容对应的第一显示内容图像和所述目标物的目标物图像；

第二图像获取单元，用于在所述第一时刻，通过所述显示单元获取只包含所述第一显示内容的第二图像，其中所述第一图像与所述第二图像的像素点个数相同；

第一像素获取单元，用于依次取i从1至N，获取所述第一图像中第i个像素点对应的第一像素值，及所述第二图像中对应的所述第i个像素点和所述第i个像素点的预设相邻像素点对应的J个第二像素值，其中1≤i≤N且i为整数，N为所述第一图像的像素个数，J为大于等于2的整数；

差值获取单元，用于依次取i从1至N，获取所述第i个像素点对应的所述第一像素值与J个所述第二像素值的最小差值；

第一图像生成单元，用于当i为N时，获得N个所述最小差值，将N个所述最小差值中第i个最小差值作为对应的所述第i个像素点的第三像素值，生成第三图像，使得所述电子设备能够基于所述第三图像获取所述目标物图像。

可选的，所述电子设备具体包括：

第二像素获取单元，用于获取所述第三图像中像素值小于等于预设门限值的第一像素点集，及所述第三图像中除所述第一像素点集以外的第二像素点集；

第二图像生成单元，用于将所述第一像素点集中所述包括的像素点的像素值重置为第四像素值，将所述第二像素点集中所包括的像素点的像素值重置为第五像素值，生成只包含所述目标物图像的第四图像，其中，所述第四像素值小于等于所述第一像素点集中的最小像素值，所述第五像素值大于等于所述第二像素点集中的最大像素值。

可选的，所述电子设备具体包括：

种子填充单元，用于对所述第四图像进行种子图填充处理，将像素值为第五像素值的像素点填充到第一填充像素点所在的区域，获得包含所述目标物的边界图像的第五图像，其中，所述第一填充像素点为与种子像素点相邻的预设区域内的像素点，所述种子像素点为所述第四图像中像素值为第五像素值的像素点。

可选的，所述电子设备具体包括：

膨胀腐蚀单元，用于对所述第五图像进行膨胀腐蚀处理，将第一断裂像素点的像素值设置为第五像素值，获得包含所述目标物的内部图像的第六图像，其中，所述第一断裂像素点与亮点之间的距离最大不超过预设数目的像素点，所述亮点为像素值为第五像素值的像素点；

所述膨胀腐蚀单元，还用于将所述第六图像作为所述目标物图像。

可选的，所述第二图像获取单元具体用于：

在所述第一时刻，获取所述显示单元的屏幕截图，并将所述屏幕截图作为所述第二图像。

本申请实施例中的上述一个或多个技术方案，至少具有如下一种或多种技术效果：

1、本申请在提取显示器屏面上目标物的目标物图像时，通过将被提取的第一图像与表示目标物背景的第二图像进行邻域差分处理，即获得第二图像中预设区域范围内与第一图像指定像素点差值最小的相似像素点，并从第一图像中减去相似像素点，避免直接将第一图像和第二图像的像素按对应的坐标位置一一相减，导致实际相减的两个像素并不对应导致目标物图像失真，使得从第一图像中更准确性的去除背景图像，从而获得准确的目标物差分图像，解决了现有技术在提取显示器屏面上的目标物时存在提取目标物图像失真的技术问题，达到提高目标物图像保真度的技术效果。

2、由于本申请通过屏幕截图的方式，在获取第一图像的同时获取第二图像，使得获得第二图像与第一图像中除目标物图像以外的背景图像完全相同，进而在进行图像差分的时候，能够去除与第一图像中一致的背景图像，从而提高提取的目标物图像的准确度。

3、在本申请中，通过对邻域差分处理获得的差分图像，进行进一步的种子填充和膨胀腐蚀处理，完善目标物所在区域的图像，并连接目标物图像中断裂的像素点，获得保真度更高的目标物图像。

附图说明

图1为本申请实施例一提供的一种图像处理的方法的流程示意图；

图2为本申请实施例一提供的第一图像与第二图像对应像素点的示意图；

图3为本申请实施例一提供的经摄像头拍摄获得的第一图像的示意图；

图4为本申请实施例一提供的通过截屏方式获得的第二图像的示意图；

图5为本申请实施例一提供的通过第一图像与第二图像提取的目标图像的示意图；

图6为本申请实施例二提供的一种电子设备的结构方框图。

具体实施方式

在本申请实施例提供的技术方案中，在提取显示器屏面上目标物的目标物图像时，将被提取的第一图像和仅有背景物的第二图像进行邻域差分处理，不是将两幅图像仅仅按对应的坐标位置进行一一相减，而是减去相邻区域内最相近的背景像素，从而获得目标物的差分图像，以解决现有技术在提取显示器屏面上的目标物时存在提取目标物图像失真的技术问题，达到提高目标物图像保真度的技术效果。

下面结合附图对本申请实施例技术方案的主要实现原理、具体实施方式及其对应能够达到的有益效果进行详细的阐述。

实施例一

请参考图1，本申请实施例提供一种图像处理的方法，应用于一电子设备，所述电子设备包含图像采集单元和显示单元，所述方法包括：

S111：在第一时刻，当所述显示单元上放置有目标物时，通过所述图像采集单元获得第一图像，所述第一图像中包括所述显示单元的第一显示内容对应的第一显示内容图像和所述目标物的目标物图像；

S112：在所述第一时刻，通过所述显示单元获取只包含所述第一显示内容的第二图像，其中所述第一图像与所述第二图像的像素点个数相同；

S121：依次取i从1至N，获取所述第一图像中第i个像素点对应的第一像素值，及所述第二图像中对应的所述第i个像素点和所述第i个像素点的预设相邻像素点对应的J个第二像素值，其中1≤i≤N且i为整数，N为所述第一图像的像素个数，J为大于等于2的整数；

S122：依次取i从1至N，获取所述第i个像素点对应的所述第一像素值与J个所述第二像素值的最小差值；

S131：当i为N时，获得N个所述最小差值，将N个所述最小差值中第i个最小差值作为对应的所述第i个像素点的第三像素值，生成第三图像，使得所述电子设备能够基于所述第三图像获取所述目标物图像。

在具体实施过程中，在提取显示器屏面上的目标物的目标物图像时，执行S111，可以通过电子设备的图像采集单元获取被提取的第一图像，如在显示器的屏面上投掷一骰子，需要电子设备提取骰子的图像，那么在屏面上投掷有目标物骰子时，通过电子设备显示屏上方的摄像头拍摄一张骰子在显示屏上的第一图像。由于提取目标物图像时，电子设备仅仅依靠目标物图像和背景图像融合的第一图像是无法提取目标物图像的，所以电子设备还需要获取当前时刻目标物所在环境的背景图像。

在获取目标物所在环境的背景图像时，目标物所在环境的背景图像具体为显示屏面上的显示内容对应的第一显示内容图像，由于第一显示内容图像会随时间的变化而变化，如在第一时刻，显示屏面的显示内容为漫天雪景，但在第一时刻之后的第二时刻，显示屏面的显示内容已改变为落叶秋景，所以为了确保获得的背景图像与第一图像中的背景图像一致，在执行S111的同一时刻执行S112：在所述第一时刻，通过所述显示单元获取只包含所述第一显示内容的第二图像。具体的，可以通过获取所述显示单元的屏幕截图，并将所述屏幕截图作为所述第二图像，这样通过图像采集单元和显示单元两个不同的途径，就能够在同一时刻分别获取第一图像和第二图像，保证了第一图像中的背景物图像和第二图像一致。

具体的，在S112中获得第二图像之后，还可以进一步对第二图像进行射影变换处理，即保持各个物像之间所占像素点数之比不变的情况下变化第二图像的像素，以使第一图像和第二图像的像素点个数相同，能够一一对应，例如：第一图像的像素为2800*1800，第一图像中第一物像与第二物像的所占像素比为4:3，那么第一图像的像素变化后与第二图像的像素相同为1400*900，但在变换后第一图像中其第一物像与第二物像所在像素比依然为4:3。

为了提高提取的目标物图像的保真度，本申请实施例对获得第一图像和第二图像进行邻域差分处理，具体原理如下：

请参考图2，假设第一图像中的第一像素点的坐标为值为（x，y），由于图像采集单元的采集角度、焦距等原因，在作为背景图像的第二图像中坐标点为（x，y）的第二像素点表示的含义不一定是与第一像素点表示的含义相同，如一个表示的是第一片花瓣，而另一个表示的是第二片花瓣，可见若直接将这两个像素点相减则会出现错误，所以本申请针对这一情况，在第二图像的（x，y）点所在的邻区，所述邻区包括（x，y）点，寻找与第一像素点像素值最接近的像素点，即寻找与第一像素点表示的含义相同的像素点，例如：第一像素点的像素值为255，坐标点为（2，5），那么寻找第二图像中坐标为（2，5）的邻区中与像素值255最接近的像素点：坐标点为（2，6）、像素值为254，在获得最接近的像素点后用第一像素点减去最接近像素点，以此循环对所有第一图像中所有像素点进行相同的处理获得差分图像。

根据上述原理，在S112之后，执行S121：依次取i从1至N，获取所述第一图像中第i个像素点对应的第一像素值，及所述第二图像中对应的所述第i个像素点和所述第i个像素点的预设相邻像素点对应的J个第二像素值，其中1≤i≤N且i为整数，N为所述第一图像的像素个数，J为大于等于2的整数。

在具体实施过程中，为了保证第一图像中的像素点与第二图像中的像素点位置一一对应，对第一图像和第二图像建立相同的坐标系，第一图像的第i个像素点的坐标点与第二图像的第i个像素点的坐标点相同。例如：当i=10时，第一图像中的第10个像素点的坐标为（0，10），那么对应的第二图像中第10个像素点则为坐标点（0，10）的像素点。第二图像中的第10个像素点对应一第二像素值，第二图像中的第10个像素点的预设相邻像素点也分别对应一个第二像素值，其中所述预设相邻像素点具体可以为以第i个像素点为圆心，5～8个像素点为半径所包含的区域内的所有像素点，所以J具体可以为大于等于2，且小于等于64的整数。

当获得第一图像中第i个像素点对应的第一像素值，即第二图像中对应的J个第二像素值后，继续执行S122：依次取i从1至N，获取所述第i个像素点对应的所述第一像素值与J个所述第二像素值的最小差值，即从第一图像中去除与第二图像中相同的背景图像，其中，所述最小差值取绝对值，具体的可以通过如下C语言程序段执行S121～S122：

D(i)=Min(abs((s1(i)-s2(i,k)))for all k，其中所述D(i)第三图像的第i个像素点的像素值，所述abs表示取绝对值，Min表示取最小值，s1(i)表示第一图像中的第i个像素点的像素值，s2(i,k)表示第二图像中第i个像素点和第i个像素点的预设相邻像素点的第二像素值，0≤k≤J。

在S122之后，执行S131将N个所述最小差值中第i个最小差值作为对应的所述第i个像素点的第三像素值，生成第三图像即目标物的差分图像，使得所述电子设备能够基于所述第三图像获取所述目标物图像。假设第5个最小差值为40，那么对应的将40作为第5个像素点的第三像素值，则生成的第三图像的第5个像素点的像素值则为40。

在具体实施过程中，在所述生成第三图像之后，为了突出目标物图像的特点，本申请具体还进一步将第三图像转换为二值图像，如黑白图像，具体步骤如下：

第一步：获取所述第三图像中像素值小于等于预设门限值的第一像素点集，及所述第三图像中除所述第一像素点集以外的第二像素点集。由于第三图像中去除背景图像后，非目标物图像所在区域像素点的像素值接近于0，而目标物图像所在区域像素点的像素值则较大，所以所述预设门限值可以设置为背景图最大差异上限，如用0～255表示像素点的像素值范围，根据实验数据得出背景图最大差异上限为10，那么所述预设门限值则可以设置为10，相应的，获取第三图像中像素值小于等于10的所有像素点组成的第一像素点集，即背景图的像素点集，及第三图像中像素值大于10的所有像素点组成的第二像素集，即目标物图像的像素点集。

第二步：将所述第一像素点集中所述包括的像素点的像素值重置为第四像素值，将所述第二像素点集中所包括的像素点的像素值重置为第五像素值，生成只包含所述目标物图像的第四图像，其中，所述第四像素值小于等于所述第一像素点集中的最小像素值，所述第五像素值大于等于所述第二像素点集中的最大像素值。

在上述第二步中，所述第四像素值具体可以为0，所述第五像素值具体可以为255，那么相应的生成的第四图像则为黑白的二值图像，第四图像中的目标物图像所在区域的像素点为像素值为255的亮点，背景图像所在区域的像素点则为像素值0的黑点，从而使得第四图像中只呈现出目标物的目标物图像。

具体实施过程中，在所述生成只包含所述目标物的第四图像之后，为了使目标物图像的边界能够更完全，本申请还通过对所述第四图像进行种子图填充处理，将像素值为第五像素值的像素点填充到第一填充像素点所在的区域，获得包含所述目标物的边界图像的第五图像，其中，所述第一填充像素点为与种子像素点相邻的预设区域内的像素点，所述种子像素点为所述第四图像中像素值为第五像素值的像素点。

为了更清楚的描述种子图填充的过程，下面以具体实例进行描述：

假设检测出第四图像中第25个像素点为像素值为第五像素值255，那么选取第25个像素点为种子像素点，在第四图像的第25个像素点相邻的预设区域内获取像素值为第四像素值0的黑色像素点，其中预设区域可以是与第25个像素点四连通的区域，即第25个像素点的上、下、左、右相邻的像素点所在区域，也可以为与第25个像素点8连通的区域，即第25个像素点的上、下、左、右、左上、左下、右上、右下相邻的像素点所在区域；然后，检测在第一图像中与所述黑色像素点的坐标位置相同的像素点的像素值与第一图像中第25个像素点的像素值的差值是否小于30，若差值小于30则将第四图像中的黑色像素点作为第一填充像素点，相反的，则不将所述黑色像素点作为第一填充像素点；接着：将像素值为第五像素值255的像素点填充到第一填充像素点所在的区域，即将第一填充像素点的像素值从第四像素值0变换为第五像素值255，使得被错误去除的目标物图像的像素点被点亮。

在具体实施过程中，经过处理获得第五图像中的目标物图像图像所在区域可能还存在第一断裂像素点，所以在所述获得所述目标物所在区域的像素值一致的第五图像之后，本申请还进一步对第五图像进行膨胀腐蚀处理，通过对所述第五图像进行膨胀腐蚀处理，将第一断裂像素点的像素值设置为第五像素值，获得包含所述目标物的内部图像的第六图像，其中，所述第一断裂像素点与亮点之间的距离最大不超过预设数目的像素点，所述亮点为像素值为第五像素值的像素点，从而将所述第六图像作为最终的目标物图像。

例如：假设第五图像中目标物图像所在区域的第78个像素点为像素值为第五像素值255的亮点，在目标物图像所在区域范围内，距离第78个像素点2个像素点的位置有一个像素值为第四像素值的空缺黑色像素点，其中所述预设数目为3，那么电子设备经过判断得出所述空缺黑色像素点为第一断裂像素点，此时便将所述第一断裂像素点的像素值重新设置为第五像素值，对第五图像中的所有第一断裂像素点依次执行上述过程，完成一次膨胀腐蚀。为了尽可能连接第一断裂像素点，所述膨胀腐蚀处理可以重复5～8次。

为了更加完善目标物图像的边界图和内部图像，在完成膨胀腐蚀后还可以第二次进行种子图填充和膨胀腐蚀处理，由于具体过程一样，在这里就不再一一描述。

下面结合实际的图像对本申请提供的技术方案进行进一步说明：请参考图3，第一图像为经摄像头拍摄显示屏上的三个积木，其中背景图为显示屏上的黑白格子图，那么在此同时通过截屏方式获取背景图即第二图像如图4所示，可见第一图像中的背景图与第二图像在角度和位置上都有差异，若直接对应相减无法得到正确的积木图像，所以对第一图像和第二图像进行邻域差分处理，随后对邻域差分处理获得的差分图像进行二值化处理，并针对二值化处理后获得的二值图像进行种子图填充和膨胀腐蚀处理，最后获得仅有三个积木的目标图像，此时获得的目标图像中背景图全为黑色，目标物为白色，为了使目标图像符合人们的观看习惯，对目标物图像进行一个二值反转，即将背景图变为白色，目标物变为黑色，最终获得的目标图像如图5所示，可见通过本申请的技术方案能够获得准确的目标物图像。

上述实施例在提取显示器屏面上目标物的目标物图像时，通过将被提取的第一图像与表示目标物背景的第二图像进行邻域差分处理，即获得第二图像中预设区域范围内与第一图像指定像素点差值最小的相似像素点，并从第一图像中减去相似像素点，避免直接将第一图像和第二图像的像素按对应的坐标位置一一相减，导致实际相减的两个像素并不对应导致目标物图像失真，使得从第一图像中去除更为准确性的背景图像，从而获得准确的目标物差分图像，解决了现有技术在提取显示器屏面上的目标物时存在提取目标物图像失真的技术问题，达到提高目标物图像保真度的技术效果。

由于上述实施例中通过屏幕截图的方式，在获取第一图像的同时获取第二图像，使得获得第二图像与第一图像中除目标物图像以外的背景图像完全相同，进而在进行图像差分的时候，能够去除与第一图像中一致的背景图像，从而提高提取的目标物图像的准确度。

在上述实施例中，通过对邻域差分处理获得的差分图像，进行进一步的种子填充和膨胀腐蚀处理，完善目标物所在区域的图像，并连接目标物图像中断裂的像素点，获得保真度更高的目标物图像。

实施例二

请参考图6，本申请实施例还提供一种电子设备，包含图像采集单元和显示单元，所述电子设备包括：

第一图像获取单元201，用于在第一时刻，当所述显示单元上放置有目标物时，通过所述图像采集单元获得第一图像，所述第一图像中包括所述显示单元的第一显示内容对应的第一显示内容图像和所述目标物的目标物图像；

第二图像获取单元202，用于在所述第一时刻，通过所述显示单元获取只包含所述第一显示内容的第二图像，其中所述第一图像与所述第二图像的像素点个数相同；

第一像素获取单元203，用于依次取i从1至N，获取所述第一图像中第i个像素点对应的第一像素值，及所述第二图像中对应的所述第i个像素点和所述第i个像素点的预设相邻像素点对应的J个第二像素值，其中1≤i≤N且i为整数，N为所述第一图像的像素个数，J为大于等于2的整数；

差值获取单元204，用于依次取i从1至N，获取所述第i个像素点对应的所述第一像素值与J个所述第二像素值的最小差值；

第一图像生成单元205，用于当i为N时，获得N个所述最小差值，将N个所述最小差值中第i个最小差值作为对应的所述第i个像素点的第三像素值，生成第三图像，使得所述电子设备能够基于所述第三图像获取所述目标物图像。

为了突出目标物的特征，对所述第三图像进行二值化处理，所述电子设备具体还提供：

第二像素获取单元，用于获取所述第三图像中像素值小于等于预设门限值的第一像素点集，及所述第三图像中除所述第一像素点集以外的第二像素点集；

第二图像生成单元，用于将所述第一像素点集中所述包括的像素点的像素值重置为第四像素值，将所述第二像素点集中所包括的像素点的像素值重置为第五像素值，生成只包含所述目标物图像的第四图像，其中，所述第四像素值小于等于所述第一像素点集中的最小像素值，所述第五像素值大于等于所述第二像素点集中的最大像素值。

在具体实施过程中，为了使得获得的目标物图像的边界更完整，所述电子设备具体还提供：

种子填充单元，用于对所述第四图像进行种子图填充处理，将像素值为第五像素值的像素点填充到第一填充像素点所在的区域，获得包含所述目标物的边界图像的第五图像，其中，所述第一填充像素点为与种子像素点相邻的预设区域内的像素点，所述种子像素点为所述第四图像中像素值为第五像素值的像素点。

为了连接目标物图像中不连续的像素点，所述电子设备具体还提供：

膨胀腐蚀单元，用于对所述第五图像进行膨胀腐蚀处理，将第一断裂像素点的像素值设置为第五像素值，获得包含所述目标物的内部图像的第六图像，其中，所述第一断裂像素点与亮点之间的距离最大不超过预设数目的像素点，所述亮点为像素值为第五像素值的像素点；

所述膨胀腐蚀单元，还用于将所述第六图像作为所述目标物图像。

在具体实施过程中，为了在获取第一图像的同时获取第二图像，保证第一图像中的背景物图像与第二图像一致，所述第二图像获取单元202具体用于：

在所述第一时刻，获取所述显示单元的屏幕截图，并将所述屏幕截图作为所述第二图像。

由于本实施例中的电子设备为与方法对应的虚拟装置，所以，其具体的工作过程就不再进行具体的描述了。

通过本申请实施例中的一个或多个技术方案，可以实现如下一个或多个技术效果：

1、本申请在提取显示器屏面上目标物的目标物图像时，通过将被提取的第一图像与表示目标物背景的第二图像进行邻域差分处理，即获得第二图像中预设区域范围内与第一图像指定像素点差值最小的相似像素点，并从第一图像中减去相似像素点，避免直接将第一图像和第二图像的像素按对应的坐标位置一一相减，出现实际相减的两个像素并不对应导致目标物图像失真，使得从第一图像中去除背景图像的准确性，从而获得准确的目标物差分图像，解决了现有技术在提取显示器屏面上的目标物时存在提取目标物图像失真的技术问题，达到提高目标物图像保真度的技术效果。

2、由于本申请通过屏幕截图的方式，在获取第一图像的同时获取第二图像，使得获得第二图像与第一图像中除目标物图像以外的背景图像完全相同，进而在进行图像差分的时候，能够去除与第一图像中一致的背景图像，从而提高提取的目标物图像的准确度。

3、在本申请中，通过对邻域差分处理获得的差分图像，进行进一步的种子填充和膨胀腐蚀处理，完善目标物所在区域的图像，并连接目标物图像中断裂的像素点，获得保真度更高的目标物图像。

本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质（包括但不限于磁盘存储器、CD-ROM、光学存储器等）上实施的计算机程序产品的形式。

本发明是参照根据本发明实施例的方法、设备（系统）、和计算机程序产品的流程图和／或方框图来描述的。应理解可由计算机程序指令实现流程图和／或方框图中的每一流程和／或方框、以及流程图和／或方框图中的流程和／或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能的步骤。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (10)

1.一种图像处理的方法，应用于一电子设备，所述电子设备包含图像采集单元和显示单元，其特征在于，所述方法包括：

在第一时刻，当所述显示单元上放置有目标物时，通过所述图像采集单元获得第一图像，所述第一图像中包括所述显示单元的第一显示内容对应的第一显示内容图像和所述目标物的目标物图像；

在所述第一时刻，通过所述显示单元获取只包含所述第一显示内容的第二图像，其中所述第一图像与所述第二图像的像素点个数相同；

依次取i从1至N，获取所述第一图像中第i个像素点对应的第一像素值，及所述第二图像中对应的所述第i个像素点和所述第i个像素点的预设相邻像素点对应的J个第二像素值，其中1≤i≤N且i为整数，N为所述第一图像的像素个数，J为大于等于2的整数；

依次取i从1至N，获取所述第i个像素点对应的所述第一像素值与J个所述第二像素值的最小差值；

当i为N时，获得N个所述最小差值，将N个所述最小差值中第i个最小差值作为对应的所述第i个像素点的第三像素值，生成第三图像，使得所述电子设备能够基于所述第三图像获取所述目标物图像。

2.如权利要求1所述的方法，其特征在于，在所述生成第三图像之后，所述方法具体包括：

获取所述第三图像中像素值小于等于预设门限值的第一像素点集，及所述第三图像中除所述第一像素点集以外的第二像素点集；

将所述第一像素点集中所述包括的像素点的像素值重置为第四像素值，将所述第二像素点集中所包括的像素点的像素值重置为第五像素值，生成只包含所述目标物图像的第四图像，其中，所述第四像素值小于等于所述第一像素点集中的最小像素值，所述第五像素值大于等于所述第二像素点集中的最大像素值。

3.如权利要求2所述的方法，其特征在于，在所述生成只包含所述目标物的第四图像之后，所述方法具体包括：

通过对所述第四图像进行种子图填充处理，将像素值为第五像素值的像素点填充到第一填充像素点所在的区域，获得包含所述目标物的边界图像的第五图像，其中，所述第一填充像素点为与种子像素点相邻的预设区域内的像素点，所述种子像素点为所述第四图像中像素值为第五像素值的像素点。

4.如权利要求3所述的方法，其特征在于，在所述获得所述目标物所在区域的像素值一致的第五图像之后，所述方法具体包括：

通过对所述第五图像进行膨胀腐蚀处理，将第一断裂像素点的像素值设置为第五像素值，获得包含所述目标物的内部图像的第六图像，其中，所述第一断裂像素点与亮点之间的距离最大不超过预设数目的像素点，所述亮点为像素值为第五像素值的像素点；

将所述第六图像作为所述目标物图像。

5.如权利要求1～4中任一权项所述的方法，其特征在于，所述通过所述显示单元获取只包含所述第一显示内容的第二图像，具体包括：

在所述第一时刻，获取所述显示单元的屏幕截图，并将所述屏幕截图作为所述第二图像。

6.一种电子设备，包含图像采集单元和显示单元，其特征在于，所述电子设备包括：

第一图像获取单元，用于在第一时刻，当所述显示单元上放置有目标物时，通过所述图像采集单元获得第一图像，所述第一图像中包括所述显示单元的第一显示内容对应的第一显示内容图像和所述目标物的目标物图像；

第二图像获取单元，用于在所述第一时刻，通过所述显示单元获取只包含所述第一显示内容的第二图像，其中所述第一图像与所述第二图像的像素点个数相同；

第一像素获取单元，用于依次取i从1至N，获取所述第一图像中第i个像素点对应的第一像素值，及所述第二图像中对应的所述第i个像素点和所述第i个像素点的预设相邻像素点对应的J个第二像素值，其中1≤i≤N且i为整数，N为所述第一图像的像素个数，J为大于等于2的整数；

差值获取单元，用于依次取i从1至N，获取所述第i个像素点对应的所述第一像素值与J个所述第二像素值的最小差值；

第一图像生成单元，用于当i为N时，获得N个所述最小差值，将N个所述最小差值中第i个最小差值作为对应的所述第i个像素点的第三像素值，生成第三图像，使得所述电子设备能够基于所述第三图像获取所述目标物图像。

7.如权利要求6所述的电子设备，其特征在于，所述电子设备具体包括：

第二像素获取单元，用于获取所述第三图像中像素值小于等于预设门限值的第一像素点集，及所述第三图像中除所述第一像素点集以外的第二像素点集；

第二图像生成单元，用于将所述第一像素点集中所述包括的像素点的像素值重置为第四像素值，将所述第二像素点集中所包括的像素点的像素值重置为第五像素值，生成只包含所述目标物图像的第四图像，其中，所述第四像素值小于等于所述第一像素点集中的最小像素值，所述第五像素值大于等于所述第二像素点集中的最大像素值。

8.如权利要求7所述的电子设备，其特征在于，所述电子设备具体包括：

种子填充单元，用于对所述第四图像进行种子图填充处理，将像素值为第五像素值的像素点填充到第一填充像素点所在的区域，获得包含所述目标物的边界图像的第五图像，其中，所述第一填充像素点为与种子像素点相邻的预设区域内的像素点，所述种子像素点为所述第四图像中像素值为第五像素值的像素点。

9.如权利要求8所述的电子设备，其特征在于，所述电子设备具体包括：

膨胀腐蚀单元，用于对所述第五图像进行膨胀腐蚀处理，将第一断裂像素点的像素值设置为第五像素值，获得包含所述目标物的内部图像的第六图像，其中，所述第一断裂像素点与亮点之间的距离最大不超过预设数目的像素点，所述亮点为像素值为第五像素值的像素点；

所述膨胀腐蚀单元，还用于将所述第六图像作为所述目标物图像。

10.如权利要求6～9中任一权项所述的电子设备，其特征在于，所述第二图像获取单元具体用于：

在所述第一时刻，获取所述显示单元的屏幕截图，并将所述屏幕截图作为所述第二图像。