CN110879948B - 图像处理方法、装置及存储介质 - Google Patents

Abstract

本申请实施例提供一种图像处理方法、装置及存储介质，该方法包括：通过根据当前帧图像、背景图像中对应像素点的像素值以及各像素点对应的前景判断阈值，确定当前帧图像对应的像素级二值图；进一步地，根据当前帧图像对应的像素级二值图，确定当前帧图像对应的区域级二值图；进一步地，通过结合前一帧图像对应的像素级二值图、当前帧图像对应的像素级二值图和当前帧图像对应的区域级二值图，更新各像素点对应的前景判断阈值。本申请实施例提供的方法能够实时更新前景判断阈值，并根据更新的前景判断阈值区分视频帧中的运动前景和背景，从而一直保持前景目标检测的准确率。

Description

图像处理方法、装置及存储介质

技术领域

本申请涉及图像处理技术领域，尤其涉及一种图像处理方法、装置及存储介质。

背景技术

通常情况下，在视频监控中，需要识别出各视频帧图像中的运动前景(或简称为前景)和背景。

相关技术中，通过根据连续视频帧图像确定背景图像。进一步地，通过当前帧图像与背景图像中对应像素点的像素值之间差值的绝对值，以及预设阈值，判断当前帧图像中对应像素点是前景像素点还是背景像素点。若当前帧图像与背景图像中对应像素点的像素值之间差值的绝对值大于预设阈值，则确定当前帧图像中对应像素点为前景像素点；若当前帧图像与背景图像中对应像素点的像素值之间差值的绝对值不大于预设阈值，则确定当前帧图像中对应像素点为背景像素点。

但相关技术仅可适用于背景相对稳定的情况，而对于背景复杂的情况(例如树叶在风的作用下摆动等)，相关技术可能无法准确区分运动前景和背景，误检率较高。

发明内容

本申请实施例提供一种图像处理方法、装置及存储介质，解决了相关技术中无法准确区分运动前景和背景，误检率较高的技术问题。

第一方面，本申请实施例提供一种图像处理方法，包括：

根据当前帧图像、背景图像中对应像素点的像素值以及各像素点对应的前景判断阈值，确定当前帧图像对应的像素级二值图；

根据该当前帧图像对应的像素级二值图，确定该当前帧图像对应的区域级二值图；

根据前一帧图像对应的像素级二值图、该当前帧图像对应的像素级二值图和该当前帧图像对应的区域级二值图，更新各像素点对应的前景判断阈值。

第一方面提供的图像处理方法中，通过根据当前帧图像、背景图像中对应像素点的像素值以及各像素点对应的前景判断阈值，确定当前帧图像对应的像素级二值图；进一步地，根据当前帧图像对应的像素级二值图，确定当前帧图像对应的区域级二值图；进一步地，通过结合前一帧图像对应的像素级二值图、当前帧图像对应的像素级二值图和当前帧图像对应的区域级二值图，更新各像素点对应的前景判断阈值，以便于在下一帧图像检测中可以准确地区分运动前景和背景，从而提高了检测准确率。

在一种可能的实现方式中，该根据该当前帧图像对应的像素级二值图，确定该当前帧图像对应的区域级二值图，包括：

对该当前帧图像对应的像素级二值图进行宏块划分，得到宏块级二值图；其中，该宏块级二值图中任一宏块区域对应的数值为1或0；

根据该宏块级二值图确定该当前帧图像对应的区域级二值图；其中，该区域级二值图中数值全为0，或者该区域级二值图中包括至少一个第一多边形框，该第一多边形框内区域对应的数值为1，该第一多边形框外区域对应的数值为0。

在一种可能的实现方式中，该对该当前帧图像对应的像素级二值图进行宏块划分，得到宏块级二值图，包括：

将该当前帧图像对应的像素级二值图划分为多个大小相同且互不重叠的宏块区域；

针对各该宏块区域，根据该宏块区域中前景像素点的个数，确定该宏块区域对应的数值；其中，若该宏块区域中前景像素点的个数大于第一预设数值，则该宏块区域对应的数值为1；若该宏块区域中前景像素点的个数不大于该第一预设数值，则该宏块区域对应的数值为0。

在一种可能的实现方式中，该根据该宏块级二值图确定该当前帧图像对应的区域级二值图，包括：

分别将该宏块级二值图中数值为1所对应的连通的宏块区域用第二多边形框围起来；

将各该第二多边形框进行放大处理，得到该当前帧图像对应的区域级二值图；其中，该第二多边形框放大处理后得到对应的该第一多边形框，该第一多边形框外区域对应的数值为0。

在一种可能的实现方式中，该根据前一帧图像对应的像素级二值图、该当前帧图像对应的像素级二值图和该当前帧图像对应的区域级二值图，更新各像素点对应的前景判断阈值，包括：

针对各该像素点，若该像素点在该当前帧图像对应的区域级二值图中的数值为0，且该像素点在该前一帧图像对应的像素级二值图和该当前帧图像对应的像素级二值图中的数值不同，则提高该像素点对应的前景判断阈值，从而可以避免下一帧图像中将该像素点误检为前景像素点。

在一种可能的实现方式中，该根据前一帧图像对应的像素级二值图、该当前帧图像对应的像素级二值图和该当前帧图像对应的区域级二值图，更新各像素点对应的前景判断阈值，还包括：

若该像素点在该当前帧图像对应的区域级二值图中的数值为0，且该像素点在该前一帧图像对应的像素级二值图和该当前帧图像对应的像素级二值图中的数值相同，则降低该像素点对应的前景判断阈值；或者，

若该像素点在该当前帧图像对应的区域级二值图中的数值为1，且该像素点在该前一帧图像对应的像素级二值图和该当前帧图像对应的像素级二值图中的数值不同，则降低该像素点对应的前景判断阈值；或者，

若该像素点在该当前帧图像对应的区域级二值图中的数值为1，且该像素点在该前一帧图像对应的像素级二值图和该当前帧图像对应的像素级二值图中的数值相同，则降低该像素点对应的前景判断阈值。

本实现方式中，可以获知该像素点不属于背景复杂的情况，从而通过降低该像素点对应的前景判断阈值，以有效地获取下一帧图像中的前景像素点和背景像素点。

在一种可能的实现方式中，该当前帧图像对应的像素级二值图由前景像素点和背景像素点组成，该根据当前帧图像、背景图像中对应像素点的像素值以及各像素点对应的前景判断阈值，确定当前帧图像对应的像素级二值图，包括：

判断该当前帧图像中第n个像素点的像素值与该背景图像中对应像素点的像素值之间差值的绝对值，是否大于该第n个像素点对应的前景判断阈值；

若该绝对值大于该第n个像素点对应的前景判断阈值，则确定该第n个像素点为前景像素点；或者，

若该绝对值不大于该第n个像素点对应的前景判断阈值，则确定该第n个像素点为背景像素点；

其中，该n为取遍不大于该当前帧图像中像素点的总数的正整数；该当前帧图像对应的像素级二值图中的每个该前景像素点对应的数值为1，每个该背景像素点对应的数值为0。

第二方面，本申请实施例提供一种图像处理装置，包括：

第一确定模块，用于根据当前帧图像、背景图像中对应像素点的像素值以及各像素点对应的前景判断阈值，确定当前帧图像对应的像素级二值图；

第二确定模块，用于根据该当前帧图像对应的像素级二值图，确定该当前帧图像对应的区域级二值图；

更新模块，用于根据前一帧图像对应的像素级二值图、该当前帧图像对应的像素级二值图和该当前帧图像对应的区域级二值图，更新各像素点对应的前景判断阈值。

在一种可能的实现方式中，该第二确定模块，包括：

划分单元，用于对该当前帧图像对应的像素级二值图进行宏块划分，得到宏块级二值图；其中，该宏块级二值图中任一宏块区域对应的数值为1或0；

确定单元，用于根据该宏块级二值图确定该当前帧图像对应的区域级二值图；其中，该区域级二值图中数值全为0，或者该区域级二值图中包括至少一个第一多边形框，该第一多边形框内区域对应的数值为1，该第一多边形框外区域对应的数值为0。

在一种可能的实现方式中，该划分单元具体用于：

将该当前帧图像对应的像素级二值图划分为多个大小相同且互不重叠的宏块区域；

针对各该宏块区域，根据该宏块区域中前景像素点的个数，确定该宏块区域对应的数值；其中，若该宏块区域中前景像素点的个数大于第一预设数值，则该宏块区域对应的数值为1；若该宏块区域中前景像素点的个数不大于该第一预设数值，则该宏块区域对应的数值为0。

在一种可能的实现方式中，该确定单元具体用于：

分别将该宏块级二值图中数值为1所对应的连通的宏块区域用第二多边形框围起来；

将各该第二多边形框进行放大处理，得到该当前帧图像对应的区域级二值图；其中，该第二多边形框放大处理后得到对应的该第一多边形框，该第一多边形框外区域对应的数值为0。

在一种可能的实现方式中，该更新模块具体用于：

针对各该像素点，若该像素点在该当前帧图像对应的区域级二值图中的数值为0，且该像素点在该前一帧图像对应的像素级二值图和该当前帧图像对应的像素级二值图中的数值不同，则提高该像素点对应的前景判断阈值。

在一种可能的实现方式中，该更新模块还用于：

若该像素点在该当前帧图像对应的区域级二值图中的数值为0，且该像素点在该前一帧图像对应的像素级二值图和该当前帧图像对应的像素级二值图中的数值相同，则降低该像素点对应的前景判断阈值；或者，

若该像素点在该当前帧图像对应的区域级二值图中的数值为1，且该像素点在该前一帧图像对应的像素级二值图和该当前帧图像对应的像素级二值图中的数值不同，则降低该像素点对应的前景判断阈值；或者，

若该像素点在该当前帧图像对应的区域级二值图中的数值为1，且该像素点在该前一帧图像对应的像素级二值图和该当前帧图像对应的像素级二值图中的数值相同，则降低该像素点对应的前景判断阈值。

在一种可能的实现方式中，该当前帧图像对应的像素级二值图由前景像素点和背景像素点组成，该第一确定模块具体用于：

判断该当前帧图像中第n个像素点的像素值与该背景图像中对应像素点的像素值之间差值的绝对值，是否大于该第n个像素点对应的前景判断阈值；

若该绝对值大于该第n个像素点对应的前景判断阈值，则确定该第n个像素点为前景像素点；或者，

若该绝对不大于该第n个像素点对应的前景判断阈值，则确定该第n个像素点为背景像素点；

其中，该n为取遍不大于该当前帧图像中像素点的总数的正整数；该当前帧图像对应的像素级二值图中的每个该前景像素点对应的数值为1，每个该背景像素点对应的数值为0。

第三方面，本申请实施例提供一种图像处理装置，包括：处理器和存储器；

其中，该存储器，用于存储程序指令；

该处理器，用于调用并执行该存储器中存储的程序指令，当该处理器执行该存储器存储的程序指令时，该图像处理装置用于执行上述第一方面的任意实现方式所述的方法。

第四方面，本申请实施例提供一种芯片系统，该芯片系统包括处理器，还可以包括存储器，用于实现上述第一方面的任意实现方式所述的方法。该芯片系统可以由芯片构成，也可以包含芯片和其他分立器件。

第五方面，本申请实施例提供一种程序，该程序在被处理器执行时用于执行上述第一方面的任意实现方式所述的方法。

第六方面，本申请实施例提供一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述第一方面的任意实现方式所述的方法。

第七方面，本申请实施例提供一种计算机可读存储介质，该计算机可读存储介质中存储有指令，当该指令在计算机上运行时，使得计算机执行上述第一方面的任意实现方式所述的方法。

附图说明

图1为本申请一实施例提供的图像处理方法流程示意图一；

图2为本申请一实施例提供的图像处理方法流程示意图二；

图3为本申请一实施例提供的图像处理装置的结构示意图；

图4为本申请另一实施例提供的图像处理装置的结构示意图。

具体实施方式

首先，对本申请实施例所涉及的应用场景和部分词汇进行解释说明。

本申请实施例提供图像处理方法、装置及存储介质可以应用于视频监控应用场景中，可以准确地识别出各视频帧图像中的运动前景(或简称为前景)和背景。

本申请实施例中涉及的前一帧图像为当前帧图像的前一帧图像；类似地，前两帧图像为当前帧图像的前两帧图像；类似地，下一帧图像为当前帧图像的下一帧图像。

本申请实施例中涉及的像素值可以包括但不限于：灰度值、明亮度色度浓度(Luminance Chrominance Chroma，YUV)值、红绿蓝(Red Green Blue，RGB)通道的值或者其他用于描述图像像素点的值。

本申请实施例中涉及的像素级二值图中包括前景像素点和背景像素点。示例性地，像素级二值图中每个前景像素点对应的数值为1，每个背景像素点对应的数值为0。

本申请实施例中涉及的区域级二值图中数值全为0，或者区域级二值图中包括至少一个第一多边形框，其中，第一多边形框内区域(代表前景区域)对应的数值为1，第一多边形框外区域(代表背景区域)对应的数值为0。

本申请实施例中涉及的任一像素点对应的前景判断阈值用于判断该像素点是前景像素点还是背景像素点。

本申请实施例中涉及的第一多边形框和/或第二多边形框可以为矩形框，当然还可以为其它类型的多边形框，本申请实施例中对此并不作限制。

本申请实施例中，执行图像处理方法的装置可以是终端，也可以是终端中的图像处理装置。示例性地，终端中图像处理装置可以是芯片系统、电路或者模块等，本申请不作限制。

本申请涉及的终端可以包括但不限于以下任一项：手机、电脑或视频监控等具有图像处理功能的设备，还可以是其它具有图像处理功能的设备。

本申请所涉及的终端可以包括硬件层、运行在硬件层之上的操作系统层，以及运行在操作系统层上的应用层。该硬件层包括中央处理器(dentral processing unit，CPU)、内存管理单元(memory management unit，MMU)和内存(也称为主存)等硬件。该操作系统可以是任意一种或多种通过进程(process)实现业务处理的计算机操作系统，例如，Linux操作系统、Unix操作系统、Android操作系统、iOS操作系统或windows操作系统等。该应用层包含浏览器、通讯录、文字处理软件、即时通信软件等应用。

本申请实施例中的编号“第一”以及“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序，不应对本申请实施例构成任何限定。

本申请实施例中的“至少一个”是指一个或者多个，“多个”是指两个或两个以上。“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B的情况，其中A,B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一项(个)”或其类似表达，是指的这些项中的任意组合，包括单项(个)或复数项(个)的任意组合。例如，a,b,或c中的至少一项(个)，可以表示：a,b,c,a-b,a-c,b-c,或a-b-c，其中a,b,c可以是单个，也可以是多个。

本申请实施例中提供的图像处理方法、装置及存储介质中，通过结合前一帧图像对应的像素级二值图、当前帧图像对应的像素级二值图和当前帧图像对应的区域级二值图，更新各像素点对应的前景判断阈值，以便于在下一帧图像检测中可以准确地区分运动前景和背景，从而避免了误检率较高的问题。

下面以具体地实施例对本申请的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例中不再赘述。

图1为本申请一实施例提供的图像处理方法流程示意图一，图2为本申请一实施例提供的图像处理方法流程示意图二。结合图1和图2所示，本申请实施例的方法可以包括：

步骤S101、根据当前帧图像、背景图像中对应像素点的像素值以及各像素点对应的前景判断阈值，确定当前帧图像对应的像素级二值图。

本申请实例中涉及的背景图像可以为根据历史的连续视频帧图像所确定的。具体地确定背景图像的方式可以参考相关技术中的确定方式，本申请实施例中对此并不作限制。

本实施例中的像素级二值图由前景像素点和背景像素点组成，所有前景像素点具有相同的像素值，所有背景像素点具有相同的像素值，前景像素点的值与背景像素点的值不同。

本申请实施例中每个像素点分别对应一个前景判断阈值，用于判断该像素点是前景像素点还是背景像素点。

需要说明的是，本申请实施例中每个像素点对应的前景判断阈值为实时更新的。示例性地，步骤S101中涉及的各像素点对应的前景判断阈值是根据前两帧图像对应的像素级二值图、前一帧图像对应的像素级二值图和前一帧图像对应的区域级二值图更新后得到的。具体的更新方式可以参考下述步骤S103中的相关内容。

本步骤中，根据当前帧图像中各像素点的像素值与背景图像中对应像素点的像素值之间差值的绝对值，分别与各像素点对应的前景判断阈值之间的大小关系，确定当前帧图像对应的像素级二值图；其中，当前帧图像对应的像素级二值图中每个前景像素点对应的数值为1，每个背景像素点对应的数值为0。

示例性地，判断该当前帧图像中第n个像素点的像素值与背景图像中对应像素点的像素值之间差值的绝对值，是否大于该第n个像素点对应的前景判断阈值；其中，该n为取遍不大于该当前帧图像中像素点的总数的正整数。1)若该绝对值大于该第n个像素点对应的前景判断阈值，则确定该第n个像素点为前景像素点，从而确定该当前帧图像对应的像素级二值图中该第n个像素点对应的数值为1；2)若该绝对值不大于该第n个像素点对应的前景判断阈值，则确定该第n个像素点为背景像素点，从而确定该当前帧图像对应的像素级二值图中该第n个像素点对应的数值为0。

步骤S102、根据当前帧图像对应的像素级二值图，确定当前帧图像对应的区域级二值图。

本步骤中，根据当前帧图像对应的像素级二值图，采用后处理方式确定当前帧图像对应的区域级二值图；其中，区域级二值图中数值全为0(代表全为背景区域)，或者区域级二值图中包括至少一个第一多边形框，第一多边形框内区域(代表前景区域)对应的数值为1，第一多边形框外区域(代表背景区域)对应的数值为0。

本申请下述实例对“根据当前帧图像对应的像素级二值图，确定当前帧图像对应的区域级二值图”的可实现方式进行介绍：

示例性地，对当前帧图像对应的像素级二值图进行宏块划分，得到宏块级二值图；其中，宏块级二值图中任一宏块区域对应的数值为1或0；

根据宏块级二值图确定当前帧图像对应的区域级二值图；其中，区域级二值图中数值全为0，或者区域级二值图中包括至少一个第一多边形框，第一多边形框内区域对应的数值为1，第一多边形框外区域对应的数值为0。

本实施例中，通过将当前帧图像对应的像素级二值图划分为多个(例如16*16个)大小相同且互不重叠的宏块区域。进一步地，针对各宏块区域，根据该宏块区域中前景像素点的个数，确定该宏块区域对应的数值，从而得到宏块级二值图；示例性地，若该宏块区域中前景像素点的个数大于第一预设数值(例如64)，则确定该宏块区域对应的数值为1；若该宏块区域中前景像素点的个数不大于第一预设数值，则确定该宏块区域对应的数值为0。

进一步地，可以采用轮廓检测方式分别将宏块级二值图中数值为1所对应的连通的宏块区域用第二多边形框围起来。需要说明的是，若宏块级二值图中数值为1的部分宏块区域是零散分布的，则会形成多个第二多边形框；若宏块级二值图中数值为1的各宏块区域是集中相邻分布的以形成一个连通区域，则会形成一个第二多边形框；若宏块级二值图中数值全为0，则不会形成第二多边形框。

若宏块级二值图中数值不全为0(即会形成至少一个第二多边形框)，考虑到上述当前帧图像对应的像素级二值图转换为宏块级二值图的过程相当于进行了缩小处理(例如缩小了16倍)，本实施例中需要将各第二多边形框(即数值为1所对应的各宏块区域)进行放大处理(例如放大16倍)，得到当前帧图像对应的区域级二值图(与当前帧图像对应的像素级二值图大小相同)；其中，第二多边形框放大处理后得到对应的第一多边形框，第一多边形框外区域对应的数值为0。

需要说明的是，若宏块级二值图中数值全为0(即不会形成第二多边形框)，则可以直接确定当前帧图像对应的区域级二值图中数值全为0(代表背景区域)。

当然，根据当前帧图像对应的像素级二值图，还可通过其它方式确定当前帧图像对应的区域级二值图，本申请实施例中对此并不作限制。

步骤S103、根据前一帧图像对应的像素级二值图、当前帧图像对应的像素级二值图和当前帧图像对应的区域级二值图，更新各像素点对应的前景判断阈值。

本实施例中涉及的前一帧图像对应的像素级二值图为上一轮执行本申请实施例提供的图像处理方案时所确定的。示例性地，可以根据前一帧图像、背景图像中对应像素点的像素值以及各像素点对应的前景判断阈值，确定前一帧图像对应的像素级二值图。具体地，确定前一帧图像对应的像素级二值图的方式可以参考上述步骤S101中关于确定当前帧图像对应的像素级二值图的方式，此处不再赘述。

本步骤中，根据前一帧图像对应的像素级二值图、当前帧图像对应的像素级二值图和当前帧图像对应的区域级二值图，更新各像素点对应的前景判断阈值；其中，更新后的各像素点对应的前景判断阈值用于判断下一帧图像中对应像素点是前景像素点还是背景像素点，从而确定下一帧图像对应的像素级二值图。

可选地，针对各像素点，通过判断该像素点在当前帧图像对应的区域级二值图中的数值是否为0，以及该像素点在前一帧图像对应的像素级二值图和当前帧图像对应的像素级二值图中的数值是否不同，来更新该像素点对应的前景判断阈值。

示例性地，若该像素点在当前帧图像对应的区域级二值图中的数值为0(即该像素点属于当前帧图像的背景区域)，且该像素点在前一帧图像对应的像素级二值图和当前帧图像对应的像素级二值图中的数值不同(例如在前一帧图像中为前景像素点且在当前帧图像中为背景像素点，或者在前一帧图像中为背景像素点且在当前帧图像中为前景像素点)，则可以获知该像素点属于背景复杂的情况(例如树叶在风的作用下摆动等)，从而通过提高该像素点对应的前景判断阈值，以避免下一帧图像中将该像素点误检为前景像素点。

可选地，提高该像素点对应的前景判断阈值的可实现方式可以包括如下方式：该像素点更新后的前景判断阈值＝该像素点更新前的前景判断阈值*第二预设数值(例如0.9)+第三预设数值(例如25.5)；当然，还可通过其它方式提高该像素点对应的前景判断阈值，本申请实施例中对此并不作限制。其中，第二预设数值的取值范围为大于0且小于1的数值，第三预设数值的取值范围为大于0且小于255的数值。

又一示例性地，若该像素点在当前帧图像对应的区域级二值图中的数值为0(即该像素点属于当前帧图像的背景区域)，且该像素点在前一帧图像对应的像素级二值图和当前帧图像对应的像素级二值图中的数值相同(例如在前一帧图像和当前帧图像中均为前景像素点，或者在前一帧图像和当前帧图像中均为背景像素点)，则可以获知该像素点不属于背景复杂的情况，从而通过降低该像素点对应的前景判断阈值，以有效地获取下一帧图像中的前景像素点和背景像素点。

又一示例性地，若该像素点在当前帧图像对应的区域级二值图中的数值为1(即该像素点属于当前帧图像的前景区域)，且该像素点在前一帧图像对应的像素级二值图和当前帧图像对应的像素级二值图中的数值不同(例如在前一帧图像中为前景像素点且在当前帧图像中为背景像素点，或者在前一帧图像中为背景像素点且在当前帧图像中为前景像素点)，则可以获知该像素点不属于背景复杂的情况，从而通过降低该像素点对应的前景判断阈值，以有效地获取下一帧图像中的前景像素点和背景像素点。

又一示例性地，若该像素点在当前帧图像对应的区域级二值图中的数值为1(即该像素点属于当前帧图像的前景区域)，且该像素点在前一帧图像对应的像素级二值图和当前帧图像对应的像素级二值图中的数值相同(例如在前一帧图像和当前帧图像中均为前景像素点，或者在前一帧图像和当前帧图像中均为背景像素点)，则可以获知该像素点不属于背景复杂的情况，从而通过降低该像素点对应的前景判断阈值，以有效地获取下一帧图像中的前景像素点和背景像素点。

可选地，降低该像素点对应的前景判断阈值的可实现方式可以包括如下方式：该像素点更新后的前景判断阈值＝该像素点更新前的前景判断阈值*第四预设数值(例如0.99)+第五预设数值(例如0.25)；当然，还可通过其它方式提高该像素点对应的前景判断阈值，本申请实施例中对此并不作限制。其中，第四预设数值和第五预设数值的取值范围均为大于0且小于1的数值。需要说明的是，第四预设数值小于第二预设数值，第五预设数值小于第三预设数值。

本申请实施例中，通过根据当前帧图像、背景图像中对应像素点的像素值以及各像素点对应的前景判断阈值，确定当前帧图像对应的像素级二值图；进一步地，根据当前帧图像对应的像素级二值图，确定当前帧图像对应的区域级二值图；进一步地，通过结合前一帧图像对应的像素级二值图、当前帧图像对应的像素级二值图和当前帧图像对应的区域级二值图，更新各像素点对应的前景判断阈值，以便于在下一帧图像检测中可以准确地区分运动前景和背景，从而提高了检测准确率。

图3为本申请一实施例提供的图像处理装置的结构示意图。如图3所示，本实施例提供的图像处理装置30可以包括：第一确定模块301、第二确定模块302以及更新模块303。

第一确定模块301，用于根据当前帧图像、背景图像中对应像素点的像素值以及各像素点对应的前景判断阈值，确定当前帧图像对应的像素级二值图；

第二确定模块302，用于根据该当前帧图像对应的像素级二值图，确定该当前帧图像对应的区域级二值图；

更新模块303，用于根据前一帧图像对应的像素级二值图、该当前帧图像对应的像素级二值图和该当前帧图像对应的区域级二值图，更新各像素点对应的前景判断阈值。

在一种可能的实现方式中，该第二确定模块302，包括：

划分单元，用于对该当前帧图像对应的像素级二值图进行宏块划分，得到宏块级二值图；其中，该宏块级二值图中任一宏块区域对应的数值为1或0；

确定单元，用于根据该宏块级二值图确定该当前帧图像对应的区域级二值图；其中，该区域级二值图中数值全为0，或者该区域级二值图中包括至少一个第一多边形框，该第一多边形框内区域对应的数值为1，该第一多边形框外区域对应的数值为0。

在一种可能的实现方式中，该划分单元具体用于：

将该当前帧图像对应的像素级二值图划分为多个大小相同且互不重叠的宏块区域；

针对各该宏块区域，根据该宏块区域中前景像素点的个数，确定该宏块区域对应的数值；其中，若该宏块区域中前景像素点的个数大于第一预设数值，则该宏块区域对应的数值为1；若该宏块区域中前景像素点的个数不大于该第一预设数值，则该宏块区域对应的数值为0。

在一种可能的实现方式中，该确定单元具体用于：

分别将该宏块级二值图中数值为1所对应的连通的宏块区域用第二多边形框围起来；

将各该第二多边形框进行放大处理，得到该当前帧图像对应的区域级二值图；其中，该第二多边形框放大处理后得到对应的该第一多边形框，该第一多边形框外区域对应的数值为0。

在一种可能的实现方式中，该更新模块303具体用于：

针对各该像素点，若该像素点在该当前帧图像对应的区域级二值图中的数值为0，且该像素点在该前一帧图像对应的像素级二值图和该当前帧图像对应的像素级二值图中的数值不同，则提高该像素点对应的前景判断阈值。

在一种可能的实现方式中，该更新模块303还用于：

若该像素点在该当前帧图像对应的区域级二值图中的数值为0，且该像素点在该前一帧图像对应的像素级二值图和该当前帧图像对应的像素级二值图中的数值相同，则降低该像素点对应的前景判断阈值；或者，

若该像素点在该当前帧图像对应的区域级二值图中的数值为1，且该像素点在该前一帧图像对应的像素级二值图和该当前帧图像对应的像素级二值图中的数值不同，则降低该像素点对应的前景判断阈值；或者，

若该像素点在该当前帧图像对应的区域级二值图中的数值为1，且该像素点在该前一帧图像对应的像素级二值图和该当前帧图像对应的像素级二值图中的数值相同，则降低该像素点对应的前景判断阈值。

在一种可能的实现方式中，该当前帧图像对应的像素级二值图由前景像素点和背景像素点组成，该第一确定模块301具体用于：

判断该当前帧图像中第n个像素点的像素值与该背景图像中对应像素点的像素值之间差值的绝对值，是否大于该第n个像素点对应的前景判断阈值；

若该绝对值大于该第n个像素点对应的前景判断阈值，则确定该第n个像素点为前景像素点；或者，

若该绝对不大于该第n个像素点对应的前景判断阈值，则确定该第n个像素点为背景像素点；

其中，该n为取遍不大于该当前帧图像中像素点的总数的正整数；该当前帧图像对应的像素级二值图中的每个该前景像素点对应的数值为1，每个该背景像素点对应的数值为0。

本申请实施例提供的图像处理装置，可以用于执行本申请上述图像处理方法实施例中的技术方案，其实现原理和技术效果类似，此处不再赘述。

图4为本申请另一实施例提供的图像处理装置的结构示意图。如图4所示，本实施例提供的图像处理装置40可以包括：处理器401和存储器402；

其中，该存储器401，用于存储程序指令；

该处理器402，用于调用并执行该存储器401中存储的程序指令，当该处理器402执行该存储器401存储的程序指令时，该图像处理装置用于执行本申请上述图像处理方法实施例中的技术方案，其实现原理和技术效果类似，此处不再赘述。

可以理解的是，图4仅仅示出了图像处理装置的简化设计。在其他的实施方式中，图像处理装置还可以包含任意数量的收发器、处理器、存储器和/或通信单元等，本申请实施例中对此并不作限制。

本申请实施例还提供一种芯片系统，该芯片系统包括处理器，还可以包括存储器，用于实现本申请上述图像处理方法实施例中的技术方案，其实现原理和技术效果类似，此处不再赘述。该芯片系统可以由芯片构成，也可以包含芯片和其他分立器件。

本申请实施例还提供一种程序，该程序在被处理器执行时用于执行本申请上述图像处理方法实施例中的技术方案，其实现原理和技术效果类似，此处不再赘述。

本申请实施例还提供一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行本申请上述图像处理方法实施例中的技术方案，其实现原理和技术效果类似，此处不再赘述。

本申请实施例还提供一种计算机可读存储介质，该计算机可读存储介质中存储有指令，当该指令在计算机上运行时，使得计算机执行本申请上述图像处理方法实施例中的技术方案。

本申请实施例中涉及的处理器可以是通用处理器、数字信号处理器、专用集成电路、现场可编程门阵列或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件，可以实现或者执行本申请实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者任何常规的处理器等。结合本申请实施例所公开的方法的步骤可以直接体现为硬件处理器执行完成，或者用处理器中的硬件及软件模块组合执行完成。

本申请实施例中涉及的存储器可以是非易失性存储器，比如硬盘(hard diskdrive，HDD)或固态硬盘(solid-state drive，SSD)等，还可以是易失性存储器(volatilememory)，例如随机存取存储器(random-access memory，RAM)。存储器是能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质，但不限于此。

在本申请所提供的几个实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。

本领域普通技术人员可以理解，在本申请的各种实施例中，上述各过程的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本申请实施例的实施过程构成任何限定。

在上述各实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如，DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。

Claims (14)

1.一种图像处理方法，其特征在于，包括：

根据当前帧图像、背景图像中对应像素点的像素值以及各像素点对应的前景判断阈值，确定当前帧图像对应的像素级二值图；

根据所述当前帧图像对应的像素级二值图，确定所述当前帧图像对应的区域级二值图；

根据前一帧图像对应的像素级二值图、所述当前帧图像对应的像素级二值图和所述当前帧图像对应的区域级二值图，更新各像素点对应的前景判断阈值，包括：

针对各所述像素点，若所述像素点在所述当前帧图像对应的区域级二值图中的数值为0，且所述像素点在所述前一帧图像对应的像素级二值图和所述当前帧图像对应的像素级二值图中的数值不同，则提高所述像素点对应的前景判断阈值；

若所述像素点在所述当前帧图像对应的区域级二值图中的数值为0，且所述像素点在所述前一帧图像对应的像素级二值图和所述当前帧图像对应的像素级二值图中的数值相同，则降低所述像素点对应的前景判断阈值；或者，

若所述像素点在所述当前帧图像对应的区域级二值图中的数值为1，且所述像素点在所述前一帧图像对应的像素级二值图和所述当前帧图像对应的像素级二值图中的数值不同，则降低所述像素点对应的前景判断阈值；或者，

若所述像素点在所述当前帧图像对应的区域级二值图中的数值为1，且所述像素点在所述前一帧图像对应的像素级二值图和所述当前帧图像对应的像素级二值图中的数值相同，则降低所述像素点对应的前景判断阈值。

2.根据权利要求1所述的方法，其特征在于，所述根据所述当前帧图像对应的像素级二值图，确定所述当前帧图像对应的区域级二值图，包括：

对所述当前帧图像对应的像素级二值图进行宏块划分，得到宏块级二值图；其中，所述宏块级二值图中任一宏块区域对应的数值为1或0；

根据所述宏块级二值图确定所述当前帧图像对应的区域级二值图；其中，所述区域级二值图中数值全为0，或者所述区域级二值图中包括至少一个第一多边形框，所述第一多边形框内区域对应的数值为1，所述第一多边形框外区域对应的数值为0。

3.根据权利要求2所述的方法，其特征在于，所述对所述当前帧图像对应的像素级二值图进行宏块划分，得到宏块级二值图，包括：

将所述当前帧图像对应的像素级二值图划分为多个大小相同且互不重叠的宏块区域；

针对各所述宏块区域，根据所述宏块区域中前景像素点的个数，确定所述宏块区域对应的数值；其中，若所述宏块区域中前景像素点的个数大于第一预设数值，则所述宏块区域对应的数值为1；若所述宏块区域中前景像素点的个数不大于所述第一预设数值，则所述宏块区域对应的数值为0。

4.根据权利要求2所述的方法，其特征在于，所述根据所述宏块级二值图确定所述当前帧图像对应的区域级二值图，包括：

分别将所述宏块级二值图中数值为1所对应的连通的宏块区域用第二多边形框围起来；

将各所述第二多边形框进行放大处理，得到所述当前帧图像对应的区域级二值图；其中，所述第二多边形框放大处理后得到对应的所述第一多边形框，所述第一多边形框外区域对应的数值为0。

5.根据权利要求3所述的方法，其特征在于，所述根据所述宏块级二值图确定所述当前帧图像对应的区域级二值图，包括：

分别将所述宏块级二值图中数值为1所对应的连通的宏块区域用第二多边形框围起来；

将各所述第二多边形框进行放大处理，得到所述当前帧图像对应的区域级二值图；其中，所述第二多边形框放大处理后得到对应的所述第一多边形框，所述第一多边形框外区域对应的数值为0。

6.根据权利要求1-5中任一项所述的方法，其特征在于，所述当前帧图像对应的像素级二值图由前景像素点和背景像素点组成，所述根据当前帧图像、背景图像中对应像素点的像素值以及各像素点对应的前景判断阈值，确定当前帧图像对应的像素级二值图，包括：

判断所述当前帧图像中第n个像素点的像素值与所述背景图像中对应像素点的像素值之间差值的绝对值，是否大于所述第n个像素点对应的前景判断阈值；

若所述绝对值大于所述第n个像素点对应的前景判断阈值，则确定所述第n个像素点为前景像素点；或者，

若所述绝对值不大于所述第n个像素点对应的前景判断阈值，则确定所述第n个像素点为背景像素点；

其中，所述n为取遍不大于所述当前帧图像中像素点的总数的正整数；所述当前帧图像对应的像素级二值图中的每个所述前景像素点对应的数值为1，每个所述背景像素点对应的数值为0。

7.一种图像处理装置，其特征在于，包括：

第一确定模块，用于根据当前帧图像、背景图像中对应像素点的像素值以及各像素点对应的前景判断阈值，确定当前帧图像对应的像素级二值图；

第二确定模块，用于根据所述当前帧图像对应的像素级二值图，确定所述当前帧图像对应的区域级二值图；

更新模块，用于根据前一帧图像对应的像素级二值图、所述当前帧图像对应的像素级二值图和所述当前帧图像对应的区域级二值图，更新各像素点对应的前景判断阈值；

所述更新模块具体用于：针对各所述像素点，若所述像素点在所述当前帧图像对应的区域级二值图中的数值为0，且所述像素点在所述前一帧图像对应的像素级二值图和所述当前帧图像对应的像素级二值图中的数值不同，则提高所述像素点对应的前景判断阈值；

所述更新模块还用于：

若所述像素点在所述当前帧图像对应的区域级二值图中的数值为0，且所述像素点在所述前一帧图像对应的像素级二值图和所述当前帧图像对应的像素级二值图中的数值相同，则降低所述像素点对应的前景判断阈值；或者，

若所述像素点在所述当前帧图像对应的区域级二值图中的数值为1，且所述像素点在所述前一帧图像对应的像素级二值图和所述当前帧图像对应的像素级二值图中的数值不同，则降低所述像素点对应的前景判断阈值；或者，

若所述像素点在所述当前帧图像对应的区域级二值图中的数值为1，且所述像素点在所述前一帧图像对应的像素级二值图和所述当前帧图像对应的像素级二值图中的数值相同，则降低所述像素点对应的前景判断阈值。

8.根据权利要求7所述的装置，其特征在于，所述第二确定模块，包括：

划分单元，用于对所述当前帧图像对应的像素级二值图进行宏块划分，得到宏块级二值图；其中，所述宏块级二值图中任一宏块区域对应的数值为1或0；

确定单元，用于根据所述宏块级二值图确定所述当前帧图像对应的区域级二值图；其中，所述区域级二值图中数值全为0，或者所述区域级二值图中包括至少一个第一多边形框，所述第一多边形框内区域对应的数值为1，所述第一多边形框外区域对应的数值为0。

9.根据权利要求8所述的装置，其特征在于，所述划分单元具体用于：

将所述当前帧图像对应的像素级二值图划分为多个大小相同且互不重叠的宏块区域；

针对各所述宏块区域，根据所述宏块区域中前景像素点的个数，确定所述宏块区域对应的数值；其中，若所述宏块区域中前景像素点的个数大于第一预设数值，则所述宏块区域对应的数值为1；若所述宏块区域中前景像素点的个数不大于所述第一预设数值，则所述宏块区域对应的数值为0。

10.根据权利要求8所述的装置，其特征在于，所述确定单元具体用于：

分别将所述宏块级二值图中数值为1所对应的连通的宏块区域用第二多边形框围起来；

将各所述第二多边形框进行放大处理，得到所述当前帧图像对应的区域级二值图；其中，所述第二多边形框放大处理后得到对应的所述第一多边形框，所述第一多边形框外区域对应的数值为0。

11.根据权利要求9所述的装置，其特征在于，所述确定单元具体用于：

分别将所述宏块级二值图中数值为1所对应的连通的宏块区域用第二多边形框围起来；

将各所述第二多边形框进行放大处理，得到所述当前帧图像对应的区域级二值图；其中，所述第二多边形框放大处理后得到对应的所述第一多边形框，所述第一多边形框外区域对应的数值为0。

12.根据权利要求7-11中任一项所述的装置，其特征在于，所述当前帧图像对应的像素级二值图由前景像素点和背景像素点组成，所述第一确定模块具体用于：

判断所述当前帧图像中第n个像素点的像素值与所述背景图像中对应像素点的像素值之间差值的绝对值，是否大于所述第n个像素点对应的前景判断阈值；

若所述绝对值大于所述第n个像素点对应的前景判断阈值，则确定所述第n个像素点为前景像素点；或者，

若所述绝对不大于所述第n个像素点对应的前景判断阈值，则确定所述第n个像素点为背景像素点；

其中，所述n为取遍不大于所述当前帧图像中像素点的总数的正整数；所述当前帧图像对应的像素级二值图中的每个所述前景像素点对应的数值为1，每个所述背景像素点对应的数值为0。

13.一种图像处理装置，其特征在于，包括：处理器和存储器；

其中，所述存储器，用于存储程序指令；

所述处理器，用于调用并执行所述存储器中存储的程序指令，当所述处理器执行所述存储器存储的程序指令时，所述图像处理装置用于执行如权利要求1至6中任一项所述的方法。

14.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有指令，当所述指令在计算机上运行时，使得计算机执行如权利要求1至6中任一项所述的方法。

Images