CN104811631B - 一种图像处理方法及图像处理器 - Google Patents

一种图像处理方法及图像处理器 Download PDF

Info

Publication number
CN104811631B
CN104811631B CN201410040560.XA CN201410040560A CN104811631B CN 104811631 B CN104811631 B CN 104811631B CN 201410040560 A CN201410040560 A CN 201410040560A CN 104811631 B CN104811631 B CN 104811631B
Authority
CN
China
Prior art keywords
pixel
background
background area
area
zone
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410040560.XA
Other languages
English (en)
Other versions
CN104811631A (zh
Inventor
张德军
王田
刘波
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MIGU Culture Technology Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN201410040560.XA priority Critical patent/CN104811631B/zh
Publication of CN104811631A publication Critical patent/CN104811631A/zh
Application granted granted Critical
Publication of CN104811631B publication Critical patent/CN104811631B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Image Analysis (AREA)

Abstract

本发明提供了一种图像处理方法及图像处理器,涉及图像处理领域,算法简单且抠像效果受光照变化的影响较小,适用于图像的实时处理,所述方法包括:获取输入图像中每个像素点的亮度分量和色度分量;对所述输入图像的像素点的色度分量值进行统计,将出现最多的像素点对应的颜色确定为所述输入图像的背景色;根据所述背景色将所述色度坐标系划分为前景区域、背景区域和未知区域;确定所述输入图像中的每一个像素点属于所述前景区域、所述背景区域还是所述未知区域;根据背景区域平均颜色值,确定属于所述未知区域的像素点是属于所述前景区域还是属于所述背景区域。

Description

一种图像处理方法及图像处理器
技术领域
本发明涉及图像处理领域,尤其涉及一种图像处理方法及图像处理器。
背景技术
抠像技术是将画面中的某一种单色背景从画面中抠去。这样在室内拍摄的人物经抠像后与各种景物叠加在一起,形成神奇的艺术效果。因此抠像技术广泛应用于广告、影视制作以及远程视频会议等方面,可以达到更好的画面效果。
现有一种蓝屏(背景为蓝色)抠像方法,针对每一个像素点计算其掩码值α0,α0=1-α1(Bf2Gf),其中0.5≤α2≤1.5,所述Bf为图像的蓝色色度分量,所述Gf为图像的绿色分量。计算获得α0,达到抠像的效果。
在使用这种方法抠像时,参数α1、α2需要经验丰富的人员进行的调整,多应用于后期制作。且光照变化也会对这种方法的抠像效果造成很大影响,不适合全自动实时抠像。
发明内容
本发明的实施例提供一种图像处理方法及图像处理器,抠像效果受光照变化的影响较小,且算法简单,适用于图像的实时处理。
为达到上述目的,本发明的实施例采用如下技术方案:
第一方面,公开了一种图像处理方法,包括:
获取输入图像中每个像素点的亮度分量和色度分量,所述色度分量包括蓝色色度分量以及红色色度分量;
对所述输入图像的像素点的色度分量值进行统计,将出现最多的像素点对应的颜色确定为所述输入图像的背景色;
根据所述背景色将所述色度坐标系划分为前景区域、背景区域和未知区域;
确定所述输入图像中的每一个像素点属于所述前景区域、所述背景区域还是所述未知区域;
根据背景区域平均颜色值,确定属于所述未知区域的像素点是属于所述前景区域还是属于所述背景区域。
结合第一方面,在第一种可能的实现方式中,所述色度坐标系由水平的蓝色色度分量轴和竖直的红色色度分量轴构成,
所述未知区域为,L1、L2、所述蓝色色度分量轴以及所述红色色度分量轴围成的闭合区域;其中,所述L1为:a·u+b·v+H=0、所述L2为:c·u+d·v+L=0,所述H的绝对值大于所述L的绝对值。
结合第一方面的第一种可能的实现方式,在第二种可能的实现方式中,
当所述背景色落在第一或第二象限时,将所述背景色所属象限内未知区域上面的区域定义为背景区域;将所述色度坐标系内除所述未知区域和所述背景区域以外的区域定义为前景区域;
当所述背景色落在第三或第四象限时,将所述背景色所属象限内未知区域下面的区域定义为背景区域;将所述色度坐标系内除所述未知区域和所述背景区域以外的区域定义为前景区域。
结合第一方面或第一方面的第一、第二种可能的实现方式,在第三种可能的实现方式中,针对所述输入图像的一个像素点,判断所述像素点是否属于所述背景色所在的象限;
若所述像素点不属于所述背景色所在的象限,则确定所述像素点属于所述前景区域;
若所述像素点属于所述背景色所在的象限,则根据所述L1和所述L2,计算获得T1和T2,所述T1=a·u+b·v,所述T2=c·u+d·v;其中,所述u为所述像素点的蓝色色度分量值,所述v为所述像素点的红色色度分量值。
结合第一方面的第三种可能的实现方式,在第四种可能的实现方式中,
当所述背景色在第一或第二象限时,判断所述T2是否小于所述-L;
若所述T2小于所述-L,则确定所述像素点属于所述前景区域,若所述T2不小于所述-L,则判断所述T1是否大于所述-H;
若所述T1大于所述-H,则确定所述像素点属于所述背景区域,所述T1不大于所述-H,确定所述像素点属于所述未知区域。
结合第一方面的第三种可能的实现方式,在第五种可能的实现方式中,
当所述背景色在第三或第四象限时,判断所述T2是否大于所述-L;
若所述T2大于所述-L,则确定所述像素点属于所述前景区域,若所述T2不大于所述-L,则判断所述T1是否小于所述-H;
若所述T1小于所述-H,则确定所述像素点属于所述背景区域;若所述T1不小于所述-H,则确定所述像素点属于所述未知区域。
结合第一方面或第一方面的第一至第五种可能的实现方式中的任一种,在第六种可能的实现方式中,所述根据背景区域平均颜色值,确定属于所述未知区域的像素点是属于所述前景区域还是属于所述背景区域,包括:
针对属于所述未知区域内每一个像素点,计算所述像素点与所述背景区域平均颜色值对应的像素点之间的欧式距离D,并在所述欧式距离D大于第一门限值,或所述欧式距离D小于所述第一门限值,且y-By的绝对值大于第二门限值时,确定所述像素点属于所述前景区域;若所述像素点不满足以上条件,则确定所述像素点属于所述背景区域;其中,所述欧式距离D=(u-Bu)2+(v-Bv)2,所述Bu、Bv和By分别为所述背景区域平均颜色值的蓝色色度分量值、红色色度分量值、亮度分量值,所述y为所述像素点的亮度分量值。
结合第一方面,在第七种可能的实现方式中,所述背景区域平均颜色值为:
一个固定值,或者上一帧输入图像的背景区域平均颜色值,或者所述输入图像的背景区域平均颜色值。
结合第一方面或第一方面的第一至第七种可能的实现方式中的任一种,在第八种可能的实现方式中,
所述H为20,所述L为10;或者所述H=α·Bu,所述L=β·Bu,其中,所述Bu为上一帧图像的背景区域平均颜色值的蓝色色度分量值。
结合第一方面,在第九种可能的实现方式中,在所述确定所述输入图像中的每一个像素点属于所述前景区域、所述背景区域还是所述未知区域之后,所述方法还包括:
获得所述背景区域中的每一个像素点的亮度分量、蓝色色度分量和红色色度分量;
计算所述输入图像的背景区域平均颜色值,其中,所述背景区域平均颜色值包括Bu,Bv和By,所述Bu为所述背景区域中的所有像素点的蓝色色度分量的平均值;所述Bv为所述背景区域中的所有像素点的红色色度分量的平均值;所述By为所述背景区域中的所有像素点的亮度分量的平均值。
第二方面,公开了一种图像处理器,包括:
获取单元,用于获取输入图像中每个像素点的亮度分量和色度分量,所述色度分量包括蓝色色度分量以及红色色度分量;
确定单元,用于对所述输入图像的像素点的色度分量值进行统计,将出现最多的像素点对应的颜色确定为所述输入图像的背景色;
划分单元,用于根据所述确定单元确定的所述背景色将所述色度坐标系划分为前景区域、背景区域和未知区域;
所述确定单元,用于确定所述输入图像中的每一个像素点属于所述前景区域、所述背景区域还是所述未知区域;
所述确定单元还用于,根据背景区域平均颜色值,确定属于所述未知区域的像素点是属于所述前景区域还是属于所述背景区域。
结合第二方面,在第一种可能的实现方式中,所述色度坐标系由水平的蓝色色度分量轴和竖直的红色色度分量轴构成,
所述未知区域为,L1、L2、所述蓝色色度分量轴以及所述红色色度分量轴围成的闭合区域;其中,所述L1为:a·u+b·v+H=0、所述L2为:c·u+d·v+L=0,所述H的绝对值大于所述L的绝对值。
结合第二方面的第一种可能的实现方式,在第二种可能的实现方式中,
所述划分单元还用于,在所述背景色落在第一或第二象限时,将所述背景色所属象限内未知区域上面的区域定义为背景区域;将所述色度坐标系内除所述未知区域和所述背景区域以外的区域定义为前景区域;
所述划分单元还用于,在所述背景色落在第三或第四象限时,将所述背景色所属象限内未知区域下面的区域定义为背景区域;将所述色度坐标系内除所述未知区域和所述背景区域以外的区域定义为前景区域。
结合第二方面或第二方面的第一、第二种可能的实现方式,在第三种可能的实现方式中,所述确定单元还包括:计算子单元和判断子单元,
所述判断子单元用于,针对所述输入图像的一个像素点,判断所述像素点是否属于所述背景色所在的象限;
所述确定单元用于,在所述判断子单元判断所述像素点不属于所述背景色所在的象限时,确定所述像素点属于所述前景区域;
所述计算子单元用于,在所述判断子单元判断所述像素点不属于所述背景色所在的象限时,计算获得T1和T2,所述T1=a·u+b·v,所述T2=c·u+d·v;其中,所述u为所述像素点的蓝色色度分量值,所述v为所述像素点的红色色度分量值。
结合第二方面的第三种可能的实现方式,在第四种可能的实现方式中,
所述判断子单元用于,在所述背景色在第一或第二象限时,判断所述T2是否小于所述-L;
所述确定单元用于,在所述判断子单元判断所述T2小于所述-L之后,确定所述像素点属于所述前景区域;
所述判断子单元用于,在判断所述T2不小于所述-L之后,判断所述T1是否大于所述-H;
所述确定单元用于,在所述判断子单元判断所述T1大于所述-H之后,确定所述像素点属于所述背景区域;
所述确定单元还用于,在所述判断子单元判断所述T1不大于所述-H之后,确定所述像素点属于所述未知区域。
结合第二方面的第三种可能的实现方式,在第五种可能的实现方式中,
所述判断子单元用于,在所述背景色在第三或第四象限时,判断所述T2是否大于所述-L;
所述确定单元用于,在所述判断子单元判断所述T2大于所述-L之后,确定所述像素点属于所述前景区域;
所述判断子单元用于,在判断所述T2不大于所述-L之后,判断所述T1是否小于所述-H;
所述确定单元用于,在所述判断子单元判断所述T1小于所述-H之后,确定所述像素点属于所述背景区域;
所述确定单元还用于,在所述判断子单元判断所述T1不小于所述-H之后,确定所述像素点属于所述未知区域。
结合第二方面或第一方面的第一至第五种可能的实现方式中的任一种,在第六种可能的实现方式中,所述计算子单元用于,针对属于所述未知区域内每一个像素点,计算所述像素点与所述背景区域平均颜色值对应的像素点之间的欧式距离D,所述欧式距离D=(u-Bu)2+(v-Bv)2,所述Bu、Bv和By分别为所述背景区域平均颜色值的蓝色色度分量值、红色色度分量值、亮度分量值,所述y为所述像素点的亮度分量值;
所述判断子单元用于,判断所述欧式距离D是否大于第一门限值;
所述确定单元用于,在所述判断子单元判断所述欧式距离D大于第一门限值之后,确定所述像素点属于所述前景区域;
所述计算子单元用于,计算y-By的绝对值;
所述确定单元用于,在所述欧式距离D小于所述第一门限值,且所述y-By的绝对值大于第二门限值时,确定所述像素点属于所述前景区域;
所述确定单元用于,在所述欧式距离D不大于第一门限值,且所述像素点不满足:所述欧式距离D小于所述第一门限值,且所述y-By的绝对值大于第二门限值时,确定所述像素点属于所述背景区域。
结合第二方面,在第七种可能的实现方式中,所述背景区域平均颜色值为:
一个固定值,或者上一帧输入图像的背景区域平均颜色值,或者所述输入图像的背景区域平均颜色值。
结合第二方面或第一方面的第一至第七种可能的实现方式中的任一种,在第八种可能的实现方式中,所述H为20,所述L为10;或者所述H=α·Bu,所述L=β·Bu,其中,所述Bu为上一帧图像的背景区域平均颜色值的蓝色色度分量值。
结合第二方面,在第九种可能的实现方式中,所述获取单元还用于,在所述划分单元将所述色度坐标系划分为前景区域、背景区域和未知区域之后,获得所述背景区域中的每一个像素点的亮度分量、蓝色色度分量和红色色度分量;
所述计算子单元还用于,计算获得所述图像的背景区域平均颜色值,其中,所述背景区域平均颜色值包括Bu,Bv和By,所述Bu为所述背景区域中的所有像素点的蓝色色度分量的平均值;所述Bv为所述背景区域中的所有像素点的红色色度分量的平均值;所述By为所述背景区域中的所有像素点的亮度分量的平均值。
本发明提供的图像处理方法及图像处理器,通过在色度坐标系上构造曲线,将所述色度坐标系划分为前景区域、背景区域和未知区域,逐一判断各像素点属于前景区域、背景区域还是未知区域,再确定所述未知区域内的像素点属于所述前景区域还是所述背景区域。与现有技术中需要调节参数且抠像效果极易受光照变的影响相比,本发明提供的图像处理方法及图像处理器,抠像效果受光照变化的影响较小,且算法简单,适用于图像的实时处理。
附图说明
图1为本发明实施例提供的一种图像处理方法流程示意图;
图2为本发明实施例提供的一种图像处理方法流程示意图;
图3为本发明实施例提供的一种区域划分示意图;
图4为本发明实施例提供的一种图像处理方法流程示意图;
图5为本发明实施例提供的一种区域划分示意图;
图6为本发明实施例提供的一种图像处理方法流程示意图;
图7为本发明实施例提供的图像处理器的结构框图;
图8为本发明实施例提供的图像处理器的结构框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明提供了一种图像处理方法,如图1所示,所述方法包括:
101、获取输入图像中每个像素点的亮度分量和色度分量,色度分量包括蓝色色度分量以及红色色度分量。
其中,其中,蓝色色度分量和红色色度分量为像素点的两个色度分量。在处理视频图像时,首先要截取以一帧图像,进而就可以获取这帧图像中每个像素点的亮度分量和色度分量。实际上,8bit色度分量的范围是[-128,127]。考虑到用1个无符号字节表示其范围,且128为一个直流分量,故将U、红色色度分量的范围转换为[0,255]。
102、对输入图像的像素点的色度分量值进行统计,将出现最多的像素点对应的颜色确定为输入图像的背景色。
这里,统计输入图像中所有像素点的色度分量值,将出现次数最多的像素点对应的颜色作为背景色,以便根据背景色处理后续的输入图像。可选地,背景色也可以为用户指定的颜色。
通常,背景色是一种单色。紫色(或洋红色)在色度坐标系的第一象限,红色在第二象限,绿色在第三象限,蓝色在第四象限。
103、根据背景色将色度坐标系划分为前景区域、背景区域和未知区域。
色度坐标系由水平的蓝色色度分量轴和竖直的红色色度分量轴构成,且蓝色色度分量轴和红色色度分量轴将色度坐标系分成四个象限,从蓝色色度分量轴和红色色度分量轴的正方向开始逆时针依次称为第一象限、第二象限、第三象限和第四象限。
未知区域为L1、L2、蓝色色度分量轴以及红色色度分量轴围成的闭合区域;其中,L1:a·u+b·v+H=0、L2:c·u+d·v+L=0,H的绝对值大于L的绝对值。其中,H、L可以是固定值,或者H=α·Bu,L=β·Bu,其中,Bu为上一帧图像的背景区域平均颜色值的蓝色色度分量值。通常,α=0.2,β=0.1。这样,当背景色为紫色(或洋红色)或者红色,L1在L2之上,当背景色为绿色或蓝色,L2在L1之上。当背景色在第一或第三象限时a·b>0且c·d>0,当背景色在第二或第四象限时a·b<0且c·d<0。
需要说明的是,未知区域在背景色所在的象限。前景区域和背景区域的确定要依据背景色来定。当背景色落在第一或第二象限时,将背景色所属象限内未知区域上面的区域定义为背景区域;将色度坐标系中除背景区域和未知区域外的区域定义为前景区域。当背景色落在第三或第四象限时,将背景色所属象限内未知区域下面的区域定义为背景区域;将色度坐标系内除背景区域和未知区域外的区域定义为前景区域。
示例的,当进行蓝屏抠像(即输入图像的背景色为蓝色)时,背景区域为第四象限中未知区域下面的区域,当进行绿屏抠像(即输入图像的背景色为绿色)时,背景区域为第三象限中未知区域下面的区域。当进行紫屏或红屏抠像(即输入图像的背景色为紫色或红色)时,背景区域为第一或第二象限中未知区域上面的区域。
104、确定输入图像中的每一个像素点属于前景区域、背景区域还是未知区域。
处理一帧图像时,需要对各个像素点逐个进行判断,以便将所有像素点划分到前景区域、背景区域以及未知区域。在抠像时,遍历各像素点进行判断,需要结合上述L1和L2,通过计算判断各像素点与L1和L2之间的位置关系,进而判断像素点属于前景区域、背景区域或未知区域。
当背景色在第一或第二象限(即背景色为紫色或红色)时,可以采用相同的算法来确定输入图像中的每一个像素点属于前景区域、背景区域还是未知区域。这是因为当背景色在第一或第二象限,L1均在L2之上,即未知区域的上边界均为曲线L1,下边界均为曲线L2,因此在利用像素点与未知区域的边界之间的位置关系确定像素点是否属于未知区域时,对于背景色为紫色和红色的两种情况,可以采用相同的算法。
确定输入图像中的每一个像素点属于哪个区域的流程包括:针对输入图像的一个像素点,判断像素点是否属于背景色所在的象限。若像素点不属于背景色所在的象限,则确定像素点属于前景区域;若像素点属于背景色所在的象限,则根据L1和L2,计算获得T1和T2,T1=a·u+b·v,T2=c·u+d·v;其中,u为像素点的蓝色色度分量值,v为像素点的红色色度分量值。
判断T2是否小于-L。若T2小于-L,则确定像素点属于前景区域。若T2不小于-L,则判断T1是否大于-H。
若T1大于-H,则确定像素点属于背景区域。若T1不大于-H,确定像素点属于未知区域。
同理,当背景色在第三或第四象限(即背景色为绿色或蓝色)时,可以采用相同的算法来确定输入图像中的每一个像素点属于前景区域、背景区域还是未知区域。这是因为当背景色在第一或第二象限,构造的曲线L2均在L1之上,即未知区域的上边界均为曲线L2,下边界为曲线L1,因此在利用像素点与未知区域的边界之间的位置关系确定像素点是否属于未知区域时,对于背景色为绿色和蓝色的两种情况,可以采用相同的算法。
确定输入图像中的每一个像素点属于哪个区域的流程包括:针对输入图像的一个像素点,判断像素点是否属于背景色所在的象限。
若像素点不属于背景色所在的象限,则确定像素点属于前景区域;若像素点属于背景色所在的象限,则根据L1和L2,计算获得T1和T2,T1=a·u+b·v,T2=c·u+d·v;其中,u为像素点的蓝色色度分量值,v为像素点的红色色度分量值。
判断T2是否大于-L;若T2大于-L,则确定像素点属于前景区域。若T2不大于-L,则判断T1是否小于-H。
若T1小于-H,则确定像素点属于背景区域;若T1不小于-H,则确定像素点属于未知区域。
这样,就可以确定输入图像中的所有像素点属于前景区域、背景区域还是未知区域。
105、根据背景区域平均颜色值,确定属于未知区域的像素点是属于前景区域还是属于背景区域。
在步骤104之后,就把输入图像中的每一像素点划分到一个区域内(前景区域或背景区域或未知区域)。对于前景区域和背景区域的像素点不需要再进行判断,对于未知区域内的像素点需要进行判断,以确定未知区域的像素点属于前景区域还是背景区域。
这里,背景区域平均颜色值为一个固定值,或者为上一帧输入图像的背景区域平均颜色值,或者为输入图像的背景区域平均颜色值。其中上一帧输入图像的背景区域平均颜色值是在确定了上一帧输入图像的未知区域的像素点是前景像素点还是背景像素点之后,统计所有背景像素点后获得的。输入图像的背景区域平均颜色值是在处理输入图像时,将色度坐标系划分为前景区域、背景区域和未知区域之后,对背景区域的像素点进行统计获得的。
示例地,本帧输入图像的背景区域平均颜色值的计算方法为:获得背景区域中的每一个像素点的亮度分量、蓝色色度分量和红色色度分量;计算获得图像的背景区域平均颜色值,其中,背景区域平均颜色值包括Bu,Bv和By,Bu为背景区域中的每一个像素点的蓝色色度分量相加除以像素点总数量;Bv为背景区域中的每一个像素点的红色色度分量相加除以像素点总数量;By为背景区域中的每一个像素点的亮度分量相加除以像素点总数量。
上一帧输入图像的背景区域平均颜色值的计算方法与输入图像的背景区域平均颜色值的计算方法相同,在此不做赘述。
在确定背景区域平均颜色值之后,就可以根据背景区域平均颜色值分析未知区域中的每一个像素点属于前景区域还是背景区域。这里,前景区域的像素点属于前景,背景区域的像素点属于背景。这样就可以将输入图像内的像素点分成了前景像素点和背景像素点,达到抠像的效果。
本发明提供的图像处理方法,通过在色度坐标系上构造曲线,将色度坐标系划分为前景区域、背景区域和未知区域,逐一判断各像素点属于前景区域、背景区域还是未知区域,再确定未知区域内的像素点属于前景区域还是背景区域。与现有技术中需要调节参数且抠像效果极易受光照变的影响相比,本发明提供的图像处理方法,抠像效果受光照变化的影响较小,且算法简单,适用于图像的实时处理。
本发明提供一种抠像方法,如图2所示,所述方法包括:
201、获取输入图像中每个像素点的亮度分量和色度分量,并确定输入图像的背景色为绿色。
其中,蓝色色度分量和红色色度分量为像素点的两个色度分量。图像是由很多个像素点组成了,对于每一个像素点,用亮度分量表示它的亮度,用蓝色色度分量、红色色度分量来表示它的色度。在处理视频图像时,截取一帧图像,经过分析处理就可以获得这帧图像中每一个像素点的亮度分量和色度分量。实际上,8bit色度分量的范围是[-128,127]。考虑到用1个无符号字节表示其范围,且128为一个直流分量,故将色度分量的范围转换为[0,255]。这里,统计第一帧输入图像中所有像素点的色度分量值,将出现次数最多的像素点对应的颜色作为背景色,以便根据背景色处理后续的输入图像。或者,将用户指定的背景色作为背景色。
202、根据背景色将色度坐标系划分为前景区域、背景区域和未知区域。
其中,色度坐标系是由水平方向的蓝色色度分量轴和竖直方向的红色色度分量轴构成,并且将色度坐标系分成了四个象限,从蓝色色度分量轴和红色色度分量轴的正方向开始逆时针依次称为第一象限、第二象限、第三象限和第四象限。
在对背景为绿色的图像进行抠像处理,背景色落在第三象限,因此未知区域在第三象限。将L1、L2、U轴以及V轴围成的闭合区域定义为未知区域;其中,L1:a·u+b·v+H=0、L2:c·u+d·v+L=0,a·b>0且c·d>0。将第三象限中未知区域下面的区域定义为背景区域;将色度坐标系中除未知区域和背景区域以外的区域定义为前景区域。
其中,H为20,L为10;或者H=α·Bu,L=β·Bu,其中,Bu为上一帧图像的背景区域平均颜色值的蓝色色度分量值。对于第一帧输入图像,其背景区域平均颜色值Bu,Bv和By为一个经验值,一般情况下Bu=112,Bv=112,By=102。一般,α为0.2,β为0.1。
如图3所示,图中阴影部分四边形ABCD为未知区域,曲线L1为:u+v+H=0、L2为:u+v+L=0,即a=b=c=d=1。这时,第三象限中除去阴影部分和三角形OBC之外的剩余部分为背景区域,第一、二、四象限和第三象限中的三角形OBC都是前景区域。
203、针对输入图像的一个像素点,判断像素点的蓝色色度分量和红色色度分量是否均小于0。
在确定输入图像中的每一个像素点属于前景区域、背景区域还是未知区域时,由于绿色在色度坐标系的第三象限,因此一个像素点的蓝色色度分量、红色色度分量值落在了色度坐标系的第三象限之外,那么该像素点一定属于前景区域。这样只需要对第三象限内的像素点进行判断,以确定每一个像素点属于前景区域、背景区域,还是未知区域。判断一个像素点是否在第三象限,即要判断像素点像素点的蓝色色度分量和红色色度分量是否均小于0。若是,则进行步骤204;若不是,则确定像素点属于前景区域。
204、根据L1和L2,计算获得T1和T2。
其中,T1=a·u+b·v,T2=c·u+d·v。u为像素点的蓝色色度分量值,v为像素点的红色色度分量值。对应本实施中的曲线,T1=T2=u+v。
205、判断T2是否大于-L。
若大于,则确定像素点属于前景区域;否则,则进行步骤206。
206、判断T1是否小于-H。
若小于,则确定像素点属于背景区域;否则,确定像素点属于未知区域。
207、获得背景区域中的每一个像素点的亮度分量、蓝色色度分量和红色色度分量,计算输入图像的背景区域平均颜色值。
背景区域平均颜色值包括Bu,Bv和By,Bu为背景区域中的每一个像素点的蓝色色度分量相加除以像素点总数量;Bv为背景区域中的每一个像素点的红色色度分量相加除以像素点总数量;By为背景区域中的每一个像素点的亮度分量相加除以像素点总数量。
208、根据背景区域平均颜色值,确定属于未知区域内的像素点是属于前景区域还是属于背景区域。
针对未知区域内每一个像素点,计算像素点与背景色对应的像素点之间的欧式距离D。在像素点的欧式距离D大于第一门限值时,或像素点的欧式距离D小于第一门限值,且y-By的绝对值大于第二门限值时,确定像素点属于前景区域;若像素点不满足上述条件,确定像素点属于背景区域。其中,像素点的欧式距离D=(u-Bu)2+(v-Bv)2,Bu、Bv和By分别为预设的背景区域颜色值的蓝色色度分量值、红色色度分量值、亮度分量值,y为像素点的亮度分量值。
背景区域平均颜色值包括:一个固定值,或者上一帧输入图像的背景区域平均颜色值,或者输入图像的背景区域平均颜色值。这个经验值可以是Bu=112,Bv=112,By=102。通常,第一门限值为Thr=200。第二门限值ThY=20。
209、对所有属于背景区域的像素点进行统计,获得下一帧图像的背景区域平均颜色值。
这里,对步骤206和步骤208中确定的属于背景区域的像素点都要进行统计。对步骤206和步骤208中确定的属于背景区域的像素点进行以下步骤:
获得每一个属于背景区域的像素点的亮度分量、蓝色色度分量和红色色度分量;
将所有属于背景区域的像素点的蓝色色度分量的平均值、红色色度分量的平均值以及亮度分量的平均值,作为下一帧输入图像的背景区域平均颜色值,以便利用下一输入帧图像的背景区域平均颜色值处理下一帧输入图像。在处理下一帧输入图像时,背景区域平均颜色值就可以为这里获得的背景区域平均颜色值,这样就可以获得更好的处理效果。
这样,就将所有的像素点划分到了前景区域和背景区域两个区域,就可以相应获得一个二值掩码图。示例的,前景用255表示,背景用0表示,就可以获得一个有255、0两个值的二值掩码图。
本发明提供的图像处理方法,通过在色度坐标系上构造曲线,将色度坐标系划分为前景区域、背景区域和未知区域,逐一判断各像素点属于前景区域、背景区域还是未知区域,再确定未知区域内的像素点属于前景区域还是背景区域。与现有技术中需要调节参数且抠像效果极易受光照变的影响相比,本发明提供的图像处理方法,抠像效果受光照变化的影响较小,且算法简单,适用于图像的实时处理。
本发明实施例还提供了一种抠像方法,如图4所示,方法包括:
401、获取输入图像中每个像素点的亮度分量和色度分量,并确定输入图像的背景色为蓝色。
这里,统计输入图像中所有像素点的色度分量值,将出现次数最多的像素点对应的颜色作为背景色,以便根据背景色处理该输入图像。或者,将用户指定的背景色作为背景色。
402、根据背景色将色度坐标系划分为前景区域、背景区域和未知区域。
在对背景为蓝色的图像进行抠像处理,将第四象限中L1、L2、蓝色色度分量轴以及红色色度分量轴围成的闭合区域定义为未知区域。其中,曲线L1为:a·u+b·v+H=0、L2为:c·u+d·v+L=0,a·b<0且c·d<0。将第四象限中未知区域下面的区域定义为背景区域;将色度坐标系中除背景区域和未知区域以外的区域定义为前景区域。
其中,H为20,所述L为10;或者所述H=α·Bu,所述L=β·Bu,Bu为上一帧图像的背景区域平均颜色值的蓝色色度分量值。对于第一帧输入图像,其背景区域平均颜色值Bu,Bv和By为一个经验值,一般情况下Bu=112,Bv=112,By=102。一般,α为0.2,β为0.1。
如图5所示,图中阴影部分四边形EFGH为未知区域,曲线L1为:u-v+H=0、L2:u-v+L=0,即a=c=1,b=d=-1。这时,第四象限中除去阴影部分和三角形OEH之外的剩余部分为背景区域,第一、二、三象限和第四象限中的三角形OEH都是前景区域。
403、针对输入图像的一个像素点,判断该像素点是否满足:蓝色色度分量大于0且红色色度分量小于0。
在确定输入图像中的每一个像素点属于前景区域、背景区域还是未知区域时,由于蓝色在色度坐标系的第四象限,因此一个像素点的蓝色色度分量值、红色色度分量值落在了色度坐标系的第四象限之外,那么该像素点一定属于前景区域。这样只需要对第四象限内的像素点进行判断,以确定每一个像素点属于前景区域、背景区域,还是未知区域。判断一个像素点是否在第四象限,即要判断像素点是否满足:蓝色色度分量大于0且红色色度分量小于0。若是,则进行步骤404;若不是,则确定该像素点属于前景区域。
404、根据L1和L2,计算获得T1和T2。
其中,T1=a·u+b·v,T2=c·u+d·v;u为像素点的蓝色色度分量值,v为像素点的红色色度分量值。对应本实施例构造的曲线,T1=T2=u-v。
405、判断T2是否大于-L。
若大于,则确定该像素点属于前景区域;否则,则进行步骤406。
406、判断T1是否小于-H。
若小于,则确定该像素点属于背景区域;否则,确定像素点属于未知区域。
407、获得背景区域中的每一个像素点的亮度分量、蓝色色度分量和红色色度分量,计算获得输入图像的背景区域平均颜色值。
背景区域平均颜色值包括Bu,Bv和By,Bu为背景区域中的每一个像素点的蓝色色度分量相加除以像素点总数量;Bv为背景区域中的每一个像素点的红色色度分量相加除以像素点总数量;By为背景区域中的每一个像素点的亮度分量相加除以像素点总数量。
408、根据背景区域平均颜色值,确定属于未知区域的像素点是属于前景区域还是属于背景区域。
针对未知区域内每一个像素点,计算该像素点的欧式距离D。在像素点的欧式距离D大于第一门限值时,或该像素点的欧式距离D小于第一门限值,且y-By的绝对值大于第二门限值时,确定像素点属于前景区域;若该像素点不满足以上条件,确定像素点属于背景区域。其中,像素点的欧式距离D=(u-Bu)2+(v-Bv)2,Bu、Bv和By分别为预设的背景区域颜色值的蓝色色度分量值、红色色度分量值、亮度分量值,y为像素点的亮度分量值。
背景区域平均颜色值包括:一个固定值,或者上一帧图像的背景区域平均颜色值,或者输入图像的背景区域平均颜色值。这个经验值可以是Bu=112,Bv=112,By=102。通常,第一门限值为Thr=400。第二门限值ThY=40。
409、对所有属于背景区域的像素点进行统计,获得下一帧图像的背景区域平均颜色值。
这里,对步骤406和步骤408中确定的属于背景区域的像素点都要进行统计。对步骤406和步骤408中确定的属于背景区域的像素点进行以下步骤:
获得每一个属于背景区域的像素点的亮度分量、蓝色色度分量和红色色度分量。将所有属于背景区域的像素点的蓝色色度分量的平均值、红色色度分量的平均值以及亮度分量的平均值,作为下一帧图像的背景区域平均颜色值,以便利用下一帧图像的背景区域平均颜色值处理下一帧图像。
本发明提供的图像处理方法,通过在色度坐标系上构造曲线,将色度坐标系划分为前景区域、背景区域和未知区域,逐一判断各像素点属于前景区域、背景区域还是未知区域,再确定未知区域内的像素点属于前景区域还是背景区域。与现有技术中需要调节参数且抠像效果极易受光照变的影响相比,本发明提供的图像处理方法,抠像效果受光照变化的影响较小,且算法简单,适用于图像的实时处理。
本发明实施例还提供了一种抠像方法,如图6所示,所述方法包括:
601、获取输入图像中每个像素点的亮度分量和色度分量,并确定输入图像的背景色。
这里,确定输入图像的背景色为紫色(或者洋红色),或者,确定背景色为红色。其中,紫色(或洋红色)在第一象限,红色在第二象限。
602、根据背景色将色度坐标系划分为前景区域、背景区域和未知区域。
在对背景为紫色的图像进行抠像处理,将未知区域定义在第一象限,在对背景为红色的图像进行抠像处理,将未知区域定义在第二象限。未知区域为,L1、L2、蓝色色度分量轴以及红色色度分量轴围成的闭合区域;其中,L1为:a·u+b·v+H=0、L2为:c·u+d·v+L=0,H的绝对值大于L的绝对值。
若背景色为紫色,则将第一象限中未知区域下面的区域定义为背景区域;将色度坐标系中除背景区域和未知区域外的区域定义为前景区域。若背景色为红色,则将第二象限中未知区域下面的区域定义为背景区域。将色度坐标系中除未知区域和背景区域外的区域定义为前景区域。
603、针对输入图像的一个像素点,判断该像素点是否属于背景色所在的象限。
若背景色为紫色(或洋红色),则判断像素点是否满足:蓝色色度分量和红色色度分量均分量大于0;若背景色为红色,则判断像素点是否满足:蓝色色度分量小于0且红色色度分量大于0。
若是,则进行步骤604;若不是,则确定像素点属于前景区域。
604、则根据L1和L2,计算获得T1和T2。
其中,T1=a·u+b·v,T2=c·u+d·v;u为像素点的蓝色色度分量值,v为像素点的红色色度分量值。
605、判断T2是否小于-L。
若小于,则确定该像素点属于前景区域;否则,则进行步骤606。
606、判断T1是否大于-H。
若大于,则确定该像素点属于背景区域;否则,确定该像素点属于未知区域。
607、获得背景区域中的每一个像素点的亮度分量、蓝色色度分量和红色色度分量,计算获得输入图像的背景区域平均颜色值。
608、根据背景区域平均颜色值,确定属于未知区域的像素点是属于前景区域还是属于背景区域。
针对未知区域内每一个像素点,计算像素点的欧式距离D。在像素点的欧式距离D大于第一门限值时,确定像素点属于前景区域;在像素点的欧式距离D小于第一门限值,且y-By的绝对值大于第二门限值时,确定像素点属于前景区域;否则,确定像素点属于背景区域。其中,像素点的欧式距离D=(u-Bu)2+(v-Bv)2,Bu、Bv和By分别为背景区域平均颜色值的蓝色色度分量值、红色色度分量值、亮度分量值,y为像素点的亮度分量值。
609、对属于背景区域的像素点进行统计,获得下一帧图像的背景区域平均颜色值。
这里,对步骤606和步骤608中确定的属于背景区域的像素点进行统计获得下一帧图像的背景区域平均颜色值与上述实施例中的方法相同,在此不做赘述。
本发明提供的图像处理方法,通过在色度坐标系上构造曲线,将色度坐标系划分为前景区域、背景区域和未知区域,逐一判断各像素点属于前景区域、背景区域还是未知区域,再确定未知区域内的像素点属于前景区域还是背景区域。与现有技术中需要调节参数且抠像效果极易受光照变的影响相比,本发明提供的图像处理方法,抠像效果受光照变化的影响较小,且算法简单,适用于图像的实时处理。
本发明实施例提供了一种图像处理器,如图7所示,所述图像处理器包括:获取单元701、确定单元702和划分单元703。
获取单元701,用于获取输入图像中每个像素点的亮度分量和色度分量,色度分量包括蓝色色度分量以及红色色度分量。
确定单元702,用于对输入图像的像素点的色度分量值进行统计,将出现最多的像素点对应的颜色确定为输入图像的背景色。
划分单元703,用于根据确定单元702确定的背景色将色度坐标系划分为前景区域、背景区域和未知区域。
确定单元702,用于确定输入图像中的每一个像素点属于前景区域、背景区域还是未知区域。
确定单元702还用于,根据背景区域平均颜色值,确定属于未知区域的像素点是属于前景区域还是属于背景区域。
色度坐标系由水平的蓝色色度分量轴和竖直的红色色度分量轴构成,未知区域为,L1、L2、蓝色色度分量轴以及红色色度分量轴围成的闭合区域;其中,L1为:a·u+b·v+H=0、L2为:c·u+d·v+L=0,H的绝对值大于L的绝对值。
划分单元703还用于,在背景色落在第一或第二象限时,将背景色所属象限内未知区域上面的区域定义为背景区域;将色度坐标系内除未知区域和背景区域以外的区域定义为前景区域。划分单元703还用于,在背景色落在第三或第四象限时,将背景色所属象限内未知区域下面的区域定义为背景区域;将色度坐标系内除未知区域和背景区域以外的区域定义为前景区域。
确定单元702还包括:计算子单元和判断子单元,
判断子单元用于,针对输入图像的一个像素点,判断像素点是否属于背景色所在的象限。
确定单元702用于,在判断子单元判断像素点不属于背景色所在的象限时,确定像素点属于前景区域;
计算子单元用于,在判断子单元判断像素点属于背景色所在的象限时,根据L1和L2,计算获得T1和T2,T1=a·u+b·v,T2=c·u+d·v;其中,u为像素点的蓝色色度分量值,v为像素点的红色色度分量值,当背景色在第一象限时a·b>0且c·d>0,当背景色在第二象限时a·b<0且c·d<0。
判断子单元用于,在背景色在第一或第二象限时,判断T2是否小于-L。确定单元702用于,在判断子单元判断T2小于-L之后,确定像素点属于前景区域。判断子单元用于,在判断T2不小于-L之后,判断T1是否大于-H。确定单元702用于,在判断子单元判断T1大-H之后,确定像素点属于背景区域。确定单元702还用于,判断子单元判断T1不大于-H之后,确定像素点属于未知区域。
判断子单元用于,在背景色在第三或第四象限时,判断T2是否大于-L。确定单元702用于,在判断子单元判断T2大于-L之后,确定像素点属于前景区域。判断子单元用于,在判断T2不大于-L之后,判断T1是否小于-H。确定单元702用于,在判断子单元判断T1小于-H之后,确定像素点属于背景区域。确定单元702还用于,在判断子单元判断T1不小于-H之后,确定像素点属于未知区域。
计算子单元用于,针对未知区域内每一个像素点,计算像素点与背景区域平均颜色值对应的像素点之间的欧式距离D,欧式距离D=(u-Bu)2+(v-Bv)2,Bu、Bv和By分别为背景区域平均颜色值的蓝色色度分量值、红色色度分量值、亮度分量值,y为像素点的亮度分量值。
判断子单元用于,判断欧式距离D是否大于第一门限值。确定单元702用于,在判断子单元判断欧式距离D大于第一门限值之后,确定像素点属于前景区域。
计算子单元用于,计算y-By的绝对值。确定单元702用于,在欧式距离D小于第一门限值,且y-By的绝对值大于第二门限值时,确定像素点属于前景区域。确定单元702用于,在欧式距离D不大于第一门限值,且像素点不满足:欧式距离D小于第一门限值,且y-By的绝对值大于第二门限值时,确定像素点属于背景区域。
需要说明的是,背景区域平均颜色值为:H为20,L为10;或者H=α·Bu,L=β·Bu,其中,Bu为上一帧图像的背景区域平均颜色值的蓝色色度分量值。H为20L为10;或H=Bu*0.2,L=Bu*0.1,其中,Bu为上一帧图像的平均背景颜色值的蓝色色度分量值。
获取单元701还用于,在划分单元703以曲线为边界将色度坐标系划分为前景区域、背景区域和未知区域之后,获得背景区域中的每一个像素点的亮度分量、蓝色色度分量和红色色度分量。
计算子单元还用于,计算获得图像的背景区域平均颜色值,其中,背景区域平均颜色值包括Bu,Bv和By,Bu为背景区域中的所有像素点的蓝色色度分量的平均值;Bv为背景区域中的所有像素点的红色色度分量的平均值;By为背景区域中的所有像素点的亮度分量的平均值。
本发明提供的图像处理器,通过在色度坐标系上构造曲线,将所述色度坐标系划分为前景区域、背景区域和未知区域,逐一判断各像素点属于前景区域、背景区域还是未知区域,再确定所述未知区域内的像素点属于所述前景区域还是所述背景区域。与现有技术中需要调节参数且抠像效果极易受光照变的影响相比,本发明提供的图像处理器,抠像效果受光照变化的影响较小,且算法简单,适用于图像的实时处理。
本发明实施例还提供了一种图像处理器,在硬件实现上,图7中所示的获取单元、划分单元以及确定单元,上述实施例中所述的计算子单元和判断子单元可以以硬件形式或软件形式内嵌于基站的处理器中。该处理器可以为中央处理单元(CPU),也可以单片机。
如图8所示,所述图像处理器包括:处理器701、与处理器801连接的存储器802。其中,存储器802中存储一组程序代码,且处理器701用于调用存储器802中存储的程序代码,用于执行以下操作:
处理器801用于,获取输入图像中每个像素点的亮度分量和色度分量,色度分量包括蓝色色度分量以及红色色度分量;处理器801用于对输入图像的像素点的色度分量值进行统计,将出现最多的像素点对应的颜色确定为输入图像的背景色;处理器801用于,根据背景色将色度坐标系划分为前景区域、背景区域和未知区域。
处理器801,用于确定输入图像中的每一个像素点属于前景区域、背景区域还是未知区域。
处理器801还用于,根据背景区域平均颜色值,确定属于未知区域的像素点是属于前景区域还是属于背景区域。
色度坐标系由水平的蓝色色度分量轴和竖直的红色色度分量轴构成,未知区域为,L1、L2、蓝色色度分量轴以及红色色度分量轴围成的闭合区域;其中,L1为:a·u+b·v+H=0、L2为:c·u+d·v+L=0,H的绝对值大于L的绝对值。
所处理器801还用于,在背景色在第一或第二象限时,在背景色落在第一或第二象限时,将背景色所属象限内未知区域上面的区域定义为背景区域;将色度坐标系内除未知区域和背景区域以外的区域定义为前景区域。处理器801还用于,在背景色落在第三或第四象限时,将背景色所属象限内未知区域下面的区域定义为背景区域;将色度坐标系内除未知区域和背景区域以外的区域定义为前景区域。
处理器801用于,针对输入图像的一个像素点,判断像素点是否属于背景色所在的象限。在判断像素点不属于背景色所在的象限时,确定像素点属于前景区域;处理器801用于,在判断像素点属于背景色所在的象限时,根据L1和L2,计算获得T1和T2,T1=a·u+b·v,T2=c·u+d·v;其中,u为像素点的蓝色色度分量值,v为像素点的红色色度分量值,当背景色在第一象限时a·b>0且c·d>0,当背景色在第二象限时a·b<0且c·d<0。
处理器801用于,在背景色在第一或第二象限时,判断T2是否小于-L。在判断T2小于-L之后,确定像素点属于前景区域。处理器801用于,在判断T2不小于-L之后,判T1是否大于-H。处理器801用于,在判断T1大于-H之后,确定像素点属于背景区域。处理器801还用于,在判断T1不大于-H之后,确定像素点属于未知区域。
处理器801用于,在背景色在第三或第四象限时,判断T2是否大于-L。在判断T2大于-L之后,确定像素点属于前景区域。处理器801用于,在判T2不大于-L之后,判T1是否小于-H。处理器801用于,在判断T1小于-H之后,确定像素点属于背景区域处理器801还用于,在判断T1不小于-H之后,确定像素点属于未知区域。
处理器801用于,针对未知区域内每一个像素点,计算像素点与背景区域平均颜色值对应的像素点之间的欧式距离D,欧式距离D=(u-Bu)2+(v-Bv)2,Bu、Bv和By分别为背景区域平均颜色值的蓝色色度分量值、红色色度分量值、亮度分量值,y为像素点的亮度分量值。处理器801用于,判断欧式距离D是否大于第一门限值。在判断欧式距离D大于第一门限值之后,确定像素点属于前景区域。
所述处理器801用于,计算y-By的绝对值处理器801用于,在欧式距离D小于第一门限值,且y-By的绝对值大于第二门限值时,确定像素点属于前景区域。处理器801用于,在欧式距离D不大于第一门限值,且像素点不满足:欧式距离D小于第一门限值,且y-By的绝对值大于第二门限值时,确像素点属于背景区域。
需要说明的是,背景区域平均颜色值为:一个固定值,或者上一帧输入图像的背景区域平均颜色值,或者输入图像的背景区域平均颜色值。
另外,H为20,L为10;或者H=α·Bu,L=β·Bu,其中,Bu为上一帧图像的背景区域平均颜色值的蓝色色度分量值。H为20,L为10;或者H=Bu*0.2,L=Bu*0.1,其中,Bu为上一帧图像的平均背景颜色值的蓝色色度分量值。
处理器801还用于,在将色度坐标系划分为前景区域、背景区域和未知区域之后,获得背景区域中的每一个像素点的亮度分量、蓝色色度分量和红色色度分量。计算获得图像的背景区域平均颜色值,其中,背景区域平均颜色值包括Bu,Bv和By,Bu为背景区域中的所有像素点的蓝色色度分量的平均值;Bv为背景区域中的所有像素点的红色色度分量的平均值;By为背景区域中的所有像素点的亮度分量的平均值。
本发明提供的图像处理器,通过在色度坐标系上构造曲线,将所述色度坐标系划分为前景区域、背景区域和未知区域,逐一判断各像素点属于前景区域、背景区域还是未知区域,再确定所述未知区域内的像素点属于所述前景区域还是所述背景区域。与现有技术中需要调节参数且抠像效果极易受光照变的影响相比,本发明提供的图像处理器,抠像效果受光照变化的影响较小,且算法简单,适用于图像的实时处理。
本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储于计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应所述以权利要求的保护范围为准。

Claims (20)

1.一种图像处理方法,其特征在于,所述方法包括:
获取输入图像中每个像素点的亮度分量和色度分量,所述色度分量包括蓝色色度分量以及红色色度分量;
对所述输入图像的像素点的色度分量值进行统计,将出现最多的像素点对应的颜色确定为所述输入图像的背景色;
根据所述背景色将色度坐标系划分为前景区域、背景区域和未知区域;所述色度坐标系由水平的蓝色色度分量轴和竖直的红色色度分量轴构成,且所述蓝色色度分量轴和所述红色色度分量轴将所述色度坐标系分成四个象限,从所述蓝色色度分量轴和所述红色色度分量轴的正方向开始逆时针依次称为第一象限、第二象限、第三象限和第四象限;
确定所述输入图像中的每一个像素点属于所述前景区域、所述背景区域还是所述未知区域;
根据背景区域平均颜色值,确定属于所述未知区域的像素点是属于所述前景区域还是属于所述背景区域。
2.根据权利要求1所述的方法,其特征在于,所述色度坐标系由水平的蓝色色度分量轴和竖直的红色色度分量轴构成,
所述未知区域为,曲线L1、曲线L2、所述蓝色色度分量轴以及所述红色色度分量轴围成的闭合区域;其中,所述曲线L1由方程a·u+b·v+H=0确定、所述曲线L2由方程c·u+d·v+L=0确定,所述H的绝对值大于所述L的绝对值;其中,所述a、b、c、d、H、L为常数,所述u为像素点的蓝色色度分量值,所述v为像素点的红色色度分量值。
3.根据权利要求2所述的方法,其特征在于,
当所述背景色落在第一或第二象限时,将所述背景色所属象限内未知区域上面的区域定义为背景区域;将所述色度坐标系内除所述未知区域和所述背景区域以外的区域定义为前景区域;
当所述背景色落在第三或第四象限时,将所述背景色所属象限内未知区域下面的区域定义为背景区域;将所述色度坐标系内除所述未知区域和所述背景区域以外的区域定义为前景区域。
4.根据权利要求2或3所述的方法,其特征在于,
针对所述输入图像的一个像素点,判断所述像素点是否属于所述背景色所在的象限;
若所述像素点不属于所述背景色所在的象限,则确定所述像素点属于所述前景区域;
若所述像素点属于所述背景色所在的象限,则根据所述L1和所述L2,计算获得T1和T2,所述T1=a·u+b·v,所述T2=c·u+d·v;其中,所述u为所述像素点的蓝色色度分量值,所述v为所述像素点的红色色度分量值,所述a、b、c、d为常数。
5.根据权利要求4所述的方法,其特征在于,
当所述背景色在第一或第二象限时,判断所述T2是否小于所述-L;
若所述T2小于所述-L,则确定所述像素点属于所述前景区域,若所述T2不小于所述-L,则判断所述T1是否大于所述-H;
若所述T1大于所述-H,则确定所述像素点属于所述背景区域,所述T1不大于所述-H,确定所述像素点属于所述未知区域。
6.根据权利要求4所述的方法,其特征在于,
当所述背景色在第三或第四象限时,判断所述T2是否大于所述-L;
若所述T2大于所述-L,则确定所述像素点属于所述前景区域,若所述T2不大于所述-L,则判断所述T1是否小于所述-H;
若所述T1小于所述-H,则确定所述像素点属于所述背景区域;若所述T1不小于所述-H,则确定所述像素点属于所述未知区域。
7.根据权利要求1-3任一项所述的方法,其特征在于,所述根据背景区域平均颜色值,确定属于所述未知区域的像素点是属于所述前景区域还是属于所述背景区域,包括:
针对属于所述未知区域内每一个像素点,计算所述像素点与所述背景区域平均颜色值对应的像素点之间的欧式距离D,并在所述欧式距离D大于第一门限值,或所述欧式距离D小于所述第一门限值,且y-By的绝对值大于第二门限值时,确定所述像素点属于所述前景区域;若所述像素点不满足以上条件,则确定所述像素点属于所述背景区域;其中,所述欧式距离D=(u-Bu)2+(v-Bv)2,所述Bu、Bv和By分别为所述背景区域平均颜色值的蓝色色度分量值、红色色度分量值、亮度分量值,所述y为所述像素点的亮度分量值。
8.根据权利要求1所述的方法,其特征在于,所述背景区域平均颜色值为:
一个固定值,或者上一帧输入图像的背景区域平均颜色值,或者所述输入图像的背景区域平均颜色值。
9.根据权利要求2所述的方法,其特征在于,
所述H为20,所述L为10;或者所述H=α·Bu,所述L=β·Bu,其中,所述Bu为上一帧图像的背景区域平均颜色值的蓝色色度分量值。
10.根据权利要求1所述的方法,其特征在于,在所述确定所述输入图像中的每一个像素点属于所述前景区域、所述背景区域还是所述未知区域之后,所述方法还包括:
获得所述背景区域中的每一个像素点的亮度分量、蓝色色度分量和红色色度分量;
计算所述输入图像的背景区域平均颜色值,其中,所述背景区域平均颜色值包括Bu,Bv和By,所述Bu为所述背景区域中的所有像素点的蓝色色度分量的平均值;所述Bv为所述背景区域中的所有像素点的红色色度分量的平均值;所述By为所述背景区域中的所有像素点的亮度分量的平均值。
11.一种图像处理器,其特征在于,包括:
获取单元,用于获取输入图像中每个像素点的亮度分量和色度分量,所述色度分量包括蓝色色度分量以及红色色度分量;
确定单元,用于对所述输入图像的像素点的色度分量值进行统计,将出现最多的像素点对应的颜色确定为所述输入图像的背景色;
划分单元,用于根据所述确定单元确定的所述背景色将色度坐标系划分为前景区域、背景区域和未知区域;所述色度坐标系由水平的蓝色色度分量轴和竖直的红色色度分量轴构成,且所述蓝色色度分量轴和所述红色色度分量轴将所述色度坐标系分成四个象限,从所述蓝色色度分量轴和所述红色色度分量轴的正方向开始逆时针依次称为第一象限、第二象限、第三象限和第四象限;
所述确定单元,用于确定所述输入图像中的每一个像素点属于所述前景区域、所述背景区域还是所述未知区域;
所述确定单元还用于,根据背景区域平均颜色值,确定属于所述未知区域的像素点是属于所述前景区域还是属于所述背景区域。
12.根据权利要求11所述的图像处理器,其特征在于,
所述色度坐标系由水平的蓝色色度分量轴和竖直的红色色度分量轴构成,
所述未知区域为,曲线L1、曲线L2、所述蓝色色度分量轴以及所述红色色度分量轴围成的闭合区域;其中,所述曲线L1由方程a·u+b·v+H=0确定、所述曲线L2由方程c·u+d·v+L=0确定,所述H的绝对值大于所述L的绝对值;其中,所述a、b、c、d、H、L为常数,所述u为像素点的蓝色色度分量值,所述v为像素点的红色色度分量值。
13.根据权利要求12所述的图像处理器,其特征在于,
所述划分单元还用于,在所述背景色落在第一或第二象限时,将所述背景色所属象限内未知区域上面的区域定义为背景区域;将所述色度坐标系内除所述未知区域和所述背景区域以外的区域定义为前景区域;
所述划分单元还用于,在所述背景色落在第三或第四象限时,将所述背景色所属象限内未知区域下面的区域定义为背景区域;将所述色度坐标系内除所述未知区域和所述背景区域以外的区域定义为前景区域。
14.根据权利要求12或13所述的图像处理器,其特征在于,所述确定单元还包括:计算子单元和判断子单元,
所述判断子单元用于,针对所述输入图像的一个像素点,判断所述像素点是否属于所述背景色所在的象限;
所述确定单元用于,在所述判断子单元判断所述像素点不属于所述背景色所在的象限时,确定所述像素点属于所述前景区域;
所述计算子单元用于,在所述判断子单元判断所述像素点不属于所述背景色所在的象限时,根据所述L1和所述L2,计算获得T1和T2,所述T1=a·u+b·v,所述T2=c·u+d·v;其中,所述u为所述像素点的蓝色色度分量值,所述v为所述像素点的红色色度分量值,所述a、b、c、d为常数。
15.根据权利要求14所述的图像处理器,其特征在于,
所述判断子单元用于,在所述背景色在第一或第二象限时,判断所述T2是否小于所述-L;
所述确定单元用于,在所述判断子单元判断所述T2小于所述-L之后,确定所述像素点属于所述前景区域;
所述判断子单元还用于,在判断所述T2不小于所述-L之后,判断所述T1是否大于所述-H;
所述确定单元用于,在所述判断子单元判断所述T1大于所述-H之后,确定所述像素点属于所述背景区域;
所述确定单元还用于,在所述判断子单元判断所述T1不大于所述-H之后,确定所述像素点属于所述未知区域。
16.根据权利要求14所述的图像处理器,其特征在于,
所述判断子单元用于,在所述背景色在第三或第四象限时,判断所述T2是否大于所述-L;
所述确定单元用于,在所述判断子单元判断所述T2大于所述-L之后,确定所述像素点属于所述前景区域;
所述判断子单元用于,在判断所述T2不大于所述-L之后,判断所述T1是否小于所述-H;
所述确定单元用于,在所述判断子单元判断所述T1小于所述-H之后,确定所述像素点属于所述背景区域;
所述确定单元还用于,在所述判断子单元判断所述T1不小于所述-H之后,确定所述像素点属于所述未知区域。
17.根据权利要求11-13任一项所述的图像处理器,其特征在于,所述确定单元还包括:计算子单元和判断子单元,
所述计算子单元用于,针对属于所述未知区域内每一个像素点,计算所述像素点与所述背景区域平均颜色值对应的像素点之间的欧式距离D,所述欧式距离D=(u-Bu)2+(v-Bv)2,所述Bu、Bv和By分别为所述背景区域平均颜色值的蓝色色度分量值、红色色度分量值、亮度分量值,所述y为所述像素点的亮度分量值;
所述判断子单元用于,判断所述欧式距离D是否大于第一门限值;
所述确定单元用于,在所述判断子单元判断所述欧式距离D大于第一门限值之后,确定所述像素点属于所述前景区域;
所述计算子单元用于,计算y-By的绝对值;
所述确定单元用于,在所述欧式距离D小于所述第一门限值,且所述y-By的绝对值大于第二门限值时,确定所述像素点属于所述前景区域;
所述确定单元用于,在所述欧式距离D不大于第一门限值,且所述像素点不满足:所述欧式距离D小于所述第一门限值,且所述y-By的绝对值大于第二门限值时,确定所述像素点属于所述背景区域。
18.根据权利要求11所述的图像处理器,其特征在于,所述背景区域平均颜色值为:
一个固定值,或者上一帧输入图像的背景区域平均颜色值,或者所述输入图像的背景区域平均颜色值。
19.根据权利要求12所述的图像处理器,其特征在于,所述背景区域平均颜色值为:
所述H为20,所述L为10;或者所述H=α·Bu,所述L=β·Bu,其中,所述Bu为上一帧图像的背景区域平均颜色值的蓝色色度分量值。
20.根据权利要求11所述的图像处理器,其特征在于,所述确定单元还包括:计算子单元,
所述获取单元还用于,在所述划分单元将所述色度坐标系划分为前景区域、背景区域和未知区域之后,获得所述背景区域中的每一个像素点的亮度分量、蓝色色度分量和红色色度分量;
所述计算子单元还用于,计算获得所述图像的背景区域平均颜色值,其中,所述背景区域平均颜色值包括Bu,Bv和By,所述Bu为所述背景区域中的所有像素点的蓝色色度分量的平均值;所述Bv为所述背景区域中的所有像素点的红色色度分量的平均值;所述By为所述背景区域中的所有像素点的亮度分量的平均值。
CN201410040560.XA 2014-01-27 2014-01-27 一种图像处理方法及图像处理器 Active CN104811631B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410040560.XA CN104811631B (zh) 2014-01-27 2014-01-27 一种图像处理方法及图像处理器

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410040560.XA CN104811631B (zh) 2014-01-27 2014-01-27 一种图像处理方法及图像处理器

Publications (2)

Publication Number Publication Date
CN104811631A CN104811631A (zh) 2015-07-29
CN104811631B true CN104811631B (zh) 2018-07-20

Family

ID=53696096

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410040560.XA Active CN104811631B (zh) 2014-01-27 2014-01-27 一种图像处理方法及图像处理器

Country Status (1)

Country Link
CN (1) CN104811631B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105681686A (zh) * 2015-12-31 2016-06-15 北京奇艺世纪科技有限公司 一种图像处理方法和系统
CN105744173B (zh) * 2016-02-15 2019-04-16 Oppo广东移动通信有限公司 一种区分图像前后景区域的方法、装置及移动终端
CN110827287B (zh) * 2018-08-14 2023-06-23 阿里巴巴(上海)有限公司 确定背景色置信度和图像处理的方法、装置及设备
CN112132852B (zh) * 2020-08-28 2022-01-07 稿定(厦门)科技有限公司 基于多背景色统计的自动抠图方法及装置
CN113469393A (zh) * 2021-07-08 2021-10-01 南京领行科技股份有限公司 车辆的显示颜色控制方法、装置、服务器和存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1564198A (zh) * 2004-04-13 2005-01-12 浙江大学 基于感知颜色空间的自然图像抠图方法
CN101588459A (zh) * 2009-06-26 2009-11-25 北京交通大学 一种视频抠像处理方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100319155B1 (ko) * 1999-02-01 2001-12-29 구자홍 신뢰도를 이용한 대표칼라 지정방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1564198A (zh) * 2004-04-13 2005-01-12 浙江大学 基于感知颜色空间的自然图像抠图方法
CN101588459A (zh) * 2009-06-26 2009-11-25 北京交通大学 一种视频抠像处理方法

Also Published As

Publication number Publication date
CN104811631A (zh) 2015-07-29

Similar Documents

Publication Publication Date Title
CN104811631B (zh) 一种图像处理方法及图像处理器
WO2012155525A1 (zh) 视频图像处理方法、装置及设备
CN105894458A (zh) 一种具有人脸的图像处理方法和装置
CN106210883A (zh) 一种视频渲染的方法、设备
CN108009997B (zh) 一种调整图像对比度的方法及装置
TWI532385B (zh) 白平衡處理方法及其處理裝置
WO2019061766A1 (zh) 一种图像处理方法及装置
CN108022223B (zh) 一种基于对数映射函数分块处理融合的色调映射方法
CN106210712A (zh) 一种图像坏点检测及处理方法
CN109686342A (zh) 一种图像处理方法及装置
US8860750B2 (en) Devices and methods for dynamic dithering
CN105574813B (zh) 一种图像处理方法和装置
CN108198146B (zh) 一种降噪方法、设备和计算机可读存储介质
KR20210061258A (ko) 기준 이미지 프레임의 동적 선택을 위한 시스템 및 방법
CN104702964B (zh) 一种图像处理方法及装置
KR20180018748A (ko) 실시간 비디오 향상 방법, 단말, 및 비일시적 컴퓨터 판독가능 저장 매체
TWI376648B (en) Method and device for keeping image background by multiple gauss models
CN104284168A (zh) 图像色彩增强方法及系统
CN108063934B (zh) 图像处理方法及装置、计算机可读存储介质和计算机设备
CN107027017A (zh) 一种图像白平衡的调整方法、装置、图像处理芯片及存储装置
CN107277369B (zh) 图像处理方法、装置、计算机可读存储介质和计算机设备
CN104463812B (zh) 修复在拍摄时受到雨滴干扰的视频图像的方法
CN109003246A (zh) 眼部修图参数检测方法
CN110210283B (zh) 一种基于换装应用的图像处理方法和系统
KR20130000665A (ko) 역광 프레임을 검출하고, 보정하는 방법 및 장치

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20210119

Address after: Room 400, building 5, No.11 Deshengmenwai street, Xicheng District, Beijing 100032 (Desheng Park)

Patentee after: MIGU CULTURE TECHNOLOGY Co.,Ltd.

Address before: 518129 Bantian HUAWEI headquarters office building, Longgang District, Guangdong, Shenzhen

Patentee before: HUAWEI TECHNOLOGIES Co.,Ltd.

TR01 Transfer of patent right