CN107798654B - 图像磨皮方法及装置、存储介质 - Google Patents

图像磨皮方法及装置、存储介质 Download PDF

Info

Publication number
CN107798654B
CN107798654B CN201711112509.5A CN201711112509A CN107798654B CN 107798654 B CN107798654 B CN 107798654B CN 201711112509 A CN201711112509 A CN 201711112509A CN 107798654 B CN107798654 B CN 107798654B
Authority
CN
China
Prior art keywords
image
fusion
buffing
region
buffed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201711112509.5A
Other languages
English (en)
Other versions
CN107798654A (zh
Inventor
陈志军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xiaomi Mobile Software Co Ltd
Original Assignee
Beijing Xiaomi Mobile Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xiaomi Mobile Software Co Ltd filed Critical Beijing Xiaomi Mobile Software Co Ltd
Priority to CN201711112509.5A priority Critical patent/CN107798654B/zh
Publication of CN107798654A publication Critical patent/CN107798654A/zh
Application granted granted Critical
Publication of CN107798654B publication Critical patent/CN107798654B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/04Context-preserving transformations, e.g. by using an importance map
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/50Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20024Filtering details
    • G06T2207/20028Bilateral filtering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20212Image combination
    • G06T2207/20221Image fusion; Image merging

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)

Abstract

本公开是关于一种图像磨皮方法及装置、存储介质,属于图像处理技术领域。所述方法包括:采用双边滤波算法对目标图像中的待磨皮区域进行第一滤波处理,得到第一磨皮图像;采用导向滤波算法对所述目标图像中的所述待磨皮区域进行第二滤波处理,得到第二磨皮图像;将所述第一磨皮图像和所述第二磨皮图像进行图像融合处理,得到目标磨皮图像。本公开解决了相关技术中对图像进行磨皮处理的方式单一,灵活性较低的问题。本公开用于图像磨皮。

Description

图像磨皮方法及装置、存储介质
技术领域
本公开涉及图像处理技术领域,特别涉及一种图像磨皮方法及装置、存储介质。
背景技术
随着图像处理技术的快速发展和人们审美需求的不断提高,利用电子设备提供的各类图像处理软件对图像进行美化处理已经成为了当代人常见的选择。其中,磨皮处理是对图像进行美化处理的一种重要方式。
相关技术中,通常采用双边滤波算法或导向滤波算法对图像进行磨皮处理。相关技术中对图像进行磨皮处理的方式单一,灵活性较低。
发明内容
本公开实施例提供了一种图像磨皮方法及装置、存储介质,可以解决相关技术中的问题。所述技术方案如下:
根据本公开实施例的第一方面,提供一种图像磨皮方法,所述方法包括:
采用双边滤波算法对目标图像中的待磨皮区域进行第一滤波处理,得到第一磨皮图像;
采用导向滤波算法对所述目标图像中的所述待磨皮区域进行第二滤波处理,得到第二磨皮图像;
将所述第一磨皮图像和所述第二磨皮图像进行图像融合处理,得到目标磨皮图像。
可选的,所述采用双边滤波算法对目标图像中的待磨皮区域进行滤波处理,得到第一磨皮图像,包括:
对所述目标图像中的待磨皮区域进行n倍下采样,得到第一中间图像,所述n大于1;
采用所述双边滤波算法对所述第一中间图像中的所述待磨皮区域进行所述第一滤波处理,得到第二中间图像;
对所述第二中间图像中的所述待磨皮区域进行n倍上采样,得到所述第一磨皮图像。
可选的,所述将所述第一磨皮图像和所述第二磨皮图像进行图像融合处理,得到目标磨皮图像,包括:
将所述第一磨皮图像和所述第二磨皮图像按照第一融合比例进行图像融合处理,得到第三磨皮图像;
将所述第三磨皮图像和所述目标图像按照第二融合比例进行图像融合处理,得到所述目标磨皮图像。
可选的,所述将所述第三磨皮图像和所述目标图像按照第二融合比例进行图像融合处理,包括:
计算所述目标图像中每个像素的梯度值;
基于所述每个像素的梯度值,确定所述第二融合比例;
将所述第三磨皮图像和所述目标图像按照所述第二融合比例进行像素融合处理。
可选的,所述基于所述每个像素的梯度值,确定所述第二融合比例,包括:
基于比例计算公式,确定所述第二融合比例,所述第二融合比例为一融合比例矩阵,所述第二融合比例包括所述目标图像中的每个像素与所述第三磨皮图像中的每个像素的融合比例;
其中,所述比例计算公式为:α=(1-G)/255,α为所述第二融合比例,G为梯度矩阵,所述梯度矩阵包括所述目标图像中的每个像素的梯度值。
可选的,所述第一滤波处理和所述第二滤波处理同步执行。
根据本公开实施例的第二方面,提供一种图像磨皮装置,所述装置包括:
第一滤波处理模块,被配置为采用双边滤波算法对目标图像中的待磨皮区域进行第一滤波处理,得到第一磨皮图像;
第二滤波处理模块,被配置为采用导向滤波算法对所述目标图像中的所述待磨皮区域进行第二滤波处理,得到第二磨皮图像;
图像融合模块,被配置为将所述第一磨皮图像和所述第二磨皮图像进行图像融合处理,得到目标磨皮图像。
可选的,所述第一滤波处理模块,包括:
下采样子模块,被配置为对所述目标图像中的待磨皮区域进行n倍下采样,得到第一中间图像,所述n大于1;
第一滤波处理子模块,被配置为采用所述双边滤波算法对所述第一中间图像中的所述待磨皮区域进行所述第一滤波处理,得到第二中间图像;
上采样子模块,被配置为对所述第二中间图像中的所述待磨皮区域进行n倍上采样,得到所述第一磨皮图像。
可选的,所述图像融合模块,包括:
第一图像融合子模块,被配置为将所述第一磨皮图像和所述第二磨皮图像按照第一融合比例进行图像融合处理,得到第三磨皮图像;
第二图像融合子模块,被配置为将所述第三磨皮图像和所述目标图像按照第二融合比例进行图像融合处理,得到所述目标磨皮图像。
可选的,第二图像融合子模块,包括:
计算单元,被配置为计算所述目标图像中每个像素的梯度值;
确定单元,被配置为基于所述每个像素的梯度值,确定所述第二融合比例;
像素融合单元,被配置为将所述第三磨皮图像和所述目标图像按照所述第二融合比例进行像素融合处理。
可选的,所述确定单元,被配置为:
基于比例计算公式,确定所述第二融合比例,所述第二融合比例为一融合比例矩阵,所述第二融合比例包括所述目标图像中的每个像素与所述第三磨皮图像中的每个像素的融合比例;
其中,所述比例计算公式为:α=(1-G)/255,α为所述第二融合比例,G为梯度矩阵,所述梯度矩阵包括所述目标图像中的每个像素的梯度值。
可选的,所述第一滤波处理模块和所述第二滤波处理模块同步执行。
根据本公开实施例的第三方面,提供一种图像磨皮装置,包括:
处理器;
用于存储所述处理器的可执行指令的存储器;
其中,所述处理器被配置为:
采用双边滤波算法对目标图像中的待磨皮区域进行第一滤波处理,得到第一磨皮图像;
采用导向滤波算法对所述目标图像中的所述待磨皮区域进行第二滤波处理,得到第二磨皮图像;
将所述第一磨皮图像和所述第二磨皮图像进行图像融合处理,得到目标磨皮图像。
根据本公开实施例的第四方面,提供一种存储介质,当所述存储介质中的指令由终端的处理组件执行时,使得所述终端能够执行第一方面任一所述的图像磨皮方法。
本公开的实施例提供的技术方案可以包括以下有益效果:
本公开实施例提供的图像磨皮方法,分别采用双边滤波算法和导向滤波算法对目标图像中的待磨皮区域进行滤波处理,并将处理得到的两个磨皮图像进行图像融合处理,得到最终的目标磨皮图像,改善了图像磨皮效果,丰富了图像磨皮的方式,提高了图像磨皮的灵活性。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性的,并不能限制本公开。
附图说明
为了更清楚地说明本公开的实施例,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本公开的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1-1是本公开一示意性实施例提供的一种图像磨皮方法的流程图。
图1-2是本公开一示意性实施例提供的另一种图像磨皮方法的流程图。
图2是本公开一示意性实施例提供的又一种图像磨皮方法的流程图。
图3-1是根据一示例性实施例示出的一种图像磨皮装置的框图。
图3-2是根据一示例性实施例示出的一种第一滤波处理模块的框图。
图3-3是根据一示例性实施例示出的一种图像融合模块的框图。
图3-4是根据一示例性实施例示出的一种第二图像融合子模块的框图。
图4是根据一示例性实施例示出的一种用于图像磨皮的装置的框图。
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
具体实施方式
为了使本公开的目的、技术方案和优点更加清楚,下面将结合附图对本公开作进一步地详细描述,显然,所描述的实施例仅仅是本公开一部份实施例,而不是全部的实施例。基于本公开中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本公开保护的范围。
本公开实施例提供了一种图像磨皮方法,可以解决相关技术中对图像进行磨皮处理的方式单一,灵活性较低的问题,如图1-1所示,该方法可以包括:
步骤101A、采用双边滤波算法对目标图像中的待磨皮区域进行第一滤波处理,得到第一磨皮图像。
步骤102A、采用导向滤波算法对目标图像中的待磨皮区域进行第二滤波处理,得到第二磨皮图像。
步骤103A、将第一磨皮图像和第二磨皮图像进行图像融合处理,得到目标磨皮图像。
综上所述,本公开实施例提供的图像磨皮方法,分别采用双边滤波算法和导向滤波算法对目标图像中的待磨皮区域进行滤波处理,并将处理得到的两个磨皮图像进行图像融合处理,得到最终的目标磨皮图像,改善了图像磨皮效果,丰富了图像磨皮的方式,提高了图像磨皮的灵活性。
进一步的,本公开实施例提供了另一种图像磨皮方法,如图1-2所示,该方法可以包括:
步骤101B、对目标图像中的待磨皮区域进行n倍下采样,得到第一中间图像,n>1。
步骤102B、采用双边滤波算法对目标图像中的待磨皮区域进行第一滤波处理,得到第二中间图像。
步骤103B、对第二中间图像中的待磨皮区域进行n倍上采样,得到第一磨皮图像。
步骤104B、采用导向滤波算法对目标图像中的待磨皮区域进行第二滤波处理,得到第二磨皮图像。
步骤105B、将第一磨皮图像和第二磨皮图像进行图像融合处理,得到目标磨皮图像。
综上所述,本公开实施例提供的图像磨皮方法,先对待磨皮区域进行n倍下采样,再采用双边滤波算法对待磨皮区域进行第一滤波处理,可以提高第一滤波处理的速度,对第一滤波处理后的第二中间图像中的待磨皮区域进行n倍上采样,可以还原待磨皮区域的分辨率,将得到的第一磨皮图像和进行第二滤波处理得到的第二磨皮图像进行图像融合处理,得到的目标磨皮图像的磨皮效果优于第二磨皮图像,因此,本公开实施例提供的图像磨皮方法,与基于双边滤波算法的图像磨皮方法相比效率更高,与基于导向滤波算法的图像磨皮方法相比磨皮效果更好,提高了图像磨皮的灵活性。
图2是本公开一示意性实施例提供的一种图像磨皮方法的流程图,如图2所示,该方法可以包括:
步骤201、获取目标图像。
可选的,目标图像可以是终端的图库中已保存的图像,也可以是通过终端的摄像组件拍摄得到的图像。在本公开实施例中,当图像磨皮软件打开后,终端可以通过图像磨皮软件获取目标图像。
步骤202、确定目标图像中的待磨皮区域。
可选的,待磨皮区域可以为人脸区域,则相应的,可以采用人脸检测算法确定目标图像中的待磨皮区域,例如,先检测目标图像中是否存在人脸,当确定目标图像中存在人脸时,获取人脸区域的位置,即获取目标图像中的待磨皮区域。其中,人脸检测算法包括多种,例如基于直方图粗分割和奇异值特征的人脸检测算法、基于二进小波变换的人脸检测算法、基于AdaBoost算法的人脸检测算法和基于面部双眼结构特征的人脸检测算法等,本公开实施例对所采用的人脸检测算法不做限定。
步骤203、对目标图像中的待磨皮区域进行n倍下采样,得到第一中间图像。
其中,n大于1,n可以为整数,也可以不为整数,本公开实施例对此不做限定。可选的,可以采用双线性差值算法对目标图像中的待磨皮区域进行n倍下采样,得到第一中间图像。
示例的,假设n=4,目标图像中的待磨皮区域的像素分辨率为M×N,则采用双线性差值算法对目标图像中的待磨皮区域进行4倍下采样之后,得到的第一中间图像中的待磨皮区域的像素分辨率为
Figure BDA0001465564990000061
即得到的第一中间图像中的待磨皮区域的像素分辨率为目标图像中的待磨皮区域的像素分辨率的16分之一。
可选的,还可以采用其他算法对目标图像中的待磨皮区域进行下采样,例如还可以采用最近邻算法对目标图像中的待磨皮区域进行下采样,本公开实施例对此不做限定。
步骤204、采用双边滤波算法对第一中间图像中的待磨皮区域进行第一滤波处理,得到第二中间图像。
双边滤波(英文:Bilateral filter)是一种非线性的滤波方法,是结合图像的空间邻近度和像素值相似度的一种折中处理,同时考虑空域信息和灰度相似性,达到保边去噪的目的。具有简单、非迭代和局部性的特点。
可选的,双边滤波函数表达式可以为:
Figure BDA0001465564990000071
其中,g(i,j)是像素(i,j)的输出值,(k,l)是像素(i,j)的邻域像素的位置,f(k,l)是邻域像素的像素值,w(i,j,k,l)表示权重系数,权重系数具体可以表示为:
Figure BDA0001465564990000072
是空间定义域滤波核函数,
Figure BDA0001465564990000073
是位置,
Figure BDA0001465564990000074
是值域滤波核函数,
Figure BDA0001465564990000075
是灰度值方差,f(i,j)是像素(i,j)的像素值。
实际应用中,双边滤波函数表达式还可以为其他表达式,采用双边滤波算法对第一中间图像中的待磨皮区域进行第一滤波处理的具体方式可以参考现有技术,本公开实施例在此不做赘述。
需要说明的是,先对待磨皮区域进行n倍下采样,再采用双边滤波算法对待磨皮区域进行滤波处理,可以使滤波处理的时间缩短至原来的n2分之一,极大地提高了双边滤波处理的速度。
步骤205、对第二中间图像中的待磨皮区域进行n倍上采样,得到第一磨皮图像。
需要说明的是,对第二中间图像中的待磨皮区域进行n倍上采样所采用的算法与对目标图像中的待磨皮区域进行n倍下采样所采用的算法相同。例如,步骤203中采用双线性差值算法对目标图像中的待磨皮区域进行n倍下采样,则步骤205中也相应采用双线性差值算法对第二中间图像中的待磨皮区域进行n倍上采样,得到第一磨皮图像。
示例的,参考步骤203中的例子,假设第二中间图像中的待磨皮区域的像素分辨率为
Figure BDA0001465564990000081
则采用双线性差值算法对第二中间图像中的待磨皮区域进行4倍上采样后,得到的第一磨皮图像中的待磨皮区域的像素分辨率为M×N,即得到的第一磨皮图像中的待磨皮区域的像素分辨率与目标图像中的待磨皮区域的像素分辨率相同,以保证得到的第一磨皮图像的图像质量。
步骤206、采用导向滤波算法对目标图像中的待磨皮区域进行第二滤波处理,得到第二磨皮图像。
可选的,导向滤波函数表达式可以表示为:
Figure BDA0001465564990000082
其中,q是输出像素的值,I是输入像素的值,i和k是像素索引,a和b是当窗口的中心位于k时,该导向滤波函数表达式的系数,ak和bk的表达式分别可以为:
Figure BDA0001465564990000083
其中,ε为一常数系数,μk是I在窗口中的平均值,
Figure BDA0001465564990000084
是I在窗口中的方差,|w|是窗口中像素的数量,
Figure BDA0001465564990000085
是待磨皮区域在窗口中的均值。
需要说明的是,采用导向滤波算法对目标图像中的待磨皮区域进行第二滤波处理的具体方式可以参考现有技术,本公开实施例在此不做赘述。
可选的,上述第一滤波处理和第二滤波处理可以同步执行,以提高图像磨皮的速度。
步骤207、将第一磨皮图像和第二磨皮图像按照第一融合比例进行图像融合处理,得到第三磨皮图像。
需要说明的是,一般情况下,图像融合由低到高分为三个层次:数据级融合、特征级融合、决策级融合。数据级融合也称像素级融合,是指直接对传感器采集的数据进行处理而获得融合图像的过程,它是高层次图像融合的基础,也是目前图像融合研究的重点之一。像素级融合的优点是保持尽可能多的现场原始数据,能够提供其它融合层次所不能提供的细微信息。
可选的,可以将第一磨皮图像和第二磨皮图像按照第一融合比例进行像素融合处理,得到第三磨皮图像。示例的,假设第一磨皮图像的像素矩阵为B1,第二磨皮图像的像素矩阵为B2,第一融合比例为β,则得到的第三磨皮图像的像素矩阵B可以表示为:
B=β*B1+(1-β)*B2
可选的,第一融合比例可以根据实际需求确定,例如可以根据多次训练得到的结果确定,第一融合比例可以为0.5。
需要说明的是,将第一磨皮图像和第二磨皮图像进行图像融合处理得到的第三磨皮图像,与第一磨皮图像或第二磨皮图像相比,图像的磨皮效果较好。
步骤208、将第三磨皮图像和目标图像按照第二融合比例进行图像融合处理,得到目标磨皮图像。
在本公开实施例中,可以将第三磨皮图像和目标图像按照第二融合比例进行像素融合处理,以保证得到的目标磨皮图像的纹理,提高目标磨皮图像中的细节度。
示例的,假设目标图像的像素矩阵为A,第三磨皮图像的像素矩阵为B,第二融合比例为α,则得到的第三磨皮图像的像素矩阵C可以表示为:
C=α*A+(1-α)*B。
一方面,第二融合比例可以根据实际需求确定,例如可以根据多次训练得到的结果确定,第二融合比例可以为0.5。另一方面,可以计算目标图像中每个像素的梯度值;并基于每个像素的梯度值,确定第二融合比例。
可选的,基于每个像素的梯度值,确定第二融合比例的方法可以包括:
基于比例计算公式,确定第二融合比例,该第二融合比例为一融合比例矩阵,该第二融合比例包括目标图像中的每个像素与第三磨皮图像中的每个像素的融合比例。其中,比例计算公式可以为:α=(1-G)/255,α为第二融合比例,G为梯度矩阵,该梯度矩阵包括目标图像中的每个像素的梯度值。
需要说明的是,上述比例计算公式还可以为其他公式,使得第二融合比例α与梯度矩阵G存在关联性即可,本公开实施例对比例计算公式的形式不做限定。
可选的,以目标图像的宽度所在方向为x轴,以目标图像的高度所在方向为y轴,建立一平面直角坐标系,则目标图像中的某一像素的梯度G1=dx(i,j)+dy(i,j),其中,dx(i,j)=I(i+1,j)-I(i,j),dy(i,j)=I(i,j+1)-I(i,j),或者,dx(i,j)=[I(i+1,j)-I(i-1,j)]/2,dy(i,j)=[I(i,j+1)-I(i,j-1)]/2,I为目标图像中的像素的像素值(例如红色像素值、绿色像素值和蓝色像素值),(i,j)为该某一像素的坐标。计算目标图像中的像素的梯度值的方式还可以为其他方式,在此仅做示例性说明。
实际应用中,可以计算目标图像的待磨皮区域中每个像素的梯度值,以确定目标图像的待磨皮区域中每个像素与第三磨皮图像中进行滤波处理后的区域中每个像素的融合比例,在将第三磨皮图像和目标图像按照第二融合比例进行像素融合处理时,即将第三磨皮图像中进行滤波处理后的区域中每个像素与目标图像的待磨皮区域中每个像素按照确定的融合比例一一进行像素融合。由于第三磨皮图像中未进行滤波处理的区域与目标图像中除待磨皮区域以外的区域的特征完全相同,因此在对该部分区域进行融合处理时,保证二者的融合比例之和为1即可,无需计算该部分区域内的像素的梯度值,可以减少运算量,提高图像磨皮的速度。
需要说明的是,本公开实施例提供的图像磨皮方法步骤的先后顺序可以进行适当调整,例如,步骤206可以在步骤203之前,步骤206也可以与步骤203至步骤205同时执行,步骤也可以根据情况进行相应增减,任何熟悉本技术领域的技术人员在本公开揭露的技术范围内,可轻易想到变化的方法,都应涵盖在本公开的保护范围之内,因此不再赘述。
综上所述,本公开实施例提供的图像磨皮方法,分别采用双边滤波算法和导向滤波算法对目标图像中的待磨皮区域进行滤波处理,并将处理得到的两个磨皮图像进行图像融合处理,得到最终的目标磨皮图像,改善了图像磨皮效果,丰富了图像磨皮的方式,提高了图像磨皮的灵活性;进一步的,在采用双边滤波算法之前,可以先对待磨皮区域进行n倍下采样,以提高双边滤波的处理速度,且第一滤波处理和第二滤波处理可以同时执行,进一步地提高了图像磨皮的速度。
图3-1是根据一示例性实施例示出的一种图像磨皮装置30的框图,如图3-1所示,该装置30可以包括:
第一滤波处理模块301,被配置为采用双边滤波算法对目标图像中的待磨皮区域进行第一滤波处理,得到第一磨皮图像。
第二滤波处理模块302,被配置为采用导向滤波算法对目标图像中的待磨皮区域进行第二滤波处理,得到第二磨皮图像。
图像融合模块303,被配置为将第一磨皮图像和第二磨皮图像进行图像融合处理,得到目标磨皮图像。
综上所述,本公开实施例提供的图像磨皮装置,分别通过第一滤波处理模块和第二滤波处理模块对目标图像中的待磨皮区域进行滤波处理,并通过图像融合模块将处理得到的两个磨皮图像进行图像融合处理,得到最终的目标磨皮图像,改善了图像磨皮效果,丰富了图像磨皮的方式,提高了图像磨皮的灵活性。
可选的,如图3-2所示,第一滤波处理模块301可以包括:
下采样子模块3011,被配置为对目标图像中的待磨皮区域进行n倍下采样,得到第一中间图像,n大于1。
第一滤波处理子模块3012,被配置为采用双边滤波算法对第一中间图像中的待磨皮区域进行第一滤波处理,得到第二中间图像。
上采样子模块3013,被配置为对第二中间图像中的待磨皮区域进行n倍上采样,得到第一磨皮图像。
可选的,如图3-3所示,图像融合模块303可以包括:
第一图像融合子模块3031,被配置为将第一磨皮图像和第二磨皮图像按照第一融合比例进行图像融合处理,得到第三磨皮图像。
第二图像融合子模块3032,被配置为将第三磨皮图像和目标图像按照第二融合比例进行图像融合处理,得到目标磨皮图像。
可选的,如图3-4所示,第二图像融合子模块3032可以包括:
计算单元32a,被配置为计算目标图像中每个像素的梯度值。
确定单元32b,被配置为基于每个像素的梯度值,确定第二融合比例。
像素融合单元32c,被配置为将第三磨皮图像和目标图像按照第二融合比例进行像素融合处理。
其中,确定单元可以被配置为:
基于比例计算公式,确定第二融合比例,第二融合比例为一融合比例矩阵,第二融合比例包括目标图像中的每个像素与第三磨皮图像中的每个像素的融合比例;其中,比例计算公式为:α=(1-G)/255,α为第二融合比例,G为梯度矩阵,梯度矩阵包括目标图像中的每个像素的梯度值。
可选的,第一滤波处理模块和第二滤波处理模块同步执行。
综上所述,本公开实施例提供的图像磨皮装置,分别通过第一滤波处理模块和第二滤波处理模块对目标图像中的待磨皮区域进行滤波处理,并通过图像融合模块将处理得到的两个磨皮图像进行图像融合处理,得到最终的目标磨皮图像,改善了图像磨皮效果,丰富了图像磨皮的方式,提高了图像磨皮的灵活性。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
本公开实施例提供了一种图像磨皮装置,包括:
处理器;
用于存储所述处理器的可执行指令的存储器;
其中,所述处理器被配置为:
采用双边滤波算法对目标图像中的待磨皮区域进行第一滤波处理,得到第一磨皮图像;
采用导向滤波算法对所述目标图像中的所述待磨皮区域进行第二滤波处理,得到第二磨皮图像;
将所述第一磨皮图像和所述第二磨皮图像进行图像融合处理,得到目标磨皮图像。
图4是根据一示例性实施例示出的一种用于图像磨皮的装置400的框图。例如,装置400可以是移动电话,计算机,数字广播终端,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备,个人数字助理等。
参照图4,装置400可以包括以下一个或多个组件:处理组件402,存储器404,电源组件406,多媒体组件408,音频组件410,输入/输出(I/O)的接口412,传感器组件414,以及通信组件416。
处理组件402通常控制装置400的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件402可以包括一个或多个处理器420来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件402可以包括一个或多个模块,便于处理组件402和其他组件之间的交互。例如,处理组件402可以包括多媒体模块,以方便多媒体组件408和处理组件402之间的交互。
存储器404被配置为存储各种类型的数据以支持在装置400的操作。这些数据的示例包括用于在装置400上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器404可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电源组件406为装置400的各种组件提供电力。电源组件406可以包括电源管理系统,一个或多个电源,及其他与为装置400生成、管理和分配电力相关联的组件。
多媒体组件408包括在所述装置400和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件408包括一个前置摄像头和/或后置摄像头。当装置400处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件410被配置为输出和/或输入音频信号。例如,音频组件410包括一个麦克风(MIC),当装置400处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器404或经由通信组件416发送。在一些实施例中,音频组件410还包括一个扬声器,用于输出音频信号。
I/O接口412为处理组件402和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件414包括一个或多个传感器,用于为装置400提供各个方面的状态评估。例如,传感器组件414可以检测到装置400的打开/关闭状态,组件的相对定位,例如所述组件为装置400的显示器和小键盘,传感器组件414还可以检测装置400或装置400一个组件的位置改变,用户与装置400接触的存在或不存在,装置400方位或加速/减速和装置400的温度变化。传感器组件414可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件414还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件414还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件416被配置为便于装置400和其他设备之间有线或无线方式的通信。装置400可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信组件416经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件416还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,装置400可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器404,上述指令可由装置400的处理器420执行以完成上述方法。例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
本公开实施例提供了一种存储介质,当所述存储介质中的指令由终端的处理组件执行时,使得所述终端能够执行以上任一所述的图像磨皮方法。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (8)

1.一种图像磨皮方法,其特征在于,所述方法包括:
确定目标图像中的待磨皮区域,其中,当所述目标图像中存在人脸时,将人脸区域作为待磨皮区域;
采用双边滤波算法对所述目标图像中的待磨皮区域进行第一滤波处理,得到第一磨皮图像;
采用导向滤波算法对所述目标图像中的所述待磨皮区域进行第二滤波处理,得到第二磨皮图像;
将所述第一磨皮图像和所述第二磨皮图像进行图像融合处理,得到目标磨皮图像;
其中,所述第一滤波处理和所述第二滤波处理同步执行;
所述将所述第一磨皮图像和所述第二磨皮图像进行图像融合处理,得到目标磨皮图像,包括:
将所述第一磨皮图像和所述第二磨皮图像按照第一融合比例进行图像融合处理,得到第三磨皮图像;
将所述第三磨皮图像和所述目标图像按照第二融合比例进行图像融合处理,得到所述目标磨皮图像;
其中,所述将所述第三磨皮图像和所述目标图像按照第二融合比例进行图像融合处理,包括:
计算所述目标图像的待磨皮区域中每个像素的梯度值;基于所述每个像素的梯度值,确定所述第二融合比例;将所述第三磨皮图像的进行滤波处理后的区域和所述目标图像的待磨皮区域按照所述第二融合比例进行像素融合处理;
以及将所述第三磨皮图像中未进行滤波处理的区域和所述目标图像中除所述待磨皮区域以外的区域进行图像融合处理,并保证二者融合比例之和为1。
2.根据权利要求1所述的方法,其特征在于,所述采用双边滤波算法对目标图像中的待磨皮区域进行第一滤波处理,得到第一磨皮图像,包括:
对所述目标图像中的待磨皮区域进行n倍下采样,得到第一中间图像,所述n大于1;
采用所述双边滤波算法对所述第一中间图像中的所述待磨皮区域进行所述第一滤波处理,得到第二中间图像;
对所述第二中间图像中的所述待磨皮区域进行n倍上采样,得到所述第一磨皮图像。
3.根据权利要求1所述的方法,其特征在于,
所述基于所述每个像素的梯度值,确定所述第二融合比例,包括:
基于比例计算公式,确定所述第二融合比例,所述第二融合比例为一融合比例矩阵,所述第二融合比例包括所述目标图像中的每个像素与所述第三磨皮图像中的每个像素的融合比例;
其中,所述比例计算公式为:α=(1-G)/255,α为所述第二融合比例,G为梯度矩阵,所述梯度矩阵包括所述目标图像中的每个像素的梯度值。
4.一种图像磨皮装置,其特征在于,所述装置包括:
第一滤波处理模块,被配置为确定目标图像中的待磨皮区域,其中,当所述目标图像中存在人脸时,将人脸区域作为待磨皮区域;采用双边滤波算法对所述目标图像中的待磨皮区域进行第一滤波处理,得到第一磨皮图像;
第二滤波处理模块,被配置为采用导向滤波算法对所述目标图像中的所述待磨皮区域进行第二滤波处理,得到第二磨皮图像;
图像融合模块,被配置为将所述第一磨皮图像和所述第二磨皮图像进行图像融合处理,得到目标磨皮图像;
其中,所述图像融合模块,包括:
第一图像融合子模块,被配置为将所述第一磨皮图像和所述第二磨皮图像按照第一融合比例进行图像融合处理,得到第三磨皮图像;
第二图像融合子模块,被配置为将所述第三磨皮图像和所述目标图像按照第二融合比例进行图像融合处理,得到所述目标磨皮图像;
其中,所述第二图像融合子模块,包括:
计算单元,被配置为计算所述目标图像的待磨皮区域中每个像素的梯度值;
确定单元,被配置为基于所述每个像素的梯度值,确定所述第二融合比例;
像素融合单元,被配置为将所述第三磨皮图像的进行滤波处理后的区域和所述目标图像的待磨皮区域按照所述第二融合比例进行像素融合处理;以及将所述第三磨皮图像中未进行滤波处理的区域和所述目标图像中除所述待磨皮区域以外的区域进行图像融合处理,并保证二者融合比例之和为1;
其中,所述第一滤波处理模块和所述第二滤波处理模块同步执行。
5.根据权利要求4所述的装置,其特征在于,所述第一滤波处理模块,包括:
下采样子模块,被配置为对所述目标图像中的待磨皮区域进行n倍下采样,得到第一中间图像,所述n大于1;
第一滤波处理子模块,被配置为采用所述双边滤波算法对所述第一中间图像中的所述待磨皮区域进行所述第一滤波处理,得到第二中间图像;
上采样子模块,被配置为对所述第二中间图像中的所述待磨皮区域进行n倍上采样,得到所述第一磨皮图像。
6.根据权利要求4所述的装置,其特征在于,所述确定单元,还被配置为:
基于比例计算公式,确定所述第二融合比例,所述第二融合比例为一融合比例矩阵,所述第二融合比例包括所述目标图像中的每个像素与所述第三磨皮图像中的每个像素的融合比例;
其中,所述比例计算公式为:α=(1-G)/255,α为所述第二融合比例,G为梯度矩阵,所述梯度矩阵包括所述目标图像中的每个像素的梯度值。
7.一种图像磨皮装置,其特征在于,包括:
处理器;
用于存储所述处理器的可执行指令的存储器;
其中,所述处理器被配置为:
确定目标图像中的待磨皮区域,其中,当所述目标图像中存在人脸时,将人脸区域作为待磨皮区域;
采用双边滤波算法对目标图像中的待磨皮区域进行第一滤波处理,得到第一磨皮图像;
采用导向滤波算法对所述目标图像中的所述待磨皮区域进行第二滤波处理,得到第二磨皮图像;
其中,所述第一滤波处理和所述第二滤波处理同步执行;
将所述第一磨皮图像和所述第二磨皮图像进行图像融合处理,得到目标磨皮图像;
其中,所述将所述第一磨皮图像和所述第二磨皮图像进行图像融合处理,得到目标磨皮图像,包括:
将所述第一磨皮图像和所述第二磨皮图像按照第一融合比例进行图像融合处理,得到第三磨皮图像;
将所述第三磨皮图像和所述目标图像按照第二融合比例进行图像融合处理,得到所述目标磨皮图像;
其中,所述将所述第三磨皮图像和所述目标图像按照第二融合比例进行图像融合处理,包括:
计算所述目标图像的待磨皮区域中每个像素的梯度值;基于所述每个像素的梯度值,确定所述第二融合比例;将所述第三磨皮图像的进行滤波处理后的区域和所述目标图像的待磨皮区域按照所述第二融合比例进行像素融合处理;
以及将所述第三磨皮图像中未进行滤波处理的区域和所述目标图像中除所述待磨皮区域以外的区域进行图像融合处理,并保证二者融合比例之和为1。
8.一种存储介质,其特征在于,当所述存储介质中的指令由终端的处理组件执行时,使得所述终端能够执行权利要求1至3任一项所述的图像磨皮方法。
CN201711112509.5A 2017-11-13 2017-11-13 图像磨皮方法及装置、存储介质 Active CN107798654B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711112509.5A CN107798654B (zh) 2017-11-13 2017-11-13 图像磨皮方法及装置、存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711112509.5A CN107798654B (zh) 2017-11-13 2017-11-13 图像磨皮方法及装置、存储介质

Publications (2)

Publication Number Publication Date
CN107798654A CN107798654A (zh) 2018-03-13
CN107798654B true CN107798654B (zh) 2022-04-26

Family

ID=61534942

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711112509.5A Active CN107798654B (zh) 2017-11-13 2017-11-13 图像磨皮方法及装置、存储介质

Country Status (1)

Country Link
CN (1) CN107798654B (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110572692A (zh) * 2018-06-06 2019-12-13 中国电信股份有限公司 直播视频美颜方法和装置、计算机可读存储介质
CN109064414B (zh) * 2018-07-06 2020-11-10 维沃移动通信有限公司 一种图像去噪方法及装置
CN108961156B (zh) * 2018-07-26 2023-03-14 北京小米移动软件有限公司 人脸图像处理的方法及装置
CN110895789B (zh) * 2018-09-13 2023-05-02 杭州海康威视数字技术股份有限公司 一种人脸美颜方法及装置
CN109377454A (zh) * 2018-09-25 2019-02-22 广州华多网络科技有限公司 一种图像处理方法、装置、设备、存储介质及直播方法
CN109741269B (zh) * 2018-12-07 2020-11-24 广州华多网络科技有限公司 图像处理方法、装置、计算机设备和存储介质
CN109829864B (zh) * 2019-01-30 2021-05-18 北京达佳互联信息技术有限公司 图像处理方法、装置、设备及存储介质
CN110956592B (zh) * 2019-11-14 2023-07-04 北京达佳互联信息技术有限公司 图像处理方法、装置、电子设备和存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101276464A (zh) * 2007-03-26 2008-10-01 株式会社东芝 图像处理装置及方法
CN102158653A (zh) * 2011-05-03 2011-08-17 东华大学 一种实时高动态范围数字图像获取装置及方法
CN106485720A (zh) * 2016-11-03 2017-03-08 广州视源电子科技股份有限公司 图像处理方法和装置
CN106664370A (zh) * 2014-09-30 2017-05-10 富士胶片株式会社 图像处理装置、滤波器获取装置、图像处理方法、滤波器获取方法、程序及记录介质

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4431607B2 (ja) * 2007-11-08 2010-03-17 シャープ株式会社 画像処理装置、画像形成装置、画像処理方法、コンピュータプログラム及び記録媒体
CN101404082B (zh) * 2008-11-14 2011-02-02 深圳市迅雷网络技术有限公司 一种人像磨皮方法和装置
JP2012247874A (ja) * 2011-05-25 2012-12-13 Sony Corp 画像処理装置および方法
US9571810B2 (en) * 2011-12-23 2017-02-14 Mediatek Inc. Method and apparatus of determining perspective model for depth map generation by utilizing region-based analysis and/or temporal smoothing
CN102831601A (zh) * 2012-07-26 2012-12-19 中北大学 基于联合相似性测度和自适应支持权重的立体匹配方法
CN104517265B (zh) * 2014-11-06 2017-06-13 福建天晴数码有限公司 智能磨皮方法和装置
CN105512605B (zh) * 2015-11-23 2018-12-25 小米科技有限责任公司 人脸图像处理方法及装置
JP2017102642A (ja) * 2015-12-01 2017-06-08 カシオ計算機株式会社 画像処理装置、画像処理方法及びプログラム
US10223772B2 (en) * 2016-03-22 2019-03-05 Algolux Inc. Method and system for denoising and demosaicing artifact suppression in digital images
CN106447620B (zh) * 2016-08-26 2019-10-29 北京金山猎豹科技有限公司 人脸图像磨皮方法、装置以及终端设备
CN106447638A (zh) * 2016-09-30 2017-02-22 北京奇虎科技有限公司 一种美颜处理方法及装置
CN106920211A (zh) * 2017-03-09 2017-07-04 广州四三九九信息科技有限公司 美颜处理方法、装置以及终端设备

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101276464A (zh) * 2007-03-26 2008-10-01 株式会社东芝 图像处理装置及方法
CN102158653A (zh) * 2011-05-03 2011-08-17 东华大学 一种实时高动态范围数字图像获取装置及方法
CN106664370A (zh) * 2014-09-30 2017-05-10 富士胶片株式会社 图像处理装置、滤波器获取装置、图像处理方法、滤波器获取方法、程序及记录介质
CN106485720A (zh) * 2016-11-03 2017-03-08 广州视源电子科技股份有限公司 图像处理方法和装置

Also Published As

Publication number Publication date
CN107798654A (zh) 2018-03-13

Similar Documents

Publication Publication Date Title
CN107798654B (zh) 图像磨皮方法及装置、存储介质
CN110675310B (zh) 视频处理方法、装置、电子设备及存储介质
CN107798669B (zh) 图像去雾方法、装置及计算机可读存储介质
EP3770847A1 (en) Method and device for processing image, and storage medium
CN108898546B (zh) 人脸图像处理方法、装置及设备、可读存储介质
CN109658401B (zh) 图像处理方法及装置、电子设备和存储介质
CN109345485B (zh) 一种图像增强方法、装置、电子设备及存储介质
CN105469356B (zh) 人脸图像处理方法及装置
CN110580688B (zh) 一种图像处理方法、装置、电子设备及存储介质
CN107730448B (zh) 基于图像处理的美颜方法及装置
CN109784164B (zh) 前景识别方法、装置、电子设备及存储介质
CN107944367B (zh) 人脸关键点检测方法及装置
CN105528765B (zh) 处理图像的方法及装置
CN109784327B (zh) 边界框确定方法、装置、电子设备及存储介质
CN109509195B (zh) 前景处理方法、装置、电子设备及存储介质
CN112330570A (zh) 图像处理方法、装置、电子设备及存储介质
EP3813010B1 (en) Facial image enhancement method, device and electronic device
CN112188091B (zh) 人脸信息识别方法、装置、电子设备及存储介质
CN113706421A (zh) 一种图像处理方法及装置、电子设备和存储介质
CN110728180B (zh) 图像处理方法、装置及存储介质
CN108961156B (zh) 人脸图像处理的方法及装置
CN109544490B (zh) 图像增强方法、装置和计算机可读存储介质
CN107730443B (zh) 图像处理方法、装置及用户设备
CN110807745B (zh) 图像处理方法及装置、电子设备
CN106469446B (zh) 深度图像的分割方法和分割装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant