CN107563979B - 图像处理方法、装置、计算机可读存储介质和计算机设备 - Google Patents

图像处理方法、装置、计算机可读存储介质和计算机设备 Download PDF

Info

Publication number
CN107563979B
CN107563979B CN201710775164.5A CN201710775164A CN107563979B CN 107563979 B CN107563979 B CN 107563979B CN 201710775164 A CN201710775164 A CN 201710775164A CN 107563979 B CN107563979 B CN 107563979B
Authority
CN
China
Prior art keywords
area
face
face area
depth
value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201710775164.5A
Other languages
English (en)
Other versions
CN107563979A (zh
Inventor
丁佳铭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201710775164.5A priority Critical patent/CN107563979B/zh
Publication of CN107563979A publication Critical patent/CN107563979A/zh
Application granted granted Critical
Publication of CN107563979B publication Critical patent/CN107563979B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

本发明涉及一种图像处理方法、装置、计算机可读存储介质和计算机设备。上述方法包括:分别获取图像中多个人脸区域中每个人脸区域的参数值;根据所述多个人脸区域中每个人脸区域的参数值选取目标人脸区域;获取所述目标人脸区域的第一景深值,以所述第一景深值为阈值对图像进行虚化处理。上述方法,在检测到图像中存在多个人脸时,从多个人脸中选取目标人脸区域,获取目标人脸区域的景深值,以目标人脸区域的景深值为阈值对图像进行虚化处理。以景深值为界限对图像进行虚化处理可以避免在图像中存在多个人脸时,对图像虚化处理造成人脸误虚化的现象。

Description

图像处理方法、装置、计算机可读存储介质和计算机设备
技术领域
本发明涉及计算机技术领域,特别是涉及一种图像处理方法、装置、计算机可读存储介质和计算机设备。
背景技术
随着智能移动终端的发展,用户采用智能移动终端进行拍照也越来越多。用户在采用智能移动终端进行拍照后,移动终端可对拍摄获取的人像进行虚化。通过虚化的方式,可使得图像中景深变浅、突出图像主体,图像的层次更加明确。对图像进行虚化有多种方式,包括:增大焦距、增大拍摄物与背景的距离、增大光圈、减小镜头与拍摄物的距离等。
发明内容
本申请实施例提供一种图像处理方法、装置、计算机可读存储介质和计算机设备,可以对图像进行虚化处理,凸出图像主体。
一种图像处理方法,包括:
分别获取图像中多个人脸区域中每个人脸区域的参数值;
根据所述多个人脸区域中每个人脸区域的参数值选取目标人脸区域;
获取所述目标人脸区域的第一景深值,以所述第一景深值为阈值对图像进行虚化处理。
一种图像处理装置,包括:
获取模块,用于分别获取图像中多个人脸区域中每个人脸区域的参数值;
选取模块,用于根据所述多个人脸区域中每个人脸区域的参数值选取目标人脸区域;
虚化模块,用于获取所述目标人脸区域的第一景深值,以所述第一景深值为阈值对图像进行虚化处理。
一个或多个包含计算机可执行指令的非易失性计算机可读存储介质,当所述计算机可执行指令被一个或多个处理器执行时,使得所述处理器执行如上所述的图像处理方法。
一种计算机设备,包括存储器及处理器,所述存储器中储存有计算机可读指令,所述指令被所述处理器执行时,使得所述处理器执行如上所述的图像处理方法。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为一个实施例中移动终端10的内部结构示意图;
图2为一个实施例中图像处理方法的流程图;
图3为一个实施例中双摄移动终端获取景深值的示意图;
图4为另一个实施例中图像处理方法的流程图;
图5为另一个实施例中图像中存在多个人脸区域的示意图;
图6为一个实施例中图像处理装置的结构框图;
图7为另一个实施例中图像处理装置的结构框图;
图8为一个实施例中图像处理电路的示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
可以理解,本发明所使用的术语“第一”、“第二”等可在本文中用于描述各种元件,但这些元件不受这些术语限制。这些术语仅用于将第一个元件与另一个元件区分。举例来说,在不脱离本发明的范围的情况下,可以将第一景深值称为第二景深值,且类似地,可将第二景深值称为第一景深值。第一景深值和第二景深值两者都是景深值,但其不是同一景深值。
以计算机设备为移动终端为例。图1为一个实施例中移动终端10的内部结构示意图。如图1所示,该移动终端10包括通过系统总线连接的处理器、非易失性存储介质、内存储器、网络接口、显示屏和输入装置。其中,移动终端10的非易失性存储介质存储有操作系统和计算机可读指令。该计算机可读指令被处理器执行时以实现一种图像处理方法。该处理器用于提供计算和控制能力,支撑整个移动终端10的运行。移动终端10中的内存储器为非易失性存储介质中的计算机可读指令的运行提供环境。网络接口用于与服务器进行网络通信。移动终端10的显示屏可以是液晶显示屏或者电子墨水显示屏等,输入装置可以是显示屏上覆盖的触摸层,也可以是移动终端10外壳上设置的按键、轨迹球或触控板,也可以是外接的键盘、触控板或鼠标等。该移动终端10可以是手机、平板电脑或者个人数字助理或穿戴式设备等。本领域技术人员可以理解,图1中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的移动终端10的限定,具体的移动终端10可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
图2为一个实施例中图像处理方法的流程图。如图2所示,一种图像处理方法,包括步骤202至步骤206。
步骤202,分别获取图像中多个人脸区域中每个人脸区域的参数值。
计算机设备获取到图像后,可通过人脸检测技术检测图像中是否存在人脸,若检测到图像中存在人脸,可进一步提取包含人脸的ROI(Region Of Interest,感兴趣区域)区域。上述图像可为计算机设备在启动拍摄程序后获取的预览图像,也可为存储于计算机设备中图像。通过人脸检测技术获取的图像中包含人脸的ROI区域即人脸区域,上述人脸区域可为多边形区域、圆形区域或椭圆形区域等。
计算机设备若检测到图像中存在两个或两个以上人脸区域时,可分别获取多个人脸区域中每个人脸区域的参数值。上述人脸区域的参数值包括:人脸区域的边长、人脸区域的面积、人脸区域占图像的比例、人脸区域与其它人脸区域的比例等。
步骤204,根据多个人脸区域中每个人脸区域的参数值选取目标人脸区域。
在获取到多个人脸区域中每个人脸区域的参数值后,根据预设规则从多个人脸区域中选取目标人脸区域。上述预设规则可为以下情况中一种或多种:
(1)人脸区域的边长是否小于第一阈值。
(2)人脸区域的面积是否小于第二阈值。
(3)人脸区域占图像的比例是否小于第三阈值。
(4)面积最小人脸区域占面积最大人脸区域的比例是否小于第四阈值。
上述人脸区域的边长是指人脸区域为规则图形时,规则图形的边长。如正方形的边长、长方形的长和宽、三角形的边长等。上述规则仅为举例说明,预设规则还可包括其他规则,不限于此。上述第一阈值、第二阈值、第三阈值与第四阈值可为用户设定的值,上述第一阈值、第二阈值、第三阈值和第四阈值之间数值可相同或不同。
步骤206,获取目标人脸区域的第一景深值,以第一景深值为阈值对图像进行虚化处理。
在获取到目标人脸区域后,计算机设备可获取目标人脸区域对应的景深信息,即第一景深值。可通过以下方式获取上述第一景深值:
当计算机设备为双摄移动终端时,可通过移动终端中两个摄像头各自的传感器分别获取两个摄像头距离目标的距离。如图3所示,移动终端中两个摄像头的主光轴平行,L点为做左摄像头的光心,R点为右摄像头的光心。PL点和PR点所在的线段分别为左右摄像头的像面,光心到像面的最短距离为焦距f。若P为目标点,则P点在左右像面的成像点为PL和PR。PL点和PR点距各自像面的左边缘的距离是XL和XR,则视差d=XR-XL或d=XL-XR。其中Z为目标点P点景深,T为左右摄像头光心之间的距离。则根据三角形相似原理可得:
Figure BDA0001395774190000041
Figure BDA0001395774190000042
Figure BDA0001395774190000051
Figure BDA0001395774190000052
通过上述方法,可获取目标点的景深值,在获取目标人脸区域后,可依次获取目标人脸区域中每个目标点的景深值,得到第一景深值。
当计算机设备为单摄移动终端时,可通过结构光依次获取目标人脸区域中每个目标点的景深值,得到第一景深值。
计算机设备获取到目标人脸区域中每个目标点的景深值后,可得到目标人脸区域的景深值范围,根据目标人脸区域的景深值范围,进一步获取第一景深值。上述第一景深值可为目标人脸区域中景深值的平均值、目标人脸区域中景深值的最小值或目标人脸区域中景深值的最大值。
在获取到第一人脸的第一景深值后,可以第一景深值为阈值对图像进行虚化处理。以第一景深值为阈值包括以下情况中任意一种:
(1)获取整幅图像的景深值,对景深值大于上述第一景深值的区域进行虚化处理。
(2)获取整幅图像的景深值,对景深值小于上述第一景深值的区域进行虚化处理。
对图像进行虚化处理是指对图像使用平滑滤波来进行平滑处理,模糊图像,消除图像中噪声。上述平滑滤波可包括高斯滤波、中值滤波等。采用平滑滤波对图像进行平滑处理即为对图像进行虚化处理。
本申请实施例中图像处理方法,在检测到图像中存在多个人脸时,从多个人脸中选取目标人脸区域,获取目标人脸区域的景深值,以目标人脸区域的景深值为阈值对图像进行虚化处理。以景深值为界限对图像进行虚化处理可以避免在图像中存在多个人脸时,对图像虚化处理造成人脸误虚化的现象。
在一个实施例中,步骤204根据多个人脸区域中每个人脸区域的参数值选取目标人脸区域包括:
(1)根据多个人脸区域中每个人脸区域的参数值选取第一人脸区域。
第一人脸区域为多个人脸区域中面积最大的人脸区域,第一人脸区域也可为多个人脸区域中边长最长的人脸区域。计算机设备在获取到人脸区域后,进一步获取人脸区域的参数值。人脸区域的参数值可包括:人脸区域的边长值、人脸区域的面积值。若人脸区域为规则多边形,可获取人脸区域的边长值。获取人脸区域的边长值的步骤包括:以人脸区域为正方形为例,获取人脸区域的边长所占的像素个数。以人脸区域的边长所占像素的个数作为人脸区域的边长。若人脸区域为不规则图形,例如圆形或椭圆形,获取人脸区域所占的像素个数作为人脸区域的面积。当人脸区域为规则图形时,根据人脸区域的边长可计算获取人脸区域的面积。当人脸区域为不规则图形时,根据人脸区域所占的像素个数确定人脸区域的面积。
(2)若人脸区域的参数值与第一人脸区域的参数值的比值大于预设值,将人脸区域作为第二人脸区域。
计算机设备在获取到第一人脸区域后,可将每个人脸区域的参数值分别与第一人脸区域的参数值比较。具体可包括:将每个人脸区域的面积与第一人脸区域的面积比较、将每个人脸区域的边长与第一人脸区域的边长比较。当人脸区域的参数值与第一人脸区域的参数值的比值大于预设值时,将上述人脸区域作为第二人脸区域。例如,预设值为80%,当图像中人脸区域中面积值与第一人脸区域的面积值的比例大于80%,则将上述人脸区域作为第二人脸区域。
(3)根据第二人脸区域中每个人脸区域的参数值选取目标人脸区域。
在获取第二人脸区域后,计算机设备可从第二人脸区域中选取目标人脸区域。具体包括:获取第二人脸区域中每个人脸区域的参数值,选取第二人脸区域中参数值符合预设规则的人脸区域作为目标人脸区域。上述预设规则可包括:选取第二人脸区域中面积最小的人脸区域作为目标人脸区域;选取第二人脸区域中边长最小的人脸区域作为目标人脸区域;选取第二人脸区域中人脸区域的面积与第一人脸区域的面积比值最小的人脸区域作为目标人脸区域。
本申请实施例中图像处理方法,通过检测图像中人脸区域的参数值来选取目标人脸区域,有利于根据目标人脸区域的景深值对图像进行虚化处理。根据人脸区域参数值,可确定图像中人脸是否为主要人脸,从而对图像进行虚化处理。
在一个实施例中,步骤206获取目标人脸区域的第一景深值包括:
(1)获取目标人脸区域的最小景深值或平均景深值。
(2)将最小景深值或平均景深值作为第一景深值。
计算机设备可获取目标人脸区域中每个像素点的景深值,进而得到目标人脸区域中最小景深值和平均景深值。其中,计算机设备获取目标人脸区域中每个像素点的景深值的步骤与步骤206中算法步骤相同,在此不再赘述。
在获取到目标人脸区域中最小景深值和平均景深值后,可将最小景深值或平均景深值作为第一景深值。即以目标人脸区域中最小景深值为阈值,对景深值大于最小景深值的区域进行虚化处理;以目标人脸区域中平均景深值为阈值,对景深值大于平均景深值的区域进行虚化处理。例如,获取的目标人脸区域中最小景深值为15米,即对图像中景深值大于15米的区域进行虚化处理。
本申请实施例中图像处理方法,采用目标人脸区域的最小景深值或平均景深值作为第一景深值,有利于根据第一景深值划分图像,对图像按区域进行虚化处理,可避免在图像存在多个人脸区域时,对图像进行虚化造成图像主要人脸误虚化的现象。
在一个实施例中,步骤206以第一景深值为阈值对图像进行虚化处理包括:获取图像中景深值大于第一景深值的区域作为背景区域,对背景区域进行虚化处理。
计算机设备可获取目标人脸区域中每个像素点的景深值,进而得到目标人脸区域中最小景深值和平均景深值。其中,计算机设备获取目标人脸区域中每个像素点的景深值的步骤与步骤206中算法步骤相同,在此不再赘述。
在获取到目标人脸区域中最小景深值和平均景深值后,可将最小景深值或平均景深值作为第一景深值。即以目标人脸区域中最小景深值为阈值,对景深值大于最小景深值的区域进行虚化处理;以目标人脸区域中平均景深值为阈值,对景深值大于平均景深值的区域进行虚化处理。例如,获取的目标人脸区域中最小景深值为15米,即对图像中景深值大于15米的区域进行虚化处理。
本申请实施例中图像处理方法,根据第一景深值选取背景区域,对背景区域进行虚化处理,有利于对图像按景深来进行虚化处理,避免图像中靠近镜头的人物被虚化,造成人脸误虚化的现象。
在一个实施例中,上述图像处理方法还包括:
(1)根据预设的虚化参数与景深值的对应关系确定背景区域的虚化参数;
(2)根据虚化参数对背景区域进行虚化处理。
计算机设备中预存有虚化参数与景深值的对应关系。上述虚化参数可为虚化强度,上述对应关系可为列表,曲线图、折线图等,不限于此。在获取到背景区域的景深值后,可将背景区域的景深值由大到小(或有小到大)划分为预设数量等级,按照景深值等级查找对应的虚化强度。例如,背景区域中景深值最大值为20米,景深值最小为10米,则设定图像中景深值10~13米的像素对应第一虚化强度、景深值13~16米的像素对应第二虚化强度、景深值16~20米的像素对应第三虚化强度。采用不同虚化强度对图像进行虚化处理时,虚化处理后图像模糊程度不同。其中,虚化强度越高,对图像虚化处理越强,虚化处理得到的图像越模糊;虚化强度越低,对图像虚化处理越强,虚化处理得到的图像越模糊。
在一个实施例中,景深值与虚化强度为线性关系,在获取到背景区域的景深值后,可根据背景区域中各个像素点的景深值查找对应的虚化强度,进而对图像进行虚化处理。
图4为另一个实施例中图像处理方法的流程图。如图4所示,一种图像处理方法,包括:
步骤402,分别获取图像中多个人脸区域中每个人脸区域的参数值。
步骤404,根据多个人脸区域中每个人脸区域的参数值选取第一人脸区域。
步骤406,若人脸区域的参数值与第一人脸区域的参数值的比值大于预设值,将人脸区域作为第二人脸区域;根据第二人脸区域中每个人脸区域的参数值选取目标人脸区域。
步骤408,获取目标人脸区域的最小景深值或平均景深值,将最小景深值或平均景深值作为第一景深值。
步骤410,获取图像中景深值大于第一景深值的区域作为背景区域,对背景区域进行虚化处理。
步骤412,根据预设的虚化参数与景深值的对应关系确定背景区域的虚化参数,根据虚化参数对背景区域进行虚化处理。
本申请实施例中图像处理方法,在检测到图像中存在多个人脸时,从多个人脸中选取目标人脸区域,获取目标人脸区域的景深值,以目标人脸区域的景深值为阈值对图像进行虚化处理。以景深值为界限对图像进行虚化处理可以避免在图像中存在多个人脸时,对图像虚化处理造成人脸误虚化的现象。
图5为一个实施例中图像中存在多个人脸区域的示意图。如图5所示,图像中存在三个人脸区域,分别为人脸区域502、人脸区域504和人脸区域506。人脸区域502、人脸区域504与人脸区域506均为正方形。计算机设备获取人脸区域502边长所占的像素个数为5万,人脸区域504所占的像素个数为4.5万,人脸区域506所占的像素个数为4.2万。则人脸区域502的面积最大为第一人脸区域。人脸区域504与人脸区域502的面积比值为90%,人脸区域506与人脸区域502的面积比值为70%,上述面积比值均大于预设值65%,则人脸区域504与人脸区域506均为第二人脸区域。从第二人脸区域中选取面积最小的人脸区域506作为目标人脸区域,获取人脸区域506的平均景深值,对图像中景深值大于人脸区域506的平均景深值的区域做虚化处理。
图6为一个实施例中图像处理装置的结构框图。如图6所示,一种图像处理装置,包括:
获取模块602,分别获取图像中多个人脸区域中每个人脸区域的参数值。
计算机设备获取到图像后,可通过人脸检测技术检测图像中是否存在人脸,若检测到图像中存在人脸,可进一步提取包含人脸的ROI(Region Of Interest,感兴趣区域)区域。上述图像可为计算机设备在启动拍摄程序后获取的预览图像,也可为存储于计算机设备中图像。通过人脸检测技术获取的图像中包含人脸的ROI区域即人脸区域,上述人脸区域可为多边形区域、圆形区域或椭圆形区域等。
计算机设备若检测到图像中存在两个或两个以上人脸区域时,可分别获取多个人脸区域中每个人脸区域的参数值。上述人脸区域的参数值包括:人脸区域的边长、人脸区域的面积、人脸区域占图像的比例、人脸区域与其它人脸区域的比例等。
选取模块604,用于根据多个人脸区域中每个人脸区域的参数值选取目标人脸区域。
在获取到多个人脸区域中每个人脸区域的参数值后,根据预设规则从多个人脸区域中选取目标人脸区域。上述预设规则可为以下情况中一种或多种:
(1)人脸区域的边长是否小于第一阈值。
(2)人脸区域的面积是否小于第二阈值。
(3)人脸区域占图像的比例是否小于第三阈值。
(4)面积最小人脸区域占面积最大人脸区域的比例是否小于第四阈值。
上述人脸区域的边长是指人脸区域为规则图形时,规则图形的边长。如正方形的边长、长方形的长和宽、三角形的边长等。上述规则仅为举例说明,预设规则还可包括其他规则,不限于此。上述第一阈值、第二阈值、第三阈值与第四阈值可为用户设定的值,上述第一阈值、第二阈值、第三阈值和第四阈值之间数值可相同或不同。
虚化模块606,用于获取目标人脸区域的第一景深值,以第一景深值为阈值对图像进行虚化处理。
在获取到目标人脸区域后,计算机设备可获取目标人脸区域对应的景深信息,即第一景深值。获取第一景深值的步骤与步骤206相同,在此不再赘述。
计算机设备获取到目标人脸区域中每个目标点的景深值后,可得到目标人脸区域的景深值范围,根据目标人脸区域的景深值范围,进一步获取第一景深值。上述第一景深值可为目标人脸区域中景深值的平均值、目标人脸区域中景深值的最小值或目标人脸区域中景深值的最大值。
在获取到第一人脸的第一景深值后,可以第一景深值为阈值对图像进行虚化处理。以第一景深值为阈值包括以下情况中任意一种:
(1)获取整幅图像的景深值,对景深值大于上述第一景深值的区域进行虚化处理。
(2)获取整幅图像的景深值,对景深值小于上述第一景深值的区域进行虚化处理。
对图像进行虚化处理是指对图像使用平滑滤波来进行平滑处理,模糊图像,消除图像中噪声。上述平滑滤波可包括高斯滤波、中值滤波等。采用平滑滤波对图像进行平滑处理即为对图像进行虚化处理。
在一个实施例中,选取模块604还用于根据多个人脸区域中每个人脸区域的参数值选取第一人脸区域;若人脸区域的参数值与第一人脸区域的参数值的比值大于预设值,将人脸区域作为第二人脸区域;根据第二人脸区域中每个人脸区域的参数值选取目标人脸区域。
第一人脸区域为多个人脸区域中面积最大的人脸区域,第一人脸区域也可为多个人脸区域中边长最长的人脸区域。计算机设备在获取到人脸区域后,进一步获取人脸区域的参数值。人脸区域的参数值可包括:人脸区域的边长值、人脸区域的面积值。若人脸区域为规则多边形,可获取人脸区域的边长值。获取人脸区域的边长值的步骤包括:以人脸区域为正方形为例,获取人脸区域的边长所占的像素个数。以人脸区域的边长所占像素的个数作为人脸区域的边长。若人脸区域为不规则图形,例如圆形或椭圆形,获取人脸区域所占的像素个数作为人脸区域的面积。当人脸区域为规则图形时,根据人脸区域的边长可计算获取人脸区域的面积。当人脸区域为不规则图形时,根据人脸区域所占的像素个数确定人脸区域的面积。
计算机设备在获取到第一人脸区域后,可将每个人脸区域的参数值分别与第一人脸区域的参数值比较。具体可包括:将每个人脸区域的面积与第一人脸区域的面积比较、将每个人脸区域的边长与第一人脸区域的边长比较。当人脸区域的参数值与第一人脸区域的参数值的比值大于预设值时,将上述人脸区域作为第二人脸区域。
在获取第二人脸区域后,计算机设备可从第二人脸区域中选取目标人脸区域。具体包括:获取第二人脸区域中每个人脸区域的参数值,选取第二人脸区域中参数值符合预设规则的人脸区域作为目标人脸区域。上述预设规则可包括:选取第二人脸区域中面积最小的人脸区域作为目标人脸区域;选取第二人脸区域中边长最小的人脸区域作为目标人脸区域;选取第二人脸区域中人脸区域的面积与第一人脸区域的面积比值最小的人脸区域作为目标人脸区域。
在一个实施例中,虚化模块606还用于获取目标人脸区域的最小景深值或平均景深值;将最小景深值或平均景深值作为第一景深值。
计算机设备可获取目标人脸区域中每个像素点的景深值,进而得到目标人脸区域中最小景深值和平均景深值。其中,计算机设备获取目标人脸区域中每个像素点的景深值的步骤与步骤206中算法步骤相同,在此不再赘述。
在获取到目标人脸区域中最小景深值和平均景深值后,可将最小景深值或平均景深值作为第一景深值。即以目标人脸区域中最小景深值为阈值,对景深值大于最小景深值的区域进行虚化处理;以目标人脸区域中平均景深值为阈值,对景深值大于平均景深值的区域进行虚化处理。
在一个实施例中,虚化模块606还用于获取图像中景深值大于第一景深值的区域作为背景区域,对背景区域进行虚化处理。
计算机设备可获取目标人脸区域中每个像素点的景深值,进而得到目标人脸区域中最小景深值和平均景深值。其中,计算机设备获取目标人脸区域中每个像素点的景深值的步骤与步骤206中算法步骤相同,在此不再赘述。
在获取到目标人脸区域中最小景深值和平均景深值后,可将最小景深值或平均景深值作为第一景深值。即以目标人脸区域中最小景深值为阈值,对景深值大于最小景深值的区域进行虚化处理;以目标人脸区域中平均景深值为阈值,对景深值大于平均景深值的区域进行虚化处理。例如,获取的目标人脸区域中最小景深值为15米,即对图像中景深值大于15米的区域进行虚化处理。
图7为另一个实施例中图像处理装置的结构框图。如图7所示,一种图像处理装置,包括获取模块702、选取模块704、虚化模块706和确定模块708。其中,获取模块702、选取模块704、虚化模块706与图6中对应的模块功能相同。
确定模块708,用于根据预设的虚化参数与景深值的对应关系确定背景区域的虚化参数;
虚化模块706还用于根据虚化参数对背景区域进行虚化处理。
计算机设备中预存有虚化参数与景深值的对应关系。上述虚化参数可为虚化强度,上述对应关系可为列表,曲线图、折线图等,不限于此。在获取到背景区域的景深值后,可将背景区域的景深值由大到小(或有小到大)划分为预设数量等级,按照景深值等级查找对应的虚化强度。例如,背景区域中景深值最大值为20米,景深值最小为10米,则设定图像中景深值10~13米的像素对应第一虚化强度、景深值13~16米的像素对应第二虚化强度、景深值16~20米的像素对应第三虚化强度。采用不同虚化强度对图像进行虚化处理时,虚化处理后图像模糊程度不同。其中,虚化强度越高,对图像虚化处理越强,虚化处理得到的图像越模糊;虚化强度越低,对图像虚化处理越强,虚化处理得到的图像越模糊。
在一个实施例中,景深值与虚化强度为线性关系,在获取到背景区域的景深值后,可根据背景区域中各个像素点的景深值查找对应的虚化强度,进而对图像进行虚化处理。
上述图像处理装置中各个模块的划分仅用于举例说明,在其他实施例中,可将图像处理装置按照需要划分为不同的模块,以完成上述图像处理装置的全部或部分功能。
本申请实施例还提供了一种计算机可读存储介质。一个或多个包含计算机可执行指令的非易失性计算机可读存储介质,当计算机可执行指令被一个或多个处理器执行时,使得处理器执行以下步骤:
(1)若检测到图像中存在多个人脸区域,依次获取多个人脸区域的参数值。
(2)根据多个人脸区域中每个人脸区域的参数值选取目标人脸区域。
(3)获取目标人脸区域的第一景深值,以第一景深值为阈值对图像进行虚化处理。
在一个实施例中,参数值包括人脸区域的面积值;根据多个人脸区域中每个人脸区域的参数值选取目标人脸区域包括:获取多个人脸区域的最大面积值和最小面积值;若最小面积值与最大面积值的比值小于预设值,则将最小面积值对应的人脸区域作为目标人脸区域。
在一个实施例中,获取目标人脸区域的第一景深值包括:获取目标人脸区域的最小景深值或平均景深值;将最小景深值或平均景深值作为第一景深值。
在一个实施例中,以第一景深值为阈值对图像进行虚化处理包括:获取图像中景深值大于第一景深值的区域作为背景区域,对背景区域进行虚化处理。
在一个实施例中,还包括:根据预设的虚化参数与景深值的对应关系确定背景区域的虚化参数;根据虚化参数对背景区域进行虚化处理。
本申请实施例还提供一种计算机设备。上述计算机设备中包括图像处理电路,图像处理电路可以利用硬件和/或软件组件实现,可包括定义ISP(Image SignalProcessing,图像信号处理)管线的各种处理单元。图8为一个实施例中图像处理电路的示意图。如图8所示,为便于说明,仅示出与本申请实施例相关的图像处理技术的各个方面。
如图8所示,图像处理电路包括ISP处理器840和控制逻辑器850。成像设备810捕捉的图像数据首先由ISP处理器840处理,ISP处理器840对图像数据进行分析以捕捉可用于确定和/或成像设备810的一个或多个控制参数的图像统计信息。成像设备810可包括具有一个或多个透镜812和图像传感器814的照相机。图像传感器814可包括色彩滤镜阵列(如Bayer滤镜),图像传感器814可获取用图像传感器814的每个成像像素捕捉的光强度和波长信息,并提供可由ISP处理器840处理的一组原始图像数据。传感器820(如陀螺仪)可基于传感器820接口类型把采集的图像处理的参数(如防抖参数)提供给ISP处理器840。传感器820接口可以利用SMIA(Standard Mobile Imaging Architecture,标准移动成像架构)接口、其它串行或并行照相机接口、或上述接口的组合。
此外,图像传感器814也可将原始图像数据发送给传感器820,传感器820可基于传感器820接口类型把原始图像数据提供给ISP处理器840进行处理,或者传感器820将原始图像数据存储到图像存储器830中。
ISP处理器840按多种格式逐个像素地处理原始图像数据。例如,每个图像像素可具有8、10、12或14比特的位深度,ISP处理器840可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中,图像处理操作可按相同或不同的位深度精度进行。
ISP处理器840还可从图像存储器830接收像素数据。例如,传感器820接口将原始图像数据发送给图像存储器830,图像存储器830中的原始图像数据再提供给ISP处理器840以供处理。图像存储器830可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器,并可包括DMA(Direct Memory Access,直接直接存储器存取)特征。
当接收到来自图像传感器814接口或来自传感器820接口或来自图像存储器830的原始图像数据时,ISP处理器840可进行一个或多个图像处理操作,如时域滤波。ISP处理器840处理后的图像数据可发送给图像存储器830,以便在被显示之前进行另外的处理。ISP处理器840从图像存储器830接收处理数据,并对处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。处理后的图像数据可输出给显示器880,以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit,图形处理器)进一步处理。此外,ISP处理器840的输出还可发送给图像存储器830,且显示器880可从图像存储器830读取图像数据。在一个实施例中,图像存储器830可被配置为实现一个或多个帧缓冲器。此外,ISP处理器840的输出可发送给编码器/解码器870,以便编码/解码图像数据。编码的图像数据可被保存,并在显示于显示器880设备上之前解压缩。
ISP处理器840处理后的图像数据可发送给虚化模块860,以便在被显示之前对图像进行虚化处理。虚化模块860对图像数据虚化处理可包括获取图像中不同区域的虚化等级,根据虚化等级对图像进行虚化处理等。虚化模块860将图像数据进行虚化处理后,可将虚化处理后的图像数据发送给编码器/解码器870,以便编码/解码图像数据。编码的图像数据可被保存,并在显示与显示器880设备上之前解压缩。可以理解的是,虚化模块860处理后的图像数据可以不经过编码器/解码器870,直接发给显示器880进行显示。ISP处理器840处理后的图像数据还可以先经过编码器/解码器870处理,然后再经过虚化模块860进行处理。其中,虚化模块860或编码器/解码器870可为移动终端中CPU(Central Processing Unit,中央处理器)或GPU等。
ISP处理器840确定的统计数据可发送给控制逻辑器850单元。例如,统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜812阴影校正等图像传感器814统计信息。控制逻辑器850可包括执行一个或多个例程(如固件)的处理器和/或微控制器,一个或多个例程可根据接收的统计数据,确定成像设备810的控制参数以及ISP处理器840的控制参数。例如,成像设备810的控制参数可包括传感器820控制参数(例如增益、曝光控制的积分时间、防抖参数等)、照相机闪光控制参数、透镜812控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP控制参数可包括用于自动白平衡和颜色调整(例如,在RGB处理期间)的增益水平和色彩校正矩阵,以及透镜812阴影校正参数。
以下为运用图8中图像处理技术实现图像虚化处理方法的步骤:
(1)若检测到图像中存在多个人脸区域,依次获取多个人脸区域的参数值。
(2)根据多个人脸区域中每个人脸区域的参数值选取目标人脸区域。
(3)获取目标人脸区域的第一景深值,以第一景深值为阈值对图像进行虚化处理。
在一个实施例中,参数值包括人脸区域的面积值;根据多个人脸区域中每个人脸区域的参数值选取目标人脸区域包括:获取多个人脸区域的最大面积值和最小面积值;若最小面积值与最大面积值的比值小于预设值,则将最小面积值对应的人脸区域作为目标人脸区域。
在一个实施例中,获取目标人脸区域的第一景深值包括:获取目标人脸区域的最小景深值或平均景深值;将最小景深值或平均景深值作为第一景深值。
在一个实施例中,以第一景深值为阈值对图像进行虚化处理包括:获取图像中景深值大于第一景深值的区域作为背景区域,对背景区域进行虚化处理。
在一个实施例中,还包括:根据预设的虚化参数与景深值的对应关系确定背景区域的虚化参数;根据虚化参数对背景区域进行虚化处理。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一非易失性计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)等。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种图像处理方法,其特征在于,包括:
分别获取图像中多个人脸区域中每个人脸区域的参数值;
根据所述多个人脸区域中每个人脸区域的参数值选取目标人脸区域;
获取所述目标人脸区域的第一景深值,以所述第一景深值为阈值对图像进行虚化处理;
所述根据所述多个人脸区域的参数值选取目标人脸区域包括:
根据所述多个人脸区域中每个人脸区域的参数值选取第一人脸区域,所述第一人脸区域为所述多个人脸区域中面积最大或边长最长的人脸区域;
将所述每个人脸区域的参数值分别与所述第一人脸区域的参数值比较,若其中一个或多个人脸区域的参数值与所述第一人脸区域的参数值的比值大于预设值,将所述人脸区域作为第二人脸区域;
根据所述第二人脸区域中每个人脸区域的参数值选取符合预设规则的人脸区域作为所述目标人脸区域;
所述预设规则包括:
选取第二人脸区域中面积最小的人脸区域作为目标人脸区域;或者,
选取第二人脸区域中边长最小的人脸区域作为目标人脸区域;或者,
选取第二人脸区域中人脸区域的面积与第一人脸区域的面积比值最小的人脸区域作为目标人脸区域。
2.根据权利要求1所述的图像处理方法,其特征在于,所述获取所述目标人脸区域的第一景深值包括:
获取所述目标人脸区域的最小景深值或平均景深值;
将所述最小景深值或平均景深值作为第一景深值。
3.根据权利要求1至2中任一项所述的图像处理方法,其特征在于,所述以所述第一景深值为阈值对图像进行虚化处理包括:
获取所述图像中景深值大于所述第一景深值的区域作为背景区域,对所述背景区域进行虚化处理。
4.根据权利要求3所述的图像处理方法,其特征在于,所述方法还包括:
根据预设的虚化参数与景深值的对应关系确定背景区域的虚化参数;
根据所述虚化参数对所述背景区域进行虚化处理。
5.一种图像处理装置,其特征在于,包括:
获取模块,用于分别获取图像中多个人脸区域中每个人脸区域的参数值;
选取模块,用于根据所述多个人脸区域中每个人脸区域的参数值选取目标人脸区域;
虚化模块,用于获取所述目标人脸区域的第一景深值,以所述第一景深值为阈值对图像进行虚化处理;
所述选取模块还用于根据所述多个人脸区域中每个人脸区域的参数值选取第一人脸区域,所述第一人脸区域为所述多个人脸区域中面积最大或边长最长的人脸区域;将所述每个人脸区域的参数值分别与所述第一人脸区域的参数值比较,若其中一个或多个人脸区域的参数值与所述第一人脸区域的参数值的比值大于预设值,将所述人脸区域作为第二人脸区域;根据所述第二人脸区域中每个人脸区域的参数值选取符合预设规则的人脸区域作为所述目标人脸区域;所述预设规则包括:选取第二人脸区域中面积最小的人脸区域作为目标人脸区域;或者,选取第二人脸区域中边长最小的人脸区域作为目标人脸区域;或者,选取第二人脸区域中人脸区域的面积与第一人脸区域的面积比值最小的人脸区域作为目标人脸区域。
6.根据权利要求5所述的图像处理装置,其特征在于:
所述虚化模块还用于获取所述目标人脸区域的最小景深值或平均景深值;将所述最小景深值或平均景深值作为第一景深值。
7.根据权利要求5至6中任一项所述的图像处理装置,其特征在于:
所述虚化模块还用于获取所述图像中景深值大于所述第一景深值的区域作为背景区域,对所述背景区域进行虚化处理。
8.根据权利要求7所述的图像处理装置,其特征在于,所述装置还包括:
确定模块,用于根据预设的虚化参数与景深值的对应关系确定背景区域的虚化参数;
所述虚化模块还用于根据所述虚化参数对所述背景区域进行虚化处理。
9.一个或多个包含计算机可执行指令的非易失性计算机可读存储介质,当所述计算机可执行指令被一个或多个处理器执行时,使得所述处理器执行如权利要求1至4中任一项所述的图像处理方法。
10.一种计算机设备,包括存储器及处理器,所述存储器中储存有计算机可读指令,所述指令被所述处理器执行时,使得所述处理器执行如权利要求1至4中任一项所述的图像处理方法。
CN201710775164.5A 2017-08-31 2017-08-31 图像处理方法、装置、计算机可读存储介质和计算机设备 Expired - Fee Related CN107563979B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710775164.5A CN107563979B (zh) 2017-08-31 2017-08-31 图像处理方法、装置、计算机可读存储介质和计算机设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710775164.5A CN107563979B (zh) 2017-08-31 2017-08-31 图像处理方法、装置、计算机可读存储介质和计算机设备

Publications (2)

Publication Number Publication Date
CN107563979A CN107563979A (zh) 2018-01-09
CN107563979B true CN107563979B (zh) 2020-03-27

Family

ID=60978780

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710775164.5A Expired - Fee Related CN107563979B (zh) 2017-08-31 2017-08-31 图像处理方法、装置、计算机可读存储介质和计算机设备

Country Status (1)

Country Link
CN (1) CN107563979B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108322646B (zh) * 2018-01-31 2020-04-10 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN109729268B (zh) * 2018-12-26 2021-03-02 武汉市澜创信息科技有限公司 一种人脸拍摄方法、装置、设备及介质
CN109858384B (zh) * 2019-01-08 2023-10-27 平安科技(深圳)有限公司 人脸图像的捕捉方法、计算机可读存储介质及终端设备
CN109905598A (zh) * 2019-02-25 2019-06-18 四川长虹电器股份有限公司 一种智能拍照方法和智能拍照系统
CN110991298B (zh) * 2019-11-26 2023-07-14 腾讯科技(深圳)有限公司 图像的处理方法和装置、存储介质及电子装置
CN111870826A (zh) * 2020-07-14 2020-11-03 杜兴林 微创手术指标实时解析系统

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104184935B (zh) * 2013-05-27 2017-09-12 鸿富锦精密工业(深圳)有限公司 影像拍摄设备及方法
CN103491309B (zh) * 2013-10-10 2017-12-22 魅族科技(中国)有限公司 图像数据的采集方法和终端
CN106331492B (zh) * 2016-08-29 2019-04-16 Oppo广东移动通信有限公司 一种图像处理方法及终端
CN106548185B (zh) * 2016-11-25 2019-05-24 三星电子(中国)研发中心 一种前景区域确定方法和装置

Also Published As

Publication number Publication date
CN107563979A (zh) 2018-01-09

Similar Documents

Publication Publication Date Title
CN107563979B (zh) 图像处理方法、装置、计算机可读存储介质和计算机设备
CN107481186B (zh) 图像处理方法、装置、计算机可读存储介质和计算机设备
KR102278776B1 (ko) 이미지 처리 방법, 기기, 및 장치
US10757312B2 (en) Method for image-processing and mobile terminal using dual cameras
EP3480783B1 (en) Image-processing method, apparatus and device
CN107977940B (zh) 背景虚化处理方法、装置及设备
CN109068058B (zh) 超级夜景模式下的拍摄控制方法、装置和电子设备
CN108921823B (zh) 图像处理方法、装置、计算机可读存储介质和电子设备
CN107493432B (zh) 图像处理方法、装置、移动终端及计算机可读存储介质
CN109348088B (zh) 图像降噪方法、装置、电子设备及计算机可读存储介质
CN107395991B (zh) 图像合成方法、装置、计算机可读存储介质和计算机设备
CN107704798B (zh) 图像虚化方法、装置、计算机可读存储介质和计算机设备
CN109089046B (zh) 图像降噪方法、装置、计算机可读存储介质及电子设备
CN108259770B (zh) 图像处理方法、装置、存储介质及电子设备
US11233948B2 (en) Exposure control method and device, and electronic device
CN109685853B (zh) 图像处理方法、装置、电子设备和计算机可读存储介质
CN108401110B (zh) 图像的获取方法、装置、存储介质及电子设备
CN110121031B (zh) 图像采集方法和装置、电子设备、计算机可读存储介质
WO2019105260A1 (zh) 景深获取方法、装置及设备
CN109559352B (zh) 摄像头标定方法、装置、电子设备和计算机可读存储介质
CN108574803B (zh) 图像的选取方法、装置、存储介质及电子设备
CN113313626A (zh) 图像处理方法、装置、电子设备及存储介质
CN107563329B (zh) 图像处理方法、装置、计算机可读存储介质和移动终端
CN107454335B (zh) 图像处理方法、装置、计算机可读存储介质和移动终端
CN108513068B (zh) 图像的选取方法、装置、存储介质及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18

Applicant after: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS Corp.,Ltd.

Address before: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18

Applicant before: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS Corp.,Ltd.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20200327

CF01 Termination of patent right due to non-payment of annual fee