CN107563329A - 图像处理方法、装置、计算机可读存储介质和移动终端 - Google Patents

图像处理方法、装置、计算机可读存储介质和移动终端 Download PDF

Info

Publication number
CN107563329A
CN107563329A CN201710781015.XA CN201710781015A CN107563329A CN 107563329 A CN107563329 A CN 107563329A CN 201710781015 A CN201710781015 A CN 201710781015A CN 107563329 A CN107563329 A CN 107563329A
Authority
CN
China
Prior art keywords
human face
face region
image
depth
value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710781015.XA
Other languages
English (en)
Other versions
CN107563329B (zh
Inventor
袁全
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201710781015.XA priority Critical patent/CN107563329B/zh
Publication of CN107563329A publication Critical patent/CN107563329A/zh
Application granted granted Critical
Publication of CN107563329B publication Critical patent/CN107563329B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Image Processing (AREA)
  • Image Analysis (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本发明涉及一种图像处理方法、装置、计算机可读存储介质和移动终端。上述方法包括:若检测到图像中存在人脸区域,获取所述人脸区域的景深信息;若检测到所述景深信息符合预设规则,对所述人脸区域进行活体检测;若检测到所述人脸区域具有生物活性,对所述图像进行白平衡处理。上述方法,在检测到图像中存在人脸区域后,获取人脸区域的景深信息,根据景深信息判定人脸区域是否为三维立体图像。再通过活体检测算法检测人脸区域是否有生物活性,当人脸区域为三维立体图像且人脸有生物活性时,可判定图像中人脸区域为真人人脸,则对图像进行白平衡处理,提高了对人像图像进行白平衡处理的准确性。

Description

图像处理方法、装置、计算机可读存储介质和移动终端
技术领域
本发明涉及计算机技术领域,特别是涉及一种图像处理方法、装置、计算机可读存储介质和移动终端。
背景技术
随着智能移动终端的发展,智能移动终端的功能越来越多样化。例如,在采用智能移动终端进行拍摄时,智能移动终端可对拍摄获取的图像进行自动曝光、自动白平衡、自动美颜和自动虚化处理,使得拍摄获取的图像层次分明,图像可呈现场景的真实色彩。
发明内容
本申请实施例提供一种图像处理方法、装置、计算机可读存储介质和移动终端,可以在图像中检测到人脸区域时,对图像进行白平衡处理,使得图像可呈现场景的真实色彩。
一种图像处理方法,包括:
若检测到图像中存在人脸区域,获取所述人脸区域的景深信息;
若检测到所述景深信息符合预设规则,对所述人脸区域进行活体检测;
若检测到所述人脸区域具有生物活性,对所述图像进行白平衡处理。
一种图像处理装置,包括:
获取模块,用于若检测到图像中存在人脸区域,获取所述人脸区域的景深信息;
检测模块,用于若检测到所述景深信息符合预设规则,对所述人脸区域进行活体检测;
处理模块,用于若检测到所述人脸区域具有生物活性,对所述图像进行白平衡处理。
一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如上所述的图像处理方法的步骤。
一种移动终端,包括存储器及处理器,所述存储器中储存有计算机可读指令,所述指令被所述处理器执行时,使得所述处理器执行如上所述的图像处理方法。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为一个实施例中移动终端10的内部结构示意图;
图2为一个实施例中图像处理方法的流程图;
图3为一个实施例中双摄移动终端测量景深的示意图;
图4为另一个实施例中图像处理方法的流程图;
图5为一个实施例中图像处理装置的结构框图;
图6为另一个实施例中图像处理装置的结构框图;
图7为一个实施例中图像处理电路的示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
可以理解,本发明所使用的术语“第一”、“第二”等可在本文中用于描述各种元件,但这些元件不受这些术语限制。这些术语仅用于将第一个元件与另一个元件区分。举例来说,在不脱离本发明的范围的情况下,可以将第一客户端称为第二客户端,且类似地,可将第二客户端称为第一客户端。第一客户端和第二客户端两者都是客户端,但其不是同一客户端。
图1为一个实施例中移动终端10的内部结构示意图。如图1所示,该移动终端10包括通过系统总线连接的处理器、非易失性存储介质、内存储器、网络接口、显示屏和输入装置。其中,移动终端10的非易失性存储介质存储有操作系统和计算机可读指令。该计算机可读指令被处理器执行时以实现一种图像处理方法。该处理器用于提供计算和控制能力,支撑整个移动终端10的运行。移动终端10中的内存储器为非易失性存储介质中的计算机可读指令的运行提供环境。网络接口用于与服务器进行网络通信。移动终端10的显示屏可以是液晶显示屏或者电子墨水显示屏等,输入装置可以是显示屏上覆盖的触摸层,也可以是移动终端10外壳上设置的按键、轨迹球或触控板,也可以是外接的键盘、触控板或鼠标等。该移动终端10可以是手机、平板电脑或者个人数字助理或穿戴式设备等。本领域技术人员可以理解,图1中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的移动终端10的限定,具体的移动终端10可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
图2为一个实施例中图像处理方法的流程图。如图2所示,一种图像处理方法,包括:
步骤202,若检测到图像中存在人脸区域,获取人脸区域的景深信息。
当移动终端运行拍摄程序获取图像时,移动终端可采用人脸检测算法检测图像中是否存在人脸。当检测到图像中存在人脸时,可获取图像中人脸区域。获取图像中人脸区域的步骤可包括:当移动终端检测到图像中存在人脸时,获取人脸特征点,如人脸中嘴唇、眼白等,在获取到人脸特征点后,以获取的人脸特征点为起点采用区域生长法获取人脸区域。获取图像中人脸区域的步骤还可包括:识别图像中色彩,获取上述色彩中与预设色彩的色差值最小的色彩作为第一色彩,识别图像中第一色彩区域,从第一色彩区域中识别人脸特征点,根据人脸特征点从图像中提取人脸区域。上述预设颜色可为移动终端预设,也可为用户从存储图像中选取。上述预设颜色的色彩值可根据肤色的色彩值设定。
在识别出图像中人脸区域后,可获取上述人脸区域的景深信息。上述人脸区域的景深信息即为人脸区域距离移动终端的距离信息。根据人脸区域的景深信息可判断人脸区域距离移动终端的远近。
当移动终端为双摄移动终端时,通过移动终端两个摄像头各自的距离传感器可分别获取两个摄像头距离目标的距离。如图3所示,移动终端中两个摄像头的主光轴平行,L点为做左摄像头的光心,R点为右摄像头的光心。PL点和PR点所在的线段分别为左右摄像头的像面,光心到像面的最短距离为焦距f。若P为目标点(如人脸区域中鼻尖所在的位置),则P点在左右像面的成像点为PL和PR。PL点和PR点距各自像面的左边缘的距离是XL和XR,则视差d=XR-XL或d=XL-XR。其中Z为目标点P点景深值,T为左右摄像头光心之间的距离。则根据三角形相似原理可得:
Z为目标点P点的景深值,即为目标点P点距离移动终端的距离值。通过上述方法,可依次获取图像中每个像素点的景深值,也可获取人脸区域中每个像素点的景深值,即人脸区域的景深信息。
当移动终端为单摄移动终端时,可利用结构光测量移动终端与目标之间的距离,获取人脸区域的景深信息。具体地,移动可通过红外LED灯发射红外线,移动终端可接收被反射的红外线,并根据接收的红外线的强度测定目标与移动终端的距离。
步骤204,若检测到景深信息符合预设规则,对人脸区域进行活体检测。
在获取到人脸区域的景深信息后,可检测上述景深信息是否符合预设规则。上述预设规则即为人脸区域的三维立体规则,如人脸区域中人脸特征点的空间关系、人脸区域中人脸特征点的深度关系等。通过检测人脸区域的景深信息是否符合预设规则,可判定图像中人脸区域是否为三维立体图像。当人脸区域的景深信息符合预设规则时,即图像中人脸区域为三维图像时,对图像中人脸区域进行活体检测。通过活体检测可判断人脸区域是否具有生物活性。具体地,移动终端对人脸区域进行活体检测可包括:获取连续帧图像中人脸区域,获取连续帧图像中人脸区域的预设特征点(如眼白、牙齿等)。根据连续帧图像中人脸区域的预设特征点判定图像中人脸区域是否在执行预设动作,若在执行预设动作,判定人脸区域具有生物活性。例如在上述连续帧图像中,第一帧图像的人脸区域可提取出眼白的特征点,第二帧和第三帧图像的人脸区域不可提取出眼白的特征点,第四帧图像的人脸区域可提取出眼白的特征点,则判定人脸区域执行了眨眼的动作,图像中人脸区域具有生物活性。上述举例仅用于示意说明,移动终端还可检测人脸区域是否执行了摇头、点头、说话等预设动作,在此没有一一列举。
步骤206,若检测到人脸区域具有生物活性,对图像进行白平衡处理。
在检测到图像中人脸区域的景深信息符合预设规则时,再检测图像中人脸区域是否具有生物活性,若图像中人脸区域具有生物活性,则判定图像中人脸区域为真人。当图像中存在真人时,移动终端对图像进行白平衡,使图像中人像更接近真实色彩。其中,对图像进行白平衡处理包括:移动终端中有三个CCD(Charge-coupled Device,电子耦合原件),上述三个CCD电子耦合原件可分别接收蓝色、绿色和红色的光线。移动终端预设三个CCD电子耦合原件接收蓝色、绿色和红色光线的比例为1:1:1。当移动终端运行白平衡算法时,移动终端可根据景物中蓝色、绿色和红色光线的比例实时调整三个CCD电子耦合原件接收光线的比例,使得拍摄的图像与实际色彩相同。例如,拍摄的景物中蓝色、绿色和红色光线的比例为2:1:1,移动终端调整CCD电子耦合原件接收蓝色、绿色和红色光线的比例为1:2:2,使得图像中绿色和红色增加,图像中颜色更接近真实色彩。
当图像中存在人脸时,通过对图像进行白平衡处理,可使得拍摄的人像色彩更接近真实人像的色彩。传统技术中,移动终端可对图像进行人脸识别,检测到图像中存在人脸后,即对图像进行白平衡处理。在实际使用过程中,移动终端在对图像进行人脸识别时,仅检测图像中是否存在符合人脸特征的二维图像,当图像中玩偶、照片、雕像、广告牌等存在人脸图像时,移动终端也会对图像进行白平衡处理,但玩偶、照片、雕像、广告牌中人脸图像与真实人脸图像色差较大,对图像的白平衡处理会造成拍摄获取的图像与真实场景颜色相差较大。
本申请实施例中图像处理方法,在检测到图像中存在人脸区域后,获取人脸区域的景深信息,根据景深信息判定人脸区域是否为三维立体图像。再通过活体检测算法检测人脸区域是否有生物活性,当人脸区域为三维立体图像且人脸有生物活性时,可判定图像中人脸区域为真人,对图像进行白平衡处理,使得图像的色彩接近真实场景的色彩,提高了对人像图像进行白平衡的准确率,避免了误检测人脸导致图像与真实色彩相差较大的情况。
在一个实施例中,步骤204中若检测到景深信息符合预设规则包括以下情况中一种或多种:
(1)检测到景深信息中最大景深值与最小景深值的差值大于第一阈值。
(2)检测到人脸区域中第一特征点景深值与第二特征点景深值的差值大于第二阈值。
移动终端在获取到人脸区域中各个像素点的景深值后,可获取人脸区域中最大景深值和最小景深值的差值,检测上述差值是否大于第一阈值。第一阈值可为用户预设值,也可为移动终端根据获取的人脸区域景深值求取的平均值。若上述差值大于第一阈值,判定人脸区域的景深信息符合预设规则,即人脸区域为三维立体图像。例如,移动终端获取人脸区域中耳垂的景深值为20米,是人脸区域中最大景深值;人脸区域中鼻尖的景深值为19.90米,是人脸区域中最小景深值,则人脸区域中最大景深值与最小景深值的差值为0.1米,大于第一阈值0.05米,则人脸区域为三维立体图像。
移动终端还可获取人脸区域中预设特征点的景深值,将预设特征点的景深值的差值与第二阈值比较。上述预设特征点可为移动终端根据人脸特征预设的特征点(如鼻尖、耳垂等),也可为用户设定的特征点。例如,预设的第一特征点为鼻尖,预设的第二特征点为嘴唇,移动终端获取第一特征点和第二特征点的景深值后,再获取第一特征点和第二特征点的景深值的差值,即鼻尖与嘴唇的景深值的差值,若鼻尖与嘴唇的景深值的差值大于预设的第二阈值0.02米,即鼻尖与嘴唇不在同一平面,判定人脸区域为三维立体图像。
本申请实施例中图像处理方法,通过人脸区域中景深值之间的关系,可判定人脸区域是二维图像还是三维立体图像,可避免移动终端在检测到照片或该广告牌等二维图像上人脸时,对拍摄获取的图像进行白平衡使图像失真的现象。
在一个实施例中,步骤202中获取人脸区域的景深信息包括:对人脸区域进行人脸特征识别,获取人脸区域中人脸特征识别点;获取人脸特征识别点的景深值。
移动终端在获取人脸区域的景深信息时,可先对图像中人脸区域进行人脸特征识别,获取人脸区域中人脸特征识别点,如人脸中眼球、鼻尖、牙齿、耳垂等。在获取到人脸识别点后,移动终端可仅获取人脸识别点的景深值,在根据人脸识别点的景深值判定人脸区域是否符合预设规则。上述根据人脸识别点的景深值判定人脸区域是否符合预设规则包括:检测人脸特征点的景深值是否两两不相同,若人脸特征点的景深值两两不相同,则说明人脸区域的人脸特征点不在同一平面,即人脸区域符合预设规则。
本申请实施例中图像处理方法,在获取人脸区域的景深信息时,仅获取人脸区域中人脸特征识别点的景深信息,而无需获取人脸区域所有像素点的景深信息,节省了移动终端资源,降低了移动终端功耗。
在一个实施例中,在步骤206中对图像进行白平衡处理之前,上述图像处理方法还包括:
(1)对图像进行红外热量检测,获取图像中人像的热量辐射值。
(2)若热量辐射值大于第三阈值,对图像进行白平衡处理。
根据热辐射原理,人体由于具有温度而向空间不断辐射能量,其中,人体温度越高,辐射的能量也越多。红外探测器可接收人体辐射的能量,并根据接收的辐射的能量的多少判定人体的温度。当图像中存在人脸区域时,移动终端可通过红外探测器来获取图像中人像的热量辐射值,并将人像的热量辐射值转换为人像的温度。具体地,由于人体恒定体温为37℃,人体会辐射特定波长的红外线,如波长为10μm的红外线。红外探测器可根据接收到的波长为10μm的红外线来获取人像的热量辐射值,并根据人像的热量辐射值获取对应的温度。红外探测器接收到的波长为10μm的红外线越多,即人像的热量辐射值越高。红外传感器还可根据接收到的红外线的方位判断人像的位置。在获取到人像的热量辐射值后,可将人像的热量辐射值与预设的第三阈值比较。上述第三阈值为预设的热量辐射值,例如温度为10℃物体的热量辐射值。若人像的热量辐射值大于预设第三阈值,判定人像为真人,对图像进行白平衡处理。在一个实施例中,移动终端在获取到人像的热量辐射值后,可将人像的热量辐射值转换为人像的温度,将人像的温度与预设温度值作比较,判定人像是否为真人。例如,预设温度为36℃,判定人像的温度是否大于36℃。若是,则人像为真人。
本申请实施例中图像处理方法,对图像进行红外热量检测,获取图像中人像的热量辐射值,根据图像中人像的热量辐射值判断人像是否为真人,避免了在图像中检测到非真人时对图像进行白平衡处理造成图像失真的现象。
在一个实施例中,步骤202中若检测到图像中存在人脸区域,获取人脸区域的景深信息包括:
(1)若检测到图像中存在多个人脸区域,依次获取多个人脸区域的参数值。
(2)根据多个人脸区域的参数值选取目标人脸区域。
(3)获取目标人脸区域的景深信息。
当图像中存在多个人脸区域时,移动终端可获取多个人脸区域的参数值,根据多个人脸区域的参数值选取目标人脸,即图像中主人脸。上述人脸区域的参数值包括:人脸区域的边长、人脸区域的面积、人脸区域占图像的比例、人脸区域与人脸区域的比例、人脸区域的平均景深值等。其中,移动终端可将显示人脸区域的像素个数和作为人脸区域的面积。当人脸区域为规则多边形时,规则多边形的边长所占的像素个数即为人脸区域的边长。移动终端可根据预设规则从多个人脸区域中选取目标人脸区域。上述预设规则可为以下情况中一种或多种:
(1)人脸区域的面积占图像的比例是否小于第四阈值。
(2)人脸区域的平均景深值是否小于第五阈值。
当人脸区域的面积占图像的比例小于预设第四阈值时,即人脸区域在图像上成像较小,判定人脸区域不是主人脸,则将上述人脸区域不作为目标人脸区域。当人脸区域的平均景深值小于预设第五阈值时,判定人脸距离移动终端较近,将人脸区域作为目标人脸。上述第四阈值和第五阈值可为用户设定的相同值或不同值。
本申请实施例中图像处理方法,当图像中存在多个人脸区域时,筛选出图像中主人脸,有利于根据图像中主人脸对图像进行白平衡处理,避免根据非主人脸对图像进行白平衡处理导致图像中色彩失真,图像中主人脸与真实色彩不一致的情况。
图4为另一个实施例中图像处理方法的流程图。如图4所示,一种图像处理方法,包括:
步骤402,若检测到图像中存在人脸区域,获取人脸区域的景深信息。
获取人脸区域的景深信息包括:对人脸区域进行人脸特征识别,获取人脸区域中人脸特征识别点;获取人脸特征识别点的景深值。若检测到图像中存在多个人脸区域,依次获取多个人脸区域的参数值;根据多个人脸区域的参数值选取目标人脸区域;获取目标人脸区域的景深信息。
步骤404,若检测到景深信息符合预设规则,对人脸区域进行活体检测。
若检测到景深信息符合预设规则包括以下情况中一种或多种:
(1)检测到景深信息中最大景深值与最小景深值的差值大于第一阈值。
(2)检测到人脸区域中第一特征点景深值与第二特征点景深值的差值大于第二阈值。
步骤406,若检测到人脸区域具有生物活性,对图像进行红外热量检测,获取图像中人像的热量辐射值。
步骤408,若热量辐射值大于第三阈值,对图像进行白平衡处理。
本申请实施例中图像处理方法,在检测到图像中存在人脸区域后,获取人脸区域的景深信息,根据景深信息判定人脸区域是否为三维立体图像。若人脸区域为三维立体图像,则通过活体检测算法检测人脸区域是否有生物活性,当人脸区域为三维立体图像且人脸有生物活性时,再检测图像中人像的热量辐射值是否大于指定值,大于指定值时判定图像中人脸区域为真人人脸,则对图像进行白平衡处理,使得图像的色彩接近真实场景的色彩,提高了对人像图像进行白平衡的准确率,避免了误检测人脸导致图像与真实色彩相差较大的情况。
图5为一个实施例中图像处理装置的结构框图。如图5所示,一种图像处理装置,包括:
获取模块502,用于若检测到图像中存在人脸区域,获取人脸区域的景深信息。
检测模块504,用于若检测到景深信息符合预设规则,对人脸区域进行活体检测。
处理模块506,用于若检测到人脸区域具有生物活性,对图像进行白平衡处理。
在一个实施例中,检测模块504还用于若检测到景深信息中最大景深值与最小景深值的差值大于第一阈值,对人脸区域进行活体检测;检测模块504还用于若检测到人脸区域中第一特征点景深值与第二特征点景深值的差值大于第二阈值,对人脸区域进行活体检测。
在一个实施例中,获取模块502还用于对人脸区域进行人脸特征识别,获取人脸区域中人脸特征识别点;获取人脸特征识别点的景深值。
在一个实施例中,获取模块502还用于若检测到图像中存在多个人脸区域,依次获取多个人脸区域的参数值;根据多个人脸区域的参数值选取目标人脸区域;获取目标人脸区域的景深信息。
图6为另一个实施例中图像处理装置的结构框图。一种装置包括获取模块602、检测模块604、处理模块606和红外检测模块608。上述获取模块602、检测模块604、处理模块606与图5中对应的模块功能相同。
红外检测模块608,用于在对图像进行白平衡处理之前,对图像进行红外热量检测,获取图像中人像的热量辐射值。
处理模块606还用于若检测到人脸区域具有生物活性且热量辐射值大于第三阈值,对图像进行白平衡处理。
上述图像处理装置中各个模块的划分仅用于举例说明,在其他实施例中,可将图像处理装置按照需要划分为不同的模块,以完成上述图像处理装置的全部或部分功能。
本申请实施例还提供了一种计算机可读存储介质。一种计算机可读存储介质,其上存储有计算机程序,上述计算机程序被处理器执行时实现如上所述的图像处理方法的步骤。
本申请实施例还提供一种移动终端。上述移动终端中包括图像处理电路,图像处理电路可以利用硬件和/或软件组件实现,可包括定义ISP(Image Signal Processing,图像信号处理)管线的各种处理单元。图7为一个实施例中图像处理电路的示意图。如图7所示,为便于说明,仅示出与本申请实施例相关的图像处理技术的各个方面。
如图7所示,图像处理电路包括ISP处理器740和控制逻辑器750。成像设备710捕捉的图像数据首先由ISP处理器740处理,ISP处理器740对图像数据进行分析以捕捉可用于确定和/或成像设备710的一个或多个控制参数的图像统计信息。成像设备710可包括具有一个或多个透镜712和图像传感器714的照相机。图像传感器714可包括色彩滤镜阵列(如Bayer滤镜),图像传感器714可获取用图像传感器714的每个成像像素捕捉的光强度和波长信息,并提供可由ISP处理器740处理的一组原始图像数据。传感器720(如陀螺仪)可基于传感器720接口类型把采集的图像处理的参数(如防抖参数)提供给ISP处理器740。传感器720接口可以利用SMIA(Standard Mobile Imaging Architecture,标准移动成像架构)接口、其它串行或并行照相机接口或上述接口的组合。
此外,图像传感器714也可将原始图像数据发送给传感器720,传感器720可基于传感器720接口类型把原始图像数据提供给ISP处理器740,或者传感器720将原始图像数据存储到图像存储器730中。
ISP处理器740按多种格式逐个像素地处理原始图像数据。例如,每个图像像素可具有8、10、12或14比特的位深度,ISP处理器740可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中,图像处理操作可按相同或不同的位深度精度进行。
ISP处理器740还可从图像存储器730接收图像数据。例如,传感器720接口将原始图像数据发送给图像存储器730,图像存储器730中的原始图像数据再提供给ISP处理器740以供处理。图像存储器730可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器,并可包括DMA(Direct Memory Access,直接直接存储器存取)特征。
当接收到来自图像传感器714接口或来自传感器720接口或来自图像存储器730的原始图像数据时,ISP处理器740可进行一个或多个图像处理操作,如时域滤波。处理后的图像数据可发送给图像存储器730,以便在被显示之前进行另外的处理。ISP处理器740从图像存储器730接收处理数据,并对所述处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。ISP处理器740处理后的图像数据可输出给显示器770,以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit,图形处理器)进一步处理。此外,ISP处理器740的输出还可发送给图像存储器730,且显示器770可从图像存储器730读取图像数据。在一个实施例中,图像存储器730可被配置为实现一个或多个帧缓冲器。此外,ISP处理器740的输出可发送给编码器/解码器760,以便编码/解码图像数据。编码的图像数据可被保存,并在显示于显示器770设备上之前解压缩。编码器/解码器760可由CPU或GPU或协处理器实现。
ISP处理器740确定的统计数据可发送给控制逻辑器750单元。例如,统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜712阴影校正等图像传感器714统计信息。控制逻辑器750可包括执行一个或多个例程(如固件)的处理器和/或微控制器,一个或多个例程可根据接收的统计数据,确定成像设备710的控制参数及ISP处理器740的控制参数。例如,成像设备710的控制参数可包括传感器720控制参数(例如增益、曝光控制的积分时间、防抖参数等)、照相机闪光控制参数、透镜712控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP控制参数可包括用于自动白平衡和颜色调整(例如,在RGB处理期间)的增益水平和色彩校正矩阵,以及透镜712阴影校正参数。
运用图7中图像处理技术可实现如上所述的图像处理方法。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一非易失性计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)等。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。

Claims (12)

1.一种图像处理方法,其特征在于,包括:
若检测到图像中存在人脸区域,获取所述人脸区域的景深信息;
若检测到所述景深信息符合预设规则,对所述人脸区域进行活体检测;
若检测到所述人脸区域具有生物活性,对所述图像进行白平衡处理。
2.根据权利要求1所述的图像处理方法,其特征在于,所述若检测到所述景深信息符合预设规则包括:
检测到所述景深信息中最大景深值与最小景深值的差值大于第一阈值;
或,检测到所述人脸区域中第一特征点景深值与第二特征点景深值的差值大于第二阈值。
3.根据权利要求1所述的图像处理方法,其特征在于,所述获取所述人脸区域的景深信息包括:
对所述人脸区域进行人脸特征识别,获取所述人脸区域中人脸特征识别点;
获取所述人脸特征识别点的景深值。
4.根据权利要求1至3中任一项所述的图像处理方法,其特征在于,在所述对所述图像进行白平衡处理之前,所述方法还包括:
对所述图像进行红外热量检测,获取所述图像中人像的热量辐射值;
若所述热量辐射值大于第三阈值,对所述图像进行白平衡处理。
5.根据权利要求1至3中任一项所述的图像处理方法,其特征在于,所述若检测到图像中存在人脸区域,获取所述人脸区域的景深信息包括:
若检测到图像中存在多个人脸区域,依次获取多个人脸区域的参数值;
根据所述多个人脸区域的参数值选取目标人脸区域;
获取目标人脸区域的所述景深信息。
6.一种图像处理装置,其特征在于,包括:
获取模块,用于若检测到图像中存在人脸区域,获取所述人脸区域的景深信息;
检测模块,用于若检测到所述景深信息符合预设规则,对所述人脸区域进行活体检测;
处理模块,用于若检测到所述人脸区域具有生物活性,对所述图像进行白平衡处理。
7.根据权利要求6所述的图像处理装置,其特征在于:
所述检测模块还用于若检测到所述景深信息中最大景深值与最小景深值的差值大于第一阈值,对所述人脸区域进行活体检测;
所述检测模块还用于若检测到所述人脸区域中第一特征点景深值与第二特征点景深值的差值大于第二阈值,对所述人脸区域进行活体检测。
8.根据权利要求6所述的图像处理装置,其特征在于:
所述获取模块还用于对所述人脸区域进行人脸特征识别,获取所述人脸区域中人脸特征识别点;获取所述人脸特征识别点的景深值。
9.根据权利要求6至8中任一项所述的图像处理装置,其特征在于,所述装置还包括:
红外检测模块,用于在所述对所述图像进行白平衡处理之前,对所述图像进行红外热量检测,获取所述图像中人像的热量辐射值;
所述处理模块还用于若检测到所述人脸区域具有生物活性且所述热量辐射值大于第三阈值,对所述图像进行白平衡处理。
10.根据权利要求6至8中任一项所述的图像处理装置,其特征在于:
所述获取模块还用于若检测到图像中存在多个人脸区域,依次获取多个人脸区域的参数值;根据所述多个人脸区域的参数值选取目标人脸区域;获取目标人脸区域的所述景深信息。
11.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至5中任一项所述的图像处理方法的步骤。
12.一种移动终端,包括存储器及处理器,所述存储器中储存有计算机可读指令,所述指令被所述处理器执行时,使得所述处理器执行如权利要求1至5中任一项所述的图像处理方法。
CN201710781015.XA 2017-09-01 2017-09-01 图像处理方法、装置、计算机可读存储介质和移动终端 Active CN107563329B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710781015.XA CN107563329B (zh) 2017-09-01 2017-09-01 图像处理方法、装置、计算机可读存储介质和移动终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710781015.XA CN107563329B (zh) 2017-09-01 2017-09-01 图像处理方法、装置、计算机可读存储介质和移动终端

Publications (2)

Publication Number Publication Date
CN107563329A true CN107563329A (zh) 2018-01-09
CN107563329B CN107563329B (zh) 2021-03-30

Family

ID=60977848

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710781015.XA Active CN107563329B (zh) 2017-09-01 2017-09-01 图像处理方法、装置、计算机可读存储介质和移动终端

Country Status (1)

Country Link
CN (1) CN107563329B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108334817A (zh) * 2018-01-16 2018-07-27 深圳前海华夏智信数据科技有限公司 基于三目的活体人脸检测方法及系统
CN108764053A (zh) * 2018-04-28 2018-11-06 Oppo广东移动通信有限公司 图像处理方法、装置、计算机可读存储介质和电子设备
CN110929557A (zh) * 2019-09-25 2020-03-27 四川大学锦城学院 一种基于活体检测的智能安防方法、系统及处理装置
CN112861568A (zh) * 2019-11-12 2021-05-28 Oppo广东移动通信有限公司 认证方法和装置、电子设备、计算机可读存储介质

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101617339A (zh) * 2007-02-15 2009-12-30 索尼株式会社 图像处理装置和图像处理方法
US20110205391A1 (en) * 2005-06-20 2011-08-25 Canon Kabushiki Kaisha Image sensing apparatus and image processing method
CN102622588A (zh) * 2012-03-08 2012-08-01 无锡数字奥森科技有限公司 双验证人脸防伪方法及装置
CN104463777A (zh) * 2014-11-11 2015-03-25 厦门美图之家科技有限公司 一种基于人脸的实时景深的方法
CN104834901A (zh) * 2015-04-17 2015-08-12 北京海鑫科金高科技股份有限公司 一种基于双目立体视觉的人脸检测方法、装置及系统
CN105138981A (zh) * 2015-08-20 2015-12-09 北京旷视科技有限公司 活体检测系统和方法
CN105187719A (zh) * 2015-08-21 2015-12-23 深圳市金立通信设备有限公司 一种拍摄方法及终端
CN105512637A (zh) * 2015-12-22 2016-04-20 联想(北京)有限公司 图像处理方法和电子设备
CN106851238A (zh) * 2017-03-09 2017-06-13 广东欧珀移动通信有限公司 白平衡控制方法、白平衡控制装置及电子装置

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110205391A1 (en) * 2005-06-20 2011-08-25 Canon Kabushiki Kaisha Image sensing apparatus and image processing method
CN101617339A (zh) * 2007-02-15 2009-12-30 索尼株式会社 图像处理装置和图像处理方法
CN102622588A (zh) * 2012-03-08 2012-08-01 无锡数字奥森科技有限公司 双验证人脸防伪方法及装置
CN104463777A (zh) * 2014-11-11 2015-03-25 厦门美图之家科技有限公司 一种基于人脸的实时景深的方法
CN104834901A (zh) * 2015-04-17 2015-08-12 北京海鑫科金高科技股份有限公司 一种基于双目立体视觉的人脸检测方法、装置及系统
CN105138981A (zh) * 2015-08-20 2015-12-09 北京旷视科技有限公司 活体检测系统和方法
CN105187719A (zh) * 2015-08-21 2015-12-23 深圳市金立通信设备有限公司 一种拍摄方法及终端
CN105512637A (zh) * 2015-12-22 2016-04-20 联想(北京)有限公司 图像处理方法和电子设备
CN106851238A (zh) * 2017-03-09 2017-06-13 广东欧珀移动通信有限公司 白平衡控制方法、白平衡控制装置及电子装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
CHRISTINA G 等: "A Knowledge-Based Approach to Online Fault Diagnosis of FET Biosensors", 《IEEE》 *
刘悦 等: "不需要彩色空间转换的人脸肤色的自动白平衡方法", 《计算机应用》 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108334817A (zh) * 2018-01-16 2018-07-27 深圳前海华夏智信数据科技有限公司 基于三目的活体人脸检测方法及系统
CN108764053A (zh) * 2018-04-28 2018-11-06 Oppo广东移动通信有限公司 图像处理方法、装置、计算机可读存储介质和电子设备
CN110929557A (zh) * 2019-09-25 2020-03-27 四川大学锦城学院 一种基于活体检测的智能安防方法、系统及处理装置
CN112861568A (zh) * 2019-11-12 2021-05-28 Oppo广东移动通信有限公司 认证方法和装置、电子设备、计算机可读存储介质

Also Published As

Publication number Publication date
CN107563329B (zh) 2021-03-30

Similar Documents

Publication Publication Date Title
CN107977940B (zh) 背景虚化处理方法、装置及设备
CN107959778B (zh) 基于双摄像头的成像方法和装置
CN108055452A (zh) 图像处理方法、装置及设备
CN107948519A (zh) 图像处理方法、装置及设备
CN108024054A (zh) 图像处理方法、装置及设备
CN109005364A (zh) 成像控制方法、装置、电子设备以及计算机可读存储介质
CN108683862A (zh) 成像控制方法、装置、电子设备及计算机可读存储介质
CN108419028A (zh) 图像处理方法、装置、计算机可读存储介质和电子设备
CN107493432A (zh) 图像处理方法、装置、移动终端及计算机可读存储介质
CN110290289A (zh) 图像降噪方法、装置、电子设备以及存储介质
CN107704798B (zh) 图像虚化方法、装置、计算机可读存储介质和计算机设备
CN108712608A (zh) 终端设备拍摄方法和装置
CN110072052A (zh) 基于多帧图像的图像处理方法、装置、电子设备
CN107481186B (zh) 图像处理方法、装置、计算机可读存储介质和计算机设备
CN107563329A (zh) 图像处理方法、装置、计算机可读存储介质和移动终端
CN110062159A (zh) 基于多帧图像的图像处理方法、装置、电子设备
CN107509031A (zh) 图像处理方法、装置、移动终端及计算机可读存储介质
CN110248106A (zh) 图像降噪方法、装置、电子设备以及存储介质
CN107465903B (zh) 图像白平衡方法、装置和计算机可读存储介质
CN108717530A (zh) 图像处理方法、装置、计算机可读存储介质和电子设备
CN109685853B (zh) 图像处理方法、装置、电子设备和计算机可读存储介质
CN108520493A (zh) 图像替换的处理方法、装置、存储介质及电子设备
CN108053438A (zh) 景深获取方法、装置及设备
CN108024057A (zh) 背景虚化处理方法、装置及设备
CN107454335A (zh) 图像处理方法、装置、计算机可读存储介质和移动终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18

Applicant after: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS Corp.,Ltd.

Address before: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18

Applicant before: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS Corp.,Ltd.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant