CN114339021A - 基于人脸识别的对焦方法、装置、终端设备和存储介质 - Google Patents
基于人脸识别的对焦方法、装置、终端设备和存储介质 Download PDFInfo
- Publication number
- CN114339021A CN114339021A CN202011062483.XA CN202011062483A CN114339021A CN 114339021 A CN114339021 A CN 114339021A CN 202011062483 A CN202011062483 A CN 202011062483A CN 114339021 A CN114339021 A CN 114339021A
- Authority
- CN
- China
- Prior art keywords
- face
- image
- determining
- target
- size
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 62
- 230000008569 process Effects 0.000 claims abstract description 27
- 238000012937 correction Methods 0.000 claims description 20
- 238000012545 processing Methods 0.000 claims description 19
- 230000004927 fusion Effects 0.000 claims description 3
- 238000004590 computer program Methods 0.000 claims description 2
- 230000003287 optical effect Effects 0.000 description 14
- 238000004891 communication Methods 0.000 description 10
- 238000005516 engineering process Methods 0.000 description 9
- 238000001514 detection method Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 230000005236 sound signal Effects 0.000 description 4
- 238000005070 sampling Methods 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Landscapes
- Studio Devices (AREA)
Abstract
本申请公开了一种基于人脸识别的对焦方法、装置、终端设备和存储介质。该方法包括:检测到稳定的初始人脸图像,确定目标人脸与终端设备之间的人脸距离;将人脸距离输入预先建立的人脸尺寸模型中,确定与人脸距离对应的目标人脸图像尺寸;基于目标人脸图像尺寸确定镜头的对焦位置区域,以控制镜头移动至对焦位置区域进行对焦。解决了人脸图像拍摄过程中,对焦速度慢的问题。
Description
技术领域
本申请一般涉及人脸识别技术领域,具体涉及一种基于人脸识别的对焦方法、装置、终端设备和存储介质。
背景技术
在现代生活中,利用具备拍摄功能的终端设备拍摄照片,已经成为人们记录和分享生活的常用手段。
随着自拍或者人像摄影的流行,为了满足用户的使用需求,终端设备普遍都支持人脸对焦功能,人脸对焦是以人脸检测的区域为主来触发对焦,在人脸为最佳清晰点时实现对焦拍照。
但是,现有的人脸对焦过程中通常使用的是相位对焦(英文:Phase DetectionAutomatic Focus,简称:PDAF),激光对焦(英文:Time of Flight,简称:TOF)或者对比度对焦(英文:Contrast Automatic Focus,简称:CAF)技术,这些对焦技术在人脸拍摄过程中,会存在对焦速度慢的问题,影响用户的使用体验。
发明内容
鉴于现有技术中的上述缺陷或不足,期望提供一种可以提升对焦速度的基于人脸识别的对焦方法、装置、终端设备和存储介质。
第一方面,本申请提供了一种基于人脸识别的对焦方法,包括:
检测到稳定的初始人脸图像,确定目标人脸与终端设备之间的人脸距离;
将人脸距离输入预先建立的人脸尺寸模型中,确定与人脸距离对应的目标人脸图像尺寸;
基于目标人脸图像尺寸确定镜头的对焦位置区域,以控制镜头移动至对焦位置区域进行对焦。
第二方面,本申请提供了一种基于人脸识别的对焦装置,包括:
第一确定模块,被配置为检测到稳定的初始人脸图像,确定目标人脸与终端设备之间的人脸距离;
第二确定模块,被配置为将人脸距离输入预先建立的人脸尺寸模型中,确定与人脸距离对应的目标人脸图像尺寸;
第三确定模块,被配置为基于目标人脸图像尺寸确定镜头的对焦位置区域,以控制镜头移动至对焦位置区域进行对焦。
第三方面,本申请提供了一种终端设备,终端设备包括:
处理组件;
用于存储处理组件的可执行指令的存储器;
其中,处理组件被配置为执行第一方面的方法。
第四方面,本申请提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序用于实现如第一方面的方法。
本申请的实施例提供的技术方案可以包括以下有益效果:
本申请实施例提供的基于人脸识别的对焦方法、装置、终端设备和存储介质,包括检测到稳定的初始人脸图像,确定目标人脸与终端设备之间的人脸距离;将人脸距离输入预先建立的人脸尺寸模型中,确定与人脸距离对应的目标人脸图像尺寸;基于目标人脸图像尺寸确定镜头的对焦位置区域,以控制镜头移动至对焦位置区域进行对焦。可以基于人脸图像尺寸对镜头的对焦范围进行限定,控制镜头在合适的位置区域移动,实现快速对焦。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本申请的其它特征、目的和优点将会变得更明显:
图1为本申请实施例提供的一种终端设备的结构示意图;
图2为本申请实施例提供的一种基于人脸识别的对焦方法的流程图;
图3为本申请实施例提供的一种人脸距离与人脸图像尺寸的坐标图;
图4为本申请实施例提供的另一种人脸距离与人脸图像尺寸的坐标图;
图5为本申请实施例提供的一种基于人脸识别的对焦装置的结构示意图;
图6为本申请实施例提供的另一种基于人脸识别的对焦装置的结构示意图;
图7为本申请实施例提供的另一种终端设备的结构示意图。
具体实施方式
下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释相关发明,而非对该发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与发明相关的部分。
需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。
本申请实施例提供一种基于人脸识别的对焦方法,该方法可以应用于具备拍摄功能的终端设备中,如图1所示,该终端设备100通常包括光学摄像头101和深度传感器102,该光学摄像头至少包括镜头和光学传感器,该终端设备可以为移动终端设备(例如,智能手机、数码相机、平板电脑等),或者固定终端(台式电脑)。如图2所示,该方法包括:
步骤201、检测到稳定的初始人脸图像,确定目标人脸与终端设备之间的人脸距离。
在本步骤中,终端设备可以响应于光学摄像头的启动操作,启用该光学摄像头进行场景检测,当确定场景画面中存在人脸时,确定获取到初始人脸图像,并判断该初始人脸图像是否为稳定的初始人脸图像,若是,可以启用深度传感器确定被拍摄者的目标人脸与终端设备之间的人脸距离。
需要说明的是,在本申请实施例中,终端设备判断是否获取到稳定的初始人脸图像的过程可以是:确定场景图像为初始人脸图像后,判断预设帧数内,是否检测到连续N帧之内都存在人脸图像,若是,则确定获取到稳定的初始人脸图像。其中,该预设帧数和N帧可以基于实际需要确定,本申请实施例对此不做限定,例如,预设帧数为10,3≤N≤5。
步骤202、将人脸距离输入预先建立的人脸尺寸模型中,确定与人脸距离对应的目标人脸图像尺寸。
在本申请实施例中,在人像摄影或者自拍过程中,人脸距离与人脸图像尺寸之间存在一定的关系,通常情况下,人脸距离越小,终端设备获取的初始人脸图像中的人脸图像尺寸越大,人脸距离越大,终端设备获取的初始人脸图像中的人脸图像尺寸越小,而人脸图像尺寸的大小会影响终端设备的调焦过程,影响对焦速度。该人脸图像尺寸为人脸区域的像素数。
在本申请实施例中,可以预先建立人脸尺寸模型,该人脸尺寸模型用于表示人脸距离与人脸图像尺寸之间的关系,可以通过以下方式建立人脸尺寸模型:获取多组样本人脸距离与分别对应的样本人脸图像尺寸;对多组样本人脸距离与样本人脸图像尺寸进行拟合,确定人脸尺寸模型。其中,该拟合方法可以是最小二乘法或者插值法。
可选的,获取多组样本人脸距离与分别对应的样本人脸图像尺寸的过程是:利用实验终端设备采集多个采样用户的多个样本初始人脸图像,基于每个样本初始人脸图像,确定样本人脸图像尺寸,并确定每个样本初始人脸图像的获取过程中,终端设备中的深度传感器确定的样本人脸距离,获取多组样本人脸距离与分别对应的样本人脸图像尺寸。其中,确定样本人脸图像尺寸的过程可以是:对每个样本初始人脸图像进行人脸检测,确定样本初始人脸图像中的人脸区域,统计该区域中的像素数确定样本人脸图像尺寸。
可以理解的是,该实验终端设备可以为搭载了某一型号摄像头终端设备,利用实验终端设备采集的数据确定的人脸尺寸模型,更符合该型号摄像头的光学特性,将该模型内置于多个搭载该型号摄像头的终端设备中,可以提高拍摄过程中人脸尺寸模型确定人脸尺寸的精度;或者,该实验终端设备可以为搭载了不同型号摄像头的多个终端设备,利用多个终端设备采集的数据确定的人脸尺寸模型,将该模型内置于不同搭载不同型号摄像头的终端设备中,终端设备可以在拍摄过程中进行人脸尺寸确定,该人脸识别模型具有较高的普适性。其中,该采样用户的数量可以基于实际的试验条件和实际情况确定,本申请实施例对此不做限定。
示例的,如图3所示,对于某一型号的摄像头,利用搭载该摄像头的终端设备采集了5名采样用户的样本初始人脸图像,获取多组样本人脸距离与分别对应的样本人脸图像尺寸,将该多组样本人脸距离与样本人脸图像尺寸,标记于人脸距离与人脸图像尺寸的坐标图中,其中,横坐标表示人脸距离,单位为毫米(mm),纵坐标表示人脸图像尺寸,单位为像素数。对该多组样本人脸距离与样本人脸图像尺寸进行拟合,确定人脸尺寸模型,将该人脸尺寸模型绘制于人脸距离与人脸图像尺寸的坐标图中,如图4所示,其中,横坐标表示人脸距离,单位为毫米(mm),纵坐标表示人脸图像尺寸,单位为像素,该人脸尺寸模型为y=2E-0.7x3+0.001x2-1.9061x+1537.6,其中,x为人脸距离,y为人脸图像尺寸,E为自然底数。
在本步骤中,终端设备可以调用预先建立的人脸尺寸模型,将人脸距离输入该人脸尺寸模型中,利用该人脸尺寸模型确定与该人脸距离对应的输出值为目标人脸图像尺寸。
可选的,在本申请实施例中,用户的年龄与人脸图像尺寸的大小也有关系,在成年之前,年龄越大,人脸图像尺寸越大;在成年之后,人脸图像尺寸基本不变,在拍照过程中,为了确定更精确的目标人脸图像尺寸,以提高终端设备的对焦速度,终端设备可以基于被拍摄者的年龄对获取的目标人脸图像尺寸进行修正。
在本申请实施例中,该对获取的目标人脸图像尺寸进行修正的过程可以是:在获取到初始人脸图像后,可以将初始人脸图像输入预先建立的人脸识别模型中,人脸识别模型可以确定与人脸图像对应的目标年龄;查找预先建立的目标年龄与修正系数的关系表,确定与目标年龄对应的修正系数,将目标人脸图像尺寸和修正系数的乘积确定为修正后的目标人脸图像尺寸。
可选的,可以通过以下方式建立人脸识别模型:获取不同年龄的多个样本图像;对与每个年龄对应的多个样本图像,依次输入初始人脸识别模型中;以对每个样本图像进行处理,获取样本人脸特征图像;将多个样本人脸特征图像进行特征融合,确定参考人脸特征图像;获取与每个年龄对应的参考人脸特征图像,基于与每个年龄对应的参考人脸特征图像,确定人脸识别模型。其中,可以从现有的图像数据库中获取获取不同年龄的多个样本图像,该图像数据库可以为ImageNet数据库,或者,利用终端设备拍摄获取多个样本图像,本申请实施例对此不做限定。
其中,初始人脸识别模型对每个样本图像进行处理,获取样本人脸特征图像的过程可以是:初始人脸识别模型对每个样本图像进行人脸检测,确定样本图像中的人脸区域,对该样本图像中的人脸区域进行特征提取,获取样本人脸特征图像。
可以理解的是,在本申请实施例中,人脸识别模型确定与初始人脸图像对应的目标年龄的过程可以包括:对初始人脸图像进行处理,获取人脸特征图像;将人脸特征图像与多个参考人脸特征图像进行比对;当人脸特征图像与多个参考人脸特征图像中的目标人脸特征图像的特征差异值位于预设差异值区间时,输出与目标人脸特征图像对应的年龄为目标年龄。其中,该预设差异值可以基于实际需要确定,本申请实施例对此不做限定。
其中,人脸识别模型对初始人脸图像进行处理,获取人脸特征图像的过程可以是:人脸识别模型对初始人脸图像进行人脸检测,确定初始人脸图像中的人脸区域,对该初始人脸图像中的人脸区域进行特征提取,获取人脸特征图像。
需要说明的是,在本申请实施例中,在获取不同年龄的多个样本图像的过程中,对于人脸图像尺寸与年龄向相关性较小的预设年龄阶段,可以在该年龄阶段范围内采集样本图像,减少获取样本图像的工作量。例如,人一般在18岁之后,随着年龄的增长,人脸图像尺寸一般间隔5年才会有明显变化,则预设年链阶段为19岁-23岁,24岁-28岁等;则在样本图像的采集过程中,假设对于18岁之前的年龄,如6岁,需要采集80个样本图像,则可以在19岁-23岁这一年龄阶段采集80个样本图像,可以提高样本图像的采集效率,提高人脸识别模型的训练效率,且不会影响模型的精度。
可选的,建立年龄与修正系数的关系表的过程可以,包括:获取不同年龄的多个样本图像;对于与每个年龄对应的多个样本图像,确定每个样本图像中的样本人脸图像尺寸;确定多个第一均值,该第一均值为与每个年龄对应的多个样本人脸图像尺寸的均值;确定每个第一均值与第二均值的比值,得到与每个年龄对应的修正系数,该第二均值为所有样本人脸图像尺寸的均值;建立年龄与修正系数之间的对应关系。其中,确定样本人脸图像尺寸的过程可以参考上述实施例中的确定样本人脸图像尺寸的过程,本申请实施例对此不再赘述。
示例的,可以采集1-100岁年龄阶段,每个年龄的样本图像80张,则可以获取8080张样本图像,对于与1岁对应的80张样本图像,获取每个样本图像中的样本人脸图像尺寸80个,确定80个样本人脸图像尺寸的第一均值P1;并获取采集的1-100岁年龄阶段的8080张样本图像中,8080个样本人脸图像尺寸的第二均值P,确定第一均值P1与第二均值P的比值,可以确定与1岁对应的修正系数。可以理解的是,该8080张样本图像的拍摄距离可以不做限定,可以获取不同年龄阶段的不同样本人脸图像尺寸的样本图像,可以提高最终确定的修正系数的准确度。
步骤203、基于目标人脸图像尺寸确定镜头的对焦位置区域,以控制镜头移动至对焦位置区域内移动进行对焦。
在本申请实施例中,不同的目标人脸图像尺寸对应的镜头位置不同,不同的目标人脸图像尺寸对应的目标移动距离不同,该镜头位置是指:人脸图像尺寸为目标人脸图像尺寸时,保证终端设备能清晰成像情况下的镜头所处的位置,该目标移动距离是指:人脸图像尺寸为目标人脸图像尺寸时,预设的实现镜头快速对焦所需的镜头移动距离。其中,该与不同目标人脸图像尺寸对应的目标移动距离的具体数据可以基于实际经验或者实际需要确定,本申请实施例对此不做限定。可以理解的是,可以预先建立目标人脸图像尺寸与目标移动距离的关系表。
在本步骤中,基于目标人脸图像尺寸确定镜头的对焦位置区域的过程可以是:可以利用确定的目标人脸图像尺寸和预先建立目标人脸图像尺寸与目标移动距离的关系表,确定与该目标人脸图像尺寸对应的目标移动距离L;将该目标人脸图像尺寸输入对焦算法中,确定与该目标人脸图像尺寸对应的镜头位置h;将镜头位置h与目标移动距离一半的差值,确定为第一对焦位置a,该第一对焦位置a=h-L/2;将镜头位置h与目标移动距离一半的和值,确定为第二对焦位置b,该第二对焦位置b=h+L/2;将第一对焦位置a与第二对焦位置b之间的位置区域确定为镜头的对焦位置区域。在确定出镜头的对焦位置区域后,可以控制镜头迅速移动至该位置区域进行对焦,提高对焦速度。其中,该对焦算法可以为相位对焦算法。
示例的,假设终端设备中镜头的实际可以移动范围为距离光学传感器0微米至500微米的位置区域之间,确定的与某一目标人脸图像尺寸对应的镜头位置为,距离光学传感器300微米的位置,与该目标人脸图像尺寸对应的目标移动距离为200微米,则可以确定与该目标人脸图像尺寸对应的对焦位置区域为:镜头距离光学传感器200微米的位置,至镜头距离光学传感器400微米的位置之间的位置区域。可以防止镜头在镜头距离光学传感器0微米至500微米的位置区域之间移动进行对焦,提高终端设备的对焦速度。
可以理解的是,在本申请实施例中,终端设备在进行人脸拍摄过程中,由于可以基于预先建立的模型和关系表,通过简单模型调用和关系表的查找,就可以实现控制镜头移动至合适的位置区域进行对焦,不仅可以实现快速对焦,且大大降低了设备的功耗。
综上所述,本申请实施例提供的基于人脸识别的对焦方法,可以检测到稳定的初始人脸图像,确定目标人脸与终端设备之间的人脸距离;将人脸距离输入预先建立的人脸尺寸模型中,确定与人脸距离对应的目标人脸图像尺寸;基于目标人脸图像尺寸确定镜头的对焦位置区域,以控制镜头移动至对焦位置区域进行对焦。可以基于人脸图像尺寸对镜头的对焦范围进行限定,控制镜头在合适的位置区域移动,实现快速对焦。
本申请实施例提供一种基于人脸识别的对焦装置,如图5所示,该装置30包括:
第一确定模块301,被配置为检测到稳定的初始人脸图像,确定目标人脸与终端设备之间的人脸距离;
第二确定模块302,被配置为将人脸距离输入预先建立的人脸尺寸模型中,确定与人脸距离对应的目标人脸图像尺寸;
第三确定模块303,被配置为基于目标人脸图像尺寸确定镜头的对焦位置区域,以控制镜头移动至对焦位置区域进行对焦。
可选的,通过以下方式建立人脸尺寸模型,包括:
获取多组样本人脸距离与分别对应的样本人脸图像尺寸;
对多组样本人脸距离与样本人脸图像尺寸进行拟合,确定人脸尺寸模型。
可选的,如图6所示,该装置30还包括修正模块304,被配置为:
将初始人脸图像输入预先建立的人脸识别模型中,确定与初始人脸图像对应的目标年龄;
查找预先建立的年龄与修正系数的关系表,确定与目标年龄对应的修正系数;
将目标人脸图像尺寸和修正系数的乘积确定为修正后的目标人脸图像尺寸。
可选的,通过以下方式建立人脸识别模型,包括:
获取不同年龄的多个样本图像;
对与每个年龄对应的多个样本图像,依次输入初始人脸识别模型中,以对每个样本图像进行处理,获取样本人脸特征图像;
将多个样本人脸特征图像进行特征融合,确定参考人脸特征图像;
基于与每个年龄对应的参考人脸特征图像,确定人脸识别模型。
可选的,修正模块304,被配置为:
对初始人脸图像进行处理,获取人脸特征图像;
将人脸特征图像与多个参考人脸特征图像进行比对;
当人脸特征图像与多个参考人脸特征图像中的目标人脸特征图像的特征差异值位于预设差异值区间时,确定与目标人脸特征图像对应的年龄为目标年龄。
可选的,通过以下方式建立年龄与修正系数的关系表,包括:
获取不同年龄的多个样本图像;
对于与每个年龄对应的多个样本图像,获取每个样本图像中的样本人脸图像尺寸;
确定多个第一均值,第一均值为与每个年龄对应的多个样本人脸图像尺寸的第一均值;
确定每个第一均值与第二均值的比值,获取与每个年龄对应的修正系数,第二均值为所有样本人脸图像尺寸的均值;
建立年龄与修正系数之间的对应关系。
可选的,第三确定模块303,被配置为:
确定与目标人脸图像尺寸对应的镜头位置和目标移动距离;
将镜头位置与目标移动距离一半的差值,确定为第一对焦位置;
将镜头位置与目标移动距离一半的和值,确定为第二对焦位置;
将第一对焦位置与第二对焦位置之间的位置区域确定为镜头的对焦位置区域。
综上所述,本申请实施例提供的基于人脸识别的对焦装置,可以检测到稳定的初始人脸图像,确定目标人脸与终端设备之间的人脸距离;将人脸距离输入预先建立的人脸尺寸模型中,确定与人脸距离对应的目标人脸图像尺寸;基于目标人脸图像尺寸确定镜头的对焦位置区域,以控制镜头移动至对焦位置区域进行对焦。可以基于人脸图像尺寸对镜头的对焦范围进行限定,控制镜头在合适的位置区域移动,实现快速对焦。
图7是根据一示例性实施例示出的一种终端设备40的框图。例如,终端设备40可以是移动电话,计算机,数字广播终端,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备,个人数字助理等。
参照图7,装置40可以包括以下一个或多个组件:处理组件402,存储器404,电源组件406,多媒体组件408,音频组件410,输入/输出(I/O)的接口412,传感器组件414,以及通信组件416。
处理组件402通常控制装置40的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件402可以包括一个或多个处理器420来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件402可以包括一个或多个模块,便于处理组件402和其他组件之间的交互。例如,处理组件402可以包括多媒体模块,以方便多媒体组件408和处理组件402之间的交互。
存储器404被配置为存储各种类型的数据以支持在装置40的操作。这些数据的示例包括用于在装置40上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器404可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电源组件406为装置40的各种组件提供电力。电源组件406可以包括电源管理系统,一个或多个电源,及其他与为装置40生成、管理和分配电力相关联的组件。
多媒体组件408包括在所述装置40和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件408包括一个前置摄像头和/或后置摄像头。当装置40处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件410被配置为输出和/或输入音频信号。例如,音频组件410包括一个麦克风(MIC),当装置40处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器404或经由通信组件416发送。在一些实施例中,音频组件410还包括一个扬声器,用于输出音频信号。
I/O接口412为处理组件402和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件414包括一个或多个传感器,用于为装置40提供各个方面的状态评估。例如,传感器组件414可以检测到装置40的打开/关闭状态,组件的相对定位,例如所述组件为装置40的显示器和小键盘,传感器组件414还可以检测装置40或装置40一个组件的位置改变,用户与装置40接触的存在或不存在,装置40方位或加速/减速和装置40的温度变化。传感器组件414可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件414还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件414还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件416被配置为便于装置40和其他设备之间有线或无线方式的通信。装置40可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信组件416经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件416还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,装置40可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
作为另一方面,本申请还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被一个该电子设备执行时,使得该电子设备实现如上述实施例中描述的基于人脸识别的对焦方法。
以上描述仅为本申请的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本申请中所涉及的发明范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离所述发明构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本申请中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
Claims (10)
1.一种基于人脸识别的对焦方法,其特征在于,包括:
检测到稳定的初始人脸图像,确定目标人脸与终端设备之间的人脸距离;
将所述人脸距离输入预先建立的人脸尺寸模型中,确定与所述人脸距离对应的目标人脸图像尺寸;
基于所述目标人脸图像尺寸确定镜头的对焦位置区域,以控制所述镜头移动至所述对焦位置区域进行对焦。
2.根据权利要求1所述的方法,其特征在于,通过以下方式建立所述人脸尺寸模型:
获取多组样本人脸距离与分别对应的样本人脸图像尺寸;
对多组所述样本人脸距离与所述样本人脸图像尺寸进行拟合,确定所述人脸尺寸模型。
3.根据权利要求1所述的方法,其特征在于,在基于所述目标人脸图像尺寸确定镜头的对焦位置区域之前,所述方法还包括:
将所述初始人脸图像输入预先建立的人脸识别模型中,确定与所述初始人脸图像对应的目标年龄;
查找预先建立的年龄与修正系数的关系表,确定与所述目标年龄对应的修正系数;
将所述目标人脸图像尺寸和所述修正系数的乘积确定为修正后的目标人脸图像尺寸。
4.根据权利要求3所述的方法,其特征在于,通过以下方式建立所述人脸识别模型:
获取不同年龄的多个样本图像;
对与每个年龄对应的多个所述样本图像,依次输入初始人脸识别模型中,以对每个所述样本图像进行处理,获取样本人脸特征图像;
将多个所述样本人脸特征图像进行特征融合,确定参考人脸特征图像;
基于与每个年龄对应的参考人脸特征图像,确定所述人脸识别模型。
5.根据权利要求4所述的方法,其特征在于,所述确定与所述初始人脸图像对应的目标年龄,包括:
对所述初始人脸图像进行处理,获取人脸特征图像;
将所述人脸特征图像与多个所述参考人脸特征图像进行比对;
当所述人脸特征图像与多个所述参考人脸特征图像中的目标人脸特征图像的特征差异值位于预设差异值区间时,确定与所述目标人脸特征图像对应的年龄为目标年龄。
6.根据权利要求3所述的方法,其特征在于,通过以下方式建立年龄与修正系数的关系表:
获取不同年龄的多个样本图像;
对于与每个年龄对应的多个所述样本图像,确定每个所述样本图像中的样本人脸图像尺寸;
确定多个第一均值,所述第一均值为与每个年龄对应的多个所述样本人脸图像尺寸的均值;
确定每个所述第一均值与第二均值的比值,得到与每个年龄对应的修正系数,所述第二均值为所有所述样本人脸图像尺寸的均值;
建立所述年龄与所述修正系数之间的对应关系。
7.根据权利要求1-6任一所述的方法,其特征在于,所述基于所述目标人脸图像尺寸确定镜头的对焦位置区域,包括:
确定与所述目标人脸图像尺寸对应的镜头位置和目标移动距离;
将所述镜头位置与所述目标移动距离一半的差值,确定为第一对焦位置;
将所述镜头位置与所述目标移动距离一半的和值,确定为第二对焦位置;
将所述第一对焦位置与所述第二对焦位置之间的位置区域确定为所述镜头的对焦位置区域。
8.一种基于人脸识别的对焦装置,其特征在于,包括:
第一确定模块,被配置为检测到稳定的初始人脸图像,确定目标人脸与终端设备之间的人脸距离;
第二确定模块,被配置为将所述人脸距离输入预先建立的人脸尺寸模型中,确定与所述人脸距离对应的目标人脸图像尺寸;
第三确定模块,被配置为基于所述目标人脸图像尺寸确定镜头的对焦位置区域,以控制所述镜头移动至所述对焦位置区域进行对焦。
9.一种终端设备,其特征在于,所述终端设备包括:
处理组件;
用于存储所述处理组件的可执行指令的存储器;
其中,所述处理组件被配置为执行权利要求1-7任一项所述的方法。
10.一种计算机可读存储介质,其特征在于,其上存储有计算机程序,所述计算机程序用于实现如权利要求1-7任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011062483.XA CN114339021A (zh) | 2020-09-30 | 2020-09-30 | 基于人脸识别的对焦方法、装置、终端设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011062483.XA CN114339021A (zh) | 2020-09-30 | 2020-09-30 | 基于人脸识别的对焦方法、装置、终端设备和存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114339021A true CN114339021A (zh) | 2022-04-12 |
Family
ID=81032228
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011062483.XA Pending CN114339021A (zh) | 2020-09-30 | 2020-09-30 | 基于人脸识别的对焦方法、装置、终端设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114339021A (zh) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007248698A (ja) * | 2006-03-15 | 2007-09-27 | Fujifilm Corp | 撮像方法および装置 |
JP2008282031A (ja) * | 2008-06-23 | 2008-11-20 | Sony Corp | 撮像装置、および撮像装置制御方法、並びにコンピュータ・プログラム |
CN104112121A (zh) * | 2014-07-01 | 2014-10-22 | 深圳市欢创科技有限公司 | 用于互动游戏装置的人脸识别方法、装置及互动游戏系统 |
CN106412437A (zh) * | 2016-10-19 | 2017-02-15 | 广东欧珀移动通信有限公司 | 终端的对焦方法、装置及终端 |
CN107590469A (zh) * | 2017-09-18 | 2018-01-16 | 维沃移动通信有限公司 | 一种人脸检测方法及移动终端 |
CN109376674A (zh) * | 2018-10-31 | 2019-02-22 | 北京小米移动软件有限公司 | 人脸检测方法、装置及存储介质 |
-
2020
- 2020-09-30 CN CN202011062483.XA patent/CN114339021A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007248698A (ja) * | 2006-03-15 | 2007-09-27 | Fujifilm Corp | 撮像方法および装置 |
JP2008282031A (ja) * | 2008-06-23 | 2008-11-20 | Sony Corp | 撮像装置、および撮像装置制御方法、並びにコンピュータ・プログラム |
CN104112121A (zh) * | 2014-07-01 | 2014-10-22 | 深圳市欢创科技有限公司 | 用于互动游戏装置的人脸识别方法、装置及互动游戏系统 |
CN106412437A (zh) * | 2016-10-19 | 2017-02-15 | 广东欧珀移动通信有限公司 | 终端的对焦方法、装置及终端 |
CN107590469A (zh) * | 2017-09-18 | 2018-01-16 | 维沃移动通信有限公司 | 一种人脸检测方法及移动终端 |
CN109376674A (zh) * | 2018-10-31 | 2019-02-22 | 北京小米移动软件有限公司 | 人脸检测方法、装置及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3032821B1 (en) | Method and device for shooting a picture | |
CN108419016B (zh) | 拍摄方法、装置及终端 | |
CN110557547B (zh) | 镜头位置调整方法及装置 | |
CN106408603B (zh) | 拍摄方法及装置 | |
CN108668080B (zh) | 提示镜头脏污程度的方法及装置、电子设备 | |
CN107944367B (zh) | 人脸关键点检测方法及装置 | |
EP3544286A1 (en) | Focusing method, device and storage medium | |
CN107480785B (zh) | 卷积神经网络的训练方法及装置 | |
CN113364965A (zh) | 基于多摄像头的拍摄方法、装置及电子设备 | |
CN108629814B (zh) | 相机调整方法及装置 | |
CN112004020B (zh) | 图像处理方法、装置、电子设备及存储介质 | |
EP4304190A1 (en) | Focus chasing method, electronic device, and storage medium | |
CN107770444B (zh) | 拍照参数确定方法及装置 | |
CN108769513B (zh) | 相机拍照方法及装置 | |
CN115713641A (zh) | 视频获取方法、装置及存储介质 | |
CN114339021A (zh) | 基于人脸识别的对焦方法、装置、终端设备和存储介质 | |
CN114268743A (zh) | 图像获取方法、装置、设备及存储介质 | |
CN114418865A (zh) | 图像处理方法、装置、设备及存储介质 | |
CN107707819B (zh) | 图像拍摄方法、装置及存储介质 | |
CN107682623B (zh) | 拍照方法及装置 | |
CN114339017B (zh) | 远景对焦方法、装置及存储介质 | |
CN115118950B (zh) | 图像处理方法及装置 | |
CN109447929B (zh) | 图像合成方法及装置 | |
CN113551768B (zh) | 确定环境亮度的方法及装置 | |
CN117522942A (zh) | 深度距离测量方法、装置、电子设备及可读储存介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20220412 |