CN109271916A - 电子装置及其控制方法、控制装置和计算机可读存储介质 - Google Patents

电子装置及其控制方法、控制装置和计算机可读存储介质 Download PDF

Info

Publication number
CN109271916A
CN109271916A CN201811048674.3A CN201811048674A CN109271916A CN 109271916 A CN109271916 A CN 109271916A CN 201811048674 A CN201811048674 A CN 201811048674A CN 109271916 A CN109271916 A CN 109271916A
Authority
CN
China
Prior art keywords
electronic device
infrared
face
control
current
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811048674.3A
Other languages
English (en)
Other versions
CN109271916B (zh
Inventor
张学勇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201811048674.3A priority Critical patent/CN109271916B/zh
Publication of CN109271916A publication Critical patent/CN109271916A/zh
Priority to PCT/CN2019/090016 priority patent/WO2020052282A1/zh
Application granted granted Critical
Publication of CN109271916B publication Critical patent/CN109271916B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof
    • G06V10/14Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/147Details of sensors, e.g. sensor lenses

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Vascular Medicine (AREA)
  • Studio Devices (AREA)

Abstract

本发明公开了一种电子装置的控制方法。电子装置包括飞行时间模组。飞行时间模组包括红外光发射器和红外光摄像头。控制方法包括:控制红外光摄像头采集人脸的当前红外光图像;根据当前红外光图像进行人脸认证;控制红外光发射器和红外光摄像头同时工作以采集人脸的当前深度图像;根据当前深度图像进行深度认证;和在人脸认证和深度认证均通过时,控制电子装置执行预定操作。此外,本发明还公开了一种电子装置的控制装置、电子装置和计算机可读存储介质。本发明实施方式的电子装置的控制方法、电子装置的控制装置、电子装置和计算机可读存储介质在人脸认证和深度认证均通过时,才控制电子装置执行预定操作,身份认证的可靠性较高。

Description

电子装置及其控制方法、控制装置和计算机可读存储介质
技术领域
本发明涉及消费性电子产品领域,更具体而言,涉及一种电子装置的控制方法、电子装置的控制装置、电子装置和计算机可读存储介质。
背景技术
随着电子技术的快速发展,诸如智能手机、平板电脑等电子装置已经越来越普及。电子装置通常根据用户输入的人脸二维图像来验证用户是否具有相关的使用权限,这种身份认证的方式可靠性较低。
发明内容
本发明实施方式提供一种电子装置的控制方法、电子装置的控制装置、电子装置和计算机可读存储介质。
本发明实施方式提供一种电子装置的控制方法,所述电子装置包括飞行时间(Time Of Flight,TOF)模组,所述飞行时间模组包括红外光发射器和红外光摄像头,所述控制方法包括:控制所述红外光摄像头采集人脸的当前红外光图像;根据所述当前红外光图像进行人脸认证;控制所述红外光发射器和所述红外光摄像头同时工作以采集人脸的当前深度图像;根据所述当前深度图像进行深度认证;和在所述人脸认证和所述深度认证均通过时,控制所述电子装置执行预定操作。
本发明实施方式提供一种电子装置的控制装置,所述电子装置包括飞行时间模组,所述飞行时间模组包括红外光发射器和红外光摄像头,所述控制装置包括第一控制模块、第一认证模块、第二控制模块、第二认证模块和第三控制模块;第一控制模块用于控制所述红外光摄像头采集人脸的当前红外光图像;第一认证模块用于根据所述当前红外光图像进行人脸认证;第二控制模块用于控制所述红外光发射器和所述红外光摄像头同时工作以采集人脸的当前深度图像;第二认证模块用于根据所述当前深度图像进行深度认证;第三控制模块用于在所述人脸认证和所述深度认证均通过时,控制所述电子装置执行预定操作。
本发明实施方式提供一种电子装置,所述电子装置包括飞行时间模组、一个或多个处理器、存储器以及一个或多个程序,所述飞行时间模组包括红外光发射器和红外光摄像头;其中所述一个或多个程序被存储在所述存储器中,并且被配置由所述一个或多个处理器执行,所述程序包括用于执行上述实施方式所述的电子装置的控制方法的指令。
本发明实施方式提供一种计算机可读存储介质,所述计算机可读存储介质包括与电子装置结合使用的计算机程序,所述计算机程序可被处理器执行以完成上述实施方式所述的电子装置的控制方法。
本发明实施方式的电子装置的控制方法、电子装置的控制装置、电子装置和计算机可读存储介质在人脸认证和深度认证均通过时,才控制电子装置执行预定操作,身份认证的可靠性较高。另外,红外光摄像头既可以用于采集人脸的红外光图像,又可以用于采集人脸的深度图像,相对于电子装置单独设置一个红外光摄像头采集红外光图像,再设置一个包括有红外光发射器和红外光摄像头的飞行时间模组来采集深度图像而言,减少了红外光摄像头的数量,有利于节省电子装置内的安装空间和成本。
本发明的实施方式的附加方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实施方式的实践了解到。
附图说明
本发明的上述和/或附加的方面和优点从结合下面附图对实施方式的描述中将变得明显和容易理解,其中:
图1是本发明实施方式的电子装置的控制方法的流程示意图;
图2是本发明实施方式的电子装置的控制装置的模块示意图;
图3是本发明实施方式的电子装置的结构示意图;
图4是本发明实施方式的电子装置的控制方法的流程示意图;
图5是本发明实施方式的电子装置的控制装置的模块示意图;
图6是本发明实施方式的电子装置的控制方法的场景示意图;
图7是本发明实施方式的电子装置的控制方法的流程示意图;
图8是本发明实施方式的电子装置的控制装置的模块示意图;
图9是本发明实施方式的电子装置的控制方法的场景示意图;
图10是本发明实施方式的电子装置的控制方法的流程示意图;
图11是本发明实施方式的电子装置的控制装置的模块示意图;
图12是本发明实施方式的电子装置的控制方法的场景示意图;
图13是本发明实施方式的电子装置的模块示意图;
图14是本发明实施方式的电子装置和计算机可读存储介质的连接状态示意图;
图15是本发明实施方式的飞行时间模组的立体结构示意图;
图16是本发明实施方式的红外光摄像头的电路结构示意图;
图17是本发明实施方式的红外光摄像头的结构示意图;
图18是本发明实施方式的红外光摄像头的电路结构示意图;
图19是本发明实施方式的红外光摄像头的工作示意图;
图20是本发明实施方式的红外光摄像头的电路结构示意图;
图21至图25是本发明实施方式的红外光发射器的结构示意图;
图26是本发明实施方式的飞行时间模组的平面结构示意图;
图27是图26所示的飞行时间模组沿XXVII线的截面示意图。
具体实施方式
以下结合附图对本发明的实施方式作进一步说明。附图中相同或类似的标号自始至终表示相同或类似的元件或具有相同或类似功能的元件。另外,下面结合附图描述的本发明的实施方式是示例性的,仅用于解释本发明的实施方式,而不能理解为对本发明的限制。
请参阅图1和图3,本发明实施方式提供一种电子装置300的控制方法。电子装置300包括飞行时间模组200。飞行时间模组200包括红外光发射器100和红外光摄像头54。控制方法包括:
011:控制红外光摄像头54采集人脸的当前红外光图像;
012:根据当前红外光图像进行人脸认证;
013:控制红外光发射器100和红外光摄像头54同时工作以采集人脸的当前深度图像;
014:根据当前深度图像进行深度认证;和
015:在人脸认证和深度认证均通过时,控制电子装置300执行预定操作。
请参阅图2和图3,本发明实施方式提供一种电子装置300的控制装置210。电子装置300包括飞行时间模组200。飞行时间模组200包括红外光发射器100和红外光摄像头54。控制装置210包括第一控制模块211、第一认证模块212、第二控制模块213、第二认证模块214和第三控制模块215。本发明实施方式的控制方法可由本发明实施方式的控制装置210实现。例如,第一控制模块211可用于执行011中的方法,第一认证模块212可用于执行012中的方法,第二控制模块213可用于执行013中的方法,第二认证模块214可用于执行014中的方法,第三控制模块215可用于执行015中的方法。
也即是说,第一控制模块211可以用于控制红外光摄像头54采集人脸的当前红外光图像。第一认证模块212可以用于根据当前红外光图像进行人脸认证。第二控制模块213可以用于控制红外光发射器100和红外光摄像头54同时工作以采集人脸的当前深度图像。第二认证模块214可以用于根据当前深度图像进行深度认证。第三控制模块215可以用于在人脸认证和深度认证均通过时,控制电子装置300执行预定操作。
本发明实施方式的电子装置300的控制方法和控制装置210在人脸认证和深度认证均通过时,才控制电子装置300执行预定操作,身份认证的可靠性较高。另外,红外光摄像头54既可以用于采集人脸的红外光图像,又可以用于采集人脸的深度图像,相对于电子装置300单独设置一个红外光摄像头54采集红外光图像,再设置一个包括有红外光发射器100和红外光摄像头54的飞行时间模组200来采集深度图像而言,减少了红外光摄像头54的数量,有利于节省电子装置300内的安装空间和成本。
请参阅图3,电子装置300可以是手机、平板电脑、智能手表、智能手环、智能穿戴设备等,本发明实施方式以电子装置300是手机为例进行说明,可以理解,电子装置300的具体形式并不限于手机。
电子装置300可包括机壳301和支架302。飞行时间模组200设置在支架302上。飞行时间模组200和支架302均收容在机壳301内并能够从机壳301中伸出。具体地,当红外光摄像头54用于采集人脸的红外光图像或红外光发射器100和红外光摄像头54同时工作以采集人脸的深度图像时,支架302带动飞行时间模组200朝机壳301外运动以伸出机壳301,从而采集红外光图像或深度图像。本发明实施方式中,飞行时间模组200可以为前置摄像头或者均为后置摄像头。在其他实施方式中,机壳301上可以开设有通光孔(图未示),飞行时间模组200不可移动地设置在机壳301内并与通光孔对应。在再一实施方式中,电子装置300设置在机壳301上的显示屏303可以开设有通光孔(图未示),飞行时间模组200设置在显示屏303的下方。
本发明实施方式中,红外光摄像头54采集人脸的当前红外光图像与红外光发射器100和红外光摄像头54同时工作以采集人脸的当前深度图像,两者之间的先后顺序可以是任意的。例如,红外光摄像头54先采集人脸的当前红外光图像,红外光发射器100和红外光摄像头54再同时工作以采集人脸的当前深度图像;或者,红外光发射器100和红外光摄像头54先同时工作以采集人脸的当前深度图像,红外光摄像头54再采集人脸的当前红外光图像。进一步地,红外光发射器100和红外光摄像头54可在电子装置300进行人脸认证的同时工作以采集人脸的当前深度图像,或者,红外光摄像头54在电子装置300进行深度认证的同时采集人脸的当前红外光图像,以减少完成人脸认证和深度认证的时间。
在某些实施方式中,控制红外光发射器100和红外光摄像头54同时工作以采集人脸的当前深度图像的步骤(即013)是在人脸认证通过时进行的。也即是说,第二控制模块213可以用于在人脸认证通过时,控制红外光发射器100和红外光摄像头54同时工作以采集人脸的当前深度图像。
具体地,电子装置300先通过红外光摄像头54采集人脸的当前红外光图像,然后根据当前红外光图像进行人脸认证。当人脸认证不通过时,电子装置300无需控制红外光发射器100和红外光摄像头54同时工作以采集人脸的当前深度图像,直接判断为身份认证失败;当人脸认证通过时,电子装置300控制红外光发射器100和红外光摄像头54同时工作以采集人脸的当前深度图像,并根据当前深度图像进行深度认证。由于在人脸认证不通过时,红外光发射器100和红外光摄像头54无需工作以采集人脸的当前深度图像,有利于节省电子装置300的能耗。
在某些实施方式中,控制红外光摄像头54采集人脸的当前红外光图像的步骤(即011)是在深度认证通过时进行的。也即是说,第一控制模块211可以用于在深度认证通过时,控制红外光摄像头54采集人脸的当前红外光图像。
具体地,电子装置300先控制红外光发射器100和红外光摄像头54同时工作以采集人脸的当前深度图像,然后根据当前深度图像进行深度认证。当深度认证不通过时,电子装置300无需通过红外光摄像头54采集人脸的当前红外光图像,直接判断为身份认证失败;当深度认证通过时,电子装置300通过红外光摄像头54采集人脸的当前红外光图像,并根据当前红外光图像进行人脸认证。由于在深度认证不通过时,红外光摄像头54无需采集人脸的当前红外光图像,有利于节省电子装置300的能耗。
在某些实施方式中,预定操作包括解锁、点亮电子装置300的显示屏303(如图3所示)、电子支付、打开电子装置300的预定应用程序中的至少一种。也即是说,用户可以直接通过进行人脸认证和深度认证,获得在电子装置300相应的操作权限,无需手动控制电子装置300执行预定操作,有利于提升用户体验,且安全性较高。
请参阅图4,在某些实施方式中,控制红外光摄像头54采集人脸的当前红外光图像的步骤(即011)和控制红外光发射器100和红外光摄像头54同时工作以采集人脸的当前深度图像的步骤(即013)是在电子装置300处于解锁过程中进行的,控制方法还包括:
016:在加密过程中控制红外光摄像头54采集人脸的参考红外光图像;
根据当前红外光图像进行人脸认证的步骤(即012)包括:
0122:判断当前红外光图像与参考红外光图像之间的第一相似度;
控制方法还包括:
017:在加密过程中控制红外光发射器100和红外光摄像头54同时工作以采集人脸的参考深度图像;
根据当前深度图像进行深度认证的步骤(即014)包括:
0142:判断当前深度图像与参考深度图像之间的第二相似度;
在人脸认证和深度认证均通过时,控制电子装置300执行预定操作的步骤(即015)包括:
0152:在第一相似度大于第一阈值且第二相似度大于第二阈值时,控制电子装置300解锁。
请参阅图5,在某些实施方式,第一控制模块211用于在电子装置300处于解锁过程中控制红外光摄像头54采集人脸的当前红外光图像。第二控制模块213用于在电子装置300处于解锁过程中控制红外光发射器100和红外光摄像头54同时工作以采集人脸的当前深度图像。控制装置210还包括第四控制模块216和第五控制模块217。第一认证模块212包括第一认证单元2122,第二认证模块214包括第二认证单元2142,第三控制模块215包括第一控制单元2152。第四控制模块216可用于执行016中的方法,第五控制模块217可用于执行017中的方法,第一认证单元2122可用于执行0122中的方法,第二认证单元2142可用于执行0142中的方法,第一控制单元2152可用于执行0152中的方法。也即是说,第四控制模块216可以用于在加密过程中控制红外光摄像头54采集人脸的参考红外光图像。第一认证单元2122可以用于在判断当前红外光图像与参考红外光图像之间的第一相似度。第五控制模块217可以用于在加密过程中控制红外光发射器100和红外光摄像头54同时工作以采集人脸的参考深度图像。第二认证单元2142可以用于判断当前深度图像与参考深度图像之间的第二相似度。第一控制单元2152可以用于在第一相似度大于第一阈值且第二相似度大于第二阈值时,控制电子装置300解锁。
本发明实施方式中,电子装置300在加密过程中提前录入人脸的参考红外光图像和参考深度图像,以作为电子装置300解锁过程中进行人脸认证和深度认证的比对基准。
作为比对基准的参考深度图像可包括人脸多个不同角度的初始深度图像,多个初始深度图像可以在用户的头部偏转到不同角度后获取。例如,用户在显示屏303显示的内容的指引下,头部分别做左偏、右偏等偏转动作。在偏转过程中,红外光发射器100和红外光摄像头54同时工作以采集人脸的多个初始深度图像。最终,参考深度图像包括了与人脸右偏对应的参考深度图像、与人脸正面对应的参考深度图像、与人脸左偏对应的参考深度图像。
以图6为例,参考深度图像包括与人脸右偏对应的参考深度图像1、与人脸正面对应的参考深度图像2、与人脸左偏对应的参考深度图像3。
在一个实施方式中,在判断当前深度图像与参考深度图像之间的第二相似度时,电子装置300依次或并行判断当前深度图像与参考深度图像1之间的相似度1、当前深度图像与参考深度图像2之间的相似度2、当前深度图像与参考深度图像3之间的相似度3,并选取相似度1、相似度2、相似度3之中的最大值作为当前深度图像与参考深度图像之间的第二相似度。
在另一个实施方式中,在判断当前深度图像与参考深度图像之间的第二相似度时,电子装置300先根据当前深度图像检测人脸相对于电子装置300的偏转方向及偏转角度,当人脸相对于电子装置300右偏90度时,电子装置300选取参考深度图像1作为与当前深度图像进行比对的参考深度图像,也即是说,电子装置300将当前深度图像与参考深度图像1之间的相似度1作为当前深度图像与参考深度图像之间的第二相似度。当人脸相对于电子装置300未发生偏转时(即当前深度图像为人脸正面图像),电子装置300选取参考深度图像2作为与当前深度图像进行比对的参考深度图像,也即是说,电子装置300将当前深度图像与参考深度图像2之间的相似度2作为当前深度图像与参考深度图像之间的第二相似度。当人脸相对于电子装置300左偏90度时,电子装置300选取参考深度图像3作为与当前深度图像进行比对的参考深度图像,也即是说,电子装置300将当前深度图像与参考深度图像3之间的相似度3作为当前深度图像与参考深度图像之间的第二相似度。
类似地,作为比对基准的参考红外光图像也可包括人脸多个不同角度的初始红外光图像,多个初始红外光图像的获取方式与多个初始深度图像的获取方式类似,确定第一相似度的方式也与确定第二相似度的方式类似,在此不再详细说明。本发明实施方式中,在用户需要进行人脸认证和深度验证时,用户可以采用任意偏转角度进行人脸认证和深度认证,而不要求严格按照某个角度对准红外光摄像头54或红外光发射器100和红外光摄像头54,有利于提升用户体验。
在确定第一相似度后,电子装置300根据第一相似度进行人脸认证。在确定第二相似度后,电子装置300根据第二相似度进行身份认证。以第一阈值为80%、第二阈值为70%为例,当第一相似度大于70%、第二相似度大于70%时,人脸认证和深度认证均通过,电子装置300执行预定操作。需要指出的是,第一阈值与第二阈值为相似度的百分比,第一阈值与第二阈值可以为相同的值,也可以为不同的值。
请再次参阅图4,在某些实施方式中,控制方法还包括:
018:在第一相似度大于第三阈值而第二相似度小于第四阈值时,锁定电子装置300;其中,第三阈值大于第一阈值,第四阈值小于第二阈值。
请再次参阅图5,在某些实施方式中,控制装置210还包括锁定模块218。锁定模块218可用于执行018中的方法。也即是说,锁定模块218可以用于在第一相似度大于第三阈值而第二相似度小于第四阈值时,锁定电子装置300。其中,第三阈值大于第一阈值,第四阈值小于第二阈值。
具体地,仍以第一阈值为80%、第二阈值为70%为例,此时,第三阈值可以为95%,第四阈值可以为30%。当第一相似度为99%、第二相似度为20%时,由于第一相似度大于第三阈值,说明人脸的当前红外光图像与参考红外光图像的相似度很高,而第二相似度远小于第四阈值,说明人脸的当前深度图像与参考深度图像的相似度很低,则很有可能是非机主采用照片或其他仿照物来进行身份认证,此时,电子装置300将进入锁定状态,以保护电子装置300内信息的安全。
需要指出的是,第一阈值、第二阈值、第三阈值和第四阈值的设置并不限于上述举例,用户可以根据自身需要来设置第一阈值、第二阈值、第三阈值和第四阈值,或者在电子装置300出厂前,第一阈值、第二阈值、第三阈值和第四阈值已经被设置好。
请参阅图7,在某些实施方式中,控制方法还包括:
019:识别当前深度图像中的目标特征点;
020:根据目标特征点将当前深度图像划分为第一区域和第二区域,其中,第一区域包括目标特征点;
参考深度图像包括第一参考深度图像和第二参考深度图像,判断当前深度图像与参考深度图像之间的第二相似度的步骤(即0142)包括:
01422:判断第一区域与第一参考深度图像之间的第一子相似度;
01424:判断第二区域与第二参考深度图像之间的第二子相似度;
第二阈值包括第一子阈值和第二子阈值,第一子阈值大于第二子阈值,在第一相似度大于第一阈值且第二相似度大于第二阈值时,控制电子装置300解锁的步骤(即0152)包括:
01522:在第一子相似度大于第一子阈值,第二子相似度大于第二子阈值,且第二相似度大于第二阈值时,控制电子装置300解锁。
请参阅图8,在某些实施方式中,控制装置210还包括第一识别模块219和划分模块220。第二认证单元2142包括第一判断子单元21422和第二判断子单元21424。第一控制单元2152包括控制子单元21522。第一识别模块219可用于执行019中的方法,划分模块220可用于执行020中的方法,第一判断子单元21422可用于执行01422中的方法,第二判断子单元21424可用于执行01424中的方法,控制子单元21522可用于执行01522中的方法。也即是说,第一识别模块219可用于识别当前深度图像中的目标特征点。划分模块220可用于根据目标特征点将当前深度图像划分为第一区域和第二区域,第一区域包括目标特征点。第一判断子单元21422可用于判断第一区域与第一参考深度图像之间的第一子相似度。第二判断子单元21424可用于判断第二区域与第二参考深度图像之间的第二子相似度。控制子单元21522可用于在第一子相似度大于第一子阈值,第二子相似度大于第二子阈值,且第二相似度大于第二阈值时,控制电子装置300解锁。
具体地,目标特征点可以为与人脸的目标器官(例如眼睛、鼻子、嘴巴等)对应的特征点。由于目标特征点的属性不易发生改变,而其他特征点(例如头发、眉毛等)可能会随着个人喜好(例如理发、修眉等)发生改变,因此,本发明实施方式中,电子装置300可将当前深度图像划分为第一区域和第二区域(如图9(a)所示),使得目标特征点包括在第一区域内。与之对应的,参考深度图像也可以划分为第一参考深度图像和第二参考深度图像(如图9(b)所示)。第一区域与第一参考深度图像之间的第一子相似度、第二区域与第二参考深度图像之间的第二子相似度分别对应不同的相似度阈值,即第一子阈值、第二子阈值。进一步地,由于目标特征点的属性不易发生改变,第一子阈值可以大于第二子阈值,以提高身份认证的可靠性。
当然,在其他实施方式中,电子装置300还可以根据目标特征点将当前深度图像划分为更多个区域,例如第一区域、第二区域、第三区域等,以进行精确的身份认证。
请参阅图10,在某些实施方式中,控制红外光摄像头54采集人脸的当前红外光图像的步骤(即011)包括:
0112:控制红外光摄像头54采集多帧当前红外光图像;
控制方法还包括:
021:识别每帧当前红外光图像中的多个目标特征点;
022:根据多帧当前红外光图像中多个目标特征点之间的相对位置变化判断多个目标特征点是否处于运动状态;和
在多个目标特征点处于运动状态时,进入根据当前红外光图像进行人脸认证的步骤(即012),或者进入控制红外光发射器100和红外光摄像头54同时工作以采集人脸的当前深度图像的步骤(即013)。
请参阅图11,在某些实施方式中,第一控制模块211还包括第二控制单元2112。控制装置210还包括第二识别模块221和判断模块222。第二控制单元2112可用于执行0112中的方法,第二识别模块221可用于执行021中的方法,判断模块222可用于执行022中的方法。也即是说,第二控制单元2112可以用于控制红外光摄像头54采集多帧当前红外光图像。第二识别模块221可以用于识别每帧当前红外光图像中的多个目标特征点。判断模块222可以用于根据多帧当前红外光图像中多个目标特征点之间的相对位置变化判断多个目标特征点是否处于运动状态。第一认证模块212用于在多个目标特征点处于运动状态时,根据当前红外光图像进行人脸认证;或者,第二控制模块213可以用于在多个目标特征点处于运动状态时,控制红外光发射器100和红外光摄像头54同时工作以采集人脸的当前深度图像。
请参阅图12,目标特征点可以为人脸的目标器官(例如眼睛、鼻子、嘴巴等)中的特征点。本发明实施方式以目标特征点为嘴巴的上嘴唇特征点A和下嘴唇特征点B为例。多帧当前红外光图像为至少两帧当前红外光图像。在图12所示的例子中,第一帧当前红外光图像的嘴巴处于闭合状态,目标特征点A与目标特征点B之间具有一定距离。第二帧当前红外光图像的嘴巴处于张开状态,目标特征点A与目标特征点B重合。电子装置300根据第一帧当前红外光图像和第二帧当前红外光图像中,目标特征点A与目标特征点B的相对位置变化,判断目标特征点A和目标特征点B处于运动状态,即可说明待测对象是活体。此时,电子装置300才根据当前红外光图像进行人脸认证或者控制红外光发射器100和红外光摄像头54同时工作以采集人脸的当前深度图像以进行深度认证,不仅可以节省电子装置300的能耗,而且可以避免非机主采用照片或其他仿照物来进行身份认证,身份认证的可靠性较高。
请参阅图13,本发明实施方式的电子装置300包括飞行时间模组200、一个或多个处理器250、存储器260以及一个或多个程序。飞行时间模组200包括红外光发射器100和红外光摄像头54。其中,一个或多个程序被存储在存储器260中,并且被配置由一个或多个处理器250执行,程序包括用于执行上述任一实施方式的电子装置300的控制方法的指令。
例如,程序包括用于执行以下电子装置300的控制方法的指令:
011:控制红外光摄像头54采集人脸的当前红外光图像;
012:根据当前红外光图像进行人脸认证;
013:控制红外光发射器100和红外光摄像头54同时工作以采集人脸的当前深度图像;
014:根据当前深度图像进行深度认证;和
015:在人脸认证和深度认证均通过时,控制电子装置300执行预定操作。
请参阅图14,本发明实施方式的计算机可读存储介质400包括与电子装置300结合使用的计算机程序。计算机程序可被处理器250执行以完成上述任一实施方式的电子装置300的控制方法。
例如,计算机程序可被处理器250执行以完成以下电子装置300的控制方法:
011:控制红外光摄像头54采集人脸的当前红外光图像;
012:根据当前红外光图像进行人脸认证;
013:控制红外光发射器100和红外光摄像头54同时工作以采集人脸的当前深度图像;
014:根据当前深度图像进行深度认证;和
015:在人脸认证和深度认证均通过时,控制电子装置300执行预定操作。
示例性的,本发明实施方式的飞行时间模组200可具有如下结构。
请参阅图15,飞行时间模组200包括红外光发射器100和红外光摄像头54。红外光发射器100用于向待测对象发射预定频段的红外光线。红外光摄像头54用于接收环境中被待测对象反射的预定频段的红外光线,以形成红外光图像,或者,用于接收红外光发射器100发射的被待测对象反射的预定频段的红外光线,以形成深度图像。
请参阅图16和图17,红外光摄像头54包括图像传感器543。图像传感器543包括感光像素单元544阵列和滤光片545。滤光片545用于允许预定频段的红外光线通过。感光像素单元544阵列包括至少一个感光像素单元544,至少一个感光像素单元544可以呈阵列排布。感光像素单元544包括至少两个感光像素5441,属于同一感光像素单元544的感光像素5441共用同一模数转换器(Analog-to-Digital Converter,ADC)546和同一感光测试计时电路547。在形成红外光图像时,每个感光像素5441分别通过模数转换器546输出电信号。在形成深度图像时,属于同一感光像素单元544的感光像素5441同时通过模数转换器546和感光测试计时电路547输出电信号。其中,电信号可以是指感光像素5441感测光线后形成的像素值。
具体地,在形成红外光图像时,由于每个感光像素5441分别通过模数转换器546输出电信号,可以极大地提高红外光图像的分辨率,使得图像传感器543能够获得更多的图像信息。在形成深度图像时,由于属于同一感光像素单元544的多个感光像素5441同时通过模数转换器546和感光测试计时电路547输出电信号,因而属于同一感光像素单元544的多个感光像素5441可以相当于一个感光像素,能够极大地提升其感光能力和感光灵敏度,进而能够用于形成准确的深度信息。
在某些实施方式中,在形成红外光图像时,红外光发射器100用于以第一频率向待测对象发射光线。在形成深度图像时,红外光发射器100用于以第二频率向待测对象发射光线,第一频率低于第二频率。可以理解,在形成红外光图像时,图像传感器543对于光线的频率要求较低,因此红外光发射器100可以采用频率较低的第一频率发射光线,从而降低红外光发射器100的功耗。在形成深度图像时,图像传感器543对于光线的频率要求较高,因此红外光发射器100可以采用频率较高的第二频率发射光线,从而提升深度信息的准确性。
请参阅图18,在某些实施方式中,感光测试计时电路547包括第一存储单元5472和第二存储单元5474。在光线开始发射时,属于同一感光像素单元544的感光像素5441感测经待测对象反射的光线所形成的电信号存储至第一存储单元5472。在光线结束发射时,属于同一感光像素单元544的感光像素5441感测经待测对象反射的光线所形成的电信号存储至第二存储单元5474,第一存储单元5472输出第一电信号。在预定时长后第二存储单元5474停止存储电信号并输出第二电信号,预定时长根据光线的照射时间确定。根据第一电信号和第二电信号形成深度图像。
在某些实施方式中,感光测试计时电路547可以包括高频开关(图未示),高频开关可以用于控制电信号存储至第一存储单元5472或第二存储单元5474。具体地,第一存储单元5472和第二存储单元5474例如为电容。请参阅图19,其中,(a)为发射的光线脉冲,(b)为经待测对象反射的光线脉冲,(c)为第一存储单元5472的接收、存储过程,(d)为第二存储单元5474的接收、存储过程。在光线开始发射时,通过高频开关控制电信号存储至第一存储单元5472,在光线结束发射时,通过高频开关控制电信号存储至第二存储单元5474,此时第一存储单元5472可以获得第一电信号Q1。在预定时长后,第二存储单元5474停止存储电信号并输出第二电信号Q2。其中,预定时长可以与光线的照射时间T一致。则光线从红外光发射器100发射到被图像传感器543接收的时间(飞行时间)t=T*Q2/(Q1+Q2),则对应的感光像素单元544测量获得的深度信息d=c*t/2,其中,c为光速。通过每个感光像素单元544测量获得的深度信息即可获得整个场景的深度信息。如此,可以通过测量第一电信号和第二电信号来形成深度图像,其中,由于第一电信号和第二电信号的测量结果比较准确,因此,可以使得形成的深度信息也比较准确。
请参阅图20,在某些实施方式中,感光测试计时电路547包括计时器5476。在光线开始发射时计时器5476开始计时,在属于同一感光像素单元544的感光像素5441感测经待测对象反射的光线并形成电信号时对应的计时器5476停止计时并记录获得对应的飞行时间,根据飞行时间形成深度图像。
具体地,在一个实施例中,计时器5476与红外光发射器100和模数转换器546电性连接。在红外光发射器100发射光线时,此时红外光发射器100可以发送控制信号至计时器5476以控制计时器5476开始计时。在感光像素5441感测到光线并形成电信号时,模数转换器546能够输出对应的像素值,此时可以控制计时器5476停止计时,从而根据计时器5476即可获得光线的飞行时间。如此,可以根据飞行时间简单、快速地形成深度图像。在某些实施方式中,深度信息d=c*t/2,其中,c为光速,t为飞行时间。
请参阅图17,在某些实施方式中,每个感光像素单元544包括四个及四个以上的感光像素5441。其中,在感光像素单元544包括四个感光像素5441时,四个感光像素5441例如为2*2阵列。当然,每个感光像素单元544也可以包括两个感光像素5441或三个感光像素5441,在此不做具体限定。需要说明的是,感光像素单元544包括的感光像素5441的数量越多,则测量获得的深度信息越准确;感光像素单元544包括的感光像素5441的数量越少,则形成的深度图像的分辨率越高(即可以获得更多的深度信息)。
请参阅图21,在某些实施方式中,红外光发射器100包括镜筒10、扩散器(diffuser)20及环状压圈30。镜筒10包括环状镜筒侧壁11及限位环12,限位环12自镜筒侧壁11朝镜筒10的中心凸出形成,镜筒侧壁11与限位环12共同围成有安装槽16。扩散器20安装在安装槽16内。压圈30安装在安装槽16内,扩散器20夹设在压圈30与限位环12之间。
压圈30可以通过螺纹连接、锁紧件固定、粘接等方式安装在安装槽16内。例如,请参阅图21,安装槽16的侧壁(镜筒侧壁11的内表面111)形成有内螺纹,压圈30的外侧面形成有外螺纹,压圈30的外螺纹与安装槽16的内螺纹螺合以将压圈30安装到安装槽16内;或者,请参阅图22,镜筒侧壁11开设有与安装槽16连通的第一定位孔115,压圈30开设有与第一定位孔115对应的第二定位孔311,锁紧件45穿过第一定位孔115并与第二定位孔311结合以将压圈30固定在安装槽16内。
当压圈30安装在镜筒10上时,压圈30与扩散器20抵触并使扩散器20与限位环12抵触,从而使扩散器20被夹设在压圈20与限位环12之间。
红外光发射器100通过在镜筒10上设置限位环12以形成安装槽16,并将扩散器20安装在安装槽16内,以及通过压圈30安装在镜筒10上以将扩散器20夹持在压圈30与限位环12之间,从而实现将扩散器20固定在镜筒10上;另外,红外光发射器100避免使用胶水将扩散器20固定在镜筒10上,从而能够避免胶水挥发成气态后,气态的胶水扩散并凝固在扩散器20的表面而影响扩散器20的微观结构,并能够避免连接扩散器20和镜筒10胶水因老化而使粘着力下降时扩散器20从镜筒10上脱落。
请参阅图21,本发明实施方式的红外光发射器100包括镜筒10、扩散器20、压圈30、电路板41、光源42及驱动器43。
镜筒10包括环状镜筒侧壁11及限位环12。环状镜筒侧壁11围成收容腔15,镜筒侧壁11包括位于收容腔15内的内表面111及与内表面111相背的外表面112。镜筒侧壁11包括相背的第一面13及第二面14,收容腔15贯穿第一面13及第二面14。限位环12位于镜筒侧壁11的第一面13一端,限位环12自镜筒侧壁11朝镜筒10的中心凸出形成,镜筒侧壁11与限位环12共同围成有安装槽16,限位环12围成有与安装槽16连通的通光孔121。本实施方式的安装槽16即为收容腔15。镜筒侧壁11的围成安装槽16的内表面111形成有内螺纹,内螺纹自镜筒侧壁11的第二面14一端朝第一面12一端延伸,安装槽16的形成有内螺纹的内表面111的深度D1小于安装槽16的深度D2。具体地,镜筒侧壁11的围成安装槽16的内表面111包括相连接的螺合部113及安装部114,螺合部113位于镜筒侧壁11的靠近第一面13的一端,安装部114位于螺合部113与限位环12之间,螺合部113形成有内螺纹。安装槽16的形成有内螺纹的内表面111(螺合部113)的横截面呈圆形。镜筒10的外表面112的横截面可以为圆形、椭圆形或多边形。在其他实施方式中,安装槽16的整个内表面111也可以都设置内螺纹,此时,镜筒侧壁11的围成安装槽16的内表面111仅包括螺合部113。
电路板41设置在镜筒10的第二面14上并封闭收容腔15的一端。电路板41可以为柔性电路板或印刷电路板。
光源42承载在电路板41上并收容在收容腔15内。光源42用于朝镜筒10的第一面13(安装槽16)所在的一侧发射激光。光源42包括垂直腔面发射激光器(Vertical CavitySurface Emitting Laser,VCSEL)芯片,VCSEL芯片包括多个阵列排布的VCSEL光源。
驱动器43承载在电路板41上并与光源42电性连接。驱动器43可以接收经过调制的输入信号,并将输入信号转化为恒定的电流源后传输给光源42,以使光源42在恒定的电流源作用下朝镜筒10的第一面13一侧发射激光。本实施方式的驱动器43设置在镜筒10外。在其他实施方式中,驱动器43可以设置在镜筒10内并承载在电路板41上。
扩散器20安装(承载)在安装槽16内并与限位环12相抵触。扩散器20用于扩散穿过扩散器20的激光。
压圈30呈环状并围成有通孔33。压圈30的外轮廓(或外侧面34)的横截面呈圆形,压圈30的外侧面34上形成有外螺纹。压圈30的外螺纹与镜筒10的内螺纹螺合以将压圈30安装在镜筒10上。压圈30与扩散器20抵触以使扩散器20被夹持在压圈30与限位环12之间,具体地,扩散器20的厚度T大于或等于安装部113的深度D3以使压圈30安装在安装槽16内后压圈30能够与扩散器20抵触。
光源42朝镜筒10的第一面13所在的一侧发射激光时,激光会依次经过通孔33及扩散器20并被扩散器20扩散后由通光孔121投射至镜筒10外。
请参阅图23,在某些实施方式中,限位环12形成在镜筒侧壁11的第一面13与第二面14之间,镜筒侧壁11的靠近第一面13的一端与限位环12共同围成安装槽16。安装槽16的内表面111形成有内螺纹,压圈30形成有与内螺纹相配合的外螺纹。扩散器20及压圈30均安装在安装槽16内,并且扩散器20夹设在压圈30与限位环12之间。此时,光源42朝镜筒10的第一面13所在的一侧发射激光时,激光会依次经过通光孔121及扩散器20并被扩散器20扩散后由通孔33投射至镜筒10外。在其他实施方式中,安装槽16的内表面111也可以不设置内螺纹,此时压圈30可以通过锁紧件45固定在安装槽16内。
请参阅图24,在某些实施方式中,压圈30包括环状压圈本体31及环状抵触部32,压圈本体31包括相背的上端面312与下端面313,上端面312较下端面313更靠近扩散器20,抵触部32自上端面312朝扩散器20的方向延伸形成,抵触部32与扩散器20抵触。具体地,抵触部32的外轮廓的横截面尺寸小于压圈本体31的外轮廓(外侧面34)的横截面尺寸。安装槽16的内表面111形成有内螺纹,压圈30形成有与内螺纹相配合的外螺纹。此时,扩散器20的厚度T小于或等于安装槽16的没有形成有内螺纹的内表面111的深度D3(安装部113的深度D3)。如此,安装在安装槽16内的扩散器20相对镜筒10发生振动时,扩散器30的外侧面不会与镜筒10上的内螺纹发生摩擦,以避免扩散器30的外侧面被镜筒10上的内螺纹刮花。
请参阅图25,在某些实施方式中,红外光发射器100还包括环形弹性件44,弹性件44设置在扩散器20与压圈30之间。
若安装槽16的内表面111形成有内螺纹,则压圈30形成有与内螺纹相配合的外螺纹。此时,扩散器20的厚度T小于或等于安装槽16的没有形成有内螺纹的内表面111的深度D3(安装部113的深度D3)。当压圈30安装在安装槽16内时,弹性件44和扩散器20被夹设在压圈30与限位环12之间。在其他实施方式中,安装槽16的内表面111也可以不设置内螺纹,此时压圈30可以通过锁紧件45固定在安装槽16内。
本实施方式的红外光发射器100通过在扩散器20与压圈30之间设置弹性件44,从而使扩散器20在弹性件44作用下(抵触下)受到的压力更加均匀,进而扩散器20能够更加牢固地固定在安装槽16内,并避免红外光发射器100在受到震动时扩散器20相对镜筒10发生晃动;同时,红外光发射器100通过在压圈30与限位环12之间设置弹性件44使压圈30具有较好的防松效果。
请继续参阅图25,在某些实施方式中,镜筒侧壁11开设有贯穿镜筒侧壁11并与安装槽16连通的第一定位孔115。压圈30的外侧面34开设有与第一定位孔115对应的第二定位孔311,红外光发射器100还包括锁紧件45,锁紧件45穿过第一定位孔115并锁紧在第二定位孔311内。具体地,第二定位孔311可以为螺纹孔,此时,锁紧件45可以为螺钉。第二定位孔311也可以为盲孔,此时,锁紧件45可以为销钉。
本实施方式的红外光发射器100通过锁紧件45将压圈30与镜筒10连接在一起,从而能够减小压圈30从镜筒10上脱落下来的情况发生。
请参阅图15、图26和图27,在某些实施方式中,飞行时间模组200包括第一基板组件51、垫块52、红外光发射器100及红外光摄像头54。第一基板组件51包括互相连接的第一基板511及柔性电路板512。垫块52设置在第一基板511上。红外光发射器100用于向外发射光线,红外光发射器100设置在垫块52上。柔性电路板512弯折且柔性电路板512的一端连接第一基板511,另一端连接红外光发射器100。红外光摄像头54设置在第一基板511上。红外光摄像头54用于接收被反射回的红外光发射器100发射的光线,红外光摄像头54包括外壳541及设置在外壳541上的光学元件542,外壳541与垫块52连接成一体(如图15所示)。
具体地,第一基板组件51包括第一基板511及柔性电路板512。第一基板511可以是印刷线路板或柔性线路板,第一基板511上可以铺设有飞行时间模组200的控制线路等。柔性电路板512的一端可以连接在第一基板511上,柔性电路板512的另一端连接在电路板41上。柔性电路板512可以发生一定角度的弯折,使得柔性电路板512两端连接的器件的相对位置可以有较多选择。
请参阅图15、图26和图27,垫块52设置在第一基板511上。在一个例子中,垫块52与第一基板511接触且承载在第一基板511上,具体地,垫块52可以通过胶粘等方式与第一基板511结合。垫块52的材料可以是金属、塑料等。在本发明实施例中,垫块52与第一基板511结合的面可以是平面,垫块52与该结合的面相背的面也可以是平面,使得红外光发射器100设置在垫块52上时具有较好的平稳性。
红外光摄像头54设置在第一基板511上,且红外光摄像头54和第一基板511的接触面与垫块52和第一基板511的接触面基本齐平设置(即,二者的安装起点是在同一平面上)。具体地,红外光摄像头54包括外壳541及光学元件542。外壳541设置在第一基板511上,光学元件542设置在外壳541上,外壳541可以是红外光摄像头54的镜座及镜筒,光学元件542可以是设置在外壳541内的透镜等元件。进一步地,请结合图17,红外光摄像头54还可以包括图像传感器543,由待测对象反射回的光线通过光学元件542作用后照射到图像传感器543中,图像传感器543对该光线产生响应。飞行时间模组200计算红外光发射器100发出光线与图像传感器543接收经待测对象反射该光线之间的时间差,并进一步获取待测对象的深度信息,该深度信息可以用于测距、用于生成深度图像或用于三维建模等。本发明实施例中,外壳541与垫块52连接成一体。具体地,外壳541与垫块52可以是一体成型,例如外壳541与垫块52的材料相同并通过注塑、切削等方式一体成型;或者外壳541与垫块52的材料不同,二者通过双色注塑形成等方式一体成型。外壳541与垫块52也可以是分别成型,二者形成配合结构,在组装飞行时间模组200时,可以先将外壳541与垫块52连接成一体,再共同设置在第一基板511上;也可以先将外壳541与垫块52中的一个设置在第一基板511上,再将另一个设置在第一基板511上且连接成一体。
本发明实施方式的飞行时间模组200中,由于红外光发射器100设置在垫块52上,垫块52可以垫高红外光发射器100的高度,进而提高红外光发射器100的出射面的高度,红外光发射器100发射的光线不易被红外光摄像头54遮挡,使得光线能够完全照射到待测对象上。
请参阅图15、图26和图27,在某些实施方式中,垫块52与第一基板511结合的一侧开设有收容腔523。飞行时间模组200还包括设置在第一基板511上的电子元件57,电子元件57收容在收容腔523内。电子元件57可以是电容、电感、晶体管、电阻等元件,电子元件57可以与铺设在第一基板511上的控制线路电连接,并用于驱动或控制红外光发射器100或红外光摄像头54工作。电子元件57收容在收容腔523内,合理地利用了垫块52内的空间,不需要增加第一基板511的宽度来设置电子元件57,利于减小飞行时间模组200的整体尺寸。收容腔523的数量可以是一个或多个,多个收容腔523可以是互相间隔的,在安装垫块52时,可以将收容腔523与电子元件57的位置对准并将垫块52设置在第一基板511上。
请继续参阅图15、图26和图27,在某些实施方式中,垫块52还可开设与至少一个收容腔523连通的避让通孔524,至少一个电子元件57伸入避让通孔524内。可以理解,需要将电子元件57收容在收容腔523内时,要求电子元件57的高度不高于收容腔523的高度。而对于高度高于收容腔523的电子元件57,可以开设与收容腔523对应的避让通孔524,电子元件57可以部分伸入避让通孔524内,以在不提高垫块52高度的前提下布置电子元件57。
请还参阅图15、图26和图27,在某些实施方式中,第一基板组件51还包括加强板513,加强板513结合在第一基板511的与垫块52相背的一侧。加强板513可以覆盖第一基板511的一个侧面,加强板513可以用于增加第一基板511的强度,避免第一基板511发生形变。另外,加强板513可以由导电的材料制成,例如金属或合金等,当飞行时间模组200安装在电子装置300上时,可以将加强板513与机壳301电连接,以使加强板513接地,并有效地减少外部元件的静电对飞行时间模组200的干扰。
请参阅图15、图26和图27,在其他实施方式中,飞行时间模组200还可包括连接器56,连接器56连接在第一基板组件51上并用于与飞行时间模组200外部的电子元件电性连接。
在本说明书的描述中,参考术语“某些实施方式”、“一个实施方式”、“一些实施方式”、“示意性实施方式”、“示例”、“具体示例”、或“一些示例”的描述意指结合所述实施方式或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施方式或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施方式或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施方式或示例中以合适的方式结合。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个所述特征。在本发明的描述中,“多个”的含义是至少两个,例如两个,三个,除非另有明确具体的限定。
尽管上面已经示出和描述了本发明的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本发明的限制,本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型,本发明的范围由权利要求及其等同物限定。

Claims (10)

1.一种电子装置的控制方法,其特征在于,所述电子装置包括飞行时间模组,所述飞行时间模组包括红外光发射器和红外光摄像头,所述控制方法包括:
控制所述红外光摄像头采集人脸的当前红外光图像;
根据所述当前红外光图像进行人脸认证;
控制所述红外光发射器和所述红外光摄像头同时工作以采集人脸的当前深度图像;
根据所述当前深度图像进行深度认证;和
在所述人脸认证和所述深度认证均通过时,控制所述电子装置执行预定操作。
2.根据权利要求1所述的控制方法,其特征在于,所述控制所述红外光发射器和所述红外光摄像头同时工作以采集人脸的当前深度图像的步骤是在所述人脸认证通过时进行的;或者
所述控制所述红外光摄像头采集人脸的当前红外光图像的步骤是在所述深度认证通过时进行的。
3.根据权利要求1所述的控制方法,其特征在于,所述预定操作包括解锁、点亮所述电子装置的显示屏、电子支付、打开所述电子装置的预定应用程序中的至少一种。
4.根据权利要求1所述的控制方法,其特征在于,所述控制所述红外光摄像头采集人脸的当前红外光图像的步骤和所述控制所述红外光发射器和所述红外光摄像头同时工作以采集人脸的当前深度图像的步骤是在所述电子装置处于解锁过程中进行的,所述控制方法还包括:
在加密过程中控制所述红外光摄像头采集人脸的参考红外光图像;
所述根据所述当前红外光图像进行人脸认证的步骤包括:
判断所述当前红外光图像与所述参考红外光图像之间的第一相似度;
所述控制方法还包括:
在加密过程中控制所述红外光发射器和所述红外光摄像头同时工作以采集人脸的参考深度图像;
所述根据所述当前深度图像进行深度认证的步骤包括:
判断所述当前深度图像与所述参考深度图像之间的第二相似度;
所述在所述人脸认证和所述深度认证均通过时,控制所述电子装置执行预定操作的步骤包括:
在所述第一相似度大于第一阈值且所述第二相似度大于第二阈值时,控制所述电子装置解锁。
5.根据权利要求4所述的控制方法,其特征在于,所述控制方法还包括:
在所述第一相似度大于第三阈值而所述第二相似度小于第四阈值时,锁定所述电子装置;
其中,所述第三阈值大于所述第一阈值,所述第四阈值小于所述第二阈值。
6.根据权利要求4所述的控制方法,其特征在于,所述控制方法还包括:
识别所述当前深度图像中的目标特征点;
根据所述目标特征点将所述当前深度图像划分为第一区域和第二区域,其中,所述第一区域包括所述目标特征点;
所述参考深度图像包括第一参考深度图像和第二参考深度图像,所述判断所述当前深度图像与所述参考深度图像之间的第二相似度的步骤包括:
判断所述第一区域与所述第一参考深度图像之间的第一子相似度;
判断所述第二区域与所述第二参考深度图像之间的第二子相似度;
所述第二阈值包括第一子阈值和第二子阈值,所述第一子阈值大于所述第二子阈值,所述在所述第一相似度大于第一阈值且所述第二相似度大于第二阈值时,控制所述电子装置解锁的步骤包括:
在所述第一子相似度大于所述第一子阈值,所述第二子相似度大于所述第二子阈值,且所述第二相似度大于第二阈值时,控制所述电子装置解锁。
7.根据权利要求1所述的控制方法,其特征在于,所述控制所述红外光摄像头采集人脸的当前红外光图像的步骤包括:
控制所述红外光摄像头采集多帧所述当前红外光图像;
所述控制方法还包括:
识别每帧所述当前红外光图像中的多个目标特征点;
根据多帧所述当前红外光图像中所述多个目标特征点之间的相对位置变化判断所述多个目标特征点是否处于运动状态;和
在所述多个目标特征点处于运动状态时,进入所述根据所述当前红外光图像进行人脸认证的步骤,或者进入所述控制所述红外光发射器和所述红外光摄像头同时工作以采集人脸的当前深度图像的步骤。
8.一种电子装置的控制装置,其特征在于,所述电子装置包括飞行时间模组,所述飞行时间模组包括红外光发射器和红外光摄像头,所述控制装置包括第一控制模块、第一认证模块、第二控制模块、第二认证模块和第三控制模块:第一控制模块用于控制所述红外光摄像头采集人脸的当前红外光图像;第一认证模块用于根据所述当前红外光图像进行人脸认证;第二控制模块用于控制所述红外光发射器和所述红外光摄像头同时工作以采集人脸的当前深度图像;第二认证模块用于根据所述当前深度图像进行深度认证;第三控制模块用于在所述人脸认证和所述深度认证均通过时,控制所述电子装置执行预定操作。
9.一种电子装置,其特征在于,包括飞行时间模组、一个或多个处理器、存储器以及一个或多个程序,所述飞行时间模组包括红外光发射器和红外光摄像头;其中所述一个或多个程序被存储在所述存储器中,并且被配置由所述一个或多个处理器执行,所述程序包括用于执行权利要求1-7任意一项所述的电子装置的控制方法的指令。
10.一种计算机可读存储介质,其特征在于,包括与电子装置结合使用的计算机程序,所述计算机程序可被处理器执行以完成权利要求1-7任意一项所述的电子装置的控制方法。
CN201811048674.3A 2018-09-10 2018-09-10 电子装置及其控制方法、控制装置和计算机可读存储介质 Active CN109271916B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201811048674.3A CN109271916B (zh) 2018-09-10 2018-09-10 电子装置及其控制方法、控制装置和计算机可读存储介质
PCT/CN2019/090016 WO2020052282A1 (zh) 2018-09-10 2019-06-04 电子装置及其控制方法、控制装置和计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811048674.3A CN109271916B (zh) 2018-09-10 2018-09-10 电子装置及其控制方法、控制装置和计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN109271916A true CN109271916A (zh) 2019-01-25
CN109271916B CN109271916B (zh) 2020-09-18

Family

ID=65187598

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811048674.3A Active CN109271916B (zh) 2018-09-10 2018-09-10 电子装置及其控制方法、控制装置和计算机可读存储介质

Country Status (2)

Country Link
CN (1) CN109271916B (zh)
WO (1) WO2020052282A1 (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110119684A (zh) * 2019-04-11 2019-08-13 华为技术有限公司 图像识别方法和电子设备
WO2020052283A1 (zh) * 2018-09-10 2020-03-19 Oppo广东移动通信有限公司 电子装置及其控制方法、控制装置和计算机可读存储介质
WO2020052282A1 (zh) * 2018-09-10 2020-03-19 Oppo广东移动通信有限公司 电子装置及其控制方法、控制装置和计算机可读存储介质
CN111856477A (zh) * 2020-08-04 2020-10-30 RealMe重庆移动通信有限公司 相对状态检测方法、装置、电子设备以及存储介质
CN113419252A (zh) * 2021-06-10 2021-09-21 Oppo广东移动通信有限公司 飞行时间模组、终端及深度检测方法
CN115937922A (zh) * 2021-08-11 2023-04-07 荣耀终端有限公司 一种人脸识别方法和装置

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112036376B (zh) * 2020-10-01 2024-05-31 奥比中光科技集团股份有限公司 一种检测红外图像与深度图像的方法、装置及人脸识别系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170054966A1 (en) * 2015-08-18 2017-02-23 RGBDsense Information Technology Ltd. Structured light encoding-based vertical depth perception apparatus
CN106663201A (zh) * 2016-10-18 2017-05-10 厦门中控生物识别信息技术有限公司 一种手掌检测方法和设备
CN107506752A (zh) * 2017-09-18 2017-12-22 艾普柯微电子(上海)有限公司 人脸识别装置及方法
CN108496182A (zh) * 2018-04-18 2018-09-04 深圳阜时科技有限公司 身份鉴权方法、身份鉴权装置、和电子设备

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109271916B (zh) * 2018-09-10 2020-09-18 Oppo广东移动通信有限公司 电子装置及其控制方法、控制装置和计算机可读存储介质
CN109391709B (zh) * 2018-09-10 2020-11-06 Oppo广东移动通信有限公司 电子装置及其控制方法、控制装置和计算机可读存储介质
CN109376515A (zh) * 2018-09-10 2019-02-22 Oppo广东移动通信有限公司 电子装置及其控制方法、控制装置和计算机可读存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170054966A1 (en) * 2015-08-18 2017-02-23 RGBDsense Information Technology Ltd. Structured light encoding-based vertical depth perception apparatus
CN106663201A (zh) * 2016-10-18 2017-05-10 厦门中控生物识别信息技术有限公司 一种手掌检测方法和设备
CN107506752A (zh) * 2017-09-18 2017-12-22 艾普柯微电子(上海)有限公司 人脸识别装置及方法
CN108496182A (zh) * 2018-04-18 2018-09-04 深圳阜时科技有限公司 身份鉴权方法、身份鉴权装置、和电子设备

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020052283A1 (zh) * 2018-09-10 2020-03-19 Oppo广东移动通信有限公司 电子装置及其控制方法、控制装置和计算机可读存储介质
WO2020052282A1 (zh) * 2018-09-10 2020-03-19 Oppo广东移动通信有限公司 电子装置及其控制方法、控制装置和计算机可读存储介质
CN110119684A (zh) * 2019-04-11 2019-08-13 华为技术有限公司 图像识别方法和电子设备
CN111856477A (zh) * 2020-08-04 2020-10-30 RealMe重庆移动通信有限公司 相对状态检测方法、装置、电子设备以及存储介质
CN113419252A (zh) * 2021-06-10 2021-09-21 Oppo广东移动通信有限公司 飞行时间模组、终端及深度检测方法
CN115937922A (zh) * 2021-08-11 2023-04-07 荣耀终端有限公司 一种人脸识别方法和装置
CN115937922B (zh) * 2021-08-11 2023-11-07 荣耀终端有限公司 一种人脸识别方法和装置

Also Published As

Publication number Publication date
CN109271916B (zh) 2020-09-18
WO2020052282A1 (zh) 2020-03-19

Similar Documents

Publication Publication Date Title
CN109271916A (zh) 电子装置及其控制方法、控制装置和计算机可读存储介质
CN208027382U (zh) 屏下生物特征识别装置和电子设备
KR102487063B1 (ko) 광학 지문 센서를 구비한 전자 장치
US11452459B2 (en) Electronic device comprising biosensor
CN108681726B (zh) 3d芯片模组、身份识别装置及电子设备
WO2020052283A1 (zh) 电子装置及其控制方法、控制装置和计算机可读存储介质
CN110099226B (zh) 阵列摄像模组及其深度信息采集方法和电子设备
CN108989783A (zh) 电子装置和电子装置的控制方法
CN109104583A (zh) 控制方法及装置、深度相机、电子装置及可读存储介质
CN109238163A (zh) 飞行时间模组及其控制方法、控制器和电子装置
CN109005326A (zh) 光电模组及其控制方法、成像装置、电子设备
WO2020052278A1 (zh) 电子装置及其控制方法、控制装置和计算机可读存储介质
CN208489881U (zh) 深度采集模组及移动终端
CN109059797A (zh) 飞行时间模组及其控制方法、控制器和电子装置
CN108873221A (zh) 激光投射装置、tof深度相机和电子设备
CN208782911U (zh) 镜头组件、传感装置及成像系统
CN108885696A (zh) 屏下生物特征识别装置和电子设备
WO2019228097A1 (zh) 验证系统、电子装置、验证方法、计算机可读存储介质及计算机设备
CN109061603A (zh) 深度获取模组及电子装置
CN208781240U (zh) 3d芯片模组、身份识别装置及电子设备
US20210097253A1 (en) Electronic device including a sensor which is disposed below a display
CN109164432A (zh) 深度获取模组及电子装置
CN209676289U (zh) 电子设备
CN108924340A (zh) 验证方法、验证装置及计算机可读存储介质
CN109271058B (zh) 显示组件和电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant