CN109068036A - 控制方法及装置、深度相机、电子装置及可读存储介质 - Google Patents

控制方法及装置、深度相机、电子装置及可读存储介质 Download PDF

Info

Publication number
CN109068036A
CN109068036A CN201811060690.4A CN201811060690A CN109068036A CN 109068036 A CN109068036 A CN 109068036A CN 201811060690 A CN201811060690 A CN 201811060690A CN 109068036 A CN109068036 A CN 109068036A
Authority
CN
China
Prior art keywords
face
transmitting set
optical transmitting
scene image
scene
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811060690.4A
Other languages
English (en)
Other versions
CN109068036B (zh
Inventor
张学勇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201811060690.4A priority Critical patent/CN109068036B/zh
Publication of CN109068036A publication Critical patent/CN109068036A/zh
Priority to PCT/CN2019/090020 priority patent/WO2020052284A1/zh
Application granted granted Critical
Publication of CN109068036B publication Critical patent/CN109068036B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/55Optical parts specially adapted for electronic image sensors; Mounting thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B10/00Transmission systems employing electromagnetic waves other than radio-waves, e.g. infrared, visible or ultraviolet light, or employing corpuscular radiation, e.g. quantum communication
    • H04B10/40Transceivers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B10/00Transmission systems employing electromagnetic waves other than radio-waves, e.g. infrared, visible or ultraviolet light, or employing corpuscular radiation, e.g. quantum communication
    • H04B10/50Transmitters
    • H04B10/564Power control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules

Abstract

本发明公开了一种控制方法、控制装置、飞行时间深度相机、电子装置和计算机可读存储介质。控制方法包括:获取场景的场景图像;识别场景图像中是否存在人脸;在场景图像中存在人脸时,控制光发射器以第一发光功率和/或第一开启频率发光;在场景图像中不存在人脸时,控制光发射器以第二发光功率和/或第二开启频率发光。本发明实施方式的控制方法在场景图像中存在人脸时以较低的第一发光功率和第一开启频率发光,可以降低激光对用户眼睛造成伤害的风险,提高飞行时间深度相机使用的安全性;在场景图像中不存在人脸时以合适于场景的第二发光功率和第二开启频率发光,可以提高获取的深度图像的精度。

Description

控制方法及装置、深度相机、电子装置及可读存储介质
技术领域
本发明涉及三维成像技术领域,特别涉及一种控制方法、控制装置、飞行时间深度相机、电子装置和计算机可读存储介质。
背景技术
飞行时间(Time of Flight,TOF)成像系统可通过计算光发射器发射光信号的时刻,与光接收器接收到光信号的时刻之间的时间差来计算被测物体的深度信息。光发射器通常包括光源和扩散器。光源发出的光经扩散器的扩散作用后向场景中投射均匀的面光。光源发射的光通常为红外激光。红外激光的能量过高时会对人眼造成伤害。
发明内容
本发明的实施例提供了一种控制方法、控制装置、飞行时间深度相机、电子装置和计算机可读存储介质。
本发明实施方式的光发射器的控制方法包括:获取场景的场景图像;识别所述场景图像中是否存在人脸;在所述场景图像中存在所述人脸时,控制所述光发射器以第一发光功率和/或第一开启频率发光;在所述场景图像中不存在所述人脸时,控制所述光发射器以第二发光功率和/或第二开启频率发光。
本发明实施方式的光发射器的控制装置包括第一获取模块、识别模块和控制模块。所述第一获取模块用于获取场景的场景图像;所述识别模块用于识别所述场景图像中是否存在人脸;所述控制模块可用于在所述场景图像中存在所述人脸时,控制所述光发射器以第一发光功率和/或第一开启频率发光,以及在所述场景图像中不存在所述人脸时,控制所述光发射器以第二发光功率和/或第二开启频率发光。
本发明实施方式的飞行时间深度相机,飞行时间深度相机包括光发射器和处理器。处理器用于获取场景的场景图像,识别所述场景图像中是否存在人脸,在所述场景图像中存在所述人脸时,控制所述光发射器以第一发光功率和/或第一开启频率发光,以及在所述场景图像中不存在所述人脸时,控制所述光发射器以第二发光功率和/或第二开启频率发光。
本发明实施方式的电子装置包括上述的飞行时间深度相机、一个或多个处理器、存储器和一个或多个程序。其中所述一个或多个程序被存储在所述存储器中,并且被配置成由所述一个或多个处理器执行,所述程序包括用于执行上述的控制方法的指令。
本发明实施方式的计算机可读存储介质包括与电子装置结合使用的计算机程序,所述计算机程序可被处理器执行以完成上述的控制方法。
本发明实施方式的控制方法、控制装置、飞行时间深度相机、电子装置和计算机可读存储介质在场景图像中存在人脸时,以较低的第一发光功率和较低的第一开启频率发光,较低的第一发光功率可以降低照射到用户眼睛的红外激光的能量,较低的第一开启频率可以减少红外激光持续照射到用户眼睛的时间,如此,可以降低出射的激光对用户的眼睛造成伤害的风险,提高飞行时间深度相机使用的安全性。在场景图像中不存在人脸时,则以合适于当下场景的第二发光功率和第二开启频率发光,如此,可以提高光接收器输出的深度图像的精度。
本发明的附加方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:
图1是本发明某些实施方式的电子装置的立体结构示意图。
图2是本发明某些实施方式的光发射器的控制方法的流程示意图。
图3是本发明某些实施方式的光发射器的控制装置的模块示意图。
图4和图5是本发明某些实施方式的光发射器的开启频率的示意图。
图6是本发明某些实施方式的光发射器的控制方法的流程示意图。
图7是本发明某些实施方式的光发射器的控制装置的模块示意图。
图8和图9是本发明某些实施方式的光发射器的控制方法的流程示意图。
图10是本发明某些实施方式的光发射器的控制装置的模块示意图。
图11是本发明某些实施方式的光发射器的控制装置中第二获取模块的模块示意图。
图12是本发明某些实施方式的光发射器的控制方法的流程示意图。
图13是本发明某些实施方式的光发射器的控制装置中第二计算单元的模块示意图。
图14是本发明某些实施方式的光发射器的控制方法的流程示意图。
图15是本发明某些实施方式的光发射器的控制装置中第二计算单元的模块示意图。
图16是本发明某些实施方式的光发射器的控制方法的流程示意图。
图17是本发明某些实施方式的光发射器的控制装置中第二计算单元的模块示意图。
图18是本发明某些实施方式的光发射器的控制方法的流程示意图。
图19是本发明某些实施方式的光发射器的控制装置中控制模块的模块示意图。
图20是本发明某些实施方式的电子装置的立体结构示意图。
图21是本发明某些实施方式的深度相机的立体结构示意图。
图22是本发明某些实施方式的深度相机的平面结构示意图。
图23是图22中的深度相机沿XXIII-XXIII线的截面示意图。
图24是本发明某些实施方式的光发射器的结构示意图。
图25是本发明某些实施方式的电子装置与计算机可读存储介质的连接示意图。
具体实施方式
下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,旨在用于解释本发明,而不能理解为对本发明的限制。
请一并参阅图1和图2,本发明提供一种光发射器100的控制方法。控制方法包括:
01:获取场景的场景图像;
03:识别场景图像中是否存在人脸;
05:在场景图像中存在人脸时,控制光发射器100以第一发光功率和/或第一开启频率发光;
07:在场景图像中不存在人脸时,控制光发射器100以第二发光功率和/或第二开启频率发光。
请一并参阅图1和图3,本发明还提供一种光发射器100的控制装置90。本发明实施方式的控制方法可以由本发明实施方式的控制装置90实现。控制装置90包括第一获取模块91、识别模块93和控制模块95。步骤01可以由第一获取模块91实现。步骤03可以由识别模块93实现。步骤05和步骤07均可以由控制模块95实现。也即是说,第一获取模块91可用于获取场景的场景图像。识别模块93可用于识别场景图像中是否存在人脸。控制模块95可用于在场景图像中存在人脸时控制光发射器100以第一发光功率和/或第一开启频率发光、以及在场景图像中不存在人脸时控制光发射器100以第二发光功率和/或第二开启频率发光。
请再参阅图1,本发明还提供一种飞行时间深度相机300。本发明实施方式的控制装置90可以应用在本发明实施方式的飞行时间深度相机300上。飞行时间深度相机300包括光发射器100、光接收器200和处理器。步骤01、步骤03、步骤05和步骤07均可以由处理器实现。也即是说,处理器可用于获取场景的场景图像、识别场景图像中是否存在人脸、在场景图像中存在人脸时控制光发射器100以第一发光功率和/或第一开启频率发光、以及在场景图像中不存在人脸时控制光发射器100以第二发光功率和/或第二开启频率发光。
本发明实施方式的飞行时间深度相机300可以应用于电子装置800中。本发明实施方式的飞行时间深度相机300中的处理器与电子装置800的处理器805可为同一个处理器,也可为两个独立的处理器。在本发明的具体实施例中,飞行时间深度相机300中的处理器与电子装置800的处理器805为同一个处理器。电子装置800可以是手机、平板电脑、智能穿戴设备(智能手表、智能手环、智能眼镜、智能头盔)、无人机等,在此不作限制。
具体地,飞行时间深度相机300通常包括一个光发射器100和光接收器200。光发射器100用于向场景中投射激光,光接收器200接收由场景中的人或物反射回的激光。飞行时间深度相机300工作时,处理器805控制光发射器100和光接收器200均开启,并向驱动器61(图24所示)输入具有一定频率和幅值的调制信号,驱动器61将调制信号转换为恒定的电流源后传输给光发射器100的光源(图24所示),以使光源发射激光。光发射器100发射的激光通常为红外激光,红外激光的能量过高或者红外激光持续出射到一个位置的时间过长的情况均容易对用户的眼睛造成伤害。
本发明实施方式的控制方法、控制装置90和飞行时间深度相机300,在光发射器100开启时,首先采集场景的场景图像,例如,可以用红外相机(可为光接收器200)或可见光相机400采集。随后,处理器805基于人脸识别算法识别场景图像中是否存在人脸。在场景图像中存在人脸时,处理器805控制光发射器100以第一发光功率和/或第一开启频率发光。在场景图像中不存在人脸时,处理器805控制光发射器100以第二发光功率和/或第二开启频率发光。
其中,发光功率由驱动器61输出的电流来间接表征。当驱动器61输出的电流较大时,发光功率较大;当驱动器输出的电流较小时,发光功率较小。开启频率指的是光发射器100的开启频率,而非光发射器100的发光频率。光发射器100的开启频率与光接收器200输出深度图像的帧率对应。具体地,请结合图4,假设光接收器200要输出一帧图像,光发射器100需要发射N个周期T2的激光,光接收器200要输出下一帧图像时,光发射器100又需要再次发射N个周期的激光,则N个周期的时间之和即组成光发射器100的一个开启周期T1,即T1=N×T2,开启频率f的计算方式为f=1/T1;请结合图5,若光接收器200要输出一帧图像,光发射器100需要发射N个周期T2的激光,光接收器200要输出下一帧图像时,光发射器100又需要再次发射N个周期的激光,且光发射器100第一次发射N个周期T2的激光与第二次发射N个周期T2的激光之间还间隔了一段间隔时间t,则光发射器100的开启周期T1为T1=N×T2+t,开启频率的计算方式为1/T1。
处理器805控制光发射器100以第一发光功率和/或第一开启频率发光包括:(1)处理器805控制光发射器100以第一发光功率发光;(2)处理器805控制光发射器100以第一开启频率发光;(3)处理器805控制光发射器100同时以第一发光功率和第一开启频率发光。
同样地,处理器805控制光发射器100以第二发光功率和/或第二开启频率发光包括:(1)处理器805控制光发射器100以第二发光功率发光;(2)处理器805控制光发射器100以第二开启频率发光;(3)处理器805控制光发射器100同时以第二发光功率和第二开启频率发光。
由于红外激光能量较高时易对用户的眼睛造成伤害,因此,本发明实施方式的控制方法中,在场景图像中存在人脸时,以较低的第一发光功率和较低的第一开启频率发光,较低的第一发光功率可以降低照射到用户眼睛的红外激光的能量,较低的第一开启频率可以减少红外激光持续照射到用户眼睛的时间,如此,可以降低出射的激光对用户的眼睛造成伤害的风险,提高飞行时间深度相机300使用的安全性。在场景图像中不存在人脸时,则以合适于当下场景的第二发光功率和第二开启频率发光,如此,可以提高光接收器200输出的深度图像的精度。
请一并参阅图1和图6,在某些实施方式中,第一开启频率包括第一开启子频率和第二开启子频率。控制方法还包括:
041:判断光发射器100的应用场景;
步骤05在场景图像中存在人脸时,控制光发射器100以第一发光功率和/或第一开启频率发光包括:
051:在应用场景为第一场景,且场景图像中存在所述人脸时,控制光发射器100以第一发光功率和第一子开启频率发光;和
052:在应用场景为第二场景,且场景图像中存在所述人脸时,控制光发射器100以第一发光功率和第二子开启频率发光。
请一并参阅图1和图7,在某些实施方式中,控制装置90还包括判断模块941。步骤041可以由判断模块941实现。步骤051和步骤052均可以由控制模块95实现。也即是说,判断模块941可用于判断光发射器100的应用场景。控制模块95可用于在应用场景为第一场景且场景图像中存在所述人脸时控制光发射器100以第一发光功率和第一子开启频率发光、以及在应用场景为第二场景且场景图像中存在所述人脸时控制光发射器100以第一发光功率和第二子开启频率发光。
请再参阅图1,在某些实施方式中,步骤041、步骤051和步骤052均可以由处理器805实现。也即是说,处理器805可用于判断光发射器100的应用场景、在应用场景为第一场景,且场景图像中存在所述人脸时,控制光发射器100以第一发光功率和第一子开启频率发光、以及在应用场景为第二场景,且场景图像中存在所述人脸时,控制光发射器100以第一发光功率和第二子开启频率发光。
其中,第一场景指的是飞行时间深度相机300的应用时间小于预设时间的应用场景,例如,拍摄场景的静态三维图像,基于三维人脸解锁电子装置800,基于三维人脸进行支付等飞行时间模组的应用时间较少的应用场景。第二场景指的是飞行时间深度相机300的应用时间大于或等于预设时间的应用场景,例如,用户与其余用户进行三维视频聊天的应用场景等。
以第一场景为基于三维人脸解锁电子装置800,第二场景为用户与其余用户进行三维视频聊天的应用场景为例。在飞行时间深度相机300用于拍摄用户的三维人脸以解锁电子装置800时,光接收器200每秒钟通常仅需要输出较少的几帧深度图像,例如,每秒钟输出3帧、每秒钟输出4帧、每秒钟输出5帧等,对应的光发射器100的开启频率为3次/秒、4次/秒、5次/秒等,此时,为降低激光对用户眼睛的伤害,光接收器200可以仅输出1帧图像,对应的,处理器805可以将第一子开启频率设为1次/秒。在飞行时间深度相机300用于拍摄用户的三维视频,以使用户可以使用电子装置800与其余用户进行三维的视频聊天时,光接收器200每秒钟通常需要输出较多的深度图像,例如每秒钟输出30帧、每秒钟输出60帧等,对应的光发射器100的开启频率为30次/秒、60次/秒等,此时,为降低激光对用户眼睛的伤害,光接收器200可以仅输出24帧图像,对应的,处理器805可以将第一子开启频率设为24次/秒。可以理解的是,当电子装置800的画面刷新速度达到24帧/秒时,人眼看到的就是流畅的画面,因此,可以将第一子开启频率设为24次/秒,光发射器100以最低的帧率输出深度图像,一方面能降低激光对用户眼睛的伤害,另一方面可以保证用户能看到流畅的三维视频画面。
如此,通过对应用场景的区分,在应用场景不同时使用不同的第一开启频率,既能降低激光对用户造成伤害的风险,还能满足用户的使用需求,用户使用体验较佳。
请一并参阅图1、图8和图9,在某些实施方式中,控制方法在步骤03后还包括:
042:获取用户与光发射器100的投射距离;和
043:根据投射距离计算第一发光功率。
其中,步骤042包括:
0421:计算场景图像中人脸所占的第一比例;和
0422:根据第一比例计算投射距离。
请一并参阅图1、图10和图11,在某些实施方式中,控制装置90还包括第二获取模块942和计算模块943。第二获取模块942包括第一计算单元9421和第二计算单元9422。步骤042可以由第二获取模块942实现。步骤043可以由第一计算单元9421实现。步骤0421可以由第一计算单元9421实现,步骤0422可以由第二计算单元9422实现。也即是说,第二获取模块942可用于获取用户与光发射器100的投射距离。计算模块943可用于根据投射距离计算第一发光功率。第一计算单元9421可用于计算场景图像中人脸所占的第一比例。第二计算单元9422可用于根据第一比例计算投射距离。
请再参阅图1,在某些实施方式中,步骤041、步骤042、步骤0421和步骤0422均可以由处理器805实现。也即是说,处理器805还可用于获取用户与光发射器100的投射距离、根据投射距离计算第一发光功率。处理器805执行获取用户与光发射器100的投射距离时,具体执行计算场景图像中人脸所占的第一比例、以及根据第一比例计算投射距离的操作。
具体地,处理器805在场景图像中识别到人脸后,处理器805提取出人脸并计算人脸所占的像素个数,随后,处理器805将人脸的像素个数除以场景图像的总像素个数以得到场景图像中人脸所占的第一比例,最后基于第一比例计算投射距离。一般地,当第一比例较大时,说明用户比较靠近飞行时间深度相机300,也就是用户比较靠近光发射器100,投射距离较小;当第一比例较大时,说明用户与飞行时间深度相机300距离较远,也就是用户距离光发射器100较远,投射距离较大。因此,投射距离与第一比例之间的关系满足投射距离随第一比例的减小而增大。在一个例子中,当场景图像中包含多张人脸时,可以选取多张人脸中面积最大的人脸来计算第一比例;或者,也可以选取多张人脸的面积的平均值来计算第一比例;或者,可以从多张人脸中识别出电子装置800的持有者的人脸,利用持有者的人脸来计算第一比例。
第一比例与投射距离具有映射关系,例如,第一比例为一个具体值,投射距离也为一个具体值,第一比例与投射距离一一对应;或者,第一比例为一个范围,投射距离为一个具体值,第一比例为投射距离一一对应;或者,第一比例为一个范围,投射距离也为一个范围,第一比例与投射距离一一对应。具体地,第一比例与投射距离之间的映射关系可以预先标定。在标定时,指引用户分别站在距离红外相机或可见光相机400的多个预定投射距离的位置处,红外相机或可见光相机400依次采集场景图像。处理器805计算每张场景图像中人脸占场景图像的标定比例,再存储每张场景图像中的标定比例与预定投射距离之间的对应关系,在后续使用时,基于实际测量的第一比例在上述映射关系中寻找与第一比例对应的投射距离。例如,指引用户在投射距离为10厘米、20厘米、30厘米、40厘米的位置处站立,红外相机或可见光相机400依次采集场景图像,处理器805根据多张场景图像计算出与投射距离10厘米、20厘米、30厘米、40厘米分别对应的标定比例80%、60%、45%、30%,并将标定比例与预定投射距离的映射关系10cm-80%、20cm-60%、30cm-45%、40cm-30%以映射表的形式存储在电子装置800的存储器806中。在后续使用时,直接在映射表中寻找与第一比例对应的投射距离。
或者,预先对投射距离与第一比例进行标定。在标定时,指引用户站在距离红外相机或可见光相机400的某一个预定投射距离处,红外相机或可见光相机400采集场景图像。处理器805计算场景图像中人脸占场景图像的标定比例,再存储场景图像中的标定比例与预定投射距离之间的对应关系,在后续使用时,基于标定比例与预定投射距离之间的对应关系计算投射距离。例如,指引用户在投射距离为30厘米的位置处站立,红外相机或可见光相机400采集场景图像,处理器805计算到人脸在场景图像中的占比为45%,而在实际测量中,当计算得到第一比例为R时,则依据相似三角形的性质有其中,D依据实际测量的第一比例R计算的实际的投射距离。
如此,依据场景图像中人脸所占的第一比例,可以较为客观地反应用户与光发射器100之间的投射距离。基于投射距离来计算第一发光功率,光发射器100可以以较为合适的发光功率发光,一方面可以避免光发射器100的发光功率过高而对用户的眼睛造成伤害,另一方面也能避免发光功率过低导致获取的场景的深度信息不准确的。
请参阅图12,在某些实施方式中,步骤0422根据第一比例计算投射距离包括:
0423:计算场景图像中人脸的预设特征区域占人脸的第二比例;和
0424:根据第一比例及第二比例计算投射距离。
请参阅图13,在某些实施方式中,第二计算单元9422包括第一计算子单元9423和第二计算子单元9424。步骤0423可以由第一计算子单元9423实现。步骤0424可以由第二计算子单元9424实现。也即是说,第一计算子单元9423可用于计算场景图像中人脸的预设特征区域占人脸的第二比例。第二计算子单元9424可用于根据第一比例及第二比例计算投射距离。
请再参阅图1,在某些实施方式中,步骤0423和步骤0424均可以由处理器805实现。也即是说,处理器805还可用于计算场景图像中人脸的预设特征区域占人脸的第二比例、以及根据第一比例及第二比例计算投射距离。
可以理解,不同的用户的人脸大小有差异,使得不同的用户处于同样的距离下时,采集到的场景图像中人脸所占的第一比例有差异。第二比例为人脸的预设特征区域占人脸的比例,预设特征区域可以选择不同用户个体的差异度较小的特征区域,例如预设特征区域可以为用户的双眼间距。当第二比例较大时,说明该用户的人脸较小,仅依据第一比例计算得到的投射距离过大;当第二比例较小时,说明该用户的人脸较大,仅依据第一比例计算得到的投射距离过小。在实际使用中,可以预先对第一比例、第二比例与投射距离进行标定。具体地,指引用户站在预定的投射距离位置处,并采集场景图像,再计算该场景图像对应的第一标定比例及第二标定比例,存储该预定的投射距离与第一标定比例、第二标定比例的对应关系,以便于在后续使用中依据实际的第一比例和第二比例计算投射距离。例如,指引用户站在投射距离为25厘米处,并采集场景图像,再计算该场景图像对应的第一标定比例为50%,第二标定比例为10%,而在实际测量中,当计算得到的第一比例为R1,第二比例为R2时,则依据三角形相似的性质有其中,D1为依据实际测量的第一比例R1计算得到的初始的投射距离,可以再依据关系式求得进一步依据实际测量的第二比例R2计算得到的校准的投射距离D2,D2作为最终的投射距离。如此,依据第一比例和第二比例计算得到的投射距离考虑了不同用户之间的个体差异,能够获得更加客观的投射距离,进一步地可以基于较为准确的投射距离确定出较为准确的第一发光功率。
请参阅图14,在某些实施方式中,步骤0422根据第一比例计算投射距离包括:
0425:根据场景图像判断用户是否配戴眼镜;和
0426:在用户佩戴眼镜时根据第一比例及距离系数计算投射距离。
请参阅图15,在某些实施方式中,第二计算单元9422还包括第一判断子单元9425和第三计算子单元9426。步骤0425可以由第一判断子单元9425实现。步骤0426可以由第三计算子单元9426实现。也即是说,第一判断子单元9425可用于根据场景图像判断用户是否配戴眼镜。第三计算子单元9426可用于在用户佩戴眼镜时根据第一比例及距离系数计算投射距离。
请再参阅图1,在某些实施方式中,步骤0425和步骤0426均可以由处理器805实现。也即是说,处理器805还可用于根据场景图像判断用户是否配戴眼镜,在用户佩戴眼镜时根据第一比例及距离系数计算投射距离。
可以理解,用户是否佩戴眼镜可以用于表征用户眼睛的健康状况,具体为用户佩戴眼镜则表明用户的眼睛已经患有相关的眼疾或视力不佳,在光发射器100对佩戴眼镜的用户发射激光时,需要降低光发射器100的发光功率以使得光发射器100发射的激光的能量较小,以免对用户的眼睛造成伤害。预设的距离系数可以是介于0至1的系数,例如0.6、0.78、0.82、0.95等,例如在根据第一比例计算得到初始的投射距离,或者在依据第一比例和第二比例计算得到校准后的投射距离后,再将初始的投射距离或者校准的投射距离乘以距离系数,得到最终的投射距离,并根据该投射距离计算第一发光功率。如此,可以避免发射激光的功率过大伤害患有眼疾或视力不佳的用户。
请参阅图16,在某些实施方式中,步骤0422根据第一比例计算投射距离包括:
0427:根据场景图像判断用户的年龄;和
0428:根据第一比例及年龄计算投射距离。
请参阅图17,在某些实施方式中,第二计算单元9422包括第二判断子单元9427和第四计算子单元9428。步骤0427可以由第二判断子单元9427实现,步骤0428可以由第四计算子单元9428实现。也即是说,第二判断子单元9427可用于根据场景图像判断用户的年龄。第四计算子单元9428可用于根据第一比例及年龄计算投射距离。
请再参阅图1,在某些实施方式中,步骤0427和步骤0428均可以由处理器805实现。也即是说,处理器805可用于根据场景图像判断用户的年龄,根据第一比例及年龄计算投射距离。
不同年龄段的人对红外激光的耐受能力不同,例如小孩和老人更容易被激光灼伤等,可能对于成年人而言是合适强度的激光会对小孩造成伤害。本实施方式中,可以提取场景图像中,人脸皱纹的特征点的数量、分布和面积等来判断用户的年龄,例如,提取眼角处皱纹的数量来判断用户的年龄,或者进一步结合用户的额头处的皱纹多少来判断用户的年龄。在判断用户的年龄后,可以依据用户的年龄得到比例系数,具体可以是在查询表中查询得知年龄与比例系数的对应关系,例如,年龄在15岁以下时,比例系数为0.6,年龄在15岁至20岁时,比例系数为0.8;年龄在20岁至45岁时,比例系数为1.0;年龄在45岁以上时,比例系数为0.8。在得知比例系数后,可以将根据第一比例计算得到的初始的投射距离、或者根据第一比例及第二比例计算得到的校准的投射距离乘以比例系数,以得到最终的投射距离,再根据投射距离计算第一发光功率。如此,可以避免发射激光的功率过大而伤害小年龄段或者年龄较大的用户。
请参阅图18,在某些实施方式中,步骤07在场景图像中不存在人脸时,控制光发射器100以第二发光功率和/或第二开启频率发光包括:
071:获取场景中的目标主体与光发射器100的投射距离;
072:获取场景的环境亮度;和
073:根据环境亮度及投射距离计算第二发光功率。
请参阅图19,在某些实施方式中,控制模块95包括第一获取单元951、第二获取单元952和第三计算单元953。步骤071可以由第一获取单元951实现。步骤072可以由第二获取单元952。步骤073可以由第三计算单元953。也即是说,第一获取单元951可用于获取场景中的目标主体与光发射器100的投射距离。第二获取单元952可用于获取场景的环境亮度。第三计算单元953可用于根据环境亮度及投射距离计算第二发光功率。
请再参阅图1,在某些实施方式中,步骤071、步骤072和步骤073均可以由处理器805实现。也即是说,处理器805可用于获取场景中的目标主体与光发射器100的投射距离、获取场景的环境亮度、以及根据环境亮度及投射距离计算第二发光功率。
其中,场景中的目标主体与光发射器100之间的投射距离可以由飞行时间深度相机300来获取。具体地,光发射器100以预设发光功率和预设发光频率发射激光,光接收器200接收由场景中的物体反射回的激光,处理器805基于光接收器200接收到的激光计算场景的初始深度信息。随后,处理器805从场景中确定目标主体,由于目标主体一般处于光接收器200的视场的中央区域,因此,可以将光接收器200视场的中央区域作为目标主体所在区域,从而将中央区域的这部分像素的初始深度信息作为目标主体的初始深度信息。一般地,目标主体的初始深度信息的值有多歌,处理器805可计算出多个初始深度信息的均值或中值,并将均值或中值作为光发射器100与目标主体之间的投射距离。如此,即可通过飞行时间深度相机300获得光发射器100与目标主体之间的投射距离。
环境亮度可以由光传感器检测,处理器805从光传感器中读取其检测到的环境亮度。或者,环境亮度也可以由红外相机(可以为光接收器200)或可见光相机400来检测。红外相机或可见光相机400拍摄场景的图像,处理器805计算图像的亮度值以作为环境亮度。
在确定出环境亮度和投射距离后,处理器805基于环境亮度和投射距离两个参数共同计算第二发光功率。
可以理解的是,在环境亮度较高时,环境光中包含的红外光成分较多,环境光中的红外光与光发射器100发射的红外激光的波段重合的部分也较多,此时,光接收器200同时会接收到光发射器100发射的红外激光以及环境光中的红外光,若光发射器100发射红外激光的发光功率较低,则光接收器200接收的光中的来自光发射器100的红外激光与来自环境光中的红外光二者的占比相差不大,如此会导致光接收器200接收光的时间点不准确,或者导致光接收器200接收到的光总量不够准确,进一步会降低深度信息的获取精度,因此,需要提升光发射器100发射红外激光的发射功率,以减小环境中的红外光对光接收器200接收来自光发射器100的红外激光的影响;而在环境亮度较低时,环境光线中包含的红外光成分较少,此时光发射器100若采用较高的发光功率发光,则会增加电子装置800的功耗。另外,在投射距离较远时,激光的飞行时间较长,飞行行程较远,激光的损耗较多,会对深度信息的获取精度产生影响。因此,在投射距离较大时,可以适当提升光发射器100的第二发光功率。在投射距离较小时,可以适当降低光发射器100的第二发光功率。
如此,基于环境亮度及投射距离共同确定光发射器100的第二发光功率,一方面可以减小电子装置800的功耗,另一方面可以提升场景的深度信息的获取精度。
在场景中不存在人脸时,光发射器100的第二开启频率可以根据应用场景来确定。例如,应用场景为基于三维人脸解锁电子装置800时,光接收器200每秒钟通常仅需要输出较少的几帧深度图像,例如,每秒钟输出3帧、每秒钟输出4帧、每秒钟输出5帧等,则此时光发射器100的第二开启频率可对应地设为3次/秒、4次/秒、5次/秒等;应用场景为用户使用电子装置800录制三维视频时,光接收器200每秒钟通常需要输出较多的深度图像,例如每秒钟输出30帧、每秒钟输出60帧等,则此时光发射器100的第二开启频率可对应地设为30次/秒、60次/秒等。如此,基于不同的应用场景,设定最适合于每种应用场景的开启频率,满足用户的使用需求。
请一并参阅图1和图21,本发明实施方式的电子装置800包括壳体801及飞行时间深度相机300。
壳体801可以作为电子装置800的功能元件的安装载体。壳体801可以为功能元件提供防尘、防摔、防水等保护,功能元件可以是显示屏802、可见光相机400、受话器等。在本发明实施例中,壳体801包括主体803及可动支架804,可动支架804在驱动装置的驱动下可以相对于主体803运动,例如可动支架804可以相对于主体803滑动,以滑入主体803(如图20所示)或从主体803滑出(如图1所示)。部分功能元件(例如显示屏802)可以安装在主体803上,另一部分功能元件(例如飞行时间深度相机300、可见光相机400、受话器)可以安装在可动支架804上,可动支架804运动可带动该另一部分功能元件缩回主体803内或从主体803中伸出。当然,图1和图21所示仅仅是对壳体801的一种具体形式举例,不能理解为对本发明的壳体801的限制。
飞行时间深度相机300安装在壳体801上。具体地,壳体801上可以开设有采集窗口,飞行时间深度相机300与采集窗口对准安装以使飞行时间深度相机300采集深度信息。在本发明的具体实施例中,飞行时间深度相机300安装在可动支架804上。用户在需要使用飞行时间深度相机300时,可以触发可动支架804从主体803中滑出以带动飞行时间深度相机300从主体803中伸出;在不需要使用飞行时间深度相机300时,可以触发可动支架804滑入主体803以带动飞行时间深度相机300缩回主体中。
请一并参阅图21至图23,飞行时间深度相机300包括第一基板组件71、垫块72、光发射器100及光接收器200。第一基板组件71包括互相连接的第一基板711及柔性电路板712。垫块72设置在第一基板711上。光发射器100用于向外投射激光,光发射器100设置在垫块72上。柔性电路板712弯折且柔性电路板712的一端连接第一基板711,另一端连接光发射器100。光接收器200设置在第一基板711上,光接收器200用于接收被场景中的人或物反射回的激光。光接收器200包括外壳741及设置在外壳741上的光学元件742。外壳741与垫块72连接成一体。
具体地,第一基板组件71包括第一基板711及柔性电路板712。第一基板711可以是印刷线路板或柔性线路板。第一基板711上可以铺设有飞行时间深度相机300的控制线路等。柔性电路板712的一端可以连接在第一基板711上。柔性电路板712可以发生一定角度的弯折,使得柔性电路板712的两端连接的器件的相对位置可以有较多选择。
垫块72设置在第一基板711上。在一个例子中,垫块72与第一基板711接触且承载在第一基板711上,具体地,垫块72可以通过胶粘等方式与第一基板711结合。垫块72的材料可以是金属、塑料等。在本发明的实施例中,垫块72与第一基板711结合的面可以是平面,垫块72与该结合的面相背的面也可以是平面,使得光发射器100设置在垫块72上时具有较好的平稳性。
光接收器200设置在第一基板711上,且光接收器200和第一基板711的接触面与垫块72和第一基板711的接触面基本齐平设置(即,二者的安装起点在同一平面上)。具体地,光接收器200包括外壳741及光学元件742。外壳741设置在第一基板711上,光学元件742设置在外壳741上,外壳741可以是光接收器200的镜座及镜筒,光学元件742可以是设置在外壳741内的透镜等元件。进一步地,光接收器200还包括感光芯片(图未示),由场景中的人或物反射回的激光通过光学元件742后照射到感光芯片中,感光芯片对该激光产生响应。在本发明的实施例中,外壳741与垫块72连接成一体。具体地,外壳741与垫块72可以是一体成型;或者外壳741与垫块72的材料不同,二者通过双色注塑等方式一体成型。外壳741与垫块72也可以是分别成型,二者形成配合结构,在组装飞行时间深度相机300时,可以先将外壳741与垫块72中的一个设置在第一基板711上,再将另一个设置在第一基板711上且连接成一体。
如此,将光发射器100设置在垫块72上,垫块72可以垫高光发射器100的高度,进而提高光发射器100出射激光的面的高度,光发射器100发射的激光不易被光接收器200遮挡,使得激光能够完全照射到目标空间中的被测物体上。
请结合图23,光发射器100包括第二基板组件51、光发射组件101和外壳52。第二基板组件51设置在垫块72上,第二基板组件51与柔性电路板712连接。光发射组件101设置在第二基板组件51上,光发射组件101用于发射激光。外壳52设置在第二基板组件51上,外壳52形成有收容空间521,收容空间521可用于收容光发射组件101。柔性电路板712可以是可拆装地连接在第二基板组件51上。光发射组件101与第二基板组件51连接。外壳52整体可以呈碗状,且外壳52的开口向下罩设在第二基板组件51上,以将光发射组件101收容在收容空间521内。在本发明实施例中,外壳52上开设有与光发射组件101对应的出光口522,从光发射组件101发出的激光穿过出光口522后发射到出去,激光可以直接从出光口522穿出,也可以经其他光学器件改变光路后从出光口522穿出。
第二基板组件51包括第二基板511及补强件512。第二基板511与柔性电路板712连接。光发射组件101及补强件512设置在第二基板511的相背的两侧。第二基板511的具体类型可以是印刷线路板或柔性线路板等,第二基板511上可以铺设有控制线路。补强件512可以通过胶粘、铆接等方式与第二基板511固定连接,补强件512可以增加第二基板组件51整体的强度。光发射器100设置在垫块72上时,补强件512可以与垫块72直接接触,第二基板511不会暴露在外部,且不需要与垫块72直接接触,第二基板511不易受到灰尘等的污染。
补强件512与垫块72分体成型。在组装飞行时间深度相机300时,可以先将垫块72安装在第一基板71上,此时柔性电路板712的两端分别连接第一基板711及第二基板511,且柔性电路板712可以先不弯折。然后再将柔性电路板712弯折,使得补强件512设置在垫块72上。当然,在其他实施例中,补强件512与垫块72可以一体成型,例如通过注塑等工艺一体成型,在组装飞行时间深度相机300时,可以将垫块72及光发射器100一同安装在第一基板711上。
请结合图24,光发射组件101包括光源10、扩散器20、镜筒30、保护罩40、及驱动器61。
镜筒30包括呈环状的镜筒侧壁33,环状的镜筒侧壁33围成收容腔62。镜筒侧壁33包括位于收容腔62内的内表面331及与内表面相背的外表面332。镜筒侧壁33包括相背的第一面31及第二面32。收容腔62贯穿第一面31及第二面32。第一面31朝第二面32凹陷形成与收容腔62连通的安装槽34。安装槽34的底面35位于安装槽34的远离第一面31的一侧。镜筒侧壁33的外表面332在第一面31的一端的横截面呈圆形,镜筒侧壁33的外表面332在第一面31的一端形成有外螺纹。镜筒30承载在第二基板511上,第二基板511具体可为电路板511,电路板511与镜筒30的第二面32接触以封闭收容腔62的一端。
光源10承载在电路板511上并收容在收容腔62内。光源10用于朝镜筒30的第一面31(安装槽34)一侧发射激光。光源10可以是单点光源,也可是多点光源。在光源10为点电光源时,光源10具体可以为边发射型激光器,例如可以为分布反馈式激光器(DistributedFeedback Laser,DFB)等;在光源10为多点光源时,光源10具体可以为垂直腔面发射器(Vertical-Cavity Surface Laser,VCSEL),或者光源10也可为由多个边发射型激光器组成的多点光源。垂直腔面发射激光器的高度较小,采用垂直腔面发射器作为光源10,有利于减小光发射器100的高度,便于将光发射器100集成到手机等对机身厚度有较高的要求的电子装置800中。与垂直腔面发射器相比,边发射型激光器的温漂较小,可以减小温度对光源10的投射激光的效果的影响。
驱动器61承载在电路板511上并与光源10电性连接。具体地,驱动器61可以接收经过处理器805805调制的调制信号,并将调制信号转化为恒定的电流源后传输给光源10,以使光源10在恒定的电流源的作用下朝镜筒30的第一面31一侧发射激光。本实施方式的驱动器61设置在镜筒30外。在其他实施方式中,驱动器61可以设置在镜筒30内并承载在电路板511上。
扩散器20安装(承载)在安装槽34内并与安装槽34相抵触。扩散器20用于扩散穿过扩散器20的激光。也即是,光源10朝镜筒30的第一面31一侧发射激光时,激光会经过扩散器20并被扩散器20扩散或投射到镜筒30外。
保护罩40包括顶壁41及自顶壁41的一侧延伸形成的保护侧壁42。顶壁41的中心开设有通光孔401。保护侧壁42环绕顶壁41及通光孔401设置。顶壁41与保护侧壁42共同围成安装腔43,通光孔401与安装腔43连通。保护侧壁42的内表面的横截面呈圆形,保护侧壁42的内表面上形成有内螺纹。保护侧壁42的内螺纹与镜筒30的外螺纹螺合以将保护罩40安装在镜筒30上。顶壁41与扩散器20的抵触使得扩散器40被夹持在顶壁41与安装槽34的底面35之间。
如此,通过在镜筒30上开设安装槽34,并将扩散器20安装在安装槽34内,以及通过保护罩40安装在镜筒30上以将扩散器20夹持在保护罩40与安装槽34的底面35之间,从而实现将扩散器20固定在镜筒30上。此种方式无需使用胶水将扩散器20固定在镜筒30上,能够避免胶水挥发成气态后,气态的胶水扩散并凝固在扩散器20的表面而影响扩散器20的微观结构,并能够避免扩散器20和镜筒30的胶水因老化而使粘着力下降时扩散器20从镜筒30脱落。
请再参阅图1,本发明还提供一种电子装置800。电子装置包括上述任意一项实施方式所述的飞行时间深度相机300、一个或多个处理器805、存储器806和一个或多个程序。其中一个或多个程序被存储在存储器806中,并且被配置成由一个或多个处理器806执行,程序包括用于执行上述任意一项实施方式所述的控制方法的指令。
例如,请结合图2,程序包括用于执行以下步骤的指令:
01:获取场景的场景图像;
03:识别场景图像中是否存在人脸;
05:在场景图像中存在人脸时,控制光发射器100以第一发光功率和/或第一开启频率发光;
07:在场景图像中不存在人脸时,控制光发射器100以第二发光功率和/或第二开启频率发光。
再例如,请结合图6,程序还包括用于执行以下步骤的指令:
041:判断光发射器100的应用场景;
051:在应用场景为第一场景,且场景图像中存在所述人脸时,控制光发射器100以第一发光功率和第一子开启频率发光;和
052:在应用场景为第二场景,且场景图像中存在所述人脸时,控制光发射器100以第一发光功率和第二子开启频率发光。
请参阅图25,本发明还提供一种计算机可读存储介质900。计算机可读存储介质900包括与电子装置800结合使用的计算机程序,计算机程序可被处理器805执行以完成上述任意一项实施方式所述的控制方法。
例如,请结合图2,计算机程序可被处理器805执行以完成以下步骤:
01:获取场景的场景图像;
03:识别场景图像中是否存在人脸;
05:在场景图像中存在人脸时,控制光发射器100以第一发光功率和/或第一开启频率发光;
07:在场景图像中不存在人脸时,控制光发射器100以第二发光功率和/或第二开启频率发光。
再例如,请结合图6,计算机程序还可被处理器805执行以完成以下步骤:
041:判断光发射器100的应用场景;
051:在应用场景为第一场景,且场景图像中存在所述人脸时,控制光发射器100以第一发光功率和第一子开启频率发光;和
052:在应用场景为第二场景,且场景图像中存在所述人脸时,控制光发射器100以第一发光功率和第二子开启频率发光。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本发明的描述中,“多个”的含义是至少两个,例如两个,三个等,除非另有明确具体的限定。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本发明的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本发明的实施例所属技术领域的技术人员所理解。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤,例如,可以被认为是用于实现逻辑功能的可执行指令的定序列表,可以具体实现在任何计算机可读介质中,以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用,或结合这些指令执行系统、装置或设备而使用。就本说明书而言,"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下:具有一个或多个布线的电连接部(电子装置),便携式计算机盘盒(磁装置),随机存取存储器(RAM),只读存储器(ROM),可擦除可编辑只读存储器(EPROM或闪速存储器),光纤装置,以及便携式光盘只读存储器(CDROM)。另外,计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质,因为可以例如通过对纸或其他介质进行光学扫描,接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序,然后将其存储在计算机存储器中。
应当理解,本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如,如果用硬件来实现,和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本发明各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。尽管上面已经示出和描述了本发明的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本发明的限制,本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (19)

1.一种光发射器的控制方法,其特征在于,所述控制方法包括:
获取场景的场景图像;
识别所述场景图像中是否存在人脸;
在所述场景图像中存在所述人脸时,控制所述光发射器以第一发光功率和/或第一开启频率发光;
在所述场景图像中不存在所述人脸时,控制所述光发射器以第二发光功率和/或第二开启频率发光。
2.根据权利要求1所述的控制方法,其特征在于,所述第一开启频率包括第一子开启频率和第二子开启频率,所述控制方法还包括:
判断所述光发射器的应用场景;
所述在所述场景图像中存在所述人脸时,控制所述光发射器以第一发光功率和/或第一开启频率发光的步骤包括:
在所述应用场景为第一场景,且所述场景图像中存在所述人脸时,控制所述光发射器以所述第一发光功率和所述第一子开启频率发光;和
在所述应用场景为第二场景,且所述场景图像中存在所述人脸时,控制所述光发射器以所述第一发光功率和所述第二子开启频率发光。
3.根据权利要求1所述的控制方法,其特征在于,所述控制方法在所述识别所述场景图像中是否存在人脸的步骤后还包括:
获取用户与所述光发射器的投射距离;和
根据所述投射距离计算所述第一发光功率。
4.根据权利要求3所述的控制方法,其特征在于,所述获取用户与所述光发射器的投射距离的步骤包括:
计算所述场景图像中所述人脸所占的第一比例;和
根据所述第一比例计算所述投射距离。
5.根据权利要求4所述的控制方法,其特征在于,所述根据所述第一比例计算所述投射距离的步骤包括:
计算所述场景图像中所述人脸的预设特征区域占所述人脸的第二比例;和
根据所述第一比例及所述第二比例计算所述投射距离。
6.根据权利要求4所述的控制方法,其特征在于,所述根据所述第一比例计算所述投射距离的步骤包括:
根据所述场景图像判断所述用户是否配戴眼镜;和
在所述用户佩戴眼镜时根据所述第一比例及距离系数计算所述投射距离。
7.根据权利要求4所述的控制方法,其特征在于,所述根据所述第一比例计算所述投射距离的步骤包括:
根据所述场景图像判断所述用户的年龄;和
根据所述第一比例及所述年龄计算所述投射距离。
8.根据权利要求1所述的控制方法,所述在所述场景图像中不存在所述人脸时,控制所述光发射器以第二发光功率和/或第二开启频率发光的步骤包括:
获取所述场景中的目标主体与所述光发射器的投射距离;
获取所述场景的环境亮度;和
根据所述环境亮度及所述投射距离计算所述第二发光功率。
9.一种光发射器的控制装置,其特征在于,所述控制装置包括:
第一获取模块,所述第一获取模块用于获取场景的场景图像;
识别模块,所述识别模块用于识别所述场景图像中是否存在人脸;和
控制模块,所述控制模块可用于:
在所述场景图像中存在所述人脸时,控制所述光发射器以第一发光功率和/或第一开启频率发光;和
在所述场景图像中不存在所述人脸时,控制所述光发射器以第二发光功率和/或第二开启频率发光。
10.一种飞行时间深度相机,其特征在于,所述飞行时间深度相机包括光发射器和处理器,所述处理器用于:
获取场景的场景图像;
识别所述场景图像中是否存在人脸;
在所述场景图像中存在所述人脸时,控制所述光发射器以第一发光功率和/或第一开启频率发光;
在所述场景图像中不存在所述人脸时,控制所述光发射器以第二发光功率和/或第二开启频率发光。
11.根据权利要求10所述的飞行时间深度相机,其特征在于,所述处理器还用于:
判断所述光发射器的应用场景;
在所述应用场景为第一场景,且所述场景图像中存在所述人脸时,控制所述光发射器以所述第一发光功率和所述第一子开启频率发光;和
在所述应用场景为第二场景,且所述场景图像中存在所述人脸时,控制所述光发射器以所述第一发光功率和所述第二子开启频率发光。
12.根据权利要求10所述的飞行时间深度相机,其特征在于,所述处理器还用于:
获取用户与所述光发射器的投射距离;和
根据所述投射距离计算所述第一发光功率。
13.根据权利要求12所述的飞行时间深度相机,其特征在于,所述处理器还用于:
计算所述场景图像中所述人脸所占的第一比例;和
根据所述第一比例计算所述投射距离。
14.根据权利要求13所述的飞行时间深度相机,其特征在于,所述处理器还用于:
计算所述场景图像中所述人脸的预设特征区域占所述人脸的第二比例;和
根据所述第一比例及所述第二比例计算所述投射距离。
15.根据权利要求13所述的飞行时间深度相机,其特征在于,所述处理器还用于:
根据所述场景图像判断所述用户是否配戴眼镜;和
在所述用户佩戴眼镜时根据所述第一比例及距离系数计算所述投射距离。
16.根据权利要求13所述的飞行时间深度相机,其特征在于,所述处理器还用于:
根据所述场景图像判断所述用户的年龄;和
根据所述第一比例及所述年龄计算所述投射距离。
17.根据权利要求10所述的飞行时间深度相机,其特征在于,所述处理器还用于:
获取所述场景中的目标主体与所述光发射器的投射距离;
获取所述场景的环境亮度;和
根据所述环境亮度及所述投射距离计算所述第二发光功率。
18.一种电子装置,其特征在于,所述电子装置包括:
权利要求10-17任意一项所述的飞行时间深度相机;
一个或多个处理器;
存储器;和
一个或多个程序,其中所述一个或多个程序被存储在所述存储器中,并且被配置成由所述一个或多个处理器执行,所述程序包括用于执行权利要求1至8任意一项所述的控制方法的指令。
19.一种计算机可读存储介质,其特征在于,包括与电子装置结合使用的计算机程序,所述计算机程序可被处理器执行以完成权利要求1至8任意一项所述的控制方法。
CN201811060690.4A 2018-09-12 2018-09-12 控制方法及装置、深度相机、电子装置及可读存储介质 Active CN109068036B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201811060690.4A CN109068036B (zh) 2018-09-12 2018-09-12 控制方法及装置、深度相机、电子装置及可读存储介质
PCT/CN2019/090020 WO2020052284A1 (zh) 2018-09-12 2019-06-04 控制方法及装置、深度相机、电子装置及可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811060690.4A CN109068036B (zh) 2018-09-12 2018-09-12 控制方法及装置、深度相机、电子装置及可读存储介质

Publications (2)

Publication Number Publication Date
CN109068036A true CN109068036A (zh) 2018-12-21
CN109068036B CN109068036B (zh) 2020-09-25

Family

ID=64760107

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811060690.4A Active CN109068036B (zh) 2018-09-12 2018-09-12 控制方法及装置、深度相机、电子装置及可读存储介质

Country Status (2)

Country Link
CN (1) CN109068036B (zh)
WO (1) WO2020052284A1 (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110418062A (zh) * 2019-08-29 2019-11-05 上海云从汇临人工智能科技有限公司 一种拍摄方法、装置、设备及机器可读介质
WO2020038064A1 (zh) * 2018-08-22 2020-02-27 Oppo广东移动通信有限公司 控制方法及装置、深度相机、电子装置及可读存储介质
WO2020052284A1 (zh) * 2018-09-12 2020-03-19 Oppo广东移动通信有限公司 控制方法及装置、深度相机、电子装置及可读存储介质
CN111427049A (zh) * 2020-04-06 2020-07-17 深圳蚂里奥技术有限公司 一种激光安全装置及控制方法
CN111487633A (zh) * 2020-04-06 2020-08-04 深圳蚂里奥技术有限公司 一种激光安全控制装置及方法
CN112351155A (zh) * 2019-08-06 2021-02-09 Oppo(重庆)智能科技有限公司 电子设备、用于电子设备的反偷拍装置及其控制方法
CN113126111A (zh) * 2019-12-30 2021-07-16 Oppo广东移动通信有限公司 飞行时间模组和电子设备
CN113223209A (zh) * 2020-01-20 2021-08-06 深圳绿米联创科技有限公司 门锁控制方法、装置、电子设备及存储介质
CN114531541A (zh) * 2022-01-10 2022-05-24 荣耀终端有限公司 一种摄像头模组的控制方法和装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160109232A1 (en) * 2014-10-21 2016-04-21 Lg Electronics Inc. Mobile terminal and method for controlling the same
CN107607957A (zh) * 2017-09-27 2018-01-19 维沃移动通信有限公司 一种深度信息获取系统及方法、摄像模组和电子设备
CN108281880A (zh) * 2018-02-27 2018-07-13 广东欧珀移动通信有限公司 控制方法、控制装置、终端、计算机设备和存储介质
CN108376252A (zh) * 2018-02-27 2018-08-07 广东欧珀移动通信有限公司 控制方法、控制装置、终端、计算机设备和存储介质
CN108376251A (zh) * 2018-02-27 2018-08-07 广东欧珀移动通信有限公司 控制方法、控制装置、终端、计算机设备和存储介质
US20180224545A1 (en) * 2017-02-03 2018-08-09 Microsoft Technology Licensing, Llc Active Illumination Management Through Contextual Information

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109068036B (zh) * 2018-09-12 2020-09-25 Oppo广东移动通信有限公司 控制方法及装置、深度相机、电子装置及可读存储介质

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160109232A1 (en) * 2014-10-21 2016-04-21 Lg Electronics Inc. Mobile terminal and method for controlling the same
US20180224545A1 (en) * 2017-02-03 2018-08-09 Microsoft Technology Licensing, Llc Active Illumination Management Through Contextual Information
CN107607957A (zh) * 2017-09-27 2018-01-19 维沃移动通信有限公司 一种深度信息获取系统及方法、摄像模组和电子设备
CN108281880A (zh) * 2018-02-27 2018-07-13 广东欧珀移动通信有限公司 控制方法、控制装置、终端、计算机设备和存储介质
CN108376252A (zh) * 2018-02-27 2018-08-07 广东欧珀移动通信有限公司 控制方法、控制装置、终端、计算机设备和存储介质
CN108376251A (zh) * 2018-02-27 2018-08-07 广东欧珀移动通信有限公司 控制方法、控制装置、终端、计算机设备和存储介质

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020038064A1 (zh) * 2018-08-22 2020-02-27 Oppo广东移动通信有限公司 控制方法及装置、深度相机、电子装置及可读存储介质
WO2020052284A1 (zh) * 2018-09-12 2020-03-19 Oppo广东移动通信有限公司 控制方法及装置、深度相机、电子装置及可读存储介质
CN112351155A (zh) * 2019-08-06 2021-02-09 Oppo(重庆)智能科技有限公司 电子设备、用于电子设备的反偷拍装置及其控制方法
CN112351155B (zh) * 2019-08-06 2023-02-17 Oppo(重庆)智能科技有限公司 电子设备、用于电子设备的反偷拍装置及其控制方法
CN110418062A (zh) * 2019-08-29 2019-11-05 上海云从汇临人工智能科技有限公司 一种拍摄方法、装置、设备及机器可读介质
CN113126111A (zh) * 2019-12-30 2021-07-16 Oppo广东移动通信有限公司 飞行时间模组和电子设备
CN113126111B (zh) * 2019-12-30 2024-02-09 Oppo广东移动通信有限公司 飞行时间模组和电子设备
CN113223209A (zh) * 2020-01-20 2021-08-06 深圳绿米联创科技有限公司 门锁控制方法、装置、电子设备及存储介质
CN111427049A (zh) * 2020-04-06 2020-07-17 深圳蚂里奥技术有限公司 一种激光安全装置及控制方法
CN111487633A (zh) * 2020-04-06 2020-08-04 深圳蚂里奥技术有限公司 一种激光安全控制装置及方法
CN114531541A (zh) * 2022-01-10 2022-05-24 荣耀终端有限公司 一种摄像头模组的控制方法和装置

Also Published As

Publication number Publication date
CN109068036B (zh) 2020-09-25
WO2020052284A1 (zh) 2020-03-19

Similar Documents

Publication Publication Date Title
CN109068036A (zh) 控制方法及装置、深度相机、电子装置及可读存储介质
CN109104583A (zh) 控制方法及装置、深度相机、电子装置及可读存储介质
CN108833889A (zh) 控制方法及装置、深度相机、电子装置及可读存储介质
CN110476105A (zh) 均匀性提高并且颜色之间的交叉耦合减少的波导显示器
CN108205374B (zh) 一种视频眼镜的眼球追踪模组及其方法、视频眼镜
CN108281880A (zh) 控制方法、控制装置、终端、计算机设备和存储介质
US8224040B2 (en) Face recognition apparatus based on even light source
CN108333860A (zh) 控制方法、控制装置、深度相机和电子装置
US11221492B2 (en) Eye tracking apparatus and eye tracking device for the estimation of line-of-sight and/or gaze point of eyes
CN108509867A (zh) 控制方法、控制装置、深度相机和电子装置
CN108989783A (zh) 电子装置和电子装置的控制方法
CN108594451A (zh) 控制方法、控制装置、深度相机和电子装置
US10884241B2 (en) Optical element for reducing stray infrared light
CN109031252A (zh) 标定方法、标定控制器及标定系统
WO2012174453A2 (en) Systems and methods for binocular iris imaging
US10551500B2 (en) Infrared optical element for proximity sensor system
CN109271916A (zh) 电子装置及其控制方法、控制装置和计算机可读存储介质
CN108227361A (zh) 控制方法、控制装置、深度相机和电子装置
US10928891B2 (en) Method and arrangement for calibrating a head-mounted display
US6490365B2 (en) Eye image pickup device
CN109005348A (zh) 电子装置和电子装置的控制方法
EP4187437A1 (en) Display assembly and display device
CN113711229A (zh) 电子设备的控制方法、电子设备和计算机可读存储介质
SE1950117A1 (en) Lens for eye-tracking comprising an electrical component and a head-worn device with such a lens
US7043152B2 (en) Eye image pickup device

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant