CN109145811A - 点阵光源控制方法、设备和电子设备 - Google Patents

点阵光源控制方法、设备和电子设备 Download PDF

Info

Publication number
CN109145811A
CN109145811A CN201810941443.9A CN201810941443A CN109145811A CN 109145811 A CN109145811 A CN 109145811A CN 201810941443 A CN201810941443 A CN 201810941443A CN 109145811 A CN109145811 A CN 109145811A
Authority
CN
China
Prior art keywords
light source
human eye
array
array light
positional relationship
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810941443.9A
Other languages
English (en)
Inventor
石彬
王晓刚
张敏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Beijing Ltd
Original Assignee
Lenovo Beijing Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Beijing Ltd filed Critical Lenovo Beijing Ltd
Priority to CN201810941443.9A priority Critical patent/CN109145811A/zh
Publication of CN109145811A publication Critical patent/CN109145811A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/166Detection; Localisation; Normalisation using acquisition arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof
    • G06V10/14Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/147Details of sensors, e.g. sensor lenses

Abstract

本公开提供了一种用于点阵光源控制方法,包括确定人眼与点阵光源的各点光源的对应关系;以及根据所述人眼与点阵光源的各点光源的对应关系控制所述点阵光源。本公开还提供了一种用于点阵光源控制设备、以及一种电子设备。

Description

点阵光源控制方法、设备和电子设备
技术领域
本公开涉及一种点阵光源控制方法、设备和电子设备。
背景技术
人脸识别技术,是基于人的脸部特征信息进行身份识别的一种生物识别技术。用摄像机或摄像头采集含有人脸的图像或视频流,并自动在图像中检测和跟踪人脸,进而对检测到的人脸进行脸部的一系列相关处理,通常也叫做人像识别、面部识别。
现有的人脸识别技术主要包括基于视频图像的识别方法和基于三维图像人脸识别,传统的人脸识别技术主要是基于可见光图像的人脸识别,但这种方式有着难以克服的缺陷,尤其在环境光照发生变化时,识别效果会急剧下降,无法满足实际系统的需要。基于三维图像人脸识别成为解决上述问题的一种途径,例如,苹果手机(iPhone)采用了点阵投射器(Dot projector)来实现基于三维图像人脸识别,能同时保证识别速度和识别准确度。
点阵投射器使用高功率的垂直共振腔面发射型激光器(Vertical CavitySurface Emitting Laser,简称VCSEL)发射红外激光投射人脸,以便于根据反射光来获取影像的深度信息进行人脸识别,虽然它的功率并不是真的很高,但是该红外激光会入射到用户的眼睛,长期使用可能对用户的眼球造成伤害。
发明内容
本公开的一个方面提供了一种点阵光源控制方法、设备和电子设备,包括:首先确定人眼与点阵光源的各点光源的对应关系,即确定点阵光源的哪些点光源投射的光会入射到用户眼睛中,然后根据所述人眼与点阵光源的各点光源的对应关系控制所述点阵光源,这样可以通过控制各点光源实现减少所述点阵光源对用户眼睛的照射。
可选地,可以通过以下操作确定人眼与点阵光源的各点光源的对应关系,首先,通过红外传感器确定人眼与所述红外传感器的位置关系,如红外传感器采集的红外图像中的人眼的位置,然后根据所述人眼与所述红外传感器的位置关系以及所述红外传感器与点阵光源的位置关系确定所述人眼与所述点阵光源的位置关系,由于所述红外传感器与点阵光源的位置关系是固定的,因此可以据此确定红外图像中的人眼对应所述点阵光源中的哪些点光源。
可选地,可以通过以下操作确定人眼与所述红外传感器的位置关系,首先,获得红外图像,然后,根据所述红外图像的不同位置之间的温差确定人眼的红外图像,这样就可以确定红外图像中的人眼的位置,接着,根据所述人眼的红外图像确定所述人眼与所述红外传感器的位置关系,如人眼对应所述红外传感器中的哪些像素点。
可选地,可以通过以下操作确定人眼与点阵光源的各点光源的对应关系,首先,通过摄像头确定人眼与所述摄像头的位置关系,如现有的各种可见光摄像头等,然后,根据所述人眼与所述摄像头的位置关系以及所述摄像头与点阵光源的位置关系确定所述人眼与所述点阵光源的位置关系,由于所述摄像头与点阵光源的位置关系是固定的,因此可以据此确定人脸图像中的人眼对应所述点阵光源中的哪些点光源。
可选地,可以通过以下操作确定人眼与所述摄像头的位置关系,首先,获得图像,该图像可以是包括人脸图像的图像,然后,对所述图像进行图像识别得到人眼图像,这样就可以确定图像中的人眼的位置,接着,根据所述人眼图像确定所述人眼与所述摄像头的位置关系,如人眼对应所述摄像头的图像传感器中的哪些像素点。
可选地,可以通过以下操作确定人眼与泛光器件的位置关系,其中,泛光器件(Flood illuminator)可以使用低功率的垂直共振腔面射型激光,发射出红外光投射在物体表面,以便于根据反射光判断人眼的位置,由于只需要确定被投射的物体是否为人脸,以及确定人眼的大致位置,即对识别精度要求不高,因此,可以采用具有较低光功率和对人眼伤害小的光波段以降低该泛光器件对人眼的伤害。然后,根据所述人眼与所述泛光器件的位置关系以及所述泛光器件与点阵光源的位置关系确定人眼与所述点阵光源的位置关系,由于所述泛光器件与点阵光源的位置关系是固定的,因此可以据此确定设备接收到的反射光表征的信息中人眼对应所述点阵光源中的哪些点光源。
可选地,可以通过以下操作确定人眼与所述泛光器件的位置关系,首先,所述泛光器件发射多束光线,所述光线的波长位于第一波长和第二波长之间,和/或所述光线的光强小于设定光强,这样可以减少泛光器件发射的光线对人眼的伤害,然后,根据所述多束光线的反射光线确定人眼与所述泛光器件的位置关系。
可选地,所述点阵光源包括光源、光学组件和液晶开关阵列,所述光学组件将所述光源分为第一指定个数的点光源,所述液晶开关阵列设置在所述光学组件之上,且所述液晶开关阵列的一个液晶开关对应一个点光源或者多个相邻的点光源。相应地,所述根据所述人眼与点阵光源的各点光源的对应关系控制所述点阵光源可以包括如下操作,首先,根据所述人眼与点阵光源的各点光源的对应关系得到所述人眼与所述液晶开关阵列的每个液晶开关的对应关系,然后根据所述人眼与所述液晶开关阵列的每个液晶开关的对应关系控制所述液晶开关阵列,使得至少部分与所述人眼对应的点光源被液晶开关遮挡。这样可以实现通过液晶开关阵列来控制各点光源的光线是否能透射到所述液晶开关阵列之外,如通过控制液晶开关使得会透射到人眼的点光源的光线不能透射到液晶开关之外,这样就可以实现减少点阵光源对人眼的照射。
可选地,所述点阵光源包括第二指定个数的独立点光源和开关阵列,所述开关阵列的一个开关用于开启或关闭一个或多个独立点光源。相应地,所述根据所述人眼与点阵光源的各点光源的对应关系控制所述点阵光源可以包括,首先,根据所述人眼与点阵光源的各独立点光源的对应关系得到所述人眼与所述开关阵列的每个开关的对应关系,然后,根据所述人眼与所述开关阵列的每个开关的对应关系控制所述开关阵列,使得至少部分与人眼对应的独立点光源被关闭。由于开关阵列的每个开关可以控制所述点阵光源中的一个或多个点光源,而人眼对应所述点阵光源中的数个点光源,这样可以通过控制所述开关阵列中的一个或多个开关来关闭所述点阵光源中对应人眼的一个或多个点光源,这样就可以实现减少点阵光源对人眼的照射。
本公开的另一个方面提供了一种用于点阵光源控制设备,可以包括关系确定模块和光源控制模块,其中,所述关系确定模块用于确定人眼与点阵光源的各点光源的对应关系,所述光源控制模块用于根据所述人眼与点阵光源的各点光源的对应关系控制所述点阵光源。
可选地,所述关系确定模块可以包括第一确定单元和第二确定单元,其中,所述第一确定单元用于通过红外传感器确定人眼与所述红外传感器的位置关系,所述第二确定单元用于根据所述人眼与所述红外传感器的位置关系以及所述红外传感器与点阵光源的位置关系确定所述人眼与所述点阵光源的位置关系。
可选地,所述第一确定单元可以包括第一获取子单元、第一人眼确定子单元和第一关系确定子单元,其中,所述第一获取子单元用于获得红外图像,所述第一人眼确定子单元用于根据所述红外图像的不同位置之间的温差确定人眼的红外图像,所述第一关系确定子单元用于根据所述人眼的红外图像确定所述人眼与所述红外传感器的位置关系。
可选地,所述关系确定模块还可以包括第三确定单元和第四确定单元,其中,所述第三确定单元用于通过摄像头确定人眼与所述摄像头的位置关系,所述第四确定单元用于根据所述人眼与所述摄像头的位置关系以及所述摄像头与点阵光源的位置关系确定所述人眼与所述点阵光源的位置关系。
可选地,所述第三确定单元可以包括第三获取子单元、第三人眼确定子单元和第三关系确定子单元,其中,所述第三获取子单元用于获得图像,所述第三人眼确定子单元用于对所述图像进行图像识别得到人眼图像,所述第三关系确定子单元用于根据所述人眼图像确定所述人眼与所述摄像头的位置关系。
可选地,所述关系确定模块还可以包括第五确定单元和第六确定单元,其中,所述第五确定单元用于通过泛光器件确定人眼与所述泛光器件的位置关系,以及所述第六确定单元用于根据所述人眼与所述泛光器件的位置关系以及所述泛光器件与点阵光源的位置关系确定人眼与所述点阵光源的位置关系。
可选地,所述第五确定单元可以包括驱动子单元和第五关系确定子单元,其中,所述驱动子单元用于驱动所述泛光器件发射多束光线,所述光线的波长位于第一波长和第二波长之间,和/或所述光线的光强小于设定光强,所述第五关系确定子单元用于根据所述多束光线的反射光线确定人眼与所述泛光器件的位置关系。
可选地,所述点阵光源可以包括光源、光学组件和液晶开关阵列,所述光学组件将所述光源分为第一指定个数的点光源,所述液晶开关阵列设置在所述光学组件之上,且所述液晶开关阵列的一个液晶开关对应一个点光源或者多个相邻的点光源,相应地,所述光源控制模块包括第一获取单元和第一控制单元,其中,所述第一获取单元用于根据所述人眼与点阵光源的各点光源的对应关系得到所述人眼与所述液晶开关阵列的每个液晶开关的对应关系,所述第一控制单元用于根据所述人眼与所述液晶开关阵列的每个液晶开关的对应关系控制所述液晶开关阵列,使得至少部分与所述人眼对应的点光源被液晶开关遮挡。
可选地,所述点阵光源可以包括第二指定个数的独立点光源和开关阵列,所述开关阵列的一个开关用于开启或关闭一个或多个独立点光源,相应地,所述光源控制模块包括第二获取单元和第二控制单元,其中,所述第二获取单元用于根据所述人眼与点阵光源的各独立点光源的对应关系得到所述人眼与所述开关阵列的每个开关的对应关系,所述第二控制单元用于根据所述人眼与所述开关阵列的每个开关的对应关系控制所述开关阵列,使得至少部分与人眼对应的独立点光源被关闭。
本公开的另一个方面提供了一种电子设备,包括点阵光源、传感器、开关总成和处理器,其中,所述传感器用于获得人眼信息,所述开关总成包括多个开关,所述多个开关中的每个开关对应所述点阵光源中的一个或者多个点光源,所述处理器用于根据所述人眼信息确定人眼与点阵光源的各点光源的对应关系,以及根据所述人眼与点阵光源的各点光源的对应关系、所述每个开关与所述点光源的对应关系,控制所述开关总成以减少所述点阵光源对所述人眼的照射。
本公开的另一个方面提供了一种电子设备,包括点阵光源、传感器、开关总成、一个或多个处理器、以及可读存储介质,其中,所述传感器,用于获得人眼信息,所述开关总成包括多个开关,所述多个开关中的每个开关对应所述点阵光源中的一个或者多个点光源,所述可读存储介质用于存储一个或多个计算机程序,所述计算机程序在被所述处理器执行时,实现如上所述的方法。
本公开的另一方面提供了一种非易失性存储介质,存储有计算机可执行指令,所述指令在被执行时用于实现如上所述的方法。
本公开的另一方面提供了一种计算机程序,所述计算机程序包括计算机可执行指令,所述指令在被执行时用于实现如上所述的方法。
附图说明
为了更完整地理解本公开及其优势,现在将参考结合附图的以下描述,其中:
图1示意性示出了根据本公开实施例的点阵光源控制方法、设备和电子设备的应用场景;
图2A示意性示出了根据本公开实施例的用于点阵光源控制方法的流程图;
图2B示意性示出了根据本公开实施例的人眼与点阵光源的各点光源的对应关系示意图;
图3A示意性示出了根据本公开实施例的确定人眼与点阵光源的各点光源的对应关系的方法的一种流程图;
图3B示意性示出了根据本公开实施例的通过红外传感器确定人眼与点阵光源的位置关系的示意图;
图3C示意性示出了根据本公开实施例的根据红外图像的温差确定人眼的红外图像的示意图;
图3D示意性示出了根据本公开实施例的确定人眼与点阵光源的各点光源的对应关系的方法的另一种流程图;
图3E示意性示出了根据本公开实施例的通过摄像头确定人眼与点阵光源的位置关系的示意图;
图3F示意性示出了根据本公开实施例的确定人眼与点阵光源的各点光源的对应关系的方法的另一种流程图;
图3G示意性示出了根据本公开实施例的通过泛光器件确定人眼与点阵光源的位置关系的示意图;
图3H示意性示出了根据本公开实施例的利用泛光器件得到的人脸三维图形示意图;
图3I示意性示出了根据本公开实施例的通过液晶开关阵列控制点阵光源的方法的一种流程图;
图3J示意性示出了根据本公开实施例的液晶开关阵列的一种示意图;
图3K示意性示出了根据本公开实施例的通过开关阵列控制点阵光源的方法的一种流程图;
图4示意性示出了根据本公开实施例的用于点阵光源控制设备的框图;以及
图5示意性示出了根据本公开另一实施例的电子设备的框图。
具体实施方式
以下,将参照附图来描述本公开的实施例。但是应该理解,这些描述只是示例性的,而并非要限制本公开的范围。在下面的详细描述中,为便于解释,阐述了许多具体的细节以提供对本公开实施例的全面理解。然而,明显地,一个或多个实施例在没有这些具体细节的情况下也可以被实施。此外,在以下说明中,省略了对公知结构和技术的描述,以避免不必要地混淆本公开的概念。
在此使用的术语仅仅是为了描述具体实施例,而并非意在限制本公开。在此使用的术语“包括”、“包含”等表明了所述特征、步骤、操作和/或部件的存在,但是并不排除存在或添加一个或多个其他特征、步骤、操作或部件。
在此使用的所有术语(包括技术和科学术语)具有本领域技术人员通常所理解的含义,除非另外定义。应注意,这里使用的术语应解释为具有与本说明书的上下文相一致的含义,而不应以理想化或过于刻板的方式来解释。
在使用类似于“A、B和C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释 (例如,“具有A、B和C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。在使用类似于“A、B或C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B或C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A 和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。本领域技术人员还应理解,实质上任意表示两个或更多可选项目的转折连词和/或短语,无论是在说明书、权利要求书还是附图中,都应被理解为给出了包括这些项目之一、这些项目任一方、或两个项目的可能性。例如,短语“A或B”应当被理解为包括“A”或“B”、或“A和B”的可能性。
附图中示出了一些方框图和/或流程图。应理解,方框图和/或流程图中的一些方框或其组合可以由计算机程序指令来实现。这些计算机程序指令可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器,从而这些指令在由该处理器执行时可以创建用于实现这些方框图和/或流程图中所说明的功能/操作的装置。
因此,本公开的技术可以硬件和/或软件(包括固件、微代码等)的形式来实现。另外,本公开的技术可以采取存储有指令的计算机可读介质上的计算机程序产品的形式,该计算机程序产品可供指令执行系统使用或者结合指令执行系统使用。在本公开的上下文中,计算机可读介质可以是能够包含、存储、传送、传播或传输指令的任意介质。例如,计算机可读介质可以包括但不限于电、磁、光、电磁、红外或半导体系统、装置、器件或传播介质。计算机可读介质的具体示例包括:磁存储装置,如磁带或硬盘(HDD);光存储装置,如光盘(CD-ROM);存储器,如随机存取存储器(RAM)或闪存;和/或有线/无线通信链路。
本公开的实施例提供了一种用于点阵光源控制方法、设备和电子设备。该方法包括确定人眼与点阵光源的各点光源的对应关系,以及根据所述人眼与点阵光源的各点光源的对应关系控制所述点阵光源,这样可以控制至少部分点光源无法将光线投射到人眼中,减少甚至避免了所述点阵光源对所述人眼的照射,可以有效保护使用者的眼睛。
图1示意性示出了根据本公开的实施例的点阵光源控制方法、设备和电子设备的应用场景。需要注意的是,图1所示仅为可以应用本公开实施例的场景的示例,以帮助本领域技术人员理解本公开的技术内容,但并不意味着本公开实施例不可以用于其他设备、系统、环境或场景。
如图1所示,根据该实施例的应用场景的系统架构100中可以包括终端设备101、102、103,网络104和服务器105。网络104用以在终端设备101、102、103和服务器105之间提供通信链路的介质。网络104 可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。
用户可以使用终端设备101、102、103通过网络104与服务器105 交互,以接收或发送信息等。终端设备101、102、103上可以安装有各种可能会使用到人脸识别技术的通讯客户端应用,例如购物类应用、网页浏览器应用、搜索类应用、即时通信工具、邮箱客户端、社交平台软件等,还具有支持上述客户端应用的各种硬件设备,例如,摄像头、点阵光源、红外传感器、泛光器件等。
终端设备101、102、103可以是具有显示屏并且支持数据收发的各种电子设备,包括但不限于智能手机、平板电脑、膝上型便携计算机、台式计算机、医疗设备、支付设备、身份鉴别设备、投影仪、虚拟现实设备等等。例如,上述场景包括但不限于使用手机的人脸解锁功能、人脸识别支付、身份鉴别设备进行人脸识别、医疗设备开启或参数调整等需要通过人脸识别进行鉴权等。
服务器105可以是提供各种服务的服务器,例如对用户利用终端设备101、102、103所上传的数据或待分析的数据提供支持的后台管理服务器。后台管理服务器可以对接收到的用户请求等数据进行分析等处理,并将处理结果(例如根据鉴权后的用户请求获取或生成的订单、支付信息等)反馈给终端设备。
需要说明的是,本公开实施例所提供的用于点阵光源控制方法一般可以由用户利用终端设备101、102、103或者服务器105执行。相应地,本公开实施例所提供的用于点阵光源控制装置一般也可以设置于终端设备101、102、103或者服务器105上。
应该理解,终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。
图2A示意性示出了根据本公开实施例的用于点阵光源控制方法的流程图。
如图2A所示,该方法包括操作S201~S202。
在操作S201中,确定人眼与点阵光源的各点光源的对应关系。
在本实施例中,首先确定人眼对应所述点阵光源中哪些点光源,这样就可以便于后续对这些对应人眼的点光源进行控制。
图2B示意性示出了根据本公开实施例的人眼与点阵光源的各点光源的对应关系示意图。如图2B所示,左上方的图代表点阵光源要投射的人脸,右上方的图代表点阵光源,如最外圈的方框,该点阵光源包括多个点光源,如各小方框,而位于下方的图中的浅色长方形框内的各小方框则代表与人眼相对应的点光源。具体地,可以借助传感器来确定人眼与点阵光源的各点光源的对应关系,传感器包括但不限于图像传感器、红外传感器等,如首先确定人眼与所述传感器中各区域的对应关系,然后根据传感器中各区域与点阵光源中各点光源的对应关系,就可以实时的确定人眼与所述点阵光源中各点光源的对应关系。
在操作S202中,根据所述人眼与点阵光源的各点光源的对应关系控制所述点阵光源。
在一些具体的应用场景中,例如,人脸识别的应用场景中,可以通过阻止与人眼相对应的点光源的光线投射入人眼,如激光等,减少甚至避免所述点阵光源发射的光线进入人眼,减少甚至避免对人眼的损伤。
对点阵光源的控制可以通过对光路的控制来实现,也可以通过对电路的控制来实现,例如,对于由一个光源通过光学组件投射出的多个点光源,可以通过在光路上设置液晶面板来实现光路控制,对于多个独立点光源组成的点阵光源,可以通过分别控制各独立点光源实现对点阵光源的控制。其中,液晶面板可以包括:透明基板、薄膜晶体管阵列、偏振片、液晶等,通过薄膜晶体管阵列控制液晶的偏转以实现控制光路的开通或关闭。当然,对于多个独立点光源组成的点阵光源,也可以采用液晶面板进行光路的控制。
本公开提供的用于点阵光源控制方法,首先确定人眼与点阵光源的各点光源的对应关系,即确定点阵光源的哪些点光源投射的光会入射到用户眼睛中,然后根据所述人眼与点阵光源的各点光源的对应关系控制所述点阵光源,这样可以通过控制各点光源实现减少所述点阵光源对用户眼睛的照射,保护用户眼睛。
图3A示意性示出了根据本公开实施例的确定人眼与点阵光源的各点光源的对应关系的方法的一种流程图。
在本实施例中,如图3A所示,所述确定人眼与点阵光源的各点光源的对应关系可以包括操作S301~S302。
在操作S301中,通过红外传感器确定人眼与所述红外传感器的位置关系。
在本实施例中,该红外传感器包括多个像素,每个像素接收到的红外线共同构成红外图像,该红外传感器可以将红外图像以电信号的形式发送给处理器,由处理器对红外图像进行图像处理,确定红外图像中是否包含人脸,如果包含人脸,则进一步确定人眼的位置,以及红外传感器的哪些像素对应的人眼的红外图像,这样就可以确定人眼与所述红外传感器的位置关系。此外,红外传感器可以接收物体发出的红外线来获取物体的信息,还可以通过红外灯等装置发射红外线,这些红外线接触到物体后被吸收或反射,红外传感器也可以是通过接收这些反射的红外线来获取物体的信息。
图3B示意性示出了根据本公开实施例的通过红外传感器确定人眼与点阵光源的位置关系的示意图。如图3B所示,右边上方的多格方块为红外传感器,红外传感器将采集的图像发送给处理器后,处理器识别出图像中的人脸和人眼,然后得到人眼对应红外传感器中的哪些像素,如右边上方的多格方块中,填充有黑色标记的格子即为人眼对应的红外传感器的像素。需要说明的是,人眼对应的红外传感器的像素不是固定的,随着人眼与红外传感器之间的位置发生改变,人眼对应的红外传感器的像素也在不断改变。
在一个具体实施例中,所述通过红外传感器确定人眼与所述红外传感器的位置关系可以包括如下操作。首先,获得红外图像,然后,根据所述红外图像的不同位置之间的温差确定人眼的红外图像,接着,根据所述人眼的红外图像确定所述人眼与所述红外传感器的位置关系。
图3C示意性示出了根据本公开实施例的根据红外图像的温差确定人眼的红外图像的示意图。如图3C所示,右边的图像为摄像头采集的人脸图像以便理解真实的人脸,左边为红外传感器采集的人脸红外图像,可以明显看到,不同部位的温度不一样,这样可以从人脸红外图像中识别出人眼的位置,例如,根据所述红外图像的不同位置之间的温差确定人眼的红外图像。
在操作S302中,根据所述人眼与所述红外传感器的位置关系以及所述红外传感器与点阵光源的位置关系确定所述人眼与所述点阵光源的位置关系。
在本实施例中,在确定人眼与所述红外传感器的位置关系,即确定人眼对应的红外传感器的像素之后,由于所述红外传感器与点阵光源的位置关系是固定的,也就是说,所述红外传感器的各像素与所述点阵光源的各点光源的对应关系是固定的,这样就可以得到人眼与所述点阵光源的位置关系,即得到与人眼对应的所述点阵光源的点光源。这样就可以单独控制与人眼对应的所述点阵光源的点光源,例如,使得至少部分点光源无法向人眼投射光线,减少对人眼的伤害。需要说明的是,在进行人脸识别的过程中,由于人脸与红外传感器的位置关系可能是在不断变化的,例如,手机与人脸的位置在不停变换,使得人眼对应的红外传感器的像素也在不断改变,但是红外传感器和点阵光源的位置关系是固定的,因此,可以很容易的实现实时地根据人眼对应的红外传感器的像素得到人眼对应的点光源,因而,不论人脸或红外传感器(如固定在手机上的红外传感器)的位置怎么变,都可以控制对应人眼的点光源以保护眼睛。如图3B所示,右下方的多格方块为点阵光源,填充有黑色标记的两个格子即为人眼对应的点阵光源的两个点光源,可以单独控制这两个点光源。
本公开提供的用于点阵光源控制方法,在确定人眼与所述红外传感器的位置关系之后,利用所述红外传感器与点阵光源的位置关系即可实时地确定红外图像中的人眼对应所述点阵光源中的哪些点光源,进而确定现实中的人眼对应哪些点光源。
图3D示意性示出了根据本公开实施例的确定人眼与点阵光源的各点光源的对应关系的方法的另一种流程图。
在本实施例中,如图3D所示,所述确定人眼与点阵光源的各点光源的对应关系可以包括操作S303~S304。
在操作S303中,通过摄像头确定人眼与所述摄像头的位置关系。
在本实施例中,该摄像头包括镜头和图像传感器,该图像传感器可以为电荷耦合组件(Charge Coupled Device,简称CCD)、互补型金属氧化物半导体(简称CMOS)等,该图像传感器具有多个像素,每个像素接收到的可见光线共同构成可见光图像,该图像传感器可以将可见光图像以电信号的形式发送给处理器,由处理器对可见光图像进行图像处理,确定可见光图像中是否包含人脸,如果包含人脸,则进一步确定人眼的位置,以及图像传感器的哪些像素对应的人眼的图像,这样就可以确定人眼与所述摄像头的位置关系。此外,为了便于在黑暗环境下也可以采集人脸图像,或者提升各种环境下的图像采集效果,可以设置补光灯进行补光。
图3E示意性示出了根据本公开实施例的通过摄像头确定人眼与点阵光源的位置关系的示意图。如图3E所示,右边上方的多格方块为摄像头的图像传感器,图像传感器将采集的图像发送给处理器后,处理器识别出图像中的人脸和人眼,然后得到人眼对应图像外传感器中的哪些像素,如右边上方的多格方块中,填充有黑色标记的格子即为人眼对应的图像传感器的像素。需要说明的是,人眼对应的图像传感器的像素不是固定的,随着人眼与红外传感器之间的位置发生改变,人眼对应的图像传感器的像素也在不断改变。
在一个具体实施例中,所述通过摄像头确定人眼与所述摄像头的位置关系可以包括如下操作。首先,获得图像,然后,对所述图像进行图像识别得到人眼图像,接着,根据所述人眼图像确定所述人眼与所述摄像头的位置关系。其中,图像识别可以包括人脸检测、人脸图像预处理和人眼检测。例如,人脸检测方法可以是基于特征采用Adaboost学习算法,把一些比较弱的分类方法合在一起,组合出新的很强的分类方法。人脸检测过程中使用Adaboost算法挑选出一些最能代表人脸的矩形特征(弱分类器),按照加权投票的方式将弱分类器构造为一个强分类器,再将训练得到的若干强分类器串联组成一个级联结构的层叠分类器,有效地提高分类器的检测速度。对于人脸图像而言,其预处理过程主要包括人脸图像的光线补偿、灰度变换、直方图均衡化、归一化、几何校正、滤波以及锐化等。
在操作S304中,根据所述人眼与所述摄像头的位置关系以及所述摄像头与点阵光源的位置关系确定所述人眼与所述点阵光源的位置关系。
在本实施例中,在确定人眼与所述摄像头的位置关系,即确定人眼对应的图像传感器的像素之后,由于所述图像外传感器与点阵光源的位置关系是固定的,也就是说,所述图像传感器的各像素与所述点阵光源的各点光源的对应关系是固定的,这样就可以得到人眼与所述点阵光源的位置关系,即得到与人眼对应的所述点阵光源的点光源。这样就可以单独控制与人眼对应的所述点阵光源的点光源,例如,使得至少部分点光源无法向人眼投射光线,减少对人眼的伤害。需要说明的是,在进行人脸识别的过程中,由于人脸与图像传感器的位置关系可能是在不断变化的,使得人眼对应的图像传感器的像素也在不断改变,因此,人眼对应的点阵光源的点光源也在随之变化。如图3E所示,右下方的多格方块为点阵光源,填充有黑色标记的两个格子即为人眼对应的点阵光源的两个点光源,可以单独控制这两个点光源。
本公开提供的用于点阵光源控制方法,在确定人眼与所述摄像头的位置关系之后,利用所述摄像头与点阵光源的位置关系即可实时地确定摄像头采集的图像中的人眼图像对应所述点阵光源中的哪些点光源,进而确定现实中的人眼对应哪些点光源。
图3F示意性示出了根据本公开实施例的确定人眼与点阵光源的各点光源的对应关系的方法的另一种流程图。
在本实施例中,如图3F所示,所述确定人眼与点阵光源的各点光源的对应关系可以包括操作S305~操作S306。
在操作S305中,通过泛光器件确定人眼与所述泛光器件的位置关系。
在本实施例中,该泛光器件可以使用低功率的垂直共振腔面射型激光(VCSEL),发射出红外光投射在物体表面。物体表面反射的红外线会被红外传感器收集并发送给处理器进行处理,得到物体表面的三维信息(如深度信息),进而根据三维信息判断是否包含人脸及人眼,以及人眼对应所述泛光器件的哪些部位,这样就可以确定人眼与所述泛光器件的位置关系。
在一个具体实施例中,所述通过泛光器件确定人眼与所述泛光器件的位置关系可以包括如下操作,首先,所述泛光器件发射多束光线,所述光线的波长位于第一波长和第二波长之间,和/或所述光线的光强小于设定光强,然后,根据所述多束光线的反射光线确定人眼与所述泛光器件的位置关系。其中,所述光线的波长需要根据其对人体的安全程度而定,例如,可见光、750nm~1400纳米的红外光等,此外,还可以考虑采用对人体具有理疗作用的红外线,如1300nm的红外线,由于红外光不可见,不会给用户带来不适感,优选采用红外光波段。此外,由于人眼识别只需识别出人眼即可,对识别精度要求不高,因此,可以采用较低功率的VCSEL即可,如小于点阵光源的功率的泛光器件。所述泛光器件的光线的光强可以通过实验确定,以减小泛光器件投射的光线对人眼的伤害为基准。
图3G示意性示出了根据本公开实施例的通过泛光器件确定人眼与点阵光源的位置关系的示意图。
如图3G所示,右边上方的多格方块为泛光器件,泛光器件将光投射到物体表面后,红外传感器(右边中间的多格方块为红外传感器)采集被物体表面反射的红外光线并发送给处理器,处理器根据反射光信息识别出人脸和人眼,然后得到人眼对应红外传感器中的哪些像素,然后根据红外传感器和泛光器件的位置关系(位置关系固定)得到人眼对应泛光器件中的哪些部位,如右边上方的多格方块中,填充有黑色标记的格子即为人眼对应的泛光器件中的部位。需要说明的是,人眼对应的泛光器件的部位不是固定的,随着人眼与泛光器件之间的位置发生改变,人眼对应的泛光器件的部位也在不断改变。
图3H示意性示出了根据本公开实施例的利用泛光器件得到的人脸三维图形示意图。如图3H所示,人脸图像外部的形状即为处理器根据反射光信息判断物体表面的形状为人脸,进而还可以得到人眼的大致位置。
在操作S306中,根据所述人眼与所述泛光器件的位置关系以及所述泛光器件与点阵光源的位置关系确定人眼与所述点阵光源的位置关系。
在本实施例中,在确定人眼与所述泛光器件的位置关系,即确定人眼对应的泛光器件的部位之后,由于所泛光器件与点阵光源的位置关系是固定的,也就是说,所述泛光器件的各部位与所述点阵光源的各点光源的对应关系是固定的,这样就可以得到人眼与所述点阵光源的位置关系,即得到与人眼对应的所述点阵光源的点光源。如图3G所示,右下方的多格方块为点阵光源,填充有黑色标记的两个格子即为人眼对应的点阵光源的两个点光源,可以单独控制这两个点光源。
本公开提供的用于点阵光源控制方法,通过点阵光源确定人眼对应所述点阵光源中的哪些点光源,其中,泛光器件可以使用低功率的垂直共振腔面射型激光,发射出非结构(Non-structured)的红外光投射在物体表面,以便于根据反射光判断人眼的位置,由于只需要确定被投射的物体是否为人脸,以及确定人眼的大致位置,即对识别精度要求不高,因此,可以采用具有较低光功率和对人眼伤害小的光波段以降低该泛光器件对人眼的伤害。
图3I示意性示出了根据本公开实施例的通过液晶开关阵列控制点阵光源的方法的一种流程图。
在本实施例中,所述点阵光源包括光源、光学组件和液晶开关阵列,所述光学组件将所述光源分为第一指定个数的点光源,所述液晶开关阵列设置在所述光学组件之上,且所述液晶开关阵列的一个液晶开关对应一个点光源或者多个相邻的点光源。其中,所述液晶开关阵列可以为单独设置在所述点阵光源之上的部件,当所述点阵光源所在设备上存在液晶显示单元、且所述点阵光源位于所述液晶显示单元处时,可以利用所述液晶显示单元上的液晶面板作为所述液晶开关阵列。
如图3I所示,所述根据所述人眼与点阵光源的各点光源的对应关系控制所述点阵光源可以包括操作S307~操作S308。
在操作S307中,根据所述人眼与点阵光源的各点光源的对应关系得到所述人眼与所述液晶开关阵列的每个液晶开关的对应关系。
在本实施例中,由于所述光学组件将所述光源分为数个点光源,因此,不能通过直接控制所述点阵光源来分别控制控制各点光源,只能分别控制各点光源的光路的通断,具体地,可以通过液晶开关来控制各点光源的光路的通断。此外,由于所述点阵光源与所述液晶开关阵列的位置关系固定,且所述液晶开关阵列的一个液晶开关对应一个点光源或者多个相邻的点光源,因此,可以根据与人眼对应的点光源来确定与人眼对应的液晶开关,即得到所述人眼与所述液晶开关阵列的每个液晶开关的对应关系。所述光源可以为高功率的垂直共振腔面射型激光发射红外光激光,所述光学组件可以包括光学器件和绕射光学组件等,例如,红外激光经由晶圆级光学(Wafer Level Optics,简称WLO)、绕射光学组件(Diffractive Optical Elements,简称DOE)等结构,产生数百、数千甚至数万个“结构”(Structured)光点经由所述液晶开关阵列投射到物体表面,例如使用者的脸部。
在操作S308中,根据所述人眼与所述液晶开关阵列的每个液晶开关的对应关系控制所述液晶开关阵列,使得至少部分与所述人眼对应的点光源被液晶开关遮挡。
图3J示意性示出了根据本公开实施例的液晶开关阵列的一种示意图。如图3J所示,所述液晶开关阵列设置在所述点阵光源之上,所述液晶开关阵列3000可以包括透明基板3001、薄膜晶体管阵列3002、下偏振片3003、液晶取向层3004、液晶层3005、上偏振片3006等。其中,薄膜晶体管阵列3002通过半导体工艺如沉积、金属化、光刻、刻蚀等制备在透明基板3001上,然后在薄膜晶体管阵列3002之上黏贴下偏振片3003和液晶取向层3004,接着涂覆液晶层3005,然后覆盖上偏振片 3006,之后将液晶开关阵列3000设置在所述点阵光源3010之上,所述液晶开关阵列3000可以与所述点阵光源3010相接触或者相分离。图3J 中的黑色方块表示液晶在电压的作用下进行旋转后不透光,此时,点阵光源3010发出的入射光中,经由黑色方块的入射光将无法穿过液晶层,使得相应位置没有出射光。需要说明的是,该液晶开关阵列的各液晶开关可以同时进行控制,也可以分时控制,例如,首先打开远离人眼对应的液晶开关,然后逐渐打开靠近人眼对应的液晶开关,实现从远至近依序打开点光源的功能,进一步减小光线入射到人眼的可能性。
在一种用于手机进行人脸识别场景中,当有物体靠近手机时,接近传感器(Proximity sensor)发出信号启动泛光器件,泛光器件发射出红外光投射在物体表面,由红外传感器接收这些反射的红外光信息,传送到手机的处理器,处理器经过运算判断物体为脸部且得到人眼的大概位置以及对应的点光源后,再启动点阵光源,产生多个光点投射到所述液晶开关阵列,处理器控制人眼对应的点光源相应的至少一个液晶开关关闭以阻止点光源投射的光线入射到人眼中。穿透所述液晶开关阵列的光点所形成的阵列在人脸表面反射到红外传感器,计算出脸部不同位置相对红外传感器的距离(深度信息),再根据这些脸部的深度信息计算比对脸部特征,辨识是否为预存的用户本人。
本公开提供的点阵光源控制方法,可以通过液晶开关阵列对光路的控制实现对单光源的多点分别控制。
图3K示意性示出了根据本公开实施例的通过开关阵列控制点阵光源的方法的一种流程图。
在本实施例中,所述点阵光源包括第二指定个数的独立点光源和开关阵列,所述开关阵列的一个开关用于开启或关闭一个或多个独立点光源。其中,所述开关阵列可以集成在所述点阵光源中,如采用有机发光二极管(OLED)显示屏的开关阵列集成方式。所述独立点光源可以为单个电致发光的光源,如VCSEL等。需要说明的是,该开关阵列的各开关可以同时进行控制,也可以分时控制,例如,首先打开远离人眼对应的开关,然后逐渐打开靠近人眼对应的开关,实现从远至近依序打开点光源的功能,进一步减小光线入射到人眼的可能性。
如图3K所示,所述根据所述人眼与点阵光源的各点光源的对应关系控制所述点阵光源可以包括操作S309~S310。
在操作S309中,根据所述人眼与点阵光源的各独立点光源的对应关系得到所述人眼与所述开关阵列的每个开关的对应关系。
在操作S310中,根据所述人眼与所述开关阵列的每个开关的对应关系控制所述开关阵列,使得至少部分与人眼对应的独立点光源被关闭。
在本实施例中,通过开关阵列中的各开关分别控制相对应的独立点光源的开启或关闭,来实现减少所述点阵光源对所述人眼的照射。
图4示意性示出了根据本公开实施例的用于点阵光源控制设备的框图。如图4所示,用于点阵光源控制设备400包括关系确定模块410 和光源控制模块420。该用于点阵光源控制设备400可以执行上面描述的方法,以控制所述点阵光源。
具体地,所述关系确定模块410用于确定人眼与点阵光源的各点光源的对应关系,所述光源控制模块420用于根据所述人眼与点阵光源的各点光源的对应关系控制所述点阵光源。参考图2B所示,左上方的图代表点阵光源要投射的人脸,右上方的图代表点阵光源,如最外圈的方框,该点阵光源包括多个点光源,如各小方框,而位于下方的图中的浅色长方形框内的各小方框则代表与人眼相对应的点光源。具体地,可以借助传感器来确定人眼与点阵光源的各点光源的对应关系,传感器包括但不限于图像传感器、红外传感器等,如首先确定人眼与所述传感器中各区域的对应关系,然后根据传感器中各区域与点阵光源中各点光源的对应关系,就可以实时的确定人眼与所述点阵光源中各点光源的对应关系。
在一个实施例中,所述关系确定模块410可以包括第一确定单元和第二确定单元,其中,所述第一确定单元用于通过红外传感器确定人眼与所述红外传感器的位置关系,所述第二确定单元用于根据所述人眼与所述红外传感器的位置关系以及所述红外传感器与点阵光源的位置关系确定所述人眼与所述点阵光源的位置关系。红外传感器包括多个像素,每个像素接收到的红外线共同构成红外图像,该红外传感器可以将红外图像以电信号的形式发送给处理器,由处理器对红外图像进行图像处理,确定红外图像中是否包含人脸,如果包含人脸,则进一步确定人眼的位置,以及红外传感器的哪些像素对应的人眼的红外图像,这样就可以确定人眼与所述红外传感器的位置关系。
其中,所述第一确定单元可以包括第一获取子单元、第一人眼确定子单元和第一关系确定子单元。所述第一获取子单元用于获得红外图像,所述第一人眼确定子单元用于根据所述红外图像的不同位置之间的温差确定人眼的红外图像,所述第一关系确定子单元用于根据所述人眼的红外图像确定所述人眼与所述红外传感器的位置关系。
在另一个实施例中,所述关系确定模块410还可以包括第三确定单元和第四确定单元,其中,所述第三确定单元用于通过摄像头确定人眼与所述摄像头的位置关系,所述第四确定单元用于根据所述人眼与所述摄像头的位置关系以及所述摄像头与点阵光源的位置关系确定所述人眼与所述点阵光源的位置关系。摄像头包括镜头和图像传感器,该图像传感器可以为电荷耦合组件(Charge Coupled Device,简称CCD)、互补型金属氧化物半导体(简称CMOS)等,该图像传感器具有多个像素,每个像素接收到的可见光线共同构成可见光图像,该图像传感器可以将可见光图像以电信号的形式发送给处理器,由处理器对可见光图像进行图像处理,确定可见光图像中是否包含人脸,如果包含人脸,则进一步确定人眼的位置,以及图像传感器的哪些像素对应的人眼的图像,这样就可以确定人眼与所述摄像头的位置关系。
其中,所述第三确定单元可以包括第三获取子单元、第三人眼确定子单元和第三关系确定子单元。所述第三获取子单元用于获得图像,所述第三人眼确定子单元用于对所述图像进行图像识别得到人眼图像,所述第三关系确定子单元用于根据所述人眼图像确定所述人眼与所述摄像头的位置关系。图像识别可以包括人脸检测、人脸图像预处理和人眼检测等。例如,人脸检测方法可以是基于特征采用Adaboost学习算法, Adaboost算法是一种用来分类的方法,它把一些比较弱的分类方法合在一起,组合出新的很强的分类方法。人脸检测过程中使用Adaboost算法挑选出一些最能代表人脸的矩形特征(弱分类器),按照加权投票的方式将弱分类器构造为一个强分类器,再将训练得到的若干强分类器串联组成一个级联结构的层叠分类器,有效地提高分类器的检测速度。对于人脸图像而言,其预处理过程主要包括人脸图像的光线补偿、灰度变换、直方图均衡化、归一化、几何校正、滤波以及锐化等。
在另一个实施例中,所述关系确定模块410还可以包括第五确定单元和第六确定单元,其中,所述第五确定单元用于通过泛光器件确定人眼与所述泛光器件的位置关系,以及所述第六确定单元用于根据所述人眼与所述泛光器件的位置关系以及所述泛光器件与点阵光源的位置关系确定人眼与所述点阵光源的位置关系。泛光器件可以使用低功率的垂直共振腔面射型激光(VCSEL),发射出红外光投射在物体表面。物体表面反射的红外线会被红外传感器收集并发送给处理器进行处理,得到物体表面的三维信息(如深度信息),进而根据三维信息判断是否包含人脸及人眼,以及人眼对应所述泛光器件的哪些点光源,这样就可以确定人眼与所述泛光器件的位置关系。
其中,所述第五确定单元可以包括驱动子单元和第五关系确定子单元。所述驱动子单元用于驱动所述泛光器件发射多束光线,所述光线的波长位于第一波长和第二波长之间,和/或所述光线的光强小于设定光强,所述第五关系确定子单元用于根据所述多束光线的反射光线确定人眼与所述泛光器件的位置关系。所述光线的波长需要根据对人体的安全程度而定,例如,可见光、750nm~1400纳米的红外光等,此外,还可以考虑采用对人体具有理疗作用的红外线,如1300nm的红外线,由于红外光不可见,不会给用户带来不适感,优选采用红外波段。此外,由于人眼识别只需从物体表面识别出人眼即可,对识别精度要求不是很高,因此,可以采用较低功率的VCSEL即可,如小于点阵光源的功率的泛光器件。所述泛光器件的光线的光强可以通过实验确定。
在另一个实施例中,所述点阵光源包括光源、光学组件和液晶开关阵列,所述光学组件将所述光源分为第一指定个数的点光源,所述液晶开关阵列设置在所述光学组件之上,且所述液晶开关阵列的一个液晶开关对应一个点光源或者多个相邻的点光源,相应地,所述光源控制模块 420包括第一获取单元和第一控制单元,其中,所述第一获取单元用于根据所述人眼与点阵光源的各点光源的对应关系得到所述人眼与所述液晶开关阵列的每个液晶开关的对应关系,所述第一控制单元用于根据所述人眼与所述液晶开关阵列的每个液晶开关的对应关系控制所述液晶开关阵列,使得至少部分与所述人眼对应的点光源被液晶开关遮挡。
其中,所述液晶开关阵列可以为单独设置在所述点阵光源之上的部件,当所述点阵光源所在设备上存在液晶显示单元、且所述点阵光源位于所述液晶显示单元处时,可以利用所述液晶显示单元上的液晶面板作为所述液晶开关阵列。所述光源可以为高功率的垂直共振腔面射型激光发射红外光激光,所述光学组件可以包括光学器件和绕射光学组件等,例如,红外激光经由晶圆级光学(Wafer Level Optics,简称WLO)、绕射光学组件(Diffractive Optical Elements,简称DOE)等结构,产生数百、数千甚至数万个“结构”(Structured)光点经由所述液晶开关阵列投射到物体表面,例如使用者的脸部。参考图3J所示,所述液晶开关阵列设置在所述点阵光源之上,所述液晶开关阵列3000可以包括透明基板3001、薄膜晶体管阵列3002、下偏振片3003、液晶取向层3004、液晶层3005、上偏振片3006等。其中,薄膜晶体管阵列3002通过半导体工艺如沉积、金属化、光刻、刻蚀等制备在透明基板3001上,然后在薄膜晶体管阵列3002之上黏贴下偏振片3003和液晶取向层3004,接着涂覆液晶层3005,然后覆盖上偏振片3006,之后将液晶开关阵列3000 设置在所述点阵光源3010之上,所述液晶开关阵列3000可以与所述点阵光源3010相接触或者相分离。
在又一个实施例中,所述点阵光源包括第二指定个数的独立点光源和开关阵列,所述开关阵列的一个开关用于开启或关闭一个或多个独立点光源,相应地,所述光源控制模块420包括第二获取单元和第二控制单元,其中,所述第二获取单元用于根据所述人眼与点阵光源的各独立点光源的对应关系得到所述人眼与所述开关阵列的每个开关的对应关系,所述第二控制单元用于根据所述人眼与所述开关阵列的每个开关的对应关系控制所述开关阵列,使得至少部分与人眼对应的独立点光源被关闭。
根据本公开的实施例,用于点阵光源控制设备可以控制点阵光源以减少所述点阵光源对所述人眼的照射,可以参见上面的描述,这里不再重复。
根据本公开的实施例的模块、子模块、单元、子单元中的任意多个、或其中任意多个的至少部分功能可以在一个模块中实现。根据本公开实施例的模块、子模块、单元、子单元中的任意一个或多个可以被拆分成多个模块来实现。根据本公开实施例的模块、子模块、单元、子单元中的任意一个或多个可以至少被部分地实现为硬件电路,例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC),或可以通过对电路进行集成或封装的任何其他的合理方式的硬件或固件来实现,或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实现。或者,根据本公开实施例的模块、子模块、单元、子单元中的一个或多个可以至少被部分地实现为计算机程序模块,当该计算机程序模块被运行时,可以执行相应的功能。
例如,关系确定模块410和光源控制模块420中的任意多个可以合并在一个模块中实现,或者其中的任意一个模块可以被拆分成多个模块。或者,这些模块中的一个或多个模块的至少部分功能可以与其他模块的至少部分功能相结合,并在一个模块中实现。根据本公开的实施例,关系确定模块410和光源控制模块420中的至少一个可以至少被部分地实现为硬件电路,例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC),或可以通过对电路进行集成或封装的任何其他的合理方式等硬件或固件来实现,或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实现。或者,关系确定模块410和光源控制模块420 中的至少一个可以至少被部分地实现为计算机程序模块,当该计算机程序模块被运行时,可以执行相应的功能。
图5示意性示出了根据本公开另一实施例的电子设备的框图。图 5示出的电子设备仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图5所示,所述电子设备包括一个或多个处理器510和计算机可读存储介质520。该电子设备可以执行根据本公开实施例的方法。此外,所述电子设备还可以包括点阵光源、传感器和开关总成,其中,传感器用于获得人眼信息,开关总成包括多个开关,所述多个开关中的每个开关对应所述点阵光源中的一个或者多个点光源。
具体地,处理器510例如可以包括通用微处理器、指令集处理器和/或相关芯片组和/或专用微处理器(例如,专用集成电路(ASIC)),等等。处理器510还可以包括用于缓存用途的板载存储器。处理器510 可以是用于执行根据本公开实施例的方法流程的不同动作的单一处理单元或者是多个处理单元。
计算机可读存储介质520,例如可以是能够包含、存储、传送、传播或传输指令的任意介质。例如,可读存储介质可以包括但不限于电、磁、光、电磁、红外或半导体系统、装置、器件或传播介质。可读存储介质的具体示例包括:磁存储装置,如磁带或硬盘(HDD);光存储装置,如光盘(CD-ROM);存储器,如随机存取存储器(RAM) 或闪存;和/或有线/无线通信链路。
计算机可读存储介质520可以包括程序521,该程序521可以包括代码/计算机可执行指令,其在由处理器510执行时使得处理器510 执行根据本公开实施例的方法或其任何变形。
程序521可被配置为具有例如包括计算机程序模块的计算机程序代码。例如,在示例实施例中,程序521中的代码可以包括一个或多个程序模块,例如包括程序模块521A、程序模块521B、……。应当注意,程序模块的划分方式和个数并不是固定的,本领域技术人员可以根据实际情况使用合适的程序模块或程序模块组合,当这些程序模块组合被处理器510执行时,使得处理器510可以执行根据本公开实施例的方法或其任何变形。
根据本公开的实施例,处理器510可以与计算机可读存储介质520 进行交互,来执行根据本公开实施例的方法或其任何变形。
根据本公开的实施例,关系确定模块410和光源控制模块420中的至少一个可以实现为参考图5描述的程序模块,其在被处理器510 执行时,可以实现上面描述的相应操作。
本公开还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的设备/装置/系统中所包含的;也可以是单独存在,而未装配入该设备/装置/系统中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被执行时,实现如上所述的方法。
根据本公开的实施例,计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、有线、光缆、射频信号等等,或者上述的任意合适的组合。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
本领域技术人员可以理解,本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合或/或结合,即使这样的组合或结合没有明确记载于本公开中。特别地,在不脱离本公开精神和教导的情况下,本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合。所有这些组合和/或结合均落入本公开的范围。
尽管已经参照本公开的特定示例性实施例示出并描述了本公开,但是本领域技术人员应该理解,在不背离所附权利要求及其等同物限定的本公开的精神和范围的情况下,可以对本公开进行形式和细节上的多种改变。因此,本公开的范围不应该限于上述实施例,而是应该不仅由所附权利要求来进行确定,还由所附权利要求的等同物来进行限定。

Claims (10)

1.一种用于点阵光源控制方法,包括:
确定人眼与点阵光源的各点光源的对应关系;以及
根据所述人眼与点阵光源的各点光源的对应关系控制所述点阵光源。
2.根据权利要求1所述的方法,其中,所述确定人眼与点阵光源的各点光源的对应关系包括:
通过红外传感器确定人眼与所述红外传感器的位置关系;
根据所述人眼与所述红外传感器的位置关系以及所述红外传感器与点阵光源的位置关系确定所述人眼与所述点阵光源的位置关系。
3.根据权利要求2所述的方法,其中,所述通过红外传感器确定人眼与所述红外传感器的位置关系包括:
获得红外图像;
根据所述红外图像的不同位置之间的温差确定人眼的红外图像;
根据所述人眼的红外图像确定所述人眼与所述红外传感器的位置关系。
4.根据权利要求1所述的方法,其中,所述确定人眼与点阵光源的各点光源的对应关系包括:
通过摄像头确定人眼与所述摄像头的位置关系;
根据所述人眼与所述摄像头的位置关系以及所述摄像头与点阵光源的位置关系确定所述人眼与所述点阵光源的位置关系。
5.根据权利要求4所述的方法,其中,所述通过摄像头确定人眼与所述摄像头的位置关系包括:
获得图像;
对所述图像进行图像识别得到人眼图像;
根据所述人眼图像确定所述人眼与所述摄像头的位置关系。
6.根据权利要求1所述的方法,其中,所述确定人眼与点阵光源的各点光源的对应关系包括:
通过泛光器件确定人眼与所述泛光器件的位置关系;
根据所述人眼与所述泛光器件的位置关系以及所述泛光器件与点阵光源的位置关系确定人眼与所述点阵光源的位置关系。
7.根据权利要求6所述的方法,其中,所述通过泛光器件确定人眼与所述泛光器件的位置关系包括:
所述泛光器件发射多束光线,所述光线的波长位于第一波长和第二波长之间,和/或所述光线的光强小于设定光强;
根据所述多束光线的反射光线确定人眼与所述泛光器件的位置关系。
8.根据权利要求1所述的方法,其中,
所述点阵光源包括光源、光学组件和液晶开关阵列,所述光学组件将所述光源分为第一指定个数的点光源,所述液晶开关阵列设置在所述光学组件之上,且所述液晶开关阵列的一个液晶开关对应一个点光源或者多个相邻的点光源;
所述根据所述人眼与点阵光源的各点光源的对应关系控制所述点阵光源包括:
根据所述人眼与点阵光源的各点光源的对应关系得到所述人眼与所述液晶开关阵列的每个液晶开关的对应关系;
根据所述人眼与所述液晶开关阵列的每个液晶开关的对应关系控制所述液晶开关阵列,使得至少部分与所述人眼对应的点光源被液晶开关遮挡。
9.根据权利要求1所述的方法,其中,
所述点阵光源包括第二指定个数的独立点光源和开关阵列,所述开关阵列的一个开关用于开启或关闭一个或多个独立点光源;
所述根据所述人眼与点阵光源的各点光源的对应关系控制所述点阵光源包括:
根据所述人眼与点阵光源的各独立点光源的对应关系得到所述人眼与所述开关阵列的每个开关的对应关系;
根据所述人眼与所述开关阵列的每个开关的对应关系控制所述开关阵列,使得至少部分与人眼对应的独立点光源被关闭。
10.一种电子设备,包括:
点阵光源;
传感器,用于获得人眼信息;
开关总成,包括多个开关,所述多个开关中的每个开关对应所述点阵光源中的一个或者多个点光源;
一个或多个处理器;以及
可读存储介质,用于存储一个或多个计算机程序,所述计算机程序在被所述处理器执行时,实现根据权利要求1~9中任一项所述的方法。
CN201810941443.9A 2018-08-17 2018-08-17 点阵光源控制方法、设备和电子设备 Pending CN109145811A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810941443.9A CN109145811A (zh) 2018-08-17 2018-08-17 点阵光源控制方法、设备和电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810941443.9A CN109145811A (zh) 2018-08-17 2018-08-17 点阵光源控制方法、设备和电子设备

Publications (1)

Publication Number Publication Date
CN109145811A true CN109145811A (zh) 2019-01-04

Family

ID=64789870

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810941443.9A Pending CN109145811A (zh) 2018-08-17 2018-08-17 点阵光源控制方法、设备和电子设备

Country Status (1)

Country Link
CN (1) CN109145811A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022063014A1 (zh) * 2020-09-27 2022-03-31 展讯通信(上海)有限公司 多光源摄像头设备的光源控制方法及装置、介质、终端

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101101379A (zh) * 2006-07-05 2008-01-09 株式会社Ntt都科摩 图像提示装置及图像提示方法
CN101825697A (zh) * 2009-03-06 2010-09-08 财团法人工业技术研究院 基于光线强度的定位方法及系统
CN105844240A (zh) * 2016-03-23 2016-08-10 深圳云天励飞技术有限公司 一种红外测温系统中的人脸检测方法及装置
CN106440245A (zh) * 2016-10-25 2017-02-22 广东美的制冷设备有限公司 一种人体位置获取方法和装置
CN108227361A (zh) * 2018-03-12 2018-06-29 广东欧珀移动通信有限公司 控制方法、控制装置、深度相机和电子装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101101379A (zh) * 2006-07-05 2008-01-09 株式会社Ntt都科摩 图像提示装置及图像提示方法
CN101825697A (zh) * 2009-03-06 2010-09-08 财团法人工业技术研究院 基于光线强度的定位方法及系统
CN105844240A (zh) * 2016-03-23 2016-08-10 深圳云天励飞技术有限公司 一种红外测温系统中的人脸检测方法及装置
CN106440245A (zh) * 2016-10-25 2017-02-22 广东美的制冷设备有限公司 一种人体位置获取方法和装置
CN108227361A (zh) * 2018-03-12 2018-06-29 广东欧珀移动通信有限公司 控制方法、控制装置、深度相机和电子装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
权怡: "《数字电视技术与应用》", 31 January 2017 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022063014A1 (zh) * 2020-09-27 2022-03-31 展讯通信(上海)有限公司 多光源摄像头设备的光源控制方法及装置、介质、终端

Similar Documents

Publication Publication Date Title
JP6632979B2 (ja) 拡張現実感のための方法とシステム
CN105809073B (zh) 用于保护在移动设备上显示的内容的方法和系统
CN103792661B (zh) 用于头戴式显示器的集成双传感光学结构
US20210209364A1 (en) Ar device and method for controlling the same
CN102955255B (zh) 集成眼睛追踪和显示系统
CN104956252B (zh) 用于近眼显示设备的外围显示器
US20170287228A1 (en) Head mounted display device, control method thereof, and computer program
CN110870072A (zh) 包括用于阻挡多个光接收传感器之间的干扰的遮光构件的图像传感器,以及包含其的电子设备
CN110325891A (zh) 用于操纵来自环境光源的光的系统和方法
CN109416572A (zh) 启用眼睛跟踪的可穿戴设备
CN106529512A (zh) 活体人脸验证方法及装置
CN107408201A (zh) 具有同时的结构化和非结构化照明的数字相机单元
CN104125379A (zh) 摄像装置
CN110476148A (zh) 用于提供多视图内容的显示系统和方法
US20220382064A1 (en) Metalens for use in an eye-tracking system of a mixed-reality display device
US11665334B2 (en) Rolling shutter camera pipeline exposure timestamp error determination
CN102783123A (zh) 便携式电子设备
CN108388339B (zh) 显示方法、装置及移动终端
US20160189579A1 (en) Display Apparatus And Electronic Device
CN110323315A (zh) 微型led中表面重组损失的减少
CN109285472A (zh) 电子设备
CN104113737B (zh) 防止监控视频被替换的系统及其方法
CN109145811A (zh) 点阵光源控制方法、设备和电子设备
WO2022169649A1 (en) High-resolution time-of-flight depth imaging
WO2019153970A1 (zh) 头戴显示装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination