CN114445903A - 熄屏解锁方法及装置 - Google Patents
熄屏解锁方法及装置 Download PDFInfo
- Publication number
- CN114445903A CN114445903A CN202011205846.0A CN202011205846A CN114445903A CN 114445903 A CN114445903 A CN 114445903A CN 202011205846 A CN202011205846 A CN 202011205846A CN 114445903 A CN114445903 A CN 114445903A
- Authority
- CN
- China
- Prior art keywords
- screen
- eye
- unlocking
- eye movement
- movement track
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
- G06F21/31—User authentication
- G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
Landscapes
- Engineering & Computer Science (AREA)
- Computer Security & Cryptography (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开了熄屏解锁方法及装置,以在熄屏状态完成解锁,更有利于隐私保护。该方法应用于具有屏幕且支持眼动追踪功能的设备中,包括:在熄屏状态下,持续检测是否满足眼球追踪功能的唤醒条件;在满足所述唤醒条件时,开启所述眼球追踪功能;在熄屏状态下,使用所述眼球追踪功能追踪得到眼动轨迹;追踪得到的眼动轨迹为目标眼动轨迹;若目标眼动轨迹与预设的眼动轨迹一致,对屏幕执行解锁操作。本发明实施例整个解锁过程都是在熄屏状态下完成的:在熄屏状态下持续检测是否满足眼球追踪功能的唤醒条件,在满足时开启该项功能。开启后,仍在熄屏状态下进行眼球追踪得到眼动轨迹,在得到的眼动轨迹与预设的眼动轨迹一致时,执行解锁操作。
Description
技术领域
本发明涉及眼球追踪技术领域,特别是涉及熄屏解锁方法及装置。
背景技术
目前基于相机进行眼动追踪的技术已经非常成熟,可应用在电子设备屏幕解锁方面。
利用眼动追踪功能进行电子设备屏幕解锁的现有方式是:使用者手动将屏幕点亮,然后根据事先确定好的顺序注视屏幕的固定位置进行解锁。
上述方式需要事先将屏幕手动点亮,然后再注视屏幕上的可视区域进行解锁,解锁过程屏幕是亮的,易泄露解锁信息,并不利于隐私保护。
发明内容
针对于上述问题,本发明提供熄屏解锁方法及装置,以在熄屏状态完成解锁,更有利于隐私保护。
为了实现上述目的,本发明提供了如下技术方案:
一种熄屏解锁方法,应用于具有屏幕且支持眼动追踪功能的设备中,包括:
在熄屏状态下,持续检测是否满足眼球追踪功能的唤醒条件;
在满足所述唤醒条件时,开启所述眼球追踪功能;
在熄屏状态下,使用所述眼球追踪功能追踪得到眼动轨迹;追踪得到的眼动轨迹为目标眼动轨迹;
若所述目标眼动轨迹与预设的眼动轨迹一致,对屏幕执行解锁操作。
可选的,所述目标眼动轨迹包括:在预设的N个定位点中,依次被注视的定位点。
可选的,所述N个定位点包括:熄屏显示的光点阵列中的光点;或者,所述N个定位点包括:屏幕的顶点以及每条边线的中点。
可选的,所述设备包括:红外光源和红外相机;所述预设的眼动轨迹是在解锁信息录入流程中被录入的;若所述N个定位点包括屏幕的顶点以及每条边线的中点,所述解锁信息录入流程包括:对所述红外相机进行位置标定;执行校准流程,得到用户的个人校准系数;提示用户注视预设位置;在识别出用户注视预设位置后,基于所述红外光源和所述红外相机采集用户的眼部图像;使用眼部图像和所述个人校准系数识别出眼睛的注视轴线和注视位置;记录所述注视位置在所述N个定位点中所对应的定位点;在接收到停止命令后,终止所述解锁信息录入流程。
可选的,所述设备包括:红外光源和红外相机;所述预设的眼动轨迹是在解锁信息录入流程中被录入的;若所述N个定位点包括光点阵列中的光点,所述解锁信息录入流程包括:对所述红外相机进行位置标定;执行校准流程,得到用户的个人校准系数;提示用户注视预设位置;在识别出用户注视预设位置后,在屏幕上显示出所述光点阵列;基于所述红外光源和所述红外相机采集用户的眼部图像;使用眼部图像和所述个人校准系数识别出眼睛的注视轴线和注视位置;记录所述注视位置在所述光点阵列中所对应的光点;在接收到停止命令后,终止所述解锁信息录入流程。
可选的,在使用所述眼球追踪功能追踪得到眼动轨迹之前,还包括:获取IPD瞳距信息;将获取的IPD瞳距信息与预设的IPD瞳距信息进行匹配;若匹配失败,判定解锁失败;所述使用所述眼球追踪功能追踪得到眼动轨迹的步骤,是在匹配成功后执行的。
可选的,预设的IPD信息是在解锁信息录入流程中被录入的。
可选的,所述唤醒条件包括:检测到屏幕前方存在移动物体,以及,检测到物体与屏幕的距离满足预设条件中的至少一种。
可选的,所述设备包括:红外光源和红外相机;所述使用所述眼球追踪功能追踪得到眼动轨迹包括:基于所述红外光源和所述红外相机采集用户的眼部图像;使用眼部图像识别出眼睛的注视轴线和注视位置;确定所述注视位置在所述N个定位点中所对应的定位点,作为被注视的定位点。
一种熄屏解锁装置,应用于具有屏幕且支持眼动追踪功能的设备中,包括:
检测单元,用于:
在熄屏状态下,持续检测是否满足眼球追踪功能的唤醒条件;
在满足所述唤醒条件时,开启所述眼球追踪功能;
解锁单元,用于:
在熄屏状态下,使用所述眼球追踪功能追踪得到眼动轨迹;追踪得到的眼动轨迹为目标眼动轨迹;
若所述目标眼动轨迹与预设的眼动轨迹一致,对屏幕执行解锁操作。
一种熄屏解锁设备,包括:处理器、存储器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现如上述任一项所述熄屏解锁方法的步骤。
一种存储介质,所述存储介质中存储有计算机可执行指令,所述计算机可执行指令被处理器加载并执行时,实现如上任一项所述熄屏解锁方法步骤。
相较于现有技术,本发明实施例在熄屏状态下持续检测是否满足眼球追踪功能的唤醒条件,在满足时,开启该项功能。开启后,仍在熄屏状态下进行眼球追踪得到眼动轨迹,在得到的眼动轨迹与预设的眼动轨迹一致时,执行解锁操作。本发明实施例的整个解锁过程都是在熄屏状态下完成的,不容易泄露解锁信息,从而安全性和隐密性更高,更有利于隐私保护。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本发明实施例提供的熄屏解锁方法的一种示例性流程;
图2为本发明实施例提供的定位点的一种示例性排列方式;
图3为本发明实施例提供的定位点的另一种示例性排列方式;
图4a为本发明实施例提供的熄屏解锁方法的另一种示例性流程;
图4b为本发明实施例提供的熄屏解锁方法的又一种示例性流程;
图5a为本发明实施例提供的定位点又一示例性分布;
图5b为本发明实施例提供的定位点又一示例性分布;
图6为本发明实施例提供的基于图5a所示定位点,进行校正和输入解锁使用的眼动轨迹的一种示例性流程;
图7为本发明实施例提供的基于图5b所示定位点,进行校正和输入解锁使用的眼动轨迹的一种示例性流程;
图8为本发明实施例提供的熄屏解锁装置的一种示例性结构;
图9为本发明实施例提供的熄屏解锁装置的一种示例性结构。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明的说明书和权利要求书及上述附图中的术语“第一”和“第二”等是用于区别不同的对象,而不是用于描述特定的顺序。此外术语“包括”和“具有”以及他们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有设定于已列出的步骤或单元,而是可包括没有列出的步骤或单元。
在本发明实施例中提供的熄屏解锁方法和熄屏解锁装置应用于具有屏幕且支持眼动追踪功能的设备(简称为终端设备)中,其示例性的包括但不限于:智能手机、平板、电脑等。
眼球追踪也可以称为视线追踪,是通过测量眼睛运动情况来估计眼睛的视线和/或注视点的技术。
终端设备可采用一个或多个眼球追踪算法进行眼球追踪。其中,眼动追踪算法用于计算注视信息。具体的,眼动追踪算法可计算视线方向和眼球位置,根据视线方向和眼球位置得到屏幕上的注视点坐标。
与眼球追踪算法相配合使用的硬件设备示例性的可包括相机、光源等,硬件设备同样也部署于终端设备上,硬件的使用服务于眼动追踪算法。
其中,相机包括用于拍摄眼图的相机,例如环境相机、红外相机(940nm),此外也可包括深度相机。
也可将一套眼动追踪算法与相配置的硬件设备看作一个眼球追踪系统。
下面将基于以上描述中本发明涉及的共性方面,对本发明实施例做进一步详细说明。
实施例一
在本申请实施例一中提供一种熄屏解锁方法以在熄屏状态完成解锁。请参见图1,该熄屏解锁方法包括:
S1:在熄屏状态下,持续检测是否满足眼球追踪功能的唤醒条件;
步骤S1由熄屏解锁装置执行。智能手机等电子设备在熄屏(俗称黑屏)状态时,眼动追踪功能不会实时开启,但会持续检测是否满足眼球追踪功能的唤醒条件。
S2:在满足唤醒条件时,开启眼球追踪功能;
在一个示例中,唤醒条件可包括:检测到屏幕前方存在移动物体,以及,检测到物体与屏幕的距离满足预设条件中的至少一种。
S3:在熄屏状态下,使用眼球追踪功能追踪得到眼动轨迹(称为目标眼动轨迹);
在一个示例中,目标眼动轨迹可包括:在预设的N个定位点中,依次被注视的定位点。
其中,N为不小于2的正整数。本领域技术人员可根据需要,灵活设计N的取值,例如设计其取值为9。此外,这N个定位点的具体位置、排列的形状(例如图2中的矩形,图3中的圆形)等都可进行灵活设计。
S4:若目标眼动轨迹与预设的眼动轨迹一致,对屏幕执行解锁操作。
使用者可预先输入解锁使用的眼动轨迹(运动轨迹)作为预设的眼动轨迹。
相较于现有技术,本发明实施例在熄屏状态下持续检测是否满足眼球追踪功能的唤醒条件,在满足时,开启该项功能。开启后,仍在熄屏状态下进行眼球追踪得到眼动轨迹,在得到的眼动轨迹与预设的眼动轨迹一致时,执行解锁操作。本发明实施例的整个解锁过程都是在熄屏状态下完成的,不容易泄露解锁信息,从而安全性和隐密性更高,更有利于隐私保护。
实施例二
本实施例重点介绍如何使用眼球追踪功能追踪得到眼动轨迹,请参见图4a,上述熄屏解锁方法示例性的包括:
S41:在熄屏状态下,持续检测是否满足眼球追踪功能的唤醒条件。
S42:在满足唤醒条件时,开启眼球追踪功能;
步骤S41-S42与前述S1-S2相同,在此不作赘述。
S43:基于红外光源和红外相机采集用户的眼部图像;
这里的眼图指包含眼睛的图像,例如正面、侧面头像,或者只包含眼部的图像。
需要说明的是,对于一些基于瞳孔-角膜反射法(PCCR)的眼动追踪算法,眼图具体为包含光斑的眼部特征图像。在采集时:红外光源照向眼睛,在角膜上形成反射点即光斑(也称为普尔钦斑)。红外相机对眼部进行拍摄,获取带有光斑的眼部图像。
S44:使用眼部图像提取出眼部特征信息;
具体的,可对眼部图像进行处理后得到眼部特征信息。
随着眼动追踪算法的不同,眼部特征信息所包含的特征信息也不同。
例如,根据瞳孔位置形态的眼动追踪算法,是通过瞳孔的主轴方向、瞳孔位置来计算注视信息(注视轴线和注视位置)。则眼部特征信息可包括瞳孔的主轴方向、瞳孔位置、瞳孔长轴长度、瞳孔短轴长度等。
再例如某一种特征向量拟合法,其工作原理是:
提取瞳孔的中心位置、左眼角中心位置和右眼角的中心位置;
将瞳孔中心位置减去左眼角中心位置作为特征向量A;
将瞳孔中心位置减去右眼角中心位置作为特征向量B。
构建向量A、向量B与注视点间的映射函数(若干方程组)。
基于给定的特征向量A和B,以及已知的注视信息,进行多项式拟合,以得到映射函数中的未知系数(未知系数的求解可在校准过程中完成)。在得到未知系数后,再将当前提取的眼部特征信息输入映射函数,即可得到当前的注视点(此过程为跟踪过程)。
特征向量拟合法需要眼部特征信息包括瞳孔中心位置、左眼角中心位置和右眼角的中心位置。
由于眼动追踪算法种类很多,在此不再一一赘述。
S45:根据眼部特征信息识别出眼睛的注视轴线和注视位置;
在一个示例中,可采用基于瞳孔-角膜反射法(PCCR)的眼动追踪算法识别出眼睛的注视轴线和注视位置,其工作原理是:红外光源照向眼睛,在角膜上形成反射点即光斑(也称为普尔钦斑)。红外相机对眼部进行拍摄,获取带有光斑的眼部图像。
随着眼球转动时,瞳孔中心与光斑的相对位置关系会随之发生变化,相应的,由红外相机采集到的带有光斑的若干眼部图像也会反映出这样的位置变化关系,根据位置变化关系可进行视线/注视点估计。
在现有的利用人眼注视点解锁的方式中,并未基于光斑特征的眼动识别精度低,其解锁成功率低,不适合便携移动设备复杂的使用场景。相对而言,基于光斑进行眼动识别,其识别准确度和效率更高。
S46:确定注视位置在N个定位点中所对应的定位点,作为被注视的定位点。
以包含9个定位点(定位点1-9)为例,假定当前计算出的注视位置与定位点1相对应,则将定位点1作为被注视的定位点。
依次被注视的定位点构成了使用者当前的眼动轨迹,也即目标眼动轨迹。
S47:若目标眼动轨迹与预设的眼动轨迹一致,对屏幕执行解锁操作。
步骤S47与前述S4相同,在此不作赘述。
当然,若不一致,则可判定解锁失败。
在本实施例中,基于红外光源的红外相机拍摄眼部图像,并根据眼部图像去计算注视点(注视轴线和注视位置),基于识别出的注视位置确定相应的定位点。在此过程中,不需要进行亮屏。
实施例三
为了进一步保护使用者隐私,请参见图4b,在使用眼球追踪功能追踪得到眼动轨迹(例如步骤S45)之前,还可包括如下步骤:
S51:获取IPD(瞳距)信息;
可根据眼部图像获取瞳距信息,瞳距信息可为眼部特征信息的一部分。
瞳距信息指的是人注视远方时,双眼瞳孔中心的距离。
S52:将获取的IPD瞳距信息与预设的IPD瞳距信息进行匹配;若匹配失败,进入S53,否则,进入S45;
预设的IPD信息可在解锁信息录入流程中被录入的。
本文后续将介绍解锁信息录入流程。
S53:判定解锁失败;
使用眼球追踪功能追踪得到眼动轨迹的步骤(例如步骤S3或步骤S45-S46),是在匹配成功后执行的。
需要说明的是,瞳距信息对于每个人而言几乎是唯一的,但由于测量精度原因,只能作为辅助项,一般情况下,瞳距信息可以排除大部分的非本人的解锁信息,因此,在本实施例中,进行了IPD检测,检测通过后,可认定是使用者本人,再进行眼动追踪,这样,可减少误判率,更好的保护使用者隐私。并可以提高解锁运算效率,节省能耗。
实施例四
在实施例一中介绍了目标眼动轨迹包括:在预设的N个定位点中,依次被注视的定位点。
可选的,请参见图5a,上述N个定位点包括:屏幕的顶点以及屏幕每条边线的中点;
或者,请参见图5b,上述N个定位点可包括:熄屏显示的光点阵列中的光点。
此外,在进行熄屏解锁之前,还需要预先进行校正,以及,在解锁信息录入流程中录入解锁使用的眼动轨迹。
下面将具体分别按照实施例介绍校正和预先输入解锁使用的眼动轨迹的具体方法。
实施例五
图6示出了基于图5a所示定位点,进行校正和输入解锁使用的眼动轨迹的一种示例性流程,包括:
S61:对红外相机进行位置标定;
具体的,可使用标定板对相机进行位置标定,此为现有技术在此不作赘述。
S62:执行校准流程,得到用户的个人校准系数;
个人校准系数是视线估计算法中用于计算视线最终结果的参数,和用户的瞳孔半径、角膜曲率、视轴和光轴之间的角度差等数据相关。
个人校准系数的计算原理如下:
步骤a,在屏幕上显示几个特征点;
步骤b,在使用者注视特征点的过程中,获取眼部图像,从中提取眼部特征信息;
眼部特征信息相关内容请参见前述记载,在此不作赘述。
步骤c,根据获取到的眼部特征信息和校准点坐标,使用视线估计算法反解出个人校准系数。
S63:提示用户注视预设位置;
在一个示例中,预设位置可为摄像头中心,后续可以摄像头中心点为原点。
当然,本领域技术人员也可灵活选取其他位置作为预设位置,在此不作赘述。
S64:在识别出用户注视预设位置后,基于红外光源和红外相机采集用户的眼部图像;
S64与前述的S43相类似,在此不作赘述。
S65:使用眼部图像和个人校准系数识别出眼睛的注视轴线和注视位置;
以特征向量拟合法为例,可使用个人校准系数对映射函数中的未知系数求解,再将从眼部图像提取的眼部特征信息输入映射函数,即可得到当前的注视点。详细过程请参见前述的步骤S44。
前述提及了预设的IPD信息可在解锁信息录入流程中被录入的。
则在提取出眼部特征信息后,可将眼部特征信息中的IPD信息录入作为预设的IPD信息。
S66:记录注视位置在N个定位点中所对应的定位点;
S66与前述的S46相类似,在此不作赘述。
S67:在接收到停止命令后,终止解锁信息录入流程。
在一个示例中,停止命令可通过使用者触摸停止按钮来下达。
在本实施例中,定位点是在屏幕的顶点以及每条边线的中点。在录入之前,先标定了红外相机的位置,并执行了校准流程,以令后续的操作更为精准。之后,会采集用户的眼部图像,识别其注视位置,记录该注视位置所对应的定位点。多个记录下来的定位点,构成了预设的眼动轨迹。当接收到停止命令时,终止该流程,则得到最终的,用于解锁的眼动轨迹。在整个解锁过程中屏幕不需要显示任何画面。
实施例六
图7示出了基于图5b所示定位点,进行校正和输入解锁使用的眼动轨迹的一种示例性流程,包括:
S71:对红外相机进行位置标定;
S72:执行校准流程,得到用户的个人校准系数;
S73:提示用户注视预设位置;
S71-S73与前述的S61-S63相同,在此不作赘述。
S74:在识别出用户注视预设位置后,在屏幕上显示出光点阵列;
光点阵列示例性的可参见图5b所示。
S75:基于红外光源和红外相机采集用户的眼部图像;
S75与前述的S43相类似,在此不作赘述。
S76:使用眼部图像和个人校准系数识别出眼睛的注视轴线和注视位置;
S76与前述的S65相类似,在此不作赘述。
S77:记录注视位置在光点阵列中所对应的光点;
以光点阵列包含9个光点(光点1-9)为例,假定当前计算出的注视位置与光点1相对应,则记录光点1(作为被注视的定位点)。
依次被注视的光点构成了预设的眼动轨迹。
前述提及了预设的IPD信息可在解锁信息录入流程中被录入的。
则在提取出眼部特征信息后,可将眼部特征信息中的IPD信息录入作为预设的IPD信息。
S78:在接收到停止命令后,终止解锁信息录入流程。
可见,在本实施例中,定位点是熄屏显示的光点阵列中的光点。在录入之前,先标定了红外相机的位置,并执行了校准流程,以令后续的操作更为精准。之后,会显示光点阵列,以便于用户注视。采集用户的眼部图像,识别其注视位置,记录该注视位置所对应的光点,进而实现解锁信息录入。
实施例七
本实施例提供一种熄屏解锁装置,该装置应用于具有屏幕且支持眼动追踪功能的终端设备中。
请参见图8,上述装置包括:
检测单元1,用于在熄屏状态下,持续检测是否满足眼球追踪功能的唤醒条件;
其中,唤醒条件包括:检测到屏幕前方存在移动物体,以及,检测到物体与屏幕的距离满足预设条件中的至少一种。
解锁单元2,用于:
在熄屏状态下,使用眼球追踪功能追踪得到眼动轨迹;追踪得到的眼动轨迹为目标眼动轨迹;
若目标眼动轨迹与预设的眼动轨迹一致,对屏幕执行解锁操作。
本发明实施例涉及的眼球追踪装置部署于终端设备中,可在熄屏状态下持续检测是否满足眼球追踪功能的唤醒条件,在满足时,开启该项功能。开启后,仍在熄屏状态下进行眼球追踪得到眼动轨迹,在得到的眼动轨迹与预设的眼动轨迹一致时,执行解锁操作。本发明实施例的整个解锁过程都是在熄屏状态下完成的,不容易泄露解锁信息,从而安全性和隐密性更高,更有利于隐私保护。
具体内容请参见前述记载,在此不作赘述。
在一个示例中,在使用眼球追踪功能追踪得到眼动轨迹之前,解锁单元2还可用于:
获取IPD瞳距信息;
将获取的IPD瞳距信息与预设的IPD瞳距信息进行匹配;
若匹配失败,判定解锁失败;
前述使用眼球追踪功能追踪得到眼动轨迹的操作,是在匹配成功后执行的。
预设的IPD信息是在解锁信息录入流程中被录入的。具体内容请参见前述记载,在此不作赘述。
在一个示例中,上述目标眼动轨迹包括:在预设的N个定位点中,依次被注视的定位点。
本领域技术人员可灵活设置定位点的设置,例如,请参见图5a,N个定位点可包括:熄屏显示的光点阵列中的光点;再例如,请参见图5b,N个定位点可包括:屏幕的顶点以及每条边线的中点。具体内容请参见前述记载,在此不作赘述。
上述终端设备包括:红外光源和红外相机。上述预设的眼动轨迹是在解锁信息录入流程中被录入的。
因此,请参见图9,上述熄屏解锁装置还可包括:解锁信息录入单元3,用于进行解锁信息录入。
在一个示例中,若N个定位点包括屏幕的顶点以及每条边线的中点,由解锁信息录入单元3执行的解锁信息录入流程可示例性包括:
对红外相机进行位置标定;
执行校准流程,得到用户的个人校准系数;
提示用户注视预设位置;
在识别出用户注视预设位置后,基于红外光源和红外相机采集用户的眼部图像;
使用眼部图像和个人校准系数识别出眼睛的注视轴线和注视位置;
记录注视位置在N个定位点中所对应的定位点;
在接收到停止命令后,终止解锁信息录入流程。
具体内容请参见前述记载,在此不作赘述。
而若N个定位点包括光点阵列中的光点,由解锁信息录入单元3执行的解锁信息录入流程可示例性包括:
对红外相机进行位置标定;
执行校准流程,得到用户的个人校准系数;
提示用户注视预设位置;
在识别出用户注视预设位置后,在屏幕上显示出光点阵列;
基于红外光源和红外相机采集用户的眼部图像;
使用眼部图像和个人校准系数识别出眼睛的注视轴线和注视位置;
记录注视位置在光点阵列中所对应的光点;
在接收到停止命令后,终止解锁信息录入流程。
具体内容请参见前述记载,在此不作赘述。
在又一个示例中,在使用眼球追踪功能追踪得到眼动轨迹的方面,解锁单元2可具体用于:
基于红外光源和红外相机采集用户的眼部图像;
使用眼部图像识别出眼睛的注视轴线和注视位置;
确定注视位置在N个定位点中所对应的定位点,作为被注视的定位点。
具体内容请参见前述记载,在此不作赘述。
前述提及了预设的IPD信息可在解锁信息录入流程中被录入的。
则解锁信息录入单元3还可用于将眼部特征信息中的IPD信息录入作为预设的IPD信息。
实施例八
本发明实施例提供了一种存储介质,该存储介质中存储有计算机可执行指令,计算机可执行指令被处理器加载并执行时,实现实施例一至六任一项所述的熄屏解锁方法的步骤。
实施例九
本发明实施例提供了一种处理器,所述处理器用于运行程序,其中,所述程序运行时执行实施例一至六中任一项所述的熄屏解锁方法步骤。
实施例十
本发明实施例提供一种终端设备,该设备包括处理器、存储器以及存储在存储器上并可在处理器上运行的程序,处理器执行程序时,可执行实施例一至六中任一项所述的熄屏解锁方法步骤。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中,计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
存储器可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM)。存储器是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括暂存电脑可读媒体(transitory media),如调制的数据信号和载波。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括要素的过程、方法、商品或者设备中还存在另外的相同要素。
本领域技术人员应明白,本申请的实施例可提供为方法、系统或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
以上仅为本申请的实施例而已,并不用于限制本申请。对于本领域技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本申请的权利要求范围之内。
Claims (10)
1.一种熄屏解锁方法,其特征在于,应用于具有屏幕且支持眼动追踪功能的设备中,包括:
在熄屏状态下,持续检测是否满足眼球追踪功能的唤醒条件;
在满足所述唤醒条件时,开启所述眼球追踪功能;
在熄屏状态下,使用所述眼球追踪功能追踪得到眼动轨迹;追踪得到的眼动轨迹为目标眼动轨迹;
若所述目标眼动轨迹与预设的眼动轨迹一致,对屏幕执行解锁操作。
2.如权利要求1所述的方法,其特征在于,所述目标眼动轨迹包括:在预设的N个定位点中,依次被注视的定位点。
3.如权利要求2所述的方法,其特征在于,
所述N个定位点包括:熄屏显示的光点阵列中的光点;
或者,
所述N个定位点包括:屏幕的顶点以及每条边线的中点。
4.如权利要求3所述的方法,其特征在于,
所述设备包括:红外光源和红外相机;
所述预设的眼动轨迹是在解锁信息录入流程中被录入的;
若所述N个定位点包括屏幕的顶点以及每条边线的中点,所述解锁信息录入流程包括:
对所述红外相机进行位置标定;
执行校准流程,得到用户的个人校准系数;
提示用户注视预设位置;
在识别出用户注视预设位置后,基于所述红外光源和所述红外相机采集用户的眼部图像;
使用眼部图像和所述个人校准系数识别出眼睛的注视轴线和注视位置;
记录所述注视位置在所述N个定位点中所对应的定位点;
在接收到停止命令后,终止所述解锁信息录入流程。
5.如权利要求3所述的方法,其特征在于,
所述设备包括:红外光源和红外相机;
所述预设的眼动轨迹是在解锁信息录入流程中被录入的;
若所述N个定位点包括光点阵列中的光点,所述解锁信息录入流程包括:
对所述红外相机进行位置标定;
执行校准流程,得到用户的个人校准系数;
提示用户注视预设位置;
在识别出用户注视预设位置后,在屏幕上显示出所述光点阵列;
基于所述红外光源和所述红外相机采集用户的眼部图像;
使用眼部图像和所述个人校准系数识别出眼睛的注视轴线和注视位置;
记录所述注视位置在所述光点阵列中所对应的光点;
在接收到停止命令后,终止所述解锁信息录入流程。
6.如权利要求1-5任一项所述的方法,其特征在于,在使用所述眼球追踪功能追踪得到眼动轨迹之前,还包括:
获取IPD瞳距信息;
将获取的IPD瞳距信息与预设的IPD瞳距信息进行匹配;
若匹配失败,判定解锁失败;
所述使用所述眼球追踪功能追踪得到眼动轨迹的步骤,是在匹配成功后执行的。
7.如权利要求6所述的方法,其特征在于,预设的IPD信息是在解锁信息录入流程中被录入的。
8.如权利要求1-5任一项所述的方法,其特征在于,所述唤醒条件包括:检测到屏幕前方存在移动物体,以及,检测到物体与屏幕的距离满足预设条件中的至少一种。
9.如权利要求2或3所述的方法,其特征在于,
所述设备包括:红外光源和红外相机;
所述使用所述眼球追踪功能追踪得到眼动轨迹包括:
基于所述红外光源和所述红外相机采集用户的眼部图像;
使用眼部图像识别出眼睛的注视轴线和注视位置;
确定所述注视位置在所述N个定位点中所对应的定位点,作为被注视的定位点。
10.一种熄屏解锁装置,其特征在于,应用于具有屏幕且支持眼动追踪功能的设备中,包括:
检测单元,用于:
在熄屏状态下,持续检测是否满足眼球追踪功能的唤醒条件;
在满足所述唤醒条件时,开启所述眼球追踪功能;
解锁单元,用于:
在熄屏状态下,使用所述眼球追踪功能追踪得到眼动轨迹;追踪得到的眼动轨迹为目标眼动轨迹;
若所述目标眼动轨迹与预设的眼动轨迹一致,对屏幕执行解锁操作。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011205846.0A CN114445903A (zh) | 2020-11-02 | 2020-11-02 | 熄屏解锁方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011205846.0A CN114445903A (zh) | 2020-11-02 | 2020-11-02 | 熄屏解锁方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114445903A true CN114445903A (zh) | 2022-05-06 |
Family
ID=81358209
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011205846.0A Pending CN114445903A (zh) | 2020-11-02 | 2020-11-02 | 熄屏解锁方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114445903A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116048243A (zh) * | 2022-05-20 | 2023-05-02 | 荣耀终端有限公司 | 一种显示方法和电子设备 |
-
2020
- 2020-11-02 CN CN202011205846.0A patent/CN114445903A/zh active Pending
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116048243A (zh) * | 2022-05-20 | 2023-05-02 | 荣耀终端有限公司 | 一种显示方法和电子设备 |
CN116048243B (zh) * | 2022-05-20 | 2023-10-20 | 荣耀终端有限公司 | 一种显示方法和电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10824849B2 (en) | Method, apparatus, and system for resource transfer | |
US10318797B2 (en) | Image processing apparatus and image processing method | |
US11379960B2 (en) | Image processing method, image processing apparatus, and wearable device | |
US10747990B2 (en) | Payment method, apparatus, and system | |
US20160202756A1 (en) | Gaze tracking via eye gaze model | |
US20220309836A1 (en) | Ai-based face recognition method and apparatus, device, and medium | |
CN111543934A (zh) | 一种视力检测方法、装置、电子产品及存储介质 | |
CN110313006B (zh) | 一种人脸图像检测方法及终端设备 | |
CN107958223B (zh) | 人脸识别方法及装置、移动设备、计算机可读存储介质 | |
EP4095744A1 (en) | Automatic iris capturing method and apparatus, computer-readable storage medium, and computer device | |
US10146306B2 (en) | Gaze position detection apparatus and gaze position detection method | |
US11585724B2 (en) | Fixtureless lensmeter system | |
AU2022202677A1 (en) | Fixtureless lensmeter system | |
US11335090B2 (en) | Electronic device and method for providing function by using corneal image in electronic device | |
CN115965653A (zh) | 一种光斑追踪方法、装置、电子设备及存储介质 | |
CN114445903A (zh) | 熄屏解锁方法及装置 | |
EP2128820A1 (en) | Information extracting method, registering device, collating device and program | |
CN113342157A (zh) | 眼球追踪处理方法及相关装置 | |
CN114895790A (zh) | 一种人机交互方法、装置、电子设备和存储介质 | |
KR102161488B1 (ko) | 3차원 제품 디스플레이 장치 및 방법 | |
CN112528714B (zh) | 基于单光源的注视点估计方法、系统、处理器及设备 | |
CN115997159A (zh) | 使用移动设备确定眼睛旋转中心的位置的计算机实施的方法、移动设备以及计算机程序 | |
CN113052032A (zh) | 人体姿态检测方法及电子设备、计算机可读存储介质 | |
EP4227732A1 (en) | Method for head image recording and corresponding mobile device | |
CN117495937B (zh) | 人脸图像处理的方法及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |