CN112711325A - 一种控制输出操作提示的方法及终端 - Google Patents
一种控制输出操作提示的方法及终端 Download PDFInfo
- Publication number
- CN112711325A CN112711325A CN201911024412.8A CN201911024412A CN112711325A CN 112711325 A CN112711325 A CN 112711325A CN 201911024412 A CN201911024412 A CN 201911024412A CN 112711325 A CN112711325 A CN 112711325A
- Authority
- CN
- China
- Prior art keywords
- pupil
- user
- light intensity
- parameter
- standard
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 126
- 210000001747 pupil Anatomy 0.000 claims abstract description 857
- 238000004590 computer program Methods 0.000 claims description 9
- 230000006870 function Effects 0.000 description 31
- 239000010410 layer Substances 0.000 description 31
- 238000010586 diagram Methods 0.000 description 23
- 230000008569 process Effects 0.000 description 20
- 210000001508 eye Anatomy 0.000 description 14
- 238000012545 processing Methods 0.000 description 11
- 230000010344 pupil dilation Effects 0.000 description 9
- 238000007726 management method Methods 0.000 description 7
- 230000001815 facial effect Effects 0.000 description 6
- 238000004364 calculation method Methods 0.000 description 5
- 230000001413 cellular effect Effects 0.000 description 5
- 230000003993 interaction Effects 0.000 description 5
- 210000003205 muscle Anatomy 0.000 description 5
- 230000008859 change Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 230000002159 abnormal effect Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 3
- 238000013461 design Methods 0.000 description 3
- 238000001514 detection method Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000008451 emotion Effects 0.000 description 3
- 208000006550 Mydriasis Diseases 0.000 description 2
- 230000004397 blinking Effects 0.000 description 2
- 230000003247 decreasing effect Effects 0.000 description 2
- 230000010339 dilation Effects 0.000 description 2
- 230000004418 eye rotation Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 210000001525 retina Anatomy 0.000 description 2
- 210000002460 smooth muscle Anatomy 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 210000005070 sphincter Anatomy 0.000 description 2
- 230000000638 stimulation Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 210000005252 bulbus oculi Anatomy 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 239000012792 core layer Substances 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000003340 mental effect Effects 0.000 description 1
- 230000003547 miosis Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000002911 mydriatic effect Effects 0.000 description 1
- 210000005036 nerve Anatomy 0.000 description 1
- 210000005037 parasympathetic nerve Anatomy 0.000 description 1
- 230000001179 pupillary effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
- 238000010079 rubber tapping Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
- 230000002889 sympathetic effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
- G06F9/453—Help systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
Abstract
本申请实施例公开了一种控制输出操作提示的方法及终端,应用于终端技术领域,可以解决现有技术中存在的终端无法智能的引导用户在界面上进行操作的问题。该方法包括:获取用户的第一瞳孔参数,以及获取用户的面部的第一光强度,第一瞳孔参数用于表征用户的当前瞳孔大小;确定用户在第一光强度下的标准瞳孔参数,标准瞳孔参数用于表征用户的标准瞳孔大小;在用户的当前瞳孔大小大于该标准瞳孔大小的情况下,自动输出操作提示,该操作提示用于引导用户在终端当前显示的界面上执行操作。
Description
技术领域
本申请涉及终端技术领域,尤其涉及一种控制输出操作提示的方法及终端。
背景技术
随着终端技术的普及,终端(也称为终端设备)的应用越来越广泛。一些终端通常会在用户初次使用的过程中,在终端的界面上显示一些引导用户操作的信息,以使得用户可以获知如何在该终端的界面上进行操作,而在后续使用终端的过程中不再显示引导用户操作的信息。但是针对一些操作方式较为复杂的界面,即使并非是首次使用终端,用户可能也会遇到不会操作的问题,这种情况下终端无法智能的引导用户在界面上进行操作。
发明内容
本申请实施例提供了一种控制输出操作提示的方法及终端,用以解决现有技术中存在的终端无法智能的引导用户在界面上进行操作的问题。
为了解决上述技术问题,本申请实施例是这样实现的:
第一方面,提供一种控制输出操作提示的方法,应用于终端,该方法可以包括:获取用于表征用户的当前瞳孔大小的第一瞳孔参数,以及获取用户的面部的第一光强度;然后确定用户在第一光强度下的标准瞳孔参数(该标准瞳孔参数用于表征该用户的标准瞳孔大小),以及在用户的当前瞳孔大小大于该标准瞳孔大小的情况下,自动输出用于引导用户在终端当前显示的界面上执行操作的操作提示。
本申请实施例提供的控制输出操作提示的方法中,终端在根据用户在第一光强度下的第一瞳孔参数和用户在第一光强度下的标准瞳孔参数,判断出用户的当前瞳孔大小大于该标准瞳孔大小的情况下,确认该用户在终端当前显示的界面上执行操作的过程中遇到困难,此时可以自动输出操作提示来引导用户操作,从而可以智能的引导用户在界面上进行操作。
在一种可能的实现方式中,上述第一瞳孔参数可以为以下两种可能的情况:
第一种情况:第一瞳孔参数为用户的瞳孔尺寸与虹膜尺寸的比值。
其中,瞳孔尺寸包括瞳孔半径、瞳孔直径或者瞳孔面积,虹膜尺寸包括虹膜半径、虹膜直径或者虹膜面积。在瞳孔尺寸为瞳孔半径的情况下,虹膜尺寸为虹膜半径;在瞳孔尺寸为瞳孔直径的情况下,虹膜尺寸为虹膜直径;在瞳孔尺寸为瞳孔面积的情况下,虹膜尺寸为虹膜面积。
第二种情况:第一瞳孔参数为用户的瞳孔尺寸。
其中,瞳孔尺寸包括瞳孔半径、瞳孔直径或者瞳孔面积。
本申请实施例中,提供了第一瞳孔参数的多种可能,为灵活多样的实现本申请实施例提供的控制输出操作提示的方法提供数据基础。
在一种可能的实现方式中,上述获取用户的第一瞳孔参数,以及获取用户的面部的第一光强度的方法可以通过以下两种方式实现:
方式一:在检测到用户针对终端当前显示的界面的操作间隔时长大于或等于预设时长的情况下,获取用户的第一瞳孔参数和用户的面部的第一光强度。
方式二:在检测到用户针对终端当前显示的界面在预设时间内执行同一操作的次数大于或等于预设次数的情况下,获取用户的第一瞳孔参数和用户的面部的第一光强度。
其中,终端可以在检测到用户针对终端当前显示的界面的操作间隔时长大于或等于预设时长,或者,终端检测到用户针对终端当前显示的界面在预设时间内执行同一操作的次数大于或等于预设次数的情况下,可以确定用户在终端当前显示的界面上的操作不顺畅。
本申请实施例中,可以在确定用户在终端当前显示的界面上的操作不顺畅之后,再获取用户的第一瞳孔参数和第一光强度,可以进一步准确的判断用户是否在终端当前先的界面上遇到了操作困难,并且由于在确定用户在终端当前显示的界面上不存在操作不顺畅的情况后,不再获取用户的第一瞳孔参数和第一光强度,因此还可以节省终端的功耗。
在一种可能的实现方式中,上述在用户的当前瞳孔大小大于用户的标准瞳孔大小的情况下,自动输出操作提示可以通过以下两种方式实现:
方式一:在用户的当前瞳孔大小大于标准瞳孔大小,且检测到用户针对终端当前显示的界面的操作间隔时长大于或等于预设时长的情况下,自动输出操作提示。
方式二:在用户的当前瞳孔大小大于标准瞳孔大小,且检测到用户针对终端当前显示的界面在预设时间内执行同一操作的次数大于或等于预设次数的情况下,自动输出操作提示。
本申请实施例中,可以在确定用户瞳孔放大的情况下,进一步通过用户在终端当前显示的界面上的操作是否顺畅来判断,用户是否在终端当前显示的界面上的操作遇到了困难,并在满足用户瞳孔放大,且用户在终端当前显示的界面上的操作不顺畅的情况下,确定终端当前显示的界面上的执行操作的过程中遇到了困难,从而可以提高判断精度,可以更加准确的为用户自动输出操作提示,进一步提高人机交互性能。
在一种可能的实现方式中,上述在用户的当前瞳孔大小大于用户的标准瞳孔大小的情况下,自动输出操作提示的方法还可以包括:在用户的当前瞳孔大小相比较于标准瞳孔大小放大了预设倍数的情况下,自动输出操作提示,该预设倍数大于1。
本申请实施例中,终端可以在该用户的当前瞳孔大小相比较于该标准瞳孔大小放大了预设倍数的情况下,输出提示信息,也就是说,在用户的当前瞳孔大小相比于该标准瞳孔大小放大到一定程度的情况下,输出提示信息,这样可以避免用户因为其他因素对瞳孔的影响,而误输出提示信息的情况,提高输出提示信息的精准度。
在一种可能的实现方式中,本申请实施例中,在确定用户在第一光强度下的标准瞳孔参数之前,还可以先获取用户的第二瞳孔参数和用户的面部的第二光强度。
进一步的,上述确定用户在第一光强度下的标准瞳孔参数的方法可以包括:根据第一光强度、第二瞳孔参数、第二光强度、第三光强度和第三瞳孔参数,计算用户在第一光强度下的标准瞳孔参数,第三瞳孔参数为第三光强度下的瞳孔参数,第三光强度为与第二光强度不同的光强度。
在一种可能的实现方式中,对于不同类型的瞳孔参数,本申请实施例中根据第一光强度、第二瞳孔参数、第二光强度、第三光强度和第三瞳孔参数,计算用户在第一光强度下的标准瞳孔参数的方法有所不同。
其中,第一瞳孔参数可以分为以下两种类型:
第一种类型:第一瞳孔参数包括:瞳孔半径与虹膜半径的比值、瞳孔直径与虹膜直径的比值、瞳孔半径和瞳孔直径中的任一项。
第二种类型:第一瞳孔参数包括:瞳孔面积与虹膜面积的比值、瞳孔面积中的任一项。
在第一瞳孔参数为第一种类型的情况下,终端可以根据第一光强度、第二瞳孔参数、第二光强度、第三光强度和第三瞳孔参数,结合公式一,计算用户在第一光强度下的标准瞳孔参数。
其中,R′用于表示标准瞳孔参数,R0用于表示第二瞳孔参数,I用于表示第一光强度,I0用于表示第二光强度,Rk用于表示第三瞳孔参数,Ik用于表示第三光强度。
本申请实施例中,可以将第一光强度、第二瞳孔参数、第二光强度、第三光强度和第三瞳孔参数的具体数值代入上述公式一,以得到在第一光强度下的标准瞳孔参数的值。
在上述第一瞳孔参数为上述第二种类型的情况下,终端可以根据第一光强度、第二瞳孔参数、第二光强度、第三光强度和第三瞳孔参数,结合公式二,计算用户在第一光强度下的标准瞳孔参数。
其中,S′用于表示标准瞳孔参数,S0用于表示第二瞳孔参数,I用于表示第一光强度,I0用于表示第二光强度,Sk用于表示第三瞳孔参数,Ik用于表示第三光强度。
本申请实施例中,可以将第一光强度、第二瞳孔参数、第二光强度、第三光强度和第三瞳孔参数的具体数值代入上述公式二,以得到在第一光强度下的标准瞳孔参数的值。
本申请实施例中,针对第一瞳孔参数的两种不同类型,提供了不同的适用公式来计算用户在第一光强度下的标准瞳孔参数,使得本申请实施例的实现方式更加灵活多样。
在一种可能的实现方式中,在确定用户在第一光强度下的标准瞳孔参数之前,还可以先获取用户的第二瞳孔参数和用户的面部的第二光强度,并根据至少一个光强度、第二瞳孔参数、第二光强度、第三光强度和第三瞳孔参数,计算至少一个光强度中的不同光强度下的标准瞳孔参数,以得到至少一个标准瞳孔参数,第三瞳孔参数为第三光强度下的瞳孔参数,第三光强度为与第二光强度不同的光强度;进一步的,终端可以从至少一个标准瞳孔参数中确定第一光强度下的标准瞳孔参数。
本申请实施例中,相比于实时的根据公式计算用户在第一光强度下的标准瞳孔参数,提前计算好不同光强度下的至少一个标准瞳孔参数,并在需要采用第一光强度下的标准瞳孔参数时,从该至少一个标准瞳孔参数中去获取的方式可以提高计算效率,减小终端功耗。
在一种可能的实现方式中,第一瞳孔参数为用户的瞳孔尺寸与虹膜尺寸的比值(即为上述的第一种情况),上述获取用户的第一瞳孔参数的实现方式可以包括:采集包括用户的面部信息的第一图像信息;从第一图像信息中确定用户的瞳孔尺寸所对应的像素点的第一数量,以及用户的虹膜尺寸所对应的像素点的第二数量;计算第一数量与第二数量的数量比值,将数量比值作为第一瞳孔参数。
本申请实施例中,由于通常虹膜尺寸不会因为外界因素的影响而改变,因此在终端将第一数量与第二数量的数量比值作为用户表征用户的当前瞳孔大小的第一瞳孔参数的情况下,无需考虑终端与用户之间的距离对检测的第一瞳孔参数的准确性的影响,从而可以简化获取第一瞳孔参数的方式,并且能够保证获取该第一瞳孔参数的准确性。
在一种可能的实现方式中,第一瞳孔参数为用户的瞳孔尺寸(即为上述的第二种情况),上述获取用户的第一瞳孔参数的实现方式可以包括:检测用户的瞳孔与基准点所形成的圆椎体的锥角,基准点为终端的显示屏所在平面上的任意一点;检测用户的瞳孔的中心点与基准点之间的直线距离;根据锥角与距离,计算用户的第一瞳孔参数。
本申请实施例中,在检测第一瞳孔参数时,考虑了用户的瞳孔的中心点与基准点之间的直线距离,并根据用户的瞳孔与基准点所形成的圆椎体的锥角与该距离计算该用户的第一瞳孔参数,从而可以准确的计算出该用户的第一瞳孔参数。
在一种可能的实现方式中,可以在第一光强度小于或等于预设光强度的情况下,确定用户在第一光强度下的标准瞳孔参数。
本申请实施例中,在确定第一光强度下的标准瞳孔参数之前,可以先判断第一光强度是否小于或等于预设光强度,基于此可以排除一些光强过大时的异常情况,增加确定标准瞳孔参数的准确性
在一种可能的实现方式中,本申请实施例中可以通过语音、文字、标识和动画中的至少一种方式自动输出操作提示。
本申请实施例中提供了多种输出操作提示的方式,从而终端可以通过灵活多变的方式为提供用户提供引导,提高终端的人机交互性能。
第二方面,提供一种终端,该终端包括:获取模块,用于获取用户的第一瞳孔参数,以及获取用户的面部的第一光强度,第一瞳孔参数用于表征用户的当前瞳孔大小;确定模块,用于确定用户在第一光强度下的标准瞳孔参数,标准瞳孔参数用于表征用户的标准瞳孔大小;输出模块,用于在用户的当前瞳孔大小大于标准瞳孔大小的情况下,自动输出操作提示,操作提示用于引导用户在终端当前显示的界面上执行操作。
第三方面,提供一种终端,包括:处理器和存储有计算机指令的存储器;当处理器执行计算机指令时,处理器用于获取用户的第一瞳孔参数,以及获取用户的面部的第一光强度,第一瞳孔参数用于表征用户的当前瞳孔大小;确定用户在第一光强度下的标准瞳孔参数,标准瞳孔参数用于表征用户的标准瞳孔大小;在用户的当前瞳孔大小大于标准瞳孔大小的情况下,自动输出操作提示,操作提示用于引导用户在终端当前显示的界面上执行操作。
第四方面,提供一种计算机可读存储介质,该计算机可读存储介质上存储计算机程序,该计算机程序被处理器执行时,实现如第一方面或其任意一种可能的实现方式中的控制输出操作提示的方法。
第五方面,提供一种计算机程序产品,该计算机程序产品包括计算机指令,当计算机程序产品在处理器上运行时,使得处理器执行计算机指令,以实现如第一方面或其任意一种可能的实现方式中的控制输出操作提示的方法。
其中,上述第二方面至上述第五方面或其任意一种可能的实现方式的技术效果可以参见对上述第一方面中不同实现方式的技术效果的描述,此处不再赘述。
附图说明
为了更清楚地说明本申请实施例技术方案,下面将对实施例和现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,还可以根据这些附图获得其它的附图。
图1为本申请实施例提供的一种可能的安卓操作系统的架构示意图;
图2为本申请实施例提供的一种控制输出操作提示的方法的示意图一;
图3为本申请实施例提供的一种人眼中瞳孔和虹膜的示意图;
图4为本申请实施例提供的一种瞳孔放大和缩小的示意图;
图5为本申请实施例提供的一种终端显示的界面的示意图一;
图6为本申请实施例提供的一种终端显示的界面的示意图二;
图7A为本申请实施例提供的一种终端显示的界面的示意图三;
图7B为本申请实施例提供的一种终端显示的界面的示意图四;
图8为本申请实施例提供的一种终端显示的界面的示意图五;
图9为本申请实施例提供的一种控制输出操作提示的方法的示意图二;
图10为本申请实施例提供的一种控制输出操作提示的方法的示意图三;
图11为本申请实施例提供的一种控制输出操作提示的方法的示意图四;
图12为本申请实施例提供的一种用户的瞳孔与基准点所形成的圆椎体的锥角的示意图;
图13为本申请实施例提供的一种控制输出操作提示的方法的示意图五;
图14为本申请实施例提供的一种控制输出操作提示的方法的示意图六;
图15为本申请实施例提供的一种控制输出操作提示的方法的示意图七;
图16为本申请实施例提供的一种控制输出操作提示的方法的示意图八;
图17为本申请实施例提供的一种终端的结构示意图一;
图18为本申请实施例提供的一种终端的结构示意图二;
图19为本申请实施例提供的一种终端的硬件示意图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行描述,显然,所描述的实施例仅仅是本申请一部分的实施例,而不是全部的实施例。基于本申请中的实施例,都应当属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”和“第二”等是用于区别不同的对象,而不是用于描述对象的特定顺序。例如,第一瞳孔参数和第二瞳孔参数等是用于区别不同的瞳孔参数,而不是用于描述瞳孔参数的特定顺序。
需要说明的是,本申请实施例中,“示例性的”或者“例如”等词用于表示作例子、例证或说明。本申请实施例中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言,使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。
一些终端通常会在用户初次使用终端的过程中,在该终端的界面上显示一些引导用户操作的信息,以使得用户可以获知如何在该终端的界面上进行操作,后续使用终端的过程中不再显示引导用户操作的信息,但是针对一些操作方式较为复杂的界面,即使并非是首次使用终端,用户可能也会遇到不会操作的问题,从而终端无法智能的引导用户在界面上进行操作。
一种可能的实现方式中,终端可以通过摄像头获取用户眼部的信息(包括眼睛眨动的频率、眼睛眨动的幅度、眼睛转动的频率,以及眼睛转动的幅度),并通过用户眼部的信息判断用户是否出现疲劳情况,并在判断出用户出现疲劳情况时,在终端的显示屏上为用户显示提示信息。例如,在终端的显示屏上显示“您使用终端过久,请您休息一下”。该可选的方式可以针对用户疲劳的情况提示用户休息,但是并不适用于用户在操作过程中遇到困难的情况(例如,在拍照界面不知道如何选择拍照模式的情况)。
人的瞳孔是人思维活动的灵敏指示器,当人心情平静且没有外物刺激的时候,人的瞳孔一般会保持恒定,但是当人在执行比较困难的任务时,瞳孔会在短时间内放大(例如,瞳孔可以在5秒钟内放大50%)。
基于人的瞳孔的特性,针对用户在操作过程中遇到困难的情况,本申请实施例提供一种控制输出操作提示的方法及终端,通过获取用于表征用户的当前瞳孔大小的第一瞳孔参数、当前用户的面部的第一光强度以及在第一光强度下用于表征该用户的标准瞳孔大小的标准瞳孔参数,并根据该第一瞳孔参数和标准瞳孔参数,判断用户的当前瞳孔大小是否大于该标准瞳孔大小,并在用户的当前瞳孔大小大于该标准瞳孔大小的情况下,确定该用户在终端当前显示的界面上的操作过程中遇到困难,此时自动输出操作提示,以引导用户在终端当前显示的界面上执行操作,从而终端可以智能的引导用户在终端显示的界面上进行操作。
本申请实施例中的终端可以为具有操作系统的终端。该操作系统可以为安卓(Android)操作系统,也可以为ios操作系统,还可以为其他可能的操作系统,本申请实施例不作具体限定。
下面以安卓操作系统为例,介绍一下本申请实施例提供的控制输出操作提示的方法所应用的软件环境。
如图1所示,为本申请实施例提供的一种可能的安卓操作系统的架构示意图。在图1中,安卓操作系统的架构包括4层,分别为:应用程序层、应用程序框架层、系统运行库层和内核层(具体可以为Linux内核层)。
其中,应用程序层包括安卓操作系统中的各个应用程序(包括系统应用程序和第三方应用程序)。例如,可以包括相机、图库、日历、通话、地图、导航、蓝牙、音乐和短信息等应用程序。
应用程序框架层是应用程序的框架,为应用程序层的应用程序提供应用编程接口(application programming interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。开发人员可以在遵守应用程序的框架的开发原则的情况下,基于应用程序框架层开发一些应用程序。
其中,应用程序框架层可以包括窗口管理器、内容提供器、视图系统、电话管理器、资源管理器和通知管理器等。
窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小、判断是否有状态栏、锁定显示屏和截取显示屏等。
内容提供器可用来存放和获取数据,并使这些数据可以被应用程序访问。这些数据可以包括视频、图像、音频、拨打和接听的电话,浏览历史、书签和电话簿等。
视图系统包括可视控件。例如,显示文字的控件和显示图片的控件等。视图系统可用于构建应用程序,显示界面可以由一个或多个视图组成的。例如,包括短信通知图标的显示界面,可以包括显示文字的视图以及显示图片的视图。
资源管理器为应用程序提供各种资源,比如本地化字符串、图标、图片、布局文件和视频文件等等。
通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。比如通知管理器被用于告知下载完成,消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知,例如后台运行的应用程序的通知,还可以是以对话窗口形式出现在显示屏上的通知。例如在状态栏提示文本信息,发出提示音,电子设备振动,指示灯闪烁等。
系统运行库层包括库(也称为系统库)和安卓操作系统运行环境。库主要为安卓操作系统提供其所需的各类资源。安卓操作系统运行环境用于为安卓操作系统提供软件环境,负责安卓系统的调度和管理。
库包含两部分:一部分是java语言需要调用的功能函数,另一部分是安卓的核心库。
应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理,堆栈管理,线程管理,安全和异常的管理等功能。
系统库可以包括多个功能模块。例如:表面管理器(surface manager),媒体库(medialibraries),三维图形处理库(例如:OpenGL ES),2D图形引擎(例如:SGL)等。
表面管理器用于对显示子系统进行管理,并且为多个应用程序提供了2D和3D图层的融合。
媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:MPEG4、MP3、AAC、AMR、JPG和PNG等编码格式。
三维图形处理库用于实现三维图形绘图、图像渲染、合成和图层处理等。
2D图形引擎是2D绘图的绘图引擎。
内核层是安卓操作系统的操作系统层,属于安卓操作系统软件层次的最底层,内核层基于Linux内核为安卓操作系统提供核心系统服务和与硬件相关的驱动程序。其中,内核层可以包含显示驱动,摄像头驱动,音频驱动,传感器驱动和扬声器驱动等。
以安卓操作系统为例,本申请实施例中,开发人员可以基于上述如图1所示的安卓操作系统的系统架构,开发实现本申请实施例提供的控制输出操作提示的方法的软件程序,从而使得该控制输出操作提示的方法可以基于如图1所示的安卓操作系统运行。即处理器或者终端可以通过在安卓操作系统中运行该软件程序实现本申请实施例提供的控制输出操作提示的方法。
可选的,在实现本申请实施例中的控制输出操作提示的方法时,终端的处理器可以通过在安卓操作系统中运行该方法的软件程序,以获取用户的第一瞳孔参数。具体的,处理器可以通过内核层的摄像头驱动来驱动终端的前置摄像头获取包括用户面部特征的图像信息,然后从图像信息中获取到用户的第一瞳孔参数;或者处理器可以通过内核层中的传感器驱动来驱动终端中的结构光传感器和角传感器来检测用户的瞳孔与基准点所形成的圆椎体的锥角,并通过内核层中的传感器驱动来驱动终端中的距离传感器来检测该用户的瞳孔的中心点与基准点之间的直线距离,并根据该锥角和距离计算用户的第一瞳孔参数。
进一步的,处理器可以通过安卓操作系统中处于内核层的传感器驱动来驱动终端中的光强传感器,以获取用户在获取第一瞳孔参数时,用户面部的第一光强度。
然后可以通过安卓操作系统中的系统运行库层中的保存的计算公式,计算出第一光强度下的标准瞳孔参数,或者,可以从安卓操作系统中的系统运行库层中保存的多个光强度下的标准瞳孔参数中,获取第一光强度下的标准瞳孔参数,然后再根据第一光强度和该标准光强度,判断该用户的当前瞳孔大小是否大于该标准瞳孔大小。
在系统运行库层判断出该用户的当前瞳孔大小大于该标准瞳孔大小的情况下,可以通过应用程序框架层中的内容提供器获取预先保存的操作提示的音频,并通过安卓操作系统中处于内核层的扬声器驱动来驱动终端中的扬声器播放该音频,以输出语音形式的操作提示。
在系统运行库层判断出该用户的当前瞳孔大小大于该标准瞳孔大小的情况下,还可以通过应用程序框架层中的视图系统,获取预先保存的操作提示的界面,并通过显示驱动,驱动终端的显示屏显示这些界面(例如,下面图5至图8中的任一界面)。
本申请实施例中的终端通常也可以称为终端设备,该终端可以为移动终端,也可以为非移动终端。移动终端可以为手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本或者个人数字助理(personal digital assistant,PDA)等;非移动终端可以为个人计算机(personal computer,PC)、电视机(television,TV)、柜员机或者自助机等;本申请实施例不作具体限定。
本申请实施例提供的控制输出操作提示的方法的执行主体可以为上述的终端(包括移动终端和非移动终端),也可以为该终端中能够实现该控制输出操作提示的方法的功能模块和/或功能实体,具体的可以根据实际使用需求确定,本申请实施例不作限定。下面以终端作为本申请实施例提供的控制输出操作提示的方法的执行主体为例,对本申请实施例提供的控制输出操作提示的方法进行示例性的说明。
如图2所示,本申请实施例提供一种控制输出操作提示的方法,该方法包括:
101、终端获取用户的第一瞳孔参数。
其中,该第一瞳孔参数用于表征用户的当前瞳孔大小。
可选的,上述第一瞳孔参数可以为以下两种可能的情况:
第一种情况:第一瞳孔参数为用户的瞳孔尺寸与虹膜尺寸的比值。
其中,瞳孔尺寸包括瞳孔半径、瞳孔直径或者瞳孔面积,虹膜尺寸包括虹膜半径、虹膜直径或者虹膜面积。在瞳孔尺寸为瞳孔半径的情况下,虹膜尺寸为虹膜半径;在瞳孔尺寸为瞳孔直径的情况下,虹膜尺寸为虹膜直径;在瞳孔尺寸为瞳孔面积的情况下,虹膜尺寸为虹膜面积。
虹膜俗称为“黑眼球”,虹膜的中央有一个小圆孔,称为瞳孔,一般光线会从瞳孔进入眼内。虹膜内包括有环绕瞳孔排列的平滑肌,叫缩瞳肌(也称瞳孔括约肌),其受副交感神经支配以缩小瞳孔;自瞳孔周围呈放射状排列的平滑肌,叫散瞳肌(也称瞳孔开大肌),其受交感神经支配以放大瞳孔。通常在强光照射眼睛时,瞳孔括约肌收缩,限制光亮进入;在光线微弱时,或者在用户遇到困难(例如,用户在终端当前显示的界面上不知道如何操作)时,瞳孔开大肌放大瞳孔,增加光线进入。示例性的,如图3所示,为人眼中瞳孔和虹膜的示意图。
示例性的,如图4所示为瞳孔放大和缩小的示意图,其中示出了未受到外界刺激时的瞳孔大小的示意图,瞳孔缩小后瞳孔大小的示意图,以及瞳孔放大后瞳孔大小的示意图。可以看出通常虹膜尺寸不会有什么变化,但是瞳孔会因外界刺激而放大或者缩小。
第二种情况:第一瞳孔参数为用户的瞳孔尺寸。
其中,瞳孔尺寸包括瞳孔半径、瞳孔直径或者瞳孔面积。
可选的,第一瞳孔参数除了可以为上述第一种情况和第二种情况以外,还可以为其他任意的可以表征用户的当前瞳孔大小的参数,本申请实施例不作限定。
本申请实施例中,提供了第一瞳孔参数的多种可能,为灵活多样的实现本申请实施例提供的控制输出操作提示的方法提供数据基础。
本申请实施例中,除第一瞳孔参数之外还涉及到多个其他瞳孔参数的概念,例如,标准瞳孔参数、第二瞳孔参数和第三瞳孔参数等。
需要说明的是,本申请实施例中所涉及的有关瞳孔参数的概念均用于表征瞳孔的大小,其中,第一、第二、第三和标准这些词语仅是用来区别不同的瞳孔参数,例如,第一瞳孔参数和第二瞳孔参数仅代表两种不同的瞳孔参数,而不代表其顺序。基于此,后续本申请实施例中涉及的有关瞳孔参数的概念不再作重复解释。
本申请实施例中,终端获取用户的第一瞳孔参数的具体实现方法将会在后续实施例的内容中进行说明。
102、终端获取该用户的面部的第一光强度。
可选的,本申请实施例中,上述第一光强度可以是在终端获取用户的第一瞳孔参数时,获取的用户的面部的第一光强度。
可选的,终端可以通过设置在终端中的光强传感器来检测用户的面部的反射光的光强度,以获取到用户的面部的第一光强度;终端还可以通过前置摄像头获取包括用户面部的图像,并根据该图像中用户面部图像的亮度,确定用户的面部的第一光强度。
103、终端确定该用户在第一光强度下的标准瞳孔参数。
其中,上述标准瞳孔参数用于表征该用户的标准瞳孔大小。
可选的,上述第一光强度下的标准瞳孔参数可以是预先在用户未受到外界刺激的情况下,在第一光强度下检测到的该用户的瞳孔大小。
作为一种可选的实现方式,本申请实施例中,可以基于用户正常使用终端,并在终端的界面上可以流畅的操作的情境,预先录入第一光强度下的标准瞳孔参数。
可选的,本申请实施例还可以预先录入多个光强度下的标准瞳孔参数,在获取第一光强度下的标准瞳孔参数时,可以从预先录入的多个光强度下的标准瞳孔参数中获取第一光强度下的标准瞳孔参数。
作为另一种可选的实现方式,上述第一光强度下的标准瞳孔参数还可以是根据用户预先在某一光强度下录入的瞳孔参数计算得到的第一光强度下用户的正常瞳孔参数。具体的,根据用户预先在任意光强度下录入的瞳孔参数计算该用户在第一光强度下的标准瞳孔参数的方法将在后续实施例的内容中进行说明。
本申请实施例中,由于光强度会对瞳孔的放大和缩小造成不同的影响,因此在上述第一瞳孔参数是第一光强度下用户的当前瞳孔参数的情况下,终端需要相应的确定该用户在该第一光强度下的标准瞳孔参数来作为后续判断用户的瞳孔是否放大的基准,从而可以提高判断的准确度。
需要说明的是,本申请实施例中,第一瞳孔参数与标准瞳孔参数、第二瞳孔参数以及第三瞳孔参数所代表的物理量一致,以第一瞳孔参数与标准瞳孔参数为例,在第一瞳孔参数为瞳孔半径时,相应的上述标准瞳孔参数也为瞳孔半径;在第一瞳孔参数为瞳孔直径时,相应的上述标准瞳孔参数也为瞳孔直径;在第一瞳孔参数为瞳孔面积时,相应的上述标准瞳孔参数也为瞳孔面积;在第一瞳孔参数为瞳孔半径与虹膜半径的比值时,相应的上述标准瞳孔参数也为瞳孔半径与虹膜半径的比值;在第一瞳孔参数为瞳孔直径与虹膜直径的比值时,相应的上述标准瞳孔参数也为瞳孔直径与虹膜直径的比值;在第一瞳孔参数为瞳孔面积与虹膜面积的比值时,相应的上述标准瞳孔参数也为瞳孔面积与虹膜面积的比值。
可选的,在上述103之前,本申请实施例中可先验证用户的身份,再确定该用户在第一光强度下的标准瞳孔参数。
示例性的,终端可以获取该用户的生物特征信息,并将获取的该用户的生物特征信息与预存的所有用户的生物特征信息依次进行对比,在获取的该用户的生物特征信息与预存的所有用户的生物特征信息中的目标用户的生物特征信匹配的情况下,可以确定该用户为目标用户,并进一步确定该目标用户在第一光强度下的标准瞳孔参数。
可选的,上述生物特征信息可以为面部特征信息和虹膜特征信息中的至少一种。
上述终端可以通过前置摄像头获取包括该用户的面部特征的图像信息,并从该图像信息中提取该用户的面部特征信息和虹膜特征信息中的至少一种。
进一步的,可以通过人脸识别的技术或者虹膜识别的技术来验证该用户的身份,并获取与该用户的身份所对应的标准瞳孔参数。
由于用户的年龄和个体差异对瞳孔大小的影响,对于不同的用户,其在第一光强度下的标准瞳孔参数会有所不同,因此本申请实施例中,将一个用户的当前瞳孔大小与该一个用户在同一光强度下的标准瞳孔大小进行比较,可以提高后续判断用户瞳孔是否放大的精确度。
104、终端判断该用户的当前瞳孔大小是否大于该标准瞳孔大小。
本申请实施例中,在用户的当前瞳孔大小大于该标准瞳孔大小的情况下,执行下述105,在用户的当前瞳孔大小不大于该标准瞳孔大小的情况下,可以返回执行上述101。
105、终端自动输出操作提示。
其中,该操作提示用于引导用户在终端当前显示的界面上执行操作。本申请实施例中,第一瞳孔参数可以表征用户的当前瞳孔大小,也即可以表征用户在第一光强度下的当前瞳孔大小,而第一光强度下的标准瞳孔大小可以表征用户在第一光强度下的正常瞳孔大小,通过第一瞳孔参数与该标准瞳孔参数,可以分别获知用户的当前瞳孔大小和用户在第一光强度下的标准瞳孔大小,将两者进行比较可以准确的获知该用户相对于正常情况下瞳孔是否放大,并在确定用户的瞳孔放大的情况下,认为用户在终端当前显示的界面上操作的过程中遇到了困难,终端为用户自动输出操作提示,以智能的引导用户在界面上进行操作。
其中,上述终端当前显示的界面可以为终端显示的任意界面。例如,可以为终端中系统应用的界面,也可以为终端中第三方应用的界面。
可选的,本申请实施例中,终端自动输出操作提示,包括:终端通过语音、文字、标识和动画中的至少一种方式自动输出操作提示。
可以理解的是,本申请实施例中,在终端自动输出操作提示时可以通过语音、文字、标识和动画中的任意一种方式自动输出操作提示,也可以通过语音、文字、标识和动画中的两种或两种以上的方式自动输出操作提示。
下面将以示例的方式,结合附图对终端输出操作提示的几种方式进行说明。
示例性的,如图5所示,终端当前显示拍照预览界面,此时通过上述104确定用户的瞳孔放大的情况下,可以通过文字方式输出操作提示“您是否想尝试更多拍照功能”。进一步可选的,在输出操作提示“您是否想尝试更多拍照功能”的基础上,还可以为在该拍照预览界面上显示多种拍照功能的选项,如图5中所示可以显示出拍照功能X、拍照功能Y和拍照功能Z的选项,以供用户选择。
示例性的,结合图5,如图6所示,在终端以文字方式输出操作提示的基础上,还可以同时采用语音方式输出操作提示,例如在通过图6所示的终端的扬声器11输出“您是否想尝试更多拍照功能”的语音,以此来引导用户选择不同拍照功能。
示例性的,如图7A和图7B所示,终端当前显示闹钟设置界面,此时通过上述104确定用户的瞳孔放大的情况下,可以通过动画形式播放显示设置闹钟过程的动画。
示例性的,如图8所示,终端当前显示拍照预览界面,并在拍照预览界面中显示有多种拍摄模式,此时可以通过手势和箭头的标识来引导用户通过滑动手势来触发显示更多未示出的拍照模式。进一步的,还可以通过文字方式输出“沿箭头方向滑动可显示更多拍摄模式”来引导用户通过滑动手势来触发显示更多未示出的拍照模式。
需要说明的是,本申请实施例中仅对一些可能的输出提示信息的方式和界面进行了说明,在实际应用中还可以通过上述语音、文字、标识和动画以外的其他方式输出操作提示,以能够引导用户在终端当前显示的界面上执行操作为准,本申请实施例不作限定。
可选的,本申请实施例中,可以在用户的当前瞳孔大小大于该标准瞳孔大小的情况下,确定需要输出操作提示。但是对于具体输出何种操作提示,可以基于用户当前显示的界面,以及用户在该当前显示的界面上的最近的几次操作决定。
本申请实施例中,终端针对不同的界面可以保存与其对应的至少一种操作提示。
可选的,在终端保存的与当前显示的界面对应的从操作提示仅有一种的情况下,则输出这一种操作提示。
可选的,在终端保存的与当前显示的界面对应的操作提示有两种或两种以上的情况下,终端则可以根据用户在该当前显示的界面上的最近几次的操作为用户提供相应的提示。
示例性的,当用户在图7A所示的闹钟设置界面上最近几次的操作为点击数字“07”所在的区域的情况下,终端可以显示如图7A所示的手指操作的动画,演示可以通过操作“07”上方的“+”所在区域来增大小时数,以及可以通过操作“07”下方的“-”所在区域来减小小时数;在用户在图7A所示的闹钟设置界面上最近几次的操作为点击数字“00”所在的区域的情况下,终端可以显示如图7B所示的手指操作的动画,演示可以通过操作“00”上方的“+”所在区域来增大分钟数至“20”,以及可以通过操作“00”下方的“-”所在区域来减小小时数。
示例性的,当用户在图8所以的拍照预览界面上最近几次的操作为点击“模式4”和“模式5”所在的区域,则终端可以显示图8中的箭头和手指的标识,以及“沿箭头方向滑动可显示更多拍摄模式”的文字,以引导用户如何选择更多拍摄模式。
本申请实施例中提供了多种输出操作提示的方式,从而终端可以通过灵活多变的方式为提供用户提供引导,提高终端的人机交互性能。
本申请实施例提供的控制输出操作提示的方法中,终端可以获取用户的第一瞳孔参数(用于表征该用户的当前瞳孔大小)和该用户的面部的第一光强度,并确定该用户在第一光强度下的标准瞳孔参数(用于表征用户的标准瞳孔大小),再根据第一瞳孔参数获知用户的当前瞳孔大小,在根据标准瞳孔大小获知用户在第一光强度下的标准瞳孔大小的情况下,比较用户的当前瞳孔大小是否大于该标准瞳孔大小,以及在用户的当前瞳孔大小大于该标准瞳孔大小的情况下,输出用于引导该用户在终端当前显示的界面上执行操作的操作提示。通过该方案,可以在判断出用户的当前瞳孔大小大于该标准瞳孔大小的情况下,确认该用户在终端当前显示的界面上执行操作的过程中遇到困难,此时可以自动输出操作提示来引导用户操作,从而可以智能的引导用户在界面上进行操作。
可选的,本申请实施例中,终端在用户的当前瞳孔大小大于上述标准瞳孔大小的情况下,自动输出操作提示,包括:在用户的当前瞳孔大小相比较于标准瞳孔大小放大了预设倍数的情况下,自动输出操作提示,该预设倍数大于1。
示例性的,结合图2,如图9所示,本申请实施例提供一种控制输出操作提示的方法,上述图2中的104可以替换为下述104a。
104a、终端判断该用户的当前瞳孔大小相比较于该标准瞳孔大小是否放大了预设倍数。
本申请实施例中,在该用户的当前瞳孔大小相比较于该用户的标准瞳孔大小放大了预设倍数的情况下,执行上述105,在该用户的当前瞳孔大小相比较于该用户的标准瞳孔未放大预设倍数的情况下,执行上述101。
其中,预设倍数可以为预先设置的一个倍数值。该倍数值可以通过实际的实验结果来确定。
示例性的,可以采集多组用户在看到不会操作的界面时瞳孔相较于该用户的标准瞳孔的放大倍数的数据,并通过该多组数据来计算放大倍数的平均值,将该平均值作为上述预设倍数。
可选的,本申请实施例中上述预设倍数可以为1.3,1.5或2,具体的该预设倍数的数值的确定本申请实施例不作限定,可以根据实际情况进行设置。
本申请实施例中,终端可以在该用户的当前瞳孔大小相比较于该标准瞳孔大小放大了预设倍数的情况下,输出提示信息,也就是说,在用户的当前瞳孔大小相比于该标准瞳孔大小放大到一定程度的情况下,输出提示信息,这样可以避免用户因为其他因素对瞳孔的影响,而误输出提示信息的情况,提高输出提示信息的精确度。
可选的,针对上述第一瞳孔参数的第一种情况和第二种情况,上述101的实现方式有所不同,下面将分别针对上述第一瞳孔参数的第一种情况和第二种情况进行说明。
针对第一种情况:
示例性的,结合图2,如图10所示,本申请实施例提供一种控制输出操作提示的方法,上述图2中的101可以替换为下述101a、101b、101c和101d。
101a、终端采集包括用户的面部信息的第一图像信息。
本申请实施例中,终端可以采用设置在终端中的图像采集装置采集包括用户的面部信息的第一图像信息。
其中,上述图像采集装置可以为终端的前置摄像头。
101b、终端从第一图像信息中确定该用户的瞳孔尺寸所对应的像素点的第一数量,以及该用户的虹膜尺寸所对应的像素点的第二数量。
本申请实施例中,终端可以在采集到包括用户的面部信息的第一图像信息之后,可以从第一图像信息中先确定包括用户眼部信息的图像信息的区域,然后从该区域中确定该用户的瞳孔尺寸所对应的像素点,以及该用户的虹膜尺寸所对应的像素点,前后确定瞳孔尺寸所对应的像素点的第一数量,以及该虹膜尺寸所对应的像素点的第二数量。
示例性的,假设上述瞳孔尺寸为瞳孔半径,虹膜尺寸为虹膜半径,则终端是从第一图像中先确定包括用户眼部信息的图像信息的图像区域,然后从该图像区域中确定该用户的瞳孔半径所对应的像素点的数量,以及从该区域中确定该用户的虹膜半径所对应的像素点的第二数量;假设上述瞳孔尺寸为瞳孔直径,虹膜尺寸为虹膜直径,则终端是从第一图像中先确定包括用户眼部信息的图像信息的区域,然后从该区域中确定该用户的瞳孔直径所对应的像素点的数量,以及从该区域中确定该用户的虹膜直径所对应的像素点的第二数量;假设上述瞳孔尺寸为瞳孔面积,虹膜尺寸为虹膜面积,则终端是从第一图像中先确定包括用户眼部信息的图像信息的区域,然后从该区域中确定该用户的瞳孔面积所对应的像素点的数量,以及从该区域中确定该用户的虹膜半径所对应的像素点的第二面积。
101c、终端计算第一数量与第二数量的数量比值。
101d、终端将数量比值作为第一瞳孔参数。
由于通常虹膜尺寸不会因为外界因素的影响而改变,因此在终端将第一数量与第二数量的数量比值作为用户表征用户的当前瞳孔大小的第一瞳孔参数的情况下,无需考虑终端与用户之间的距离对检测的第一瞳孔参数的准确性的影响,从而可以简化获取第一瞳孔参数的方式,并且能够保证获取该第一瞳孔参数的准确性。
针对第二种情况,结合图2,如图11所示,本申请实施例提供一种控制输出操作提示的方法,上述图2中的101可以替换为下述101e、101f和101g。
101e、终端检测用户的瞳孔与基准点所形成的圆椎体的锥角。
其中,该基准点为终端的显示屏所在平面上的任意一点。
本申请实施例中,终端可以通过结构光传感器确定用户的瞳孔与显示屏所在平面上的任意一点所形成的假想椎体的锥角,并采用角度传感器来测量这一锥角的角度值。
结构光传感器是一种采用了3D结构光技术的传感器,3D结构光技术主要是通过近红外激光器发射的具有一定结构特征的光线,投射到待测物体上,再由专门的红外摄像头进行图像采集,由于这种具备一定结构的光线可以探测到待测物体的不同深度区域,而导致采集后生成的图像相对原始光线结构发生变化,然后通过运算单元将这种结构的变化换算成深度信息,我们便获得了待测物体的三维结构。
本申请实施例中,在采用结构光传感器检测用户的面部(具体可以为检测用户的瞳孔)时,可以获得用户瞳孔的三维结构,并以该瞳孔作为圆锥底面,将终端的显示屏所在平面上的一点作为圆锥的顶点以构建出假想的椎体。示例性的,如图12所示,为基于瞳孔作为圆锥底面X,将终端的显示屏所在平面上的一点O作为圆锥的顶点,所构建出的假想椎体,其中,角度α为该圆锥体的锥角。
进一步的,终端可以采用角度传感器来测量所构建的该假想的椎体的锥角的角度值。
角度传感器通常也称为旋转编码器,角度传感器的内部包括一个可转动的轴,通过轴的旋转,切割光栅,来进行角度的检测。以360个脉冲的角度常感器为例,每转动一圈输出360个脉冲,则一个脉冲代表1°。本申请实施例中,在进行角度的检测时角度传感器中的轴可以以该假想的椎体的锥角的一个边作为基准进行转动,直到转动至该轿厢的椎体的另外一个边,停止转动,统计该过程中输出的脉冲个数,以计算出该假想的椎体的锥角的角度值。
可选的,由于在实际应用中可能存在与用户并未正视终端的显示屏的情况,这时结构光传感器检测到的可能是一个椭圆锥,其锥角并不唯一,本申请实施例中可以取椭圆锥的最大锥角来计算用户的第一瞳孔参数。
可选的,本申请实施例中,结构光传感器还可以通过多次检测,得到多个椎体的锥角,并求取该多个椎体的锥角的平均值来计算用户的第一瞳孔参数。
101f、终端检测该用户的瞳孔的中心点与基准点之间的直线距离。
本申请实施例中,终端可以通过距离传感器获取该用户的瞳孔的中心点与基准点之间的直线距离。
101g、终端根据锥角与距离,计算该用户的第一瞳孔参数。
示例性的,以计算瞳孔半径为例,可以根据公式三:R=L*tan(α/2),计算瞳孔半径。
其中,R代表瞳孔半径,L为终端检测到该用户的瞳孔的中心点与基准点之间的直线距离,α为用户的瞳孔与基准点所形成的圆椎体的锥角的角度值。
可选的,本申请实施例中,上述103可以通过两种可选的方式实现,下面将分别通过两种可选的实现方式进行说明。
本申请实施例中,在检测第一瞳孔参数时,考虑了用户的瞳孔的中心点与基准点之间的直线距离,并根据用户的瞳孔与基准点所形成的圆椎体的锥角与该距离计算该用户的第一瞳孔参数,从而可以准确的计算出该用户的第一瞳孔参数。
第一种可选的实现方式,结合图2,如图13所示,本申请实施例提供一种控制输出操作提示的方法,在上述图2中的103之前,本申请实施例还包括下述步骤106。
106、终端获取用户的第二瞳孔参数和该用户的面部的第二光强度。
本申请实施例中,可以预先录入用户的第二瞳孔参数,并获取录入该用户的第二瞳孔参数时的第二光强度。
可选的,本申请实施例中,终端可以在用户采用人脸识别功能解锁该终端时,执行上述106,以预先录入用户的第二瞳孔参数,并获取录入该用户的第二瞳孔参数时的第二光强度。
本申请实施例中,可以基于用户面对不同难度问题时的情绪,录入用户的瞳孔参数和光强度。
作为一种可能的实现方式,本申请实施例中,在用户使用终端时,终端可以询问用户一系列由易到难的需要思考的问题,记录用户无法解答,或者需要较长时间进行解答的情形下,录入用户在当前情绪下的瞳孔参数作为上述的第二瞳孔参数,并将此时采用光强传感器采集到的用户的面部的光强度作为上述第二光强度。
作为另一种可能的实现方式,本申请实施例中,终端可以显示一些由易到难的界面,记录用户无法流畅的操作的情境下,录入用户在当前情绪下的瞳孔参数作为上述的第二瞳孔参数,并将此时采用光强传感器采集到的用户的面部的光强度作为上述第二光强度。
可选的,在采用上述可能的实现方式获取用户的瞳孔参数和面部的光强度的过程中,还可以基于不同的场景进行,例如,可以基于终端停留的办公室、教室、健身房和室外等不同场景来录入用户的瞳孔参数和面部的光强度。相应的,通过录入的用户的瞳孔参数和面部的光强度可以计算出在不同场景下的不同光强度下的标准瞳孔参数。
基于上述可选的方法,本申请实施例还可以基于终端检测到第一瞳孔参数时的定位位置,确定用户所处的场景,然后获取该场景下该用户的第一光强度下的标准瞳孔参数,并将第一瞳孔参数所指示的用户的当前瞳孔大小,与该标准瞳孔参数所表征的用户的标准瞳孔参数进行比较,以判断用户是否在终端当前显示的界面上操作的过程中遇到了困难。从而可以避免由于不同场景对用户的瞳孔影响,而影响到判断的准确度。
具体的,获取用户的第二瞳孔参数的具体方式与上述获取用户的第一瞳孔参数的具体方式类似,且获取用户的面部的第二光强度的方式与上述获取用户的第一光强度的方式类似,因此对于此处终端获取用户的第一瞳孔参数和该用户的面部的第二光强度的方法,可以参照上述终端获取用户的第一瞳孔参数和获取该用户的面部的第一光强度的方法,此处不作重复性说明。
需要说明的是,本申请实施例中不限定上述101和102,与上述106之间的执行顺序、即可以先执行101和102,后执行106;也可以先执行106,后执行101和102。
图13中,上述图2中的103可以替换为下述103a。
103a、终端根据第一光强度、第二瞳孔参数、第二光强度、第三光强度和第三瞳孔参数,计算该用户在第一光强度下的标准瞳孔参数。
其中,第三瞳孔参数为第三光强度下的瞳孔参数,第三光强度为与第二光强度不同的光强度。
一种可能的情况:该第三光强度可以是光强度为0的情况下,该第三瞳孔参数可以为光强度为0时人的瞳孔参数。
由于在光强度为0时,人的瞳孔参数一般比较固定。例如在光强度为0时,人的瞳孔半径与虹膜半径的比值通常为0.5。只是针对不同人种和/或不同国家的人会有细微差异。
可选的,本申请实施例中,针对不同人种和/或不同国家的人,可以确定光强度为0时的不同的瞳孔参数。示例性的,可以针对销售至不同人种和/或不同国家的人的终端中,设置相对应的光强度为0时的瞳孔参数。又示例的,可以针对每个终端设置多个选项,其中,每个选项所对应的人种和/或国家可以不同,用户可以针对自身的人种和/或所属国家选择相对应的光强度为0时的瞳孔参数。
另一种可能的情况,该第三光强度不是光强度为0的情况下,该第三瞳孔参数可以与上述第二瞳孔参数一样为预先录入的同一用户的瞳孔参数,而该第三光强度可以为录入该第三瞳孔参数时该用户的面部的光强度。
可选的,可以在预先录入用户的瞳孔参数时,可以先录入一次上述第二瞳孔参数,并获取录入该第二瞳孔参数时用户的面部的第二光强度,然后终端可以调节显示屏亮度值,以使得用户的面部的光强度发生变化,然后再录入一次上述第三瞳孔参数,并获取录入该第三瞳孔参数时用户的面部的第三光强度。
可选的,对于不同类型的瞳孔参数,上述103a在实现的过程中有所不同。
本申请实施例中第一瞳孔参数可以分为以下两种类型:
第一种类型:第一瞳孔参数包括:瞳孔半径与虹膜半径的比值、瞳孔直径与虹膜直径的比值、瞳孔半径和瞳孔直径中的任一项。
第二种类型:第一瞳孔参数包括:瞳孔面积与虹膜面积的比值、瞳孔面积中的任一项。
在上述第一瞳孔参数为上述第一种类型的情况下,上述103a具体实现方法包括:
A、终端根据第一光强度、第二瞳孔参数、第二光强度、第三光强度和第三瞳孔参数,结合公式一,计算用户在第一光强度下的标准瞳孔参数。
其中,R′用于表示标准瞳孔参数,R0用于表示第二瞳孔参数,I用于表示第一光强度,I0用于表示第二光强度,Rk用于表示第三瞳孔参数,Ik用于表示第三光强度。
本申请实施例中,可以将第一光强度、第二瞳孔参数、第二光强度、第三光强度和第三瞳孔参数的具体数值代入上述公式一,以得到在第一光强度下的标准瞳孔参数的值。
在上述第一瞳孔参数为上述第二种类型的情况下,上述103a具体实现方法包括:
B、终端根据第一光强度、第二瞳孔参数、第二光强度、第三光强度和第三瞳孔参数,结合公式二,计算用户在第一光强度下的标准瞳孔参数。
其中,S′用于表示标准瞳孔参数,S0用于表示第二瞳孔参数,I用于表示第一光强度,I0用于表示第二光强度,Sk用于表示第三瞳孔参数,Ik用于表示第三光强度。
本申请实施例中,可以将第一光强度、第二瞳孔参数、第二光强度、第三光强度和第三瞳孔参数的具体数值代入上述公式二,以得到在第一光强度下的标准瞳孔参数的值。
本申请实施例中,针对第一瞳孔参数的两种不同类型,提供了不同的适用公式来计算用户在第一光强度下的标准瞳孔参数,使得本申请实施例的实现方式更加灵活多样。
第二种可选的实现方式,结合图2,如图14所示,本申请实施例提供一种控制输出操作提示的方法,在上述图2中的103之前,本申请实施例还包括下述步骤106和107。
106、终端获取用户的第二瞳孔参数和该用户的面部的第二光强度。
107、终端根据至少一个光强度、第二瞳孔参数、第二光强度、第三光强度和第三瞳孔参数,计算至少一个光强度中的不同光强度下的标准瞳孔参数,以得到至少一个标准瞳孔参数。
其中,第三瞳孔参数为第三光强度下的瞳孔参数,第三光强度为与第二光强度不同的光强度。
本申请实施例中,终端可以根据至少一个光强度中的每个光强度、第二瞳孔参数、第二光强度、第三光强度和第三瞳孔参数,计算至少一个光强度中的不同光强度下的标准瞳孔参数,其中,根据每个光强度、第二瞳孔参数、第二光强度、第三光强度和第三瞳孔参数,可以计算出每个光强度下的标准瞳孔参数。其计算方法与上述103a中计算标准瞳孔参数的方法类似,此处不再重复说明。
需要说明的是,本申请实施例中不限定上述101和102,与上述106和107之间的执行顺序、即可以先执行101和102,后执行106和107;也可以先执行106和107,后执行101和102。
图14中,上述图2中的103可以替换为下述103b:
103b、终端从至少一个标准瞳孔参数中确定第一光强度下的标准瞳孔参数。
可选的,本申请实施例中,终端可以预先计算出至少一个光强度下的不同标准瞳孔参数,并将其保存至终端中。
在终端确定了第一光强度之后,就可以从保存的标准瞳孔参数中获取与第一光强度对应的标准瞳孔参数。
示例性的,可以将不同光强度与不同光强度下的标准瞳孔参数的值以对应关系的方式进行保存,从而在需要获取某一光强度下的标准瞳孔参数时,可以通过保存的对应关系直接确定出该某一光强度下的标准瞳孔参数。
下面以对应关系表的形式,示例性的,表示不同光强度与不同光强度下的标准瞳孔参数的值的对应关系,如下表1所示。
表1
其中,结合表1可以在确定了第一光强度的情况下,在表1中通过查询可以确定出第一光强度下的标准瞳孔参数为第一标准瞳孔参数。
本申请实施例中,相比于实时的根据公式计算用户在第一光强度下的标准瞳孔参数,提前计算好不同光强度下的至少一个标准瞳孔参数,并在需要采用第一光强度下的标准瞳孔参数时,从至少一个标准瞳孔参数中去获取的方式可以提高计算效率,减小终端功耗。
可选的,本申请实施例中,终端获取用户的第一瞳孔参数,以及获取用户的面部的第一光强度,包括:终端在检测到用户在终端当前显示的界面上的操作不顺畅的情况下,获取用户的第一瞳孔参数和用户的面部的第一光强度。
可选的,终端检测到用户在终端当前显示的界面上的操作不顺畅包括:终端检测到用户针对终端当前显示的界面的操作间隔时长大于或等于预设时长,或者,终端检测到用户针对终端当前显示的界面在预设时间内执行同一操作的次数大于或等于预设次数。
可选的,上述预设时长可以通过预先统计多次正常情况下,用户在终端当前显示的界面上的操作间隔时长,并将最大的操作间隔时长作为该预设时长。
可选的,终端检测到用户针对终端当前显示的界面的操作间隔时长大于或等于预设时长,具体可以包括:终端检测到用户针对终端当前显示的界面的操作间隔时长比预设时长要长一定比例以上(例如,终端检测到用户针对终端当前显示的界面的操作间隔时长比预设时长要长30%以上)。
示例性的,假设预设时长5秒,那么在检测到用户在当前显示的界面上两次操作之间的操作间隔时长为10秒(相比于5秒,要长100%)时,确定用户在终端当前显示的界面上的操作不顺畅。
另外,上述预设次数可以为2次、3次或5次,该预设时间可以为3秒、5秒或6秒。具体的该预设次数可以根据实际情况进行设置,本申请实施例不作限定。
可选的,在终端检测到针对终端当前显示的界面在预设时间内执行同一操作的次数大于或等于预设次数时,说明用户可能是由于不知道如何在该界面上进行操作,而在短时间内重复触发该界面上的同一个功能控件,从而可以确定用户在终端当前显示的界面上的操作不顺畅。
也就是说,终端获取用户的第一瞳孔参数,以及获取用户的面部的第一光强度,包括:终端在检测到用户针对终端当前显示的界面的操作间隔时长大于或等于预设时长的情况下,获取用户的第一瞳孔参数和用户的面部的第一光强度,或者,在检测到用户针对终端当前显示的界面在预设时间内执行同一操作的次数大于或等于预设次数的情况下,获取用户的第一瞳孔参数和用户的面部的第一光强度。
示例性的,结合图2,如图15所示,本申请实施例提供一种控制输出操作提示的方法,上述图2中的101和102可以替换为下述108至111。
108、终端检测用户针对终端当前显示的界面的操作间隔时长。
109、终端判断用户针对终端当前显示的界面的操作间隔时长是否大于或等于预设时长。
本申请实施例中,在终端判断出用户针对终端当前显示的界面的操作间隔时长大于或等于预设时长的情况下,执行下述110和111,在终端判断出用户针对终端当前显示的界面的操作间隔时长小于预设时长的情况下,返回执行上述108。
110、终端获取该用户的第一瞳孔参数和该用户的面部的第一光强度。
111、终端判断该第一光强度是否小于或等于预设光强度。
本申请实施例中,在第一光强度小于或等于预设光强度的情况下,执行上述103;在第一光强度大于预设光强度的情况下,返回执行上述108。
本申请实施例中,可以在确定用户在终端当前显示的界面上的操作不顺畅之后,再获取用户的第一瞳孔参数和第一光强度,可以进一步准确的判断用户是否在终端当前显示的界面上操作时遇到了困难,并且由于在确定用户在终端当前显示的界面上不存在操作不顺畅的情况后不再获取用户的第一瞳孔参数和第一光强度,可以节省终端的功耗。
可选的,上述预设光强度可以为对人眼的视网膜不会造成损害的最大光强度(标识为Imax),上述预设光强度还可以小于上述Imax,例如可以为0.7*Imax,或者0.8*Imax,对于具体的该预设光强度的数值,本申请实施例不作具体限定,以能够保证可以在对人眼的视网膜不会造成损害的情况下,执行本申请实施例提供的控制输出操作提示的方法为准。
也就是说在光强度大于该预设光强度的情况下,人眼可能因为受到较大光强的刺激而无法正常使用手机,此时瞳孔的放大情况也会异常,这种情况应该不再继续执行本申请实施例提供的控制输出操作提示的方法。而相应的,在光强度小于或等于预设光强度的情况下,光强度与瞳孔参数具有一定的变化关系(例如,光强度与瞳孔半径之间存在线性的变化关系),该情况下可以根据光强度确定对应的标准瞳孔参数,继续执行本申请实施例提供的控制输出操作提示的方法。进一步的,在确定第一光强度下的标准瞳孔参数之前,可以先判断第一光强度是否小于或等于预设光强度,基于此可以排除一些光强过大时的异常情况,增加确定标准瞳孔参数的准确性。
可选的,在用户的当前瞳孔大小大于用户的标准瞳孔大小的情况下,自动输出操作提示,可以包括以下两种可能的实现方式:
一种可能的实现方式中,在用户的当前瞳孔大小大于该标准瞳孔大小,且检测到用户针对终端当前显示的界面的操作间隔时长大于或等于预设时长的情况下,自动输出操作提示。
另一种可能的实现方式中,在用户的当前瞳孔大小大于该标准瞳孔大小,且检测到用户针对终端当前显示的界面在预设时间内执行同一操作的次数大于或等于预设次数的情况下,自动输出操作提示。
示例性的,结合图2,如图16所示,本申请实施例提供一种控制输出操作提示的方法,上述图2中的102之后,103之前还可以包括上述111,上述图2中的104之后,105之前还可以包括上述109。
图16中,在第一光强度小于或等于预设光强度的情况下,执行上述103;在第一光强度大于预设光强度的情况下,返回执行上述101。
图16中,在终端判断出用户针对终端当前显示的界面的操作间隔时长大于或等于预设时长的情况下,执行上述105,在终端判断出用户针对终端当前显示的界面的操作间隔时长小于预设时长的情况下,返回执行上述101。
本申请实施例中,不限定上述判断步骤104、109和111的执行顺序,也就是说这三个步骤还可以以图15和图16所示出的两种执行顺序以外的执行顺序实现,以能够实现本申请提供的控制输出操作提示的方法为准。
本申请实施例中,可以在确定用户瞳孔放大的情况下,进一步通过用户在终端当前显示的界面上的操作是否顺畅来判断,用户是否在终端当前显示的界面上的操作遇到了困难,并在满足用户瞳孔放大,且用户在终端当前显示的界面上的操作不顺畅的情况下,确定终端当前显示的界面上的操作遇到了困难,从而可以提高判断精度,可以更加准确的为用户输出操作提示,进一步提高人机交互性能。
需要说明的是,本申请实施例中,上述各个附图所示的控制输出操作提示的方法均是以结合本申请实施例中的一个附图为例实例性的说明的。具体实现时,上述各个附图所示的控制输出操作提示的方法还可以结合上述实施例中示意的其他可以结合的任意附图实现,此处不再赘述。
上述实施例中主要从终端的角度对本申请实施例提供的方案进行了介绍。可以理解的是,终端为了实现上述功能,其包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
本申请实施例可以根据上述方法示例对终端进行功能模块的划分,例如,可以对应各个功能划分各个功能模块,也可以将两个或两个以上的功能集成在一个处理模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。需要说明的是,本申请实施例中对模块的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
如图17所示,本申请实施例提供一种终端,该终端包括:
获取模块201,用于获取用户的第一瞳孔参数,以及获取用户的面部的第一光强度,第一瞳孔参数用于表征用户的当前瞳孔大小;
确定模块202,用于确定用户在第一光强度下的标准瞳孔参数,标准瞳孔参数用于表征用户的标准瞳孔大小;
输出模块203,用于在用户的当前瞳孔大小大于标准瞳孔大小的情况下,自动输出操作提示,操作提示用于引导用户在终端当前显示的界面上执行操作。
可选的,第一瞳孔参数为用户的瞳孔尺寸与虹膜尺寸的比值,其中,在瞳孔尺寸为瞳孔半径的情况下,虹膜尺寸为虹膜半径;在瞳孔尺寸为瞳孔直径的情况下,虹膜尺寸为虹膜直径;在瞳孔尺寸为瞳孔面积的情况下,虹膜尺寸为虹膜面积。
可选的,第一瞳孔参数为用户的瞳孔尺寸,其中,瞳孔尺寸包括瞳孔半径、瞳孔直径或者瞳孔面积。
可选的,获取模块201,具体用于在检测到用户针对终端当前显示的界面的操作间隔时长大于或等于预设时长的情况下,获取用户的第一瞳孔参数和用户的面部的第一光强度。
可选的,获取模块201,具体用于在检测到用户针对终端当前显示的界面在预设时间内执行同一操作的次数大于或等于预设次数的情况下,获取用户的第一瞳孔参数和用户的面部的第一光强度。
可选的,输出模块203,具体用于在用户的当前瞳孔大小大于标准瞳孔大小,且检测到用户针对终端当前显示的界面的操作间隔时长大于或等于预设时长的情况下,自动输出操作提示。
可选的,输出模块203,具体用于在用户的当前瞳孔大小大于标准瞳孔大小,且检测到用户针对终端当前显示的界面在预设时间内执行同一操作的次数大于或等于预设次数的情况下,自动输出操作提示。
可选的,输出模块203,具体用于在用户的当前瞳孔大小相比较于标准瞳孔大小放大了预设倍数的情况下,自动输出操作提示,预设倍数大于1。
可选的,在确定模块202确定用户在第一光强度下的标准瞳孔参数之前,获取模块201,还用于获取用户的第二瞳孔参数和用户的面部的第二光强度。
确定模块202,具体用于根据第一光强度、第二瞳孔参数、第二光强度、第三光强度和第三瞳孔参数,计算用户在第一光强度下的标准瞳孔参数,第三瞳孔参数为第三光强度下的瞳孔参数,第三光强度为与第二光强度不同的光强度。
可选的,第一瞳孔参数包括:瞳孔半径与虹膜半径的比值、瞳孔直径与虹膜直径的比值、瞳孔半径和瞳孔直径中的任一项;确定模块202,具体用于根据第一光强度、第二瞳孔参数、第二光强度、第三光强度和第三瞳孔参数,结合公式一,计算用户在第一光强度下的标准瞳孔参数;
其中,R′用于表示标准瞳孔参数,R0用于表示第二瞳孔参数,I用于表示第一光强度,I0用于表示第二光强度,Rk用于表示第三瞳孔参数,Ik用于表示第三光强度。
可选的,第一瞳孔参数包括:瞳孔面积与虹膜面积的比值、瞳孔面积中的任一项;确定模块202,具体用于根据第一光强度、第二瞳孔参数、第二光强度、第三光强度和第三瞳孔参数,结合公式二,计算用户在第一光强度下的标准瞳孔参数;
其中,S用于表示标准瞳孔参数,S0用于表示第二瞳孔参数,I用于表示第一光强度,I0用于表示第二光强度,Sk用于表示第三瞳孔参数,Ik用于表示第三光强度。
可选的,获取模块201还用于在确定模块202确定用户在第一光强度下的标准瞳孔参数之前,获取用户的第二瞳孔参数和用户的面部的第二光强度;根据至少一个光强度、第二瞳孔参数、第二光强度、第三光强度和第三瞳孔参数,计算至少一个光强度中的不同光强度下的标准瞳孔参数,以得到至少一个标准瞳孔参数,第三瞳孔参数为第三光强度下的瞳孔参数,第三光强度为与第二光强度不同的光强度;确定模块202,具体用于从至少一个标准瞳孔参数中确定第一光强度下的标准瞳孔参数。
可选的,第一瞳孔参数为用户的瞳孔尺寸与虹膜尺寸的比值,获取模块201,具体用于采集包括用户的面部信息的第一图像信息;从第一图像信息中确定用户的瞳孔尺寸所对应的像素点的第一数量,以及用户的虹膜尺寸所对应的像素点的第二数量;计算第一数量与第二数量的数量比值;将数量比值作为第一瞳孔参数。
可选的,第一瞳孔参数为用户的瞳孔尺寸,获取模块201,具体用于检测用户的瞳孔与基准点所形成的圆椎体的锥角,基准点为终端的显示屏所在平面上的任意一点;检测用户的瞳孔的中心点与基准点之间的直线距离;根据锥角与距离,计算用户的第一瞳孔参数。
可选的,确定模块202,具体用于在第一光强度小于或等于预设光强度的情况下,确定用户在第一光强度下的标准瞳孔参数。
可选的,获取模块201,具体用于通过语音、文字、标识和动画中的至少一种方式自动输出操作提示。
可选的,上述获取模块201、确定模块202和输出模块203还可以集成在一个处理模块中实现。
如图18所示,本申请实施例还提供一种终端,该终端包括:处理器301和存储有计算机指令的存储器302。处理器301中可以包括一个或多个处理元件,存储器302中可以包括一个或多个存储元件。
可选的,如图18所示,该终端还可以包括系统总线303,处理器301和存储器302通过系统总线303连接。其中,系统总线303可以包括数据总线、电源总线、控制总线和信号状态总线等。本实施例中为了清楚说明,在图18中将各种总线都示意为系统总线303。
当处理器301执行计算机指令时,处理器301用于获取用户的第一瞳孔参数,以及获取用户的面部的第一光强度,第一瞳孔参数用于表征用户的当前瞳孔大小;确定用户在第一光强度下的标准瞳孔参数,标准瞳孔参数用于表征用户的标准瞳孔大小;在用户的当前瞳孔大小大于标准瞳孔大小的情况下,自动输出操作提示,操作提示用于引导用户在终端当前显示的界面上执行操作。
可选的,第一瞳孔参数为用户的瞳孔尺寸与虹膜尺寸的比值,其中,在瞳孔尺寸为瞳孔半径的情况下,虹膜尺寸为虹膜半径;在瞳孔尺寸为瞳孔直径的情况下,虹膜尺寸为虹膜直径;在瞳孔尺寸为瞳孔面积的情况下,虹膜尺寸为虹膜面积。
可选的,第一瞳孔参数为用户的瞳孔尺寸,其中,瞳孔尺寸包括瞳孔半径、瞳孔直径或者瞳孔面积。
可选的,处理器301,具体用于在检测到用户针对终端当前显示的界面的操作间隔时长大于或等于预设时长的情况下,获取用户的第一瞳孔参数和用户的面部的第一光强度;
可选的,在检测到用户针对终端当前显示的界面在预设时间内执行同一操作的次数大于或等于预设次数的情况下,获取用户的第一瞳孔参数和用户的面部的第一光强度。
可选的,处理器301,具体用于在用户的当前瞳孔大小大于标准瞳孔大小,且检测到用户针对终端当前显示的界面的操作间隔时长大于或等于预设时长的情况下,自动输出操作提示;
可选的,处理器301,具体用于在用户的当前瞳孔大小大于标准瞳孔大小,且检测到用户针对终端当前显示的界面在预设时间内执行同一操作的次数大于或等于预设次数的情况下,自动输出操作提示。
可选的,处理器301,具体用于在用户的当前瞳孔大小相比较于标准瞳孔大小放大了预设倍数的情况下,自动输出操作提示,预设倍数大于1。
可选的,处理器301,还用于在确定用户在第一光强度下的标准瞳孔参数之前,获取用户的第二瞳孔参数和用户的面部的第二光强度;
可选的,处理器301,具体用于根据第一光强度、第二瞳孔参数、第二光强度、第三光强度和第三瞳孔参数,计算用户在第一光强度下的标准瞳孔参数,第三瞳孔参数为第三光强度下的瞳孔参数,第三光强度为与第二光强度不同的光强度。
可选的,第一瞳孔参数包括:瞳孔半径与虹膜半径的比值、瞳孔直径与虹膜直径的比值、瞳孔半径和瞳孔直径中的任一项;
处理器301,具体用于根据第一光强度、第二瞳孔参数、第二光强度、第三光强度和第三瞳孔参数,结合公式一,计算用户在第一光强度下的标准瞳孔参数;
其中,R′用于表示标准瞳孔参数,R0用于表示第二瞳孔参数,I用于表示第一光强度,I0用于表示第二光强度,Rk用于表示第三瞳孔参数,Ik用于表示第三光强度。
可选的,第一瞳孔参数包括:瞳孔面积与虹膜面积的比值、瞳孔面积中的任一项;
处理器301,具体用于根据第一光强度、第二瞳孔参数、第二光强度、第三光强度和第三瞳孔参数,结合公式二,计算用户在第一光强度下的标准瞳孔参数;
其中,S用于表示标准瞳孔参数,S0用于表示第二瞳孔参数,I用于表示第一光强度,I0用于表示第二光强度,Sk用于表示第三瞳孔参数,Ik用于表示第三光强度。
可选的,处理器301,还用于确定用户在第一光强度下的标准瞳孔参数之前,获取用户的第二瞳孔参数和用户的面部的第二光强度;根据至少一个光强度、第二瞳孔参数、第二光强度、第三光强度和第三瞳孔参数,计算至少一个光强度中的不同光强度下的标准瞳孔参数,以得到至少一个标准瞳孔参数,第三瞳孔参数为第三光强度下的瞳孔参数,第三光强度为与第二光强度不同的光强度;
处理器301,具体用于从至少一个标准瞳孔参数中确定第一光强度下的标准瞳孔参数。
可选的,处理器301,具体用于采集包括用户的面部信息的第一图像信息;从第一图像信息中确定用户的瞳孔尺寸所对应的像素点的第一数量,以及用户的虹膜尺寸所对应的像素点的第二数量;计算第一数量与第二数量的数量比值;将数量比值作为第一瞳孔参数。
可选的,处理器301,具体用于检测用户的瞳孔与基准点所形成的圆椎体的锥角,基准点为终端的显示屏所在平面上的任意一点;检测用户的瞳孔的中心点与基准点之间的直线距离;根据锥角与距离,计算用户的第一瞳孔参数。
可选的,处理器301,具体用于在第一光强度小于或等于预设光强度的情况下,确定用户在第一光强度下的标准瞳孔参数。
可选的,处理器301,具体用于通过语音、文字、标识和动画中的至少一种方式自动输出操作提示。
本申请实施例提供的终端能够实现上述方法实施例中所示的各个过程,并且达到相应的技术效果,为避免重复,此处不再赘述。
本申请实施例提供一种计算机可读存储介质,计算机可读存储介质上存储计算机指令,计算机指令被处理器执行时实现上述方法实施例中所示的各个过程。其中,该计算机可读存储介质可以为只读存储器(read-only memory,ROM)、随机存取存储器(randomaccessmemory,RAM)、磁碟或者光盘等。
本申请实施例提供一种计算机程序产品,计算机程序产品包括计算机指令,当计算机程序产品在处理器上运行时,使得处理器执行计算机指令,以实现上述方法实施例中所示的各个过程。
图19为实现本申请各个实施例的一种终端的硬件示意图,如图19所示,为了便于说明,仅示出了与本申请实施例相关的部分,具体技术细节未揭示的,请参照本申请实施例方法部分。以终端为手机为例进行说明:
图19示出的是与本申请实施例提供的终端相关的手机的部分结构的框图。参考图19,手机包括:射频(radio frequency,RF)电路1110、存储器1120、输入单元1130、显示单元1140、传感器1150、音频电路1160、无线保真(wireless fidelity,WiFi)模块1170、处理器1180、以及电源1190等部件。本领域技术人员可以理解,图11中示出的手机结构并不构成对手机的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
下面结合图19对手机的各个构成部件进行具体的介绍:
RF电路1110可用于收发信息或通话过程中,信号的接收和发送,特别地,将基站的下行信息接收后,给处理器1180处理;另外,将设计上行的数据发送给基站。通常,RF电路1110包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器(lownoiseamplifier,LNA)、双工器等。此外,RF电路1110还可以通过无线通信与网络和其他设备通信。上述无线通信可以使用任一通信标准或协议,包括但不限于全球移动通讯系统(globalsystem of mobile communication,GSM)、通用分组无线服务(general packetradioservice,GPRS)、码分多址(code division multiple access,CDMA)、宽带码分多址(wideband code division multiple access,WCDMA)、长期演进(long term evolution,LTE)、电子邮件、短消息服务(short messaging service,SMS)等。
存储器1120可用于存储软件程序以及模块,处理器1180通过运行存储在存储器1120的软件程序以及模块,从而执行手机的各种功能应用以及数据处理。存储器1120可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器1120可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。输入单元1130可用于接收输入的数字或字符信息,以及产生与手机的用户设置以及功能控制有关的键信号输入。具体地,输入单元1130可包括触控面板1131以及其他输入设备1132。触控面板1131,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板1131上或在触控面板1131附近的操作),并根据预先设定的程式驱动相应的连接装置。可选的,触控面板1131可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器1180,并能接收处理器1180发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板1131。除了触控面板1131,输入单元1130还可以包括其他输入设备1132。具体地,其他输入设备1132可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
显示单元1140可用于显示由用户输入的信息或提供给用户的信息以及手机的各种菜单。显示单元1140可包括显示面板1141,可选的,可以采用液晶显示器(liquidcrystaldisplay,LCD)、有机发光二极管(organic light-emitting diode,OLED)等形式来配置显示面板1141。进一步的,触控面板1131可覆盖显示面板1141,当触控面板1131检测到在其上或附近的触摸操作后,传送给处理器1180以确定触摸事件的类型,随后处理器1180根据触摸事件的类型在显示面板1141上提供相应的视觉输出。虽然在图19中,触控面板1131与显示面板1141是作为两个独立的部件来实现手机的输入和输入功能,但是在某些实施例中,可以将触控面板1131与显示面板1141集成而实现手机的输入和输出功能。
本申请实施例中,在以文字、动画、标记等需要显示的方式输出操作提示信息时,处理器1180可以控制显示单元1140自动输出操作提示信息。
手机还可包括至少一种传感器1150,比如光传感器、运动传感器以及其他传感器。具体地,光传感器可包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板1141的亮度,接近传感器可在手机移动到耳边时,关闭显示面板1141和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;至于手机还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
本申请实施例中,终端还可以包括结构光传感器、角度传感器和距离传感器,在处理器1180,获取用户的第一瞳孔参数的过程中,可以先通过结构光传感器和角度传感器检测用户的瞳孔与基准点所形成的圆椎体的锥角,并通过距离传感器检测用户的瞳孔的中心点与基准点之间的直线距离;然后根据该锥角与该距离,计算用户的第一瞳孔参数。该基准点为终端的显示屏所在平面上的任意一点。
本申请实施例中,终端还可以包括光强传感器,终端可以通过光强传感器检测用户的面部的光强度(例如第一光强度)。
音频电路1160、扬声器1161,传声器1162可提供用户与手机之间的音频接口。音频电路1160可将接收到的音频数据转换后的电信号,传输到扬声器1161,由扬声器1161转换为声音信号输出;另一方面,传声器1162将收集的声音信号转换为电信号,由音频电路1160接收后转换为音频数据,再将音频数据输出处理器1180处理后,经RF电路1110以发送给比如另一手机,或者将音频数据输出至存储器1120以便进一步处理。
本申请实施例中,在以语音形式输出操作提示信息时,处理器1180可以控制扬声器1161自动输出操作提示信息。WiFi属于短距离无线传输技术,手机通过WiFi模块1170可以帮助用户收发电子邮件、浏览网页和访问流式媒体等,它为用户提供了无线的宽带互联网访问。虽然图11示出了WiFi模块1170,但是可以理解的是,其并不属于手机的必须构成,完全可以根据需要在不改变发明的本质的范围内而省略。
处理器1180是手机的控制中心,利用各种接口和线路连接整个手机的各个部分,通过运行或执行存储在存储器1120内的软件程序和/或模块,以及调用存储在存储器1120内的数据,执行手机的各种功能和处理数据,从而对手机进行整体监控。可选的,处理器1180可包括一个或多个处理单元;优选的,处理器1180可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器1180中。
手机还包括给各个部件供电的电源1190(比如电池),优选的,电源可以通过电源管理系统与处理器1180逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
手机还可以包括图像采集模块1200。可选的,本申请实施例中可以采用图像采集模块1200采集包括用户面部特征的图像信息,并从中获取用户的瞳孔参数。
尽管未示出,手机还可以蓝牙模块、USB模块等,在此不再赘述。
在本申请实施例中,该终端所包括的处理器1180可以具有与上述图18所示的处理器301相同的功能。
上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。
其中,上述计算机程序产品可以包括一个或多个计算机指令。在计算机上加载和执行计算机程序指令时,全部或部分地产生按照本申请实施例的流程或功能。计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一计算机可读存储介质传输,例如,计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。计算机可读存储介质可以是计算机能够存储的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘(solid state disk,SSD))等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
Claims (29)
1.一种控制输出操作提示的方法,应用于终端,其特征在于,所述方法包括:
获取用户的第一瞳孔参数,以及获取所述用户的面部的第一光强度,所述第一瞳孔参数用于表征所述用户的当前瞳孔大小;
确定所述用户在所述第一光强度下的标准瞳孔参数,所述标准瞳孔参数用于表征所述用户的标准瞳孔大小;
在所述用户的当前瞳孔大小大于所述标准瞳孔大小的情况下,自动输出操作提示,所述操作提示用于引导所述用户在所述终端当前显示的界面上执行操作。
2.根据权利要求1所述的方法,其特征在于,
所述第一瞳孔参数为所述用户的瞳孔尺寸与虹膜尺寸的比值,其中,在所述瞳孔尺寸为瞳孔半径的情况下,所述虹膜尺寸为虹膜半径;在所述瞳孔尺寸为瞳孔直径的情况下,所述虹膜尺寸为虹膜直径;在所述瞳孔尺寸为瞳孔面积的情况下,所述虹膜尺寸为虹膜面积;
或者,
所述第一瞳孔参数为所述用户的瞳孔尺寸,其中,所述瞳孔尺寸包括瞳孔半径、瞳孔直径或者瞳孔面积。
3.根据权利要求1或2所述的方法,其特征在于,所述获取用户的第一瞳孔参数,以及获取所述用户的面部的第一光强度,包括:
在检测到用户针对所述终端当前显示的界面的操作间隔时长大于或等于预设时长的情况下,获取所述用户的第一瞳孔参数和所述用户的面部的第一光强度;
或者,
在检测到用户针对所述终端当前显示的界面在预设时间内执行同一操作的次数大于或等于预设次数的情况下,获取所述用户的第一瞳孔参数和所述用户的面部的第一光强度。
4.根据权利要求1或2所述的方法,其特征在于,所述在所述用户的当前瞳孔大小大于所述用户的标准瞳孔大小的情况下,自动输出操作提示,包括:
在所述用户的当前瞳孔大小大于所述标准瞳孔大小,且检测到所述用户针对所述终端当前显示的界面的操作间隔时长大于或等于预设时长的情况下,自动输出操作提示;
或者,
在所述用户的当前瞳孔大小大于所述标准瞳孔大小,且检测到所述用户针对所述终端当前显示的界面在预设时间内执行同一操作的次数大于或等于预设次数的情况下,自动输出操作提示。
5.根据权利要求1至4任一项所述的方法,其特征在于,在所述用户的当前瞳孔大小大于所述用户的标准瞳孔大小的情况下,自动输出操作提示,包括:
在所述用户的当前瞳孔大小相比较于所述标准瞳孔大小放大了预设倍数的情况下,自动输出操作提示,所述预设倍数大于1。
6.根据权利要求2所述的方法,其特征在于,所述确定所述用户在所述第一光强度下的标准瞳孔参数之前,所述方法还包括:
获取所述用户的第二瞳孔参数和所述用户的面部的第二光强度;
所述确定所述用户在所述第一光强度下的标准瞳孔参数,包括:
根据所述第一光强度、所述第二瞳孔参数、所述第二光强度、第三光强度和第三瞳孔参数,计算所述用户在所述第一光强度下的标准瞳孔参数,所述第三瞳孔参数为所述第三光强度下的瞳孔参数,所述第三光强度为与所述第二光强度不同的光强度。
7.根据权利要求6所述的方法,其特征在于,所述第一瞳孔参数包括:所述瞳孔半径与所述虹膜半径的比值、所述瞳孔直径与所述虹膜直径的比值、所述瞳孔半径和所述瞳孔直径中的任一项;
所述根据所述第一光强度、所述第二瞳孔参数、所述第二光强度、第三光强度和第三瞳孔参数,计算所述用户在所述第一光强度下的标准瞳孔参数,包括:
根据所述第一光强度、所述第二瞳孔参数、所述第二光强度、第三光强度和第三瞳孔参数,结合公式一,计算所述用户在所述第一光强度下的标准瞳孔参数;
其中,R′用于表示所述标准瞳孔参数,R0用于表示所述第二瞳孔参数,I用于表示所述第一光强度,I0用于表示所述第二光强度,Rk用于表示所述第三瞳孔参数,Ik用于表示所述第三光强度。
9.根据权利要求2所述的方法,其特征在于,所述确定所述用户在所述第一光强度下的标准瞳孔参数之前,所述方法还包括:
获取所述用户的第二瞳孔参数和所述用户的面部的第二光强度;
根据至少一个光强度、所述第二瞳孔参数、所述第二光强度、第三光强度和第三瞳孔参数,计算所述至少一个光强度中的不同光强度下的标准瞳孔参数,以得到至少一个标准瞳孔参数,所述第三瞳孔参数为所述第三光强度下的瞳孔参数,所述第三光强度为与所述第二光强度不同的光强度;
所述确定所述用户在所述第一光强度下的标准瞳孔参数,包括:
从所述至少一个标准瞳孔参数中确定所述第一光强度下的标准瞳孔参数。
10.根据权利要求2所述的方法,其特征在于,所述第一瞳孔参数为所述用户的瞳孔尺寸与虹膜尺寸的比值,所述获取用户的第一瞳孔参数,包括:
采集包括用户的面部信息的第一图像信息;
从所述第一图像信息中确定所述用户的瞳孔尺寸所对应的像素点的第一数量,以及所述用户的虹膜尺寸所对应的像素点的第二数量;
计算所述第一数量与所述第二数量的数量比值;
将所述数量比值作为所述第一瞳孔参数。
11.根据权利要求2所述的方法,其特征在于,所述第一瞳孔参数为所述用户的瞳孔尺寸,所述获取用户的第一瞳孔参数,包括:
检测所述用户的瞳孔与基准点所形成的圆椎体的锥角,所述基准点为所述终端的显示屏所在平面上的任意一点;
检测所述用户的瞳孔的中心点与所述基准点之间的直线距离;
根据所述锥角与所述距离,计算所述用户的第一瞳孔参数。
12.根据权利要求1至11任一项所述的方法,其特征在于,所述确定所述用户在所述第一光强度下的标准瞳孔参数,包括:
在所述第一光强度小于或等于预设光强度的情况下,确定所述用户在所述第一光强度下的标准瞳孔参数。
13.根据权利要求1至12任一项所述的方法,其特征在于,所述自动输出操作提示,包括:通过语音、文字、标识和动画中的至少一种方式自动输出操作提示。
14.一种终端,其特征在于,包括:
获取模块,用于获取用户的第一瞳孔参数,以及获取所述用户的面部的第一光强度,所述第一瞳孔参数用于表征所述用户的当前瞳孔大小;
确定模块,用于确定所述用户在所述第一光强度下的标准瞳孔参数,所述标准瞳孔参数用于表征所述用户的标准瞳孔大小;
输出模块,用于在所述用户的当前瞳孔大小大于所述标准瞳孔大小的情况下,自动输出操作提示,所述操作提示用于引导所述用户在所述终端当前显示的界面上执行操作。
15.一种终端,其特征在于,包括:处理器和存储有计算机指令的存储器;
当所述处理器执行所述计算机指令时,所述处理器用于获取用户的第一瞳孔参数,以及获取所述用户的面部的第一光强度,所述第一瞳孔参数用于表征所述用户的当前瞳孔大小;确定所述用户在所述第一光强度下的标准瞳孔参数,所述标准瞳孔参数用于表征所述用户的标准瞳孔大小;在所述用户的当前瞳孔大小大于所述标准瞳孔大小的情况下,自动输出操作提示,所述操作提示用于引导所述用户在所述终端当前显示的界面上执行操作。
16.根据权利要求15所述的终端,其特征在于,
所述第一瞳孔参数为所述用户的瞳孔尺寸与虹膜尺寸的比值,其中,在所述瞳孔尺寸为瞳孔半径的情况下,所述虹膜尺寸为虹膜半径;在所述瞳孔尺寸为瞳孔直径的情况下,所述虹膜尺寸为虹膜直径;在所述瞳孔尺寸为瞳孔面积的情况下,所述虹膜尺寸为虹膜面积;
或者,
所述第一瞳孔参数为所述用户的瞳孔尺寸,其中,所述瞳孔尺寸包括瞳孔半径、瞳孔直径或者瞳孔面积。
17.根据权利要求15或16所述的终端,其特征在于,所述处理器,用于获取用户的第一瞳孔参数,以及获取所述用户的面部的第一光强度具体包括:所述处理器,用于在检测到用户针对所述终端当前显示的界面的操作间隔时长大于或等于预设时长的情况下,获取所述用户的第一瞳孔参数和所述用户的面部的第一光强度;
或者,
所述处理器,具体用于在检测到用户针对所述终端当前显示的界面在预设时间内执行同一操作的次数大于或等于预设次数的情况下,获取所述用户的第一瞳孔参数和所述用户的面部的第一光强度。
18.根据权利要求15或16所述的终端,其特征在于,所述处理器,具体用于在所述用户的当前瞳孔大小大于所述标准瞳孔大小,且检测到所述用户针对所述终端当前显示的界面的操作间隔时长大于或等于预设时长的情况下,自动输出操作提示;
或者,
所述处理器,具体用于在所述用户的当前瞳孔大小大于所述标准瞳孔大小,且检测到所述用户针对所述终端当前显示的界面在预设时间内执行同一操作的次数大于或等于预设次数的情况下,自动输出操作提示。
19.根据权利要求15至18任一项所述的终端,其特征在于,所述处理器,具体用于在所述用户的当前瞳孔大小相比较于所述标准瞳孔大小放大了预设倍数的情况下,自动输出操作提示,所述预设倍数大于1。
20.根据权利要求16所述的终端,其特征在于,所述处理器,还用于在确定所述用户在所述第一光强度下的标准瞳孔参数之前,获取所述用户的第二瞳孔参数和所述用户的面部的第二光强度;
所述处理器,具体用于根据所述第一光强度、所述第二瞳孔参数、所述第二光强度、第三光强度和第三瞳孔参数,计算所述用户在所述第一光强度下的标准瞳孔参数,所述第三瞳孔参数为所述第三光强度下的瞳孔参数,所述第三光强度为与所述第二光强度不同的光强度。
23.根据权利要求16所述的终端,其特征在于,所述处理器,还用于确定所述用户在所述第一光强度下的标准瞳孔参数之前,获取所述用户的第二瞳孔参数和所述用户的面部的第二光强度;根据至少一个光强度、所述第二瞳孔参数、所述第二光强度、第三光强度和第三瞳孔参数,计算所述至少一个光强度中的不同光强度下的标准瞳孔参数,以得到至少一个标准瞳孔参数,所述第三瞳孔参数为所述第三光强度下的瞳孔参数,所述第三光强度为与所述第二光强度不同的光强度;
所述处理器,具体用于从所述至少一个标准瞳孔参数中确定所述第一光强度下的标准瞳孔参数。
24.根据权利要求16所述的终端,其特征在于,所述第一瞳孔参数为所述用户的瞳孔尺寸与虹膜尺寸的比值;
所述处理器,具体用于采集包括用户的面部信息的第一图像信息;从所述第一图像信息中确定所述用户的瞳孔尺寸所对应的像素点的第一数量,以及所述用户的虹膜尺寸所对应的像素点的第二数量;计算所述第一数量与所述第二数量的数量比值;将所述数量比值作为所述第一瞳孔参数。
25.根据权利要求16所述的终端,其特征在于,所述第一瞳孔参数为所述用户的瞳孔尺寸;
所述处理器,具体用于检测所述用户的瞳孔与基准点所形成的圆椎体的锥角,所述基准点为所述终端的显示屏所在平面上的任意一点;检测所述用户的瞳孔的中心点与所述基准点之间的直线距离;根据所述锥角与所述距离,计算所述用户的第一瞳孔参数。
26.根据权利要求15至25任一项所述的终端,其特征在于,
所述处理器,具体用于在所述第一光强度小于或等于预设光强度的情况下,确定所述用户在所述第一光强度下的标准瞳孔参数。
27.根据权利要求15至26任一项所述的终端,其特征在于,所述自动输出操作提示,包括:通过语音、文字、标识和动画中的至少一种方式自动输出操作提示。
28.一种计算机可读存储介质,其特征在于,包括:所述计算机可读存储介质上存储计算机指令,所述计算机指令被处理器执行时实现如权利要求1至13任一项所述的控制输出操作提示的方法。
29.一种计算机程序产品,其特征在于,包括:所述计算机程序产品包括计算机指令,当所述计算机程序产品在处理器上运行时,使得所述处理器执行所述计算机指令,以实现如权利要求1至13任一项所述的控制输出操作提示的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911024412.8A CN112711325A (zh) | 2019-10-25 | 2019-10-25 | 一种控制输出操作提示的方法及终端 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911024412.8A CN112711325A (zh) | 2019-10-25 | 2019-10-25 | 一种控制输出操作提示的方法及终端 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112711325A true CN112711325A (zh) | 2021-04-27 |
Family
ID=75541512
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911024412.8A Pending CN112711325A (zh) | 2019-10-25 | 2019-10-25 | 一种控制输出操作提示的方法及终端 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112711325A (zh) |
Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2007148465A1 (ja) * | 2006-06-21 | 2007-12-27 | Panasonic Corporation | 操作誘導装置及び操作誘導方法 |
US20100010370A1 (en) * | 2008-07-09 | 2010-01-14 | De Lemos Jakob | System and method for calibrating and normalizing eye data in emotional testing |
US7744216B1 (en) * | 2006-01-06 | 2010-06-29 | Lockheed Martin Corporation | Display system intensity adjustment based on pupil dilation |
US20110181541A1 (en) * | 2010-01-28 | 2011-07-28 | Chi Mei Communication Systems, Inc. | Electronic devices with automatic brightness adjustment and the method thereof |
CN103327172A (zh) * | 2013-04-28 | 2013-09-25 | 华为终端有限公司 | 一种调节终端屏幕亮度的方法和终端 |
CN103780957A (zh) * | 2013-10-29 | 2014-05-07 | 四川长虹电器股份有限公司 | 一种电视终端智能控制系统及其控制方法 |
CN104924907A (zh) * | 2015-06-19 | 2015-09-23 | 宇龙计算机通信科技(深圳)有限公司 | 一种调节车速的方法及装置 |
US9367677B1 (en) * | 2014-09-26 | 2016-06-14 | The Board Of Trustees Of The University Of Alabama, For And On Behalf Of The University Of Alabama In Huntsville | Systems and methods for user authentication using eye movement and pupil size change matching |
KR101643744B1 (ko) * | 2015-03-17 | 2016-08-11 | 동국대학교 산학협력단 | 시선고정 눈 반응 감지장치 및 방법 |
CN106295492A (zh) * | 2016-06-03 | 2017-01-04 | 北京奇虎科技有限公司 | 一种终端处理方法、装置和移动终端 |
CN106971505A (zh) * | 2017-05-09 | 2017-07-21 | 广东小天才科技有限公司 | 一种眼睛疲劳的提示方法及用户设备 |
US20170277258A1 (en) * | 2016-03-28 | 2017-09-28 | Le Holdings (Beijing) Co., Ltd. | Method for adjusting screen luminance and electronic device |
US20180235463A1 (en) * | 2017-02-17 | 2018-08-23 | Pixel Display Inc. | User device, server and computer program stored in computer-readable medium for determining vision information |
US20180286070A1 (en) * | 2017-03-31 | 2018-10-04 | Sony Interactive Entertainment LLC | Quantifying User Engagement Using Pupil Size Measurements |
US20190265785A1 (en) * | 2018-12-17 | 2019-08-29 | Intel Corporation | Virtual reality adaptive display control |
-
2019
- 2019-10-25 CN CN201911024412.8A patent/CN112711325A/zh active Pending
Patent Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7744216B1 (en) * | 2006-01-06 | 2010-06-29 | Lockheed Martin Corporation | Display system intensity adjustment based on pupil dilation |
WO2007148465A1 (ja) * | 2006-06-21 | 2007-12-27 | Panasonic Corporation | 操作誘導装置及び操作誘導方法 |
US20100010370A1 (en) * | 2008-07-09 | 2010-01-14 | De Lemos Jakob | System and method for calibrating and normalizing eye data in emotional testing |
US20110181541A1 (en) * | 2010-01-28 | 2011-07-28 | Chi Mei Communication Systems, Inc. | Electronic devices with automatic brightness adjustment and the method thereof |
CN103327172A (zh) * | 2013-04-28 | 2013-09-25 | 华为终端有限公司 | 一种调节终端屏幕亮度的方法和终端 |
CN103780957A (zh) * | 2013-10-29 | 2014-05-07 | 四川长虹电器股份有限公司 | 一种电视终端智能控制系统及其控制方法 |
US9367677B1 (en) * | 2014-09-26 | 2016-06-14 | The Board Of Trustees Of The University Of Alabama, For And On Behalf Of The University Of Alabama In Huntsville | Systems and methods for user authentication using eye movement and pupil size change matching |
KR101643744B1 (ko) * | 2015-03-17 | 2016-08-11 | 동국대학교 산학협력단 | 시선고정 눈 반응 감지장치 및 방법 |
CN104924907A (zh) * | 2015-06-19 | 2015-09-23 | 宇龙计算机通信科技(深圳)有限公司 | 一种调节车速的方法及装置 |
US20170277258A1 (en) * | 2016-03-28 | 2017-09-28 | Le Holdings (Beijing) Co., Ltd. | Method for adjusting screen luminance and electronic device |
CN106295492A (zh) * | 2016-06-03 | 2017-01-04 | 北京奇虎科技有限公司 | 一种终端处理方法、装置和移动终端 |
US20180235463A1 (en) * | 2017-02-17 | 2018-08-23 | Pixel Display Inc. | User device, server and computer program stored in computer-readable medium for determining vision information |
US20180286070A1 (en) * | 2017-03-31 | 2018-10-04 | Sony Interactive Entertainment LLC | Quantifying User Engagement Using Pupil Size Measurements |
CN106971505A (zh) * | 2017-05-09 | 2017-07-21 | 广东小天才科技有限公司 | 一种眼睛疲劳的提示方法及用户设备 |
US20190265785A1 (en) * | 2018-12-17 | 2019-08-29 | Intel Corporation | Virtual reality adaptive display control |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10445482B2 (en) | Identity authentication method, identity authentication device, and terminal | |
KR102629258B1 (ko) | 통신 세션에서 애니메이션 오버레이들의 생성 | |
KR102498451B1 (ko) | 전자 장치 및 전자 장치에서의 정보 제공 방법 | |
CN108885498B (zh) | 电子装置和在电子装置中提供信息的方法 | |
ES2643176T3 (es) | Método y aparato para proporcionar informes de actividad independientes de la vista que responden a un gesto táctil | |
KR102537543B1 (ko) | 지능형 전자 장치 및 그 동작 방법 | |
EP3509330A1 (en) | Method and terminal for displaying current geographical location on emergency call interface | |
EP3576014A1 (en) | Fingerprint recognition method, electronic device, and storage medium | |
US20150058427A1 (en) | Limited Area Temporary Instantaneous Network | |
WO2017032153A1 (zh) | 提示信息的显示方法、装置及终端 | |
CN110300274B (zh) | 视频文件的录制方法、装置及存储介质 | |
CN111524501B (zh) | 语音播放方法、装置、计算机设备及计算机可读存储介质 | |
CN110795007B (zh) | 一种获取截图信息的方法及装置 | |
CN111723855A (zh) | 一种学习知识点的显示方法、终端设备及存储介质 | |
CN108334272A (zh) | 一种控制方法及移动终端 | |
EP3644177A1 (en) | Input method, device, apparatus, and storage medium | |
CN106155703B (zh) | 情绪状态的显示方法及装置 | |
CN109144377A (zh) | 智能手表的操作方法、智能手表及计算机可读存储介质 | |
CN109495638A (zh) | 一种信息显示方法及终端 | |
CN110020690B (zh) | 一种作弊行为检测方法、装置及存储介质 | |
CN109743448A (zh) | 提示方法及终端设备 | |
CN111580911A (zh) | 一种终端的操作提示方法、装置、存储介质及终端 | |
CN113168257B (zh) | 锁定触控操作的方法及电子设备 | |
CN111061369A (zh) | 交互方法、装置、设备及存储介质 | |
CN112711325A (zh) | 一种控制输出操作提示的方法及终端 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |