CN115914460A - 显示屏的控制方法及电子设备 - Google Patents
显示屏的控制方法及电子设备 Download PDFInfo
- Publication number
- CN115914460A CN115914460A CN202110923990.6A CN202110923990A CN115914460A CN 115914460 A CN115914460 A CN 115914460A CN 202110923990 A CN202110923990 A CN 202110923990A CN 115914460 A CN115914460 A CN 115914460A
- Authority
- CN
- China
- Prior art keywords
- screen
- state
- detection
- electronic device
- electronic equipment
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 111
- 238000001514 detection method Methods 0.000 claims abstract description 281
- 230000006870 function Effects 0.000 claims description 35
- 238000004590 computer program Methods 0.000 claims description 33
- 230000004044 response Effects 0.000 claims description 29
- 230000003287 optical effect Effects 0.000 claims description 27
- 230000008447 perception Effects 0.000 claims description 24
- 238000003860 storage Methods 0.000 claims description 16
- 238000003825 pressing Methods 0.000 claims description 10
- 230000008569 process Effects 0.000 abstract description 52
- 230000008859 change Effects 0.000 abstract description 3
- 238000007726 management method Methods 0.000 description 45
- 238000010586 diagram Methods 0.000 description 29
- 238000004891 communication Methods 0.000 description 24
- 239000010410 layer Substances 0.000 description 23
- 238000012545 processing Methods 0.000 description 22
- 238000004422 calculation algorithm Methods 0.000 description 19
- 238000010295 mobile communication Methods 0.000 description 11
- 230000007958 sleep Effects 0.000 description 11
- 210000000988 bone and bone Anatomy 0.000 description 10
- 230000000694 effects Effects 0.000 description 6
- 230000003993 interaction Effects 0.000 description 6
- 230000004617 sleep duration Effects 0.000 description 6
- 230000004622 sleep time Effects 0.000 description 5
- 230000005236 sound signal Effects 0.000 description 5
- 230000000903 blocking effect Effects 0.000 description 4
- 230000006266 hibernation Effects 0.000 description 4
- 230000001976 improved effect Effects 0.000 description 4
- 229920001621 AMOLED Polymers 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 3
- 238000013528 artificial neural network Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000013461 design Methods 0.000 description 3
- 238000011895 specific detection Methods 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 230000036772 blood pressure Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000010411 cooking Methods 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 238000010791 quenching Methods 0.000 description 2
- 230000000171 quenching effect Effects 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 241000699670 Mus sp. Species 0.000 description 1
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 230000003416 augmentation Effects 0.000 description 1
- 238000010009 beating Methods 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 238000013529 biological neural network Methods 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000004020 conductor Substances 0.000 description 1
- 239000012792 core layer Substances 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 210000000887 face Anatomy 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000001939 inductive effect Effects 0.000 description 1
- 239000010985 leather Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 230000001537 neural effect Effects 0.000 description 1
- 210000002569 neuron Anatomy 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000010349 pulsation Effects 0.000 description 1
- 239000002096 quantum dot Substances 0.000 description 1
- 238000011897 real-time detection Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 230000000630 rising effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 230000003238 somatosensory effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
- 230000001755 vocal effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/26—Power supply means, e.g. regulation thereof
- G06F1/32—Means for saving power
- G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
- G06F1/3206—Monitoring of events, devices or parameters that trigger a change in power modality
- G06F1/3231—Monitoring the presence, absence or movement of users
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/26—Power supply means, e.g. regulation thereof
- G06F1/32—Means for saving power
- G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
- G06F1/3206—Monitoring of events, devices or parameters that trigger a change in power modality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/26—Power supply means, e.g. regulation thereof
- G06F1/32—Means for saving power
- G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
- G06F1/3234—Power saving characterised by the action undertaken
- G06F1/325—Power saving in peripheral device
- G06F1/3262—Power saving in digitizer or tablet
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/26—Power supply means, e.g. regulation thereof
- G06F1/32—Means for saving power
- G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
- G06F1/3234—Power saving characterised by the action undertaken
- G06F1/325—Power saving in peripheral device
- G06F1/3265—Power saving in display device
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D30/00—Reducing energy consumption in communication networks
- Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Ophthalmology & Optometry (AREA)
- Multimedia (AREA)
- Telephone Function (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请提供了一种显示屏的控制方法及电子设备。该方法包括:电子设备基于显示屏的状态、接近光传感器的状态,并结合是否接收到用户操作的情况,开始进行检测。在检测过程中,若电子设备检测到目标生物特征信息,电子设备可控制显示屏从半熄屏状态变为亮屏状态。从而提供一种显示屏的控制方法,使得用户无需操作电子设备,即可使得电子设备的显示屏亮屏。并且,电子设备在满足一定条件的情况下,开始检测,从而在保证检测的实时性和高效性的同时,可有效降低功耗。
Description
技术领域
本申请涉及终端设备领域,尤其涉及一种显示屏的控制方法及电子设备。
背景技术
目前,手机在亮屏的状态下,若在一段时间内未接收到用户操作,则手机将进入熄屏状态。也就是说,若用户期望手机持续保持亮屏状态,则需要用户在手机进入熄屏状态前对手机进行触摸或其它操作。但是,当用户在阅读场景或者是不方便操作手机的场景下,该手动触发手机保持亮屏状态的方式会影响用户使用体验。
发明内容
为了解决上述问题,本申请提供一种显示屏的控制方法及电子设备。在该方法中,电子设备可基于生物特征信息,控制显示屏亮屏,从而提升用户使用体验。
第一方面,本申请提供一种电子设备。该电子设备包括:一个或多个处理器、存储器和指纹传感器。以及一个或多个计算机程序,其中一个或多个计算机程序存储在存储器上,当计算机程序被一个或多个处理器执行时,使得电子设备执行以下步骤:电子设备处于熄屏状态时,接收到第一用户操作。电子设备响应于接收到的第一用户操作,从熄屏状态变为亮屏状态。当电子设备处于亮屏状态时,在第一时长内未接收到用户操作,并且电子设备的接近光传感器满足预设条件,启动第一检测。在第一检测内,电子设备检测生物特征信息。在第一检测内的第一时刻,电子设备从亮屏状态变为半熄屏状态。在第一检测内的第二时刻,电子设备检测到第一目标生物特征信息,电子设备从半熄屏状态变为亮屏状态。这样,电子设备可以基于设定的条件,对电子设备的各模块与器件的状态进行监测,以在满足设定的条件的情况下,才开始检测生物特征信息。从而避免持续检测所带来的系统功耗过高问题,有效降低系统功耗,节省电池耗电量。在检测到指定的生物特征信息的情况下,电子设备的显示屏亮屏。从而提供一种控制电子设备亮屏的方式,使用户无需操作,即可使得电子设备的显示屏亮屏,以提高用户使用体验。
示例性的,接近光传感器对应的预设条件为接近光传感器未被遮挡。
示例性的,若接近光传感器未满足预设条件,电子设备不启动第一检测。
示例性的,第一检测可选地为本申请中的检测窗口。
示例性的,第一用户操作可选地为用户按压开机键。
示例性的,电子设备可通过摄像头采集生物特征信息。
示例性的,摄像头采集生物特征信息的帧率可以为5fps,从而在保证检测高效性与实时性的同时,降低系统功耗。
根据第一方面,当计算机程序被一个或多个处理器执行时,使得电子设备执行以下步骤:电子设备从熄屏状态变为亮屏状态的第三时刻至第一时刻,未检测到用户操作,电子设备在第一时刻,从亮屏状态变为半熄屏状态。这样,电子设备从亮屏之后,若在指定时长内未接收到用户操作,电子设备从亮屏状态变为半熄屏状态。
示例性的,亮屏状态时,显示屏的亮度为第一亮度。半熄屏状态时,显示屏的亮度为第二亮度,第二亮度小于第一亮度。
示例性的,电子设备的显示屏处于亮屏状态时,显示屏显示的可以是桌面,也可以是应用界面。
根据第一方面,或者以上第一方面的任意一种实现方式,第三时刻与第一时刻之间的时长为第二时长。
示例性的,用户可在显示和亮度界面中设置第三时刻与第一时刻之间的第二时长。
示例性的,第二时长可以是30秒、1分钟、5分钟、10分钟等。
根据第一方面,或者以上第一方面的任意一种实现方式,第一检测的起始时刻与第一时刻之间的时长为第三时长,第三时长小于第二时长。这样,电子设备可基于不同的第二时长,设置第一时长,使得检测的起始时刻与半熄屏的时刻之间的时长固定。
根据第一方面,或者以上第一方面的任意一种实现方式,当计算机程序被一个或多个处理器执行时,使得电子设备执行以下步骤:检测到第一目标生物特征信息,结束第一检测。这样,电子设备在检测到生物特征信息后,可结束本次检测,以降低功耗。
根据第一方面,或者以上第一方面的任意一种实现方式,当计算机程序被一个或多个处理器执行时,使得电子设备执行以下步骤:电子设备从半熄屏状态变为亮屏状态,在第一时长内未接收到用户操作,并且接近光传感器满足预设条件,启动第二检测。在第二检测内的第四时刻,检测到第二目标生物特征,控制电子设备保持亮屏状态。这样,电子设备通过检测生物特征信息,可控制电子设备的显示屏持续保持在亮屏状态,而无需用户重复操作手机,提升用户使用体验。
根据第一方面,或者以上第一方面的任意一种实现方式,当计算机程序被一个或多个处理器执行时,使得电子设备执行以下步骤:检测到第二目标生物特征,结束第二检测。
根据第一方面,或者以上第一方面的任意一种实现方式,当计算机程序被一个或多个处理器执行时,使得电子设备执行以下步骤:电子设备保持亮屏状态,在第一时长内未接收到用户操作,并且接近光传感器满足预设条件,启动第三检测;第三检测时长为第二时长。在第三检测内的第五时刻,检测到第三目标生物特征,控制电子设备保持亮屏状态。这样,电子设备可在每次检测到满足设定的条件的情况下,启动检测,以在保持检测的高效性的同时,节约系统功耗。
根据第一方面,或者以上第一方面的任意一种实现方式,当计算机程序被一个或多个处理器执行时,使得电子设备执行以下步骤:检测到第三目标生物特征,结束第二检测。
根据第一方面,或者以上第一方面的任意一种实现方式,第二检测的起始时刻与第四时刻之间的时长为第五时长,第三检测的起始时刻与第五时刻之间的时长为第六时长;第六时长与第五时长不同。
示例性的,在用户持续注视的过程中,第五时长与第六时长可以相等,例如均为1s。
示例性的,在用户间歇性注视的过程中,第五时长与第六时长可以不同。
根据第一方面,或者以上第一方面的任意一种实现方式,当计算机程序被一个或多个处理器执行时,使得电子设备执行以下步骤:电子设备从半熄屏状态变为亮屏状态,在第一时长内未接收到用户操作,并且接近光传感器满足预设条件,启动第四检测。在第四检测内的第六时刻,检测到用户按压开机键的操作,电子设备从亮屏状态变为熄屏状态。这样,用户可在检测过程中,继续对电子设备的各模块或器件的状态进行监控,在电子设备的开机键被按压的情况下,电子设备的显示屏熄屏。并且,本次检测结束。
根据第一方面,或者以上第一方面的任意一种实现方式,当计算机程序被一个或多个处理器执行时,使得电子设备执行以下步骤:检测到到用户按压开机键的操作,结束第四检测。
根据第一方面,或者以上第一方面的任意一种实现方式,当计算机程序被一个或多个处理器执行时,使得电子设备执行以下步骤:电子设备从半熄屏状态变为亮屏状态,在第一时长内未接收到用户操作,并且接近光传感器满足预设条件,启动第五检测。在第五检测内的第七时刻,接收到第一语音来电信息,结束第五检测。这样,在电子设备开启特定的应用的时候,电子设备可以无需进行检测,从而进一步节约功耗。示例性能给的,特定的应用可以是语音应用、开启应用锁的应用等。示例性的,电子设备接通语音来电后,在预设的时长后熄屏。
根据第一方面,或者以上第一方面的任意一种实现方式,当计算机程序被一个或多个处理器执行时,使得电子设备执行以下步骤:电子设备从半熄屏状态变为亮屏状态,在第一时长内未接收到用户操作,并且接近光传感器满足预设条件,启动第六检测;在第六检测内,检测生物特征信息;在第六检测内的第八时刻,电子设备从亮屏状态变为半熄屏状态;在第九时刻,第六检测结束,并且电子设备从半熄屏状态变为熄屏状态。这样,在电子设备未检测到生物特征信息的情况下,电子设备在熄屏时,结束检测。
根据第一方面,或者以上第一方面的任意一种实现方式,第一目标生物特征信息为人眼特征信息。这样,本申请可通过识别人眼注视,以在确定用户注视屏幕的情况下,控制显示屏亮屏。从而提供一种智能控制显示屏亮屏方式,无需用户用手操作电子设备,提升用户使用体验。
根据第一方面,或者以上第一方面的任意一种实现方式,当计算机程序被一个或多个处理器执行时,使得电子设备执行以下步骤:显示智慧感知界面,智慧感知界面中包括注视不熄屏选项;接收用户点击注视不熄屏选项的操作,确定注视不熄屏功能开启;当电子设备处于亮屏状态时,在第一时长内未接收到用户操作,并且电子设备的接近光传感器满足预设条件,以及注视不熄屏选项的开启,启动第一检测。这样,用户在开启注视不熄屏功能的情况下,电子设备可执行本申请中的显示屏控制方式。
第二方面,本申请提供一种显示屏的控制方法。该方法包括:电子设备处于熄屏状态时,接收到第一用户操作;响应于接收到的第一用户操作,从熄屏状态变为亮屏状态;当电子设备处于亮屏状态时,在第一时长内未接收到用户操作,并且电子设备的接近光传感器满足预设条件,启动第一检测;在第一检测内,检测生物特征信息;在第一检测内的第一时刻,电子设备从亮屏状态变为半熄屏状态;在第一检测内的第二时刻,检测到第一目标生物特征信息,电子设备从半熄屏状态变为亮屏状态。
根据第二方面,电子设备从亮屏状态变为半熄屏状态,包括:电子设备从熄屏状态变为亮屏状态的第三时刻至第一时刻,未检测到用户操作,电子设备在第一时刻,从亮屏状态变为半熄屏状态。
根据第二方面,或者以上第二方面的任意一种实现方式,第三时刻与第一时刻之间的时长为第二时长。
根据第二方面,或者以上第二方面的任意一种实现方式,第一检测的起始时刻与第一时刻之间的时长为第三时长,第三时长小于第二时长。
根据第二方面,或者以上第二方面的任意一种实现方式,方法还包括:检测到第一目标生物特征信息,结束第一检测。
根据第二方面,或者以上第二方面的任意一种实现方式,方法还包括:电子设备从半熄屏状态变为亮屏状态,在第一时长内未接收到用户操作,并且接近光传感器满足预设条件,启动第二检测;在第二检测内的第四时刻,检测到第二目标生物特征,控制电子设备保持亮屏状态。
根据第二方面,或者以上第二方面的任意一种实现方式,方法还包括:检测到第二目标生物特征,结束第二检测。
根据第二方面,或者以上第二方面的任意一种实现方式,方法还包括:电子设备保持亮屏状态,在第一时长内未接收到用户操作,并且接近光传感器满足预设条件,启动第三检测;第三检测时长为第二时长;在第三检测内的第五时刻,检测到第三目标生物特征,控制电子设备保持亮屏状态。
根据第二方面,或者以上第二方面的任意一种实现方式,方法还包括:检测到第三目标生物特征,结束第二检测。
根据第二方面,或者以上第二方面的任意一种实现方式,方法还包括:第二检测的起始时刻与第四时刻之间的时长为第五时长,第三检测的起始时刻与第五时刻之间的时长为第六时长;第六时长与第五时长不同。
根据第二方面,或者以上第二方面的任意一种实现方式,方法还包括:电子设备从半熄屏状态变为亮屏状态,在第一时长内未接收到用户操作,并且接近光传感器满足预设条件,启动第四检测;在第四检测内的第六时刻,检测到用户按压开机键的操作,电子设备从亮屏状态变为熄屏状态。
根据第二方面,或者以上第二方面的任意一种实现方式,方法还包括:检测到到用户按压开机键的操作,结束第四检测。
根据第二方面,或者以上第二方面的任意一种实现方式,方法还包括:电子设备从半熄屏状态变为亮屏状态,在第一时长内未接收到用户操作,并且接近光传感器满足预设条件,启动第五检测;在第五检测内的第七时刻,接收到第一语音来电信息,结束第五检测。
根据第二方面,或者以上第二方面的任意一种实现方式,方法还包括:电子设备从半熄屏状态变为亮屏状态,在第一时长内未接收到用户操作,并且接近光传感器满足预设条件,启动第六检测;在第六检测内,检测生物特征信息;在第六检测内的第八时刻,电子设备从亮屏状态变为半熄屏状态;在第九时刻,第六检测结束,并且电子设备从半熄屏状态变为熄屏状态。
根据第二方面,或者以上第二方面的任意一种实现方式,方法还包括:第一目标生物特征信息为人眼特征信息。
根据第二方面,或者以上第二方面的任意一种实现方式,方法还包括:显示智慧感知界面,智慧感知界面中包括注视不熄屏选项;接收用户点击注视不熄屏选项的操作,确定注视不熄屏功能开启;当电子设备处于亮屏状态时,在第一时长内未接收到用户操作,并且电子设备的接近光传感器满足预设条件,以及注视不熄屏选项的开启,启动第一检测。
第二方面以及第二方面的任意一种实现方式分别与第一方面以及第一方面的任意一种实现方式相对应。第二方面以及第二方面的任意一种实现方式所对应的技术效果可参见上述第一方面以及第一方面的任意一种实现方式所对应的技术效果,此处不再赘述。
第三方面,本申请提供了一种计算机可读介质,用于存储计算机程序,该计算机程序包括用于执行第二方面或第二方面的任意可能的实现方式中的方法的指令。
第四方面,本申请提供了一种计算机程序,该计算机程序包括用于执行第二方面或第二方面的任意可能的实现方式中的方法的指令。
第五方面,本申请提供了一种芯片,该芯片包括处理电路、收发管脚。其中,该收发管脚、和该处理电路通过内部连接通路互相通信,该处理电路执行第二方面或第二方面的任一种可能的实现方式中的方法,以控制接收管脚接收信号,以控制发送管脚发送信号。
附图说明
图1为示例性示出的电子设备的硬件结构示意图;
图2为示例性示出的电子设备的软件结构示意图;
图3a为示例性示出的用户界面示意图;
图3b为示例性示出的用户界面示意图;
图3c为示例性示出的用户界面示意图;
图4为示例性示出的电子设备的显示屏状态示意图;
图5为示例性示出的用户界面示意图;
图6为示例性示出的模块交互示意图;
图7为示例性示出的检测条件判断流程示意图;
图8为示例性示出的注视不熄屏检测流程示意图;
图9为示例性示出的模块交互示意图;
图10为示例性示出的图像帧采集示意图;
图11为示例性示出的识别流程示意图;
图12为示例性示出的模块交互示意图;
图13为示例性示出的不熄屏检测示意图;
图14为示例性示出的注视不熄屏检测示意图;
图15a为示例性示出的应用场景示意图;
图15b为示例性示出的电子设备的显示屏状态示意图;
图16为示例性示出的识别流程示意图;
图17为示例性示出的不熄屏检测示意图;
图18为示例性示出的电子设备的显示屏状态示意图;
图19为示例性示出的不熄屏检测示意图;
图20为示例性示出的不熄屏检测示意图;
图21为示例性示出的电子设备的显示屏状态示意图;
图22为示例性示出的不熄屏检测示意图;
图23为示例性示出的不熄屏检测示意图;
图24为示例性示出的不熄屏检测示意图;
图25为示例性示出的装置的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。
本申请实施例的说明书和权利要求书中的术语“第一”和“第二”等是用于区别不同的对象,而不是用于描述对象的特定顺序。例如,第一目标对象和第二目标对象等是用于区别不同的目标对象,而不是用于描述目标对象的特定顺序。
在本申请实施例中,“示例性的”或者“例如”等词用于表示作例子、例证或说明。本申请实施例中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言,使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。
在本申请实施例的描述中,除非另有说明,“多个”的含义是指两个或两个以上。例如,多个处理单元是指两个或两个以上的处理单元;多个系统是指两个或两个以上的系统。
图1示出了电子设备100的结构示意图。应该理解的是,图1所示电子设备100仅是电子设备的一个范例,并且电子设备100可以具有比图中所示的更多的或者更少的部件,可以组合两个或多个的部件,或者可以具有不同的部件配置。图1中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。需要说明的是,本申请实施例中仅以电子设备100为手机进行说明,本申请实施例中的电子设备也可以是平板、可穿戴设备、电视、智能家居设备、车载设备等具有显示屏的设备,本申请不做限定。
电子设备100可以包括:处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,USB)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器 170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户标识模块(subscriber identification module,SIM)卡接口195等。其中传感器模块180可以包括压力传感器180A,陀螺仪传感器180B,气压传感器180C,磁传感器180D,加速度传感器180E,距离传感器180F,接近光传感器180G,指纹传感器180H,温度传感器180J,触摸传感器180K,环境光传感器180L,骨传导传感器180M等。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,存储器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
其中,控制器可以是电子设备100的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S) 接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,用户标识模块(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus, USB)接口等。
I2C接口是一种双向同步串行总线,包括一根串行数据线(serial data line,SDA)和一根串行时钟线(derail clock line,SCL)。在一些实施例中,处理器110可以包含多组I2C 总线。处理器110可以通过不同的I2C总线接口分别耦合触摸传感器180K,充电器,闪光灯,摄像头193等。例如:处理器110可以通过I2C接口耦合触摸传感器180K,使处理器110与触摸传感器180K通过I2C总线接口通信,实现电子设备100的触摸功能。
I2S接口可以用于音频通信。在一些实施例中,处理器110可以包含多组I2S总线。处理器110可以通过I2S总线与音频模块170耦合,实现处理器110与音频模块170之间的通信。在一些实施例中,音频模块170可以通过I2S接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。
MIPI接口可以被用于连接处理器110与显示屏194,摄像头193等外围器件。MIPI接口包括摄像头串行接口(camera serial interface,CSI),显示屏串行接口(displayserial interface,DSI)等。在一些实施例中,处理器110和摄像头193通过CSI接口通信,实现电子设备100的拍摄功能。处理器110和显示屏194通过DSI接口通信,实现电子设备 100的显示功能。
GPIO接口可以通过软件配置。GPIO接口可以被配置为控制信号,也可被配置为数据信号。在一些实施例中,GPIO接口可以用于连接处理器110与摄像头193,显示屏194,无线通信模块160,音频模块170,传感器模块180等。GPIO接口还可以被配置为I2C 接口,I2S接口,UART接口,MIPI接口等。
可以理解的是,本申请实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备100的结构限定。在本申请另一些实施例中,电子设备100也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
充电管理模块140用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的实施例中,充电管理模块140可以通过USB接口130接收有线充电器的充电输入。在一些无线充电的实施例中,充电管理模块140可以通过电子设备100的无线充电线圈接收无线充电输入。充电管理模块140为电池142 充电的同时,还可以通过电源管理模块141为电子设备供电。
电源管理模块141用于连接电池142,充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入,为处理器110,内部存储器121,外部存储器,显示屏194,摄像头193,和无线通信模块160等供电。电源管理模块141还可以用于监测电池容量,电池循环次数,电池健康状态(漏电,阻抗)等参数。在其他一些实施例中,电源管理模块141也可以设置于处理器110中。在另一些实施例中,电源管理模块141和充电管理模块140也可以设置于同一个器件中。
电子设备100的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块160,调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块150可以提供应用在电子设备100上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(low noise amplifier,LNA)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块 150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备(不限于扬声器170A,受话器170B 等)输出声音信号,或通过显示屏194显示图像或视频。在一些实施例中,调制解调处理器可以是独立的器件。在另一些实施例中,调制解调处理器可以独立于处理器110,与移动通信模块150或其他功能模块设置在同一个器件中。
无线通信模块160可以提供应用在电子设备100上的包括无线局域网(wirelesslocal area networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),蓝牙(bluetooth,BT),全球导航卫星系统(global navigation satellite system,GNSS),调频(frequency modulation, FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
在一些实施例中,电子设备100的天线1和移动通信模块150耦合,天线2和无线通信模块160耦合,使得电子设备100可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobile communications,GSM),通用分组无线服务(general packet radio service,GPRS),码分多址接入(codedivision multiple access,CDMA),宽带码分多址(wideband code division multipleaccess,WCDMA),时分码分多址(time-division code division multiple access,TD-SCDMA),长期演进(long term evolution,LTE),BT,GNSS,WLAN,NFC,FM,和/或IR技术等。所述GNSS 可以包括全球卫星定位系统(global positioning system,GPS),全球导航卫星系统(global navigation satellite system,GLONASS),北斗卫星导航系统(beidounavigation satellite system,BDS),准天顶卫星系统(quasi-zenith satellitesystem,QZSS)和/或星基增强系统 (satellite based augmentation systems,SBAS)。
电子设备100通过GPU,显示屏194,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏194和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏194用于显示图像,视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD),有机发光二极管(organic light-emittingdiode, OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emitting diode的,AMOLED),柔性发光二极管(flex light-emittingdiode,FLED),Miniled, MicroLed,Micro-oLed,量子点发光二极管(quantum dot lightemitting diodes,QLED)等。在一些实施例中,电子设备100可以包括1个或N个显示屏194,N为大于1的正整数。示例性的,处理器可控制显示屏的状态。可选地,本申请实施例中,显示屏的状态包括亮屏、半熄屏和熄屏。
电子设备100可以通过ISP,摄像头193,视频编解码器,GPU,显示屏194以及应用处理器等实现拍摄功能。
ISP用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给 ISP处理,转化为肉眼可见的图像。ISP还可以对图像的噪点,亮度,肤色进行算法优化。 ISP还可以对拍摄场景的曝光,色温等参数优化。在一些实施例中,ISP可以设置在摄像头193中。
摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体 (complementary metal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB,YUV等格式的图像信号。在一些实施例中,电子设备100可以包括1个或N个摄像头193,N为大于1的正整数。
数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当电子设备100在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
视频编解码器用于对数字视频压缩或解压缩。电子设备100可以支持一种或多种视频编解码器。这样,电子设备100可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,MPEG)1,MPEG2,MPEG3,MPEG4等。
NPU为神经网络(neural-network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过 NPU可以实现电子设备100的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
外部存储器接口120可以用于连接外部存储卡,例如Micro SD卡,实现扩展电子设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
内部存储器121可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。处理器110通过运行存储在内部存储器121的指令,从而执行电子设备100的各种功能应用以及数据处理。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储电子设备100使用过程中所创建的数据(比如音频数据,电话本等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage, UFS)等。
电子设备100可以通过音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,以及应用处理器等实现音频功能。例如音乐播放,录音等。
音频模块170用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实施例中,音频模块170可以设置于处理器110中,或将音频模块170的部分功能模块设置于处理器110中。
压力传感器180A用于感受压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器180A可以设置于显示屏194。压力传感器180A的种类很多,如电阻式压力传感器,电感式压力传感器,电容式压力传感器等。电容式压力传感器可以是包括至少两个具有导电材料的平行板。当有力作用于压力传感器180A,电极之间的电容改变。电子设备100根据电容的变化确定压力的强度。当有触摸操作作用于显示屏194,电子设备100根据压力传感器180A检测所述触摸操作强度。电子设备100也可以根据压力传感器180A的检测信号计算触摸的位置。在一些实施例中,作用于相同触摸位置,但不同触摸操作强度的触摸操作,可以对应不同的操作指令。例如:当有触摸操作强度小于第一压力阈值的触摸操作作用于短消息应用图标时,执行查看短消息的指令。当有触摸操作强度大于或等于第一压力阈值的触摸操作作用于短消息应用图标时,执行新建短消息的指令。
陀螺仪传感器180B可以用于确定电子设备100的运动姿态。在一些实施例中,可以通过陀螺仪传感器180B确定电子设备100围绕三个轴(即,x,y和z轴)的角速度。陀螺仪传感器180B可以用于拍摄防抖。示例性的,当按下快门,陀螺仪传感器180B检测电子设备100抖动的角度,根据角度计算出镜头模组需要补偿的距离,让镜头通过反向运动抵消电子设备100的抖动,实现防抖。陀螺仪传感器180B还可以用于导航,体感游戏场景。
气压传感器180C用于测量气压。在一些实施例中,电子设备100通过气压传感器180C测得的气压值计算海拔高度,辅助定位和导航。
磁传感器180D包括霍尔传感器。电子设备100可以利用磁传感器180D检测翻盖皮套的开合。在一些实施例中,当电子设备100是翻盖机时,电子设备100可以根据磁传感器180D检测翻盖的开合。进而根据检测到的皮套的开合状态或翻盖的开合状态,设置翻盖自动解锁等特性。
加速度传感器180E可检测电子设备100在各个方向上(一般为三轴)加速度的大小。当电子设备100静止时可检测出重力的大小及方向。还可以用于识别电子设备姿态,应用于横竖屏切换,计步器等应用。
距离传感器180F,用于测量距离。电子设备100可以通过红外或激光测量距离。在一些实施例中,拍摄场景,电子设备100可以利用距离传感器180F测距以实现快速对焦。
接近光传感器180G可以包括例如发光二极管(LED)和光检测器,例如光电二极管。发光二极管可以是红外发光二极管。电子设备100通过发光二极管向外发射红外光。电子设备100使用光电二极管检测来自附近物体的红外反射光。当检测到充分的反射光时,可以确定电子设备100附近有物体。当检测到不充分的反射光时,电子设备100可以确定电子设备100附近没有物体。电子设备100可以利用接近光传感器180G检测用户手持电子设备100贴近耳朵通话,以便自动熄灭屏幕达到省电的目的。接近光传感器180G也可用于皮套模式,口袋模式自动解锁与锁屏。
环境光传感器180L用于感知环境光亮度。电子设备100可以根据感知的环境光亮度自适应调节显示屏194亮度。环境光传感器180L也可用于拍照时自动调节白平衡。环境光传感器180L还可以与接近光传感器180G配合,检测电子设备100是否在口袋里,以防误触。
指纹传感器180H用于采集指纹。电子设备100可以利用采集的指纹特性实现指纹解锁,访问应用锁,指纹拍照,指纹接听来电等。
温度传感器180J用于检测温度。在一些实施例中,电子设备100利用温度传感器180J 检测的温度,执行温度处理策略。例如,当温度传感器180J上报的温度超过阈值,电子设备100执行降低位于温度传感器180J附近的处理器的性能,以便降低功耗实施热保护。在另一些实施例中,当温度低于另一阈值时,电子设备100对电池142加热,以避免低温导致电子设备100异常关机。在其他一些实施例中,当温度低于又一阈值时,电子设备100对电池142的输出电压执行升压,以避免低温导致的异常关机。
触摸传感器180K,也称“触控面板”。触摸传感器180K可以设置于显示屏194,由触摸传感器180K与显示屏194组成触摸屏,也称“触控屏”。触摸传感器180K用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器180K也可以设置于电子设备100的表面,与显示屏194所处的位置不同。
骨传导传感器180M可以获取振动信号。在一些实施例中,骨传导传感器180M可以获取人体声部振动骨块的振动信号。骨传导传感器180M也可以接触人体脉搏,接收血压跳动信号。在一些实施例中,骨传导传感器180M也可以设置于耳机中,结合成骨传导耳机。音频模块170可以基于所述骨传导传感器180M获取的声部振动骨块的振动信号,解析出语音信号,实现语音功能。应用处理器可以基于所述骨传导传感器180M 获取的血压跳动信号解析心率信息,实现心率检测功能。
按键190包括开机键,音量键等。按键190可以是机械按键。也可以是触摸式按键。电子设备100可以接收按键输入,产生与电子设备100的用户设置以及功能控制有关的键信号输入。示例性的,本申请实施例中,处理器可基于接近传感器、触摸传感器和/或开机键的触发情况,判断是否满足不熄屏条件。具体细节将在下面的实施例中详细说明。
马达191可以产生振动提示。马达191可以用于来电振动提示,也可以用于触摸振动反馈。例如,作用于不同应用(例如拍照,音频播放等)的触摸操作,可以对应不同的振动反馈效果。作用于显示屏194不同区域的触摸操作,马达191也可对应不同的振动反馈效果。不同的应用场景(例如:时间提醒,接收信息,闹钟,游戏等)也可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。
指示器192可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。
电子设备100的软件系统可以采用分层架构,事件驱动架构,微核架构,微服务架构,或云架构。本申请实施例以分层架构的Android系统为例,示例性说明电子设备100 的软件结构。
图2是本申请实施例的电子设备100的软件结构框图。
电子设备100的分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将Android系统分为四层,从上至下分别为应用程序层,应用程序框架层,安卓运行时(Android runtime)和系统库,以及内核层。
应用程序层可以包括一系列应用程序包。
如图2所示,应用程序包可以包括相机,图库,日历,通话,地图,导航,WLAN,蓝牙,音乐,视频,短信息,不熄屏等应用程序。示例性的,不熄屏应用程序(也可以简称为不熄屏应用)可用于控制电子设备进行不熄屏检测,并可控制电子设备不熄屏,即,处于亮屏解锁状态。
应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。
如图2所示,应用程序框架层可以包括窗口管理器,视图系统,资源管理器,感知服务,输入管理服务(Input Manager Service),AO(always on,永久开启,也可以称为不熄屏)服务,可信执行环境(trusted execution environment,TEE),电源管理服务等。
窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕等。
视图系统包括可视控件,例如显示文字的控件,显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如,包括短信通知图标的显示界面,可以包括显示文字的视图以及显示图片的视图。
资源管理器为应用程序提供各种资源,比如本地化字符串,图标,图片,布局文件,视频文件等等。
输入管理服务用于用于管理整个系统的输入部分,包括按键(例如HOME键、开机键等)键盘、鼠标、触摸屏等等。
电源管理服务用于为不熄屏应用系统接口,可使得不熄屏应用通过电源管理服务提供的接口,控制电子设备的显示屏不熄灭。
AO服务,也可以称为低功耗AO服务,其在不熄屏应用通过感知服务触发后启动,可通过预存的检测算法,例如人脸识别算法、人眼注视识别算法,识别是否有人眼注视。并在识别到有人眼注视后,将识别结果上报至感知服务。
感知服务用于订阅管理和提供接口等。示例性的,感知服务可以被多个应用或服务调用。感知服务可通过订阅管理,为每个应用或服务建立对应的进程,并根据应用或服务对应的进程,将底层模块上传的数据传输至不同的应用或服务。示例性的,感知服务可以为上层应用提供接口,以根据应用的需求,调用底层模块。例如,感知服务可以通过与不熄屏应用之间的接口,接收到不熄屏应用的指示信号。响应于不熄屏应用的指示,感知服务可以通过与其他模块或服务之间的接口,调用相应的模块或服务,例如响应于不熄屏应用的指示,调用输入管理服务、电源管理服务等。
TEE用于将高安全敏感的应用与通用的软件环境进行隔离,提供专门的可信执行环境TEE,并保护应用的资源和数据的保密性、完整性和访问权限。在TEE侧执行的应用称为可信应用程序(trusted application,TA),比如执行签名、加解密计算等关键服务的应用。由于TA运行在可信执行环境TEE中,TA的部署/升级操作需要严格遵循TEE发行方(通常是终端厂商)的安全验证规范,比如使用数字签名等措施,确保TEE各个环节是真正可信的。可选地,在本申请实施例中,TEE可用于存储摄像头采集的图像,以保护用户隐私。AO服务可基于检测算法对TEE中的图形进行检测,以确定图像中是否包括人脸以及是否存在注视。具体细节将在下面的实施例中说明。
Android Runtime包括核心库和虚拟机。Android runtime负责安卓系统的调度和管理。
核心库包含两部分:一部分是java语言需要调用的功能函数,另一部分是安卓的核心库。
应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理,堆栈管理,线程管理,安全和异常的管理,以及垃圾回收等功能。
系统库可以包括多个功能模块。例如:表面管理器(surface manager),媒体库(Media Libraries),三维图形处理库(例如:OpenGL ES),2D图形引擎(例如:SGL)等。
表面管理器用于对显示子系统进行管理,并且为多个应用程序提供了2D和3D图层的融合。
媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:MPEG4,H.264,MP3,AAC,AMR,JPG,PNG 等。
三维图形处理库用于实现三维图形绘图,图像渲染,合成,和图层处理等。
2D图形引擎是2D绘图的绘图引擎。
内核层是硬件和软件之间的层。内核层至少包含显示驱动,摄像头驱动,蓝牙驱动,传感器驱动等。
可以理解的是,图2示出的应用程序框架层、系统库与运行时层包含的部件,并不构成对电子设备100的具体限定。在本申请另一些实施例中,电子设备100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。
图3a为示例性示出的用户界面示意图。请参照图3,示例性的,显示和亮度界面301包括一个或多个选项。选项包括但不限于:字体大小与粗细、显示大小、屏幕选项302 等。需要说明的是,由于界面显示的尺寸显示,显示和亮度界面301中显示的选项仅为显示和亮度设置中的部分选项。
示例性的屏幕选项302包括一个或多个选项,包括但不限于:休眠选项303、色彩调节与色温、屏幕分辨率和更多显示设置等选项。其中,休眠选项303用于设置屏幕的熄屏时间。举例说明,休眠选项303当前指示休眠时长为10分钟后,也就是说,手机将在亮屏且无用户操作(包括触摸操作、按键操作等)的情况下,在10分钟后熄屏。
仍参照图3a,示例性的,用户点击休眠303选项。请参照图3b,手机响应于接收到的用户点击操作,在显示和亮度界面301的下部,显示休眠选项框306。需要说明的是,休眠选项框306的大小和位置仅为示意性举例,本申请不做限定。
示例性的,休眠选项框306中包括但不限于:15秒选项、30秒选项306、1分钟选项、5分钟选项、10分钟选项和取消选项307。需要说明的,选项的数值和数量仅为示意性举例,本申请不做限定。若用户点击取消选项307,电子设备响应于接收到的用户操作,取消休眠选项框306的显示。
示例性的,用户点击30秒选项306。请参照图3c,手机响应于接收到的用户操作,在显示和亮度界面301中的休眠选项303中,显示更新后的休眠参数,即,显示“30秒后”。举例说明,请参照图4的(1),手机显示桌面。需要说明的是,手机可能是从锁屏界面进入桌面,也可以是从其它应用转到桌面。例如,手机响应于接收到的用户解锁操作,进入到桌面。手机从最后一次(也可以理解为最新一次)接收到的用户操作时刻开始检测是否接收到用户操作。可选地,如图4的(2)所示,若在24s内未接收到任何用户操作,手机进入半熄屏模式。可以理解为,手机的显示屏变暗。其中,显示屏变暗的程度可以根据实际需求设置,本申请不做限定。需要说明的是,在手机处于半熄屏模式的情况下,手机中的各应用和模块正常运行。例如,在半熄屏模式下,手机仍然能够接收到用户操作,并且,响应于接收到的用户操作,重新亮屏。
请参照图4的(3),示例性的,在手机处于半熄屏模式的情况下,若在6s内仍未检测到任何用户操作,则手机进入熄屏模式。可选地,熄屏模式可以理解为手机锁屏,并且,手机显示屏熄屏(即黑屏)。
但是,在一些场景下,用户正在使用手机,而无法对手机进行操作时,若用户期待手机亮屏,而由于手机设置了休眠模式,手机将在无操作30秒后熄屏。举例说明,若用户在烹饪过程中,用户使用手机浏览菜谱。此时,用户不方便随时操作手机,而手机在检测到用户30秒内无操作后,将会休眠。而解决该问题的方式,目前是通过更改休眠选项,例如选择更长的休眠时长,或者选择不休眠。但实际上,更多的场景是:用户已经开始烹饪,并且无法用手操作手机,这时,用户是不方便通过更改休眠选项的。这种情况下,将影响到用户使用体验。
在本申请实施例中提供一种实现不熄屏的方法,可以在满足不熄屏条件的情况下,控制手机不熄屏,以提升用户使用体验。图5为示例性示出的用户界面示意图。请参照图5,示例性的,智慧感知界面501中包括但不限于智能不熄屏选项框与隔空手势选项框。可选地,智能不熄屏选项框中包括但不限于:注视不熄屏选项502、声音不熄屏选项503、遮挡不熄屏选项504。
示例性的,若用户可以点击注视不熄屏选项502,以触发注视不熄屏功能,在本申请实施例中,手机响应于接收到的用户操作,启动注视不熄屏功能(也可以称为注视不熄屏服务)后,手机将基于检测到用户注视,控制手机保持在亮屏状态。具体实施例将在下面的实施例中说明,此处暂不赘述。
示例性的,若用户点击声音不熄屏选项503,在本申请实施例中,手机响应于接收到的用户操作,启动声音不熄屏功能后,手机将基于检测到的声音,控制手机保持在亮屏状态。
示例性的,若用户点击遮挡不熄屏选项504,在本申请实施例中,手机响应于接收到的用户操作,启动遮挡不熄屏功能后,手机将基于接近光传感器被遮挡的遮挡情况,控制手机保持在亮屏状态。
需要说明的是,本申请实施例中仅以注视不熄屏、声音不熄屏、遮挡不熄屏为例进行说明,也就是说,手机可基于是否被注视、是否监听到特定的声音,是否检测到被遮挡为条件,判断是否保持亮屏状态。在其他实施例中,手机还可以是基于其它条件,例如可以是基于是否检测到眨眼、是否检测到特定的手势、是否检测到敲击等条件,控制显示屏的亮屏状态,本申请不做限定。相应的,智能不熄屏选项框中可显示不同条件所对应的选项,例如可以包括眨眼不熄屏选项等。
进一步需要说明的是,如上文所述,智能不熄屏选项框可选地包括多个选项,用户可以选择全部不开启,也可以选择开启一个或多个选项,本申请不做限定。举例说明,若用户开启注视不熄屏选项502和声音不熄屏选项503,则手机可在检测过程中,在检测到用户注视和/或接收到指定声音后,控制手机保持在亮屏状态。
图6为示例性示出的模块交互示意图。请参照图6,示例性的,以用户点击注视不熄屏选项502为例。不熄屏应用(也可以称为智能不熄屏应用)接收到用户操作。不熄屏应用通过与感知服务之间的接口,向感知服务发送指示信息,用于指示感知服务启动检测条件的判断流程。可选地,本申请实施例中的“检测条件的判断流程”可选地是指对是否需要启动注视不熄屏检测进行条件判断,在检测条件均满足的情况下,手机才会启动注视不熄屏检测。若检测条件不满足,则不启动注视不熄屏检测。可以理解为,检测条件是执行注视不熄屏检测的前提条件。声音检测与遮挡检测类似,此处不再赘述。
示例性的,感知服务响应于不熄屏应用的指示启动后,可通过输入管理服务获取接近光传感器、触摸传感器以及按键的状态。以及,感知服务还可以通过显示器驱动,获取到显示屏的状态。感知服务可结合获取到的各模块(或器件)的状态,判断是否满足检测条件。
结合图6,图7为示例性示出的检测条件判断流程。请参照图7,感知服务判断是否满足检测条件的具体流程包括:
S701,感知服务判断是否亮屏。
示例性的,请参照图6,感知服务响应于不熄屏应用的指示,通过显示器驱动获取显示屏的状态。可选地,显示屏状态可包括熄屏、半熄屏和亮屏,其中,亮屏进一步包括锁屏和解锁。举例说明,手机在熄屏状态下,接收到用户点击开机键的操作,手机通过人脸解锁后,显示桌面,此时显示屏为亮屏状态。示例性的,手机在熄屏状态下,接收到用户点击开机键的操作,在人脸结果未成功的情况下,显示锁屏界面,此时显示屏为亮屏状态。再举例说明,在锁屏模式(显示屏亮屏)下,若在指定的时长(例如20s,可根据实际需求设置,本申请不做限定)内未接收到用户操作,锁屏界面变为半熄屏状态,并在3s(可根据实际需求设置,本申请不做限定)内未接收到用户操作后,进入熄屏模式,即,显示屏熄屏。
请继续参照图6,示例性的,感知服务可通过显示器驱动获取到显示屏的状态,以判断显示屏的状态是否为亮屏。一个示例中,若显示屏当前为亮屏状态,则执行S702。另一个示例中,若显示屏当前为熄屏状态或半熄屏状态,则判断不满足检测条件,本次判断流程结束。
可选地,在本申请实施例中,感知服务可以在启动后,触发显示器驱动实时上报显示屏的状态。例如,感知服务可以向显示器驱动发送指示信息,以指示显示器驱动将显示屏的状态上报给感知服务。
S702,感知服务判断接近光传感器是否被遮挡。
示例性的,请参照图6,感知服务可向输入管理器发送指示信息,以指示输入管理器从传感器驱动获取接近光传感器、触摸传感器的状态,以及,从按键驱动获取按键(例如开机键)的状态。输入管理服务响应于感知服务的指示,通过传感器驱动实时获取接近光传感器与触摸传感器的状态,并通过按键驱动,实时获取按键的状态。
举例说明,若用户将手机扣在桌面,或者是将手机放在口袋里,则接近光传感器将被遮挡。接近光传感器检测到遮挡后,向传感器驱动发送检测信号,传感器驱动可基于接收到的检测信号,确定接近光传感器被遮挡,即,存在接近光传感器遮挡事件。传感器驱动可以将接近光传感器遮挡事件输出至输入管理服务。输入管理服务响应于接收到的接近光传感器遮挡事件,确定接近光传感器被遮挡。输入管理服务向感知服务指示接近光传感器被遮挡。
示例性的,若接近光传感器未被遮挡,可选地,接近光传感器可以不输出检测信号,也就是说,传感器驱动在未接收到接近光传感器发送的检测信号的情况下,确定不存在接近光遮挡事件。需要说明的是,图7所示的“结束”步骤可选地为感知服务在判断某个条件不满足的情况下,结束本次判断流程。本次流程结束后,感知服务重新执行S701,下文中不再重复说明。
S703,感知服务判断是否已解锁。
示例性的,请参照图6,感知服务可通过显示器驱动,获取到显示屏当前的状态,在确定显示屏亮屏,并且接近光传感器未被遮挡的情况下,感知服务可进一步通过显示器驱动获取显示屏当前是否处于已解锁的状态。需要说明的是,本申请实施例中的模块执行的步骤仅为示意性举例,例如,在其他实施例中,感知服务也可以通过其它模块获取到显示屏的显示状态或者是解锁状态,本申请不做限定。
一个示例中,若感知服务获取到手机当前已解锁,例如,手机当前显示桌面,或者,手机当前显示游戏应用(也可以是其他应用,本申请不做限定),则执行S704。另一个示例中,若感知服务判断手机未解锁,例如,手机亮屏,但处于锁屏模式,本次判断流程结束。
S704,感知服务判断是否启动设定的应用。
示例性的,感知服务可调取前台应用的信息。示例性的,“前台应用”可选地为当前正在运行,且显示在显示屏上的应用。例如,手机的显示界面当前显示视频应用和文档,文档和视频应用均为前台应用。当然,在一些实施例中,“前台应用”可选地为正在运行,且显示在显示屏上,以及用户最后一次操作的应用。本申请不做限定。
示例性的,感知服务可根据获取到的前台应用的信息,确定前台应用是否为指定应用。在本申请实施例中,当手机启动一些指定的应用的情况下,手机可判定不满足检测条件,即,无需进行后续的不熄屏检测。例如,若前台应用为语音通话应用,相应的,用户在使用语音通话时,即使手机熄屏,也不会对语音通话应用造成影响。因此,对于语音通话应用,可以无需启动不熄屏检测流程。当然,指定应用除包括语音通话外,还可以包括其它一个或多个应用(或功能、或服务)。举例说明,若手机正在运行视频应用,且视频应用是全屏显示的。此时,视频应用在全屏显示的情况下,将开启应用锁。当应用锁开启后,手机将持续保持亮屏不锁屏状态。再例如,若手机正在运行视频会议应用,可选地,视频会议应用在启动后自动开启应用锁。感知服务在检测到视频会议应用启动后,结束本次检测流程。需要说明的是,本申请实施例中的指定应用仅为示意性举例,在其他实施例中,指定应用还可以需要屏幕持续保持亮屏解锁状态需求的应用,本申请不做限定。
一个示例中,若感知服务检测到指定应用开启,则本次流程结束。可选地,在指定应用结束运行后,感知服务再从S701开始执行。
另一个示例中,若感知服务检测到指定应用未开启,则执行S705。
需要说明的是,本申请实施例中对S702~S704的条件的判定顺序不做限定,例如,感知服务可以先判定是否解锁,再判定接近光传感器是否被遮挡。本申请实施例中,感知服务还可以同时对各条件进行检测,本申请不做限定。
S705,感知服务判断预设时长内是否有用户操作。
示例性的,请参照图6,如上文所述,感知服务可通过输入管理服务,确定是否存在用户操作。用户操作包括但不限于:触摸显示屏以及按开机键等操作。举例说明,若用户点击触摸屏,则触摸传感器将检测到用户的点击操作,并向传感器驱动输出检测信号。传感器驱动响应于接收到的检测信号,确定存在触摸事件。传感器驱动向输入管理服务输出触摸事件。输入管理服务基于接收到的触摸事件,确定当前存在用户触摸操作,并向感知服务发送指示信息,以指示当前存在用户触摸操作。相应的,感知服务确定存在用户触摸操作,本次检测流程结束。再举例说明,若用户按压开机键,则按键驱动将检测到按键被按压,按键驱动向输入管理服务输出开机键按压事件,输入管理服务响应于接收到的事件,向感知服务发送指示信息,以指示当前存在开机键按压操作。相应的,感知服务确定存在用户按压开机键的操作,本次检测流程结束。
示例性的,感知服务可预先设置用户操作检测时长。如图3b所示,本申请实施例中,手机可提供几种休眠选项,包括15秒选项、30秒选项306、1分钟选项、5分钟选项、 10分钟选项。相应的,根据休眠时长的不同,对应的用户操作检测时长也不相同。举例说明,以休眠时长为30秒为例,手机从亮屏状态下的最后一次操作开始,若24s内未接收到用户操作,则手机进入半熄屏模式。在半熄屏模式下,若在6s内未接收到用户操作,则手机进入熄屏模式。需要说明的是,本申请实施例中所述的各时长设置仅为示意性举例,本申请不做限定,下文中不再重复说明。示例性的,在休眠时长为30s的场景下,手机执行S701~S704,即,感知服务在检测到手机处于亮屏状态、解锁状态、未启动任何指定应用、以及接近光传感器未遮挡的情况下,感知服务开始监测是否接收到用户操作,并持续监测19s,也就是说,在休眠时长为30s的情况下,对应的预设时长(即检测是否接收到用户操作的持续时长)为19s。可选地,若在19s内,感知服务未接收到输入管理服务指示的任何用户操作,则,感知服务确定预设时长内未接收到用户操作,启动不熄屏检测流程,即执行S706。可选地,若在19s内,感知服务检测到用户操作,则本次流程结束,重复执行S701。可选地,若在19s内,感知服务检测到接近光传感器被这样,例如,用户将手机的正面扣在桌面上,或者将手机放进口袋里,则感知服务结束本次流程,重复执行S701。可以理解为,在休眠30s的情况下,感知服务是在即将进入半熄屏前的5s开始进行不熄屏检测,从而在保证检测实时性的同时,降低系统功耗。
S706,感知服务开始检测。
示例性的,仍参照图6,感知服务在检测到满足检测条件,即S701~S705中的条件全部符合后,感知服务向不熄屏应用发送指示信息,用于指示满足检测条件。示例性的,不熄屏应用响应于接收到的感知服务发送的指示信息,确定检测条件全部满足,可开始进行不熄屏检测。不熄屏应用可向感知服务发送指示信息,用于指示启动不熄屏检测。可选地,不熄屏应用可基于用户的选择,向感知服务指示具体开启哪种不熄屏检测。需要说明的是,对于不同的检测类型,其对应的检测条件可以相同,也可以不相同。举例说明,若用户在图5中的选择包括注视不熄屏选项,则不熄屏应用向感知服务发送指示信息,用于指示感知服务启动注视不熄屏检测。若用户在图5中的选择包括声音不熄屏选项,则不熄屏应用向感知服务发送指示信息,用于指示感知服务启动声音不熄屏检测。此处不再逐一举例说明。
S707,感知服务判断是否满足不熄屏条件。
如上文所述,不同的不熄屏检测对应的不熄屏条件可能是不相同的。下面以注视不熄屏场景为例进行说明。请参照图8,示例性的,感知服务响应于不熄屏应用的指示开始进行不熄屏检测之后,基于与注视不熄屏功能对应的多个条件进行检测。注视不熄屏条件包括但不限于以下至少之一:
1)在检测期间,未运行语音通话;
2)在检测期间,未检测到触摸操作。
3)在检测期间,未检测到锁屏操作。
4)在检测期间,前台应用未启动应用锁。
5)在检测期间,接近光传感器未被持续遮挡。
6)在检测期间,检测到注视。
需要说明的是,本申请实施例中仅以上述条件为例进行说明,在其他实施例中,可以包括更多或更少的条件,本申请不做限定。
进一步需要说明的是,感知服务可设置有检测时长。在本申请实施例中,不同的休眠时长,对应的检测时长可以相同,也可以不同。例如,若休眠时长为15s,则对应的检测时长可选地为7s。若休眠时长为30s,对应的检测时长可选地为11s,若休眠时长为1 分钟、2分钟、5分钟或10分钟,对应的检测时长可以为11s。上述数值仅为示意性举例,可根据实际需求设置,本申请不做限定。
示例性的,在本申请实施例中,感知服务基于上述条件进行检测,当条件1)~5)中的任一个条件不满足,则本次检测流程结束,重复执行S701。当条件6)满足,即感知服务确定存在注视,则感知模块通知不熄屏应用,满足注视不熄屏条件,不熄屏应用可控制手机亮屏。
在一种可能的实现方式中,声音不熄屏条件包括但不限于以下至少之一:
1)在检测期间,未运行语音通话;
2)在检测期间,未检测到触摸操作。
3)在检测期间,未检测到锁屏操作。
4)在检测期间,前台应用未启动应用锁。
5)在检测期间,接近光传感器未被持续遮挡。
6)在检测期间,检测到指定声音。
示例性的,条件1)~5)的描述可参照上文,此处不再赘述。可选地,指定声音可具有指定内容的语音指令,例如用户对准手机说“亮屏”,手机可响应于检测到的语音,保持亮屏状态。
在另一种可能的实现方式中,遮挡不熄屏条件包括但不限于以下至少之一:
1)在检测期间,未运行语音通话;
2)在检测期间,未检测到触摸操作。
3)在检测期间,未检测到锁屏操作。
4)在检测期间,前台应用未启动应用锁。
5)在检测期间,接近光传感器未被持续遮挡。
6)在检测期间,接近光传感器被遮挡指定次数。
示例性的,条件1)~5)的描述可参照上文,此处不再赘述。示例性的,接近光传感器被遮挡指定次数可选地为接近光传感器被遮挡一次或多次,每次遮挡的时长小于设定的阈值(例如1s)。举例说明,用户可对准显示屏挥动手掌,在挥动过程中,接近光传感器被多次遮挡,并且每次被遮挡的时长小于设定的阈值,则满足条件6)的要求。需要说明的是,本申请实施例中以注视不熄屏检测为例进行说明,声音不熄屏以及遮挡不熄屏场景的实现方式可参照注视不熄屏检测的具体内容,本申请不再逐一举例说明。
下面以注视不熄屏条件检测为例进行说明。结合图8,图9为示例性示出的模块交互示意图。请参照图9,示例性的,感知服务响应于不熄屏应用的指示,开始进行注视不熄屏条件检测。感知服务可通过输入管理服务获取到接近光传感器、触摸传感器以及开机键的状态,以确定是否存在用户操作,具体描述可参照上文,此处不再赘述。
一个示例中,若感知服务基于输入管理服务输入的信息,检测到存在触摸操作、锁屏操作等操作,或者是检测到接近光传感器被持续遮挡,感知服务判定不满足注视不熄屏条件,重新执行S701。举例说明,若在检测期间,用户将手机扣在桌面上,使得接近光传感器被遮挡,则感知模块在检测到接近光传感器被持续遮挡(例如持续3s以上,可根据实际需求设置,本申请不做限定)后,停止注视不熄屏条件的检测,重新执行S701。示例性的,若在检测期间,感知服务检测到用户按压开机键或者是触摸屏幕,感知服务停止注视不熄屏条件的检测,重新执行S701。
另一个示例中,感知服务可监测语音应用是否启动,以及,感知服务可监测前台应用是否开启应用锁。具体描述可参照上文,此处不再赘述。
请继续参照图9,示例性的,以感知服务在检测期间,判定上述条件1)~条件5) 均满足为例进行说明。感知服务响应于接收到的不熄屏应用指示开始检测的信息,感知服务开始检测,在检测期间,感知服务除持续检测条件1)~条件5)是否满足的同时,感知服务指示AO服务进行注视检测。AO服务响应于感知服务的指示,指示摄像头驱动启动摄像头,并将摄像头采集的图像输出至TEE。摄像头驱动响应于AO服务的指示,从摄像头获取摄像头采集的图像,并将采集到的图像输出至TEE。
请参照图10,示例性的,仍以检测时长为11s为例。本申请实施例中的,摄像头驱动可以5fps的帧率(即每秒采集的图像帧数量),向TEE输出图像帧,从而在保证时效性的同时,降低TEE的占用。其中,5fps可选地为摄像头每秒向TEE输出5个图像帧。该数值仅为示意性举例,本申请不做限定。
仍参照图10,示例性的,在本申请实施例中,摄像头的帧率可选地为60fps,即每秒采集的图像帧的数量可选地为60个。摄像头驱动可每隔200ms,从摄像头获取一个图像帧,并输出至TEE,并持续11s(即检测时长)。可选地,在其他实施例中,摄像头驱动也可以控制摄像头采集的帧率,例如,摄像头可基于5fps的帧率采集图像,即,每隔200ms 采集一个图像帧,并输出至摄像头驱动。帧率仅为示意性举例,本申请不做限定。
仍参照图9,示例性的,TEE从摄像头驱动获取摄像头采集的图像帧,例如,TEE 可以每1秒从摄像头驱动获取到5个图像帧。AO服务可基于预设的检测算法(也可以称为识别算法),对TEE中的图像进行识别。
图11为示例性示出的识别流程示意图。请参照图11,示例性的,摄像头驱动将图像帧输出至TEE。AO服务基于人脸检测算法对TEE中的图像帧进行识别,以检测图像帧中是否包括单个人脸。可选地,若图像帧中不包括人脸或是包括多个人脸,则AO服务确定对该图像帧的识别失败,继续对下一个图像帧进行处理。可选地,在本申请实施例中,AO服务对一个图像帧识别后,将识别完成的图像帧从TEE中删除。可选地,AO服务也可以在每识别5个(也可以是其他数量,本申请不做限定)图像帧后,将识别完成的5个图像帧删除,从而降低TEE占用,并且进一步提高用户隐私的安全性。
示例性的,若AO服务检测到图像帧中包括单个人脸,AO服务基于注视检测算法,识别单个人脸中的人眼是否注视。举例说明,假设用户正对手机,但是用户的目光注视手机外的其它地方。相应的,摄像头采集到的图像包括用户人脸,AO服务基于人脸检测算法识别到单个人脸,而在注视检测过程中,AO服务识别到用户未注视手机,则确定本次识别失败,继续对下一个图像帧进行处理。示例性的,若用户正对手机,且用户注视显示屏。相应的,摄像头采集到的图像包括用户人脸,AO服务基于人脸检测算法识别到单个人脸,并在注视检测过程中,AO服务识别到用户注视手机,则确定注视检测成功。需要说明的是,算法的具体细节可参照已有技术,本申请不再赘述。
仍参照图9,示例性的,AO服务确定注视检测成功,同时,上文中所述的条件1) ~5)均满足的情况下,AO服务确定满足注视不熄屏条件。AO服务向不熄屏应用发送指示信息,用于指示满足注视不熄屏条件。
请参照图12,示例性的,不熄屏应用响应于接收到的感知服务的指示信息,确定满足不熄屏条件。不熄屏应用向感知服务发送指示信息,用于指示亮屏。感知服务响应于接收到的指示信息,通过电源管理服务提供的接口,向电源管理服务发送指示信息,用于指示控制显示屏亮屏。电源管理服务响应于感知服务的指示,通过显示器驱动控制显示屏亮屏。在本申请实施例中,“显示屏亮屏”可选地为显示屏当前处于亮屏状态,并控制显示屏继续处于亮屏状态。或者,还可以是显示屏当前处于半熄屏状态,控制显示屏进入亮屏状态。具体示例将在下面的实施例中详细说明。
示例性的,感知服务在控制显示屏亮屏后,重复执行S705,即,继续监测预设时长内是否有用户操作,并在检测到预设时长内无操作之后,继续执行注视不熄屏监测流程。示例性的,若感知服务判定不满足注视不熄屏条件,则本次流程结束,感知服务重复执行S701。
下面结合具体示例,对本申请实施例中的不熄屏方案进行详细说明。示例性的,仍以用户选择开启注视不熄屏功能为例进行说明。图13为示例性示出的不熄屏检测示意图。请参照图13,示例性的,在T0时刻,手机响应于接收到的用户的解锁操作,从锁屏模式(或熄屏模式)进入桌面。该场景仅为示例性举例,手机进入亮屏状态的场景还可以是手机从其它应用退出后进入桌面;或者,用户一直在使用手机,从T0时刻开始,手机处于亮屏状态,并且无用户操作。
示例性的,在T0时刻,感知模块执行S701~S704,在S701~S704均满足后,感知模块继续执行S705,即,在预设时长内(例如19s)内检测是否接收到用户操作。具体检测过程可参照图6~图7的相关内容,此处不再赘述。在本示例中,以感知服务在19s内未检测到用户操作为例进行说明。
在T1时刻,结合图9,感知服务响应于不熄屏应用的指示,开始进行注视不熄屏检测。也可以理解为,感知服务启动检测窗口,在检测窗口内,检测是否满足注视不熄屏条件。可选地,以休眠时长为30s为例,检测窗口的起始沿(或上升沿,即T1时刻)与半熄屏开始时刻(即T2时刻)之间的时间差为5s,检测窗口的时长为11s,即,检测窗口的结束沿(即下降沿,即T3时刻)与半熄屏模式的结束时刻相同。具体检测过程可参照图9~图11的相关内容,此处不再赘述。也就是说,感知服务可在手机进入半熄屏状态之前的5s开始进行检测,并在手机保持半熄屏状态时,持续检测。需要说明的是,本申请实施例中的各时刻以及时长仅为示意性举例,本申请不做限定,下文中不再重复说明
示例性的,在图13的场景中,以用户一直未注视手机为例,相应的,感知服务在检测期间(即11s内),未检测到用户注视,即确定不满足注视不熄屏条件。可选地,请参照图9,示例性的,感知服务可向AO服务发送指示信息,以指示AO服务停止注视检测。AO服务响应于感知服务的指示,通过摄像头驱动指示摄像头停止采集图像。当然,如果摄像头驱动和摄像头正在被其它应用调用,则摄像头驱动与摄像头可继续工作,而摄像头驱动停止向TEE传输图像帧。
仍参照图13,示例性的,手机在半熄屏状态下维持6s,进入熄屏模式,即,显示熄屏界面。感知服务的本次检测流程结束,重新执行S701,即在手机再次亮屏后,重复执行上述步骤。
图14为示例性示出的另一种不熄屏检测示意图。请参照图14,示例性的,T0~T2时刻的描述可参照上文,此处不再赘述。在T3时刻,用户正对手机,且注视手机显示屏。此时,手机已处于半熄屏状态,如图15a所示。
结合图9,示例性的,摄像头驱动将摄像头采集的图像帧输出至TEE。请参照图16,示例性的,在T3时刻,也可以理解为本次检测窗口开始后的第8秒,摄像头采集到的图像帧3中包括用户的人脸图像。仍参照图9,示例性的,AO服务在对图像帧3进行检测过程中,确定图像帧3包括单个人脸,并且基于注视检测算法,确定存在用户注视。AO 服务可向感知服务指示当前存在用户注视。感知服务响应于AO服务的指示,向不熄屏服务发送指示信息,用于指示满足不熄屏条件。不熄屏应用响应于感知服务的指示,确定满足注视不熄屏条件,相应的,不熄屏应用可指示感知服务控制显示屏亮屏,各模块的具体交互过程可参照图12中的相关描述,此处不再赘述。如图15b所示,示例性的,在T4时刻,手机的显示屏从半熄屏状态进入亮屏状态。需要说明的是,本申请实施例中以延迟(包括摄像头采集延迟和算法延迟)仅为示意性举例,可选地,算法时延可以是毫秒级的。举例说明,用户在T3时刻注视屏幕,摄像头在T3后相隔200ms(也可以小于200ms)时开始采集图像帧3,图像帧3中包括用户图像。AO服务对图像帧3进行识别,识别到人眼后,感知服务基于AO服务的识别结果,在T4时刻控制显示屏亮屏。可选地,T3时刻与T4时刻之间的间隔可选地为毫秒级别。本申请实施例的附图中所示的延迟仅为示意性距离,本申请不做限定。
为例进行说明,例如,用户在T3时刻注视显示屏,但是由于摄像头采集以及算法等延迟,使得显示屏在T4时刻(与T3时刻间隔1s)才亮屏。
图17为示例性示出的另一种不熄屏检测示意图。示例性的,在该场景中,以用户间歇性注视手机屏幕为例进行说明。需要说明的是,图17中所示的用户注视的时长和时间仅为示意性举例,本申请不做限定。请参照图17,示例性的,手机的屏幕从T0时刻开始处于熄屏模式。当然,手机可以是在T0时刻之前就处于熄屏模式,也可以是在T0时刻,用户按压开机键,使得手机进入熄屏模式,本申请不做限定。在T1时刻,如图18 的(1)所示,用户按压开机键。如图18的(2)所示,手机响应于接收到的用户操作,通过人脸解锁后,显示桌面,此时,手机处于亮屏状态。
仍参照图17,示例性的,在T0~T1时刻,感知服务按照图6~图7所示的流程执行,其中,由于T0~T1时刻,手机一直处于熄屏状态,感知服务判断不满足检测条件,重复执行S701。示例性的,手机处于熄屏模式,即显示屏处于熄屏状态时,用户点击开机键,手机对用户进行人脸识别解锁。在T1时刻,手机解锁成功,显示桌面。需要说明的是,本申请实施例中的手机从熄屏模式到桌面模式,或者可以理解从熄屏状态到亮屏状态的方式仅为示意性举例,例如,在其他实施例中,用户还可以通过滑动解锁等方式,使得手机从熄屏状态变为亮屏状态(指解锁后的亮屏状态)。感知服务从显示器驱动获取到显示屏的状态为亮屏,并且手机为已解锁状态(即桌面模式),手机的接近光传感器也未被遮挡,以及,也未运行具有应用锁的应用,即,S701~S704均满足条件,感知服务从T1时刻开始持续监测19s,以监测19s内是否存在用户操作。本申请实施例中以未监测到用户操作为例进行说明。也就是说,感知服务确定满足检测条件,感知服务在T2时刻,向不熄屏应用发送指示信息,用于指示满足检测条件。不熄屏应用响应于感知服务的指示,向感知服务发送指示信息,用于指示感知服务进行后续的注视不熄屏检测。感知服务响应于不熄屏应用的指示,开启检测窗口,如图17所示,在T2时刻,感知服务开始进行检测,开启检测窗口。检测窗口的描述可参照上文,此处不再赘述。需要说明的是,在T1~T2时刻,虽然用户间歇性地注视显示屏,但是由于感知服务在T1~T2时刻未启动检测窗口,因此,感知服务是无法获取到用户的注视情况的。
示例性的,T2时刻~T3时刻,用户未注视显示屏。相应的,感知模块未能检测到用户注视,具体检测过程可参照图8~图9的描述,此处不再赘述。示例性的,在T3时刻 (其中,T3时刻与T2时刻之间的间隔为3s),用户注视显示屏。感知服务检测到用户注视,确定满足注视不熄屏条件,感知服务通知不熄屏应用。在T4时刻(其中,T4时刻与T3时刻之间的间隔为1s),感知服务响应于不熄屏应用的指示,通过电源管理模块,控制显示屏亮屏。可以理解为,如果在T4时刻,感知服务未检测到用户注视,则显示屏将在亮屏时长到达24s后进入半熄屏状态。而在T4时刻,由于检测到用户注视,显示屏维持亮屏状态,并且,重新对亮屏状态的时长进行计时(时长为24s)。也就是说,如果在下一个24s(从T4时刻开始计时)后未检测到用户注视或者用户操作等,显示屏将进入半熄屏状态。
请继续参照图17,示例性的,在T4时刻,显示屏重新进行亮屏计时,计时时长为24s。感知服务从S705开始执行,即,从T4时刻开始,再次检测19s内是否有用户操作。示例性的,在下一个检测窗口内,感知服务在检测窗口开启后的第4秒检测到用户注视,并在第5秒,也可以理解为在显示屏即将半熄屏之前,控制显示屏继续保持在亮屏状态。具体描述可参照上文,此处不再赘述。
图19为示例性示出的另一种不熄屏检测示意图。示例性的,在该场景中,以用户间歇性注视手机屏幕为例进行说明。需要说明的是,图19中所示的用户注视的时长和时间仅为示意性举例,本申请不做限定。请参照图19,示例性的,手机的屏幕从T0时刻开始处于熄屏模式。当然,手机可以是在T0时刻之前就处于熄屏模式,也可以是在T0时刻,用户按压开机键,使得手机进入熄屏模式,本申请不做限定。在T1时刻,如图18 的(1)所示,用户按压开机键。如图18的(2)所示,手机响应于接收到的用户操作,通过人脸解锁后,显示桌面,此时,手机处于亮屏状态。
仍参照图19,示例性的,在T0~T1时刻,感知服务按照图6~图7所示的流程执行,具体描述可参照图17的相关内容,此处不再赘述。示例性的,如图19所示,在本实施例中,用户从T2时刻开始持续注视手机显示屏。
在T3时刻,感知服务开始进行注视不熄屏检测,开启检测窗口。检测窗口的描述可参照上文,此处不再赘述。需要说明的是,在T2~T3时刻,虽然用户持续地注视显示屏,但是由于感知服务在T2~T3时刻未启动检测窗口,因此,感知服务是无法获取到用户的注视情况的。
如图19所示,在本实施例中,用户是持续注视显示屏的,因此,感知服务在开启检测窗口后,即可检测到用户注视。在T4时刻,感知服务可控制显示屏继续保持亮屏。可选地,如上文所述,T3时刻~T4时刻之间的时间差可选地为算法时延,例如可以是1s,当然也可以是更小或更大的数值,本申请不做限定。
示例性的,显示屏从T4时刻,重新计时24s。以及,感知服务从T4时刻,重复执行S705,即,继续监测19s内是否接收到用户操作。具体流程可参照上文描述,此处不再赘述。示例性的,在T5时刻,感知服务再次启动注视不熄屏检测。在T6时刻,感知服务检测到用户注视后,控制显示屏保持亮屏状态。
图20为示例性示出的另一种不熄屏检测示意图。请参照图20,示例性的,感知服务在T1时刻开始检测注视不熄屏,即开启检测窗口。示例性的,预设的检测时长为11s,在本实施例中,在T2时刻,即检测时长为3s时,如图21的(1)所示,用户按压开机键。如图21的(2)所示,手机响应于接收到的用户操作,进入熄屏模式,即显示屏熄屏。相应的,在T2时刻,感知模块可通过输入管理服务确定开机键被按压,感知模块可确定手机被锁屏。根据图8的相关描述,感知模块进行注视不熄屏检测时,如果图8中的任意一个条件被触发,则本次检测流程结束。示例性的,仍参照图20,感知模块在T2 时刻结束本次检测,并重复执行S701。未描述部分可参照上文,此处不再赘述。
图22为示例性示出的另一种不熄屏检测示意图。请参照图22,示例性的,感知服务在T1时刻开始检测注视不熄屏,即开启检测窗口。在T2时刻,用户触屏显示屏,显示屏保持亮屏状态。感知服务响应于获取到的用户触摸显示屏操作,确定不满足注视不熄屏条件,本次检测流程结束,感知服务重复执行S701。需要说明的是,图22仅示意性示出用户触摸操作的场景,在其他实施例中,图22所示的流程同样适用于在检测过程中,感知服务检测到前台应用启动应用锁的场景。也就是说,如果在T2时刻,前台应用启动应用锁,则手机保持亮屏状态,感知服务结束本次检测流程,并重复执行S701。
图23为示例性示出的另一种不熄屏检测示意图。请参照图23,示例性的,感知服务在T1时刻开始检测注视不熄屏,即开启检测窗口。在T2时刻,用户接听语音通话。感知服务检测到用户接听语音通话,确定不满足注视不熄屏条件,本次检测流程结束,感知服务重复执行S701。示例性的,在T3时刻,显示屏亮屏持续24s后,进入半熄屏状态。也就是说,在用户接打语音电话的过程中,手机是否亮屏不影响用户使用手机,相应的,手机可进入半熄屏状态以节省功耗。需要说明的是,图23仅示意性示出语音通话的场景,在其他实施例中,图23所示的流程同样适用于在检测过程中,感知服务检测到接近光传感器被持续遮挡的场景。也就是说,如果在T2时刻,用户将手机扣在桌面上,使得接近光传感器被持续遮挡,相应的,感知服务结束本次检测流程,并重复执行S701。手机可在亮屏状态保持24s后,进入半熄屏状态。
图24为示例性示出的另一种不熄屏检测示意图。请参照图24,示例性的,感知模块在执行S705,即,检测19s内是否有用户操作的过程中,在T1时刻(例如检测开始后的第15s),感知服务检测到用户触碰屏幕。感知模块可响应于接收到的用户触碰屏幕的操作,确定不满足检测条件,本次检测流程结束。感知服务重复执行S701,后续过程可参照上文实施例中的相关描述,此处不再赘述。
可以理解的是,电子设备为了实现上述功能,其包含了执行各个功能相应的硬件和/ 或软件模块。结合本文中所公开的实施例描述的各示例的算法步骤,本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。本领域技术人员可以结合实施例对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
一个示例中,图25示出了本申请实施例的一种装置2500的示意性框图装置2500可包括:处理器2501和收发器/收发管脚2502,可选地,还包括存储器2503。
装置2500的各个组件通过总线2504耦合在一起,其中总线2504除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见,在图中将各种总线都称为总线2504。
可选地,存储器2503可以用于前述方法实施例中的指令。该处理器2501可用于执行存储器2503中的指令,并控制接收管脚接收信号,以及控制发送管脚发送信号。
装置2500可以是上述方法实施例中的电子设备或电子设备的芯片。
其中,上述方法实施例涉及的各步骤的所有相关内容均可以援引到对应功能模块的功能描述,在此不再赘述。
本实施例还提供一种计算机存储介质,该计算机存储介质中存储有计算机指令,当该计算机指令在电子设备上运行时,使得电子设备执行上述相关方法步骤实现上述实施例中的方法。
本实施例还提供了一种计算机程序产品,当该计算机程序产品在计算机上运行时,使得计算机执行上述相关步骤,以实现上述实施例中的方法。
另外,本申请的实施例还提供一种装置,这个装置具体可以是芯片,组件或模块,该装置可包括相连的处理器和存储器;其中,存储器用于存储计算机执行指令,当装置运行时,处理器可执行存储器存储的计算机执行指令,以使芯片执行上述各方法实施例中的方法。
其中,本实施例提供的电子设备、计算机存储介质、计算机程序产品或芯片均用于执行上文所提供的对应的方法,因此,其所能达到的有益效果可参考上文所提供的对应的方法中的有益效果,此处不再赘述。
通过以上实施方式的描述,所属领域的技术人员可以了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个装置,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是一个物理单元或多个物理单元,即可以位于一个地方,或者也可以分布到多个不同地方。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
本申请各个实施例的任意内容,以及同一实施例的任意内容,均可以自由组合。对上述内容的任意组合均在本申请的范围之内。
集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该软件产品存储在一个存储介质中,包括若干指令用以使得一个设备(可以是单片机,芯片等)或处理器(processor)执行本申请各个实施例方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(read only memory,ROM)、随机存取存储器(random access memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。
结合本申请实施例公开内容所描述的方法或者算法的步骤可以硬件的方式来实现,也可以是由处理器执行软件指令的方式来实现。软件指令可以由相应的软件模块组成,软件模块可以被存放于随机存取存储器(Random Access Memory,RAM)、闪存、只读存储器(Read Only Memory,ROM)、可擦除可编程只读存储器(Erasable Programmable ROM,EPROM)、电可擦可编程只读存储器(Electrically EPROM,EEPROM)、寄存器、硬盘、移动硬盘、只读光盘(CD-ROM)或者本领域熟知的任何其它形式的存储介质中。一种示例性的存储介质耦合至处理器,从而使处理器能够从该存储介质读取信息,且可向该存储介质写入信息。当然,存储介质也可以是处理器的组成部分。处理器和存储介质可以位于ASIC中。
本领域技术人员应该可以意识到,在上述一个或多个示例中,本申请实施例所描述的功能可以用硬件、软件、固件或它们的任意组合来实现。当使用软件实现时,可以将这些功能存储在计算机可读介质中或者作为计算机可读介质上的一个或多个指令或代码进行传输。计算机可读介质包括计算机存储介质和通信介质,其中通信介质包括便于从一个地方向另一个地方传送计算机程序的任何介质。存储介质可以是通用或专用计算机能够存取的任何可用介质。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。
Claims (33)
1.一种电子设备,其特征在于,包括:
一个或多个处理器、存储器和指纹传感器;
以及一个或多个计算机程序,其中所述一个或多个计算机程序存储在所述存储器上,当所述计算机程序被所述一个或多个处理器执行时,使得所述电子设备执行以下步骤:
所述电子设备处于熄屏状态时,接收到第一用户操作;
响应于接收到的所述第一用户操作,从所述熄屏状态变为亮屏状态;
当所述电子设备处于所述亮屏状态时,在第一时长内未接收到用户操作,并且所述电子设备的接近光传感器满足预设条件,启动第一检测;
在所述第一检测内,检测生物特征信息;
在所述第一检测内的第一时刻,所述电子设备从所述亮屏状态变为半熄屏状态;
在所述第一检测内的第二时刻,检测到第一目标生物特征信息,所述电子设备从所述半熄屏状态变为所述亮屏状态。
2.根据权利要求1所述的电子设备,其特征在于,当所述计算机程序被所述一个或多个处理器执行时,使得所述电子设备执行以下步骤:
所述电子设备从所述熄屏状态变为所述亮屏状态的第三时刻至所述第一时刻,未检测到用户操作,所述电子设备在所述第一时刻,从所述亮屏状态变为所述半熄屏状态。
3.根据权利要求2所述的电子设备,其特征在于,所述第三时刻与所述第一时刻之间的时长为第二时长。
4.根据权利要求3所述的电子设备,其特征在于,所述第一检测的起始时刻与所述第一时刻之间的时长为第三时长,所述第三时长小于所述第二时长。
5.根据权利要求3所述的电子设备,其特征在于,当所述计算机程序被所述一个或多个处理器执行时,使得所述电子设备执行以下步骤:
检测到所述第一目标生物特征信息,结束所述第一检测。
6.根据权利要求3所述的电子设备,其特征在于,当所述计算机程序被所述一个或多个处理器执行时,使得所述电子设备执行以下步骤:
所述电子设备从所述半熄屏状态变为所述亮屏状态,在所述第一时长内未接收到用户操作,并且所述接近光传感器满足所述预设条件,启动第二检测;
在所述第二检测内的第四时刻,检测到第二目标生物特征,控制所述电子设备保持所述亮屏状态。
7.根据权利要求6所述的电子设备,其特征在于,当所述计算机程序被所述一个或多个处理器执行时,使得所述电子设备执行以下步骤:
检测到所述第二目标生物特征,结束所述第二检测。
8.根据权利要求6所述的电子设备,其特征在于,当所述计算机程序被所述一个或多个处理器执行时,使得所述电子设备执行以下步骤:
所述电子设备保持所述亮屏状态,在所述第一时长内未接收到用户操作,并且所述接近光传感器满足所述预设条件,启动第三检测;所述第三检测时长为所述第二时长;
在所述第三检测内的第五时刻,检测到第三目标生物特征,控制所述电子设备保持所述亮屏状态。
9.根据权利要求8所述的电子设备,其特征在于,当所述计算机程序被所述一个或多个处理器执行时,使得所述电子设备执行以下步骤:
检测到所述第三目标生物特征,结束所述第二检测。
10.根据权利要求8所述的电子设备,其特征在于,所述第二检测的起始时刻与所述第四时刻之间的时长为第五时长,所述第三检测的起始时刻与所述第五时刻之间的时长为第六时长;所述第六时长与所述第五时长不同。
11.根据权利要求3所述的电子设备,其特征在于,当所述计算机程序被所述一个或多个处理器执行时,使得所述电子设备执行以下步骤:
所述电子设备从所述半熄屏状态变为所述亮屏状态,在所述第一时长内未接收到用户操作,并且所述接近光传感器满足所述预设条件,启动第四检测;
在所述第四检测内的第六时刻,检测到用户按压开机键的操作,所述电子设备从所述亮屏状态变为所述熄屏状态。
12.根据权利要求11所述的电子设备,其特征在于,当所述计算机程序被所述一个或多个处理器执行时,使得所述电子设备执行以下步骤:
检测到所述到用户按压开机键的操作,结束所述第四检测。
13.根据权利要求3所述的电子设备,其特征在于,当所述计算机程序被所述一个或多个处理器执行时,使得所述电子设备执行以下步骤:
所述电子设备从所述半熄屏状态变为所述亮屏状态,在所述第一时长内未接收到用户操作,并且所述接近光传感器满足所述预设条件,启动第五检测;
在所述第五检测内的第七时刻,接收到第一语音来电信息,结束所述第五检测。
14.根据权利要求3所述的电子设备,其特征在于,当所述计算机程序被所述一个或多个处理器执行时,使得所述电子设备执行以下步骤:
所述电子设备从所述半熄屏状态变为所述亮屏状态,在所述第一时长内未接收到用户操作,并且所述接近光传感器满足所述预设条件,启动第六检测;
在所述第六检测内,检测生物特征信息;
在所述第六检测内的第八时刻,所述电子设备从所述亮屏状态变为所述半熄屏状态;
在第九时刻,所述第六检测结束,并且所述电子设备从所述半熄屏状态变为所述熄屏状态。
15.根据权利要求1所述的电子设备,其特征在于,所述第一目标生物特征信息为人眼特征信息。
16.根据权利要求1所述的电子设备,其特征在于,当所述计算机程序被所述一个或多个处理器执行时,使得所述电子设备执行以下步骤:
显示智慧感知界面,所述智慧感知界面中包括注视不熄屏选项;
接收用户点击所述注视不熄屏选项的操作,确定注视不熄屏功能开启;
当所述电子设备处于所述亮屏状态时,在第一时长内未接收到用户操作,并且所述电子设备的接近光传感器满足预设条件,以及所述注视不熄屏选项的开启,启动所述第一检测。
17.一种显示屏的控制方法,其特征在于,包括:
电子设备处于熄屏状态时,接收到第一用户操作;
响应于接收到的所述第一用户操作,从所述熄屏状态变为亮屏状态;
当所述电子设备处于所述亮屏状态时,在第一时长内未接收到用户操作,并且所述电子设备的接近光传感器满足预设条件,启动第一检测;
在所述第一检测内,检测生物特征信息;
在所述第一检测内的第一时刻,所述电子设备从所述亮屏状态变为半熄屏状态;
在所述第一检测内的第二时刻,检测到第一目标生物特征信息,所述电子设备从所述半熄屏状态变为所述亮屏状态。
18.根据权利要求17所述的方法,其特征在于,所述电子设备从所述亮屏状态变为半熄屏状态,包括:
所述电子设备从所述熄屏状态变为所述亮屏状态的第三时刻至所述第一时刻,未检测到用户操作,所述电子设备在所述第一时刻,从所述亮屏状态变为所述半熄屏状态。
19.根据权利要求18所述的方法,其特征在于,所述第三时刻与所述第一时刻之间的时长为第二时长。
20.根据权利要求19所述的方法,其特征在于,所述第一检测的起始时刻与所述第一时刻之间的时长为第三时长,所述第三时长小于所述第二时长。
21.根据权利要求19所述的方法,其特征在于,所述方法还包括:
检测到所述第一目标生物特征信息,结束所述第一检测。
22.根据权利要求19所述的方法,其特征在于,所述方法还包括:
所述电子设备从所述半熄屏状态变为所述亮屏状态,在所述第一时长内未接收到用户操作,并且所述接近光传感器满足所述预设条件,启动第二检测;
在所述第二检测内的第四时刻,检测到第二目标生物特征,控制所述电子设备保持所述亮屏状态。
23.根据权利要求22所述的方法,其特征在于,所述方法还包括:
检测到所述第二目标生物特征,结束所述第二检测。
24.根据权利要求22所述的方法,其特征在于,所述方法还包括:
所述电子设备保持所述亮屏状态,在所述第一时长内未接收到用户操作,并且所述接近光传感器满足所述预设条件,启动第三检测;所述第三检测时长为所述第二时长;
在所述第三检测内的第五时刻,检测到第三目标生物特征,控制所述电子设备保持所述亮屏状态。
25.根据权利要求24所述的方法,其特征在于,所述方法还包括:
检测到所述第三目标生物特征,结束所述第二检测。
26.根据权利要求24所述的方法,其特征在于,所述第二检测的起始时刻与所述第四时刻之间的时长为第五时长,所述第三检测的起始时刻与所述第五时刻之间的时长为第六时长;所述第六时长与所述第五时长不同。
27.根据权利要求19所述的方法,其特征在于,所述方法还包括:
所述电子设备从所述半熄屏状态变为所述亮屏状态,在所述第一时长内未接收到用户操作,并且所述接近光传感器满足所述预设条件,启动第四检测;
在所述第四检测内的第六时刻,检测到用户按压开机键的操作,所述电子设备从所述亮屏状态变为所述熄屏状态。
28.根据权利要求27所述的方法,其特征在于,所述方法还包括:
检测到所述到用户按压开机键的操作,结束所述第四检测。
29.根据权利要求19所述的方法,其特征在于,所述方法还包括:
所述电子设备从所述半熄屏状态变为所述亮屏状态,在所述第一时长内未接收到用户操作,并且所述接近光传感器满足所述预设条件,启动第五检测;
在所述第五检测内的第七时刻,接收到第一语音来电信息,结束所述第五检测。
30.根据权利要求19所述的方法,其特征在于,所述方法还包括:
所述电子设备从所述半熄屏状态变为所述亮屏状态,在所述第一时长内未接收到用户操作,并且所述接近光传感器满足所述预设条件,启动第六检测;
在所述第六检测内,检测生物特征信息;
在所述第六检测内的第八时刻,所述电子设备从所述亮屏状态变为所述半熄屏状态;
在第九时刻,所述第六检测结束,并且所述电子设备从所述半熄屏状态变为所述熄屏状态。
31.根据权利要求17所述的方法,其特征在于,所述第一目标生物特征信息为人眼特征信息。
32.根据权利要求17所述的方法,其特征在于,所述方法还包括:
显示智慧感知界面,所述智慧感知界面中包括注视不熄屏选项;
接收用户点击所述注视不熄屏选项的操作,确定注视不熄屏功能开启;
当所述电子设备处于所述亮屏状态时,在第一时长内未接收到用户操作,并且所述电子设备的接近光传感器满足预设条件,以及所述注视不熄屏选项的开启,启动所述第一检测。
33.一种计算机可读存储介质,包括计算机程序,其特征在于,当所述计算机程序在电子设备上运行时,使得所述电子设备执行如权利要求17-32中任意一项所述的方法。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110923990.6A CN115914460A (zh) | 2021-08-12 | 2021-08-12 | 显示屏的控制方法及电子设备 |
US18/553,711 US20240184350A1 (en) | 2021-08-12 | 2022-05-16 | Display screen control method and electronic device |
EP22855004.2A EP4293492A1 (en) | 2021-08-12 | 2022-05-16 | Control method for display screen, and electronic device |
PCT/CN2022/093157 WO2023016017A1 (zh) | 2021-08-12 | 2022-05-16 | 显示屏的控制方法及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110923990.6A CN115914460A (zh) | 2021-08-12 | 2021-08-12 | 显示屏的控制方法及电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115914460A true CN115914460A (zh) | 2023-04-04 |
Family
ID=85200561
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110923990.6A Pending CN115914460A (zh) | 2021-08-12 | 2021-08-12 | 显示屏的控制方法及电子设备 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20240184350A1 (zh) |
EP (1) | EP4293492A1 (zh) |
CN (1) | CN115914460A (zh) |
WO (1) | WO2023016017A1 (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117135264A (zh) * | 2023-04-27 | 2023-11-28 | 荣耀终端有限公司 | 屏幕状态的控制方法、电子设备及可读存储介质 |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116521018B (zh) * | 2023-07-04 | 2023-10-20 | 荣耀终端有限公司 | 误触提示方法、终端设备及存储介质 |
CN117154872B (zh) * | 2023-08-01 | 2023-12-29 | 南京汤峰机电有限公司 | 一种锂电池充电控制方法及系统 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106445151A (zh) * | 2016-09-29 | 2017-02-22 | 珠海格力电器股份有限公司 | 一种终端屏幕亮度的控制方法及终端 |
CN108510961A (zh) * | 2018-02-28 | 2018-09-07 | 努比亚技术有限公司 | 一种亮屏控制方法、终端及计算机可读存储介质 |
CN109117071A (zh) * | 2018-07-16 | 2019-01-01 | 华为技术有限公司 | 一种屏幕显示控制方法和装置 |
CN109167873A (zh) * | 2018-07-17 | 2019-01-08 | 珠海格力电器股份有限公司 | 一种终端的控制方法、装置、存储介质及终端 |
CN109788138A (zh) * | 2019-02-01 | 2019-05-21 | Oppo广东移动通信有限公司 | 屏幕控制方法、装置、终端及存储介质 |
CN111970753A (zh) * | 2020-08-13 | 2020-11-20 | 珠海市魅族科技有限公司 | 一种智能终端屏幕休眠控制方法及存储介质、处理器、智能终端 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103514837B (zh) * | 2012-06-27 | 2017-04-12 | 中兴通讯股份有限公司 | 终端屏幕背光的控制方法及装置 |
CN104965703A (zh) * | 2015-06-17 | 2015-10-07 | 广东欧珀移动通信有限公司 | 一种控制移动终端亮屏的方法及移动终端 |
CN105159590B (zh) * | 2015-08-27 | 2017-06-23 | 广东欧珀移动通信有限公司 | 一种控制用户终端的屏幕的方法及用户终端 |
CN105759939A (zh) * | 2016-02-19 | 2016-07-13 | 山东超越数控电子有限公司 | 一种基于ReWorks系统的手持机实现屏幕关闭与唤醒的方法 |
-
2021
- 2021-08-12 CN CN202110923990.6A patent/CN115914460A/zh active Pending
-
2022
- 2022-05-16 US US18/553,711 patent/US20240184350A1/en active Pending
- 2022-05-16 WO PCT/CN2022/093157 patent/WO2023016017A1/zh active Application Filing
- 2022-05-16 EP EP22855004.2A patent/EP4293492A1/en active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106445151A (zh) * | 2016-09-29 | 2017-02-22 | 珠海格力电器股份有限公司 | 一种终端屏幕亮度的控制方法及终端 |
CN108510961A (zh) * | 2018-02-28 | 2018-09-07 | 努比亚技术有限公司 | 一种亮屏控制方法、终端及计算机可读存储介质 |
CN109117071A (zh) * | 2018-07-16 | 2019-01-01 | 华为技术有限公司 | 一种屏幕显示控制方法和装置 |
CN109167873A (zh) * | 2018-07-17 | 2019-01-08 | 珠海格力电器股份有限公司 | 一种终端的控制方法、装置、存储介质及终端 |
CN109788138A (zh) * | 2019-02-01 | 2019-05-21 | Oppo广东移动通信有限公司 | 屏幕控制方法、装置、终端及存储介质 |
CN111970753A (zh) * | 2020-08-13 | 2020-11-20 | 珠海市魅族科技有限公司 | 一种智能终端屏幕休眠控制方法及存储介质、处理器、智能终端 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117135264A (zh) * | 2023-04-27 | 2023-11-28 | 荣耀终端有限公司 | 屏幕状态的控制方法、电子设备及可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
WO2023016017A1 (zh) | 2023-02-16 |
EP4293492A1 (en) | 2023-12-20 |
US20240184350A1 (en) | 2024-06-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3916534A1 (en) | Shortcut function activation method and electronic device | |
WO2020259452A1 (zh) | 一种移动终端的全屏显示方法及设备 | |
CN113325941B (zh) | 屏下指纹显示方法及电子设备 | |
WO2021213164A1 (zh) | 应用界面交互方法、电子设备和计算机可读存储介质 | |
CN111913750B (zh) | 一种应用程序管理方法、装置及设备 | |
WO2023016017A1 (zh) | 显示屏的控制方法及电子设备 | |
EP4096204B1 (en) | Method for controlling communication service state, terminal device and readable storage medium | |
CN113778641B (zh) | 控制摄像头的方法、电子设备及计算机可读存储介质 | |
WO2022037726A1 (zh) | 分屏显示方法和电子设备 | |
WO2021238370A1 (zh) | 显示控制方法、电子设备和计算机可读存储介质 | |
CN114095599B (zh) | 消息显示方法和电子设备 | |
CN112740152A (zh) | 手写笔检测方法、系统及相关装置 | |
CN113438366B (zh) | 信息通知的交互方法、电子设备和存储介质 | |
CN112449101A (zh) | 一种拍摄方法及电子设备 | |
CN114222020B (zh) | 位置关系识别方法、设备及可读存储介质 | |
WO2023030168A1 (zh) | 界面显示方法和电子设备 | |
CN114721614A (zh) | 一种调用其他设备能力的方法、电子设备和系统 | |
CN116204059B (zh) | 眼动追踪的帧率调整方法和装置 | |
CN114077323B (zh) | 电子设备的触摸屏防误触方法、电子设备及芯片系统 | |
WO2024139257A1 (zh) | 应用程序的界面显示方法及电子设备 | |
EP4394636A1 (en) | Application display method, electronic device, and storage medium | |
CN115706752B (zh) | 来电音量控制方法、电子设备及存储介质 | |
CN117631819A (zh) | 一种电子设备的显示方法以及电子设备 | |
CN118131891A (zh) | 一种人机交互的方法和装置 | |
CN114691066A (zh) | 一种应用的显示方法及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |