CN110658906A - 显示的方法及电子设备 - Google Patents
显示的方法及电子设备 Download PDFInfo
- Publication number
- CN110658906A CN110658906A CN201910818856.2A CN201910818856A CN110658906A CN 110658906 A CN110658906 A CN 110658906A CN 201910818856 A CN201910818856 A CN 201910818856A CN 110658906 A CN110658906 A CN 110658906A
- Authority
- CN
- China
- Prior art keywords
- information
- screen
- image
- electronic equipment
- state
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 121
- 230000001815 facial effect Effects 0.000 claims description 234
- 230000033001 locomotion Effects 0.000 claims description 56
- 210000001508 eye Anatomy 0.000 claims description 53
- 230000008859 change Effects 0.000 claims description 38
- 230000004424 eye movement Effects 0.000 claims description 14
- 230000007613 environmental effect Effects 0.000 claims description 13
- 210000003128 head Anatomy 0.000 claims description 11
- 238000012544 monitoring process Methods 0.000 description 45
- 238000001514 detection method Methods 0.000 description 43
- 238000012545 processing Methods 0.000 description 34
- 230000009471 action Effects 0.000 description 18
- 239000003086 colorant Substances 0.000 description 14
- 230000006870 function Effects 0.000 description 14
- 230000008569 process Effects 0.000 description 14
- 238000010586 diagram Methods 0.000 description 11
- 238000004891 communication Methods 0.000 description 6
- 230000008447 perception Effects 0.000 description 6
- 210000005252 bulbus oculi Anatomy 0.000 description 5
- 239000010410 layer Substances 0.000 description 4
- 238000013528 artificial neural network Methods 0.000 description 3
- 230000004397 blinking Effects 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000013461 design Methods 0.000 description 3
- 230000008451 emotion Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000010365 information processing Effects 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 241001270131 Agaricus moelleri Species 0.000 description 2
- 108010001267 Protein Subunits Proteins 0.000 description 2
- 239000012792 core layer Substances 0.000 description 2
- 230000008921 facial expression Effects 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 239000002699 waste material Substances 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 239000003795 chemical substances by application Substances 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/26—Power supply means, e.g. regulation thereof
- G06F1/32—Means for saving power
- G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
- G06F1/3234—Power saving characterised by the action undertaken
- G06F1/325—Power saving in peripheral device
- G06F1/3265—Power saving in display device
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/35—Categorising the entire scene, e.g. birthday party or wedding scene
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D30/00—Reducing energy consumption in communication networks
- Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- General Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Engineering & Computer Science (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请提供了一种显示的方法及电子设备,涉及信息显示技术领域。该显示的方法包括:当电子设备处于第一熄屏状态时,电子设备不显示信息,电子设备通过摄像头采集第一图像;当第一图像包括面部图像,面部图像与预设条件匹配时,电子设备进入第二熄屏状态,当电子设备处于第二熄屏状态时,电子设备熄屏显示信息;当第一图像不包括面部图像,或当第一图像包括面部图像,但面部图像与预设条件不匹配时,电子设备维持第一熄屏状态。根据本申请实施例提供的显示的方法,通过对用户状态进行监控,如用户发生特定表情或者判断用户为机主时,确定在熄屏状态下显示信息,从而避免熄屏显示模式一直开启导致的功耗高的问题。
Description
技术领域
本申请涉及信息显示领域,更具体地涉及一种显示的方法及电子设备。
背景技术
随着显示技术的不断发展,电子设备应用的各种显示场景越来越智能化,如显示时钟、日期、电量、未接来电、未读短信、应用提醒、个性或者励志标签的界面等。其中,熄屏显示一种在电子设备熄屏状态下的显示功能,相较于常规显示而言,其功耗较低,同时也能满足用户获知日期、时间、备忘提醒等的要求。
熄屏显示的实现原理是应用处理器(application processor,AP)处于短暂休眠和周期性唤醒的方式刷新屏幕显示内容。目前的熄屏显示模式流程是在亮屏状态下,按下关机键进入熄屏模式,其中,熄屏显示的信息可以预先写入显示存储单元,熄屏显示流程如图1所示。根据熄屏显示的色彩丰富程度,熄屏显示模式主要分为8色和16.7兆色以上两种模式,具体地,部分终端支持8色熄屏显示模式,其只能显示直观而简单的信息内容;而可以支持16.7兆色以上的终端,其熄屏显示可以显示更丰富的带有个人情感的信息内容。
然而,16.7兆色以上熄屏显示模式在提供更丰富的显示色彩时,也伴随着功耗较大的问题,也即,无法满足用户对既美观实用体验好,又要功耗低的要求。因此,如何在满足显示色彩丰富的基础上,进而满足功耗低,成为亟待解决的问题。
发明内容
本申请提供一种显示的方法及电子,以解决熄屏状态下显示模式持续开启导致的功耗高的问题。
第一方面,提供了一种显示的方法,包括:当电子设备处于第一熄屏状态时,电子设备不显示信息,此时该电子设备为灭屏不显示状态,该电子设备通过摄像头采集第一图像;当采集的第一图像包括面部图像,该面部图像与预设条件匹配时,该电子设备进入第二熄屏状态,第二熄屏状态为熄屏显示状态;当该第一图像不包括面部图像,或当该第一图像包括面部图像,但该面部图像与该预设条件不匹配时,该电子设备维持该第一熄屏状态。
根据本申请实施例提供的显示的方法,当电子设备处于熄屏状态时,电子设备可以通过摄像头进行图像采集,当采集到的第一图像包括用户面部图像信息时,可以根据该信息确定用户面部的动作或者表情是否满足预设条件,进而确定当前用户在注视屏幕或者存在查看信息的需求,则该电子设备启动在熄屏状态下显示特定的信息。
应理解,通过本申请实施例提供的显示方法,避免了熄屏状态下特定信息一直显示所造成的功耗浪费。本申请实施例提供的显示方法,能够在特定条件下开启熄屏显示模式,既能够满足用户查看信息的需求,也能够解决功耗。此外,通过将显示的信息和色彩丰富的显示图案相结合,还能够在满足用户对色彩的需求的同时,降低功耗。
结合第一方面,在第一方面的某些实现方式中,该方法还包括:当该电子设备处于该第二熄屏状态时,该电子设备通过摄像头采集第二图像;当该第二图像包括面部图像,该面部图像与该预设条件匹配时,该电子设备维持该第二熄屏状态;当该第二图像不包括面部图像,或当该第二图像包括面部图像,该面部图像与该预设条件不匹配时,该电子设备进入该第一熄屏状态。
应理解,第二熄屏状态指的是电子设备在熄屏时显示特定信息的状态。
根据本申请实施例提供的显示的方法,在电子设备处于熄屏显示状态时,该电子设备仍然可以通过摄像头持续采集图像,当电子设备根据所采集的图像确定该图像包括面部图像,且该面部图像与预设条件相符合时,该电子设备维持当前所处的熄屏显示状态;当电子设备根据所采集的图像确定该图像包括面部图像,但该面部图像与预设条件不符合时,或者电子设备根据所采集的图像确定该图像不包括面部图像时,该电子设备进入第一熄屏状态,也即不再进行信息显示,以节省功耗。
结合第一方面,在第一方面的某些实现方式中,该预设条件包括以下任意一种:头部扭转、眼球运动、睁眼动作或者嘴巴运动。
应理解,本申请实施例提供的预设条件不仅限于上述几种动作或者运动,还可以根据实际需要对预设条件进行灵活设定,该预设条件例如还可以包括静态下的用户眼球特征、表情特征等多种,本申请对此并不限定。
根据本申请实施例提供的显示的方法,当电子设备检测并识别到用户发生特定的面部特征,如头部扭转动作、眼球运动、睁眼动作或者嘴巴运动时,也即用户的面部特征符合电子设备预设条件时,该电子设备可以据此确定开启熄屏状态下的信息显示。
结合第一方面,在第一方面的某些实现方式中,当该第一图像包括面部图像,该面部图像与预设条件匹配时,电子设备进入第二熄屏状态,当该电子设备处于该第二熄屏状态时,该电子设备熄屏显示信息,包括:当该面部图像包括的面部特征与第一预设面部特征匹配时,该电子设备熄屏显示第一信息;当该面部图像包括的面部特征与第二预设面部特征匹配时,该电子设备熄屏显示第二信息,该第二信息与该第一信息不同,该第一预设面部特征和该第二预设面部特征不同。
根据本申请实施例提供的显示的方法,电子设备可以预先存储第一预设用户(如机主用户)的面部特征,当电子设备根据当前用户的面部特征判断其符合预先存储的第一预设面部特征时,确定当前用户为符合使该电子设备开启熄屏状态下显示信息的用户,换句话说,电子设备确定当前用户为机主用户,然后电子设备在熄屏状态下显示第一信息;当电子设备判断当前用户不是机主用户或者当前用户的特征不符合预先存储的第一预设用户的特征时,该电子设备确定保持熄屏状态或者开启在熄屏状态下显示第二信息。
结合第一方面,在第一方面的某些实现方式中,本申请实施例提供的方法还包括:电子设备根据环境信息确定所述第一信息。
结合第一方面,在第一方面的某些实现方式中,电子设备根据该第一图像确定所述环境信息。
根据本申请实施例提供的显示的方法,电子设备对采集到的图像进行检测并识别用户所处的环境,在根据环境信息进一步确定熄屏状态下所显示的信息内容。示例性的,当环境信息为办公环境(如第一图像中出现办公柜等)时,熄屏状态下显示的信息的内容例如可以是工作备忘录、会议提醒、工作计划等;当环境信息为差旅环境(如第图像中出现车厢、机场信息等)时,熄屏状态下显示的信息的内容例如可以是旅程时间安排等。
应理解,电子设备通过判断当前用户所处的环境,灵活地显示不同的熄屏状态下的信息,以满足用户的查看信息的需求。
结合第一方面,在第一方面的某些实现方式中,本申请实施例提供的方法还包括:当电子设备采集的图像包括面部图像,该电子设备根据该面部图像的像素灰度的变化确定该面部图像与该预设条件是否匹配。
应理解,在用户面部发生动作时,其各个部位的像素灰度会发生变化,电子设备可以通过像素灰度的变化确定用户是否发生某一特定动作或者是否出现某一表情,进而获确定用户的面部图像是否符合预设条件。
结合第一方面,在第一方面的某些实现方式中,本申请实施例提供的方法还包括:电子设备采集图像,且该电子设备仅对该图像中像素灰度有变化的区域进行图像更新。
根据本申请实施例提供的显示的方法,摄像头通过仅对像素灰度有变化的图像区域进行更新,可以在实时更新图像的同时,降低功耗。
结合第一方面,在第一方面的某些实现方式中,第一信息包括通用信息和用户隐私信息;第二信息包括通用信息。
应理解,第一信息与第二信息不相同,其中,第一信息例如可以是包括用户隐私的信息,如备忘录、未读消息、日程提醒等,第二信息可以仅为通用信息,如时间、日期等。
结合第一方面,在第一方面的某些实现方式中,本申请实施例提供的方法还包括:当电子设备处于第二熄屏状态时,该电子设备通过摄像头采集第三图像;当该第三图像包括眼睛特征,该眼睛处于闭眼状态的持续时长大于第一预设时长时,该电子设备进入该第一熄屏状态。
第二方面,提供了一种显示的方法,包括:当电子设备处于第一熄屏状态时,该电子设备不显示信息,该电子设备通过摄像头采集第一图像;当该第一图像包括面部图像,该面部图像包括的面部特征与第一预设面部特征匹配时,该电子设备进入第二熄屏状态,当该电子设备处于该第二熄屏状态时,该电子设备熄屏显示第一信息;当该第一图像包括面部图像,该面部图像包括的面部特征与第二预设面部特征匹配时,该电子设备进入该第二熄屏状态,当该电子设备处于该第二熄屏状态时,该电子设备熄屏显示第二信息,该第二信息与该第一信息不同,该第一预设面部特征与第二预设面部特征不同;当该图像不包括该面部图像时,该电子设备维持该第一熄屏状态。
根据本申请实施例提供的显示的方法,电子设备可以预先存储第一预设用户(如机主用户)的面部特征,当电子设备根据当前用户的面部特征判断其符合预先存储的第一预设用户的特征时,确定当前用户为符合使该电子设备开启熄屏状态下显示信息的用户,换句话说,电子设备确定当前用户为机主用户,然后电子设备在熄屏状态下显示第一信息;当电子设备判断当前用户不是机主用户或者当前用户的特征不符合预先存储的第一预设用户的特征时,该电子设备确定保持熄屏状态或者开启在熄屏状态下显示第二信息。
结合第二方面,在第二方面的某些实现方式中,所述方法还包括:当该电子设备处于该第二熄屏状态时,该电子设备通过摄像头采集第二图像;当该第二图像包括面部图像,该面部图像与该预设条件匹配时,该电子设备维持该第二熄屏状态;当该第二图像不包括面部图像,或当该第二图像包括面部图像,但该面部图像与该预设条件不匹配时,该电子设备进入该第一熄屏状态。
应理解,第二熄屏状态指的是电子设备在熄屏时显示特定信息的状态。
根据本申请实施例提供的显示的方法,在电子设备处于熄屏显示状态时,该电子设备仍然可以通过摄像头持续采集图像,当电子设备根据所采集的图像确定该图像包括面部图像,且该面部图像与预设条件相符合时,该电子设备维持当前所处的熄屏显示状态;当电子设备根据所采集的图像确定该图像包括面部图像,但该面部图像与预设条件不符合时,或者电子设备根据所采集的图像确定该图像不包括面部图像时,该电子设备进入第一熄屏状态,也即不再进行信息显示,以节省功耗。
结合第二方面,在第二方面的某些实现方式中,该预设条件包括以下任意一种:头部扭转、眼球运动、睁眼动作或者嘴巴运动。
结合第二方面,在第二方面的某些实现方式中,本申请实施例提供的方法还包括:该电子设备根据环境信息确定该第一信息。
结合第二方面,在第二方面的某些实现方式中,该电子设备根据该第一图像确定该环境信息。
根据本申请实施例提供的显示的方法,电子设备对采集到的图像进行检测并识别用户所处的环境,在根据环境信息进一步确定熄屏状态下所显示的信息内容。示例性的,当环境信息为办公环境(如第一图像中出现办公柜等)时,熄屏状态下显示的信息的内容例如可以是工作备忘录、会议提醒、工作计划等;当环境信息为差旅环境(如第图像中出现车厢、机场信息等)时,熄屏状态下显示的信息的内容例如可以是旅程时间安排等。
应理解,电子设备通过判断当前用户所处的环境,灵活地显示不同的熄屏状态下的信息,以满足用户的查看信息的需求。
结合第二方面,在第二方面的某些实现方式中,本申请实施例提供的方法还包括:当该电子设备采集的图像包括该面部图像,该电子设备根据该面部图像的像素灰度的变化确定该面部图像与该预设条件是否匹配。
应理解,在用户面部发生动作时,其各个部位的像素灰度会发生变化,电子设备可以通过像素灰度的变化确定用户是否发生某一特定动作或者是否出现某一表情,进而确定用户的面部图像是否符合预设条件。
结合第二方面,在第二方面的某些实现方式中,本申请实施例提供的方法还包括:该电子设备持续采集该第一图像,且该电子设备仅对该第一图像中像素灰度有变化的区域进行图像更新。
根据本申请实施例提供的显示的方法,摄像头通过仅对像素灰度有变化的图像区域进行更新,可以在实时更新图像的同时,降低功耗。
结合第二方面,在第二方面的某些实现方式中,所述第一信息包括通用信息和用户隐私信息;所述第二信息包括通用信息。
应理解,第一信息与第二信息不相同,其中,第一信息例如可以是包括用户隐私的信息,如备忘录、未读消息、日程提醒等,第二信息可以仅为通用信息,如时间、日期等。
结合第二方面,在第二方面的某些实现方式中,本申请实施例提供的方法还包括:当该电子设备在该第二熄屏状态时,该电子设备通过该摄像头采集第三图像;当该第三图像包括眼睛特征,该眼睛处于闭眼状态的持续时长大于第一预设时长时,该电子设备进入该熄屏状态。
第三方面,提供了一种显示的方法,包括:当电子设备处于第一熄屏状态时,该电子设备不显示信息,该电子设备通过摄像头采集第一图像,该第一图像包括环境信息;该电子设备根据该环境信息确定第一信息;当该电子设备处于第二熄屏状态时,该电子设备熄屏显示第一信息。
根据本申请实施例提供的显示的方法,电子设备根据第一图像检测并识别用户所处的环境,在根据环境信息进一步确定在熄屏状态下所显示的信息内容。示例性的,当环境信息为办公环境(如第一图像中出现办公柜等)时,熄屏状态下显示的信息的内容例如可以是工作备忘录、会议提醒、工作计划等;当环境信息为差旅环境(如第图像中出现车厢、机场信息等)时,熄屏状态下显示的信息的内容例如可以是旅程时间安排等。
应理解,电子设备通过判断当前用户所处的环境,灵活地显示不同的熄屏状态下的信息,以满足用户的查看信息的需求。
结合第三方面,在第三方面的某些实现方式中,本申请实施例提供的方法还包括:当该第一图像包括面部图像时,该面部图像与预设条件匹配时,该电子设备进入该第二熄屏状态。
根据本申请实施例提供的显示的方法,当电子设备处于熄屏状态时,电子设备可以通过摄像头进行图像采集,当采集到的第一图像包括用户面部图像信息,并确定该面部图像符合预设条件时,该电子设备可以认为当前用户在注视屏幕或者存在查看信息的需求,则该电子设备启动在熄屏状态下显示特定的信息。
应理解,通过本申请实施例提供的显示方法,避免了熄屏状态下特定信息一直显示所造成的功耗浪费。本申请实施例提供的显示方法,能够在特定条件下开启熄屏显示模式,既能够满足用户查看信息的需求,也能够解决功耗。此外,通过将显示的信息和色彩丰富的显示图案相结合,还能够在满足用户对色彩的需求的同时,降低功耗。
结合第三方面,在第三方面的某些实现方式中,该预设条件包括以下任意一种:头部扭转、眼球运动、睁眼动作或者嘴巴运动。
结合第三方面,在第三方面的某些实现方式中,当该第一图像包括面部图像,该面部图像包括的面部特征与第一预设面部特征匹配时,该电子设备在该第二熄屏状态显示该第一信息。
结合第三方面,在第三方面的某些实现方式中,该第一信息包括通用信息和用户隐私信息;所述第二信息包括通用信息。
结合第三方面,在第三方面的某些实现方式中,本申请实施例提供的方法还包括:当该电子设备采集的图像包括面部图像,该电子设备根据该面部图像的像素灰度的变化确定该面部图像与预设条件是否匹配。
应理解,在用户面部发生动作时,其各个部位的像素灰度会发生变化,电子设备可以通过像素灰度的变化确定用户是否发生某一特定动作或者是否出现某一表情,进而获取用户的面部特征。
结合第三方面,在第三方面的某些实现方式中,该电子设备根据该环境信息确定在第二熄屏状态显示的第一信息,包括:当该环境信息为办公环境时,该第一信息包括备忘信息、工作提醒或者会议信息;当该环境信息为旅途信息时,该第一信息包括车次信息、航班信息或者日程安排信息。
结合第三方面,在第三方面的某些实现方式中,所述熄屏显示时采用16.7兆色以上熄屏显示模式。
第四方面,提供了一种显示的方法,包括:当电子设备处于第一熄屏状态时,该电子设备不显示信息,该电子设备通过摄像头采集第一图像;当该第一图像包括面部图像,该电子设备进入第二熄屏状态,当该电子设备处于该第二熄屏状态时,该电子设备熄屏显示信息,包括:当该面部图像的面部特征与第一预设面部特征匹配时,该电子设备熄屏显示第一信息;当该面部图像的面部特征与该第一预设面部特征不匹配时,该电子设备熄屏显示第二信息,该第一信息与该第二信息不同;当该第一图像包括环境信息时,该电子设备根据该环境信息确定该第一信息;其中,当该环境信息为办公环境时,该第一信息包括备忘信息、工作提醒或者会议信息;当该环境信息为旅途信息时,该第一信息包括车次信息、航班信息或者日程安排信息;当该电子设备处于该第二熄屏状态时,该电子设备通过该摄像头采集第二图像,当该第二图像包括面部特征,该面部图像的面部特征与该第一预设面部特征匹配时,该电子设备熄屏显示第一信息;当该第二图像包括面部特征,该面部图像的面部特征与该第一预设面部特征不匹配时,该电子设备熄屏显示第二信息;当该第二图像不包括面部特征,该电子设备进入该第一熄屏状态;当该第二图像包括眼睛特征,该眼睛处于闭眼状态,该闭眼状态的持续时长大于第一预设时长时,该电子设备进入该第一熄屏状态;当该第一图像不包括面部图像,该电子设备维持该第一熄屏状态。
第五方面,提供了一种电子设备,该电子设备包括:至少一个处理器、摄像头,显示屏和存储器,该摄像头用于该电子设备在熄屏状态下采集图像,该存储器用于存储程序指令和用户信息,当程序指令在所该至少一个处理器中执行时,使得该电子设备实现如前述第一方面至第四方面中任一实现方式中所述的方法。
第六方面,提供了一种程序存储介质,该程序存储介质具有程序指令,当该程序指令被直接或者间接执行时,使得如前述第一方面至第四方面中任一实现方式中所述的方法在电子设备上得以实现。
第七方面,提供了一种芯片系统,该芯片系统包括至少一个处理器,当程序指令在该至少一个处理中执行时,使得如前述第一方面至第四方面中任一实现方式中所述的方法在电子设备上得以实现。
第八方面,提供了一种电子设备,包括:图像采集单元、处理单元和存储单元,使得如前述第一方面至第四方面中任一实现方式中所述的方法在所述电子设备上得以实现。
根据本申请实施例提供的显示的方法及电子设备,通过对用户状态进行监控,在特定条件下,如用户具有特定面部特征或者判断用户为机主时,开启熄屏显示,从而避免熄屏显示模式一直开启导致的功耗高的问题,此外,还可以根据环境信息,为用户灵活提供熄屏状态下显示的信息内容。
附图说明
图1示出了一种熄屏显示方法的示意性流程图。
图2示出了本申请实施例提供的一种显示系统架构的示意图。
图3示出了本申请实施例提供的显示的方法的示意性流程图。
图4示出了本申请实施例提供的一种显示的方法的示意性流程图。
图5示出了本申请实施例提供的另一种显示的方法的示意性流程图。
图6示出了本申请实施例提供的又一种显示的方法的示意性流程图。
图7示出了本申请实施例提供的一种熄屏显示信息的示意图。
图8示出了本申请实施例提供的一种电子设备的结构示意图。
图9示出了本申请实施例提供的另一种电子设备的结构示意图。
图10示出了本申请实施例提供的又一种电子设备的结构示意图。
具体实施方式
下面将结合附图,对本申请中的技术方案进行描述。
本申请实施例的技术方案可以应用于各种通信系统,例如:全球移动通信(globalsystem for mobile communications,GSM)系统、码分多址(code division multipleaccess,CDMA)系统、宽带码分多址(wideband code division multiple access,WCDMA)系统、通用分组无线业务(general packet radio service,GPRS)、长期演进(long termevolution,LTE)系统、LTE频分双工(frequency division duplex,FDD)系统、LTE时分双工(time division duplex,TDD)、通用移动通信系统(universal mobiletelecommunication system,UMTS)、全球互联微波接入(worldwide interoperabilityfor microwave access,WiMAX)通信系统、未来的第五代(5th generation,5G)系统或新无线(new radio,NR)等。
本申请实施例中的电子设备可以指用户设备、接入终端、用户单元、远程终端、移动设备、用户终端、终端、终端设备、无线通信设备、用户代理或用户装置。终端设备还可以是蜂窝电话、无绳电话、会话启动协议(session initiation protocol,SIP)电话、无线本地环路(wireless local loop,WLL)站、个人数字处理(personal digital assistant,PDA)、具有无线通信功能的手持设备、计算设备或连接到无线调制解调器的其它处理设备、车载设备、可穿戴设备,未来5G网络中的终端设备或者未来演进的公用陆地移动通信网络(public land mobile network,PLMN)中的终端设备等,本申请实施例对此并不限定。
为满足用户的信息查询需求,熄屏显示技术应运而生。图1示出了一种熄屏显示方法的示意性流程图。
具体而言,熄屏显示技术通常发生在电子设备屏幕的熄屏状态中,例如由图1所示的S101亮屏状态由用户按下待机键,电子设备的屏幕进入休眠或者待机状态,电子设备屏幕处于S102中的熄屏状态,然后在熄屏状态进行步骤S103,也即将需要熄屏显示的图像预先写入显示存储单元,最终在S104熄屏显示时予以显示。应理解,熄屏显示可以是电子设备锁屏状态下,灭屏状态或者待机状态进行特定信息显示,熄屏显示也可以称为灭屏显示。
目前的熄屏显示通常采用16.7兆色以上的熄屏显示模式,一方面满足用户随时在待机状态查看日期和时间等信息,另一方面还能够提供丰富绚丽多彩的显示色彩,以满足用户对酷绚体验的需求。但是,通过功耗对比发现,相比8色熄屏显示模式,16.7兆色以上熄屏显示模式的功耗会大大提高。其中,8色熄屏显示模式和16.7兆色以上的熄屏显示模式的色彩深度、功耗等信息如表1所示。
表1
此外,以某机型的手机为例进行测试可知,当该手机的平均待机时间为T时,如果关闭熄屏显示模式,则整机续航时间为100%T;如果开启8色熄屏显示模式,则续航时间缩短为84%T;如果开启16.7兆色以上熄屏显示单元,则续航时间缩短为75%T。换句话说,现有8色熄屏显示方案相对节省功耗,但是色彩单调,美学设计空间较小;16.7兆色以上的熄屏显示模式色彩丰富,美学设计空间较大,但是功耗消耗大。
因此,针对上述问题,本申请提供了一种信息显示的方法,能够在满足色彩丰富和用户查询信息要求的同时,避免熄屏显示一直开启,进而满足节省功耗的要求。以下结合附图,对本申请实施例提供的信息显示的方法进行介绍。
应理解,本申请实施例提供的信息显示的方法可能通过多个处理单元或者应用共同完成,以下首先结合附图对本申请实施例提供的信息显示的方法可能采用的系统架构以及可能用于执行本申请实施例提供的信息显示的方法的应用或者单元进行简单地介绍。
图2示出了本申请实施例提供的一种显示系统架构的示意图。
本申请实施例提供的信息显示方法中涉及的智能监控与判定可能用到的物理元器件主要包括大核中央处理器(central processing unit,CPU)和集线器(sensor hub)两大互动单元。其中,集线器包括低功耗摄像头和摄像头驱动、智能监控分析服务(always onAI service,AOAI service)、持续智能监控分析小单元(always on AI tiny,AOAI tiny)等子单元;大核CPU单元主要根据集线器输出的信息进行分析决策以及执行熄屏显示动作,按照检测流程,其包括的各个子单元为智能持续神经网络分析(always on neuralnetwork,AONN)、人脸解锁子单元、运动服务子单元、检测西单元、智能引擎(artificialintelligence engine,AI Engine)子单元以及智能监控应用(application,APP)子单元。以下,对本申请实施例提供的信息显示的方法中主要涉及到的子单元进行简单的介绍。
智能监控应用:包括智能亮屏子单元和智能熄屏子单元,用于执行亮屏或者熄屏功能;
智能引擎:用于进行决策、情感感知、环境感知等,包括决策引擎、情感感知、环境感知子单元。
检测单元:用于进行人脸检测、动作检测、背景环境检测等,包括表情检测、运动检测、背景检测子单元。
智能监控分析单元包括人脸、手势、场景识别等;持续智能监控分析服务包括实例管理、状态机、融合感知等子单元。
以上应用或者子单元仅为实现本申请提供的信息显示的方法的示例,在此之外还可以包括具有相同或者类似功能的其他单元,或者还可以包括具有其他功能的单元,本申请实施例对此并不限定。
图3示出了本申请实施例提供的一种显示的方法的示意性流程图。包括以下步骤。
S301,摄像头监控用户状态。
在一种实现方式中,电子设备通过摄像头采集图像,进而当用户接近电子设备的屏幕,例如注视电子设备的屏幕或者将要查询屏幕信息时,摄像头可以采集到包括用户面部特征信息的图像。其中,摄像头可以将采集的图像发送给电子设备中的处理单元,使得该处理单元根据图像的信息确定用户是否注视屏幕,并进一步确定是否开启在熄屏状态下显示信息的功能,为描述简洁,下文可以将该功能称为熄屏显示。
应理解,熄屏显示模式可以包括在熄屏模式下显示信息的模式,例如在电子设备锁屏状态或者待机状态下显示特定信息的模式,其中,熄屏显示也可以称为灭屏显示。
S302,判断用户是否注视屏幕。
在一种实现方式中,电子设备中的处理单元可以根据摄像头发送的图像的信息对用户面部特征信息进行识别,当确定该图像中包括用户的面部特征信息时,可以进一步进行信息检测,以确定用户的面部特征,例如确定用户面部是否发生某一动作,例如用户的眼球运动、用户的眼睛是否有睁开动作等,当检测到用户发生某一特定动作,则可以确定该用户注视着屏幕,进而向智能监控APP请求开启熄屏显示,也即执行图3中的步骤S303和步骤S304;或者,当处理单元未检测到用户的眼球运动、用户眼睛闭合或者在检测区域内未发现有用户的眼睛等情况时,则确定用户未注视屏幕,也即不开启熄屏显示,仍然保持熄屏状态,整个流程结束。
根据本申请实施例提供的信息显示的方法,当用户面部发生特定动作时,确定该用户注视手机屏幕或者需要查看熄屏显示信息,开启熄屏显示,也即仅在特定条件下开启熄屏显示,使得该熄屏显示不需要一直开启,既能够满足用户的查看信息的需求,也能够降低功耗,提升终端续航能力。
以下结合附图,对本申请实施例提供的信息显示的方法进行更详细的介绍。
图4示出了本申请实施例提供的一种显示的方法的示意性流程图。
本申请实施例提供的显示的方法在熄屏动作后,增加情景判断,通过低功耗摄像头判断用户如果是在注视显示屏时,将数据传送到持续智能监控分析服务单元,进入熄屏显示模式流程;如果用户没有在注视显示屏幕时,则可以直接熄屏。其中,执行本申请实施例提供的显示的方法涉及的电子设备例如可以是智能手机、智能平板电脑、智能手环等智能终端。该显示方法的流程包括以下步骤。
S401,当电子设备处于第一熄屏状态时,电子设备不显示信息,电子设备通过摄像头采集第一图像。
在一种实现方式中,当电子设备呈现某一显示界面时,可以接收第一输入进入熄屏状态,响应于所述第一输入,所述电子设备进入熄屏状态。其中,第一输入例如可以是用户输入的待机指令或者用户按下待机键使得电子设备进入熄屏状态。其中,电子设备所呈现的第一显示界面可以是电子设备亮屏状态下的任一界面。
应理解,本申请实施例提供的显示方法可以是用于电子设备屏幕熄灭后,也即电子设备处于熄屏状态时,其中,该熄屏状态具体可以包括锁屏状态、灭屏状态或者待机状态等。
在一种实现方式中,当电子设备的屏幕熄灭后,电子设备可以通过摄像头采集第一图像,该第一图像包括用户的面部图像。具体地,电子设备可以通过摄像头采集第一图像,并通过该摄像头获取用户的面部图像信息。其中,该电子设备的摄像头可以是电子设备的前置摄像头;该摄像头可以在电子设备熄屏状态或者亮屏状态均能够持续采集图像,并且该摄像头可以实时采集第一图像,以更加准确的捕捉用户信息。
在一种实现方式中,电子设备的摄像头可以对图像进行更新,例如对第一图像中有像素灰度变化的区域进行更新。
示例性的,电子设备的摄像头可以支持环境光感应(ambient light sensing,ALS)运动检测,使得该摄像头可以根据用户面部的像素灰度变化进而确定用户是否发生面部动作。示例性的,电子设备包括的环境光感应运动检测传感单元,其可以分为M*N(如M=4,N=4)个传感小单元,该环境光感应运动检测的各个传感小单元可以持续检测像素灰度并获得像素灰度变化,其中,当一个或多个传感小单元检测到有像素灰度变化时,可以对该像素灰度变化的区域的图像进行更新,例如,当环境光感应运动单元检测的传感单元根据像素灰度变化检测到用户眼部区域发生运动(如眼球运动或者眨眼动作等)而其他区域无运动时,可以仅将用户眼部区域对应的图像进行更新,而对其他无像素灰度变化的区域(如背景区域)对应的图像不进行更新,从而使得摄像头的功耗可以大大降低。
在一种实现方式中,电子设备的摄像头可以为低功耗摄像头。其功耗低于某一阈值,例如,该摄像头可以通过采集帧率或者分辨率较低的图像以降低功耗。示例性的,摄像头所采集的第一图像的帧率可以低于某一阈值;或者,电子设备摄像头所采集的第一图像的分辨率可以低于另一阈值。其中,第一图像的帧率例如可以低于640*480,第一图像的分辨率例如可以低于10Hz。应理解,通过采集帧率或者分辨率较低的第一图像,可以在满足后续对用户信息分析的基础上,降低功耗。
S402,当第一图像包括面部图像,该面部图像与预设条件匹配时,电子设备进入第二熄屏状态,当电子设备处于第二熄屏状态时,电子设备熄屏显示信息。
应理解,上述所说的预设条件可以是头部扭转、眼球运动、睁眼动作或者嘴巴运动等。
在一种实现方式中,当第一图像包括用户的面部特征时,根据该面部图像的信息确定该面部图像与预设条件匹配时,电子设备进行熄屏状态下显示信息。
在一种实现方式中,当电子设备处于第二熄屏状态时,该电子设备可以通过摄像头持续对图像进行采集。示例性的,电子设备可以通过摄像头采集第二图像,当所述第二图像包括面部图像,并且该面部图像与预设条件匹配时,该电子设备可以维持第二熄屏状态;或者,当第二图像不包括面部图像,或当第二图像包括面部图像,但该面部图像与预设条件不匹配时,电子设备进入第一熄屏状态。
在一种实现方式中,当电子设备采集到的第一图像包括面部图像,且该面部图像包括的面部特征与第一预设面部特征匹配时,该电子设备可以在第二熄屏状态熄屏显示第一信息。
在一种实现方式中,当电子设备采集到的第一图像包括面部图像,且当面部图像包括的面部特征与第二预设面部特征匹配时,电子设备熄屏显示第二信息,其中,第二信息与第一信息不同。
应理解,本申请实施例所说的第一预设面部特征和第二预设面部特征可以均预先被电子设备存储,该第一预设面部特征与第二预设面部特征不同,其中,第一预设面部特征可以为符合使用该电子设备其他功能的用户的面部特征,例如机主用户的面部特征;第二预设面部特征为非机主用户的面部特征。
在一种实现方式中,第一信息可以包括通用信息和用户隐私信息,例如,第一信息可以在包括时间、日期等通用信息之外,还包括备忘录、会议安排、日程安排、未读消息等信息;第二信息可以仅包括通用信息,例如时间、日期信息等。
应理解,熄屏显示的信息可以预先写入显示存储单元中,熄屏显示的信息可以包括多种,例如包括以下一种或者多种信息:显示时钟、日期、电量、未接来电、未读短信、应用提醒、个性或者励志标签的界面等。
在一种实现方式中,电子设备还可以根据采集到的图像中的环境信息确定第一信息,具体地,电子设备根据采集到图像中的环境信息确定第一信息的内容,例如,当环境信息为办公环境时,第一信息可以包括备忘信息、工作提醒或者会议信息;当环境信息为旅途信息时,第一信息可以包括车次信息、航班信息或者日程安排信息。
应理解,电子设备在熄屏状态显示的第一信息可以根据环境信息灵活改变,以满足用户在不同环境下查询信息的需求。
在一种实现方式中,当电子设备处于第二熄屏状态时,该电子设备可以通过摄像头持续对图像进行采集。示例性的,电子设备还可以通过摄像头采集第三图像,所述第三图像包括面部图像,当电子设备根据该面部图像中的眼睛特征确定眼睛闭合,且闭合持续时长达到第一阈值时,该电子设备可以进入第一熄屏显示状态。换句话说,当电子设备判断用户未注视屏幕或者不需要查询信息时,不再进行信息显示。其中,第一阈值例如可以是10ms。
为便于理解,以下对熄屏显示状态进行进一步的介绍。
在一种实现方式中,电子设备的处理单元可以接收智能监控分析单元上报的第一图像包括的用户面部图像信息,并根据该第一图像包括的用户面部图像信息确定用户面部图像符合预设条件,然后电子设备确定进入熄屏显示信息状态,该熄屏显示状态可以包括在熄屏模式下显示信息的状态,例如显示时间信息、日期信息等,其显示的内容还可以包括预设图案等。
在一种实现方式中,电子设备的处理单元可以根据第一图像包括的用户的面部图像信息检测用户是否发生特定动作,并做出检测结果。其中,该特定动作可以是用户的面部动作,例如用户的头部扭动动作、人眼睁开动作、眼球运动或者嘴巴做出的某一特定动作等。应理解,处理单元可以根据该特定动作作为参照标准确定用户在注视屏幕或者有查看屏幕信息的需求,也即当用户发生特定动作时,则认为用户注视电子设备的屏幕或者需要查看屏幕信息。示例性的,该检测过程例如可以是处理单元包括的检测子单元执行的。
在一种实现方式中,当处理单元确定用户面部图像时,如用户面部发生特定动作时,确定开启熄屏显示信息状态。示例性的,处理单元的检测子单元获取用户发生面部特征的检测结果后,可以将该将决策结果发送给智能引擎子单元,该智能引擎子单元可以根据检测子单元的检测结果确定熄屏显示,并向智能监控子单元发送第一请求消息,该第一请求消息用于向智能监控子单元请求执行熄屏显示的功能,当智能监控子单元接收到智能引擎子单元发送的第一请求消息时,可以由其包括的智能熄屏子单元和智能亮屏子单元完成熄屏显示功能。
在一种实现方式中,摄像头获取采集的图像后,可以将图像的信息发送给智能监控分析单元,其中,该智能监控分析单元可以根据摄像头获取的图像的信息进行人脸检测、动态手势识别、场景识别等服务信息处理。该智能监控分析单元例如可以包括持续智能监控分析小单元(always on AI tiny,AOAI)和智能监控分析服务(always on AI service)等单元。示例性的,该智能监控分析单元可以对图像中的用户面部图像信息进行识别,以确定该第一图像包括用户的面部特征信息。
在一种实现方式中,智能监控分析单元对采集到的图像的信息进行服务信息处理后,可以将识别后的信息进一步发送给处理单元,该处理单元例如是电子设备大核CPU中的单元,用于根据用户面部特征信息检测用户是否发生第一动作。示例性的,该处理单元例如可以包括智能监控应用(application,APP)、智能引擎(artificial intelligenceengine,AI Engine)子单元、检测子单元等。
在一种实现方式中,当终电子设备确定用户注视显示屏幕后,还可以再进一步确定当前用户是否为符合使得电子设备开启熄屏显示的用户。
作为一个示例,当处理单元的智能引擎子单元根据用户的面部特征和预存储的第一预设用户的特征确定当前用户的面部特征与预存储的用户特征匹配时,则可以确定当前用户即为第一预设用户,然后电子设备可以开启显示第一信息的熄屏显示。其中,第一预设用户可以为电子设备预存储其特征的机主用户,第一信息例如可以包括通用信息和包含用户隐私的信息,如以下一种或者多种信息:显示时钟(时间信息)、日期、电量、未接来电、未读短信、应用提醒、个性或者励志标签的界面等。
作为另一个示例,当处理单元的智能引擎子单元根据用户的面部特征确定当前用户的面部特征与非机主用户第二用户的特征匹配时,则确定当前用户为不符合开启熄屏显示要求的用户,该电子设备则可以仍然保持熄屏模式或者开启显示第二信息的熄屏显示,其中,相对于第一信息来说,第二信息例如可以是更为简略的通用信息,例如,第二信息仅为时间或者日期。具体地,若电子设备仍然保持熄屏,则可以是智能引擎子单元不向智能监控子单元发送第一请求消息,使得该智能监控子单元不开启熄屏显示模式;或者,智能引擎子单元向智能监控子单元发送第二请求消息,该第二请求消息用于请求智能监控子单元不开启熄屏显示功能或者仍然保持当前的熄屏状态。
S403,当第一图像不包括面部图像,或当该第一图像包括面部图像,但面部图像与预设条件不匹配时,电子设备维持第一熄屏状态。
在一种实现方式中,当电子设备检测到第一图像不包括面部图像,所述电子设备保持第一熄屏状态,也即不进行信息显示;或者,当电子设备检测到的第一图像包括面部图像,但是该面部图像不满足预设条件,该电子设备均会保持第一熄屏状态,也即不显示信息。
作为一个示例,在本申请实施例提供的信息显示的方法中,摄像头获取包括用户表情和运动信息的图像,并在当前状态下,检测用户眼球区域有运动变化或者有其他动作,AOAI持续智能监控分析小单元获取摄像头监控到的运动信息后,把表情和运动信息上报到大核CPU。该大核CPU中内核层的AONN神经网络和HAL层的运动服务子单元、人脸解锁单元、应用框架(framework)层的检测子单元、APP层的智能引擎子单元一次处理软件流程,使得大核CPU的情景感知单元通过对人言运动信息的分析,判定为人眼闭合动作或者检测区域内无人眼,进而执行熄屏动作,结束本流程;反之,若低功耗摄像头获取用户表情和运动信息为睁眼动作或者眼球运动等能表示用户注视屏幕的动作,则启动熄屏显示流程。
根据本申请实施例提供的信息显示的方法,当用户面部具有特定的面部特征时,确定该用户注视手机屏幕或者需要查看熄屏显示信息,从而开启熄屏显示,也即仅在特定条件下开启熄屏显示,使得该熄屏显示不需要一直开启,既能够满足用户的查看信息的需求,也能够降低功耗,提升终端续航能力。
图5示出了本申请实施例提供的另一种显示的方法的示意性流程图。
在本申请实施例提供的信息显示的方法中,系统化的应用了大核CPU和集线器(sensor hub)等功能单元,增加的智能监控和判定流程,可以作为后续图像写入和熄屏显示的依据。当低功耗摄像头监控查看电子设备的用户的人眼或者其他面部特征信息时,可以通过本申请实施例提供的判定流程确定查看屏幕的用户是否为该电子设备的机主,当查看屏幕的用户非电子设备的机主用户时,则可以不进行熄屏显示或者仅显示通用信息,以降低功耗。
S501,当电子设备处于第一熄屏状态时,电子设备不显示信息,电子设备通过摄像头采集第一图像。
在一种实现方式中,当电子设备呈现某一显示界面时,可以接收第一输入进入熄屏状态,响应于所述第一输入,所述电子设备进入熄屏状态。其中,第一输入例如可以是用户输入的待机指令或者用户按下待机键使得电子设备进入熄屏状态、锁屏状态或者待机状态、灭屏状态。其中,电子设备所呈现的第一显示界面可以是电子设备亮屏状态下的任一界面。
在一种实现方式中,第一输入例如可以是用户输入的待机指令或者用户按下待机键使得电子设备进入熄屏状态。
应理解,本申请实施例提供的显示方法可以是用于电子设备屏幕熄灭后,也即电子设备处于熄屏状态时,其中,该熄屏状态具体可以包括锁屏状态、灭屏状态或者待机状态等。
在一种实现方式中,电子设备可以通过摄像头在熄屏状态时采集第一图像。其中,该电子设备的摄像头可以是电子设备的前置摄像头;该摄像头可以在电子设备熄屏状态或者亮屏状态均能够持续采集图像,并且该摄像头可以实时采集第一图像,以更加准确的捕捉用户信息。
在一种实现方式中,电子设备的摄像头可以对图像进行更新,例如对第一图像中有像素灰度变化的区域进行更新。
示例性的,电子设备的摄像头可以支持环境光感应(ambient light sensing,ALS)运动检测,使得该摄像头可以根据用户面部的像素灰度变化进而确定用户是否发生面部动作。示例性的,电子设备包括的环境光感应运动检测传感单元,其可以分为M*N(如M=4,N=4)个传感小单元,该环境光感应运动检测的各个传感小单元可以持续检测像素灰度并获得像素灰度变化,其中,当一个或多个传感小单元检测到有像素灰度变化时,可以对该像素灰度变化的区域的图像进行更新,例如,当环境光感应运动单元检测的传感单元根据像素灰度变化检测到用户眼部区域发生运动(如眼球运动或者眨眼动作等)而其他区域无运动时,可以仅将用户眼部区域对应的图像进行更新,而对其他无像素灰度变化的区域(如背景区域)对应的图像不进行更新,从而使得摄像头的功耗可以大大降低。
在一种实现方式中,该摄像头可以是低功耗摄像头。其功耗低于某一阈值,例如,该摄像头可以通过采集帧率或者分辨率较低的图像以降低功耗。示例性的,摄像头所采集的第一图像的帧率可以低于某一阈值;或者,电子设备摄像头所采集的第一图像的分辨率可以低于另一阈值。其中,第一图像的帧率例如可以低于640*480,第一图像的分辨率例如可以低于10Hz。应理解,通过采集帧率或者分辨率较低的第一图像,可以在满足后续对用户信息分析的基础上,降低功耗。
S502,当第一图像包括面部图像,该面部图像包括的面部特征与第一预设面部特征匹配时,电子设备进入第二熄屏状态,当电子设备处于所述第二熄屏状态时,电子设备熄屏显示第一信息。
其中,电子设备可以根据第一图像中的面部图像的面部特征判断该面部特征是否符合第一预设面部特征。该第一预设面部特征可以是第一预设用户的面部特征。换句话说,当电子设备根据用户的面部特征确定当前用户为第一预设用户时,该电子设备确定在第二熄屏状态显示第一信息,第二熄屏状态为熄屏显示信息的状态。
应理解,第一预设用户可以为能够使电子设备开启熄屏状态下进行信息显示的用户,如电子设备的机主用户。该第一预设用户特征可以预先存储在该电子设备中。在根据用户的面部特征确定用户是否为第一预设用户之前,可以先采集包括用户面部特征信息的第一图像,然后根据第一图像包括的用户的面部图像信息确定面部特征。其中,面部特征例如可以是用户的面眼部特征或者表情特征等。
在一种实现方式中,当电子设备获取当前用户的面部特征后,将该当前用户的面部特征与预存储的第一预设用户的特征进行比对,若二者可以匹配,则电子设备确定当前用户为第一预设用户,能够使该电子设备在熄屏状态下显示第一信息。
在一种实现方式中,第一信息例如可以是用户预先设置的信息,该信息可以包括通用信息和包含用户特征的隐私信息,其中,通用信息例如可以是时间信息、日期信息、电量信息等,包含用户特征的隐私信息例如可以是备忘信息、未接来电、未读短信等。
在一种实现方式中,摄像头获取第一图像后,可以将第一图像的信息发送给处理单元,该处理单元用于识别第一图像中的用户面部图像信息,该处理单元例如可以是智能监控分析单元。示例性的,智能监控分析单元例如可以包括持续智能监控分析小单元(always on AI tiny,AOAI)和智能监控分析服务(always on AI service)等单元,其可以根据摄像头获取的第一图像的信息进行人脸检测、动态手势识别、场景识别等服务信息处理。
示例性的,电子设备通过智能监控分析单元对该第一图像确定该第一图像包括用户的面部图像信息后,可以将该面部图像信息进一步发送给大核CPU中的处理单元,例如,大核CPU中内核层中的AONN神经网络和HAL层的运动服务检测单元和情景感知单元等,使其根据用户的面部图像信息确定面部特征,并判断面部特征是否符合预存储的用户的面部特征,也即判断当前用户是否为符合使电子设备开启熄屏显示模式的用户。
S503,当第一图像包括面部图像,该面部图像包括的面部特征与第二预设面部特征匹配时,电子设备进入第二熄屏状态,当电子设备处于第二熄屏状态时,电子设备熄屏显示第二信息,第二信息与第一信息不同,第一预设面部特征与第二预设面部特征不同。
在一种实现方式中,当电子设备确定用户的面部特征与第二预设面部特征匹配,也即该面部图像中的面部特征与第一预设面部特征不匹配时,该电子设备在熄屏状态下显示第二信息,其中,第二信息与第一信息不相同。
在一种实现方式中,当电子设备确定检测到的用户的面部特征与预设用户的特征不匹配或者电子设备检测到的用户的面部特征为第二预设面部特征,其中该第二预设面部特征可以为非机主用户的面部特征,则该电子设备不会在熄屏状态显示第一信息,而仅显示第二信息;或者,此时也可以不开启熄屏显示。换句话说,当电子设备通过处理单元确定当前用户的特征为不符合使电子设备开启熄屏显示模式的用户的特征时,或当用户不是符合使电子设备开启熄屏显示模式的用户时,确定保持熄屏模式或者开启显示第二信息的熄屏显示。
在一种实现方式中,第二信息例如仅为通用信息,而不包括表示用户特征的隐私信息,该通用信息例如可以是时间信息、日期信息、电量信息等。
示例性的,当处理单元的智能引擎子单元根据用户的面部特征和预存储的机主用户的特征(如面部表情特征)确定当前用户为不符合开启熄屏显示要求的用户时,则该电子设备仍然保持熄屏模式或者开启显示第二信息的熄屏显示。其中,相对于第一信息来说,第二信息例如可以是更为简略的通用信息,例如,第二信息仅为时间或者日期。具体地,若电子设备仍然保持熄屏,则智能引擎子单元可以不向智能监控子单元发送第一请求消息,使得该智能监控子单元不开启熄屏显示模式;或者,智能引擎子单元可以向智能监控子单元发送第二请求消息,该第二请求消息用于请求智能监控子单元不开启熄屏显示功能或者仍然保持当前的熄屏状态。
在一种实现方式中,当电子设备处于第二熄屏状态时,电子设备通过摄像头采集第二图像,当第二图像包括面部图像,且所述面部图像与所述预设条件匹配时,所述电子设备维持第二熄屏状态;当第二图像不包括面部图像,或当第二图像包括面部图像,但该面部图像与预设条件不匹配时,电子设备进入所述第一熄屏状态。换句话说,电子设备在熄屏显示信息状态时,可以持续采集图像,当采集到的图像中不存在面部图像时,进入第一熄屏状态,也即不显示信息;当仍然有面部图像时,保持第二熄屏状态。
在一种实现方式中,电子设备还可以根据采集到的图像中的环境信息确定第一信息,具体地,电子设备根据采集到图像中的环境信息确定第一信息的内容,例如,当环境信息为办公环境时,第一信息可以包括备忘信息、工作提醒或者会议信息;当环境信息为旅途信息时,第一信息可以包括车次信息、航班信息或者日程安排信息。
应理解,电子设备在熄屏状态显示的第一信息可以根据环境信息灵活改变,以满足用户在不同环境下查询信息的需求。
在一种实现方式中,当电子设备处于第二熄屏状态时,该电子设备可以通过摄像头持续对图像进行采集。示例性的,电子设备还可以通过摄像头采集第三图像,所述第三图像包括面部图像,当电子设备根据该面部图像中的眼睛特征确定眼睛闭合,且闭合持续时长达到第一阈值时,该电子设备可以进入第一熄屏显示状态。换句话说,当电子设备判断用户未注视屏幕或者不需要查询信息时,不再进行信息显示。其中,第一阈值例如可以是10ms。
S504,当图像不包括面部图像时,该电子设备维持第一熄屏状态。
其中,当电子设备确定采集到的图像中不包括图像信息,该电子设备不进行信息显示。也就是说,当电子设备确定不存在查看信息或者注视屏幕的用户时,不进行信息显示。
根据本申请实施例提供的信息显示的方法,电子设备根据用户的特征确定当前查看电子设备的用户是否为符合使电子设备开启熄屏显示的用户,当确定该用户为能够使得电子设备开启熄屏显示的用户时,确定开启显示第一信息的熄屏显示,也即仅在特定条件下开启熄屏显示,使得该熄屏显示不要一直开启,既能够满足用户的查看信息的需求,也能够降低功耗,提升终端续航能力。
图6示出了本申请实施例提供的又一种显示的方法的示意性流程图。
在本申请实施例提供的信息显示的方法中,通过摄像头查看电子设备的用户的使用环境,从而确定熄屏显示的方式和内容。该信息显示的方法的流程包括以下步骤。
S601,当电子设备处于第一熄屏状态时,电子设备不显示信息,该电子设备通过摄像头采集第一图像,该第一图像包括环境信息。
在一种实现方式中,当电子设备的屏幕熄灭后,电子设备可以通过摄像头采集第一图像,该第一图像包括环境信息,该环境信息可以是用户当前所处环境的相关信息。
在一种实现方式中,当电子设备呈现某一显示界面时,可以接收第一输入进入熄屏状态,响应于所述第一输入,所述电子设备进入熄屏状态。其中,第一输入例如可以是用户输入的待机指令或者用户按下待机键使得电子设备进入熄屏状态、锁屏状态或者待机状态、灭屏状态。其中,电子设备所呈现的第一显示界面可以是电子设备亮屏状态下的任一界面。
在一种实现方式中,第一输入例如可以是用户输入的待机指令或者用户按下待机键使得电子设备进入熄屏状态。
应理解,本申请实施例提供的显示方法可以是用于电子设备屏幕熄灭后,也即电子设备处于熄屏状态时,其中,该熄屏状态具体可以包括锁屏状态、灭屏状态或者待机状态等。
在一种实现方式中,电子设备可以通过摄像头在熄屏状态时采集第一图像。其中,该电子设备的摄像头可以是电子设备的前置摄像头;该摄像头可以在电子设备熄屏状态或者亮屏状态均能够持续采集图像,并且该摄像头可以实时采集第一图像,以更加准确的捕捉用户信息。
在一种实现方式中,电子设备的摄像头可以对图像进行更新,例如对第一图像中有像素灰度变化的区域进行更新。
示例性的,电子设备的摄像头可以支持环境光感应(ambient light sensing,ALS)运动检测,使得该摄像头可以根据用户面部的像素灰度变化进而确定用户是否发生面部动作。示例性的,电子设备包括的环境光感应运动检测传感单元,其可以分为M*N(如M=4,N=4)个传感小单元,该环境光感应运动检测的各个传感小单元可以持续检测像素灰度并获得像素灰度变化,其中,当一个或多个传感小单元检测到有像素灰度变化时,可以对该像素灰度变化的区域的图像进行更新,例如,当环境光感应运动单元检测的传感单元根据像素灰度变化检测到用户眼部区域发生运动(如眼球运动或者眨眼动作等)而其他区域无运动时,可以仅将用户眼部区域对应的图像进行更新,而对其他无像素灰度变化的区域(如背景区域)对应的图像不进行更新,从而使得摄像头的功耗可以大大降低。
在一种实现方式中,该摄像头可以是低功耗摄像头。其功耗低于某一阈值,例如,该摄像头可以通过采集帧率或者分辨率较低的图像以降低功耗。示例性的,摄像头所采集的第一图像的帧率可以低于某一阈值;或者,电子设备摄像头所采集的第一图像的分辨率可以低于另一阈值。其中,第一图像的帧率例如可以低于640*480,第一图像的分辨率例如可以低于10Hz。应理解,通过采集帧率或者分辨率较低的第一图像,可以在满足后续对用户信息分析的基础上,降低功耗。
S602,该电子设备根据环境信息确定第一信息。
在一种实现方式中,电子设备根据该环境信息确定熄屏显示的第一信息的内容。例如,当环境信息为办公环境时,第一信息可以包括备忘信息、工作提醒或者会议信息;当环境信息为旅途信息时,第一信息可以包括车次信息、航班信息或者日程安排信息。
应理解,电子设备在熄屏状态显示的第一信息的内容可以根据环境信息灵活改变,以满足用户在不同环境下查询信息的需求。
在一种实现方式中,电子设备的包括的处理单元可以对环境信息进行频次学习,使得在后续熄屏显示判定过程中,该电子设备可以对第一图像中的环境信息进行识别,进而判断用户当前所处的环境并确定对应的熄屏状态下要显示的第一信息的内容。示例性的,用于对环境进行频次学习和识别的处理单元可以是电子设备包括的AOAI持续智能监控分析子单元,用于对用户当前所处环境进行判定的处理单元例如可以是大核CPU包括的智能引擎子单元。
示例性的,当智能监控分析小单元识别当前环境中出现办公柜,则智能引擎子单元可以根据该环境信息判定当前为用户的工作环境或者判定当前用户处于工作状态,进而决策输出与当前环境对应的熄屏状态下显示的信息并请求实施熄屏显示动作,其中,该熄屏状态下显示的信息例如可以是当日的备忘录信息或者紧急提示信息等(如图7所示)。
作为一个示例,当摄像头检测到用户的环境信息为车厢环境时,则持续智能监控分析子单元对其进行识别并上报给智能引擎后,该智能引擎可以判定当前用户所处的状态为差旅状态,此时,确定熄屏状态下显示的信息的内容例如可以是车次、时间、旅程起点、终点等智能辅助信息。
在一种实现方式中,电子设备在根据环境信息确定第一信息的内容之前,电子设备还可以通过摄像头采集第一图像,该第一图像还可以包括用户的面部图像,其中,当面部图像与预设条件匹配时,电子设备进入熄屏状态。用户的面部图像信息例如可以是用户的面部表情、运动信息等。
应理解,熄屏显示的第一信息可以预先写入显示存储单元中,该信息还可以包括多种内容,例如包括以下一种或者多种信息:显示时钟、日期、电量、未接来电、未读短信、应用提醒、个性或者励志标签的界面等。
在一种实现方式中,当第一图像包括面部图像时,面部图像与预设条件匹配时,所述电子设备进入所述第二熄屏状态。其中,预设条件可以是头部扭转、眼球运动、睁眼动作或者嘴巴运动等。
示例性的,电子设备的处理单元可以根据第一图像包括的用户的面部图像确定该面部图像是否与预设条件匹配,并做出检测结果。其中,预设条件可以是用户特定的面部动作,例如用户的头部扭动、人眼睁开动作、眼球运动或者嘴巴做出的某一特定动作等。应理解,处理单元可以根据该面部特征作为参照标准,也即当用户发生特定的面部动作时,则认为用户注视电子设备屏幕或者存在查看熄屏状态下显示信息的需求。示例性的,该检测过程例如可以是处理单元包括的检测子单元执行的。
示例性的,当处理单元确定用户的面部特征与预设条件匹配时时,确定开启熄屏显示。示例性的,处理单元的检测子单元获取用户面部特征满足预设条件的检测结果后,可以将该检测结果发送给智能引擎子单元,该智能引擎子单元可以根据检测子单元的检测结果确定熄屏显示,并向智能监控子单元发送第一请求消息,该第一请求消息用于向智能监控子单元请求执行熄屏显示的功能,当智能监控子单元接收到智能引擎子单元发送的第一请求消息时,可以由其包括的智能熄屏子单元和智能亮屏子单元完成熄屏显示功能。
在一种实现方式中,当处理单元未检测到用户符合预设条件的面部特征;或者,在检测区域内未检测出人眼;或者,检测到用户进行眼睛闭合动作,且眼睛闭合的时长达到第三阈值时,则执行熄屏动作,也即不进行熄屏显示。
在一种实现方式中,当所述第一图像包括面部图像,面部图像包括的面部特征与第一预设面部特征匹配时,电子设备确定在第二熄屏状态显示该第一信息。其中,该第一信息包括通用信息和用户隐私信息。
S603,当电子设备处于第二熄屏状态时,该电子设备熄屏显示该第一信息。
应理解,第二熄屏状态为电子设备在熄屏时显示信息的状态。其中,所显示的信息的内容可以由该电子设备根据第一图像中的环境信息确定,然后在电子设备进入熄屏显示信息状态时,可以显示该信息内容。
根据本申请实施例提供的信息显示的方法,当用户面部发生特定动作时,确定该用户注视手机屏幕或者需要查看熄屏显示信息,开启熄屏显示,也即仅在特定条件下开启熄屏显示,使得该熄屏显示不需要一直开启,既能够满足用户的查看信息的需求,也能够降低功耗,提升终端续航能力,此外,还通过判定用户所处的环境显示不同的特定信息,能够灵活地满足用户的查询需求,提升用户使用体验。
图8示出了本申请实施例提供的一种电子设备的结构示意图。该电子设备800包括摄像头810、显示器820至少一个处理器830和存储器840。
在一种实现方式中,摄像头810,可以用于当电子设备处于熄屏状态时,采集第一图像,所述第一图像可以包括用户的面部特征信息或者包括用户的面部特征信息和环境信息。示例性的,该摄像头810可以是低功耗摄像头,且可以在电子设备处于熄屏状态时进行图像采集。
在一种实现方式中,该电子设备还包括显示器820,当所述第一图像包括面部特征,且所述面部特征与预设条件匹配时,该显示器820在所述熄屏状态显示信息。
在一种实现方式中,处理器830还可以用于当所述第一图像不包括所述面部特征时,使所述电子设备保持所述熄屏状态。
应理解,本申请实施例中所说的摄像头810可以是低功耗且在电子设备处于熄屏状态时也可以进行图像采集的摄像头。
在一种实现方式中,摄像头810采集的第一图像的分辨率可以低于某一阈值;或者,第一图像的帧率可以低于另一阈值。
在一种实现方式中,该电子设备包括的显示器820,还可以用于当所述第一图像包括面部特征,且所述面部特征与第一预设面部特征匹配时,使得该显示器820在所述熄屏状态显示第一信息;或者,当所述第一图像包括面部特征,且所述面部特征与所述第一预设面部特征不匹配时,使得该显示器820在所述熄屏状态显示第二信息,所述第二信息与所述第一信息不同。
在一种实现方式中,存储器840,可以用于预先存储第一预设用户的特征,其中,第一预设用户例如可以是机主用户。
在一种实现方式中,显示器820,还可以用于根据环境信息确定所述电子设备处于所述熄屏状态时的显示信息。
在一种实现方式中,处理器830还可以用于根据所述第一图像中用户面部像素灰度的变化确定所述用户的面部特征。
在一种实现方式中,摄像头810还可以持续采集所述第一图像,且仅对所述第一图像中像素灰度有变化的区域进行图像更新。
在一种实现方式中,处理器830还可以用于当确定当前用户处于闭眼状态,且所述闭眼状态保持的时长达到第一阈值时,保持所述熄屏状态。
在一种实现方式中,熄屏显示时采用16.7兆色以上熄屏显示模式。
在一种实现方式中,当电子设备处于第一熄屏状态时,该电子设备不显示信息,电子设备通过摄像头采集第一图像,当第一图像包括面部图像,且面部图像与预设条件匹配时,电子设备进入第二熄屏状态,当电子设备处于第二熄屏状态时,电子设备熄屏显示信息;当电子设备处于第二熄屏状态时,电子设备通过摄像头采集第二图像,所述第二图像包括所述面部图像,其中,当该第二图像中的面部图像包括的面部特征与第一预设面部特征匹配时,电子设备在第二熄屏状态显示第一信息,第一信息包括通用信息和用户隐私信息,电子设备预存储所述第一预设面部特征;当第二图像中的面部图像包括的面部特征与第二预设面部特征匹配时,电子设备在第二熄屏状态下显示第二信息,第二信息为通用信息,电子设备预存储第二预设面部特征,第二预设面部特征与第一预设面部特征不同。当第一图像中还包括环境信息时,电子设备还根据环境信息确定在第二熄屏状态显示的第一信息;其中,当环境信息为办公环境时,第一信息包括备忘信息、工作提醒或者会议信息;当环境信息为旅途信息时,第一信息包括车次信息、航班信息或者日程安排信息;当在第二熄屏状态时,电子设备通过摄像头采集第三图像,当电子设备采集到的第三图像包括眼睛特征,眼睛处于闭眼状态,且所述闭眼状态的持续时长大于第一预设时长时,电子设备在熄屏状态停止显示信息。当第一图像不包括面部图像,或面部图像与预设条件不匹配时,电子设备维持第一熄屏状态。
图9示出了本申请实施例提供的另一电子设备结构的示意图。该电子设备900包括摄像头910、显示器920、处理器930和存储器940。
在一种实现方式中,摄像头910可以用于当电子设备处于熄屏状态时,采集第一图像。示例性的,该摄像头910例如可以是低功耗摄像头。
在一种实现方式中,显示器920,可以用于当所述第一图像包括面部特征,且所述面部特征与第一预设用户的面部特征匹配时,该显示器920在所述熄屏状态显示第一信息;或者,当所述第一图像包括面部特征,且所述面部特征与所述第一预设用户的面部特征不匹配时,该显示器920在所述熄屏状态显示第二信息,所述第二信息与所述第一信息不同。
在一种实现方式中,存储器940,可以用于预存储第一预设用户的特征。其中,第一预设用户例如可以是机主用户。
在一种实现方式中,显示器920还可以用于根据环境信息确定所述电子设备处于所述熄屏状态时的显示信息。
在一种实现方式中,处理器930还可以用于根据所述第一图像中用户面部像素灰度的变化确定所述用户的面部特征。
在一种实现方式中,摄像头910还可以用于仅对所述第一图像中像素灰度有变化的区域进行图像更新。
图10示出了本申请实施例提供的又一种电子设备结构的示意图。该电子设备1000包括处理器1010、摄像头1020、显示器1030和存储器1040。
在一种实现方式中,处理器1010,可以用于当电子设备处于熄屏状态时,根据环境信息确定所述熄屏状态时的显示信息。
电子设备1000还可以包括摄像头1020,用于当所述电子设备处于熄屏状态时,采集第一图像,所述第一图像包括用户的面部的第一信息和用户当前所处的所述环境信息。其中,该摄像头1020可以是低功耗摄像头。
在一种实现方式中,处理器1010,还可以用于根据所述第一图像确定所述环境信息。
在一种实现方式中,处理器1010,还可以用于根据所述第一信息确定所述用户的面部特征,且当所述面部特征与预设条件匹配时,电子设备通过显示器1020确定在所述熄屏状态下显示信息。
在一种实现方式中,该电子设备还可以包括存储器1040,该存储器1040用于预存预设条件。
在一种实现方式中,处理器1010,还可以用于根据所述第一图像中用户面部像素灰度的变化确定所述用户的面部特征。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、设备和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(read-only memory,ROM)、随机存取存储器(random access memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准。
Claims (27)
1.一种显示的方法,其特征在于,包括:
当电子设备处于第一熄屏状态时,所述电子设备不显示信息,所述电子设备通过摄像头采集第一图像;
当所述第一图像包括面部图像,所述面部图像与预设条件匹配时,所述电子设备进入第二熄屏状态,当所述电子设备处于所述第二熄屏状态时,所述电子设备熄屏显示信息;
当所述第一图像不包括面部图像,或当所述第一图像包括面部图像,但所述面部图像与所述预设条件不匹配时,所述电子设备维持所述第一熄屏状态。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
当所述电子设备处于所述第二熄屏状态时,所述电子设备通过所述摄像头采集第二图像;
当所述第二图像包括所述面部图像,所述面部图像与所述预设条件匹配时,所述电子设备维持所述第二熄屏状态;
当所述第二图像不包括所述面部图像,或当所述第二图像包括面部图像,所述面部图像与所述预设条件不匹配时,所述电子设备进入所述第一熄屏状态。
3.根据权利要求1或2所述的方法,其特征在于,所述预设条件包括以下任意一种:
头部扭转、眼球运动、睁眼动作或者嘴巴运动。
4.根据权利要求1-3中任一项所述的方法,其特征在于,所述当所述第一图像包括面部图像,所述面部图像与预设条件匹配时,所述电子设备进入第二熄屏状态,当所述电子设备处于所述第二熄屏状态时,所述电子设备熄屏显示信息,包括:
当所述第一图像包括面部图像,所述面部图像包括的面部特征与第一预设面部特征匹配时,所述电子设备熄屏显示第一信息;
当所述面部图像包括的面部特征与第二预设面部特征匹配时,所述电子设备熄屏显示第二信息,所述第二信息与所述第一信息不同,所述第一预设面部特征和所述第二预设面部特征不同。
5.根据权利要求4所述的方法,其特征在于,所述方法还包括:
所述电子设备根据环境信息确定所述第一信息。
6.根据权利要求5所述的方法,其特征在于,所述电子设备根据所述第一图像确定所述环境信息。
7.根据权利要求1-6中任一项所述的方法,其特征在于,所述方法还包括:
所述电子设备根据所述面部图像的像素灰度的变化确定所述面部图像与所述预设条件是否匹配。
8.根据权利要求4-7中任一项所述的方法,其特征在于,所述第一信息包括通用信息和用户隐私信息;
所述第二信息包括通用信息。
9.根据权利要求1-8中任一项所述的方法,其特征在于,所述方法还包括:
当所述电子设备处于所述第二熄屏状态时,所述电子设备通过所述摄像头采集第三图像;
当所述第三图像包括眼睛特征,所述眼睛处于闭眼状态的持续时长大于第一预设时长时,所述电子设备进入所述第一熄屏状态。
10.一种显示的方法,其特征在于,包括:
当电子设备处于第一熄屏状态时,所述电子设备不显示信息,所述电子设备通过摄像头采集第一图像;
当所述第一图像包括面部图像,所述面部图像包括的面部特征与第一预设面部特征匹配时,所述电子设备进入第二熄屏状态,当所述电子设备处于所述第二熄屏状态时,所述电子设备熄屏显示第一信息;
当所述第一图像包括面部图像,所述面部图像包括的面部特征与第二预设面部特征匹配时,所述电子设备进入所述第二熄屏状态,当所述电子设备处于所述第二熄屏状态时,所述电子设备熄屏显示第二信息,所述第二信息与所述第一信息不同,所述第一预设面部特征与第二预设面部特征不同;
当所述第一图像不包括所述面部图像时,所述电子设备维持所述第一熄屏状态。
11.根据权利要求10所述的方法,其特征在于,所述方法还包括:
当所述电子设备处于所述第二熄屏状态时,所述电子设备通过所述摄像头采集第二图像;
当所述第二图像包括所述面部图像,所述面部图像与预设条件匹配时,所述电子设备维持所述第二熄屏状态;
当所述第二图像不包括所述面部图像,或当所述第二图像包括面部图像,所述面部图像与所述预设条件不匹配时,所述电子设备进入所述第一熄屏状态。
12.根据权利要求11所述的方法,其特征在于,所述预设条件包括以下任意一种:
头部扭转、眼球运动、睁眼动作或者嘴巴运动。
13.根据权利要求10-12中任一项所述的方法,其特征在于,所述方法还包括:
所述电子设备根据环境信息确定所述第一信息。
14.根据权利要求13所述的方法,其特征在于,所述电子设备根据所述第一图像确定所述环境信息。
15.根据权利要求10-14中任一项所述的方法,其特征在于,所述方法还包括:
所述电子设备根据所述面部图像的像素灰度的变化确定所述面部图像与所述预设条件是否匹配。
16.根据权利要求10-15中任一项所述的方法,其特征在于,所述第一信息包括通用信息和用户隐私信息;
所述第二信息包括通用信息。
17.根据权利要求10-16中任一项所述的方法,其特征在于,所述方法还包括:
当所述电子设备在所述第二熄屏状态时,所述电子设备通过所述摄像头采集第三图像;
当所述第三图像包括眼睛特征,所述眼睛处于闭眼状态的持续时长大于第一预设时长时,所述电子设备进入所述熄屏状态。
18.一种显示的方法,其特征在于,包括:
当电子设备处于第一熄屏状态时,所述电子设备不显示信息,所述电子设备通过摄像头采集第一图像,所述第一图像包括环境信息;
所述电子设备根据所述环境信息确定第一信息;
当所述电子设备处于第二熄屏状态时,所述电子设备熄屏显示所述第一信息。
19.根据权利要求18所述的方法,其特征在于,所述方法还包括:
当所述第一图像包括面部图像,所述面部图像与预设条件匹配时,所述电子设备进入所述第二熄屏状态。
20.根据权利要求19所述的方法,其特征在于,所述预设条件包括以下任意一种:
头部扭转、眼球运动、睁眼动作或者嘴巴运动。
21.根据权利要求18-20中任一项所述的方法,其特征在于,所述方法还包括:
当所述第一图像包括面部图像,所述面部图像包括的面部特征与第一预设面部特征匹配时,所述电子设备在所述第二熄屏状态显示所述第一信息。
22.根据权利要求18-21中任一项所述的方法,其特征在于,所述第一信息包括通用信息和用户隐私信息。
23.根据权利要求18-22中任一项所述的方法,其特征在于,所述方法还包括:
所述电子设备根据所述面部图像的像素灰度的变化确定所述面部图像与所述预设条件是否匹配。
24.根据权利要求18-23中任一项所述的方法,其特征在于,所述电子设备根据所述环境信息确定第一信息,包括:
当所述环境信息为办公环境时,所述第一信息包括备忘信息、工作提醒或者会议信息;
当所述环境信息为旅途信息时,所述第一信息包括车次信息、航班信息或者日程安排信息。
25.一种显示的方法,其特征在于,包括:
当电子设备处于第一熄屏状态时,所述电子设备不显示信息,所述电子设备通过摄像头采集第一图像;
当所述第一图像包括面部图像,所述电子设备进入第二熄屏状态,当所述电子设备处于所述第二熄屏状态时,所述电子设备熄屏显示信息,包括:
当所述面部图像的面部特征与第一预设面部特征匹配时,所述电子设备熄屏显示第一信息;
当所述面部图像的面部特征与所述第一预设面部特征不匹配时,所述电子设备熄屏显示第二信息,所述第一信息与所述第二信息不同;
当所述第一图像包括环境信息时,所述电子设备根据所述环境信息确定所述第一信息;其中,
当所述环境信息为办公环境时,所述第一信息包括备忘信息、工作提醒或者会议信息;
当所述环境信息为旅途信息时,所述第一信息包括车次信息、航班信息或者日程安排信息;
当所述电子设备处于所述第二熄屏状态时,所述电子设备通过所述摄像头采集第二图像,当所述第二图像包括面部特征,所述面部图像的面部特征与所述第一预设面部特征匹配时,所述电子设备熄屏显示第一信息;
当所述第二图像包括面部特征,所述面部图像的面部特征与所述第一预设面部特征不匹配时,所述电子设备熄屏显示第二信息;
当所述第二图像不包括面部特征,所述电子设备进入所述第一熄屏状态;
当所述第二图像包括眼睛特征,所述眼睛处于闭眼状态,所述闭眼状态的持续时长大于第一预设时长时,所述电子设备进入所述第一熄屏状态;
当所述第一图像不包括面部图像,所述电子设备维持所述第一熄屏状态。
26.一种电子设备,其特征在于,所述电子设备包括:至少一个处理器、摄像头,显示屏和存储器,所述存储器用于存储程序指令,当所述程序指令在所述至少一个处理器中执行时,使得所述电子设备实现如权利要求1-25中任一项所述的方法。
27.一种计算机可读存储介质,包括指令,其特征在于,当所述指令在电子设备上运行时,使得所述电子设备执行如权利要求1-25中任一项所述的方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910818856.2A CN110658906A (zh) | 2019-08-30 | 2019-08-30 | 显示的方法及电子设备 |
PCT/CN2020/102097 WO2021036555A1 (zh) | 2019-08-30 | 2020-07-15 | 显示的方法及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910818856.2A CN110658906A (zh) | 2019-08-30 | 2019-08-30 | 显示的方法及电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110658906A true CN110658906A (zh) | 2020-01-07 |
Family
ID=69037742
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910818856.2A Pending CN110658906A (zh) | 2019-08-30 | 2019-08-30 | 显示的方法及电子设备 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN110658906A (zh) |
WO (1) | WO2021036555A1 (zh) |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111756882A (zh) * | 2019-03-28 | 2020-10-09 | 宁波舜宇光电信息有限公司 | 终端设备及其显示屏和应用 |
CN111831099A (zh) * | 2020-07-06 | 2020-10-27 | Oppo广东移动通信有限公司 | 电子设备 |
WO2021036555A1 (zh) * | 2019-08-30 | 2021-03-04 | 华为技术有限公司 | 显示的方法及电子设备 |
WO2022042274A1 (zh) * | 2020-08-31 | 2022-03-03 | 华为技术有限公司 | 一种语音交互方法及电子设备 |
CN114415816A (zh) * | 2021-11-30 | 2022-04-29 | 荣耀终端有限公司 | 一种息屏显示方法及电子设备 |
CN114449096A (zh) * | 2020-10-30 | 2022-05-06 | 华为技术有限公司 | 一种息屏状态调整方法及装置 |
CN114584661A (zh) * | 2022-03-09 | 2022-06-03 | 南京控维通信科技有限公司 | 一种适用于回波抵消设备的异常处理方法及装置 |
CN116112597A (zh) * | 2020-09-03 | 2023-05-12 | 荣耀终端有限公司 | 灭屏显示方法和电子设备、存储介质 |
CN116320147A (zh) * | 2023-02-17 | 2023-06-23 | 荣耀终端有限公司 | 一种唤醒方法及电子设备 |
WO2023130928A1 (zh) * | 2022-01-10 | 2023-07-13 | 荣耀终端有限公司 | 熄屏显示的控制方法、电子设备及介质 |
WO2023130927A1 (zh) * | 2022-01-10 | 2023-07-13 | 荣耀终端有限公司 | 熄屏显示的控制方法、电子设备及存储介质 |
CN118689947A (zh) * | 2024-08-27 | 2024-09-24 | 上海富友支付服务股份有限公司 | 基于云端的数据处理及存储系统和方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6578017B1 (en) * | 1999-02-26 | 2003-06-10 | Information Decision Technologies, Llc | Method to aid object detection in images by incorporating contextual information |
CN108509037A (zh) * | 2018-03-26 | 2018-09-07 | 维沃移动通信有限公司 | 一种信息显示方法及移动终端 |
CN109145555A (zh) * | 2018-07-27 | 2019-01-04 | 上海与德科技有限公司 | 基于智能终端的应用方法、系统、智能终端及存储介质 |
CN110119684A (zh) * | 2019-04-11 | 2019-08-13 | 华为技术有限公司 | 图像识别方法和电子设备 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107580134B (zh) * | 2017-09-07 | 2020-03-31 | 维沃移动通信有限公司 | 一种移动终端的显示方法及移动终端 |
CN108769416B (zh) * | 2018-05-31 | 2021-05-18 | 北京小米移动软件有限公司 | 熄屏显示方法、装置及非临时性计算机可读存储介质 |
CN109388223A (zh) * | 2018-09-14 | 2019-02-26 | 维沃移动通信有限公司 | 一种熄屏显示方法、装置及终端 |
CN110658906A (zh) * | 2019-08-30 | 2020-01-07 | 华为技术有限公司 | 显示的方法及电子设备 |
-
2019
- 2019-08-30 CN CN201910818856.2A patent/CN110658906A/zh active Pending
-
2020
- 2020-07-15 WO PCT/CN2020/102097 patent/WO2021036555A1/zh active Application Filing
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6578017B1 (en) * | 1999-02-26 | 2003-06-10 | Information Decision Technologies, Llc | Method to aid object detection in images by incorporating contextual information |
CN108509037A (zh) * | 2018-03-26 | 2018-09-07 | 维沃移动通信有限公司 | 一种信息显示方法及移动终端 |
CN109145555A (zh) * | 2018-07-27 | 2019-01-04 | 上海与德科技有限公司 | 基于智能终端的应用方法、系统、智能终端及存储介质 |
CN110119684A (zh) * | 2019-04-11 | 2019-08-13 | 华为技术有限公司 | 图像识别方法和电子设备 |
Cited By (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111756882A (zh) * | 2019-03-28 | 2020-10-09 | 宁波舜宇光电信息有限公司 | 终端设备及其显示屏和应用 |
WO2021036555A1 (zh) * | 2019-08-30 | 2021-03-04 | 华为技术有限公司 | 显示的方法及电子设备 |
CN111831099A (zh) * | 2020-07-06 | 2020-10-27 | Oppo广东移动通信有限公司 | 电子设备 |
WO2022042274A1 (zh) * | 2020-08-31 | 2022-03-03 | 华为技术有限公司 | 一种语音交互方法及电子设备 |
US11823603B2 (en) | 2020-09-03 | 2023-11-21 | Honor Device Co., Ltd. | Always-on-display method and electronic device |
CN116112597A (zh) * | 2020-09-03 | 2023-05-12 | 荣耀终端有限公司 | 灭屏显示方法和电子设备、存储介质 |
CN116112597B (zh) * | 2020-09-03 | 2023-10-20 | 荣耀终端有限公司 | 具有灭屏显示功能的电子设备及其显示灭屏界面的方法、存储介质 |
CN114449096A (zh) * | 2020-10-30 | 2022-05-06 | 华为技术有限公司 | 一种息屏状态调整方法及装置 |
CN114415816A (zh) * | 2021-11-30 | 2022-04-29 | 荣耀终端有限公司 | 一种息屏显示方法及电子设备 |
WO2023130928A1 (zh) * | 2022-01-10 | 2023-07-13 | 荣耀终端有限公司 | 熄屏显示的控制方法、电子设备及介质 |
WO2023130927A1 (zh) * | 2022-01-10 | 2023-07-13 | 荣耀终端有限公司 | 熄屏显示的控制方法、电子设备及存储介质 |
CN114584661A (zh) * | 2022-03-09 | 2022-06-03 | 南京控维通信科技有限公司 | 一种适用于回波抵消设备的异常处理方法及装置 |
CN116320147A (zh) * | 2023-02-17 | 2023-06-23 | 荣耀终端有限公司 | 一种唤醒方法及电子设备 |
CN116320147B (zh) * | 2023-02-17 | 2023-11-17 | 荣耀终端有限公司 | 一种唤醒方法及电子设备 |
CN118689947A (zh) * | 2024-08-27 | 2024-09-24 | 上海富友支付服务股份有限公司 | 基于云端的数据处理及存储系统和方法 |
Also Published As
Publication number | Publication date |
---|---|
WO2021036555A1 (zh) | 2021-03-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110658906A (zh) | 显示的方法及电子设备 | |
CN113963659B (zh) | 显示设备的调整方法及显示设备 | |
KR101106800B1 (ko) | 전자기기 및 전자기기에서의 표시 방법 | |
WO2014189676A1 (en) | Systems and methods for wireless activity monitoring with notifications | |
CN107277902B (zh) | 终端功耗控制方法、移动终端及计算机可读存储介质 | |
CN113625860B (zh) | 模式切换方法、装置、电子设备及芯片系统 | |
CN114115512B (zh) | 信息显示方法、终端设备及计算机可读存储介质 | |
JP2011504604A (ja) | 環境光依存テーマ | |
CN103929546A (zh) | 一种基于智能终端的保护用户眼睛的方法及装置 | |
CN108877734B (zh) | 触控显示屏的色温调节方法及相关产品 | |
CN113747552A (zh) | 一种功耗优化方法和电子设备 | |
CN105979195B (zh) | 一种视频图像处理装置和方法 | |
CN106453700A (zh) | 移动终端显示控制装置和方法 | |
CN108200287B (zh) | 一种信息处理方法、终端和计算机可读存储介质 | |
CN115016868A (zh) | 屏幕控制方法和终端设备 | |
CN101494681B (zh) | 信息提示方法 | |
CN102291486A (zh) | 屏幕控制方法和终端 | |
CN109189198B (zh) | 图像显示方法、装置、终端及存储介质 | |
CN107390460B (zh) | 一种腕投设备的双屏显示方法及装置 | |
CN109769069B (zh) | 一种提醒方法、穿戴式设备及计算机可读存储介质 | |
CN116208563A (zh) | 一种电子价签预约刷图方法、设备及计算机可读存储介质 | |
CN112578985B (zh) | 一种显示模式设置方法、设备及计算机可读存储介质 | |
CN109819097A (zh) | 一种护眼提醒方法、移动终端及计算机可读存储介质 | |
CN110266888B (zh) | 利用图像识别获取角标数目的方法、移动设备和存储介质 | |
CN108924338B (zh) | 移动终端控制方法、移动终端及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200107 |
|
RJ01 | Rejection of invention patent application after publication |