CN113325941B - 屏下指纹显示方法及电子设备 - Google Patents

屏下指纹显示方法及电子设备 Download PDF

Info

Publication number
CN113325941B
CN113325941B CN202010134593.6A CN202010134593A CN113325941B CN 113325941 B CN113325941 B CN 113325941B CN 202010134593 A CN202010134593 A CN 202010134593A CN 113325941 B CN113325941 B CN 113325941B
Authority
CN
China
Prior art keywords
display screen
fingerprint
display
screen
electronic device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010134593.6A
Other languages
English (en)
Other versions
CN113325941A (zh
Inventor
肖啸
侯伟波
胡凯
彭军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honor Device Co Ltd
Original Assignee
Honor Device Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honor Device Co Ltd filed Critical Honor Device Co Ltd
Priority to CN202010134593.6A priority Critical patent/CN113325941B/zh
Priority to PCT/CN2020/123002 priority patent/WO2021169337A1/zh
Publication of CN113325941A publication Critical patent/CN113325941A/zh
Application granted granted Critical
Publication of CN113325941B publication Critical patent/CN113325941B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26Power supply means, e.g. regulation thereof
    • G06F1/32Means for saving power
    • G06F1/3203Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3234Power saving characterised by the action undertaken
    • G06F1/325Power saving in peripheral device
    • G06F1/3265Power saving in display device
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • G06V40/13Sensors therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26Power supply means, e.g. regulation thereof
    • G06F1/32Means for saving power
    • G06F1/3203Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3234Power saving characterised by the action undertaken
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons

Abstract

本申请实施例提供了一种屏下指纹显示方法及电子设备,电子设备包括协处理器和显示屏,显示屏包括线缓冲器。该方法包括:在满足第一预设条件的情况下,协处理器向显示屏发送第一指示信息,并将指纹图标的图像数据发送给线缓冲器;响应于第一指示信息,显示屏将工作模式设置为命令模式,并在息屏显示状态下显示指纹图标;指纹图标用于指示指纹采集区域;接收按压操作;响应于按压操作,协处理器向显示屏发送第二指示信息;响应于第二指示信息,显示屏将工作模式从命令模式切换为视频模式,并高亮指纹采集区域以用于采集按压操作对应的指纹数据。本申请实施例能有效节约电子设备的硬件成本,保证息屏显示状态下显示指纹图标时电子设备的较低功耗。

Description

屏下指纹显示方法及电子设备
技术领域
本申请涉及计算机技术领域,尤其涉及一种屏下指纹显示方法及电子设备。
背景技术
随着显示技术的发展,屏下指纹技术也广泛受到用户的关注。屏下指纹无物理可视化的指纹识别区域,指纹识别区域设置在显示屏内部且位置与显示屏显示的指纹图标对应。目前的屏下指纹技术大多利用了有机发光二极管(organic light-emitting diode,OLED)自发光的特性,以此为采集作用于指纹图标的手指的指纹数据提供光源并反射到传感器中进行识别。而息屏显示(always on display,AOD)是指在不点亮整块屏幕的情况下,在屏幕的部分区域保持长亮来显示时间、指纹图标和通知消息等内容的功能。
AOD功能开启时,用户在进行屏下指纹解锁时无需刻意操作,可以通过如拿起手机等正常操作来触发指纹图标的显示,用户对显示的指纹图标执行按压操作时能自动触发显示屏底下的指纹识别模组采集指纹数据,从而大大方便了用户的使用。但目前电子设备实现屏下指纹技术的成本较高或者功耗较高,不利于产品的生产和应用,产品的竞争力不高。
发明内容
本申请实施例提供了一种屏下指纹显示方法及电子设备,不仅可以节约电子设备的硬件成本,而且能够保证息屏显示状态下显示指纹图标时电子设备的较低功耗,提升产品竞争力。
第一方面,本申请实施例提供了一种屏下指纹显示方法,应用于电子设备,所述电子设备包括协处理器和显示屏,所述显示屏包括线缓冲器;所述方法包括:
在满足第一预设条件的情况下,所述协处理器向所述显示屏发送第一指示信息,并将指纹图标的图像数据发送给所述线缓冲器;
响应于所述第一指示信息,所述显示屏将所述工作模式设置为命令模式,并在息屏显示状态下显示所述指纹图标;所述指纹图标用于指示指纹采集区域;
接收按压操作;
响应于所述按压操作,所述协处理器向所述显示屏发送第二指示信息;
响应于所述第二指示信息,所述显示屏将所述工作模式从所述命令模式切换为视频模式,并高亮所述指纹采集区域以用于采集所述按压操作对应的指纹数据。
在上述方法中,通过显示屏内部的线缓冲器存储息屏显示状态下显示的指纹图标的图像数据,显示屏无需额外集成存储器,大大降低了显示屏的硬件成本。显示屏在息屏显示状态下显示指纹图标时工作模式为命令模式,高亮指纹采集区域时工作模式为视频模式,从而在保障息屏显示指纹图标时电子设备的较低功耗的同时也保证了显示屏的正常显示。并且由协处理器而非应用处理器控制显示能进一步降低电子设备的功耗,有利于产品的生产和应用,提升产品竞争力。
在一种可能的实现方式中,所述电子设备还包括应用处理器;所述接收按压操作之后,所述方法还包括:
响应于所述按压操作,所述协处理器采集所述指纹数据,并将所述指纹数据发送给所述应用处理器;
所述应用处理器对所述指纹数据进行验证,并根据所述指纹数据的验证结果控制所述显示屏显示对应的亮屏界面。
在上述方法中,协处理器向应用处理器发送采集的指纹数据,以唤醒AP对指纹数据进行验证和根据验证结果控制显示屏显示对应的亮屏界面,实现了控制显示屏的处理器的动态切换,在通过协处理器控制显示来降低功耗的同时也保障了屏下指纹解锁功能的正常实现,提升产品竞争力。
在又一种可能的实现方式中,所述应用处理器对所述指纹数据进行验证,并根据所述指纹数据的验证结果控制所述显示屏显示对应的亮屏界面之后,所述方法还包括:
所述协处理器接收所述应用处理器发送的所述验证结果;
在满足第二预设条件的情况下,所述协处理器向所述显示屏发送第三指示信息;所述第二预设条件包括以下任意一项:接收作用于所述显示屏的第一操作、接收作用于所述电子设备的按键的第二操作、在预设时段内未接收到任意操作、所述验证结果为所述指纹数据验证不通过;
响应于所述第三指示信息,所述显示屏将所述工作模式从所述视频模式切换为所述命令模式,并在所述息屏显示状态下显示所述指纹图标。
在上述方法中,协处理器可以控制显示屏从显示指纹解锁成功或失败后的亮屏界面切换为在息屏显示状态下显示指纹图标,实现了显示屏的工作模式的动态切换和控制显示屏的处理器的动态切换,从而保障了息屏显示指纹图标时电子设备的较低功耗和显示屏的正常显示。
在又一种可能的实现方式中,所述协处理器向所述显示屏发送第一指示信息,并将指纹图标的图像数据发送给所述线缓冲器,包括:
所述协处理器向所述显示屏发送第一指示信息,并将所述指纹图标的图像数据发送给所述显示屏;
所述显示屏对所述指纹图标的图像数据进行压缩,并将压缩后的图像数据存储在所述线缓冲器中。
在又一种可能的实现方式中,第一预设条件包括以下任意一项:接收作用于显示屏的第三操作、接收作用于电子设备的按键的第四操作、检测到预设的悬浮操作、检测到预设的摇一摇操作。
第二方面,本申请实施例提供了一种电子设备,包括:协处理器、显示屏和传感器,所述显示屏包括线缓冲器;
所述协处理器,用于在满足第一预设条件的情况下,向所述显示屏发送第一指示信息,并将指纹图标的图像数据发送给所述线缓冲器;
所述显示屏,用于响应于所述第一指示信息,将所述工作模式设置为命令模式,并在息屏显示状态下显示所述指纹图标;所述指纹图标用于指示指纹采集区域;
所述传感器,用于接收按压操作;
所述协处理器,还用于响应于所述按压操作,向所述显示屏发送第二指示信息;
所述显示屏,还用于响应于所述第二指示信息,将所述工作模式从所述命令模式切换为视频模式,并高亮所述指纹采集区域以用于采集所述按压操作对应的指纹数据。
在上述装置中,通过显示屏内部的线缓冲器存储息屏显示状态下显示的指纹图标的图像数据,显示屏无需额外集成存储器,大大降低了显示屏的硬件成本。显示屏在息屏显示状态下显示指纹图标时工作模式为命令模式,高亮指纹采集区域时工作模式为视频模式,从而在保障息屏显示指纹图标时电子设备的较低功耗的同时也保证了显示屏的正常显示。并且由协处理器而非应用处理器控制显示能进一步降低电子设备的功耗,有利于产品的生产和应用,提升产品竞争力。
在一种可能的实现方式中,所述电子设备还包括应用处理器;
所述协处理器,还用于响应于所述按压操作,控制所述传感器采集所述指纹数据,并将所述指纹数据发送给所述应用处理器;
所述应用处理器,用于对所述指纹数据进行验证,并根据所述指纹数据的验证结果控制所述显示屏显示对应的亮屏界面。
在上述装置中,协处理器向应用处理器发送采集的指纹数据,以唤醒AP对指纹数据进行验证和根据验证结果控制显示屏显示对应的亮屏界面,实现了控制显示屏的处理器的动态切换,在通过协处理器控制显示来降低功耗的同时也保障了屏下指纹解锁功能的正常实现,提升产品竞争力。
在又一种可能的实现方式中,所述协处理器,还用于在所述应用处理器对所述指纹数据进行验证,并根据所述指纹数据的验证结果控制所述显示屏显示对应的亮屏界面之后,接收所述应用处理器发送的所述验证结果;
在满足第二预设条件的情况下,向所述显示屏发送第三指示信息;所述第二预设条件包括以下任意一项:接收作用于所述显示屏的第一操作、接收作用于所述电子设备的按键的第二操作、在预设时段内未接收到任意操作、所述验证结果为所述指纹数据验证不通过;
所述显示屏,还用于响应于所述第三指示信息,将所述工作模式从所述视频模式切换为所述命令模式,并在所述息屏显示状态下显示所述指纹图标。
在上述装置中,协处理器可以控制显示屏从显示指纹解锁成功或失败后的亮屏界面切换为在息屏显示状态下显示指纹图标,实现了显示屏的工作模式的动态切换和控制显示屏的处理器的动态切换,从而保障了息屏显示指纹图标时电子设备的较低功耗和显示屏的正常显示。
在又一种可能的实现方式中,所述显示屏还包括集成电路;
所述集成电路,用于在所述显示屏的工作模式为所述命令模式时,按照第一频率读取所述线缓冲器中存储的所述指纹图标的图像数据,并控制所述显示屏在所述息屏显示状态下显示所述指纹图标;
所述集成电路,还用于在所述显示屏的工作模式为所述视频模式时,接收所述应用处理器或所述协处理器按照第二频率发送的图像数据,并控制所述显示屏显示对应的用户界面;所述第一频率小于所述第二频率。
在又一种可能的实现方式中,所述协处理器,具体用于向所述显示屏发送第一指示信息,并将所述指纹图标的图像数据发送给所述集成电路;
所述集成电路,还用于对所述指纹图标的图像数据进行压缩,并将压缩后的图像数据存储在所述线缓冲器中。
在又一种可能的实现方式中,所述显示屏为液晶显示屏,所述集成电路不包含外置存储器。
在上述装置中,显示屏可以为成本较低的液晶显示屏,且集成电路无需额外集成存储器,大大降低了显示屏的硬件成本。
在又一种可能的实现方式中,所述液晶显示屏包括光源组件,所述光源组件用于所述协处理器采集所述按压操作对应的指纹数据。
在上述装置中,通过液晶显示屏中独立设置的光源组件高亮指纹采集区域,以用于采集指纹数据,避免有机电发光二极管利用蒙版等软件方案高亮指纹采集区域带来的闪屏问题。
在又一种可能的实现方式中,第一预设条件包括以下任意一项:接收作用于显示屏的第三操作、接收作用于电子设备的按键的第四操作、检测到预设的悬浮操作、检测到预设的摇一摇操作。
第三方面,本申请实施例提供了一种电子设备,包括一个或多个处理器、存储器以及显示屏;该显示屏包含线缓冲器;上述存储器、上述显示屏与上述一个或多个处理器耦合,上述存储器用于存储计算机程序代码,该计算机程序代码包括计算机指令,上述一个或多个处理器调用上述计算机指令以使上述电子设备执行本申请实施例第一方面或第一方面的任意一种实现方式提供的屏下指纹显示方法。
第四方面,本申请实施例提供了一种计算机存储介质,该计算机存储介质存储有计算机程序,该计算机程序包括程序指令,该程序指令被处理器执行时,用于实现本申请实施例第一方面或第一方面的任意一种实现方式提供的屏下指纹显示方法。
第五方面,本申请实施例提供了一种计算机程序产品,当该计算机程序产品在电子设备上运行时,使得该电子设备执行本申请实施例第一方面或第一方面的任意一种实现方式提供的屏下指纹显示方法。
可以理解地,上述提供的第三方面提供的电子设备、第四方面提供的计算机存储介质,以及第五方面提供的计算机程序产品均用于执行第一方面提供的屏下指纹显示方法,因此,其所能达到的有益效果可参考第一方面所提供的屏下指纹显示方法中的有益效果,此处不再赘述。
附图说明
以下对本申请实施例用到的附图进行介绍。
图1是本申请实施例提供的电子设备的结构示意图;
图2是本申请实施例提供的电子设备的软件结构框图;
图3A是本申请实施例提供的命令模式的架构示意图;
图3B是本申请实施例提供的视频模式的架构示意图;
图4A是本申请实施例提供的电子设备的正视图;
图4B是本申请实施例提供的电子设备的侧视图;
图5-图8是本申请实施例提供的用户界面实施例的示意图;
图9是本申请实施例提供的一种屏下指纹显示方法的流程示意图;
图10-图13是电子设备内部的硬件驱动交互的流程示意图。
具体实施方式
本申请实施例提供了一种屏下指纹显示方法及电子设备,不仅能有效节约电子设备的硬件成本,还能保证息屏显示状态下显示指纹图标时电子设备的较低功耗,提升产品的竞争力。
首先,介绍本申请实施例中涉及的几个概念。
息屏显示(always on display,AOD):和黑屏界面下全屏均不点亮、或亮屏界面下全屏均点亮不同,电子设备在AOD状态时点亮屏幕的部分区域,从而显示时间、通知消息和指纹图标等内容。
屏下指纹(under display,UD):屏下指纹识别技术是指将手指按压到屏幕指定的指纹采集区域时就会自动触发屏幕底下的指纹识别模组,实现指纹采集和指纹识别。屏下指纹识别技术按照技术原理可以分为光学式、电容式和超声波式。光学式的屏下指纹识别技术的原理是利用光线照射到手指上,并由另一接收处(如指纹识别模组)来侦测光线的反射讯息,进而得到指纹信息。目前,光学式的屏下指纹识别技术大多是通过有机发光二极管(organic light-emitting diode,OLED)等自发光屏自带的光源来采集指纹。电容式的屏下指纹识别技术是利用电荷变化、温度及压力进行扫描来采集指纹。超声波式的屏下指纹识别技术和光学式的类似,只是光线改为超声波。本申请实施例对于实现屏下指纹的技术不作限定,本申请以光学式的屏下指纹识别技术为例进行说明。
协处理器:用于减轻应用处理器(application processor,AP)的处理负担,帮助AP执行部分工作的辅助处理器,协处理器的功耗一般小于AP的功耗。协处理器可以是把中央处理器(central processing unit,CPU)的频率与规格做适当的缩减,并将计数器、内存和显示驱动等相关模块都整合在单一芯片上,形成芯片级的控制单元。例如但不限于通用智能传感集线器(sensorhub),sensorhub的主要功能是连接并处理来自各种传感器的数据,sensorhub的协处理器芯片的功耗仅为应用处理器芯片的功耗的1%-5%。当显示屏在AOD状态下显示指纹图标和高亮指纹采集区域时,控制显示屏显示的处理器可以是协处理器,AP可以休眠,从而降低电子设备的功耗。
集成电路(integrated circuit,IC):显示屏内部用于控制显示屏工作的驱动芯片。IC内部包括线缓冲器(line buffer),line buffer的存储容量较小,利用line buffer存储数据时IC往往需对数据进行压缩后再写入line buffer。其中,IC对数据进行压缩的压缩算法可以根据存储数据的大小和line buffer的存储容量确认,本申请实施例对于压缩数据的算法不作限定。在本申请中,line buffer用于存储指纹图标的图像数据,IC可以在显示屏的工作模式为命令模式(command mode)时,按照第一频率读取line buffer中存储的图像数据,并控制显示屏在AOD状态下显示指纹图标;IC也可以在显示屏的工作模式为视频模式(video mode)时,接收协处理器或AP按照第二频率发送的图像数据,并将该图像数据直接发送到显示面板上显示;其中,第一频率小于第二频率。IC无需额外集成如随机存取存储器(random access memory,RAM)等存储器来支撑显示屏在command mode下显示指纹图标,从而大大降低了显示屏的硬件成本。
本申请实施例中涉及的电子设备可以是手机、平板电脑、桌面型、膝上型、笔记本电脑、超级移动个人计算机(Ultra-mobile Personal Computer,UMPC)、手持计算机、上网本、个人数字助理(Personal Digital Assistant,PDA)、可穿戴电子设备、虚拟现实设备等。
请参见图1,图1示出了电子设备100的结构示意图。
电子设备100可以包括处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,USB)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户标识模块(subscriber identification module,SIM)卡接口195等。其中传感器模块180可以包括压力传感器180A,陀螺仪传感器180B,气压传感器180C,磁传感器180D,加速度传感器180E,距离传感器180F,接近光传感器180G,指纹传感器180H,温度传感器180J,触摸传感器180K,环境光传感器180L,骨传导传感器180M等。
可以理解的是,本申请实施例示意的结构并不构成对电子设备100的具体限定。在本申请另一些实施例中,电子设备100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括AP,协处理器,调制解调处理器,图形处理器(graphics processing unit,GPU),图像信号处理器(image signal processor,ISP),控制器,视频编解码器,数字信号处理器(digitalsignal processor,DSP),基带处理器和/或神经网络处理器(neural-network processingunit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器110中还可以设置存储器,用于存储指令和数据。如协处理器中可以设置用于存储指令和数据的存储器。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从该存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,用户标识模块(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
I2C接口是一种双向同步串行总线,包括一根串行数据线(serial data line,SDA)和一根串行时钟线(derail clock line,SCL)。在一些实施例中,处理器110可以包含多组I2C总线。处理器110可以通过不同的I2C总线接口分别耦合触摸传感器180K,充电器,闪光灯,摄像头193等。例如:处理器110可以通过I2C接口耦合触摸传感器180K,使处理器110与触摸传感器180K通过I2C总线接口通信,实现电子设备100的触摸功能。
I2S接口可以用于音频通信。在一些实施例中,处理器110可以包含多组I2S总线。处理器110可以通过I2S总线与音频模块170耦合,实现处理器110与音频模块170之间的通信。在一些实施例中,音频模块170可以通过I2S接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。
PCM接口也可以用于音频通信,将模拟信号抽样,量化和编码。在一些实施例中,音频模块170与无线通信模块160可以通过PCM总线接口耦合。在一些实施例中,音频模块170也可以通过PCM接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。上述I2S接口和上述PCM接口都可以用于音频通信。
UART接口是一种通用串行数据总线,用于异步通信。该总线可以为双向通信总线。它将要传输的数据在串行通信与并行通信之间转换。在一些实施例中,UART接口通常被用于连接处理器110与无线通信模块160。例如:处理器110通过UART接口与无线通信模块160中的蓝牙模块通信,实现蓝牙功能。在一些实施例中,音频模块170可以通过UART接口向无线通信模块160传递音频信号,实现通过蓝牙耳机播放音乐的功能。
MIPI接口可以被用于连接处理器110与显示屏194,摄像头193等外围器件。MIPI接口包括摄像头串行接口(camera serial interface,CSI),显示屏串行接口(displayserial interface,DSI)等。在一些实施例中,处理器110和摄像头193通过CSI接口通信,实现电子设备100的拍摄功能。处理器110和显示屏194通过DSI接口通信,实现电子设备100的显示功能。
为了方便后续的说明,本申请实施例以处理器110和显示屏194通过MIPI的DSI接口通信为例进行说明。
GPIO接口可以通过软件配置。GPIO接口可以被配置为控制信号,也可被配置为数据信号。在一些实施例中,GPIO接口可以用于连接处理器110与摄像头193,显示屏194,无线通信模块160,音频模块170,传感器模块180等。GPIO接口还可以被配置为I2C接口,I2S接口,UART接口,MIPI接口等。
USB接口130是符合USB标准规范的接口,具体可以是Mini USB接口,Micro USB接口,USB Type C接口等。USB接口130可以用于连接充电器为电子设备100充电,也可以用于电子设备100与外围设备之间传输数据。也可以用于连接耳机,通过耳机播放音频。该接口还可以用于连接其他电子设备,例如AR设备等。
可以理解的是,本申请实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备100的结构限定。在本申请另一些实施例中,电子设备100也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
充电管理模块140用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的实施例中,充电管理模块140可以通过USB接口130接收有线充电器的充电输入。在一些无线充电的实施例中,充电管理模块140可以通过电子设备100的无线充电线圈接收无线充电输入。充电管理模块140为电池142充电的同时,还可以通过电源管理模块141为电子设备供电。
电源管理模块141用于连接电池142,充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入,为处理器110,内部存储器121,显示屏194,摄像头193,和无线通信模块160等供电。电源管理模块141还可以用于监测电池容量,电池循环次数,电池健康状态(漏电,阻抗)等参数。在其他一些实施例中,电源管理模块141也可以设置于处理器110中。在另一些实施例中,电源管理模块141和充电管理模块140也可以设置于同一个器件中。
电子设备100的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块160,调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块150可以提供应用在电子设备100上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(lownoise amplifier,LNA)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给AP。AP通过音频设备(不限于扬声器170A,受话器170B等)输出声音信号,或通过显示屏194显示图像或视频。在一些实施例中,调制解调处理器可以是独立的器件。在另一些实施例中,调制解调处理器可以独立于处理器110,与移动通信模块150或其他功能模块设置在同一个器件中。
无线通信模块160可以提供应用在电子设备100上的包括无线局域网(wirelesslocal area networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),蓝牙(bluetooth,BT),全球导航卫星系统(global navigation satellite system,GNSS),调频(frequency modulation,FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
在一些实施例中,电子设备100的天线1和移动通信模块150耦合,天线2和无线通信模块160耦合,使得电子设备100可以通过无线通信技术与网络以及其他设备通信。上述无线通信技术可以包括全球移动通讯系统(global system for mobile communications,GSM),通用分组无线服务(general packet radio service,GPRS),码分多址接入(codedivision multiple access,CDMA),宽带码分多址(wideband code division multipleaccess,WCDMA),时分码分多址(time-division code division multiple access,TD-SCDMA),长期演进(long term evolution,LTE),BT,GNSS,WLAN,NFC,FM,和/或IR技术等。上述GNSS可以包括全球卫星定位系统(global positioning system,GPS),全球导航卫星系统(global navigation satellite system,GLONASS),北斗卫星导航系统(beidounavigation satellite system,BDS),准天顶卫星系统(quasi-zenith satellitesystem,QZSS)和/或星基增强系统(satellite based augmentation systems,SBAS)。
电子设备100通过GPU,显示屏194,以及AP等实现显示功能。GPU为图像处理的微处理器,连接显示屏194和AP。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
在一些实施例中,当电子设备100为AOD状态时,电子设备100可以通过GPU、显示屏194以及协处理器等实现显示功能,AP可以休眠,从而降低电子设备100的功耗,保障了电子设备100的续航能力。其中,协处理器可以新增背光驱动和偏光驱动来支撑显示屏在AOD状态下高亮屏幕的部分区域,实现局部的高亮模式(high brightness mode,HBM)功能;例如支撑显示屏在AOD状态下高亮指纹采集区域以用于采集按压操作对应的指纹数据。
显示屏194用于显示图像,视频等。显示屏194包括显示面板,显示面板可以包括非自发光屏和自发光屏。非自发光屏可以为液晶显示屏(liquid crystal display,LCD)。自发光屏可以为有机发光二极管(organic light-emitting diode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrix organic light emitting diode的,AMOLED),柔性发光二极管(flex light-emitting diode,FLED),Miniled,MicroLed,Micro-oLed,量子点发光二极管(quantum dot light emitting diodes,QLED)等。在一些实施例中,电子设备100可以包括1个或N个显示屏194,N为大于1的正整数。
显示屏194可以包括IC,IC为显示屏194内部用于控制显示屏显示用户界面的驱动芯片,例如,IC可以产生一定的电信号来控制显示面板显示图像数据。IC内部包括存储容量远远小于RAM等存储器的line buffer,line buffer用于存储指纹图标的图像数据。IC可以在显示屏的工作模式为command mode时,读取line buffer中存储的图像数据,并控制显示屏在AOD状态下显示指纹图标;IC也可以在显示屏的工作模式为video mode时,接收协处理器或AP发送的图像数据,并将该图像数据直接发送到显示面板上显示。
电子设备100可以通过ISP,摄像头193,视频编解码器,GPU,显示屏194以及AP等实现拍摄功能。
ISP用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将上述电信号传递给ISP处理,转化为肉眼可见的图像。ISP还可以对图像的噪点,亮度,肤色进行算法优化。ISP还可以对拍摄场景的曝光,色温等参数优化。在一些实施例中,ISP可以设置在摄像头193中。
摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB,YUV等格式的图像信号。在一些实施例中,电子设备100可以包括1个或N个摄像头193,N为大于1的正整数。
数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当电子设备100在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
视频编解码器用于对数字视频压缩或解压缩。电子设备100可以支持一种或多种视频编解码器。这样,电子设备100可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,MPEG)1,MPEG2,MPEG3,MPEG4等。
NPU为神经网络(neural-network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过NPU可以实现电子设备100的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
外部存储器接口120可以用于连接外部存储卡,例如Micro SD卡,实现扩展电子设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
内部存储器121可以用于存储计算机可执行程序代码,上述可执行程序代码包括指令。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储电子设备100使用过程中所创建的数据(比如音频数据,图像数据,电话本等)等。此外,内部存储器121可以包括RAM,还可以包括非易失性存储器(non-volatile memory,NVM),例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,UFS)等。处理器110通过运行存储在内部存储器121的指令,和/或存储在设置于处理器中的存储器的指令,执行电子设备100的各种功能应用以及数据处理。
在一些实施例中,内部存储器121可以包括帧缓冲器(frame buffer)。帧缓冲器是系统为显示设备提供的一个接口,帧缓冲器用于存储需向显示屏194送显的下一帧或下几帧的用户界面对应的图像数据。
电子设备100可以通过音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,以及应用处理器等实现音频功能。例如音乐播放,录音等。
音频模块170用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实施例中,音频模块170可以设置于处理器110中,或将音频模块170的部分功能模块设置于处理器110中。
扬声器170A,也称“喇叭”,用于将音频电信号转换为声音信号。电子设备100可以通过扬声器170A收听音乐,或收听免提通话。
受话器170B,也称“听筒”,用于将音频电信号转换成声音信号。当电子设备100接听电话或语音信息时,可以通过将受话器170B靠近人耳接听语音。
麦克风170C,也称“话筒”,“传声器”,用于将声音信号转换为电信号。当拨打电话或发送语音信息时,用户可以通过人嘴靠近麦克风170C发声,将声音信号输入到麦克风170C。电子设备100可以设置至少一个麦克风170C。在另一些实施例中,电子设备100可以设置两个麦克风170C,除了采集声音信号,还可以实现降噪功能。在另一些实施例中,电子设备100还可以设置三个,四个或更多麦克风170C,实现采集声音信号,降噪,还可以识别声音来源,实现定向录音功能等。
耳机接口170D用于连接有线耳机。耳机接口170D可以是USB接口130,也可以是3.5mm的开放移动电子设备平台(open mobile terminal platform,OMTP)标准接口,美国蜂窝电信工业协会(cellular telecommunications industry association of the USA,CTIA)标准接口。
压力传感器180A用于感受压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器180A可以设置于显示屏194。
压力传感器180A的种类很多,如电阻式压力传感器,电感式压力传感器,电容式压力传感器等。电容式压力传感器可以是包括至少两个具有导电材料的平行板。当有力作用于压力传感器180A,电极之间的电容改变。电子设备100根据电容的变化确定压力的强度。当有触摸操作作用于显示屏194,电子设备100可以根据压力传感器180A检测上述触摸操作强度。电子设备100也可以根据压力传感器180A的检测信号来计算触摸的位置。在一些实施例中,作用于相同触摸位置,但不同触摸操作强度的触摸操作,可以对应不同的操作指令。例如但不限于,当有压力值小于第一压力阈值的触摸操作作用于短消息应用图标时,执行查看短消息的指令。当有压力值大于或等于第一压力阈值的触摸操作作用于短消息应用图标时,执行新建短消息的指令。
陀螺仪传感器180B可以用于确定电子设备100的运动姿态。在一些实施例中,可以通过陀螺仪传感器180B确定电子设备100围绕三个轴(即,x,y和z轴)的角速度。陀螺仪传感器180B可以用于拍摄防抖。示例性的,当按下快门,陀螺仪传感器180B检测电子设备100抖动的角度,根据角度计算出镜头模组需要补偿的距离,让镜头通过反向运动抵消电子设备100的抖动,实现防抖。陀螺仪传感器180B还可以用于导航,体感游戏场景。
气压传感器180C用于测量气压。在一些实施例中,电子设备100通过气压传感器180C测得的气压值计算海拔高度,辅助定位和导航。
磁传感器180D包括霍尔传感器。电子设备100可以利用磁传感器180D检测翻盖皮套的开合。在一些实施例中,当电子设备100是翻盖机时,电子设备100可以根据磁传感器180D检测翻盖的开合。进而根据检测到的皮套的开合状态或翻盖的开合状态,设置翻盖自动解锁等特性。
加速度传感器180E可检测电子设备100在各个方向上(一般为三轴)加速度的大小。当电子设备100静止时可检测出重力的大小及方向。还可以用于识别电子设备姿态,应用于横竖屏切换,计步器等应用。
距离传感器180F,用于测量距离。电子设备100可以通过红外或激光测量距离。在一些实施例中,拍摄场景,电子设备100可以利用距离传感器180F测距以实现快速对焦。
接近光传感器180G可以包括例如发光二极管(LED)和光检测器,例如光电二极管。发光二极管可以是红外发光二极管。电子设备100通过发光二极管向外发射红外光。电子设备100使用光电二极管检测来自附近物体的红外反射光。当检测到充分的反射光时,可以确定电子设备100附近有物体。当检测到不充分的反射光时,电子设备100可以确定电子设备100附近没有物体。电子设备100可以利用接近光传感器180G检测用户手持电子设备100贴近耳朵通话,以便自动熄灭屏幕达到省电的目的。接近光传感器180G也可用于皮套模式,口袋模式自动解锁与锁屏。
环境光传感器180L用于感知环境光亮度。电子设备100可以根据感知的环境光亮度自适应调节显示屏194亮度。环境光传感器180L也可用于拍照时自动调节白平衡。环境光传感器180L还可以与接近光传感器180G配合,检测电子设备100是否在口袋里,以防误触。
指纹传感器180H用于采集指纹。电子设备100可以利用采集的指纹特性实现指纹解锁,访问应用锁,指纹拍照,指纹接听来电等。
温度传感器180J用于检测温度。在一些实施例中,电子设备100利用温度传感器180J检测的温度,执行温度处理策略。例如,当温度传感器180J上报的温度超过阈值,电子设备100执行降低位于温度传感器180J附近的处理器的性能,以便降低功耗实施热保护。在另一些实施例中,当温度低于另一阈值时,电子设备100对电池142加热,以避免低温导致电子设备100异常关机。在其他一些实施例中,当温度低于又一阈值时,电子设备100对电池142的输出电压执行升压,以避免低温导致的异常关机。
触摸传感器180K,也称“触控器件”。触摸传感器180K可以设置于显示屏194中,由触摸传感器180K与显示屏194组成触摸屏,也称“触控屏”。触摸传感器180K用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器等处理器,以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器180K也可以设置于电子设备100的表面,与显示屏194所处的位置不同。
骨传导传感器180M可以获取振动信号。在一些实施例中,骨传导传感器180M可以获取人体声部振动骨块的振动信号。骨传导传感器180M也可以接触人体脉搏,接收血压跳动信号。在一些实施例中,骨传导传感器180M也可以设置于耳机中,结合成骨传导耳机。音频模块170可以基于上述骨传导传感器180M获取的声部振动骨块的振动信号,解析出语音信号,实现语音功能。应用处理器可以基于上述骨传导传感器180M获取的血压跳动信号解析心率信息,实现心率检测功能。
按键190包括开机键,音量键等。按键190可以是机械按键。也可以是触摸式按键。电子设备100可以接收按键输入,产生与电子设备100的用户设置以及功能控制有关的键信号输入。
马达191可以产生振动提示。马达191可以用于来电振动提示,也可以用于触摸振动反馈。例如,作用于不同应用(例如拍照,音频播放等)的触摸操作,可以对应不同的振动反馈效果。作用于显示屏194不同区域的触摸操作,马达191也可对应不同的振动反馈效果。不同的应用场景(例如:时间提醒,接收信息,闹钟,游戏等)也可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。
指示器192可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。
SIM卡接口195用于连接SIM卡。SIM卡可以通过插入SIM卡接口195,或从SIM卡接口195拔出,实现和电子设备100的接触和分离。电子设备100可以支持1个或N个SIM卡接口,N为大于1的正整数。SIM卡接口195可以支持Nano SIM卡,Micro SIM卡,SIM卡等。同一个SIM卡接口195可以同时插入多张卡。上述多张卡的类型可以相同,也可以不同。SIM卡接口195也可以兼容不同类型的SIM卡。SIM卡接口195也可以兼容外部存储卡。电子设备100通过SIM卡和网络交互,实现通话以及数据通信等功能。在一些实施例中,电子设备100采用eSIM,即:嵌入式SIM卡。eSIM卡可以嵌在电子设备100中,不能和电子设备100分离。
下面结合显示屏194从显示黑屏界面切换为在AOD状态下显示指纹图标的过程,示例性说明电子设备100的工作流程。
显示屏194当前为黑屏下电状态,若加速度传感器180E检测到预设的悬浮操作,可以发送硬件中断给协处理器。响应于该硬件中断,协处理器向显示屏194发送指令以此初始化显示屏194的工作模式为command mode,以及向IC中的line buffer发送指纹图标的图像数据以使line buffer存储该图像数据。IC读取line buffer中存储的图像数据并控制显示屏194的显示面板在AOD状态下显示指纹图标。
电子设备100的软件系统可以采用分层架构,事件驱动架构,微核架构,微服务架构,或云架构。本申请实施例以分层架构的Android系统为例,示例性说明电子设备100的软件结构。
图2是本申请实施例的电子设备100的软件结构框图。
分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将Android系统分为四层,从上至下分别为应用程序层,应用程序框架层,安卓运行时(Android runtime)和系统库,以及内核层。
应用程序层可以包括一系列应用程序包。
如图2所示,应用程序包可以包括指纹应用,息屏显示、休眠/唤醒、人脸解锁、相机、图库、短信息、蓝牙和导航等应用程序。例如但不限于,可以通过指纹应用录入指纹数据,后续指纹解锁时可以将采集的指纹数据和录入的指纹数据进行对比匹配,在二者的匹配度大于第一匹配阈值的情况下,指纹验证通过。也可以通过息屏显示的应用程序开启或关闭息屏显示的功能。
应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。
如图2所示,应用程序框架层可以包括传感器管理器、窗口管理器、内容提供器、视图系统、电话管理器、资源管理器和通知管理器等。
传感器管理器用于管理各个传感器。例如但不限于,传感器管理器可以接收触摸传感器180K或压力传感器180A发送的中断事件,从而控制指纹传感器180H采集指纹数据。其中,各个传感器可以为上述图1的传感器模块180包括的部分或所有模块。
窗口管理器用于管理窗口程序。窗口管理器可以但不限于获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕等。
内容提供器用来存放和获取数据,并使该数据可以被应用程序访问。其中,该数据可以包括但不限于视频,图像,音频,拨打和接听的电话,浏览历史和书签,电话簿等。
视图系统可以包括可视控件,例如显示文字的控件,显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如但不限于,包括指纹图标的显示界面,包括短信通知图标的显示界面,包括显示文字的视图以及显示图片的视图。
电话管理器用于提供电子设备100的通信功能。例如但不限于通话状态的管理(包括接通,挂断等)。
资源管理器为应用程序提供各种资源,例如但不限于本地化字符串,图标,图片,布局文件,视频文件等等。
通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。例如通知管理器被用于告知下载完成,消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知,例如后台运行的应用程序的通知,还可以是以对话窗口形式出现在屏幕上的通知。例如但不限于,在状态栏提示文本信息,发出提示音,电子设备振动,指示灯闪烁等。不限于此。
Android Runtime包括核心库和虚拟机。Android runtime负责安卓系统的调度和管理。
核心库包含两部分:一部分是java语言需要调用的功能函数,另一部分是安卓的核心库。
应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理,堆栈管理,线程管理,安全和异常的管理,以及垃圾回收等功能。
系统库可以包括多个功能模块。例如但不限于,表面管理器(surface manager)、媒体库(Media Libraries)、三维(3D)图形处理库(例如OpenGL ES)以及二维(2D)图形引擎(例如SGL)等。
表面管理器用于对显示子系统(display subsystem,DSS)进行管理,并且为多个应用程序提供了2D和3D图层的融合。
媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:MPEG4,H.264,MP3,AAC,AMR,JPG,PNG等。
三维图形处理库用于实现三维图形绘图,图像渲染,合成,和图层处理等。
二维图形引擎是二维绘图的绘图引擎。
内核层是硬件和软件之间的层。内核层可以包含显示驱动、摄像头驱动、音频驱动、电源管理和传感器驱动等。
在一些实施例中,Android系统还可以包括硬件抽象层(hardware abstractionlayer,HAL),HAL是位于内核层和系统库(和Android Runtime)之间的接口层。HAL是对内核层的驱动程序的封装,将硬件抽象化,屏蔽底层的实现细节。HAL层可以包含传感器接口、蓝牙接口、相机接口等。
下面结合屏下指纹解锁的过程,示例性说明电子设备100软件以及硬件的工作流程。
以显示屏194当前为在AOD状态下显示指纹图标,此时工作模式为command mode为例进行说明。若触摸传感器180K和压力传感器180A检测到按压操作,可以发送相应的硬件中断给内核层。内核层将该按压操作加工成原始输入事件(包括按压坐标,按压操作的时间戳等信息),原始输入事件被存储在内核层。
一方面,协处理器从AP侧的内核层获取原始输入事件,并根据该输入事件调用协处理器侧的显示驱动,以此控制显示屏194将工作模式从command mode切换为video mode,并控制显示屏194高亮指纹采集区域和显示指纹解锁的动画效果。
另一方面,协处理器从AP侧的内核层获取原始输入事件,并根据该输入事件调用协处理器侧的传感器驱动,从而控制指纹传感器180H采集上述按压操作对应的指纹数据。协处理器将采集的指纹数据发送给AP,AP被唤醒,应用程序框架层的指纹接口可以对该指纹数据进行验证。在指纹验证成功或失败的情况下,由AP侧的休眠/唤醒应用调用系统库中的表面管理器,进而调用内核层启动显示驱动,以此控制显示屏194显示指纹解锁成功后或指纹解锁失败后的亮屏界面。
如图1所述,处理器110和显示屏194可以通过MIPI的DSI接口通信,以此实现电子设备100的显示功能。接下来,基于图1和图2提供的电子设备的示意图,介绍DSI接口兼容的外部设备显示屏194支持的两种工作模式:command mode和video mode。
请参见图3A和图3B,图3A是command mode的架构示意图,图3B是video mode的架构示意图。
如图3A和图3B所示,command mode和video mode的架构示意图均包括处理器110和显示屏194。处理器110可以包括总线接口(即DSI接口);显示屏194可以包括总线接口(即DSI接口)、IC和显示面板。其中,处理器110和显示屏194可以通过各自的总线接口传输图像数据。处理器110、显示屏194、IC和显示面板的描述可见上述图1的描述,此处不予赘述。
如图3A所示,可以通过IC中包括的line buffer来支撑command mode下显示屏的正常显示。在command mode下,处理器110无需持续刷新显示屏194的显示内容,可以按照一定的时间间隔通过总线接口将图像数据发送给显示屏194,或者根据显示屏194反馈的信息确定什么时候通过总线接口向显示屏194发送下一帧或下几帧的用户界面的图像数据。显示屏194通过总线接口接收处理器110的总线接口发送的图像数据,显示屏194可以通过IC自行刷新显示内容,即IC可以对处理器110发送的图像数据进行压缩后存储到line buffer中,并按照预设的第一频率(如每隔一分钟)读取line buffer中的图像数据,并将下一帧的用户界面的图像数据发送给显示面板上和控制显示面板显示对应的用户界面。
如图3B所示,在video mode下,处理器110时序控制通过总线接口向显示屏194发送图像数据的频率,即处理器110按照预设的第二频率(如每帧)通过总线接口向显示屏194发送下一帧的用户界面的图像数据。显示屏194通过总线接口接收处理器110的总线接口发送的图像数据,IC将该图像数据直接发送到显示面板上,并控制显示面板显示对应的用户界面。也就是说,在video mode下,处理器110需持续控制显示屏194刷新显示内容,因此无需IC中包括的line buffer来支撑显示。其中,图像数据为显示屏194需显示的像素数据,例如但不限于是RGB数据。
在一些实施例中,处理器110还可以向显示屏194发送用于控制图像数据显示的电信号,控制信号可以包括但不限于图像数据的显示顺序,刷新显示内容的帧率,像素点的位置、亮度、颜色等。
具体地,显示屏的工作模式还可以被划分为自适应低功耗模式(adaptive lowpower mode,ALPM)和正常模式(normal mode)。ALPM模式和上述command mode对应,当显示屏处于ALPM模式时,显示屏以command mode工作,即处理器可以间歇被唤醒以此向显示屏发送下一次或下几次需显示的图像数据和/或控制信号。normal mode和上述video mode对应,当显示屏处于normal mode时,显示屏以video mode工作,处理器每帧向显示屏发送下一帧的用户界面的图像数据来持续刷新显示屏的显示内容。显示屏的工作模式为ALPM模式时电子设备的功耗小于显示屏的工作模式为normal mode模式时电子设备的功耗。
具体地,上述video mode和command mode均属于上述图1所述的MIPI的DSI接口的协议层的概念。MIPI的DSI接口还需关注物理层,物理层包括D-PHY、M-PHY和C-PHY三种协议标准,目前常用的还是D-PHY标准,本申请实施例以D-PHY为例进行描述。D-PHY标准的物理层支持高速(high speed,HS)和低速(low power,LP)两种传输模式。HS模式下传输速率较高,传输的信号幅值较大,功耗较高;LP模式下传输速率较低,传输的信号幅值较小,功耗较低。
在协议层的工作模式为video mode时,物理层的传输模式只能为HS模式,因此video mode下,传输速率高,功耗较高。在协议层的工作模式为command mode时,物理层的传输模式可以为HS模式或LP模式,但一般为LP模式,因此command mode下,传输速率较低,功耗较低。本申请实施例以工作模式为command mode时,传输模式为LP模式为例进行说明。
接下来介绍支持屏下指纹技术的电子设备的正视图和侧视图,如图4A和图4B所示。其中,图4A示出了电子设备100的正视图,图4A示出了电子设备100的侧视图。屏下指纹解锁方式为光学式的屏下指纹解锁方式,显示屏194的显示面板为图1所述的LCD屏。
如图4A和图4B所示,图4B为图4A所示的电子设备100沿A-A’的部分剖面结构示意图。图4B左侧对应图4A所示的电子设备100的顶端,图4B右侧对应图4A所示的电子设备100的底端。电子设备100可以包括透明盖板410、液晶显示屏420、背光模组430、光源组件440和指纹识别模组450。
如图4A和图4B所示,透明盖板410可以位于液晶显示屏420的上层并覆盖在电子设备100的正面。透明盖板410可以为用户提供控制电子设备100的操作界面或触摸界面。例如但不限于,可以通过对透明盖板410的点击、滑动等操作来控制电子设备100。其中,透明盖板410可以但不限于是玻璃盖板或蓝宝石盖板。
如图4A和图4B所示,液晶显示屏420可以位于透明盖板410的下方和背光模组430的上方,用于显示图像或视频。指纹采集区域421位于液晶显示屏420的显示区域之中。其中,图4A示出的指纹采集区域421的数量仅作为示例。本申请实施例对于指纹采集区域421的数量不作限定,且对指纹采集区域421在液晶显示屏420中的具体位置也不作限定。电子设备100全部的指纹采集区域421的区域大小之和小于或等于液晶显示屏420的区域大小。
可以理解地,本申请中的针对液晶显示屏420的点击、滑动、触摸、按压等操作实际是指对透明盖板410或对覆盖在透明盖板410的保护层表面的点击、滑动、触摸、按压等操作。
如图4B所示,背光模组430可以位于液晶显示屏420的下方,为液晶显示屏420提供光源,以便液晶显示屏420透过表面的透明盖板410向用户显示图像。
如图4B所示,光源组件440可以位于背光模组430的下方和指纹识别模组450的上方。光源组件440可以包括多个作为独立光源的发光二极管(light emitting diode,LED),用于发光并照射触摸在透明盖板410表面的手指,以此产生反射光。指纹识别模组450用于接收该反射光,并根据该反射光对上述手指进行指纹识别。其中,指纹识别模组450可以包括图1所示的指纹传感器180H。
可以理解地,为了让指纹识别模组450采集到上述反射光,图4B所示的电子设备100对背光模组430进行开孔处理。不限于上述情况,在具体实现中,背光模组430还可以和光源组件440位于同一平面且互不相交。例如但不限于,背光模组430和光源组件440均位于液晶显示屏420的下方,背光模组430的顶端与液晶显示屏420的顶端对齐,底端与液晶显示屏420的中端对齐。液晶显示屏420的中端和底端之间且与背光模组430平行的位置用于放置光源组件440。指纹识别模组450可以位于光源组件440的下方。或者背光模组430的材料为特殊材料,该特殊材料能够透过上述反射光,以便指纹识别模组450能够采集到上述反射光。本申请实施例对此不作限定。
可以理解地,指纹采集区域421的位置可以不与光源组件440和/或指纹识别模组450的位置一一对应,所占区域面积也可以不同。如指纹采集区域421的面积可以大于指纹识别模组450的面积。例如但不限于,可以通过透镜成像的光路设计、反射式折叠光路设计或其他光路设计等方法调整指纹采集区域421、光源组件440和/或指纹识别模组450的数量、面积和位置关系。本申请实施例对此不作限定。
在一些实施例中,电子设备100还可以包括滤光片460。如图4B所示,滤光片460可以位于液晶显示屏420的下方和背光模组430的上方。滤光片460可以包括但不限于可透红外光的棱镜片、可透红外光的扩散片、可透红外光的反射片和其他偏光片等。本申请实施例对滤光片的种类不作限定。滤光片460可以对手指的反射光线进行滤波和降噪,从而提高指纹图像采集的准确性。
在一些实施例中,电子设备100还可以包括光学透镜470。如图4B所示,光学透镜470可以位于指纹识别模组450的上方,用于将手指的反射光线汇聚起来,以此为指纹识别模组450提供更为全面的手指的反射光,提高指纹识别的准确性。
不限于上述列举的电子设备的示意图,在具体实现中,光源组件440还可以包括更多的LED灯,LED灯还可以位于电子设备100的底部,并位于液晶显示屏420的下方。本申请实施例对于上述各组件的位置、面积和数量均不作限定,合理即可。
示例性地,用户可以将手指按压在指纹采集区域421上,光源组件440提供光线照射在该手指上。手指反射的光线可以经滤光片460滤波和降噪,并由光学透镜470汇聚后反射到指纹识别模组450上。由指纹识别模组450采集指纹图像并进行指纹识别。
可以理解地,LCD屏相比OLED等自发光屏而言,成本较低,自然形成的画面效果对于用户眼睛伤害较小,闪屏情况较轻。但LCD屏本身是通过由大量LED灯组成的背光层发光的,背光层中的LED灯提供的光源无法穿透背光层,从而无法形成有效的光学回路将指纹图像反射到指纹识别模组上,供指纹识别模组采集指纹。本申请中通过独立设置的光源组件440为采集指纹数据提供光源,解决了OLED等屏幕利用蒙版等软件方案实现局部高亮而出现的闪屏问题,降低显示屏的硬件成本。
不限于上述列举的电子设备的示意图,在具体实现中,也可以采用其他能够降低成本的屏幕结构来实现屏下指纹显示方法,本申请实施例对此不作限定。
接下来介绍本申请实施例涉及的应用场景以及应用场景下的用户界面实施例。
请参见图5,图5示例性示出了一种切换AOD显示指纹图标前后的用户界面的对比图。左图为切换为AOD显示指纹图标前的用户界面,右图为切换为AOD显示指纹图标后的用户界面。
具体地,当显示屏处于图5的左图所示的黑屏状态时,显示屏下电,IC中的linebuffer中没有数据。在满足第一预设条件的情况下,显示屏上电,并且IC在协处理器的控制下初始化工作模式为command mode和将协处理器发送的指纹图标的图像数据压缩后写入line buffer中。其中,第一预设条件可以但不限于是接收作用于显示屏194的操作、接收作用于电子设备的按键190的操作、检测到预设的悬浮操作、检测到预设的摇一摇操作等。
如图5的右图所示,用户界面50为显示屏在AOD状态下显示指纹图标的界面,用户界面50在屏幕的部分区域长亮以此显示指纹图标501,其他区域保持黑屏。显示屏在command mode下通过IC的自刷新功能显示用户界面50,此时,AP可以休眠,由协处理器控制显示屏显示,从而降低了电子设备的功耗。其中,指纹图标501的位置可以在上述图4A的指纹采集区域421内。
需要说明的是,AOD状态下,若出现接收来电、短信等需要AP工作的情况,AP会被唤醒。
请参见图6,图6示例性示出了一种高亮指纹采集区域前后的用户界面的对比图。左图为指纹采集区域高亮前的用户界面,右图为指纹采集区域高亮后的用户界面。
具体地,在显示屏显示图6的左图所示的用户界面50(即上述图5的右图)时,若接收作用于指纹图标501的按压操作,协处理器控制显示屏的工作模式从command mode切换为video mode,并控制显示屏显示图6的右图所示的用户界面60,即协处理器可以通过背光驱动和/或偏光驱动控制用户界面60中指纹采集区域601高亮。
如图6的右图所示,显示屏显示用户界面60中的指纹采集区域601时可以显示指纹图标501,也可以不显示指纹图标501;显示用户界面60中的指纹采集区域601时还可以显示水波纹等指纹解锁的动画效果,本申请实施例对指纹采集区域601的具体显示样式不作限定。
不限于上述列举的用户界面50和用户界面60,在具体实现中,用户界面50和用户界面60还可以包括系统时间和/或微信消息、QQ消息等通知消息。本申请实施例对此不作限定。
在一些实施例中,显示屏为成本较低的LCD屏,用于为用户界面60的指纹采集区域601提供高亮光源的可以为上述图4B所示的光源组件440。也就是说,可以通过在LCD屏中设置独立光源实现HBM功能来替代OLED屏中自身光源实现的HBM功能,在降低成本的同时也保障了功能的正常实现,有利于提升产品的竞争力。
具体地,当接收作用于指纹图标501的按压操作时,显示屏显示的用户界面可以从用户界面50切换为用户界面60,并且在显示屏显示用户界面60时,电子设备可以采集并验证上述按压操作对应的指纹数据,以此通过屏下指纹解锁的方式来解锁电子设备100。在指纹数据验证成功的情况下,电子设备可以显示桌面、应用程序的界面等亮屏界面,如下图7所示。在指纹数据验证失败的情况下,电子设备可以显示锁屏状态的亮屏界面,提示无法识别指纹,如下图8所示。
请参见图7,图7示例性示出了一种指纹数据验证成功前后的用户界面的对比图。左图为指纹数据验证成功前的用户界面,右图为指纹数据验证成功后的用户界面。
具体地,当显示屏显示图7的左图所示的用户界面60(即上述图6的右图)时,显示屏高亮指纹采集区域601以用于为采集指纹数据提供光源;协处理器采集对应的指纹数据,并将该指纹数据发送给AP,AP被唤醒以此对该指纹数据进行验证,在该指纹数据验证成功的情况下,AP控制显示屏显示图7的右图所示的电子设备桌面的亮屏界面70。
请参见图8,图8示例性示出了一种指纹数据验证失败前后的用户界面的对比图。左图为指纹数据验证失败前的用户界面,右图为指纹数据验证失败后的用户界面。
具体地,当显示屏显示图8的左图所示的用户界面60(即上述图6的右图)时,显示屏高亮指纹采集区域601以用于为采集指纹数据提供光源;协处理器采集对应的指纹数据,并将该指纹数据发送给AP,AP被唤醒以此对该指纹数据进行验证,在该指纹数据验证失败的情况下,AP控制显示屏显示图8的右图所示的亮屏界面80。
如图8的右图所示,用户界面80为锁屏状态,用户界面80可以包括指纹图标801和提示语801,提示语801的内容为无法识别指纹,从而表示指纹数据的验证结果为验证失败。
不限于用户界面70和用户界面80,在具体实现中,指纹数据验证成功或失败后的亮屏界面也可以为其他亮屏界面,本申请实施例对此不作限定。
在一些实施例中,在满足第二预设条件的情况下,例如指纹数据验证失败后,若协处理器在预设时段内未接收到任意操作,协处理器可以控制显示屏的工作模式从videomode切换为video mode,并且控制显示屏从显示亮屏界面(如用户界面80)切换为在AOD状态下显示指纹图标(如用户界面50)。
接下来介绍本申请实施例提供的屏下指纹显示方法。
请参见图9,图9是本申请实施例提供的一种屏下指纹显示方法,该方法可以由图1、图2、图4A和图4B所示的电子设备实现。该方法可以包括但不限于如下步骤:
S901:在满足第一预设条件的情况下,协处理器向显示屏发送第一指示信息,并将指纹图标的图像数据发送给线缓冲器。
具体地,第一预设条件可以包括但不限于:接收作用于显示屏的操作、接收作用于电子设备的按键的操作、检测到预设的悬浮操作、检测到预设的摇一摇操作等。接收和检测用户操作的可以是上述图1所示的传感器模块180中一个或多个传感器,例如,可以通过陀螺仪传感器180B和加速度传感器180E检测预设的悬浮操作和检测预设的摇一摇操作。
具体地,第一指示信息用于指示显示屏将工作模式设置为command mode。除了发送第一指示信息外,协处理器还可以将指纹图标的图像数据发送给显示屏,以使显示屏将该图像数据存储在IC的line buffer中。其中,line buffer为IC内部的存储装置,存储容量远远小于RAM等常用的存储器。因此,在协处理器将指纹图标的数据发送给显示屏之后,IC可以通过压缩算法对接收的图像数据进行压缩,再将压缩后的图像数据发送到linebuffer中存储起来。
S902:响应于第一指示信息,显示屏将工作模式设置为命令模式,并在息屏显示状态下显示指纹图标。
具体地,显示屏接收协处理器发送的第一指示信息,并根据第一指示信息将工作模式设置为command mode。在command mode下,显示屏的IC按照第一频率(例如仅1次)读取line buffer中存储的指纹图标的图像数据,并控制显示屏在AOD状态下显示该指纹图标;此时显示屏显示的用户界面的示例可参见上述图5的右图所示的用户界面50。并且,在command mode下可以由协处理器控制显示屏显示,AP可以休眠,进一步降低了电子设备的功耗。
具体地,指纹图标用于指示指纹采集区域,例如,上述图5的用户界面50中的指纹图标501在上述图4A所示指纹采集区域421内。
S903:接收按压操作。
具体地,接收作用于指纹图标或指纹采集区域的按压操作的可以是上述图1所示的传感器模块180中一个或多个传感器,例如触摸传感器180K和压力传感器180A。传感器接收按压操作后可以将相应的硬件中断发送给协处理器,由协处理器执行相应的流程。
S904:响应于按压操作,协处理器向显示屏发送第二指示信息。
具体地,协处理器接收检测上述按压操作的传感器发送的硬件中断,并根据该硬件中断向显示屏发送第二指示信息;第二指示信息用于指示显示屏将工作模式设置为video mode,从而实现显示屏的工作模式从command mode到video mode的切换。
S905:响应于第二指示信息,显示屏将工作模式从命令模式切换为视频模式,并高亮指纹采集区域以用于采集按压操作对应的指纹数据。
具体地,显示屏接收协处理器发送的第二指示信息,并根据第二指示信息将工作模式从command mode切换为video mode。在video mode下,协处理器可以按照第二频率(如每帧)向显示屏发送用户界面(如下一帧的用户界面)的图像数据,显示屏的IC接收该图像数据并直接发送到显示屏上显示,从而实现协处理器控制显示屏高亮指纹采集区域的过程。
在一些实施例中,显示屏可以为上述图4A和上述图4B所示的LCD屏幕,而不是成本较高的OLED屏幕,从而进一步降低显示屏的硬件成本。
在video mode下,协处理器可以通过背光驱动和/或偏光驱动控制上述图4B所示的LCD屏下的光源组件440实现局部的HBM功能,使显示屏高亮指纹采集区域以用于后续协处理器采集按压操作对应的指纹数据;此时显示屏显示的用户界面的示例可参见上述图6的右图所示的用户界面60。LCD屏幕可以通过设置的光源组件440实现局部HBM功能,有效解决自发光的OLED屏幕实现局部HBM功能带来的闪屏问题,而且成本更低,有利于产品的生产和利用,提升产品竞争力。
在一些实施例中,在video mode下,显示屏可以在高亮指纹采集区域的同时显示水波纹等指纹解锁的动画效果。
在一种可能的实现方式中,在步骤S905之后,上述屏下指纹显示方法还可以包括:
S906:响应于按压操作,协处理器采集指纹数据,并将指纹数据发送给应用处理器。
具体地,步骤S905和步骤S906可以同时执行,在显示屏高亮指纹采集区域时,协处理器可以控制传感器模块180中的一个或多个传感器(如指纹传感器180H)采集按压操作对应的指纹数据,并将该指纹数据发送给AP验证。其中,为采集指纹数据提供光源的可以为上述图4B所示的光源组件440。
S907:应用处理器对指纹数据进行验证,并根据指纹数据的验证结果控制显示屏显示对应的亮屏界面。
具体地,AP可以被唤醒以此对协处理器发送的指纹数据进行验证,并根据验证结果控制显示屏显示对应的亮屏界面。在指纹数据验证成功的情况下,显示屏可以显示指纹解锁成功后的电子设备桌面、应用界面等亮屏界面,例如上述图7的右图所示的用户界面70;在指纹数据验证失败的情况下,显示屏可以显示指纹解锁失败后的亮屏界面/锁屏界面,例如上述图8的右图所示的用户界面80。
S908:协处理器接收应用处理器发送的验证结果。
具体地,AP还可以将指纹数据的验证结果发送给协处理器,协处理器可以根据接收的验证结果解除对显示屏的控制,由AP控制显示屏显示,实现了控制显示屏的处理器的动态切换。
S909:在满足第二预设条件的情况下,协处理器向显示屏发送第三指示信息。
具体地,第二预设条件可以包括但不限于:接收作用于显示屏的操作、接收作用于电子设备的按键的操作、在预设时段内未接收到任意操作、验证结果为指纹数据验证不通过。第三指示信息用于指示显示屏将工作模式设置为command mode,从而完成从videomode到command mode的切换。
在满足第二预设条件的情况下,AP解除对显示屏的控制,由协处理器控制显示屏显示,实现了控制显示屏的处理器的动态切换。其中,AP解除对显示屏的控制之后AP可以下电休眠,从而降低电子设备的功耗。
在满足第二预设条件的情况下,协处理器可以向显示屏发送第三指示信息,以使显示屏切换工作模式和显示界面。例如但不限于,在AP显示指纹解锁成功后的亮屏界面之后,若接收作用于电子设备的电源键的操作,协处理器可以控制显示屏从显示上述亮屏界面切换为在AOD状态显示指纹图标;在AP显示指纹解锁失败后的亮屏界面/锁屏界面之后,协处理器可以控制显示屏从显示上述亮屏界面/锁屏界面切换为在AOD状态下显示指纹图标。
S910:响应于第三指示信息,显示屏将工作模式从视频模式切换为命令模式,并在息屏显示状态下显示指纹图标。
具体地,显示屏接收协处理器发送的第三指示信息,并根据第三指示信息将工作模式从video mode切换为command mode。在command mode下,显示屏的IC按照第一频率(例如仅1次)读取line buffer中存储的指纹图标的图像数据,并控制显示屏在AOD状态下显示该指纹图标。
可以理解地,上述显示屏切换显示界面和/或切换工作模式的触发条件可以由电子设备100的默认设置确定,也可以由用户的自定义设置确定,本申请实施例对此不作限定。
不限于上述列举的情况,在具体实现中,也可以是在满足第二预设条件的情况下,AP控制显示屏下电,显示屏为黑屏状态。
在本申请实施例中,一方面,通过IC的line buffer存储AOD状态下显示的指纹图标的图像数据,无需额外集成RAM等存储器,大大降低了显示屏的硬件成本。在此基础上,可以通过设置有独立光源的LCD屏代替自发光的OLED屏实现屏下指纹技术,进一步降低显示屏的硬件成本。另一方面,为了保障AOD显示指纹时电子设备的较低功耗和显示屏的正常显示,本申请实施例支持显示屏的工作模式的动态切换,即显示屏在AOD状态下显示指纹图标时采用command mode,高亮指纹采集区域和显示亮屏界面时采用video mode。在此基础上,也支持控制显示屏的处理器的切换,即由功耗较低的协处理器控制显示屏在AOD状态下显示指纹图标和高亮指纹采集区域,由功耗较高但功能较全的AP控制显示屏显示亮屏界面,进一步降低电子设备的功耗,提高电子设备的续航能力,提升产品竞争力。
接下来介绍电子设备100中的各个部件在上述步骤S901-S902的一种协作关系,如图10所示。其中,以第一预设条件为检测到预设的摇一摇操作,检测该触发操作的传感器为加速度传感器180E为例进行说明。
1.显示屏194显示黑屏界面;此时显示屏194为下电状态,IC内部的line buffer中没有数据。
2.加速度传感器180E检测到用户摇一摇电子设备的操作。
3.加速度传感器180E将用户摇一摇电子设备的事件上报至协处理器。
4.协处理器确定用户摇一摇电子设备的事件,向显示屏194发送设置工作模式为command mode的指令。
5.显示屏194的IC响应于协处理器发送的指令,设置工作模式为command mode。
6.协处理器确定用户摇一摇电子设备的事件,向显示屏194发送指纹图标的图像数据。
7.显示屏194的IC对接收的指纹图标的图像数据进行压缩。
8.显示屏194的IC将压缩后的图像数据存储到line buffer中,以便后续在AOD状态下显示指纹图标。
9.显示屏194的IC读取line buffer中存储的指纹图标的图像数据并控制显示面板显示指纹图标。
10.响应于显示屏194的IC的控制,显示屏194的显示面板在AOD状态下显示指纹图标;例如,此时显示屏194显示的用户界面上述图5的右图所示的用户界面50。
不限于上述列举的情况,在具体实现中,也可以无需黑屏界面切换为AOD显示指纹图标的界面的触发操作,黑屏界面可以在经过预设的时段后自动切换为AOD显示指纹图标的界面。
接下来介绍电子设备100中的各个部件在上述步骤S903-S905的一种协作关系,如图11所示。其中,以检测按压操作的传感器为触摸传感器180K为例进行说明。
11.显示屏194在AOD状态下显示指纹图标;此时显示屏194的工作模式为commandmode。
12.触摸传感器180K检测到按压指纹图标的操作。
13.触摸传感器180K将按压指纹图标的事件上报至协处理器。
14.协处理器确定按压指纹图标的事件,向显示屏194发送设置工作模式为videomode的指令。
15.显示屏194的IC响应于协处理器发送的指令,将工作模式从command mode切换为video mode。
16.协处理器按照预设的第二频率(如每帧)向显示屏194发送高亮指纹采集区域和指纹解锁的动画效果的图像数据。
17.显示屏194的IC直接将协处理器发送的图像数据发送到显示屏194的显示面板上显示。
18.显示屏194的显示面板高亮指纹采集区域以用于采集上述按压操作对应的指纹数据和显示指纹解锁的动画效果。
接下来介绍电子设备100中的各个部件在上述步骤S906-S907的一种协作关系,具体如图12所示。其中,以检测按压操作的传感器为触摸传感器180K为例进行说明。
12.触摸传感器180K检测按压指纹图标的操作。
13.触摸传感器180K将按压指纹图标的事件上报至协处理器。
19.显示屏194的显示面板高亮指纹采集区域以用于采集上述按压操作对应的指纹数据和显示指纹解锁的动画效果;此时显示屏194的工作模式为video mode。
20.协处理器确定按压指纹图标的事件,采集上述按压操作对应的指纹数据;例如,协处理器控制指纹传感器180H采集上述按压操作对应的指纹数据。
21.协处理器向AP发送采集的指纹数据。
22.AP验证协处理器发送的指纹数据。
23.AP根据指纹数据的验证结果按照预设的第二频率(如每帧)向显示屏194发送与验证结果对应的亮屏界面的图像数据;例如,验证结果为指纹数据验证成功时,AP向显示屏194发送指纹解锁成功后的亮屏界面(如上述图所示的用户界面70)的图像数据;验证结果为指纹数据验证失败,AP向显示屏194发送指纹解锁失败后的亮屏界面(如上述图8所示的用户界面80)的图像数据。
24.显示屏194根据AP发送的图像数据显示对应的亮屏界面。
其中,上述图11中的14-18和图12中的20-22可以是同时执行的,即显示屏194高亮指纹采集区域和显示指纹解锁的动画效果时,电子设备也可以采集并验证按压操作的指纹数据。
接下来介绍电子设备100中的各个部件在上述步骤S908-S910的一种协作关系,具体如图13所示。其中,以第二预设条件为在预设时段内未接收到任意操作为例进行说明。
25.显示屏194显示指纹解锁失败后的亮屏界面/锁屏界面;此时显示屏194的工作模式为video mode。
26.AP向协处理器发送指纹数据的验证结果。
27.协处理器在预设时段内未接收到传感器180上报的任意操作对应的事件。
28.协处理器确定在预设时段内未接收到任意操作的事件,向显示屏194发送设置工作模式为command mode的指令。
29.显示屏194的IC将工作模式从video mode切换为command mode。
30.显示屏194的IC读取IC的line buffer中存储的指纹图标的图像数据,并控制显示屏194的显示面板显示指纹图标。
31.响应于显示屏194的IC的控制,显示屏194的显示面板在AOD状态下显示指纹图标。
其中,上述26和上述图12中的23-24的顺序不作限定。
上述图10-图13中用于检测用户操作的传感器仅为示例,例如,也可以是压力传感器180A和触摸传感器180K协作检测按压操作,本申请实施例对此不作限定。
本申请实施例还提供一种芯片系统,上述芯片系统包括至少一个处理器,存储器和接口电路,上述存储器、上述收发器和上述至少一个处理器通过线路互联,上述至少一个存储器中存储有计算机程序;上述计算机程序被上述处理器执行时,图9-图13所示的方法流程得以实现。
本申请实施例还提供了一种计算机可读存储介质。上述方法实施例中的全部或者部分流程可以由计算机程序来指令相关的硬件完成,该程序可存储于上述计算机存储介质中,该程序在执行时,可包括如上述各方法实施例的流程。该计算机可读存储介质包括:只读存储器(read-only memory,ROM)或随机存取存储器RAM、磁碟或者光盘等各种可存储程序代码的介质。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本申请实施例所示的流程或功能。计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。计算机指令可以存储在计算机可读存储介质中,或者通过计算机可读存储介质进行传输。计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如,固态硬盘(solid state disk,SSD))等。
本申请实施例方法中的步骤可以根据实际需要进行顺序调整、合并和删减。
本申请实施例装置中的模块可以根据实际需要进行合并、划分和删减。
以上所述,以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。

Claims (15)

1.一种屏下指纹显示方法,其特征在于,应用于电子设备,所述电子设备包括协处理器和显示屏,所述显示屏包括线缓冲器;所述方法包括:
在满足第一预设条件的情况下,所述协处理器向所述显示屏发送第一指示信息,并将指纹图标的图像数据发送给所述线缓冲器;
响应于所述第一指示信息,所述显示屏将所述显示屏的工作模式设置为命令模式,并在息屏显示状态下显示所述指纹图标;所述指纹图标用于指示指纹采集区域;
接收按压操作;
响应于所述按压操作,所述协处理器向所述显示屏发送第二指示信息;
响应于所述第二指示信息,所述显示屏将所述显示屏的工作模式从所述命令模式切换为视频模式,并高亮所述指纹采集区域以用于采集所述按压操作对应的指纹数据。
2.如权利要求1所述的方法,其特征在于,所述电子设备还包括应用处理器;所述接收按压操作之后,所述方法还包括:
响应于所述按压操作,所述协处理器采集所述指纹数据,并将所述指纹数据发送给所述应用处理器;
所述应用处理器对所述指纹数据进行验证,并根据所述指纹数据的验证结果控制所述显示屏显示对应的亮屏界面。
3.如权利要求2所述的方法,其特征在于,所述应用处理器对所述指纹数据进行验证,并根据所述指纹数据的验证结果控制所述显示屏显示对应的亮屏界面之后,所述方法还包括:
所述协处理器接收所述应用处理器发送的所述验证结果;
在满足第二预设条件的情况下,所述协处理器向所述显示屏发送第三指示信息;所述第二预设条件包括以下任意一项:接收作用于所述显示屏的第一操作、接收作用于所述电子设备的按键的第二操作、在预设时段内未接收到任意操作、所述验证结果为所述指纹数据验证不通过;
响应于所述第三指示信息,所述显示屏将所述显示屏的工作模式从所述视频模式切换为所述命令模式,并在所述息屏显示状态下显示所述指纹图标。
4.如权利要求1-3任一项所述的方法,其特征在于,所述协处理器向所述显示屏发送第一指示信息,并将指纹图标的图像数据发送给所述线缓冲器,包括:
所述协处理器向所述显示屏发送第一指示信息,并将所述指纹图标的图像数据发送给所述显示屏;
所述显示屏对所述指纹图标的图像数据进行压缩,并将压缩后的图像数据存储在所述线缓冲器中。
5.如权利要求1-3任一项所述的方法,其特征在于,所述第一预设条件包括以下任意一项:接收作用于所述显示屏的第三操作、接收作用于所述电子设备的按键的第四操作、检测到预设的悬浮操作、检测到预设的摇一摇操作。
6.一种电子设备,其特征在于,包括:协处理器、显示屏和传感器,所述显示屏包括线缓冲器;
所述协处理器,用于在满足第一预设条件的情况下,向所述显示屏发送第一指示信息,并将指纹图标的图像数据发送给所述线缓冲器;
所述显示屏,用于响应于所述第一指示信息,将所述显示屏的工作模式设置为命令模式,并在息屏显示状态下显示所述指纹图标;所述指纹图标用于指示指纹采集区域;
所述传感器,用于接收按压操作;
所述协处理器,还用于响应于所述按压操作,向所述显示屏发送第二指示信息;
所述显示屏,还用于响应于所述第二指示信息,将所述显示屏的工作模式从所述命令模式切换为视频模式,并高亮所述指纹采集区域以用于采集所述按压操作对应的指纹数据。
7.如权利要求6所述的电子设备,其特征在于,所述电子设备还包括应用处理器;
所述协处理器,还用于响应于所述按压操作,控制所述传感器采集所述指纹数据,并将所述指纹数据发送给所述应用处理器;
所述应用处理器,用于对所述指纹数据进行验证,并根据所述指纹数据的验证结果控制所述显示屏显示对应的亮屏界面。
8.如权利要求7所述的电子设备,其特征在于,所述协处理器,还用于在所述应用处理器对所述指纹数据进行验证,并根据所述指纹数据的验证结果控制所述显示屏显示对应的亮屏界面之后,接收所述应用处理器发送的所述验证结果;
在满足第二预设条件的情况下,向所述显示屏发送第三指示信息;所述第二预设条件包括以下任意一项:接收作用于所述显示屏的第一操作、接收作用于所述电子设备的按键的第二操作、在预设时段内未接收到任意操作、所述验证结果为所述指纹数据验证不通过;
所述显示屏,还用于响应于所述第三指示信息,将所述显示屏的工作模式从所述视频模式切换为所述命令模式,并在所述息屏显示状态下显示所述指纹图标。
9.如权利要求7或8所述的电子设备,其特征在于,所述显示屏还包括集成电路;
所述集成电路,用于在所述显示屏的工作模式为所述命令模式时,按照第一频率读取所述线缓冲器中存储的所述指纹图标的图像数据,并控制所述显示屏在所述息屏显示状态下显示所述指纹图标;
所述集成电路,还用于在所述显示屏的工作模式为所述视频模式时,接收所述应用处理器或所述协处理器按照第二频率发送的图像数据,并控制所述显示屏显示对应的用户界面;所述第一频率小于所述第二频率。
10.如权利要求9所述的电子设备,其特征在于,所述协处理器,具体用于向所述显示屏发送第一指示信息,并将所述指纹图标的图像数据发送给所述集成电路;
所述集成电路,还用于对所述指纹图标的图像数据进行压缩,并将压缩后的图像数据存储在所述线缓冲器中。
11.如权利要求9所述的电子设备,所述显示屏为液晶显示屏,所述集成电路不包含外置存储器。
12.如权利要求11所述的电子设备,其特征在于,所述液晶显示屏包括光源组件,所述光源组件用于所述协处理器采集所述按压操作对应的指纹数据。
13.如权利要求6-8任一项所述的电子设备,其特征在于,所述第一预设条件包括以下任意一项:接收作用于所述显示屏的第三操作、接收作用于所述电子设备的按键的第四操作、检测到预设的悬浮操作、检测到预设的摇一摇操作。
14.一种电子设备,其特征在于,包括:一个或多个处理器、存储器以及显示屏;所述显示屏包含线缓冲器;所述存储器、所述显示屏与所述一个或多个处理器耦合,所述存储器用于存储计算机程序代码,所述计算机程序代码包括计算机指令,所述一个或多个处理器调用所述计算机指令以使所述电子设备执行权利要求1-5任一项所述的方法。
15.一种计算机存储介质,其特征在于,所述计算机存储介质存储有计算机程序,所述计算机程序包括程序指令,所述程序指令被处理器执行时,用于实现权利要求1-5任一项所述的方法。
CN202010134593.6A 2020-02-29 2020-02-29 屏下指纹显示方法及电子设备 Active CN113325941B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202010134593.6A CN113325941B (zh) 2020-02-29 2020-02-29 屏下指纹显示方法及电子设备
PCT/CN2020/123002 WO2021169337A1 (zh) 2020-02-29 2020-10-22 屏下指纹显示方法及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010134593.6A CN113325941B (zh) 2020-02-29 2020-02-29 屏下指纹显示方法及电子设备

Publications (2)

Publication Number Publication Date
CN113325941A CN113325941A (zh) 2021-08-31
CN113325941B true CN113325941B (zh) 2022-07-12

Family

ID=77412971

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010134593.6A Active CN113325941B (zh) 2020-02-29 2020-02-29 屏下指纹显示方法及电子设备

Country Status (2)

Country Link
CN (1) CN113325941B (zh)
WO (1) WO2021169337A1 (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113760092A (zh) * 2021-09-06 2021-12-07 合肥松豪电子科技有限公司 一种应用于低功耗模式下人机交互的检测方法
CN114999421B (zh) * 2021-09-30 2023-03-31 荣耀终端有限公司 屏幕亮度调节方法及电子设备
CN115016628B (zh) * 2021-12-09 2023-06-27 荣耀终端有限公司 一种电子设备的控制方法及电子设备
CN114610220A (zh) * 2022-03-25 2022-06-10 Oppo广东移动通信有限公司 显示控制方法及装置、计算机可读存储介质和电子设备
CN117311484A (zh) * 2022-06-24 2023-12-29 华为技术有限公司 调整设备功耗的方法及电子设备
CN116048196B (zh) * 2022-07-29 2023-10-20 荣耀终端有限公司 开合盖检测方法及相关装置
CN115131835B (zh) * 2022-09-02 2023-01-13 荣耀终端有限公司 指纹识别方法和电子设备
CN116719376B (zh) * 2022-09-26 2024-04-19 荣耀终端有限公司 电压控制方法、装置、设备和存储介质
CN116564227B (zh) * 2023-07-10 2023-09-29 禹创半导体(深圳)有限公司 Oled驱动显示芯片及其存储器控制方法、结构
CN117075789B (zh) * 2023-08-17 2024-03-01 广州文石信息科技有限公司 墨水屏的笔迹显示方法、装置、设备及存储介质

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108090337A (zh) * 2017-12-25 2018-05-29 深圳信炜科技有限公司 电子设备的指纹识别方法
CN108108007A (zh) * 2017-12-21 2018-06-01 维沃移动通信有限公司 一种降低功耗的处理方法及移动终端
CN108229122A (zh) * 2017-12-27 2018-06-29 深圳信炜科技有限公司 电子设备的指纹识别方法
CN108243281A (zh) * 2017-12-27 2018-07-03 深圳信炜科技有限公司 电子设备的指纹识别方法
CN108255369A (zh) * 2018-01-05 2018-07-06 北京小米移动软件有限公司 屏内指纹图标的显示方法、装置及计算机可读存储介质
CN108280446A (zh) * 2018-02-27 2018-07-13 北京小米移动软件有限公司 指纹采集方法、装置及计算机可读存储介质
CN108595935A (zh) * 2018-05-18 2018-09-28 北京小米移动软件有限公司 指纹解锁方法及装置
CN108958454A (zh) * 2018-07-31 2018-12-07 努比亚技术有限公司 终端屏幕节能显示方法、终端及计算机可读存储介质
CN110535989A (zh) * 2018-12-17 2019-12-03 神盾股份有限公司 屏下式指纹识别电子装置及应用于其上的方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11314898B2 (en) * 2017-02-28 2022-04-26 Samsung Electronics Co., Ltd. Operating method of electronic device for function execution based on voice command in locked state and electronic device supporting the same
KR102309296B1 (ko) * 2017-03-17 2021-10-06 엘지전자 주식회사 이동단말기 및 그 제어 방법
CN107132946A (zh) * 2017-04-26 2017-09-05 深圳市万普拉斯科技有限公司 指纹识别提醒方法、装置、存储介质和计算机设备
CN108089690A (zh) * 2017-11-28 2018-05-29 广东欧珀移动通信有限公司 全屏光学指纹识别的终端设备及其应用方法
CN110555333B (zh) * 2018-05-30 2023-06-23 北京小米移动软件有限公司 指纹识别方法、电子设备和存储介质
CN109862191A (zh) * 2019-03-27 2019-06-07 上海菲戈恩微电子科技有限公司 一种低能耗的手机屏下指纹识别方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108108007A (zh) * 2017-12-21 2018-06-01 维沃移动通信有限公司 一种降低功耗的处理方法及移动终端
CN108090337A (zh) * 2017-12-25 2018-05-29 深圳信炜科技有限公司 电子设备的指纹识别方法
CN108229122A (zh) * 2017-12-27 2018-06-29 深圳信炜科技有限公司 电子设备的指纹识别方法
CN108243281A (zh) * 2017-12-27 2018-07-03 深圳信炜科技有限公司 电子设备的指纹识别方法
CN108255369A (zh) * 2018-01-05 2018-07-06 北京小米移动软件有限公司 屏内指纹图标的显示方法、装置及计算机可读存储介质
CN108280446A (zh) * 2018-02-27 2018-07-13 北京小米移动软件有限公司 指纹采集方法、装置及计算机可读存储介质
CN108595935A (zh) * 2018-05-18 2018-09-28 北京小米移动软件有限公司 指纹解锁方法及装置
CN108958454A (zh) * 2018-07-31 2018-12-07 努比亚技术有限公司 终端屏幕节能显示方法、终端及计算机可读存储介质
CN110535989A (zh) * 2018-12-17 2019-12-03 神盾股份有限公司 屏下式指纹识别电子装置及应用于其上的方法

Also Published As

Publication number Publication date
WO2021169337A1 (zh) 2021-09-02
CN113325941A (zh) 2021-08-31

Similar Documents

Publication Publication Date Title
CN113325941B (zh) 屏下指纹显示方法及电子设备
CN114816210B (zh) 一种移动终端的全屏显示方法及设备
CN110114747B (zh) 一种通知处理方法及电子设备
CN113645351B (zh) 应用界面交互方法、电子设备和计算机可读存储介质
CN110543287A (zh) 一种屏幕显示方法及电子设备
CN112751954B (zh) 一种操作提示的方法和电子设备
CN113704205B (zh) 日志存储的方法、芯片、电子设备和可读存储介质
CN113573390B (zh) 天线功率调节方法、终端设备及存储介质
CN112740152A (zh) 手写笔检测方法、系统及相关装置
CN114077365A (zh) 分屏显示方法和电子设备
WO2023056795A1 (zh) 快速拍照方法、电子设备及计算机可读存储介质
CN114089932A (zh) 多屏显示方法、装置、终端设备及存储介质
CN113641271A (zh) 应用窗口的管理方法、终端设备及计算机可读存储介质
WO2022095744A1 (zh) Vr显示控制方法、电子设备及计算机可读存储介质
CN112449101A (zh) 一种拍摄方法及电子设备
US11816494B2 (en) Foreground element display method and electronic device
CN110058729B (zh) 调节触摸检测的灵敏度的方法和电子设备
WO2022242412A1 (zh) 杀应用的方法及相关设备
CN115421619A (zh) 一种窗口显示方法和电子设备
CN114003241A (zh) 应用程序的界面适配显示方法、系统、电子设备和介质
CN116048831B (zh) 一种目标信号处理方法和电子设备
CN115482143B (zh) 应用的图像数据调用方法、系统、电子设备及存储介质
WO2023000746A1 (zh) 增强现实视频的处理方法与电子设备
WO2023124829A1 (zh) 语音协同输入方法、电子设备及计算机可读存储介质
CN114490006A (zh) 任务确定方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant