CN111149103A - 电子设备 - Google Patents

电子设备 Download PDF

Info

Publication number
CN111149103A
CN111149103A CN201780092911.3A CN201780092911A CN111149103A CN 111149103 A CN111149103 A CN 111149103A CN 201780092911 A CN201780092911 A CN 201780092911A CN 111149103 A CN111149103 A CN 111149103A
Authority
CN
China
Prior art keywords
touch
area
electronic device
sensor
fingerprint
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201780092911.3A
Other languages
English (en)
Inventor
尼古拉·当吉-卡耶
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Publication of CN111149103A publication Critical patent/CN111149103A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26—Power supply means, e.g. regulation thereof
    • G06F1/32—Means for saving power
    • G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3234—Power saving characterised by the action undertaken
    • G06F1/325—Power saving in peripheral device
    • G06F1/3262—Power saving in digitizer or tablet
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/044—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means
    • G06F3/0446—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means using a grid-like structure of electrodes in at least two directions, e.g. using row and column electrodes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12—Fingerprints or palmprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12—Fingerprints or palmprints
    • G06V40/1365—Matching; Classification
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/08—Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/0861—Network architectures or network communication protocols for network security for authentication of entities using biometrical features, e.g. fingerprint, retina-scan
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W12/00—Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/06—Authentication
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00—Reducing energy consumption in communication networks
    • Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • Telephone Function (AREA)
  • User Interface Of Digital Computer (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Image Input (AREA)

Abstract

本发明提供了一种具有触敏表面的电子设备。通过使用仅用于所述触敏表面的一个子区域的缩小读出电路，可以实现低功耗的屏内指纹识别解决方案。

Description

电子设备
技术领域
以下发明大体上涉及一种电子设备，更具体地，涉及一种具有指纹识别功能和触摸感应功能的电子设备。
背景技术
指纹感应与匹配是一种个人识别或验证技术，其可靠且广泛地应用于电子设备，例如智能手机、平板电脑(personal computer，PC)、台式PC、便携式多媒体播放器(portable multimedia player，PMP)、MP3(活动图像专家组阶段1或2音频层3(MovingPicture Experts Group phase1or phase 2(MPEG-1or MPEG-2)audio layer-3))播放器或可穿戴设备。
具体而言，指纹识别的常用方法涉及扫描样本指纹或其图像，并存储指纹图像的图像和/或唯一特征。样本指纹的特征可以与数据库中已有的参考指纹信息进行比较以确定人员的正确身份，例如用于验证目的。
指纹传感器对于电子设备(更具体地，例如便携式设备)中的验证和/或认证尤其有利。例如，这种指纹传感器可设于便携式电子设备的外壳上，并且其大小被设为可以感知单个手指的指纹。
例如，如上文所述，当指纹传感器集成到电子设备或主机设备中时，可能需要更快速地执行认证，尤其是在电子设备上执行其它任务或应用程序时。换言之，在某些情况下，可能不希望用户在单独的身份验证步骤中执行身份验证，例如切换任务以执行身份验证。
发明内容
本发明的目的是提供一种包括触敏表面的电子设备。
上述和其它目标通过独立权利要求的主题来实现。其它实施形式在从属权利要求、具体说明和附图中显而易见。
根据第一方面，提供了一种电子设备。所述电子设备包括触敏表面、与所述触敏表面内的第一区域相关联的触摸感应装置以及与所述第一区域内的第二区域相关联的指纹识别装置。所述指纹识别装置包括仅指定给所述第二区域(即，仅覆盖所述第二区域)的读出电路，其中所述第二区域小于所述第一区域。
在这种情况下，只有所述第二区域中的触摸信息(例如子矩阵/像素)将被引导到所述读出电路，以进行指纹识别。因此，可配置缩小的读出电路来处理仅与所述第二区域(即，触摸区域)相关的指纹识别。
可选地，所述触摸感应装置可以是以下任何一种：图2中的触摸传感器203、图9中的多点触摸传感器903、图10中的触摸面板1002；所述第一区域可以是以下任一区域：图4中的“活动区域”405、图5中的“活动区域”500、图8a/8c中的“活动区域”805；所述指纹识别装置可以是以下任何一种：图2中的指纹识别传感器201、图7中的指纹识别处理机制、图9中的高分辨率触摸传感器905、图10中的OPD 1004；所述读出电路可以是以下任何一种：图7中的读出电路703、图12a中的读出电路1205；所述第二区域可以是以下任一区域：图4中提示403的位置、图5中检测到的手指触摸处405的位置、图8a/8c中高分辨率局部扫描处803的位置。
由于采用了专用读出电路，屏内指纹识别解决方案的功耗可小于传统的固定单指纹区域方法，例如采用了后置指纹解决方案的华为P9。
根据所述第一方面，在所述电子设备的第一可能实施形式中，基于所述触摸感应装置的输出来确定所述第二区域。
根据触摸感应装置的输出，例如在哪个位置检测到手指触摸，动态确定要扫描以进行指纹识别的位置(例如放置手指的位置)。这可以丰富需要指纹识别的各种场景的UI设计。可选地，与手指位置检测和指纹识别都需要高分辨率的全屏指纹识别解决方案相比，通过由单独的低分辨率传感器(例如，触摸感应装置)提供手指位置，由单独的高分辨率传感器(例如，指纹识别装置)执行的指纹识别可以显著节能。
根据如上所述第一方面或根据其第一实施形式，在所述电子设备的第二可能实施形式中，所述指纹识别装置包括对应于所述第二区域的扫描电路。
由于显示屏(例如第一区域)内的有限区域(即，第二区域)需扫描，因此对应于所述有限区域的相对较小/缩小的扫描电路可很好地服务于屏内指纹识别。
根据如上所述第一方面或根据其上述任一实施形式，在所述电子设备的第三可能实施形式中，所述电子设备还包括对应于所述第一区域的多个照明器。可选地，基于所述触摸感应装置的输出来激活所述多个照明器中的至少一个照明器，并且所述至少一个照明器位于所述第二区域中或靠近所述第二区域。
这种照明器可有助于更好地识别指纹，例如扫描时手指位置周围的动态照明。它们还可丰富需要指纹识别的各种场景的UI设计。
根据本发明的第二方面，提供了一种用于处理具有触敏表面的电子设备的指纹识别的方法。所述方法包括：触摸感应装置检测到至少一个手指触摸到所述触敏表面，所述触摸感应装置与所述触敏表面内的第一区域相关联；以及作为响应，指纹识别装置仅扫描所述第一区域内的第二区域以对检测到的手指进行指纹识别，其中所述指纹识别装置包括仅指定给所述第二区域的读出电路，并且所述第二区域小于所述第一区域。
在这种情况下，只有所述第二区域中的触摸信息(例如子矩阵/像素)将被引导到所述读出电路，以进行指纹识别。因此，可配置缩小的读出电路来处理仅与所述第二区域(即，触摸区域)相关的指纹识别。
根据本发明的第三方面，提供了一种操作上述电子设备的方法。
根据本发明的第四方面，提供了一种电子设备，以包括用于执行上述方法的相应构件。
根据本发明的第五方面，提供了一种装置。所述装置包括：至少一个处理器；以及至少一个存储器，所述至少一个存储器包括指令，所述指令在由所述至少一个处理器执行时使得所述装置执行上述任一方法。
根据本发明的第六方面，提供了一种计算机程序产品。所述计算机程序产品用于执行上述方法。
根据本发明的第七方面，提供了一种包括软件代码的计算机程序。所述计算机程序用于执行上述方法。
根据本发明的第八方面，提供了一种包括上述计算机程序的计算机可读存储介质。
根据本发明的第九方面，提供了一种计算机可读存储介质，其包括使得上述电子设备执行上述方法的指令。
附图说明
本发明的具体实施方式将结合以下附图进行描述，其中：
图1是根据本发明一实施例的示出网络环境中电子设备的配置的方框图；
图2是根据本发明一实施例的示出电子设备的配置的方框图；
图3是根据本发明一实施例的示出程序模块的配置的方框图；
图4描述了根据本发明一实施例的电子设备；
图5a至图5c是电子设备的各种俯视图，示出了用于在显示屏中操作全面板指纹传感器的选项；
图6a至图6d是电子设备的各种俯视图，示出了操作屏内指纹识别的场景；
图7示出了根据本发明一实施例的指纹识别处理机制；
图8a至图8c示出了根据本发明实施例的各种屏内指纹识别机制；
图9示出了根据本发明一实施例的支持屏内指纹识别的电子设备；
图10示出了根据本发明一实施例的支持屏内指纹识别的电子设备；
图11a至图11d示出了根据本发明实施例的支持屏内指纹识别的电子设备；
图12a至图12d示出了根据本发明实施例的支持屏内指纹识别的电子设备；
图13a至图13d示出了根据本发明实施例的针对读出电路的子矩阵提取；
图14示出了根据本发明实施例的总结状态机模型。
在附图中，相同的附图标记用于相同或至少功能等同的特征。
具体实施方式
以下结合附图进行详细描述，所述附图是描述的一部分，并通过图解说明的方式示出可以实施本发明的具体方面。可以理解的是，在不脱离本发明范围的情况下，可以利用其它方面，并可以做出结构上或逻辑上的改变。因此，以下详细的描述并不当作限定，本发明的范围由所附权利要求书界定。
可以理解的是，与所描述的方法有关的内容对于与用于执行方法对应的设备或系统也同样适用，反之亦然。例如，如果描述了具体方法步骤，则对应的设备可以包括执行所描述的方法步骤或对应功能的单元/模块，即使该单元/模块没有在图中明确描述或图示，反之亦然。此外，本领域技术人员将会理解，本文中所描述的各种示例性方面的特征可相互组合，除非另有特殊说明。
此外，在本发明中，“和/或”一词包括相关所列词语的任何和所有组合。例如，“A和/或B”一词可以包括A，可以包括B，也可同时包括A和B。
图1是根据本发明一实施例的示出电子设备的配置的方框图。
参考图1，网络环境100可以包括电子设备101、其它电子设备102和104和/或服务器106。电子设备101可以包括总线110、处理器120、存储器130、用户输入和输出接口/模块150、显示模块160、通信接口/模块170和其它类似和/或合适的组件。
总线110可以是将上述元件互连并协助上述元件之间的通信(例如，传送控制消息)的电路。处理器120可通过总线110接收来自上述其它元件(例如存储器130、用户输入和输出接口/模块150、显示模块160、通信接口/模块170等)的命令，解析接收到的命令，并且根据所解析的命令执行计算或数据处理。存储器130可存储从处理器120或其它元件(例如，用户输入和输出接口/模块150、显示模块160、通信接口/模块170等)接收的命令或数据，或由处理器120或这些其它元件生成的命令或数据。
存储器130可以包括编程模块，例如内核131、中间件132、应用程序编程接口(application programming interface，API)133、至少一个应用程序134等。上述每个编程模块可在软件、固件、硬件中或其中两者或两者以上的组合中实现。
内核131可控制或管理用于执行由其它编程模块(例如中间件132、API 133和应用程序134)实现的操作或功能的系统资源(例如总线110、处理器120、存储器130等)。此外，内核131可提供一个接口，该接口能够使用中间件132、API 133或应用程序134来访问和控制或管理电子设备101的各个元件。
中间件132可以在API 133或应用程序134与内核131之间运行，以使API 133或应用程序134与内核131通信并与之交换数据。例如，中间件132可配置为API 133或应用程序134与内核131之间的通信中介。此外，对于从一个或多个应用程序134接收到的工作请求，例如，中间件132可使用指定优先级的方法来对工作请求进行负载平衡，其中电子设备101的系统资源(例如总线110、处理器120、存储器130等)可用于一个或多个应用程序134中的至少一个。
API 133是应用程序134能够用来控制内核131或中间件132所提供的功能的接口，并且可以包括例如至少一个用于文件控制、窗口控制、图像处理、字符控制和/或类似功能的接口或功能。
应用程序134可以包括，例如，家庭应用程序、拨号应用程序、短消息服务(shortmessage service，SMS)/多媒体消息服务(multimedia message service，MMS)应用程序、即时消息(instant message，IM)应用程序、浏览器应用程序、摄像头应用程序、报警应用程序、联系人应用程序、语音拨号应用程序、电子邮件(electronic mail，e-mail)应用程序、日历应用程序、媒体播放器应用程序、唱片集应用程序、时钟应用程序和任何其它合适和/或类似的应用程序。更多详情参见图3。
用户输入和输出接口/模块150可通过输入输出构件(例如传感器、键盘、触摸屏和/或类似构件)接收用户输入的命令或数据，并可通过总线110将接收到的命令或数据传送到处理器120或存储器130。显示模块160可以向用户显示视频、图像、数据和/或类似内容。显示模块160可以显示从上述元件接收到的各种信息(例如多媒体数据、文本数据)。
通信接口/模块170可控制与另一电子设备102的短程通信连接。当电子设备101与另一电子设备配对时，通信接口170可停止等待从相邻电子设备接收信号的扫描操作或广播信号的广播操作。例如，在电子设备101与另一电子设备102配对后，通信接口170停止等待从相邻电子设备接收信号的扫描操作或广播信号的广播操作。当电子设备101与另一电子设备配对时，通信接口170可控制扫描或广播操作的周期。关于通信配置控制模块170的更多信息在下文结合图2进行描述。
根据本发明的各种实施例，电子设备101可以使用通信接口170与另一电子设备通信。例如，通信接口170可与另一电子设备104、服务器106和/或类似设备通信。通信接口/模块170可以直接或通过网络162与其它电子设备104、服务器106和/或类似设备通信。例如，通信接口/模块170可用于将电子设备101连接到网络162。
图2是根据本发明一实施例的示出电子设备的配置的方框图。
参照图2，电子设备200可以是例如图1所示的电子设备101。如图2所示，电子设备200的硬件可以包括一个或多个应用处理器(application processor，AP)210、用户识别模块(subscriber identification module，SIM)卡224、通信模块220、存储器230、传感器模块240、输入模块250、显示模块260、接口270、音频模块(例如，音频编码器/解码器(编解码器))280、摄像头模块291、电源管理模块295、电池296、指示器297、电机298和任何其它类似和/或合适的组件。
AP 210(例如，处理器)可以包括一个或多个AP，或一个或多个通信处理器(communication processor，CP)。AP 210可以执行操作系统(operating system，OS)或应用程序，从而可控制连接到AP 210的多个硬件或软件元件，并且可以对包括多媒体数据在内的各种数据执行处理和算术操作。AP 210可通过片上系统(system on chip，SoC)来实现。根据本发明的各种实施例，AP 210还可以包括图形处理单元(graphics processingunit，GPU)(未示出)。
SIM卡224可以是实现用户识别模块的卡，并且可插入在电子设备101的特定部分中形成的插槽中。SIM卡224可以包括唯一的识别信息(例如，集成电路卡识别号(integrated circuit card identifier，ICCID))或用户信息(例如，国际移动用户识别码(international mobile subscriber identity，IMSI))。
通信模块220可以是图1所示的通信接口170。通信模块220可以包括射频(radiofrequency，RF)模块229。通信模块220还可以包括蜂窝模块221、Wi-Fi模块223、蓝牙(Bluetooth，BT)模块225、GPS模块227和近场通信(near field communication，NFC)模块228。通信模块220可使用射频来提供无线通信功能。另外或可替代地，通信模块220可以包括网络接口(例如，局域网(local area network，LAN)卡)、调制器/解调器(调制解调器)等，用于将电子设备200连接到网络(例如，互联网、LAN、广域网(wide area network，WAN)、电信网络、蜂窝网络、卫星网络、传统电话服务(plain old telephone service，POTS)和/或类似网络)。
蜂窝模块221还可以包括CP。CP可以控制通信模块220进行的数据发送和接收。如图2所示，CP、电源管理模块295、存储器230等元件示为独立于AP 210的元件。然而，根据本发明的各种实施例，AP 210可以包括上述元件的至少一些元件(例如，CP)。CP可管理数据线，并且可在电子设备200(例如，电子设备101)与通过网络连接到该电子设备的不同电子设备进行通信的情况下转换通信协议。
射频模块229可用于传输和接收数据，例如发送和接收射频信号，或称为电子信号。尽管未示出，但是射频单元229可以包括收发器、功率放大器模块(power amplifiermodule，PAM)、频率滤波器、低噪声放大器(low noise amplifier，LNA)和/或类似组件。此外，射频模块229还可以包括用于在无线通信时在自由空间中发射和接收电磁波的组件，例如导体、导线等。
存储器230可以包括内部存储器232，还可以包括外部存储器234。例如，存储器230可以是图1所示的存储器130。根据本发明的各种实施例，内部存储器232可以包括例如以下至少一项：易失性存储器(例如，动态随机存取存储器(dynamic random access memory，DRAM)、静态RAM(static RAM，SRAM)、同步动态RAM(synchronous dynamic RAM，SDRAM)和/或类似存储器)和非易失性存储器(例如，一次性可编程只读存储器(one-timeprogrammable read-only memory，OTPROM)、可编程ROM(programmable ROM，PROM)、可擦除可编程ROM(erasable and programmable ROM，EPROM)、电可擦除可编程ROM(electricallyerasable and programmable ROM，EEPROM)、掩模ROM、快闪ROM、非和(not AND，NAND)闪存、非或(not OR，NOR)闪存等)。根据本发明的各种实施例，内部存储器232的形式可以是固态驱动器(solid state drive，SSD)。外部存储器234还可以包括闪存盘，例如紧凑型闪存卡(compact flash，CF)、安全数字卡(secure digital，SD)、micro-SD卡、mini-SD卡、极限数字卡(extreme digital，xD)、记忆棒和/或类似存储器。
传感器模块240可以包括例如以下至少一项：手势传感器240A、陀螺仪传感器240B、大气压力传感器240C、磁传感器240D、加速度传感器240E、握持传感器240F、接近传感器240G、红绿蓝(red,green and blue，RGB)传感器240H、生物特征传感器240I、温度/湿度传感器240J、照度传感器240K和紫外线(ultra violet，UV)传感器240M。传感器模块240可测量物理量和/或可检测电子设备101的工作状态，并可将测量或检测到的信息转换为电信号。传感器模块240还可以包括电子鼻传感器(未示出)、肌电图(electromyography，EMG)传感器(未示出)、脑电图(electroencephalogram，EEG)传感器(未示出)、心电图(electrocardiogram，ECG)传感器(未示出)、指纹传感器(未示出)和/或类似传感器。另外或可替代地，传感器模块240可以包括例如电子鼻传感器(未示出)、EMG传感器(未示出)、EEG传感器(未示出)、ECG传感器(未示出)、指纹传感器(未示出)和/或类似传感器。传感器模块240还可以包括控制电路(未示出)，用于控制其中包含的一个或多个传感器。
输入设备250可以包括触摸面板252、(数字)笔传感器254、键256、超声波输入设备258和输入感应模块259中的至少一个。触摸面板252可使用电容法、电阻法、红外线法或超声波法中的至少一种方法。触摸面板252还可以包括控制电路。触摸面板252还可以包括触觉层，以向用户提供触觉反应。(数字)笔传感器254可以包括例如触摸面板252的一部分或单独的识别表。键256可以包括物理按钮、光学键或键盘。超声波输入设备258可以通过麦克风(例如，麦克风288)检测输入仪器中发生的超声波，并确定对应于检测到的超声波的数据。输入感应模块259可以包括至少一个指纹识别传感器201和至少一个触摸传感器203。输入感应模块259可以包括指纹识别传感器201和触摸传感器203，这两种传感器使用相同的感应方法来检测输入。例如，输入感应模块259的指纹识别传感器201和触摸传感器203都可以用电容法来检测输入。输入感应模块259可以包括电连接到指纹识别传感器201和触摸传感器203的输入处理器，该输入处理器处理从指纹识别传感器201或触摸传感器203接收的输入，并将处理后的输入传输到处理器。输入感应模块259可以包括柔性电路板，输入感应模块259的触摸传感器203、指纹识别传感器201和输入处理器可电连接到柔性电路板。输入感应模块259可设置在对应于电子设备前部下端的键(例如，Home键或软键)的位置上。例如，输入感应模块259可通过触摸传感器203或指纹识别传感器201来检测用户的指纹输入或从Home键或软键接收的触摸输入。输入感应模块259可使用触摸传感器203来检测在电子设备侧面部分形成的触摸输入区域接收到的触摸输入，并通过指纹识别传感器201来检测使用Home键接收的指纹输入。输入感应模块259可处理接收到的输入并将处理后的输入传输到处理器。输入处理器和指纹识别传感器201可以通过一个芯片的形式形成。
显示模块260可以包括面板262、全息图264、投影仪266等。显示模块260可以是例如图1所示的显示模块160。面板262可以是液晶显示屏(liquid crystal display，LCD)和有源矩阵有机发光二极管(active matrix organic light emitting diode，AM-OLED)显示屏等。面板262可实现为灵活的、透明的或可穿戴的。面板262可以包括触摸面板252和一个模块。全息图264可利用光的干涉在空中显示三维图像。根据本发明的各种实施例，显示模块260还可以包括用于控制面板262或全息图264的控制电路。
接口模块270可以包括以下至少一项：高清多媒体接口(high-definitionmultimedia interface，HDMI)模块272、通用串行总线(universal serial bus，USB)模块274、光学接口模块276、D-SUB(D-subminiature)模块278等。另外或可替代地，接口270可以包括例如用于SD/多媒体卡(multimedia card，MMC)(未示出)或红外数据协会(infrareddata association，IrDA)(未示出)的一个或多个接口。接口模块270或其任一子模块可用于连接另一电子设备(例如，外部电子设备)、输入设备、外部存储设备和/或类似设备。
音频模块280可将语音编码/解码为电信号，反之亦然。音频模块280可对输入到或输出自扬声器282、接收器284、耳机286和/或麦克风288的语音信息进行编码/解码。
摄像头模块291可捕获静止图像或视频。根据本发明的各种实施例，摄像头模块291可以包括一个或多个图像传感器(例如，前传感器模块或后传感器模块，未示出)、图像信号处理器(image signal processor，ISP，未示出)或闪光LED(未示出)。
电源管理模块295可管理电子设备200的电源。虽然未示出，但是电源管理模块295可以包括电源管理IC(power management IC，PMIC)、充电器IC、电池电量计和/或类似组件。PMIC可设置在IC或SoC半导体中。电子设备200的充电方法可以包括有线充电或无线充电。充电器IC可为电池充电，或防止充电器的过高电压或过大电流进入电子设备200。根据本发明的各种实施例，充电器IC可以包括有线充电器IC和无线充电器IC中的至少一个。无线充电器IC可以是磁共振型、磁感应型或电磁波型，并且可以包括线圈回路、谐振电路或整流器等电路。电池电量表可测量充电量、充电时的电压、电池296的温度等。电池296可例如向电子设备200供电。电池296可以是可充电电池。
指示器297可指示电子设备200或其一部分(例如，AP 211)的一种或多种状态(例如，启动状态、消息状态或充电状态)。电机298可将电信号转换为机械振动。
虽然未示出，但是电子设备200可以包括支持模块电视的处理单元(例如，GPU)。支持模块电视的处理单元可根据如数字多媒体广播(digital multimedia broadcasting，DMB)、数字视频广播(digital video broadcasting，DVB)、媒体流等标准来处理媒体数据。
根据本发明的各种实施例，电子设备200的上述每个元件可以包括一个或多个组件，并且相关元件的名称可根据电子设备的类型而改变。根据本发明的各种实施例，电子设备200可以包括上述元件中的至少一个。电子设备200中可省略上述部分元件，或者电子设备200还可以包括其它元件。此外，根据本发明的各种实施例，电子设备200的部分元件可以组合成一个实体，该实体可以执行与组合前相关元件的功能相同的功能。
图3是根据本发明一实施例的示出编程模块的配置的方框图。
参考图3，编程模块300可以包括(或存储)在电子设备101(例如，存储器130)中，或者可以包括(或存储)在图1所示的电子设备200(例如，存储器230)中。编程模块300的至少一部分可以在软件、固件、硬件或其中两者或两者以上的组合中实现。编程模块300可以在硬件(例如，电子设备200)中实现，并可以包括OS，用于控制与电子设备(例如，电子设备101)和/或在OS中执行的各种应用程序(例如，应用程序370)相关的资源。例如，OS可以是Android、iOS、Windows等。
参考图3，编程模块300可以包括内核320、中间件330、API 360和/或应用程序370。
内核320(例如，内核131)可以包括系统资源管理器321和/或设备驱动程序323。系统资源管理器321可以包括处理器管理器(未示出)、内存管理器(未示出)和文件系统管理器(未示出)。系统资源管理器321可以执行系统资源的控制、分配、恢复和/或类似操作。设备驱动程序323可以包括显示驱动程序(未示出)、摄像头驱动程序(未示出)、蓝牙驱动程序(未示出)、共享内存驱动程序(未示出)、USB驱动程序(未示出)、键盘驱动程序(未示出)、Wi-Fi驱动程序(未示出)和/或音频驱动程序(未示出)等。此外，根据本发明一实施例，设备驱动程序323可以包括进程间通信(inter-process communication，IPC)驱动程序(未示出)。
中间件330可以包括先前实现的多个模块，以便提供各应用程序370共同使用的功能。中间件330可通过API 360向应用程序370提供功能，以使应用程序370能有效地使用电子设备内有限的系统资源。例如，如图3所示，中间件330(例如，中间件132)可以包括以下至少一项：运行库335、应用程序管理器341、窗口管理器342、多媒体管理器343、资源管理器344、电源管理器345、数据库管理器346、包管理器347、连接管理器348、通知管理器349、位置管理器350、图形管理器351、安全管理器352以及任何其它合适和/或类似的管理器。
运行库335可以包括例如编译器使用的库模块，以便在应用程序370的执行期间使用编程语言添加新的功能。根据本发明一实施例，运行库335可执行与输入和输出、内存管理、算术函数等相关的功能。
应用程序管理器341可以管理例如至少一个应用程序370的生命周期。窗口管理器342可以管理屏幕上使用的图形用户界面(graphical user interface，GUI)资源。多媒体管理器343可检测用于复制各种媒体文件的格式，并可通过适用于相关格式的编解码器对媒体文件进行编码或解码。资源管理器344可以管理至少一个应用程序370的资源，例如源代码、内存、存储空间和/或类似资源。
电源管理器345可与基本输入/输出系统(basic input/output system，BIOS)一起操作，可管理电池或电源，并可提供用于操作的电源信息等。数据库管理器346可管理数据库，以便能够生成、搜索和/或更改至少一个应用程序370将要使用的数据库。包管理器347可管理以包文件的形式分发的应用程序安装和/或更新。
连接管理器348可管理无线连接，例如Wi-Fi和BT。通知管理器349可以在不干扰用户的情况下向用户显示或报告事件，例如到达消息、分配、迫近报警等。位置管理器350可管理电子设备的位置信息。图形管理器351可管理要提供给用户的图形效果和/或与图形效果相关的UI。安全管理器352可提供用于系统安全、用户身份验证等的各种安全功能。根据本发明一实施例，当电子设备(例如电子设备101)具有电话功能时，中间件330还可以包括电话管理器(未示出)，用于管理电子设备的语音电话呼叫功能和/或视频电话呼叫功能。
中间件330可通过上述内部元件模块的各种功能组合来生成和使用新的中间件模块。中间件330可以根据OS的类型提供专门的模块，以提供不同的功能。中间件330还可以动态删除一些现有的元件，或者添加新的元件。相应地，中间件330可省去本发明的各种实施例中描述的一些元件，也可以括其它元件，或者可以将一些元件替换为如下元件：每个元件执行类似的功能并且具有不同的名称。
API 360(例如，API 133)是一组API编程函数，并可以根据OS使用不同的配置。例如，在使用Android或iOS的情况下，可以为每个平台提供一个API集合。
应用程序370(例如，应用程序134)可以包括预加载的应用程序和/或第三方应用程序等。应用程序370(例如，应用程序134)可以包括，例如，家庭应用程序371、拨号应用程序372、SMS/MMS应用程序373、IM应用程序374、浏览器应用程序375、摄像头应用程序376、报警应用程序377、联系人应用程序378、语音拨号应用程序379、电子邮件应用程序380、日历应用程序381、媒体播放器应用程序382、唱片集应用程序383、时钟应用程序384和任何其它合适和/或类似的应用程序。
编程模块300的至少一部分可通过存储在非瞬时性计算机可读存储介质中的指令来实现。当指令由一个或多个处理器(例如，一个或多个处理器210)执行时，这一个或多个处理器可以执行对应于指令的功能。例如，非瞬时性计算机可读存储介质可以是存储器230。编程模块300的至少一部分可由例如一个或多个处理器210来实现(例如，执行)。编程模块300的至少一部分可以包括用于执行一个或多个功能的模块、程序、例程、一组指令和/或过程。
根据本发明一实施例的编程模块(例如，编程模块300)的元件的名称可根据OS的类型而改变。根据本发明一实施例的编程模块可以包括上述一个或多个元件。或者，编程模块中可省略上述部分元件。或者，编程模块还可包括其它元件。由根据本发明一实施例的编程模块或其它元件执行的操作可以采用顺序方法、并行方法、重复方法或启发式方法来处理。此外，一些操作可省略，或者可在操作中添加其它操作。
图4描述了根据本发明一实施例的电子设备。
参照图4，电子设备400(例如电子设备101、电子设备200)的前部可具有触摸屏区域401(例如显示屏160、触摸面板252、触摸传感器203、显示屏260)。指纹识别传感器201可以对应于触摸屏区域401中的一个或多个区域，触摸传感器203可以对应于触摸屏的整个区域。电子设备400可在屏幕上显示的可见提示403所指示的位置上检测用户指纹。提示403在不需要时可以不可见，并且在需要时变为可见。提示403的位置可以固定在触摸屏上，也可以动态确定。电子设备400可通过触摸屏接收用户的指纹输入和/或触摸输入，并提供对应于所接收的指纹输入和/或触摸输入的功能。指纹感应功能可能出现在显示屏上的任何位置。电子设备上同时提供显示信息和感应触摸这两个功能的部分是“活动区域”405。图4可称为屏内指纹识别。指纹识别或指纹认证是指自动验证两个人类指纹之间的匹配情况的方法。指纹是用于识别个人和验证其身份的多种生物特征之一。有关指纹识别的维基百科条目，请访问：https://en.wikipedia.org/wiki/Fingerprint_recognition，上次访问时间：2017年3月16日。
图5a至图5c为根据本发明实施例的电子设备的各种俯视图，示出了用于在显示屏中操作全面板指纹传感器的选项。在图5a至图5c中，指纹感应功能可能出现在显示屏上的任何位置。在图5a至图c中，电子设备上同时具有提供信息和感应触摸这两个功能的部分是“活动区域”500(例如，图4中的活动区域405)。应了解，活动区域500的大小、形状和其它配置在各种实施例中可能发生变化。在图5a中，显示屏配置为单点触摸显示屏，并且全面板指纹传感器一次仅捕获一个指纹405。在图5b中，显示屏配置为多点触摸显示屏，并且全面板指纹传感器一次仅捕获一个指纹。在图5c中，显示屏配置为多点触摸显示屏，并且全面板指纹传感器基本上一次捕获多个指纹。提供全面板指纹识别带来了如下几个优势，丰富了用户体验：允许在面板内自由放置；可允许多指扫描；支持手指类型检测(例如，拇指、食指、中指、无名指、小指/左手/右手)，从而能够增强用户界面(user interface，UI)和用户体验(user eXperience，Ux)。
图6a至图6d为根据本发明实施例的电子设备的各种俯视图，示出了操作屏内指纹识别的场景。与图5a至图5c相似，指纹感应功能可能出现在显示屏上的任何位置，电子设备上同时提供显示信息和感应触摸这两个功能的部分是“活动区域”(例如，与图4、图5a至图5c相似)。
在图6a中，显示屏用于在活动区域中显示具有可见提示603的锁屏UI 601，以指示显示屏中的指纹识别。一旦指纹识别通过，显示屏就用于显示主屏幕UI 605。
在图6b中，显示屏用于显示具有多个APP图标(例如摄像头、呼叫、视频、设置和图片)的主屏幕UI 605。一个或多个APP可能被锁定，并需要解锁方式才能打开。可显示可见提示604，以指示需要进行屏内指纹识别。一旦指纹识别通过，显示屏就用于显示应用内屏幕UI 607。本领域技术人员将会了解，类似的机制也适用于应用内操作。例如，用户触摸APP中的按钮并且通过指纹识别后就可以继续特定的操作。在指纹识别失败的情况下，即使用户触摸按钮以继续，也可能无法继续该特定的操作。
在图6c中，显示屏用于显示具有可见提示604的应用内屏幕UI 607-1，以指示需要继续进行屏内指纹识别(例如，金融交易)。一旦指纹识别通过，显示屏就用于显示另一个应用内屏幕UI 607-2(例如，指示交易成功)。
在图6d中，显示屏用于显示锁定屏幕UI 601，其上指示有通知(例如，接收到新的SMS)。可显示可见提示603，以指示需要进行屏内指纹识别。一旦指纹识别通过，显示屏就用于显示应用内屏幕UI 607-3，以确保所通知的SMS可以直接从锁定屏幕上打开。
消费电子设备中的指纹识别使用了广泛的技术，例如电容传感、超声波或光学传感。这些技术也适用于屏内触摸和/或全面板触摸场景。专利申请US2015/0036065A1描述了一种指纹传感器，其可以采用任何类型的传感技术，包括电容、压电和超声波传感技术。专利申请US2015/0331508A1描述了一种集成了显示屏和触摸传感器的面板，其可以执行指纹识别，并通过光电二极管和照明器来使用图像传感技术。专利申请US2015/0109214A1还描述了一种可以使用电容或图像传感技术的触摸式指纹显示屏。所有参考文献的全部内容均并入本文本中。
图7示出了指纹识别处理机制(即指纹识别装置)。该机制包括传感器阵列701、读出电路703和图像处理电路705。
读出电路可读出值较小的感应容量。通常可以使用逐列读出方案。其可由后接放大级的多个开关组成。图像传感方法的架构非常相似。图像传感器架构由一个象素数组组成，行选择逻辑通常一次一行地选择这些像素。这些像素被读出到垂直列总线，这些总线将所选的一行像素连接到一组模拟信号处理器(analog signal processor，ASP)。这些ASP执行电荷迭代、增益、采样与保持、相关双采样和FPN抑制等功能。电容或图像传感方法的这些示例表明，读出电路的密度与传感器阵列701的大小有关。阵列越大，读出电路的成本就越高。阵列越大，系统的功耗就越大。电容式传感器中读出电路的结构和实现方式的示例如下：Tiao、Yu-Sheng等人，“LTPS-TFT电容式指纹传感器的CMOS读出电路(ACMOS readoutcircuit for LTPS-TFT capacitive fingerprint sensor)”，2005IEEE电子器件与固态电路国际会议，IEEE，2005，DOI：10.1109/EDSSC.2005.1635353。该论文的全部内容并入本文本中。
在通过传感器阵列701和读出电路703获取指纹图像后，需要进行图像处理以执行指纹识别。图像处理电路705可以包括任何必要的处理算法、相关存储器和所需的数据库。图像处理电路的示例参考下文：Fossum、Eric R，“CMOS图像传感器：芯片式电子摄像头(CMOS image sensors:Electronic camera-on-a-chip)”，《IEEE电子器件汇刊(IEEEtransactions on electron devices)》1997年44-10期，1689-1698页，DOI：10.1109/16.628824。该论文的全部内容并入本文本中。
本发明的发明人发现传统的屏内/全面板指纹识别解决方案可以改进。指纹识别要求传感器阵列(例如701)比传统的触摸传感器具有更高的分辨率。例如，对于控制边界要求，需要500ppi的分辨率。这意味着，当需要高水平的识别时，像素密度可以高于传统的智能手机显示屏。对于一个5英寸的显示屏来说，500ppi的密度代表2168×1211像素阵列。换言之，对分辨率的要求会非常高。这表示读出部分(例如703)和图像处理部分(例如705)也需要扩展。这意味着当显示屏表面增大时，成本也会增加。此外，由于传感器阵列(例如701)通电且读出电路(例如703)扩展，因此功耗将随着显示屏表面的增大而增加。当所产生的扫描图像增大时，图像处理(例如705)也会增长，这会影响成本和功耗。最后但同样重要的是，处理完整扫描和识别一个或多个手指的延迟可能高于固定单指纹区域。这种延迟可能会给用户体验带来不便和负面影响。总之，实现屏内/全面板指纹识别需要考虑以下一个或多个方面：成本、功耗和处理延迟。
图8a至图8c示出了根据本发明实施例的各种屏内指纹识别机制。
在图8a中，识别手指801周围的高分辨率图像803。与传统技术一样，这种操作类似于将一个小手指放在扫描机的面板上进行长时间全扫描的场景；扫描机输出一大张纸，在纸上的某个地方有一个小手指。与传统技术相比，不需要在显示屏上对整个活动区域805进行全扫描，而是局部扫描一个或多个手指以便于识别指纹。可选地，以适当的分辨率扫描一个或多个手指。例如，在全屏指纹识别的情况下，在手边有一个全尺寸的图像传感器。但图像传感器可以部分激活，只扫描一个或多个手指周围的区域。图像传感器可根据需要调整其扫描分辨率，例如，针对安全敏感场景使用高分辨率、针对特定APP使用低分辨率，等等。
与全屏高分辨率扫描相比，这种局部手指扫描机制能够提供分辨率高但尺寸较小的图像。最后的局部扫描在尺寸和分辨率上与固定单指纹区域方法相当。这种局部扫描机制降低了对读出电路和相关图像处理的需求。该局部扫描机制可保持读出电路和相关图像处理的水平与固定单指纹区域方法相当。在将高分辨率传感器阵列(例如图7中的701)保持在整个面板内的情况下，这种机制可通过缩小读出电路(例如图7中的703)和/或图像处理部分(例如图7中的705)来降低总成本。在使用有机光电二极管矩阵的图像传感方法中尤其如此。如果使用有机传感器阵列，那么与读出电路相比，高分辨率矩阵的总成本很低。换言之，与有机图像传感器方法中的读出电路部分的成本相比，传感器部分的成本很低。此外，可以改善功耗，并且不会明显影响处理延迟。
在图8b中，当触摸面板未被触摸时，指纹系统/功能/传感器断电，只有触摸面板被触摸时指纹系统/功能/传感器才通电。在这种情况下，触摸面板能够直接给出手指的位置。这样，只要触摸面板没有给出任何手指触摸的指示，就可以停用指纹传感器，以节省大量电源。一旦触摸面板检测到手指触摸，触摸面板控制器就可以检测到手指位置并激活指纹传感器，以对局部手指进行局部扫描。指纹传感器是用于捕获指纹图案的数字图像的电子设备。捕获的图像称为实时扫描。对该实时扫描进行数字处理以创建生物特征模板(提取的特征的集合)，该模板被存储起来并用于匹配。已经使用了许多技术，包括光学、电容、射频、热、压阻、超声波、压电和MEMS技术。有关指纹传感器的维基百科条目，请访问：https:// en.wikipedia.org/wiki/Fingerprint_recognition#Fingerprint_sensors，上次访问时间：2017年4月12日。
图8c示出了如何在触摸面板给出的手指位置803周围执行高分辨率局部扫描。例如，触摸面板用于以相对较低的分辨率扫描触敏表面的活动区域，以检测是否有至少一个手指触摸到触敏表面。如果检测到至少一个手指触摸到触敏表面，则以相对较高的分辨率来扫描触摸区域(例如(X1,Y1)等)以进行指纹识别。读出电路仅用于触摸区域。这种情况下，只配备一个缩小的读出电路来处理与触摸区域相关的指纹识别。
图9示出了根据本发明一实施例的支持屏内指纹识别的电子设备。在图9中，触摸传感器903(可以是多点触摸传感器，例如图2中的触摸传感器203)用于检测触摸面板(例如图2中的触摸面板252)上是否有手指触摸。在检测到手指触摸的情况下，激活指纹传感器905(例如图2中的指纹识别传感器201)以执行指纹识别。如果指纹识别已完成，或未检测到手指触摸，则停用指纹传感器905。电子设备可以包括另一个触摸传感器907(例如图2中的笔传感器254)。用于指纹识别的屏内局部扫描机制可由微控制器902控制，也可与AP 901一起控制。微控制器902可集成到AP 901(例如图2中的处理器210)中。
图10示出了根据本发明一实施例的支持屏内指纹识别的电子设备。玻璃表盖1001叠在触摸传感器/面板1002上。触摸传感器/面板1002可以是透明的。触摸传感器1002叠在显示屏1003上。指纹传感器1004与显示屏1003叠在一起(置于显示屏上方或下方)。背板1005位于显示屏下方。触摸传感器1002可以包括与其相关读出电路和/或控制器(例如图9中的902)等一起工作的分辨率相对较低的传感器。指纹传感器1004可以包括与其相关读出电路，和/或控制器(例如图9中的902)，和/或图像处理等一起工作的分辨率相对较高的传感器。分辨率相对较高的传感器可使用由有机光电二极管(Organic PhotoDiode，OPD)和/或照明器组成的图像传感技术。分辨率相对较低的触摸传感器可使用电容技术。触摸屏是一种输入和输出设备，通常位于信息处理系统的电子视觉显示屏的顶部。用户可以使用特殊的触笔和/或一个或多个手指触摸屏幕，以通过简单的手势或多点触摸手势来对信息处理系统进行输入或控制信息处理系统。有关触摸屏/触摸面板/触敏表面的维基百科条目，请访问：https://en.wikipedia.org/wiki/Touchscreen，上次访问时间：2017年3月17日。有关业内广泛使用的触摸技术的详细信息，请参考：“智能手机中的触摸技术解释(Touchtechnology in smartphones explained)”，http://www.flatpanelshd.com/focus.php？ subaction＝showfull&id＝1348049303，上次访问时间：2017年3月17日；“工作原理：触摸屏技术：从单点触式到多点触式，以及为什么所有触摸屏都是不同的(How it works:Thetechnology of touch screens:From single-touch to multitouch and why alldisplays are not equal)”http://www.computerworld.com/article/2491831/ computer-hardware/computer-hardware-how-it-works-the-technology-of-touch- screens.html，上次访问时间：2017年3月17日。所有参考文献的全部内容均并入本文本中。
如果OPD和/或照明器在近红外(near-infrared，NIR)区域中工作，则图像传感器可以放在显示屏后面。在波长上，显示屏对图像传感器保持“透明”。在另一实施例中，OPD和显示屏可以并排地排列。在该方法中，当显示屏在可见区域中工作时，可以将显示屏用作“自由”照明器，如专利申请US20150331508所示，该专利申请的全部内容并入本文本中。第三种方法是在显示屏上方安装指纹传感器。然而，指纹传感器的透明性会增加解决方案的成本并影响显示性能。
图11a至图11d示出了根据本发明实施例的支持屏内指纹识别的电子设备。在图11a中，使用并排列多个照明器1103以覆盖整个显示区域1101。在图像传感器方法中，可能需要照明器来提高光电二极管接收信号的信噪比。照明器可以照亮手指的底部，光电二极管接收反射光。照明在系统中很重要。它还可能对功耗产生影响。由于可以自由地将手指放在整个屏幕上，因此照明器可分布在整个屏内触摸区域1101中。在一实施例中，手指检测和/或定位用于控制照明器，以对检测到的手指提供局部照明。这种局部照明解决方案可提高屏内指纹识别解决方案的功耗。在图11b中，通过分辨率相对较低的扫描过程(例如触摸传感器)在f1位置检测到一个手指1102(可以是多个手指)。在图11c中，只有照明器1105的一个子集(可以是一个照明器)在检测到的手指位置处/附近或周围被激活。在图11d中，借助于照明器1105的子集，在检测到的手指位置周围执行分辨率相对较高的扫描1107。这样，可在不降低效率同时节能的情况下处理屏内指纹识别。在OPD和显示屏并排地排列时，这种局部照明和局部扫描机制也同样有效。
图12a至图12d示出了根据本发明实施例的支持屏内指纹识别的电子设备。在图12a中，触摸面板1201用于检测手指触摸和/或手指位置。触摸面板可以是电容式触摸面板。其可以使用分辨率相对较低的传感器阵列，其自身的扫描和触摸检测过程由控制器1202(例如图9中的902和图2中的210)管理。该触摸面板可输出手指位置fi，用于指纹扫描过程。例如，控制逻辑1203可用于接收fi位置信息，并确定一个(Xi,Yi,w,h)区域以局部扫描触摸到显示屏的一个或多个手指。这意味着，凭借控制逻辑1203，仅从手指位置读出(w×h)个像素，控制逻辑1203可以是一种将矩阵1204(如图7中的传感器阵列701)中的正确行和列连接到读出电路1205(如图7中的703)的动态可编程扫描电路。然后可将分辨率相对较高的副扫描图像传递给图像处理1206(例如图7中的705)进行指纹识别。与传统技术相比，这种动态局部扫描机制提出了一种相比于传统技术有所缩小的图像处理读出电路。可以按照固定单指纹区域方法来确定读出电路和图像处理用于处理指纹图像的尺寸。缩小相关电路(例如读出电路和图像处理电路)可以降低总成本，改善功耗，并提供延迟时间较短的响应。简而言之，本文提出了一种局部扫描机制，用于动态扫描手指周围的图像并忽略指纹传感器阵列的其它部分。在图12b中，示出了如何用小型的w×h读出电路1205来替换大型的X×Y读出电路。相关的图像处理(例如存储器、处理器、算法和数据库)也可以缩小。在图12c中，示出了动态副扫描电路1203用于提供相对较小/缩小的子矩阵(例如，与全矩阵解决方案相比)，从而可以缩小读出电路1205和相关图像处理1206(例如存储器、处理器、算法、数据库)的尺寸。在图12d(接图12c的上半部分)中，示出了在分辨率相对较低的传感器阵列1201的帮助下，动态副扫描电路1203通过分辨率相对较高的传感器阵列1204来控制局部扫描，以检测手指位置。
图13a至图13d示出了如何凭借开关阵列等选择机制将大型的X×Y传感器阵列缩小为w×h个像素并提供给读出电路。可根据检测到的手指位置激活这些开关。图13a示出了传感器阵列1301(例如传感器阵列701)与开关阵列1303耦合，开关阵列1303可以包括多个开关/开关晶体管。图13b示出了与手指位置1305(例如f1周围的区域)对应/匹配的开关(1303-a和1303-b，用粗体标记)被激活。任何检测到的手指位置与需要打开的晶体管组的映射是确定且明显的。一旦建立了映射，就可以通过如下操作来执行读取过程：选择第一行，读出列的像素，并按顺序在下一行执行操作。这样就可以获取w×h图像。该结构可以采用多个架构。无论架构如何，目标都是在指纹周围绑定一个最佳扫描范围。图13c示出了有重叠的结构的另一个示例。图13d示出了使用“双重排序”的结构的另一个示例。双序列是用两个索引进行编号的某些元素的序列。双序列的更多细节参见数学百科全书：http:// www.encyclopediaofmath.org/index.php？title＝Double_sequence&oldid＝32337，上次访问时间：2017年4月12日。对行和列都执行排序。在减少采集时间的同时，双序列大大减少了模拟部分(然后是成本和功率)。由于指纹扫描不需要像传统成像那样的快速读出过程，因此这项技术是可行的。模拟前端(analog front end，AFE)耦合到指纹感应区域并用于生成模拟响应信号。模数转换器(analog-to-digital converter，ADC)对模拟响应信号进行采样，并将样本转换为数字值，该数字值可由处理器或CPU等数字设备接收。关于AFE的更多应用，请参考申请US20090252385A1和US20170076079A1，这两个申请的全部内容均并入本文本中。本领域技术人员将会了解，上述架构(或其相关部分)的任何组合都是可能的。此外，基于手指位置的这些开关晶体管及其相关控制(例如开关阵列1303)可以形成“动态副扫描电路”(例如图12a中的动态控制和选择逻辑、图12b至图12d中的副扫描电路1203)，该动态副扫描电路允许缩小读出电路和相关图像处理(存储器、处理器、算法和数据库)的尺寸。有关晶体管用作开关的更多信息，请参考：“将晶体管用作开关(Transistor as aSwitch)”，http://www.electronics-tutorials.ws/transistor/tran_4.html，上次访问时间：2017年6月21日，其全部内容并入本文本中。
局部扫描过程不限于一个手指。可以对位于面板内的任何手指执行动态副扫描。手指扫描可以按顺序处理或并行处理。例如，在多个手指基本上同时接触屏幕的情况下，根据上述局部扫描方法，可以在一排内逐个手指进行指纹识别。在需要时还可以降低副扫描的分辨率，取决于具体应用。一个应用可能并不总是需要全分辨率。例如，对于光识别或手指检测等应用来说，低分辨率(即100ppi)可能已经足够了。
图14示出了根据本发明的一个系统/方法/算法。该系统以状态机1400的形式来概括。指纹传感器可在不同模式之间切换：例如，高分辨率模式(Hi Res mode)、低分辨率模式(Low Res mode)和停用。Hi Res mode可用于需要高分辨率指纹图像的场景，例如指纹识别和高安全性识别。否则，可以使用Low Res mode，例如手指检测和低安全性识别。在没有检测到手指触摸的情况下，可以停用指纹传感器以节省电力。因此指纹传感器大部分时间处于停用状态，从而节省了电力。参见1401，关闭指纹传感器。指纹传感器只有在需要时才会唤醒(例如需要识别，或需要检测手指类型/位置)。参见1402/1412，检测到触摸。参见1403/1413，激活指纹传感器。激活指纹传感器及其相关电路，然后根据需要执行动态副扫描/局部扫描和相关处理(如多指触摸、手指跟踪等)。参见1404/1414，局部扫描。参见1405/1415，图像处理。指纹识别处理的输出可提供给能够相应地采取行动的应用程序(例如，识别后唤醒显示屏、手指类型检测时更换工具、更改模式等)。参见1406/1416，可选后处理。根据状态机1400，本领域技术人员将会了解，可以动态地激活/停用指纹传感器，并且可以动态地执行局部扫描。
尽管本发明的特定特征或方面可能已经仅结合几种实施方式或实施例中的一种进行公开，但此类特征或方面可以和其它实施方式或实施例中的一个或多个特征或方面相结合，只要对于任何给定或特定的应用是有需要或有利。而且，在一定程度上，术语“包括”、“有”、“具有”或这些词的其它变形在详细的说明书或权利要求书中使用，这类术语和所述术语“包含”是类似的，都是表示包括的含义。同样，术语“示例性地”，“例如”仅表示为示例，而不是最好或最佳的。可以使用术语“耦合”和“连接”及其派生词。应当理解，这些术语可以用于指示两个元件彼此协作或交互，而不管它们是直接物理接触还是电接触，或者它们彼此不直接接触。
尽管以上权利要求书中的元件是利用对应的标签按照特定顺序列举的，除非对权利要求的阐述另有暗示用于实施部分或所有这些元件的特定顺序，否则这些元件不必限于以所述特定顺序来实施。

Claims (15)

1.一种电子设备(200)，其特征在于，包括：
触敏表面(252)；
与所述触敏表面内的第一区域(500)相关联的触摸感应装置(203、903、1002)；以及
指纹识别装置(201、905、1004)，其与所述第一区域内的第二区域(801)相关联，其中所述指纹识别装置包括仅指定给所述第二区域的读出电路(703、1205)，其中所述第二区域小于所述第一区域。
2.根据权利要求1所述的电子设备，其特征在于，基于所述触摸感应装置的输出来确定所述第二区域。
3.根据任一前述权利要求所述的电子设备，其特征在于，所述指纹识别装置包括对应于所述第二区域的扫描电路(1203)。
4.根据权利要求3所述的电子设备，其特征在于，所述读出电路用于从所述扫描电路接收子矩阵并将子图像输出到图像处理资源(705、1206)。
5.根据权利要求3或4所述的电子设备，其特征在于，所述扫描电路基于所述触摸感应装置的输出来激活多个开关，其中所述激活的开关仅对应于所述第二区域。
6.根据任一前述权利要求所述的电子设备，其特征在于，还包括对应于所述第一区域的多个照明器(1103)。
7.根据权利要求6所述的电子设备，其特征在于，基于所述触摸感应装置的输出来激活所述多个照明器中的至少一个照明器(1105)，并且所述至少一个照明器位于所述第二区域中或靠近所述第二区域。
8.根据任一前述权利要求所述的电子设备，其特征在于，所述第二装置包括图像处理资源(705、1206)，用于：
从所述读出电路接收输入，以及
相应地进行指纹识别处理。
9.一种处理具有触敏表面的电子设备的指纹识别的方法，其特征在于，包括：
触摸感应装置检测到至少一个手指触摸到所述触敏表面，所述触摸感应装置与所述触敏表面内的第一区域相关联；以及
作为响应，指纹识别装置仅扫描所述第一区域内的第二区域以对检测到的手指进行指纹识别，其中所述指纹识别装置包括仅指定给所述第二区域的读出电路，并且所述第二区域小于所述第一区域。
10.根据权利要求9所述的方法，其特征在于，基于所述触摸感应装置的输出来确定所述第二区域。
11.根据权利要求9和10中任一项所述的方法，其特征在于，还包括：
基于所述触摸感应装置的输出，激活多个照明器中的至少一个照明器，其中所述多个照明器对应于所述第一区域，并且所述至少一个照明器位于所述第二区域中或靠近所述第二区域。
12.根据权利要求9至11中任一项所述的方法，其特征在于，还包括：
基于所述触摸感应装置的输出来激活多个开关，其中所述激活的开关仅对应于所述第二区域。
13.一种电子设备，其特征在于，包括用于执行权利要求9至12所述的任一方法的构件。
14.一种装置，其特征在于，包括：
至少一个处理器；以及
至少一个存储器，所述至少一个存储器包括指令，所述指令在由所述至少一个处理器执行时使得所述装置执行权利要求9至12所述的任一方法。
15.一种计算机程序产品，其特征在于，包括指令，所述指令在由装置执行时使得所述装置执行权利要求9至12所述的任一方法。
CN201780092911.3A 2017-07-06 2017-07-06 电子设备 Pending CN111149103A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/EP2017/066971 WO2019007514A1 (en) 2017-07-06 2017-07-06 ELECTRONIC DEVICE

Publications (1)

Publication Number Publication Date
CN111149103A true CN111149103A (zh) 2020-05-12

Family

ID=59313236

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780092911.3A Pending CN111149103A (zh) 2017-07-06 2017-07-06 电子设备

Country Status (6)

Country Link
US (1) US20200160025A1 (zh)
EP (1) EP3622428A1 (zh)
JP (1) JP2020525891A (zh)
KR (1) KR20200015710A (zh)
CN (1) CN111149103A (zh)
WO (1) WO2019007514A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI845303B (zh) * 2023-05-11 2024-06-11 友達光電股份有限公司 觸控裝置
US12020513B2 (en) 2020-05-29 2024-06-25 Semiconductor Energy Laboratory Co., Ltd. Electronic device and authentication method of electronic device

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102675451B1 (ko) * 2018-11-23 2024-06-13 엘지디스플레이 주식회사 복합센서장치, 디스플레이 장치 및 센싱방법
CN111259690B (zh) * 2018-11-30 2024-01-19 上海耕岩智能科技有限公司 生物特征识别驱动方法、存储介质及装置
US10885302B2 (en) * 2019-03-26 2021-01-05 Innolux Corporation Method for an electronic device to receive fingerprint data
CN112241654A (zh) * 2019-07-16 2021-01-19 北京小米移动软件有限公司 指纹采集方法和装置
KR20220070451A (ko) * 2019-09-27 2022-05-31 가부시키가이샤 한도오따이 에네루기 켄큐쇼 전자 기기 및 프로그램
JP2021072557A (ja) * 2019-10-31 2021-05-06 富士ゼロックス株式会社 情報処理システムおよびプログラム
US12019727B2 (en) 2020-01-10 2024-06-25 Semiconductor Energy Laboratory Co., Ltd. Electronic device and program
US11250235B2 (en) * 2020-04-17 2022-02-15 Novatek Microelectronics Corp. Under display light field sensor, device with under display light field sensor for sensing fingerprint or touch, and method for reconstructing image
KR20220129334A (ko) * 2021-03-16 2022-09-23 삼성전자주식회사 초음파를 이용하여 지문 이미지를 식별하는 전자 장치 및 이의 동작 방법
WO2023285905A1 (ja) * 2021-07-15 2023-01-19 株式会社半導体エネルギー研究所 半導体装置、電子機器、及び半導体装置の駆動方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110095565A (ko) * 2010-02-19 2011-08-25 성균관대학교산학협력단 지문 인식 또는 멀티 터치가 가능한 센서 그리드 방식의 투명 패널 사용자 입력 장치, 사용자 지문 인식 방법, 및 사용자 터치 인식 방법
JP2012168768A (ja) * 2011-02-15 2012-09-06 Nec Casio Mobile Communications Ltd 情報端末装置及びその指紋認証方法
CN203909813U (zh) * 2014-05-28 2014-10-29 上海思立微电子科技有限公司 一种指纹检测装置
US20150169934A1 (en) * 2013-12-18 2015-06-18 Lustrous Electro-Optic Co.,Ltd. Fingerprint reading system
KR20160003272A (ko) * 2013-05-28 2016-01-08 구글 테크놀로지 홀딩스 엘엘씨 터치 위치 인증에 기초한 적응적 센싱 컴포넌트 해상도
CN105867676A (zh) * 2015-02-05 2016-08-17 三星电子株式会社 具有触摸传感器的电子装置和用于电子装置的驱动方法

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004021491A (ja) * 2002-06-14 2004-01-22 Canon Inc 生体パターン認証装置、生体パターン認証方法及びこの方法を記述したプログラム
JP2004240620A (ja) * 2003-02-05 2004-08-26 Canon Inc 生体パターン認証装置
US8116540B2 (en) 2008-04-04 2012-02-14 Validity Sensors, Inc. Apparatus and method for reducing noise in fingerprint sensing circuits
JP2010021830A (ja) * 2008-07-11 2010-01-28 Konica Minolta Business Technologies Inc 画像読取装置、画像読取装置の制御方法、および画像読取装置の制御プログラム
DE102009035966A1 (de) * 2009-08-04 2011-02-10 Deutsche Telekom Ag Verfahren zur kodierten Eingabe und Steuerung mittels Fingerabdruck
US8791792B2 (en) * 2010-01-15 2014-07-29 Idex Asa Electronic imager using an impedance sensor grid array mounted on or about a switch and method of making
US9984270B2 (en) 2013-08-05 2018-05-29 Apple Inc. Fingerprint sensor in an electronic device
US20150109214A1 (en) 2013-10-22 2015-04-23 Weidong Shi Methods and Apparatuses of touch-fingerprinting Display
CN104008319B (zh) 2014-05-14 2017-11-24 深圳市汇顶科技股份有限公司 基于指纹识别的终端及其待机状态下的登录方法、系统
US9836165B2 (en) 2014-05-16 2017-12-05 Apple Inc. Integrated silicon-OLED display and touch sensor panel
CN105528099B (zh) * 2014-09-29 2018-04-13 神盾股份有限公司 结合指纹辨识功能于触控屏幕的电子装置及其控制方法
US9928398B2 (en) * 2015-08-17 2018-03-27 Invensense, Inc. Always-on sensor device for human touch

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110095565A (ko) * 2010-02-19 2011-08-25 성균관대학교산학협력단 지문 인식 또는 멀티 터치가 가능한 센서 그리드 방식의 투명 패널 사용자 입력 장치, 사용자 지문 인식 방법, 및 사용자 터치 인식 방법
JP2012168768A (ja) * 2011-02-15 2012-09-06 Nec Casio Mobile Communications Ltd 情報端末装置及びその指紋認証方法
KR20160003272A (ko) * 2013-05-28 2016-01-08 구글 테크놀로지 홀딩스 엘엘씨 터치 위치 인증에 기초한 적응적 센싱 컴포넌트 해상도
US20150169934A1 (en) * 2013-12-18 2015-06-18 Lustrous Electro-Optic Co.,Ltd. Fingerprint reading system
CN203909813U (zh) * 2014-05-28 2014-10-29 上海思立微电子科技有限公司 一种指纹检测装置
CN105867676A (zh) * 2015-02-05 2016-08-17 三星电子株式会社 具有触摸传感器的电子装置和用于电子装置的驱动方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US12020513B2 (en) 2020-05-29 2024-06-25 Semiconductor Energy Laboratory Co., Ltd. Electronic device and authentication method of electronic device
TWI845303B (zh) * 2023-05-11 2024-06-11 友達光電股份有限公司 觸控裝置

Also Published As

Publication number Publication date
JP2020525891A (ja) 2020-08-27
WO2019007514A1 (en) 2019-01-10
US20200160025A1 (en) 2020-05-21
EP3622428A1 (en) 2020-03-18
KR20200015710A (ko) 2020-02-12

Similar Documents

Publication Publication Date Title
CN111149103A (zh) 电子设备
US11521410B2 (en) Electronic device having a biometric sensor
CN108388390B (zh) 控制指纹传感器的设备和方法
US9635267B2 (en) Method and mobile terminal for implementing preview control
US11392271B2 (en) Electronic device having touchscreen and input processing method thereof
US9852491B2 (en) Objects in screen images
EP2996409A1 (en) Information processing method and electronic device supporting the same
US10101843B2 (en) Method for recognizing fingerprint and mobile terminal supporting the same
US10552182B2 (en) Multiple display device and method of operating the same
EP3223131A1 (en) Electronic device with fingerprint sensor and control method thereof
US20160109936A1 (en) Display control method and protective cover in electronic device
CN107113374B (zh) 相机启动和照度
KR102187236B1 (ko) 프리뷰 방법 및 이를 구현하는 전자 장치
US20160335940A1 (en) Method for processing display data and electronic device for supporting the same
US10055119B2 (en) User input method and apparatus in electronic device
EP2871834A1 (en) Method for performing sensor function and electronic device thereof
US20160103504A1 (en) Method and electronic device for operating electronic pen
US10403013B2 (en) Image processing method for increasing contrast between user interface layers and electronic device for supporting the same
KR102133718B1 (ko) 바코드를 이용한 정보 제공 방법 및 장치
KR102209729B1 (ko) 인식 영역에 기반하여 콘텐트를 검출하는 전자 장치 및 방법
US20180173701A1 (en) Method for contents tagging and electronic device supporting the same
US10303351B2 (en) Method and apparatus for notifying of content change
US20160034165A1 (en) Activity processing method and electronic device supporting the same
KR102584682B1 (ko) 정보 표시 방법 및 장치

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination