CN105264536B - 控制电子设备的方法 - Google Patents

控制电子设备的方法 Download PDF

Info

Publication number
CN105264536B
CN105264536B CN201580000895.1A CN201580000895A CN105264536B CN 105264536 B CN105264536 B CN 105264536B CN 201580000895 A CN201580000895 A CN 201580000895A CN 105264536 B CN105264536 B CN 105264536B
Authority
CN
China
Prior art keywords
user input
gui
input equipment
fingerprint sensor
fingerprint
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201580000895.1A
Other languages
English (en)
Other versions
CN105264536A (zh
Inventor
塞巴斯蒂安·韦伯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fingerprint kaana Kadun Intellectual Property Co.,Ltd.
Original Assignee
Fingerprint Cards AB
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fingerprint Cards AB filed Critical Fingerprint Cards AB
Publication of CN105264536A publication Critical patent/CN105264536A/zh
Application granted granted Critical
Publication of CN105264536B publication Critical patent/CN105264536B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/169—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated pointing device, e.g. trackball in the palm rest area, mini-joystick integrated between keyboard keys, touch pads or touch stripes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03547—Touch pads, in which fingers can move on a surface
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12—Fingerprints or palmprints
    • G06V40/13—Sensors therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12—Fingerprints or palmprints
    • G06V40/1347—Preprocessing; Feature extraction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/08—Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/0861—Network architectures or network communication protocols for network security for authentication of entities using biometrical features, e.g. fingerprint, retina-scan
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W12/00—Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/06—Authentication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W88/00—Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/02—Terminal devices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/033—Indexing scheme relating to G06F3/033
    • G06F2203/0338—Fingerprint track pad, i.e. fingerprint sensor used as pointing device tracking the fingertip image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W12/00—Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/60—Context-dependent security
    • H04W12/61—Time-dependent
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W12/00—Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/60—Context-dependent security
    • H04W12/68—Gesture-dependent or behaviour-dependent

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Software Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Computing Systems (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • Social Psychology (AREA)
  • Image Input (AREA)
  • Telephone Function (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Collating Specific Patterns (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明涉及一种控制电子设备的方法，电子设备包括指纹传感器。通常通过用户输入设备来包括指纹传感器，以对设置有便携式电子设备的一般用户输入设备提供可能的补充和/或添加。本发明的优点包括对便携式电子设备的简化的用户控制。本发明还涉及对应的电子设备和计算机程序产品。

Description

控制电子设备的方法
技术领域
本发明涉及控制电子设备的方法，电子设备包括指纹传感器。本发明还涉及对应的电子设备和计算机程序产品。
背景技术
为了提供用于访问电子设备的增加的安全性，越来越多地使用各种类型的生物计量系统，以提供增强的用户方便性。特别地，例如由于其小的形状因子、高的性能和用户接受，指纹传感器已经被成功地集成在这样的设备中。在各种可用的指纹感测原理(诸如电容式、光学、热学等)中，电容式感测被最普遍地使用，特别是在尺寸和功耗是很重要的问题的应用中。
通常，指纹传感器仅用于提供增加的安全性，例如用于解锁电子设备。然而，还可能可以使用指纹传感器用于通过检测用户指纹的脊部和毛孔的运动并且相应地在显示器上移动指针来控制显示器上的指针的X-Y位置。
US 6 408 087中公开了这样的系统的示例，系统被配置成捕获指纹脊部和毛孔的连续的图像并且基于所捕获的连续的图像来检测脊部和毛孔的运动或变化。具体地，通过扫描传感器阵列来捕获连续的图像，每个传感器小于指纹的各个脊部的宽度。优选地，传感器阵列小于用户的指垫。
根据US 6 408 087的指纹感测系统通过指出其关于控制显示器上的指针的位置的用途，来提供指纹传感器的增加的有用性的极好的展示。然而，具体地关于电子设备的简化操作，同时考虑改善电子设备的整体功耗的期望，似乎存在进一步改进的空间。
发明内容
鉴于现有技术的以上提及的以及其他缺点，本发明的一个目的是提供被配置成至少部分通过指纹传感器的使用来控制的改进的电子设备。特别地，本发明人已经发现，指纹传感器还可以集成在电子设备的操作的整体设备情境(context)中。
根据本发明的一方面，因此提供了一种控制便携式电子设备的方法，电子设备包括被配置成显示第一图形用户界面(GUI)的显示单元、被配置成使得用户能够与第一GUI交互的第一用户输入设备、包括具有像素阵列的指纹传感器的第二用户输入设备、以及被配置成控制指纹传感器的操作的控制单元，第二用户输入设备与第一用户输入设备分离，其中方法包括以下步骤：使用第二用户输入设备检测人体皮肤的存在，其中肯定的检测导致人体活动信号；在控制单元处接收人体活动信号；响应于所接收到的人体活动信号，使用指纹传感器获取指纹图像；提取指纹图像的验证表示；将验证表示与预先存储的指纹模板进行比较；如果比较步骤导致匹配，则重复检测第二用户输入设备处的人体皮肤的存在，以确定接触的持续时间，如果确定接触的持续时间比预定义的时间短，则允许访问便携式电子设备并且使得用户能够使用第一用户输入设备与第一GUI交互，如果确定接触的持续时间比所述预定义的时间长，则允许访问便携式电子设备并且使得用户能够通过以下方式来使用第二用户输入设备与第一GUI交互：使用指纹传感器重复地获取指纹图像并且连续地将所获取的指纹图像进行比较以检测在指纹传感器上的运动的方向。
本发明基于以下认识：便携式电子设备可以设置有用于控制与其相关的第一GUI的多于一个的单个输入设备，其中输入设备之一包括指纹传感器，其目的在于，实现对电子设备的访问控制以及用于第一GUI内的导航。另外，便携式电子设备可能可以被保持在低功耗的第一状态下，并且仅在第二用户输入设备处检测到人体活动时转变到第二完全操作状态。
因此，本发明的优点包括对便携式设备的简化的用户控制，可以使得便携式设备在用户在比预定义的时间长的持续时间期间保持手指被定位在指纹传感器处的情况下有效(从低功率模式转变)、可访问(例如“未锁定”)和交互(使用第二用户输入设备和第一GUI)。
相反，为了使用第一用户输入设备(第一用户输入设备例如是布置有显示单元的触摸屏)来控制便携式电子设备，用户在比预定义的时间短的持续时间期间简单地将手指保持定位在指纹传感器处。因此，理想的是调节预定义的时间以对应于对于哪个用户输入设备应当用于导航第一GUI的指示。因此，预定义的时间可以由用户来配置并且可以诸如根据期望来调节。在本发明的一般实现中，预定义的时间可以被预先设置为大约2秒。然而，预定义的时间可以更短和更长并且可能可以取决于用于指纹验证的通常时间。
在本发明的可能的替选实施例中，用于激活第二用户输入设备的相对较长的持续时间可以另外包括指纹传感器上的“双弹(double tap)”或“双击(double click)”。因此，指纹传感器的表面上的双触摸将另外被包括在第二用户输入设备处存在人体皮肤以确定接触的持续时间的步骤中。
根据本发明，控制单元优选地是ASIC、微处理器或者用于控制指纹传感器的操作的任何其他类型的计算设备。这样，控制单元可以形成第二用户输入设备的组成部分。然而，控制单元也可以是通过便携式电子设备包括的一般控制单元，例如被配置用于控制电子设备的整个操作。
如以上所指出的，指纹传感器可以使用任何种类的当前或未来的指纹感测原理来实现，包括例如电容式、光学、或热学感测技术。然而，当前，电容式感测是最优选的。
如以上所讨论的，在检测到人体皮肤的存在时，人体活动信号被生成并且被控制单元接收。活动信号可以被配置成使控制单元从低功耗的第一状态向第二完全操作状态转变，在低功耗的第一状态下，仅控制单元的所选择的部分有效。活动信号例如可以被配置成生成计算中断(硬件/软件)，计算中断又例如启动通过控制单元提供的控制功能以操作指纹传感器获取指纹图像。
在本发明的实施例中，来自指纹传感器的输出可以是例如原始指纹图像数据，或者数据可以被处理并且可以然后以某条件下的图像数据的形式被提供。出于认证目的，可以从指纹图像提取指纹图案并且将其与预先存储的指纹模板相比较，指纹模板可能通过电子设备来存储，其中肯定的比较可以提供用以上提及的方式对电子设备的访问。
另外，使用第二用户输入设备的对第一GUI的导航控制优选地通过使用指纹传感器重复获取指纹图像来实现，其中连续获取的指纹图像又被相比较以检测手指如何在指纹传感器上移动。优选地，在分析连续地获取的指纹图像时检测指纹的脊部和毛孔的布置，并且可以实现第一GUI内的对应的运动。还可能可以使用第二用户输入设备来操作“虚拟”键盘。
优选地，第一GUI内的导航可以通过在第一GUI内移动指针来提供。然而，取决于其中提供有第一GUI的设备情境，例如取决于应用特定的GUI，可以替选地提供其他GUI导航概率。例如，在一些实施例中，可以使用第二输入设备(包括例如“向上”、“向下”、“向左”和“向右”)来实现“基于箭头”的导航，第二输入设备例如可以设置在第二GUI中，其中第二GUI被提供作为第一GUI的元件。这样，第二GUI可以至少部分交叠第一GUI。
如以上所提及的，指纹传感器被配置成包括用于生成指纹图像的像素阵列。在可能的实施例中，指纹传感器被配置成包括包含192×192个像素的阵列。任何其他不同地定尺寸的指纹传感器当然是可能的并且在本发明的范围内。优选地，指纹传感器能够检测长度为1或2微米或更小的手指的表面起伏。在应用电容式感测技术的情况下，每个像素包括电容式元件并且系统通过检测电容式元件的电容的变化来捕获指纹图像。
在本发明的一个实施例中，可能可以仅允许像素的子集初始时有效(即在第一低功耗状态期间)，以检测人体皮肤的存在。在这样的实施例中，可以将来自一个或多个像素子集的组合输出与预定义的阈值相比较，其中组合输出超过阈值导致人体活动信号的生成。可能可以允许在比较时使用多于一个预定义的阈值，例如以在与单个像素子集相比较时允许一个特定阈值而在比较来自多于一个单个像素子集的组合结果时允许第二特定阈值。优选地，一个单个像素子集至少是8×8个像素。然而，如所理解的，任何其他不同地定尺寸的子集当然可以是可能的并且在本发明的范围内。
在本发明的实施例中，GUI被第一或第二用户输入设备导航是相同的，并且第二用户输入设备在导航GUI时被提供作为第一用户输入设备的替选。然而，可以优选的是，在仅使用第二用户输入设备的交互的情况下提供具体地被适配的GUI。具体地被适配的GUI(类似于以上所讨论的)可以被设计成对应于应用特定的设备情境。例如，在一个实施例中，可以在GUI内设置弹出，其中弹出被设计成对应于使用指纹传感器被变得可能的导航功能。
在另一实施例中，当第二用户输入设备用于控制GUI时，还可能可以仅允许访问一些所选择的应用。这样的应用例如可以包括具有很高的安全性和/或个性化的应用，诸如例如电子邮件客户端、具有个性化书签的web浏览器等。
另外，在一个实施例中，还可能可以将使用第二用户输入设备提供的导航功能与和第一用户输入设备的用户交互相组合。例如，可能可以使用第二用户输入设备选择GUI内存在的对象(诸如图形编辑器内的元素)并且使用第一用户输入设备变换对象(例如尺寸、旋转、颜色等)。
根据本发明的另一方面，提供了一种便携式电子设备，包括：被配置成显示第一图形用户界面(GUI)的显示单元、被配置成使得用户能够与第一GUI交互的第一用户输入设备、包括具有像素阵列的指纹传感器并且与第一用户输入设备分离的第二用户输入设备、以及电连接到指纹传感器的控制单元，其中控制单元被配置成：响应于在第二用户输入设备处检测到人体皮肤来接收人体活动信号，响应于所接收到的人体活动信号，使用指纹传感器获取指纹图像；提取指纹图像的验证表示；将验证表示与预先存储的指纹模板进行比较；如果比较步骤导致匹配，则响应于在第二用户输入设备处重复检测到人体皮肤来确定接触的持续时间，如果确定接触的持续时间比预定义的时间短，则允许访问便携式电子设备并且使得用户能够使用第一用户输入设备与第一GUI交互，如果确定接触的持续时间比所述预定义的时间长，则允许访问便携式电子设备并且使得用户能够通过以下方式来使用第二用户输入设备与第一GUI交互：使用指纹传感器重复地获取指纹图像并且连续地将所获取的指纹图像进行比较，以检测在指纹传感器上的运动方向。本发明的这一方面提供与以上关于本发明的前一方面讨论的类似的优点。
根据本发明的另外的方面，提供了一种计算机程序产品，包括计算机可读介质，计算机可读介质具有存储在其上的用于控制单元的计算机程序装置，控制单元被适配用于控制便携式电子设备，便携式电子设备：被配置成显示第一图形用户界面(GUI)的显示单元、被配置成使得用户能够与第一GUI交互的第一用户输入设备、包括具有像素阵列的指纹传感器的第二用户输入设备、以及被配置成控制所述指纹传感器的操作的控制单元，所述第二用户输入设备与所述第一用户输入设备分离，其中计算机程序产品包括：用于使用第二用户输入设备检测人体皮肤的存在的代码，其中肯定的检测导致人体活动信号；用于在控制单元处接收人体活动信号的代码；用于响应于所接收到的人体活动信号使用指纹传感器获取指纹图像的代码；用于提取指纹图像的验证表示的代码；用于将验证表示与预先存储的指纹模板进行比较的代码；用于在比较步骤导致匹配的情况下重复检测第二用户输入设备处的人体皮肤的存在以确定接触的持续时间的代码，用于在确定接触的持续时间比预定义的时间短的情况下允许访问便携式电子设备并且使得用户能够使用第一用户输入设备与第一GUI交互的代码，用于在确定接触的持续时间比所述预定义的时间长的情况下允许访问便携式电子设备并且使得用户能够通过以下方式来使用第二用户输入设备与第一GUI交互的代码：使用指纹传感器重复地获取指纹图像并且连续地将所获取的指纹图像进行比较以检测在指纹传感器上的运动的方向的代码。同样，本发明的这一方面提供与以上关于本发明的前一方面讨论的类似的优点。
如以上所提及的，控制单元优选地是ASIC、微处理器或者任何其他类型的计算设备。类似地，由控制单元执行用于操作本发明的系统的软件可以存储在计算机可读介质上，计算机可读介质是任何类型的存储器设备，包括可移除非易失性随机存取存储器、硬盘驱动器、软盘、CD-ROM、DVD-ROM、USB存储器、SD存储卡、或者本领域已知的类似的计算机可读介质中的一种。
总之，本发明涉及一种控制电子设备的方法，电子设备包括指纹传感器。通常通过用户输入设备来包括指纹传感器，以对设置有便携式电子设备的一般用户输入设备提供可能的补充和/或添加。本发明的优点包括对便携式电子设备的简化的用户控制。
在研究所附权利要求和以下描述时，本发明的另外的特征和优点将变得很清楚。技术人员认识到，可以在不偏离本发明的范围的情况下将本发明的不同特征组合以产生不同于以下描述的实施例的实施例。
附图说明
根据以下详细描述和附图将很容易理解本发明的各个方面、包括其特定特征和优点，在附图中：
图1a和1b示意性地例示根据本发明的电子设备的实施例，其为包括集成的指纹传感器的移动电话的形式；
图2示意性地示出被包括在图1中的电子设备中的指纹传感器阵列；
图3是例示在与预定义的阈值比较时来自图2中的指纹传感器的感测元件的集合的组合输出结果之间的比较的图；
图4图示使用图2中的指纹传感器捕获的指纹图像的示例；
图5a-5c图示使用指纹传感器的GUI控制的可能的实施例；以及
图6是图示根据本发明的电子设备的操作的流程图。
具体实施方式
现在将参考示出了本发明的当前优选实施例的附图来在下文中更全面地描述本发明。然而，本发明可以用很多不同的形式来实施并且不应当别理解为限于这里给出的实施例。相反，这些实施例被提供用于详尽性和完整性，并且向技术人员全面地表达本发明的范围。相同的附图标记自始至终指代相同的元素。
现在转向附图，并且具体地是图1a，以具有集成的指纹传感器102和显示单元104的移动电话100的形式示意性地图示根据本发明的电子设备的示例实施例，显示单元104具有触摸屏界面106。在本实施例中，指纹传感器102和显示单元104一起布置在移动电话100的正面。指纹传感器102例如可以用于锁定移动电话100和/或用于认证使用移动电话执行的交易等。下面讨论使用指纹传感器102提供的另外的功能。
图1b示意性地图示根据本发明的电子设备的替选实施例，其中显示单元104仍然布置在移动电话100'的正面，移动电话100'具有替选地布置在移动电话100'背面的指纹传感器102。
优选地并且技术人员清楚的，图1a和1b所示的移动电话100/100'还包括用于WLAN/Wi-Fi通信的第一天线、用于电信通信的第二天线、麦克风、扬声器和电话控制单元。另外的硬件元件当然有可能通过移动电话来包括。还应当注意，本发明可以关于任何其他类型的便携式电子设备来应用，诸如笔记本电脑、远程控制、平板电脑、或者任何其他类型的当前或未来的类似地配置的设备。
参考图2，在概念上图示指纹传感器102的在某种程度的放大视图。在采用电容式感测技术的情况下，指纹传感器102被配置成包括许多个感测元件(优选地被布置为二维阵列)。感测元件例如可以被布置为感测元件的集合，其中这样的集合例如可以包括8×8个感测元件(也被称为像素)。这样的感测元件的示例性集合在图2中用附图标记202来指示。
在本发明的实施例中，可以具体地配置单个或多个感测元件202的集合用于检测人体皮肤的存在。例如，在图2所示的所说明的实施例中，两个集中布置的感测元件的集合202'和202”被配置用于提供这样的功能(当然可以被布置在指纹传感器102的二维区域内的任何地方)。可以组合感测元件的集合202'、202”中的每个的像素值输出作为例如8×8个像素值的总和。又可以将来自这样的感测元件的集合202'、202”中的一个的总和与预定的阈值相比较，并且在总和大于阈值的情况下，可以将其作为存在人体皮肤的指示，从而导致要向控制单元提供的先前讨论的人体活动信号的生成。
另外参考图3，来自感测元件的集合202'、202”中的单个集合的总和通过附图标记302被指示为随着时间变化。另外，还可能可以将来自多于感测元件的一个单个集合202'、202”的像素值之和进行组合，例如如附图标记304所指示的。这样，可以将来自感测元件的一个单个集合的总和302与第一阈值306相比较，并且可以将来自多于感测元件的一个单个集合的经过组合的总和304与第二阈值308相比较。
现在转向图4，其图示使用指纹传感器102捕获的指纹图像402的示例。指纹传感器102能够感测人体皮肤的表面起伏，并且提供基于像素的图像以为了提取要与预先存储的指纹模板相比较的验证表示的目的进行进一步处理。为了确定指纹传感器102上的合成运动方向，控制单元控制指纹传感器102连续地捕获包括用户的指纹的脊部和和谷部的指纹图像402。
在本发明的实施例中，控制单元可以被配置成分析至少两个在时间上不同的图像，以确定指纹在平行于由指纹传感器102的表面定义的平面的X和Y方向上的运动。控制单元随后计算对应于指纹在至少两个在时间上不同的图像之间的运动的X和Y位移值。X和Y位移值又用于例如通过调节GUI内所示的指针的位置来控制移动电话100/100'的显示单元104上所示的GUI的操作。应当注意，与控制单元组合的指纹传感器102可以被配置成还检测指纹传感器102的表面上的指纹的压力的变化以识别用户的鼠标点击命令，该命令随后可以用于响应于这样的命令来控制GUI的所选择的部分。另外，压力的检测还有可能可以用于指示第三(Z)维度的位移值，以共同提供X、Y和Z位移值。
图5a-5c提供通过用户在指纹传感器102的表面上移动其手指来使用指纹传感器102控制GUI的示例。在图5a中具体示出的所例示的实施例中，用户处于移动电话100'的“单手”控制可行的情况下，并且因此指纹传感器优选地布置在移动电话100'的背面。在本实施例(图5a)中，所示的例示的应用(App)是web浏览器。因此，这样的应用的典型的GUI控制(即应用的设备情境)可以使得期望提供指针502，例如以简化点击web页面内内的可用链接这一过程。替选地，参考图5b，关于另一应用，(诸如邮件客户端)，可以优选的是取而代之使用导航箭头。导航箭头可以明确地可视化为邮件客户端内的GUI叠加层(overlay)。然而，使用导航箭头的功能也可以是隐含的，诸如步进穿过电子邮件的列表504。在任何情况下，列表504的隐含的导航或者使用导航箭头的明确的连接通过如以上所讨论的手指在指纹传感器102上的运动来提供。
在本发明的另外的实施例中，如果判定包括指纹传感器102的第二用户输入设备应当用于控制GUI，则还可能可以将被具体地适配用于使用指纹传感器102进行控制的第二GUI 506可视化。这样的第二GUI 506可以在具体地适配的应用(例如包括对其他频繁地使用的应用(例如Facebook app、web浏览器、相机app、呼叫者app)的短的链接列表)内被单独地提供。替选地，第二GUI 506可以被提供作为对于被提供用于控制当前可视化的应用的一般GUI的叠加层。
最后转向图6，其示出本发明的便携式电子设备(诸如移动电话100/100')的示例性一般操作。通常，过程由处于待机模式(诸如被适配用于低功耗的模式)的控制单元来启动。一旦用户在指纹传感器102的表面上定位手指时，感测元件的集合202'、202”中的至少一个发现与人体皮肤的接触，从而使得来自感测元件的一个集合的像素值的综合最终变为大于预定的阈值306/308，即检测到手指S1。在本发明的实施例中，仅感测元件的所限定的集合202'/202”有效，即指纹传感器102的像素阵列的其余部分通常在例如低功率模式期间不被激活。
在像素总和高于阈值306/308之后，生成人体活动信号并且将其提供给控制单元。控制单元接收S2人体活动信号并且使控制单元例如在跟随所启动的中断例程之后转变到完全操作模式。一旦处于完全操作模式，控制单元就激活指纹传感器102的全部像素阵列并且获取S3指纹图像402。基于指纹图像402，提取验证表示S4。然后将验证表示与预先存储的指纹模板相比较S5。指纹模板可以本地存储在移动电话100/100'的电子存储器元件处，或者可以从提供指纹模板的安全存储的远程位置来获取。
如果验证表示与指纹模板之间的比较是匹配，则指纹传感器102用于人体皮肤的重复检测以确定S6接触的持续时间。如果接触的持续时间相对较短，诸如在2秒以下，则使得移动电话100/100'对于用户而言可访问S7，并且允许用户使用第一指纹输入设备(诸如设置有移动电话100/100'的显示单元104的触摸屏106)来与移动电话100/100'的GUI交互S8。
然而，如果接触的持续时间很长，诸如例如等于或大于2秒(请注意，所指示的持续时间仅是指示可能的实现的示例)，则简单地使得移动电话100/100'对于用户而言可访问S9，并且允许用户使用第二指纹输入设备来与移动电话100/100'的GUI交互S10。使用第二用户输入设备的交互通过以下方式来实现：使用指纹传感器102重复地获取指纹图像402并且连续地将所获取的指纹图像402相比较以检测在指纹传感器102上的运动方向。在本发明的可能的实施例中，指纹的具体的脊部和毛孔的位置根据指纹图像402来计算，并且这些具体的脊部和毛孔的移动涉及手指在指纹传感器102的表面处的X和Y位移。X和Y位移因此又可以用于对设置在移动电话100/100'的显示单元104上的GUI的控制。
本公开内容的控制功能可以使用现有的计算机处理器、或者通过包括用于这一或其他目的的用于适当的系统的专用计算机处理器、或者通过硬连线系统来实现。本公开内容的范围内的实施例包括计算机产品，计算机产品包括用于承载或具有存储在其上的机器可执行指令或数据指令的机器可读介质。这样的机器可读介质可以是通用或专用计算机或者其他具有处理器的机器能够访问的任意可用介质。举例而言，这样的机器可读介质可以包括RAM、ROM、EPROM、EEPROM、CD-ROM或者其他光盘存储装置、磁盘存储装置或其他磁性存储设备、或者能够用于承载或存储为机器可执行指令或数据结构的形式的期望的程序代码并且能够被通用或专用计算机或者其他具有处理器的机器访问的任何其他介质。当通过网络或其他通信连接(硬连线、无线、或硬连线或无线的组合)向机器传送或提供信息时，机器将连接适当地视为机器可读介质。因此，任何这样的连接被适当地称为机器可读介质。以上的组合也被包括在机器可读介质的范围内。机器可执行指令包括例如引起通用计算机、专用计算机、或专用处理机执行某个功能或功能的组的指令和数据。
虽然附图可以示出序列，然而步骤的顺序可以不同于所描绘的。另外，可以同时或者部分同时地执行两个或多个步骤。这样的变型取决于所选择的软件和硬件系统以及设计者选择。所有这样的变型在本公开内容的范围内。同样，软件实现可以通过基于规则的逻辑和其他逻辑使用标准编程技术来完成以完成各种连接步骤、处理步骤、比较步骤和判决步骤。另外，虽然参考其具体示例性实施例来描述本发明，然而本领域技术人员将很清楚很多不同的替选、修改等。
另外，技术人员在实践要求保护的本发明时可以根据对附图、公开内容和所附权利要求的研究来理解和影响对所公开的实施例的变型。另外，在权利要求中，词语“包括”不排除其他元素或步骤，并且不定冠词“一”或“一个”不排除多个。

Claims (14)

1.一种控制便携式电子设备的方法，所述电子设备包括被配置成显示第一图形用户界面GUI的显示单元、被配置成使得用户能够与所述第一GUI交互的第一用户输入设备、包括具有像素阵列的指纹传感器的第二用户输入设备、以及被配置成控制所述指纹传感器的操作的控制单元，所述第二用户输入设备与所述第一用户输入设备分离，其中所述方法包括以下步骤：
使用所述第二用户输入设备检测人体皮肤的存在，其中肯定的检测导致人体活动信号的生成；
在所述控制单元处接收所述人体活动信号；
响应于所接收到的人体活动信号，使用所述指纹传感器获取指纹图像；
提取所述指纹图像的验证表示；
将所述验证表示与预先存储的指纹模板进行比较；
如果所述比较步骤导致匹配：
则重复检测所述第二用户输入设备处的人体皮肤的存在，以确定接触的持续时间，
如果确定所述接触的持续时间比预定义的时间短：
则允许访问所述便携式电子设备，以及
使得所述用户能够使用所述第一用户输入设备与所述第一GUI交互，
如果确定所述接触的持续时间比所述预定义的时间长：
则允许访问所述便携式电子设备，以及
使得所述用户能够通过以下方式来使用所述第二用户输入设备与所述第一GUI交互：使用所述指纹传感器重复地获取指纹图像并且将连续获取的指纹图像进行相互比较，以检测在所述指纹传感器上的运动的方向。
2.根据权利要求1所述的方法，其中，所述控制单元在接收到所述人体活动信号时从低功耗的第一状态转变到第二操作状态。
3.根据权利要求1或2中的任一项所述的方法，其中，所述人体活动信号被配置用于启动所述控制单元内的中断例程。
4.根据权利要求1或2中的任一项所述的方法，其中，所述预定义的时间能够通过所述用户操作所述便携式电子设备来配置。
5.根据权利要求1或2中的任一项所述的方法，还包括提供第二GUI的步骤，所述第二GUI被配置用于与所述第二用户输入设备的交互，所述第二GUI被设置作为所述第一GUI的元件。
6.根据权利要求5所述的方法，其中，所述第二GUI是取决于获取用户输入的应用而适配的设备情境。
7.根据权利要求6所述的方法，其中，所述第二GUI被设置作为与所述第一GUI相关的叠加层。
8.一种便携式电子设备，包括：
显示单元，被配置成显示第一图形用户界面GUI；
第一用户输入设备，被配置成使得用户能够与所述第一GUI交互；
第二用户输入设备，包括具有像素阵列的指纹传感器，所述第二用户输入设备与所述第一用户输入设备分离；以及
控制单元，电连接到所述指纹传感器，其中所述控制单元被配置成：
响应于在所述第二用户输入设备处检测到人体皮肤来接收人体活动信号；
响应于所接收到的人体活动信号，使用所述指纹传感器获取指纹图像；
提取所述指纹图像的验证表示；
将所述验证表示与预先存储的指纹模板进行比较；
如果所述比较导致匹配，则响应于在所述第二用户输入设备处重复检测到人体皮肤来确定接触的持续时间；
如果确定所述接触的持续时间比预定义的时间短：
则允许访问所述便携式电子设备，以及
使得所述用户能够使用所述第一用户输入设备与所述第一GUI交互，
如果确定所述接触的持续时间比所述预定义的时间长：
则允许访问所述便携式电子设备，以及
使得所述用户能够通过以下方式来使用所述第二用户输入设备与所述第一GUI交互：使用所述指纹传感器重复地获取指纹图像并且将连续获取的指纹图像进行相互比较，以检测在所述指纹传感器上的运动方向。
9.根据权利要求8所述的便携式电子设备，其中，所述指纹传感器采用电容式感测技术。
10.根据权利要求8或9中的任一项所述的便携式电子设备，其中，所述控制单元还被配置用于所述便携式电子设备的一般操作。
11.根据权利要求8或9中的任一项所述的便携式电子设备，其中，所述指纹传感器的像素的至少一个子集被配置用于对人体皮肤的检测以生成所述人体活动信号。
12.根据权利要求8或9中的任一项所述的便携式电子设备，其中，所述指纹传感器包括至少192×192个像素。
13.根据权利要求8或9中的任一项所述的便携式电子设备，还包括用于数据通信的装置，其中所述指纹模板被距离所述便携式电子设备远程地存储并且从远程位置处获取以与所述验证表示进行比较。
14.根据权利要求8或9中的任一项所述的便携式电子设备，其中，所述便携式电子设备是移动电话。
CN201580000895.1A 2014-02-21 2015-02-18 控制电子设备的方法 Active CN105264536B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
SE1450208-2 2014-02-21
SE1450208 2014-02-21
PCT/SE2015/050187 WO2015126317A1 (en) 2014-02-21 2015-02-18 Method of controlling an electronic device

Publications (2)

Publication Number Publication Date
CN105264536A CN105264536A (zh) 2016-01-20
CN105264536B true CN105264536B (zh) 2017-03-22

Family

ID=53878670

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580000895.1A Active CN105264536B (zh) 2014-02-21 2015-02-18 控制电子设备的方法

Country Status (6)

Country Link
US (1) US9195878B2 (zh)
EP (1) EP3108396A4 (zh)
JP (1) JP2017509062A (zh)
KR (1) KR101773030B1 (zh)
CN (1) CN105264536B (zh)
WO (1) WO2015126317A1 (zh)

Families Citing this family (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8485442B2 (en) 2009-07-02 2013-07-16 Biometric Payment Solutions Electronic transaction verification system with biometric authentication
US10146989B2 (en) * 2009-09-09 2018-12-04 Htc Corporation Methods for controlling a hand-held electronic device and hand-held electronic device utilizing the same
KR102225944B1 (ko) * 2014-06-27 2021-03-10 엘지전자 주식회사 이동 단말기 및 이의 제어 방법
US9519819B2 (en) * 2014-07-14 2016-12-13 Fingerprint Cards Ab Method and electronic device for noise mitigation
US9721141B2 (en) * 2014-10-30 2017-08-01 Polar Electro Oy Wrist-worn apparatus control with fingerprint data
WO2016081726A1 (en) * 2014-11-19 2016-05-26 Booz Allen & Hamilton Device, system, and method for forensic analysis
JP2016115028A (ja) * 2014-12-12 2016-06-23 富士通株式会社 情報処理装置および情報処理装置の制御方法
DE102015000220A1 (de) * 2015-01-08 2016-07-14 Giesecke & Devrient Gmbh Verfahren zum sicheren Betreiben einer Computereinheit, Softwareapplikation und Computereinheit
KR20160122517A (ko) * 2015-04-14 2016-10-24 엘지전자 주식회사 이동 단말기
TWI575464B (zh) * 2015-06-04 2017-03-21 指紋卡公司 用於基於指紋的導移的方法及系統
US9977887B2 (en) * 2015-09-17 2018-05-22 Sony Mobile Communications Inc. Electronic device and method for validation of a trusted user
CN106547338A (zh) * 2015-09-22 2017-03-29 小米科技有限责任公司 指令生成方法及装置
JP6603544B2 (ja) 2015-10-28 2019-11-06 株式会社ジャパンディスプレイ タッチ検出装置、タッチ検出機能付き表示装置
CN105653259A (zh) * 2015-11-30 2016-06-08 东莞酷派软件技术有限公司 应用启动方法、装置和移动终端
CN106951754B (zh) * 2016-01-06 2018-08-31 阿里巴巴集团控股有限公司 一种信息图像显示方法及装置
CN105808122B (zh) * 2016-03-14 2017-11-24 广东欧珀移动通信有限公司 一种解锁控制方法及终端设备
CN105740690B (zh) * 2016-03-14 2018-01-19 广东欧珀移动通信有限公司 一种解锁方法及移动终端
CN105912896A (zh) * 2016-04-12 2016-08-31 深圳市金立通信设备有限公司 一种应用切换的方法及终端
SE1650750A1 (en) * 2016-05-30 2017-12-01 Fingerprint Cards Ab Fingerprint sensor with force sensor
CN106096359B (zh) 2016-05-30 2017-10-31 广东欧珀移动通信有限公司 一种解锁控制方法及移动终端
CN106227451A (zh) * 2016-07-26 2016-12-14 维沃移动通信有限公司 一种移动终端的操作方法及移动终端
KR102373566B1 (ko) * 2016-09-23 2022-03-14 삼성디스플레이 주식회사 표시 장치
CN109804652A (zh) * 2016-09-28 2019-05-24 索尼公司 设备、计算机程序和方法
US10489920B2 (en) * 2017-01-11 2019-11-26 Egis Technology Inc. Method and electronic device for determining moving direction of a finger
EP3631665A4 (en) * 2017-05-23 2021-03-03 Fingerprint Cards AB METHOD AND ELECTRONIC DEVICE FOR AUTHENTICATING A USER
EP3659025A4 (en) 2017-09-14 2020-08-19 Samsung Electronics Co., Ltd. INTERACTION ACTIVATION PROCESS USING A FINGERPRINT ON A DISPLAY AND ASSOCIATED ELECTRONIC DEVICE
SE1751288A1 (en) * 2017-10-17 2019-04-18 Fingerprint Cards Ab Method of controlling an electronic device
US10908727B2 (en) 2017-11-02 2021-02-02 Blackberry Limited Electronic device including touchpad and fingerprint sensor and method of detecting touch
EP3752938A4 (en) * 2018-02-16 2021-11-03 Fingerprint Cards AB AUTHENTICATION PROCEDURE FOR AN ELECTRONIC DEVICE
JP2019219833A (ja) * 2018-06-19 2019-12-26 ソニー株式会社 情報処理装置、ウエアラブル機器、情報処理方法及びプログラム
TWI710938B (zh) * 2019-07-24 2020-11-21 友達光電股份有限公司 顯示器
US12099668B2 (en) * 2020-09-18 2024-09-24 Oracle International Corporation Dynamic user interface mode selection based on physical activity detection

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0905646A1 (en) * 1997-09-30 1999-03-31 Compaq Computer Corporation Pointing and fingerprint identifier mechanism for a computer system
US6408087B1 (en) * 1998-01-13 2002-06-18 Stmicroelectronics, Inc. Capacitive semiconductor user input device
CN1742252A (zh) * 2003-05-21 2006-03-01 株式会社日立高新技术 内置指纹传感器的便携式终端装置
CN102804198A (zh) * 2009-06-19 2012-11-28 奥森泰克公司 具有远程的基于web的通知的手指传感器

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4353056A (en) * 1980-06-05 1982-10-05 Siemens Corporation Capacitive fingerprint sensor
US6400836B2 (en) * 1998-05-15 2002-06-04 International Business Machines Corporation Combined fingerprint acquisition and control device
GB2357335B (en) * 1999-12-17 2004-04-07 Nokia Mobile Phones Ltd Fingerprint recognition and pointing device
US7057607B2 (en) * 2003-06-30 2006-06-06 Motorola, Inc. Application-independent text entry for touch-sensitive display
JP2006189999A (ja) 2005-01-04 2006-07-20 Fujitsu Ltd セキュリティ管理方法、プログラム及び情報機器
US20070273658A1 (en) 2006-05-26 2007-11-29 Nokia Corporation Cursor actuation with fingerprint recognition
TWI416381B (zh) * 2008-03-05 2013-11-21 Mitac Int Corp Touch the sliding method
US8866347B2 (en) * 2010-01-15 2014-10-21 Idex Asa Biometric image sensing
US8791792B2 (en) 2010-01-15 2014-07-29 Idex Asa Electronic imager using an impedance sensor grid array mounted on or about a switch and method of making
US8957868B2 (en) * 2011-06-03 2015-02-17 Microsoft Corporation Multi-touch text input
US8810367B2 (en) * 2011-09-22 2014-08-19 Apple Inc. Electronic device with multimode fingerprint reader
US9729549B2 (en) * 2011-09-24 2017-08-08 Elwha Llc Behavioral fingerprinting with adaptive development
US9471764B2 (en) 2012-07-19 2016-10-18 Apple Inc. Electronic device switchable to a user-interface unlocked mode based upon spoof detection and related methods
US8896556B2 (en) * 2012-07-31 2014-11-25 Verizon Patent And Licensing Inc. Time-based touch interface
US20150186004A1 (en) * 2012-08-17 2015-07-02 Google Inc. Multimode gesture processing
US9384369B2 (en) * 2013-08-08 2016-07-05 Beijing Lenovo Software Ltd. Information processing method and electronic device

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0905646A1 (en) * 1997-09-30 1999-03-31 Compaq Computer Corporation Pointing and fingerprint identifier mechanism for a computer system
US6408087B1 (en) * 1998-01-13 2002-06-18 Stmicroelectronics, Inc. Capacitive semiconductor user input device
CN1742252A (zh) * 2003-05-21 2006-03-01 株式会社日立高新技术 内置指纹传感器的便携式终端装置
CN102804198A (zh) * 2009-06-19 2012-11-28 奥森泰克公司 具有远程的基于web的通知的手指传感器

Also Published As

Publication number Publication date
US9195878B2 (en) 2015-11-24
EP3108396A1 (en) 2016-12-28
WO2015126317A1 (en) 2015-08-27
KR20160126979A (ko) 2016-11-02
US20150269409A1 (en) 2015-09-24
CN105264536A (zh) 2016-01-20
EP3108396A4 (en) 2017-10-18
KR101773030B1 (ko) 2017-08-30
JP2017509062A (ja) 2017-03-30

Similar Documents

Publication Publication Date Title
CN105264536B (zh) 控制电子设备的方法
US11481109B2 (en) Multitouch data fusion
EP3234863B1 (en) Fingerprint enrollment using touch sensor data
EP3317811B1 (en) Fingerprint authentication with template updating
EP2742412B1 (en) Manipulating layers of multi-layer applications
WO2016036304A1 (en) Pseudo random guided fingerprint enrolment
US9436862B2 (en) Electronic apparatus with segmented guiding function and small-width biometrics sensor, and guiding method thereof
US9092652B2 (en) Zero reference based ridge flow map
US20150116086A1 (en) Electronic device and method of providing security using complex biometric information
KR20160096390A (ko) 터치 센서를 구비한 전자 장치 및 그 구동 방법
CN103294257B (zh) 对于手写识别用于引导手写输入的装置和方法
US10949640B2 (en) Method of controlling an electronic device
US20170091521A1 (en) Secure visual feedback for fingerprint sensing
CN103135745B (zh) 基于深度图像的非接触控制方法、信息设备和系统
JP4059049B2 (ja) 入力装置、情報装置及び制御情報生成方法
CN112041800B (zh) 指纹感测系统以及使用指纹传感器在电子装置上提供用户输入的方法
Maheshwari et al. Earprint Based Mobile User Authentication Using Convolutional Neural Network and SIFT

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20211201

Address after: Gothenburg

Patentee after: Fingerprint kaana Kadun Intellectual Property Co.,Ltd.

Address before: Gothenburg

Patentee before: FINGERPRINT CARDS AB