CN104281793A - 利用非触摸手势的密码 - Google Patents

利用非触摸手势的密码 Download PDF

Info

Publication number
CN104281793A
CN104281793A CN201410311177.3A CN201410311177A CN104281793A CN 104281793 A CN104281793 A CN 104281793A CN 201410311177 A CN201410311177 A CN 201410311177A CN 104281793 A CN104281793 A CN 104281793A
Authority
CN
China
Prior art keywords
password
gesture
equipment
processor
definition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410311177.3A
Other languages
English (en)
Other versions
CN104281793B (zh
Inventor
皮特·曼考斯基
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BlackBerry Ltd
Original Assignee
BlackBerry Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BlackBerry Ltd filed Critical BlackBerry Ltd
Publication of CN104281793A publication Critical patent/CN104281793A/zh
Application granted granted Critical
Publication of CN104281793B publication Critical patent/CN104281793B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures

Abstract

本发明描述了一种使用利用非触摸手势的密码的方法和设备。该设备包括两个或更多个环境光传感器，被布置在所述设备的相应表面位置，所述两个或更多个环境光传感器中的每一个测量在所述相应表面位置处的光强度。该设备还包括：第一处理器，用于执行设备上的密码应用；以及，第二处理器，用于检测由与所述设备进行非触摸通信的对象执行的两个或更多个手势，并基于所述两个或更多个手势来定义或验证密码。

Description

利用非触摸手势的密码
背景技术
许多计算和通信设备便于锁定设备以防止未授权使用。通常，锁定是经由一系列键盘或触摸屏输入完成的。一旦设备被锁定，授权用户必须输入密码来恢复设备的完全功能。该密码输入通常还经由键盘或触摸屏输入来完成。
附图说明
为了更全面地理解本公开，现在结合附图和详述，参照以下简要描述，附图中相似的附图标记表示相似的部分。
图1示出了包括环境光传感器的示例性布置的设备；
图2描绘了图1中所示的设备的另一视图；
图3示出了根据另一实施例的包括环境光传感器的示例性布置的设备；
图4示出了根据另一实施例的包括环境光传感器的示例性布置的设备；
图5是用于处理手势的系统的框图；
图6是用于控制两个或更多个环境光传感器的系统的框图；
图7示出了检测手势的方法的处理流程；
图8是如本文所述的便于非触摸手势检测的示例性设备的框图；
图9是根据实施例的用于定义一个或更多个密码的方法的处理流程；
图10示出了定义密码的示例性手势序列；以及
图11是根据实施例的利用非触摸手势输入和识别密码的方法处理流程。
具体实施方式
首先应当理解，尽管以下提供了本公开的一个或多个实施例的示意性实施方式，但是所公开的系统和/或方法也可以使用任何数量的技术而实现，不论这些技术是当前已知还是已存在。本公开绝不应局限于包括本文示意和描述的示例性设计和实施方式在内的以下所示的示意性实施方式、附图和技术，而是可以在所附权利要求的范围及其等同替换方式的整个范围内进行修改。
如上所述，很多设备便于锁定或禁用设备功能中的大多数或所有设备功能，并需要密码输入来重新获得设备的完全功能。该密码输入通常是经由键盘或触摸屏输入来完成的。然而，在许多情况下，这些密码输入的方法可能困难。例如，在一些工作环境(例如石油钻探设备、操作室)中，设备的授权用户可能没有足够干净的手以操作触摸屏输入、触摸板或键盘。在其他环境(例如操作室或低温位置)中，授权用户可能不想脱掉手套来对触摸屏或小键盘进行操作。本文描述了用于识别手势的系统和方法。此外，实施例描述了使用非触摸手势来便于密码输入的系统和方法。
图1示出了包括环境光传感器110的示例性布置的设备100。设备100可以是任何计算、通信或数据存储设备，例如平板计算机、膝上型计算机、智能电话、音乐播放器、存储设备等。图1所描绘的图示示出了向用户显示信息的机身125表面上的设备100的屏幕120(例如玻璃或其他透明表面)，该信息可以是基于用户选择或由设备100生成的。设备所生成的信息可以包括通信连接(移动网络、wifi连接、蓝牙连接等)、电话呼叫或电子消息或其任何组合的状态。屏幕120可以充当设备100和用户之间的输入/输出(I/O)。图1中所示的示例性设备100具有占据设备100的一个表面的大部分的屏幕120。其他示例性设备100可以取而代之地包括键盘或其他组件，使得屏幕120相对于设备100的表面大小的相对大小小于图1中所示的大小(例如见图4)。三个环境光传感器(ALS)110x、110y、110z布置在图1中屏幕120的下方。尽管所示ALS110布置在屏幕120的下方以保护免受环境和意外损坏，然而因为屏幕120是允许环境光穿过的透明设备元件，不论ALS布置在屏幕120上方还是下方，ALS110接收相同强度的环境光或至少充足的环境光以检测环境光的改变。屏幕120包括可以过滤或漫射一些光(例如特定范围的光波长)的玻璃或聚合物外层。如本文所描述的用于检测的充足的光穿过屏幕120的外层。环境光是指使用设备100的环境中可用的光(光的亮度和方向)。因此，ALS110是被动设备。例如，ALS110不具有用于提供由ALS110检测的光的设备100上的发射器并且不与其相关联。在另一示例中，设备100不为了手势检测的目的而发射光。在一个示例中，环境光是在设备所在的环境中存在的光。
图2描绘了图1中所示的设备100的另一视图。图2所示的图示包括光源210。该光源210可以是太阳、灯或在使用设备100的给定环境中提供可用光的光源的某种组合。如果白天时设备100在户外，太阳提供环境光，该环境光是扩频光。如果设备正用在没有外窗的室内，则由室内发光系统(例如灯、荧光灯泡、白炽灯泡、LED等)生成环境光。环境光还可以是自然光(例如日光)和人造光(例如荧光、白炽光)的组合。每个ALS110输出与所测量的光强度115相对应的电流电平(例如见图5)。模数转换器可以用于从ALS110导出数字输出。ALS中的每个可以具有可调灵敏度(可调增益设置)。每个ALS还可以是具有在两个或更多个范围(波长频带或范围)中的可选操作范围的扩频传感器。以下参考图6讨论在此选择中进行的处理。每个ALS110的操作的完全范围可以接近可见光的波长范围(400nm至700nm)。通常商业上可用的ALS可以检测例如350nm至700nm波长范围中的环境光。因为每个ALS110测量其接收区域(见例如230y和230y’定义ALS110y的接收区域，230z和230z’定义ALS110z的接收区域)中的可用(环境)光的强度，ALS110是不需要对应发射器或发射机的被动传感器。接收区域通常是圆锥体形，圆锥体尺寸由半灵敏度的角度确定。图2是示例性接收区域的截面图。每个ALS110可以以提供每平方米的流明的测量的光度单位(勒克斯)或以提供每平方米的瓦特的测量的辐射度单位(辐照度)来测量其接收区域中的光强度115。在图1和图2所示的实施例中，三个ALS110x、110y、110z以三角形图案布置。即，至少一个ALS110与至少两个其他ALS110偏离或不线性对齐。
通过包括两个或更多个ALS110(例如三个ALS110x、110y、110z)，图1和图2中所示的设备100便于对对象240的手势的检测，由于对象240的移动，所述手势改变ALS110中的一个或更多个ALS110的检测区域中的光强度115(例如见图5)。通过以三角形图案包括具有三个或更多个ALS110中的至少三个的三个或更多个ALS110，可以以三维识别对象240的移动。如以下进一步详述，基于在不同时刻或测量周期由ALS110中的每一个测量的由于对象240的移动导致的光强度115的改变，检测和识别手势。即，ALS110中的每个ALS110在给定时刻与其他ALS110同时或在测量周期中与其他ALS110按顺序测量光强度115，使用对不同时刻或测量周期的光强度115测量的比较来检测手势。例如，假定ALS110在图2所示的时刻同时(或近似同时)测量光强度115，对象240被放置为使得由ALS110z检测的光强度115受影响，但由ALS110x和110y检测的光强度115不受对象240的影响。基于对象240的移动方向，由ALS110x、110y、110z中的不同ALS检测的光强度115可能在不同时刻受对象240的位置的影响。对象240可以是手、一个或更多个手指、棒或另一非透明物体，它们部分地或完全地阻挡环境光的通过，使得可以基于对所测量的光强度115的作用来检测其位置。
无触摸手势可以模仿划动(还被称为挥动)，划动是触摸敏感显示器上的特定类型的触摸。划动或挥动可以从原点开始并持续到终点(例如手势的结束点)。手势可以由手势的属性或特性来识别，如以下进一步讨论。这些属性可以包括例如(ALS110检测的)原点、终点、对象240行进的距离、持续时间、速度和方向。手势在距离和/或持续时间上可长可短。可以利用手势的两点来确定手势的方向。手势还可以包括悬停。悬停可以是对象240在一个时段内在大致不变的位置不移动。
在图1和图2中所示的ALS110的布置中，可以要求ALS110x、110y和110z之间的最小距离(例如ALS110y和110z之间的距离220)以区分对象240的移动。该最小距离通常是2厘米(cm)的数量级。更具体而言，ALS110之间的最小距离是基于对象240的预期大小作为一个因素。例如，与使用一个手指作为对象240时相比，当使用张开的手作为对象240时，可能需要更大的最小距离来区分手势。这是因为在更多时刻，张开的手会覆盖所有三个ALS110x、110y、110z，使得仅当对象240处于ALS110x、110y、110z集合的边缘时，张开的手的移动才能被区分出来。根据一个或更多个实施例，ALS110可以位于角部或沿着屏幕120的边缘，因此屏幕120大小可以确定ALS110之间的距离。当预期张开的手作为用于执行手势的对象240时，ALS110之间的最小距离可以使用3.5cm。ALS110之间的增加的距离便于更清晰地区分手势(例如方向、速度)，因为对于多数手势移动，张开的手对象240将不会覆盖所有ALS110。
另一必须考虑的距离是对象240和ALS110之间的距离(例如对象240和ALS110z之间的距离)。首先，如图2明确示出，对象240必须在光源210和ALS110之间，以便由ALS110中的一个或更多个ALS110基于对象240对由ALS110中的一个或更多个ALS110所检测的光强度115的作用来对对象240进行检测。尽管通常在对象240和ALS110之间不要求最小距离(即对象240可能几乎触摸屏幕120表面)，对象240在执行手势时通常距离屏幕120有2-3cm远。当对象240离ALS110(屏幕120表面)太近时，则可能检测不到手势的开始或结束的某个部分。这是由于ALS110的接收区域的宽度(如例如在图2的截面图中的230y和230y’以及230z和230z’所示)是在ALS110的表面处最窄的，并随着与ALS的距离增加而增加。因此，从图2中可以清楚地看到，距离上更靠近ALS110(屏幕120表面)的对象240还必须更靠近ALS110的中心(在垂直尺寸上，沿着屏幕120)以进入ALS110的接收区域。通过将对象240悬停在给定ALS110之上并将其移动更远离(降低对象240作用并增加光强度115测量)或更靠近一起(增加对象240作用并降低光强度115测量)，可以作出与鼠标点击类似的手势。因此，可以将双击和三击手势添加到可用可区分手势。
图3示出了根据另一实施例的包括环境光传感器110的示例性布置的设备100。图3中所示的示例性设备100与图1和图2中所示的设备100相似在于屏幕120占据设备100的一个表面中的大部分。图3中所示的设备100包括被布置在屏幕120的周长周围的七个ALS110a、110b、110c、110d、110e、110f、110g。如图3所示，ALS110a偏离ALS110b、110c和110d的公共轴线111以及ALS110e、110f和110g的公共轴线111’。在备选实施例中，可以布置ALS110b、110c和110d或ALS110e、110f和110g中的一个或更多个ALS，使得它们不分别沿着111或111’与其他ALS线性对齐。例如，ALS110c和ALS110f可以布置在更靠近屏幕120的中心并因此分别偏离ALS110b和110d公共的轴线111以及ALS110e和110g公共的轴线111’。增加ALS110的数量增加了设备100可以检测的手势的数量。例如，图3示出了一个挥手手势(对象240从设备100的一侧向另一侧移动)。因为在屏幕120周长周围的ALS110的数量，可以与图3中所示的挥手手势区分的其他挥手手势也是可能的。对象240可以从ALS110d和110e移动到ALS110a或从ALS110d移动到ALS110g。应当注意，如果ALS110更靠近地聚集在一起并且对象240是手(如图3所示)，则与当如图所示布置ALS110时相比，更少的可区别手势是可能的。
图4示出了根据另一实施例的包括环境光传感器110的示例性布置的设备100。不同于图1-3中所示的示例性设备100，图4中所示的设备100将键盘或其他组件包括在空间410中，使得屏幕120相对于图1-3中所示的屏幕120占据设备100的一个表面中的较少部分。所示三个ALS110m、110n、110o在屏幕120的周长附近。如上所述并如图1中所示，ALS110m、110n、110o可以更靠近地布置在一起，使得对象240作出的手势更类似于触摸板的用户利用手指作出的手势。
图5是用于处理手势的系统500的框图。以下参考特定组件讨论系统500执行的功能。然而，在备选实施例中，系统500可以使用用于本文所讨论的多于一个功能的一个或更多个处理器和一个或更多个存储设备来处理手势。此外，与以下讨论的处理器和存储设备相同的处理手势的处理器和存储设备可以在设备100中执行其他功能。例如，用于识别手势的处理器可以是通常在智能电话或平板计算机中可用的若干数字信号处理器(图8中的DSP801)之一。
对系统500的输入是从ALS110中的每一个测量的光强度115。包括存储器和处理器功能的数据收集引擎510接收测量。在从ALS110中的每一个接收到光强度115测量数据时，数据收集引擎510输出针对每个时刻的数据帧520。即，每个数据帧520包括在给定时刻针对每个ALS110的光强度115测量。尽管通常可以将每个数据帧520讨论为包括在给定时刻针对每个ALS110的光强度115测量，ALS110可以取而代之地依次(而不是同时)对光强度115进行采样，使得数据帧520包括针对ALS110的一个周期的时间段的光强度115测量。充当手势识别器530的处理器接收每个数据帧520。手势识别器530可以根据如下文所讨论的若干实施例之一进行操作。
为了将对象240的移动识别为特定(已知)手势，手势识别器530使用如下文所讨论的ALS110的光强度115测量的比较，以及与模板存储设备535中所存储的手势模板537的比较。可以基于预期的噪声和误差来设置光强度115中的动态调整的最小改变。即，在所检测的光强度115中的改变被解释为周围光的真实变化之前，可以需要所检测的光强度115中改变的阈值百分比。基于数据帧520(针对单个时刻或测量周期)内ALS110之间的光强度115测量，手势识别器530可以确定对象240的位置。例如，对于给定数据帧520，如果ALS110d和110f的光强度115测量高于(超出定义的阈值)由ALS110e输出的光强度115测量，则可以确定对象240在ALS110e之上并从而阻挡来自光源210的一些光。基于两个或更多个数据帧520(两个或更多个时刻或测量周期)之间的光强度115测量，手势识别器530可以确定(移动)手势的特性，例如移动的方向、移动的速度和移动是加速还是减速。例如，如果一个数据帧520中ALS110d和110f的光强度115测量比由ALS110e输出的光强度115测量高(超出定义阈值)，并且下一数据帧520中ALS110e的光强度115测量比由ALS110d和110f输出的光强度115测量高(超出定义阈值)，则手势识别器530可以确定对象240从ALS110e的方向向ALS110d和110f的方向移动。如果在若干数据帧520期间发生光强度115测量的改变，则可以将对象240的移动确定为比在改变发生在一个数据帧240过程期间的情况相对更慢。基于所确定的手势特性，手势识别器530可以基于手势模板537在已知手势集合中识别手势。
手势模板537有助于将手势识别器530识别的对象240的移动与特定已知手势进行关联。手势模板537可以被认为是与每个已知手势相对应的理想光强度115测量的样本。更具体而言，手势模板537可以被认为是为给定已知手势提供ALS110或数据帧520或两者之间的理想相对光强度115。因此，通过比较输入光强度115测量(数据帧520中)或将光强度测量115与手势模板537中的理想测量进行比较，手势识别器530将对象240移动识别为已知手势。该手势的识别可以通过消除手势模板537中的已知手势的处理来完成。因此，手势识别器530可以在对象240移动完成之前，通过消除可用已知手势的处理，使用手势模板537来识别手势。在此情况下，手势识别器530可以继续处理数据帧520来验证所检测的手势，或在备选实施例中，手势识别器530可以在识别手势之后停止处理附加数据帧520并等待以下讨论的触发信号540。ALS110中的每一个可以可编程用于一秒钟提供10、20、50、10、125、15、200和250个光强度115采样(数据帧520)。ALS110扫描速率是确定作出手势的速度以便被识别的因素。即，当ALS110以每秒10个光强度115采样的速率进行采样时，最快可识别手势比当ALS110在以每秒250个光强度115采样的速率进行采样时可以作出的最快可识别手势要慢很多。以每秒10个数据帧520(每秒10个光强度115采样)的速率进行采样的ALS115可以转换为对象240以1.5秒行进10cm以被正确地识别和处理。系统610(图6)可以动态地计算并调整ALS110的扫描速率。
对手势识别器530的另一输入是手势库存储设备550中存储的手势库555之一。每个手势库555与应用相关联，并且手势识别器530选择与设备100当前正在执行的应用相关联的手势库555。与给定应用相关联的给定手势库555可能不包括手势模板537中的每个已知手势。因此，基于设备100当前正在执行的应用，手势识别器530可以缩小手势模板537中要与数据收集引擎510输出的数据帧520进行比较以识别手势的已知手势集合。手势库555指示与手势集合相对应的动作输出560。因此，当手势识别器530基于对象240的移动和手势模板537来识别已知手势，并且手势识别器530在与设备100当前正在运行的应用相关联的手势库555中的手势集合中找到已知手势时，则手势识别器530输出源于对象240移动的对应动作输出560。手势识别器530的动作输出560充当对正在执行的应用的命令。例如，当正在执行的应用是文档编辑会话时，手势识别器530所识别的手势可以对应于诸如“下一页”(向下挥手)、“前一页”(向上挥手)、“放大”(将手指放在一起)和“缩小”(将手指展开)等的动作输出560。如果设备100当前未执行任何应用或如果设备100当前正在执行的应用不具有与其相关联的手势库555，则即使手势识别器530基于对象240的移动使用手势模板537来识别已知手势，手势识别器530基于识别手势不作出动作。即，因为不存在要查找的手势库555，不存在与所识别的手势相对应的动作输出560。
根据一个实施例，当设备100未执行应用时或当设备100正在执行没有相关联的手势库555的应用时，手势识别器530可能不使用手势模板537来识别手势。根据另一实施例，手势识别器530在接收触发信号540之前可以不开始处理任何数据帧520。以下参考图6详述触发信号540。根据另一实施例，手势识别器530可以处理初始数据帧520集合，并然后在接收到触发信号540之前不处理识别手势所需的另一数据帧520集合。例如，手势识别器530可以处理特定数量的数据帧520或表示特定时间长度(时刻数)的多个数据帧520，并然后在接收到触发信号540之前停止处理其他数据帧520。根据另一实施例，手势识别器530可以在数据帧520从数据收集引擎510输出时持续处理数据帧520。
不管基于触发信号540的手势识别器530的行为如何，缺乏相关联的手势库555或完全缺乏正在执行的应用，数据收集引擎510仍输出数据帧520。这是因为即使不执行手势检测，光强度115测量仍可以用于诸如基于所检测的环境光来调整屏幕120背光等的后台功能。以下参考图6详述这些后台功能中的一些。
图6是用于控制两个或更多个环境光传感器110的系统610的框图。如参考图5所述，针对系统610描述的功能可以由一个或更多个处理器和一个或更多个存储设备执行，它们还可以执行设备100中的其他功能。系统610可以被认为是后台处理系统，因为其可以持续操作以动态地控制ALS110。系统610接收ALS110向数据收集引擎510作为数据帧520输出的光强度115测量。在备选实施例中，ALS110可以直接将光强度115测量输出到系统610以及数据收集引擎510。系统610还可以接收附加信息620。此附加信息620可以指示例如设备100当前是否正在执行应用，如果是，则指示设备100当前正在执行哪个应用。
基于光强度115测量(直接地或以数据帧520的形式)和附加信息620，系统610调整每个ALS110的灵敏度或波长频带或范围或两者。例如，基于可用光(所测量的环境光强度115)，系统610可以经由从系统610到ALS110中的一个或更多个的控制信号来改变ALS110的波长范围。改变(调整波长范围)可以确保针对当前条件，ALS110聚焦于正确的波长(频率)频带。作为另一示例，基于可用光中的改变(例如基于将光切换为开或关)，系统610可以改变ALS110的灵敏度。切换光的任何顺序产生ALS110必须适配的光灵敏度115中的新改变范围。例如，ALS敏感的光强度115的改变范围可以是50-250勒克斯。在较暗环境(例如展示期间的会议室)中，ALS敏感的光强度115的改变范围可以是2-15勒克斯。通过控制信号630对ALS110的调整可以持续地、周期性地或基于触发事件(例如设备100正在执行的应用的改变)来完成。例如，灵敏度调整可以每5个数据帧520自动地完成一次。系统610还可以调整ALS110的光强度115测量的顺序和频率。例如，基于指示设备100正在执行特定应用的附加信息620，系统610可以发送控制信号630以使ALS110以特定顺序并以特定频率收集针对每个周期(数据帧520)的光强度115采样。
除了控制ALS110之外，系统610可以将触发信号540提供给手势识别器530(见图5)。因为系统610监视数据帧520中的光强度115测量以满足上述后台功能，系统610可以附加地识别信号通知手势识别器530应当何时发起手势处理的触发事件并相应地输出触发信号540。例如，当系统610接收到指示由一个或更多个ALS110测量的光强度115中改变的数据帧520时，系统610可以向手势识别器530输出触发信号540。光强度115测量中的改变可以指示对象240的移动的开始(因此是手势的开始)。在各种实施例中，在系统610输出触发信号540之前，所测量的光强度115的改变可以是10％+/-3％或更高。在实施例中，在系统610输出触发信号540之前，所测量的光强度115的改变可以是20％+/-5％或更高。在实施例中，在系统610输出触发信号540之前，所测量的光强度的改变可以是25％+/-5％或更高。
图7示出了根据上述实施例的检测手势的方法700的处理流程。在步骤710，可以根据图1、3和4中或根据上述指导的备选布置中所示的实施例来在将两个或更多个ALS布置在设备100的屏幕120下方。如上所述，从ALS110获得光强度115测量(步骤720)可以光度单位或辐照度单位来进行。获得(接收)光强度115测量还可以包括利用系统610来动态地控制ALS110以例如修改每个ALS110的波长范围或频谱灵敏度。如结合图6所讨论，系统610进行的控制可以基于例如由ALS110的光强度115测量。在步骤730，确定设备100正在执行哪个应用(如果有的话)可以由手势识别器530完成并可以是提供给系统610的附加信息620的部分。在步骤740，处理包括在手势库存储设备550中存储与可以使用非触摸手势进行操作的每个应用相关联的手势库555。在步骤750，手势识别器530可以完成选择与设备100正在执行的应用相关联的手势库555。步骤750还可以包括：手势识别器530确定没有手势库555可应用，因为设备100未执行任何应用或正在执行不具有相关联的手势库555的应用。在步骤760，处理光强度115测量并识别手势涉及数据收集引擎510输出数据帧520，以及，除手势模板537之外，手势识别器530还使用光强度115测量的比较。步骤760还可以包括：系统610向手势识别器530发送触发信号540以开始或继续手势处理。步骤760还可以包括：手势识别器530基于不具有可用的手势库555而根本不识别手势。在步骤770，如上文已经详述，手势识别器530完成基于手势库555来输出与手势相对应的动作信号560。
图8是便于如以上实施例所述的非触摸手势检测的示例性设备100的框图。尽管描述了设备100的各种组件，设备100的备选实施例可以包括所示的组件的子集或包括图8中未示出的附加组件。设备100包括DSP801和存储器802。DSP801和存储器802可以部分地或全部地提供系统500的功能(图5)。如所示，设备100还可以包括天线和前端单元803、射频(RF)收发机804、模拟基带处理单元805、麦克风806、头戴式扬声器807、耳机端口808、总线809(例如，系统总线或输入/输出(I/O)接口总线)、可拆卸存储卡810、通用串行总线(USB)端口811、告警812、键区813、短距离无线通信子系统814、可以包括触摸敏感表面的液晶显示器(LCD)815、LCD控制器816、电荷耦合器件(CCD)摄像机817、摄像机控制器818和全球定位系统(GPS)传感器819以及与能量存储单元(例如，电池826)可操作耦合的能量管理模块820。在各种实施例中，设备100可以包括不提供触摸敏感屏的另一类型的显示器。在一个实施例中，DSP801直接与存储器802进行通信，而不经过输入/输出接口(“总线”)809。
在各种实施例中，DSP801或一些其他形式的控制器或中央处理单元(CPU)根据在存储器802中存储的或在DSP801自身中包含的存储器中存储的嵌入式软件或固件进行操作，以控制设备100的各种组件。除了嵌入式软件或固件之外，DSP801可以执行其他应用，这些其他应用是存储在存储器802中的或经由信息媒体(例如像可拆卸存储卡810一样的便携式数据存储介质)或经由有线或无线网络通信可获得的。应用软件可以包括配置DSP801以提供期望功能的机器可读指令的汇编集合，或者应用软件可以是要通过解释器或编译器处理用来间接配置DSP801的高层软件指令。
提供天线和前端单元803用来在无线信号和电信号之间转换，使设备100能够发送信息并且从蜂窝网络或一些其他可用无线通信网络或从对等设备100接收信息。在实施例中，天线和前端单元803可以包括用于支持波束成形和/或多输入多输出(MIMO)操作的多个天线。如本领域技术人员所已知的MIMO操作可以提供空间分集，空间分集能用于克服不同信道条件或用于增加信道吞吐量。同样，天线和前端单元803可以包括天线调谐和/或阻抗匹配组件、RF功率放大器或低噪声放大器。
在各种实施例中，RF收发机804便于将所接收的RF信号转换到基带并且将基带传输信号转换到RF的频率平移。在某些描述中，无线电收发机或RF收发机可以理解为包括其他信号处理功能(例如调制/解调、编码/解码、交织/解交织、扩频/解扩频、快速傅里叶逆变换(IFFT)/快速傅里叶变换(FFT)、循环前缀添加/移除以及其他信号处理功能)。为了清楚的目的，说明书这里将此信号处理和RF和/或无线电层的描述分离，并将此信号处理概念性地分配给模拟基带处理单元805/或DSP801或其他中央处理单元。在某些实施例中，可以将RF收发机804、天线和前端单元803的部分和模拟基带处理单元805合并为一个或更多个处理单元和/或专用集成电路(ASIC)。
应当注意的是，在此图式中，无线接入技术(RAT)RAT1和RAT2收发机821、822、IXRF823、IRSL824和多RAT子系统825可操作地耦合到RF收发机804和模拟基带处理单元805，并然后还经由RF收发机804耦合到天线和前端单元803。因为可能存在多个RAT收发机，通常将存在多个天线或前端803或RF收发机804，其中每个针对每个RAT或操作频带。
模拟基带处理单元805可以为RF收发机804和语音接口(806、807、808)提供输入和输出的各种模拟处理。例如，模拟基带处理单元805从麦克风806和头戴式耳机808接收输入，并向耳机807和头戴式耳机808提供输出。为此，模拟基带处理单元805可以具有用于与内置麦克风806和耳机扬声器807相连的端口，这使设备100能够作为手机使用。模拟基带处理单元805还可以包括用于与耳机或其他免提麦克风和扬声器配置相连的端口。模拟基带处理单元805可以提供一个信号方向的数模转换以及相反信号方向的模数转换。在各种实施例中，模拟基带处理单元805的至少一些功能可以由数字处理组件(例如由DSP801或由其他中央处理单元)提供。
DSP801可以执行调制/解调、编码/解码、交织/解交织、扩频/解扩频、快速傅里叶逆变换(IFFT)/快速傅里叶变换(FFT)、循环前缀附加/移除以及与无线通信相关联的其他信号处理功能。在实施例中，例如在码分多址接入(CDMA)技术应用中，对于发射机功能，DSP801可以执行调制、编码、交织和扩频，并且对于接收机功能，DSP801可以执行解扩频、解交织、解码和解调。在另一实施例中，例如在正交频分复用接入(OFDMA)技术应用中，对于发射机功能，DSP801可以执行调制、编码、交织、快速傅里叶逆变换和附加循环前缀，并且对于接收机功能，DSP801可以执行移除循环前缀、快速傅里叶变换、解交织、解码和解调。在其他无线技术应用中，DSP801可以执行其他信号处理功能和信号处理功能的组合。
DSP801可以经由模拟基带处理单元805与无线网络通信。在一些实施例中，通信可以提供因特网连接，使用户能够访问因特网上的内容并能够发送和接收电子邮件或文本消息。输入/输出接口(“总线”)809与DSP801和各种存储器和接口相互连接。存储器802和可拆卸存储卡810可以提供用于配置DSP801的操作的软件和数据。在接口中可以是USB接口811和短距离无线通信子系统814。USB接口811可以用于给设备100充电并也可以使设备100能够起到用来与个人计算机或其他计算机系统交换信息的外围设备的作用。短距离无线通信子系统814可以包括红外端口、蓝牙端口、服从IEEE802.11无线端口或使设备能够无线地与其他附近客户端节点和接入节点进行通信的任何其他短距离无线通信子系统。短距离无线通信子系统814还可以包括合适的RF收发机、天线和前端子系统。
输入/输出接口(“总线”)809还将DSP801连接到告警526，当触发(例如通过响铃、播放旋律或震动)时，使设备100向用户提供通知。告警812可以充当用于通过静音震动或通过为特定呼叫者播放特定预指派旋律来警告用户各种事件(例如来电、新文本消息和预约提醒)中任何一个的机制。
键区813经由I/O接口(“总线”)809耦合到DSP801，以提供一种使用户作出选择、输入信息以及向设备100提供输入的机制。键区813可以是完全的或简化的字母数字键盘(例如QWERTY、DVORAK、AZERTY和有序类型)，或具有与电话键区相关联的字母的传统数字键区。输入键同样可以包括履带轮、履带板、退出或取消键、轨迹球以及可以是向内按压的以提供其他输入功能的其他导航或功能键。另一输入机制可以是LCD815，LCD815可以包括触摸屏功能并也可以向用户显示文本和/或图形。LCD控制器816将DSP801耦合到LCD815。
CCD摄像机517(如果装配的话)使设备100能够拍摄数字照片。DSP801经由摄像机控制器818与CCD摄像机817进行通信。在另一实施例中，可以使用根据不是充电耦合设备摄像机的技术来进行操作的摄像机。GPS传感器519耦合到DSP801以对全球定位系统信号或其他导航信号进行解码，从而使设备100能够确定其位置。GPS传感器819可以耦合到天线以及适用于其操作频带的前端(未示出)。可以包括其他各种外围设备以提供额外功能(例如，无线电和电视接收)。
在各种实施例中，设备100包括第一无线接入技术(RAT)收发机821和第二RAT收发机822。如图16所示，并在本文中更详细的描述，RAT收发机‘1’812和RAT收发机‘2’822依次通过RAT间监督层模块824耦合到多RAT通信子系统825。进而，多RAT通信子系统825可操作地耦合到总线809。可选地，第一无线电接入技术(RAT)收发机821和第二RAT收发机822的各个无线电协议层通过RAT间交换功能(IRXF)模块823可操作地相互耦合。
手势库555的特定实施例是包括解锁设备100功能的一个或更多个密码的手势库。不同于包括与各个应用相关联的手势的大多数手势库555，由用户生成被识别为授权密码的一个或更多个手势。即，尽管商业上可用的应用可能通常与相关联的手势库555一起提供，与密码输入相关联的手势库555是通过密码定义应用来用户定义的。以下详述根据各种实施例的密码定义和使用中所涉及的组件和处理。
图9是根据实施例的用于定义一个或更多个密码的方法的处理流程。在步骤910，在密码应用中发起密码定义包括发起由设备100的处理器中的一个或更多个(例如DSP801)执行的密码应用。发起密码定义可以通过传统输入(例如设备100的触摸屏或基于鼠标的选择)来完成。在步骤910处发起密码定义还可以通过用于在可用应用中作出选择的非触摸手势来完成。根据一个实施例，在步骤920，密码应用可以首先便于将手势添加到手势模板537。因此，如果用户希望定义的基于手势的密码包括未在手势模板537中的手势(因此是利用系统500不识别的手势)，则用户可以将手势添加到手势模板537。在步骤930，指示密码定义处理的开始指示要由用户输入作为密码的手势序列1001(例如见图10)的开始。手势识别器530在指示之后识别的手势可以被认为是手势序列1001的部分。因此，在步骤940中定义手势序列1001包括用户利用对象240通过与设备100的非触摸通信来执行手势序列1001。在步骤950，指示密码定义处理的结束指示手势序列1001的结束。密码定义的开始和结束的指示可以通过手势或经由另一输入(例如选择按键或触摸屏输入)来完成。
在步骤940处被定义为密码的手势序列1001可以包括具有许可变化的一个或更多个手势。例如，用户可以将密码定义为具有五个手势(A、B、C、D和E)的手势序列1001，并针对手势序列1001中的第四手势(D)定义两个或更多个手势，或将第四手势(D)定义为任何输入的手势。用户可以输入第四手势(D)的方式的这种变化可以使观察密码输入以学会手势序列1001的人困惑，因为授权用户将不会每次使用与手势序列1001相同的手势来输入密码。取而代之的是，每次当用户在公共场合时，他或她可以改变手势序列1001中的第四手势(D)。一旦定义了密码(步骤930-950)，密码可以专用于设备100的域(中心)。在步骤960指定密码的域意味着输入密码(手势序列1001)仅对与特定域有关的特征进行解锁。设备100可以包括多个域，例如工作域和个人域。在美国专利申请No.13/529，509和12/869，635中讨论了工作域(企业)和个人域的实施例，为了任何目的将它们通过引用方式并入本文；然而，如果美国专利申请No.13/529，509和12/869，635的公开与本申请相冲突，则本申请是正确的解释。所指定的域中的每一个可以具有一个或更多个应用以及与它们相关联的设备100的设置。即，利用域特定密码来对域进行解锁可以对一个或更多个应用进行解锁或发起对设备100的一个或更多个设置。指定域可以在密码应用中完成。应用可由以上讨论的设备100的处理器中的一个或更多个来运行。一旦定义，在步骤970，创建或修改与密码应用相关联的手势库555包括将密码(手势序列1001)和任何域特定信息存储在与密码应用相关联的手势库555中，并覆盖或删除与相同功能有关的先前的密码信息(如果该密码信息存在的话)。
图10示出了定义密码的示例性手势序列1001。图10示出了具有三个ALS110以与图1和2类似的布置布置在屏幕120下方的设备100。图10示出了对象240处于四个不同位置1010-1、1010-2、1010-3、1010-4的四个不同时刻。这四个位置1010-1、1010-2、1010-3、1010-4对应于组成定义密码的手势序列1001的四个手势。不论定义密码(如参考图9所讨论)还是输入密码(如以下结合图11所讨论)来对功能进行解锁，对象240位置1010(手势序列1001)将是相同的。
对象240离ALS110越近，对象240阻挡从光源210到ALS110的光越多。因此，对象240离ALS110越近，ALS110测量到越低光强度115。因此，在对象240的第一位置1010-1处ALS110中的每一个测量的光强度115高于在对象240的第二位置1010-2处(与ALS110最近)ALS110中的每一个测量的光强度115(也低于在对象240的第三位置1010-3处(与ALS110最远)ALS110测量的光强度115)。对象240的第四位置1010-4(如图10所示)在对象240的第一位置1010-1和第二位置1010-2之间。因此，在第四位置1010-4处ALS110测量的光强度115是在第一位置1010-1处和在第三位置1010-3处测量的光强度115的值之间的值。假定ALS110以流明为单位测量光强度115，并基于在每个手势的识别期间对象240(例如手)不是完全静止来假定+/-2勒克斯的容限，在位置1010中的每一个处ALS110中的每一个测量的光强度115值可以如表1所示。
对象位置 所测量的光强度115
1010-1 22(+/-2)勒克斯
1010-2 4(+/-2)勒克斯
1010-3 80(+/-2)勒克斯
1010-4 15(+/-2)勒克斯
表1
基于正在执行的应用，手势识别器530在对表1中所示的手势系列1001进行识别时输出不同动作输出560。当应用是密码定义时，手势识别器530将手势序列1001作为密码存储在与密码应用相关联的手势库555中，并将与已经成功存储密码的指示相对应的动作输出560输出到用户。即，在从手势识别器530接收到动作输出560时，密码应用可以显示指示已经成功存储基于非触摸手势的密码的消息，并且如果在密码输入期间指定了密码所应用的域，则可以指示该域。当应用是密码输入(如结合图11进一步讨论)，使得表1示出了由手势识别器530识别的一系列手势时，手势识别器530将该手势系列与相关联的手势库555中存储的手势序列1001进行比较，并输出用于向密码应用指示是否应当对设备(或与域有关功能)进行解锁的动作输出560。
图11是根据实施例的输入和识别利用非触摸手势的密码的方法处理流程。为了锁定设备(在根据以上结合图9讨论的发起密码应用并定义密码之后)，可以进行按键输入、触摸屏输入、手势或其他选择。以下参考图11讨论的处理基于与预期密码的匹配来对设备100或设备100的指定域进行解锁。在步骤1110，在密码应用中发起密码输入使手势识别器530访问与密码应用相关联的手势库555(如参考图9所讨论的创建)。尽管这里为了方便作为一个密码应用进行讨论，定义密码并输入密码可以涉及可以由设备100的相同或不同处理器执行的不同应用。即，定义密码和输入密码可以是相同密码应用的不同选择或选项或可以是完全不同的应用。
在步骤1120指示密码输入的开始提示手势识别器530在此指示之后的手势是输入的密码的部分。在步骤1130，识别在指示密码输入开始之后对象240作出的手势还包括将每个手势与正确密码相对应的手势序列1001进行比较，如参考步骤1150所讨论。在步骤1140指示密码输入的结束终止在步骤1130的手势识别。指示密码输入的开始和结束(步骤1120和1140)可以由手势或诸如按键或触摸屏项目的选择等的其他形式的输入来完成。在步骤1150，将手势和与用户希望解锁的设备100或域相对应的密码的手势序列1001进行比较可以是如上所述的进行中的处理。即，因为在步骤1130已经识别每个手势，可以将所识别的手势与手势序列1001中的预期手势进行比较，而不是仅在已经输入所有手势之后进行步骤1150的比较。当在输入手势序列1001时(而不是在已经输入所有手势之后)将每个识别的手势与手势库555中存储的手势序列1001进行比较时，第一个不正确的手势可以立即导致步骤1170，步骤1170包括手势识别器530输出失败消息作为动作输出560。即，如果图10中所示的手势序列1001是密码，则当输入和识别的第二手势(步骤1130)是挥手而不是悬停在位置1010-2处时，处理可以基于手势识别器530输出失败消息作为动作输出560来前进到步骤1170以向用户输出失败消息。当(在步骤1130处)识别的所有手势以正确顺序与手势序列1001的所有手势匹配时，则在步骤1160中对可应用特征进行解锁包括仅对与密码相关联的域进行解锁(如果特定域与密码相关联)。在步骤1160，对可应用特征进行解锁可以包括：当在手势库555中域不与输入的密码相关联时，对设备100的所有功能进行解锁。
尽管在本公开中已经提供了若干实施例，但应当理解：在不脱离本公开的精神或范围的前提下，可以以很多其他的特定形式实现所公开的系统和方法。可以将本示例看作示意性的而不是限制性的，并且其意图不限于本文所给出的细节。例如，可以在另一系统中合并或集成各种元件或组件，或可以省略或不实现特定的特征。
此外，在不背离本公开的范围的前提下，在各种实施例中描述和阐述为离散或分离的技术、系统、子系统和方法可以与其他系统、模块、技术或方法合并或集成。示出为或讨论为耦合的或直接耦合的或相互通信的其他项目可以是间接耦合的，或通过一些接口、设备或中间组件，不管是电子地、机械地或以其他形式地通信。本领域技术人员可确定改变、代替和变更的其他示例，并且在不脱离本文公开的精神和范围的前提下，可以作出改变、代替和变更的其他示例。

Claims (20)

1.一种使用利用非触摸手势的密码的设备，所述设备包括：
两个或更多个环境光传感器，被布置在所述设备的相应表面位置，所述两个或更多个环境光传感器中的每一个被配置为测量在所述相应表面位置处的光强度；
第一处理器，被配置为执行所述设备上的密码应用；以及
第二处理器，被配置为检测由与所述设备进行非触摸通信的对象执行的两个或更多个手势，并基于所述两个或更多个手势来定义或验证密码。
2.根据权利要求1所述的设备，其中，当发起所述密码应用的密码定义选项时，所述第二处理器将所述密码定义为所述两个或更多个手势。
3.根据权利要求2所述的设备，其中，所述第一处理器针对所述设备的域来定义所述密码。
4.根据权利要求1所述的设备，其中，当发起所述密码应用的密码输入选项时，所述第二处理器验证所述密码。
5.根据权利要求4所述的设备，其中，所述第二处理器通过将所述两个或更多个手势与定义的手势序列的密码进行比较来验证所述密码。
6.根据权利要求4所述的设备，其中，所述第二处理器基于验证所述密码来生成用于对所述设备的功能进行解锁的信号。
7.根据权利要求6所述的设备，其中，所述第二处理器生成用于对与所述设备中指定的域相关联的功能进行解锁的信号。
8.根据权利要求1所述的设备，其中，所述第一处理器和所述第二处理器是所述设备的两个不同处理器。
9.根据权利要求1所述的设备，其中，所述第一处理器是与所述第二处理器相同的处理器。
10.一种使用利用非触摸手势的密码的方法，所述方法包括：
使用第一处理器执行设备的密码应用，所述密码应用便于定义密码和输入所述密码以对所述设备的功能进行解锁；
使用布置在所述设备的相应表面位置的两个或更多个环境光传感器来检测由与所述设备进行非触摸通信的对象做出的两个或更多个手势；以及
使用第二处理器，基于所述两个或更多个手势来定义或验证所述密码。
11.根据权利要求10所述的方法，其中，所述定义密码是基于用户发起所述密码应用的密码定义选项。
12.根据权利要求11所述的方法，其中，所述定义密码包括将所述两个或更多个手势设置为定义所述密码的手势序列。
13.根据权利要求11所述的方法，其中，所述定义密码是基于对所述设备的域的用户指示而针对所述域进行的。
14.根据权利要求10所述的方法，其中，所述验证密码是基于用户发起所述密码应用的密码输入选项。
15.根据权利要求14所述的方法，其中，所述验证密码包括所述第二处理器将所述两个或更多个手势与定义所述密码的手势序列进行比较。
16.根据权利要求15所述的方法，其中，所述验证密码包括基于所述比较来确认所述两个或更多个手势。
17.根据权利要求16所述的方法，还包括：所述第二处理器基于所述确认来生成用于对所述设备的功能进行解锁的信号。
18.根据权利要求17所述的方法，其中，所述生成信号对与所述设备中指定的域相关联的功能进行解锁。
19.根据权利要求15所述的方法，还包括：所述第二处理器基于所述比较来生成用于显示指示失败的密码的提示的信号。
20.根据权利要求10所述的方法，还包括：在定义密码之前，用户定义用于由所述第二处理器识别的新手势。
CN201410311177.3A 2013-07-01 2014-07-01 利用非触摸手势的密码 Active CN104281793B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/932,243 2013-07-01
US13/932,243 US9342671B2 (en) 2013-07-01 2013-07-01 Password by touch-less gesture

Publications (2)

Publication Number Publication Date
CN104281793A true CN104281793A (zh) 2015-01-14
CN104281793B CN104281793B (zh) 2018-02-02

Family

ID=52117082

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410311177.3A Active CN104281793B (zh) 2013-07-01 2014-07-01 利用非触摸手势的密码

Country Status (2)

Country Link
US (2) US9342671B2 (zh)
CN (1) CN104281793B (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105243316A (zh) * 2015-10-15 2016-01-13 广东欧珀移动通信有限公司 一种移动终端解锁的方法及装置
CN106339618A (zh) * 2015-07-13 2017-01-18 广州杰赛科技股份有限公司 一种基于手动作的认证方法
CN106355061A (zh) * 2015-07-13 2017-01-25 广州杰赛科技股份有限公司 基于毫米波的手势认证装置
CN106503620A (zh) * 2016-09-26 2017-03-15 深圳奥比中光科技有限公司 基于手势的数字密码输入方法及其系统
CN106709300A (zh) * 2015-07-13 2017-05-24 广州杰赛科技股份有限公司 一种基于手势的加密方法
WO2017147869A1 (zh) * 2016-03-03 2017-09-08 邱琦 光感式手势识别方法
CN107202426A (zh) * 2017-05-18 2017-09-26 珠海格力电器股份有限公司 控制装置和方法、热水器
WO2018027768A1 (zh) * 2016-08-11 2018-02-15 王志远 根据手势匹配wifi密码时的信息推送方法和路由器
CN109597552A (zh) * 2018-11-27 2019-04-09 维沃移动通信有限公司 一种设备管理方法及终端设备

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9423913B2 (en) 2013-07-01 2016-08-23 Blackberry Limited Performance control of ambient light sensors
US9342671B2 (en) 2013-07-01 2016-05-17 Blackberry Limited Password by touch-less gesture
US9405461B2 (en) 2013-07-09 2016-08-02 Blackberry Limited Operating a device using touchless and touchscreen gestures
CN113643668A (zh) 2014-07-10 2021-11-12 智能平台有限责任公司 用于电子设备的电子标记的设备和方法
US10761714B2 (en) * 2015-11-23 2020-09-01 Google Llc Recognizing gestures and updating display by coordinator
CN105786347A (zh) * 2016-02-25 2016-07-20 珠海格力电器股份有限公司 移动终端控制方法、装置和移动终端
US11079915B2 (en) 2016-05-03 2021-08-03 Intelligent Platforms, Llc System and method of using multiple touch inputs for controller interaction in industrial control systems
US9906960B2 (en) 2016-05-03 2018-02-27 International Business Machines Corporation Touch movement activation for gaining access beyond a restricted access gateway
US10845987B2 (en) 2016-05-03 2020-11-24 Intelligent Platforms, Llc System and method of using touch interaction based on location of touch on a touch screen
WO2017197636A1 (zh) * 2016-05-20 2017-11-23 华为技术有限公司 识别误触摸操作的方法和电子设备
US10778450B1 (en) 2017-04-28 2020-09-15 Wells Fargo Bank, N.A. Gesture-extracted passwords for authenticated key exchange
US11126705B2 (en) 2017-11-09 2021-09-21 Mastercard International Incorporated Systems and methods for user authentication using word-gesture pairs
US20220237280A1 (en) * 2019-06-11 2022-07-28 Vuzix Corporation Method for unlocking an electronic device

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070130547A1 (en) * 2005-12-01 2007-06-07 Navisense, Llc Method and system for touchless user interface control
CN102345838A (zh) * 2010-07-22 2012-02-08 罗姆股份有限公司 照明设备
US20130033418A1 (en) * 2011-08-05 2013-02-07 Qualcomm Incorporated Gesture detection using proximity or light sensors
US20130091561A1 (en) * 2011-10-11 2013-04-11 Keisey L. Bruso Executing commands provided during user authentication
CN103052928A (zh) * 2010-08-04 2013-04-17 惠普发展公司，有限责任合伙企业 能使多显示输入实现的系统和方法
US20130167221A1 (en) * 2011-12-24 2013-06-27 LogMeln, Inc. Motion-based authentication for a gesture-based computing device

Family Cites Families (141)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5252951A (en) 1989-04-28 1993-10-12 International Business Machines Corporation Graphical user interface with gesture recognition in a multiapplication environment
US7532205B2 (en) 1992-06-08 2009-05-12 Synaptics, Inc. Object position detector with edge motion feature and gesture recognition
US7911456B2 (en) 1992-06-08 2011-03-22 Synaptics Incorporated Object position detector with edge motion feature and gesture recognition
US5880411A (en) 1992-06-08 1999-03-09 Synaptics, Incorporated Object position detector with edge motion feature and gesture recognition
US5594469A (en) 1995-02-21 1997-01-14 Mitsubishi Electric Information Technology Center America Inc. Hand gesture machine control system
US5554912A (en) 1995-05-15 1996-09-10 Delco Electronics Corporation Adaptive instrument display brightness control system
US6950534B2 (en) 1998-08-10 2005-09-27 Cybernet Systems Corporation Gesture-controlled interfaces for self-service machines and other applications
JP3692869B2 (ja) 1999-11-18 2005-09-07 株式会社日立製作所 情報処理装置
US6699093B1 (en) 2001-06-04 2004-03-02 Hasbro, Inc. Event-activated toy
US7006080B2 (en) 2002-02-19 2006-02-28 Palm, Inc. Display system
US20060139185A1 (en) 2002-03-29 2006-06-29 Pierre Bonnat Input device for a computer system that utilizes ambient light, and a method of manufacturing the same
US7710391B2 (en) 2002-05-28 2010-05-04 Matthew Bell Processing an image utilizing a spatially varying pattern
US8460103B2 (en) 2004-06-18 2013-06-11 Igt Gesture controlled casino gaming system
US8416217B1 (en) 2002-11-04 2013-04-09 Neonode Inc. Light-based finger gesture user interface
US7731154B2 (en) 2002-12-04 2010-06-08 Parsons Natan E Passive sensors for automatic faucets and bathroom flushers
US7618323B2 (en) 2003-02-26 2009-11-17 Wms Gaming Inc. Gaming machine system having a gesture-sensing mechanism
DE602004006190T8 (de) 2003-03-31 2008-04-10 Honda Motor Co., Ltd. Vorrichtung, Verfahren und Programm zur Gestenerkennung
US8684839B2 (en) 2004-06-18 2014-04-01 Igt Control of wager-based game using gesture recognition
US8560972B2 (en) 2004-08-10 2013-10-15 Microsoft Corporation Surface UI for gesture-based interaction
US7598942B2 (en) 2005-02-08 2009-10-06 Oblong Industries, Inc. System and method for gesture based control system
US9019209B2 (en) 2005-06-08 2015-04-28 3M Innovative Properties Company Touch location determination involving multiple touch location processes
US7633076B2 (en) * 2005-09-30 2009-12-15 Apple Inc. Automated response to and sensing of user activity in portable devices
US9141254B2 (en) 2005-11-12 2015-09-22 Orthosensor Inc Navigation system and user interface for directing a control action
US7620316B2 (en) 2005-11-28 2009-11-17 Navisense Method and device for touchless control of a camera
KR100774203B1 (ko) 2006-06-27 2007-11-08 엘지전자 주식회사 텔레비전 수신기 및 텔레비전 수신기에서 디스플레이특성을 조절하는 방법
US8086971B2 (en) 2006-06-28 2011-12-27 Nokia Corporation Apparatus, methods and computer program products providing finger-based and hand-based gesture commands for portable electronic device applications
US8094129B2 (en) 2006-11-27 2012-01-10 Microsoft Corporation Touch sensing using shadow and reflective modes
US20080134102A1 (en) 2006-12-05 2008-06-05 Sony Ericsson Mobile Communications Ab Method and system for detecting movement of an object
US7957762B2 (en) 2007-01-07 2011-06-07 Apple Inc. Using ambient light sensor to augment proximity sensor output
US20080168402A1 (en) 2007-01-07 2008-07-10 Christopher Blumenberg Application Programming Interfaces for Gesture Operations
US8665225B2 (en) 2007-01-07 2014-03-04 Apple Inc. Portable multifunction device, method, and graphical user interface for interpreting a finger gesture
US7844915B2 (en) 2007-01-07 2010-11-30 Apple Inc. Application programming interfaces for scrolling operations
US20080165145A1 (en) 2007-01-07 2008-07-10 Scott Herz Portable Multifunction Device, Method, and Graphical User Interface for Interpreting a Finger Swipe Gesture
US8519963B2 (en) 2007-01-07 2013-08-27 Apple Inc. Portable multifunction device, method, and graphical user interface for interpreting a finger gesture on a touch screen display
WO2008132546A1 (en) 2007-04-30 2008-11-06 Sony Ericsson Mobile Communications Ab Method and algorithm for detecting movement of an object
US8855719B2 (en) 2009-05-08 2014-10-07 Kopin Corporation Wireless hands-free computing headset with detachable accessories controllable by motion, body gesture and/or vocal commands
US9843351B2 (en) 2007-07-26 2017-12-12 Nokia Technologies Oy Gesture activated close-proximity communication
US9261979B2 (en) 2007-08-20 2016-02-16 Qualcomm Incorporated Gesture-based mobile interaction
JP5430572B2 (ja) 2007-09-14 2014-03-05 インテレクチュアル ベンチャーズ ホールディング ６７ エルエルシー ジェスチャベースのユーザインタラクションの処理
US20090100383A1 (en) 2007-10-16 2009-04-16 Microsoft Corporation Predictive gesturing in graphical user interface
CN101939914A (zh) 2007-10-26 2011-01-05 建兴电子科技股份有限公司 照明系统
CN101836362B (zh) 2007-10-26 2012-05-02 建兴电子科技股份有限公司 照明系统
EP2218182B1 (en) 2007-10-26 2013-08-21 LITE-ON IT Corporation Menu control for 1d gesture light control system
EP2218179A4 (en) 2007-10-26 2012-01-18 Lite On It Corp LIGHT CONTROL PROVIDED BY UNIDIMENSIONAL RECOGNITION OF GESTURES
WO2009052654A1 (en) 2007-10-26 2009-04-30 Lite-On It Corporation Robust id gesture light control algorithm
US8432372B2 (en) 2007-11-30 2013-04-30 Microsoft Corporation User input using proximity sensing
US20090146982A1 (en) 2007-12-05 2009-06-11 Jeff Thielman Lighting Calibration System and Method
US20090189858A1 (en) 2008-01-30 2009-07-30 Jeff Lev Gesture Identification Using A Structured Light Pattern
US8344998B2 (en) 2008-02-01 2013-01-01 Wimm Labs, Inc. Gesture-based power management of a wearable portable electronic device with display
US8259163B2 (en) 2008-03-07 2012-09-04 Intellectual Ventures Holding 67 Llc Display with built in 3D sensing
US20100060611A1 (en) 2008-09-05 2010-03-11 Sony Ericsson Mobile Communication Ab Touch display with switchable infrared illumination for touch position determination and methods thereof
WO2010066283A1 (en) 2008-12-08 2010-06-17 Nokia Corporation Gesture input using an optical input device
US8660300B2 (en) 2008-12-12 2014-02-25 Silicon Laboratories Inc. Apparatus and method for optical gesture recognition
US20100153996A1 (en) 2008-12-17 2010-06-17 Migos Charles J Gesture based electronic program management system
US8289162B2 (en) 2008-12-22 2012-10-16 Wimm Labs, Inc. Gesture-based user interface for a wearable portable device
EP2377075B1 (en) 2009-01-05 2015-03-11 SMART Technologies ULC Gesture recognition method and interactive input system employing same
US8587519B2 (en) 2009-01-07 2013-11-19 Sensor Platforms, Inc. Rolling gesture detection using a multi-dimensional pointing device
US20100177060A1 (en) 2009-01-14 2010-07-15 Perceptive Pixel Inc. Touch-Sensitive Display
US8704767B2 (en) 2009-01-29 2014-04-22 Microsoft Corporation Environmental gesture recognition
KR101538705B1 (ko) 2009-01-29 2015-07-22 삼성전자주식회사 휴대단말의 기능 제어 방법 및 시스템
JP4699536B2 (ja) 2009-03-06 2011-06-15 シャープ株式会社 位置検出装置、制御方法、制御プログラムおよび記録媒体
US8355698B2 (en) 2009-03-30 2013-01-15 Microsoft Corporation Unlock screen
US20100245289A1 (en) 2009-03-31 2010-09-30 Miroslav Svajda Apparatus and method for optical proximity sensing and touch input control
US8693724B2 (en) 2009-05-29 2014-04-08 Microsoft Corporation Method and system implementing user-centric gesture control
US9086875B2 (en) 2009-06-05 2015-07-21 Qualcomm Incorporated Controlling power consumption of a mobile device based on gesture recognition
EP2452258B1 (en) 2009-07-07 2019-01-23 Elliptic Laboratories AS Control using movements
US20110010626A1 (en) 2009-07-09 2011-01-13 Jorge Fino Device and Method for Adjusting a Playback Control with a Finger Gesture
US8681124B2 (en) 2009-09-22 2014-03-25 Microsoft Corporation Method and system for recognition of user gesture interaction with passive surface video displays
KR101843561B1 (ko) 2009-10-26 2018-03-30 가부시키가이샤 한도오따이 에네루기 켄큐쇼 표시 장치 및 반도체 장치
WO2011056657A2 (en) 2009-10-27 2011-05-12 Harmonix Music Systems, Inc. Gesture-based user interface
CN102713794A (zh) 2009-11-24 2012-10-03 奈克斯特控股公司 用于手势识别模式控制的方法和装置
WO2011069157A2 (en) 2009-12-04 2011-06-09 Next Holdings Limited Methods and systems for position detection
CN102109902A (zh) 2009-12-28 2011-06-29 鸿富锦精密工业（深圳）有限公司 基于手势识别的输入装置
US8432368B2 (en) 2010-01-06 2013-04-30 Qualcomm Incorporated User interface methods and systems for providing force-sensitive input
US8760631B2 (en) 2010-01-27 2014-06-24 Intersil Americas Inc. Distance sensing by IQ domain differentiation of time of flight (TOF) measurements
US8379134B2 (en) 2010-02-26 2013-02-19 Research In Motion Limited Object detection and selection using gesture recognition
EP2539759A1 (en) 2010-02-28 2013-01-02 Osterhout Group, Inc. Local advertising content on an interactive head-mounted eyepiece
US8947349B1 (en) * 2010-03-02 2015-02-03 Rawles Llc Projecting content onto a display medium
US8384559B2 (en) 2010-04-13 2013-02-26 Silicon Laboratories Inc. Sensor device with flexible interface and updatable information store
JP2011227574A (ja) 2010-04-15 2011-11-10 Rohm Co Ltd 演算装置、動き検出装置、電子機器
US8730164B2 (en) 2010-05-28 2014-05-20 Panasonic Corporation Gesture recognition apparatus and method of gesture recognition
US8874129B2 (en) 2010-06-10 2014-10-28 Qualcomm Incorporated Pre-fetching information based on gesture and/or location
US20110310005A1 (en) 2010-06-17 2011-12-22 Qualcomm Incorporated Methods and apparatus for contactless gesture recognition
TWI590130B (zh) 2010-07-09 2017-07-01 群邁通訊股份有限公司 可擕式電子裝置及其解鎖/翻頁方法
US8754862B2 (en) 2010-07-11 2014-06-17 Lester F. Ludwig Sequential classification recognition of gesture primitives and window-based parameter smoothing for high dimensional touchpad (HDTP) user interfaces
US8773370B2 (en) 2010-07-13 2014-07-08 Apple Inc. Table editing systems with gesture-based insertion and deletion of columns and rows
US20120013539A1 (en) 2010-07-13 2012-01-19 Hogan Edward P A Systems with gesture-based editing of tables
US20120050007A1 (en) 2010-08-24 2012-03-01 Babak Forutanpour Methods and apparatus for interacting with an electronic device application by moving an object in the air over an electronic device display
US20120089948A1 (en) 2010-10-11 2012-04-12 Third Wave Power Pte Ltd Gesture controlled user interface
US8694062B2 (en) 2010-10-21 2014-04-08 Sony Corporation Electronic devices having multiple keypads and related methods
US9111138B2 (en) 2010-11-30 2015-08-18 Cisco Technology, Inc. System and method for gesture interface control
US8743275B1 (en) 2010-12-15 2014-06-03 Google Inc. Mobile communication device with multiple flashpoints
US20120162636A1 (en) 2010-12-23 2012-06-28 Silicon Laboratories, Inc. Proximity detector including anti-falsing mechanism
US8717381B2 (en) 2011-01-11 2014-05-06 Apple Inc. Gesture mapping for image filter input parameters
US20120242852A1 (en) 2011-03-21 2012-09-27 Apple Inc. Gesture-Based Configuration of Image Processing Techniques
US20120200486A1 (en) 2011-02-09 2012-08-09 Texas Instruments Incorporated Infrared gesture recognition device and method
CN102692995A (zh) 2011-03-21 2012-09-26 国基电子（上海）有限公司 具有接近感应功能的电子装置及接近感应控制方法
US20120242584A1 (en) 2011-03-22 2012-09-27 Nokia Corporation Method and apparatus for providing sight independent activity reports responsive to a touch gesture
GB2490108B (en) 2011-04-13 2018-01-17 Nokia Technologies Oy A method, apparatus and computer program for user control of a state of an apparatus
US8489065B2 (en) 2011-05-03 2013-07-16 Robert M Green Mobile device controller application for any security system
US9229581B2 (en) 2011-05-05 2016-01-05 Maxim Integrated Products, Inc. Method for detecting gestures using a multi-segment photodiode and one or fewer illumination sources
US9063704B2 (en) 2011-05-05 2015-06-23 Net Power And Light, Inc. Identifying gestures using multiple sensors
US8716649B2 (en) 2011-05-05 2014-05-06 Maxim Integrated Products, Inc. Optical gesture sensor using a single illumination source
US20120281129A1 (en) 2011-05-06 2012-11-08 Nokia Corporation Camera control
US20120280900A1 (en) 2011-05-06 2012-11-08 Nokia Corporation Gesture recognition using plural sensors
US20120293404A1 (en) 2011-05-19 2012-11-22 Panasonic Corporation Low Cost Embedded Touchless Gesture Sensor
US9213438B2 (en) 2011-06-02 2015-12-15 Omnivision Technologies, Inc. Optical touchpad for touch and gesture recognition
US20120312956A1 (en) 2011-06-11 2012-12-13 Tom Chang Light sensor system for object detection and gesture recognition, and object detection method
US8693726B2 (en) 2011-06-29 2014-04-08 Amazon Technologies, Inc. User identification by gesture recognition
US20130002601A1 (en) 2011-07-01 2013-01-03 Mccracken David Harold Touch device gesture recognition
US20130009896A1 (en) 2011-07-09 2013-01-10 Lester F. Ludwig 3d finger posture detection and gesture recognition on touch surfaces
US9042571B2 (en) 2011-07-19 2015-05-26 Dolby Laboratories Licensing Corporation Method and system for touch gesture detection in response to microphone output
JP5701714B2 (ja) 2011-08-05 2015-04-15 株式会社東芝 ジェスチャ認識装置、ジェスチャ認識方法およびジェスチャ認識プログラム
US9377867B2 (en) 2011-08-11 2016-06-28 Eyesight Mobile Technologies Ltd. Gesture based interface system and method
US20130053007A1 (en) 2011-08-24 2013-02-28 Microsoft Corporation Gesture-based input mode selection for mobile devices
CN102968177B (zh) 2011-08-31 2015-10-28 敦宏科技股份有限公司 手势感测方法
US9026950B2 (en) 2011-09-08 2015-05-05 Google Technology Holdings LLC Gesture-enabled settings
BR112014005656A2 (pt) 2011-09-15 2017-03-28 Koninklijke Philips Nv sistema com uma interface de usuário sem contato; software de controle em um meio legível por computador; método para permitir que um usuário controle uma funcionalidade de um sistema através de uma interação sem contato com o sistema; e interface de usuário
US20130083252A1 (en) 2011-10-04 2013-04-04 David John Boyes Gesture recognition capable picture video frame
US9594405B2 (en) 2011-10-19 2017-03-14 Facebook, Inc. Composite touch gesture control with touch screen input device and secondary touch input device
US8766162B2 (en) 2012-01-12 2014-07-01 Maxim Integrated Products, Inc. Ambient light based gesture detection
US9063574B1 (en) 2012-03-14 2015-06-23 Amazon Technologies, Inc. Motion detection systems for electronic devices
US9092090B2 (en) 2012-05-17 2015-07-28 Hong Kong Applied Science And Technology Research Institute Co., Ltd. Structured light for touch or gesture detection
US9330606B2 (en) 2012-06-08 2016-05-03 Apple Inc. Electronic device with display brightness control
US8947353B2 (en) * 2012-06-12 2015-02-03 Microsoft Corporation Photosensor array gesture detection
US20140118257A1 (en) 2012-10-29 2014-05-01 Amazon Technologies, Inc. Gesture detection systems
US8964062B1 (en) 2012-12-18 2015-02-24 Amazon Technologies, Inc. Integrated light sensor for dynamic exposure adjustment
US20140253427A1 (en) 2013-03-06 2014-09-11 Qualcomm Mems Technologies, Inc. Gesture based commands
US9489051B2 (en) 2013-07-01 2016-11-08 Blackberry Limited Display navigation using touch-less gestures
US9256290B2 (en) 2013-07-01 2016-02-09 Blackberry Limited Gesture detection using ambient light sensors
US9323336B2 (en) 2013-07-01 2016-04-26 Blackberry Limited Gesture detection using ambient light sensors
US9367137B2 (en) 2013-07-01 2016-06-14 Blackberry Limited Alarm operation by touch-less gesture
US9342671B2 (en) 2013-07-01 2016-05-17 Blackberry Limited Password by touch-less gesture
US9398221B2 (en) 2013-07-01 2016-07-19 Blackberry Limited Camera control using ambient light sensors
US20150002383A1 (en) 2013-07-01 2015-01-01 Blackberry Limited Touch-less user interface using ambient light sensors
US9423913B2 (en) 2013-07-01 2016-08-23 Blackberry Limited Performance control of ambient light sensors
US20150009290A1 (en) 2013-07-05 2015-01-08 Peter MANKOWSKI Compact light module for structured-light 3d scanning
US9405461B2 (en) 2013-07-09 2016-08-02 Blackberry Limited Operating a device using touchless and touchscreen gestures
US9465448B2 (en) 2013-07-24 2016-10-11 Blackberry Limited Backlight for touchless gesture detection
US9304596B2 (en) 2013-07-24 2016-04-05 Blackberry Limited Backlight for touchless gesture detection
US9194741B2 (en) 2013-09-06 2015-11-24 Blackberry Limited Device having light intensity measurement in presence of shadows

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070130547A1 (en) * 2005-12-01 2007-06-07 Navisense, Llc Method and system for touchless user interface control
CN102345838A (zh) * 2010-07-22 2012-02-08 罗姆股份有限公司 照明设备
CN103052928A (zh) * 2010-08-04 2013-04-17 惠普发展公司，有限责任合伙企业 能使多显示输入实现的系统和方法
US20130033418A1 (en) * 2011-08-05 2013-02-07 Qualcomm Incorporated Gesture detection using proximity or light sensors
US20130091561A1 (en) * 2011-10-11 2013-04-11 Keisey L. Bruso Executing commands provided during user authentication
US20130167221A1 (en) * 2011-12-24 2013-06-27 LogMeln, Inc. Motion-based authentication for a gesture-based computing device

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106339618A (zh) * 2015-07-13 2017-01-18 广州杰赛科技股份有限公司 一种基于手动作的认证方法
CN106355061A (zh) * 2015-07-13 2017-01-25 广州杰赛科技股份有限公司 基于毫米波的手势认证装置
CN106709300A (zh) * 2015-07-13 2017-05-24 广州杰赛科技股份有限公司 一种基于手势的加密方法
CN105243316A (zh) * 2015-10-15 2016-01-13 广东欧珀移动通信有限公司 一种移动终端解锁的方法及装置
CN105243316B (zh) * 2015-10-15 2018-01-26 广东欧珀移动通信有限公司 一种移动终端解锁的方法及装置
WO2017147869A1 (zh) * 2016-03-03 2017-09-08 邱琦 光感式手势识别方法
WO2018027768A1 (zh) * 2016-08-11 2018-02-15 王志远 根据手势匹配wifi密码时的信息推送方法和路由器
CN106503620A (zh) * 2016-09-26 2017-03-15 深圳奥比中光科技有限公司 基于手势的数字密码输入方法及其系统
CN107202426A (zh) * 2017-05-18 2017-09-26 珠海格力电器股份有限公司 控制装置和方法、热水器
CN109597552A (zh) * 2018-11-27 2019-04-09 维沃移动通信有限公司 一种设备管理方法及终端设备

Also Published As

Publication number Publication date
US20160246956A1 (en) 2016-08-25
CN104281793B (zh) 2018-02-02
US20150007308A1 (en) 2015-01-01
US9342671B2 (en) 2016-05-17
US9928356B2 (en) 2018-03-27

Similar Documents

Publication Publication Date Title
CN104281793A (zh) 利用非触摸手势的密码
CN104484032B (zh) 使用环境光传感器的手势检测
US10172168B2 (en) IoT device, mobile terminal and method for controlling the IoT device with vibration pairing
KR102162955B1 (ko) 생체 정보를 이용한 인증 방법 및 이를 지원하는 휴대형 전자장치
CN106203035B (zh) 一种数据访问控制方法及移动终端
US9256290B2 (en) Gesture detection using ambient light sensors
CN109923544A (zh) 鉴权方法及电子设备
KR20170004258A (ko) 디스플레이 장치 및 제어 방법
CN105519005A (zh) 用于认证无线连接的装置、方法和系统
US9865227B2 (en) Performance control of ambient light sensors
CN107437009A (zh) 权限控制方法及相关产品
CN103761779A (zh) 移动终端和移动终端上的电子锁控制方法
CN109002340A (zh) 一种锁屏方法及电子设备
CN107465997A (zh) 蓝牙连接方法、装置、终端及计算机可读存储介质
CN109937583A (zh) 数据共享的方法与终端
CN104217172B (zh) 隐私内容查看方法及装置
KR101650385B1 (ko) 이동단말기 및 그 제어방법
CN107451450A (zh) 生物识别方法及相关产品
CN106096367A (zh) 一种移动终端唤醒处理方法、装置和设备
US9323336B2 (en) Gesture detection using ambient light sensors
CN109766680A (zh) 权限控制方法及终端
CN106156596B (zh) 图案锁的设置方法、装置和终端
CN110084009B (zh) 数字解锁方法、装置、存储介质及移动终端
EP2821886A1 (en) Touch-less user interface using ambient light sensors
KR20090012477A (ko) 휴대용 단말기에서 무선 근거리 통신을 위한 디바이스 검색방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant