CN105612486A - 同时的悬停和触摸接口 - Google Patents

同时的悬停和触摸接口 Download PDF

Info

Publication number
CN105612486A
CN105612486A CN201480051070.8A CN201480051070A CN105612486A CN 105612486 A CN105612486 A CN 105612486A CN 201480051070 A CN201480051070 A CN 201480051070A CN 105612486 A CN105612486 A CN 105612486A
Authority
CN
China
Prior art keywords
touch
hovering
interface
input
alternately
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201480051070.8A
Other languages
English (en)
Inventor
D·黄
L·戴
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN105612486A publication Critical patent/CN105612486A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412—Digitisers structurally integrated in a display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/04166—Details of scanning methods, e.g. sampling time, grouping of sub areas or time sharing with display driving
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Input From Keyboards Or The Like (AREA)

Abstract

示例装置和方法涉及处理对于触敏和悬停敏感的输入/输出(I/O)接口的同时的触摸和悬停动作。一个示例装置包括检测触摸I/O接口的对象的触摸检测器。示例装置包括检测与I/O接口相关联的悬停空间中的对象的接近度检测器。装置产生涉及触摸动作和悬停动作的表征数据。接近度检测器和触摸检测器可以共享一组电容性感测节点。示例装置和方法基于触摸动作和悬停动作的组合来有选择地控制I/O接口上的输入/输出动作。

Description

同时的悬停和触摸接口
背景技术
在某些设备中，触敏屏幕已经被替换为依赖于接近度检测器的悬停敏感的屏幕。触敏屏幕检测触摸到屏幕的对象，而悬停敏感的屏幕可以检测“悬停”在屏幕的某一距离内的对象。触敏屏幕可以标识屏幕上的被用户、用户指示笔或笔、或其他对象触摸的点。可以基于触摸点和在触摸点处发生的动作来控制动作。常规悬停敏感的屏幕检测与悬停敏感设备相关联的悬停空间中的对象。
通常，屏幕可能是触敏屏幕或者悬停敏感的屏幕。如此，悬停交互和触摸交互被视为用户在分离的时间(例如，按顺序)但不同时执行的分离的任务。在某些常规系统中，用户可能必须在触摸交互或悬停交互之间进行选择。这可能不必要地限制了输入动作的潜在的丰富性。
发明内容
提供本概述是为了以简化的形式介绍将在以下详细描述中进一步描述的一些概念。本概述并不旨在标识所要求保护主题的关键特征或必要特征，也不旨在用于限制所要求保护主题的范围。
示例方法和装置用于接受涉及同时的或协调的触摸和悬停动作的输入。例如，用户可以能够执行包括悬停和触摸动作两者的输入动作。触摸可以开始该动作并由悬停补充，或悬停可以开始该动作并由触摸补充。能够同时使用悬停和触摸引入了与既是触摸敏感又是悬停敏感的屏幕进行交互的新方式。
一些实施例可包括对触摸和悬停两种动作敏感的电容性输入/输出(I/O)接口。电容性I/O接口可以检测触摸屏幕的对象(例如，手指、拇指、指示笔)。电容性I/O接口也可以检测不正在触摸屏幕，但位于与屏幕相关联的三维体(例如，悬停空间)中的对象(例如，手指、拇指、指示笔)。电容性I/O接口可能能够同时检测触摸动作和悬停动作。电容性I/O接口可以能够检测多个同时的触摸动作和多个同时的悬停动作。实施例可以产生涉及触摸动作和同时的悬停动作的表征数据。实施例可以根据表征数据来选择性地控制在I/O接口上执行的动作。
附图简述
附图示出本文所述的各种示例装置、方法和其他实施例。将理解到附图中所示的元素边界(如框、框组、或其他形状)表示边界的一个示例。在某些示例中，一个元素可被设计成多个元素，或者多个元素可被设计成一个元素。在某些示例中，示为另一元素的内部组件的某一元素可被实现为外部组件，且反之亦然。此外，元素可不被按比例绘制。
图1示出了示例触摸和悬停敏感设备。
图2示出了示例触摸和悬停敏感设备。
图3示出了示例触摸和悬停敏感设备的一部分。
图4示出了示例触摸和悬停敏感设备的一部分。
图5示出了与同时的悬停和触摸接口相关联的示例方法。
图6示出了与同时的悬停和触摸接口相关联的示例方法。
图7示出了同时的悬停和触摸接口可以在其中操作的示例云操作环境。
图8是描绘了配置有同时的悬停和触摸接口的示例性移动通信设备的系统图。
图9示出了提供同时的悬停和触摸接口的示例设备。
具体实施方式
示例装置和方法检测由触摸I/O接口的对象执行的触摸动作。示例装置和方法还检测由对象在与I/O接口相关联的悬停空间中执行的悬停动作。然后，示例装置和方法确定(如果真会发生的话)如何组合触摸动作与悬停动作。一旦确定了触摸动作和悬停动作的组合，由I/O接口执行的I/O将至少部分地由该组合控制。
使用触摸技术来检测触摸触敏屏幕的对象。“触摸技术”和“触敏”是指感应触摸I/O接口的对象。I/O接口可以是，例如，电容性接口。由电容传感器感测到的电容可能受不同的介电性质的影响，并影响触摸屏幕的对象的电容。例如，手指的介电性质不同于空气的介电性质。类似地，指示笔的介电性质也不同于空气的介电性质。如此，当手指或者指示笔触摸电容性I/O接口时，可以感测到电容变化，并将其用于标识输入动作。尽管描述了电容性I/O接口，但是，更一般而言，可以使用触敏I/O接口。
使用悬停技术来检测悬停空间中的对象。“悬停技术”和“悬停敏感的”是指感测与电子设备中的显示器分隔(例如，不触摸)但与其非常靠近的对象。“非常靠近”可以表示，例如，超出1mm但是在1cm内，超出.1mm但是在10cm内，或范围的其他组合。非常靠近包括在接近度检测器(例如，电容传感器)可以检测并表征悬停空间中的对象的范围内。设备可以是，例如，电话、平板计算机、计算机，或其他设备。悬停技术可以取决于与悬停敏感的设备相关联的接近度检测器。示例装置可包括接近度检测器。
图1示出了既是触敏又是悬停敏感的示例设备100。设备100包括输入/输出(I/O)接口110。I/O接口100既是触敏的，又是悬停敏感的。I/O接口100可以显示一组项，包括，例如，虚拟键盘140，更一般地，用户界面元素120。可以使用用户界面元素来显示信息并接收用户交互。通常，用户交互通过触摸I/O接口110或者通过在悬停空间150中悬停来执行。示例装置促进标识使用触摸动作和悬停动作两者的输入动作并对它们作出响应。
设备100或I/O接口110可以存储有关用户界面元素120、虚拟键盘140，或被显示的其他项目的状态130。用户界面元素120的状态130可以取决于触摸和悬停动作发生的顺序、触摸和悬停动作的数量、触摸和悬停动作是静态的还是动态的、组合的悬停和触摸动作是否描述手势，或取决于触摸和悬停动作的其他属性。状态130可包括，例如，触摸动作的位置、悬停动作的位置、与触摸动作相关联的手势、与悬停动作相关联的手势，或其他信息。
设备100可包括检测对象(例如，手指、带有电容性笔尖的指示笔)何时正在触摸I/O接口110的触摸检测器。触摸检测器可以报告触摸I/O接口110的对象的位置(x，y)。触摸检测器也可以报告对象移动的方向、对象移动的速度、对象是否执行了轻击、双击、三轻击或其他轻击动作、对象是否执行了可识别的手势、或其他信息。
设备100也可以包括检测对象(例如，手指、铅笔，带有电容性笔尖的指示笔)何时接近于但不触摸I/O接口110的接近度检测器。接近度检测器可以标识对象160在三维悬停空间150中的位置(x，y，z)。接近度检测器也可以标识对象160的其他属性，包括，例如，对象160在悬停空间150中的移动速度、对象160相对于悬停空间150的朝向(例如，俯仰角、滚动、侧转)，对象160相对于悬停空间150或设备100移动的方向、由对象160作出的手势，或对象160的其他属性。尽管示出了单个对象160，接近度检测器可以检测悬停空间150中的一个以上的对象。
在不同的示例中，触摸检测器可以使用有源或无源的系统。类似地，在不同的示例中，接近度检测器可以使用有源或无源的系统。在一个实施例中，单个装置可以执行触摸检测器和接近度检测器两者。组合的检测器可以使用感测技术，包括，但不仅限于，电容性，电场、感应、霍耳效应、Reed效应、涡流电流、磁阻、光学阴影、光学可见光、光学红外线(IR)、光学颜色识别、超声波、声辐射、雷达、热量、声纳、导电，以及电阻性的技术。有源系统可包括，除了其他系统之外，红外线或超声波系统。无源的系统可包括，除了其他系统之外，电容性或光学阴影仪系统。在一个实施例中，当组合的检测器使用电容性技术时，检测器可包括一组电容性感测节点以检测悬停空间150中或I/O接口110上的电容变化。电容变化可以，例如，由触摸电容性感测节点或进入电容性感测节点的检测范围内的手指(例如，手指、拇指)或其他对象(例如，笔，电容性指示笔)导致。
一般而言，接近度检测器包括在I/O接口110上以及在与I/O接口110相关联的悬停空间150中生成一组感测场的一组接近度传感器。当对象触摸I/O接口110时，触摸检测器生成信号，当在悬停空间150中检测到对象时，接近度检测器生成信号。在一个实施例中，可以将单个检测器用于触摸检测和接近度检测两者，如此，单个信号可以报告组合的触摸和悬停事件。
在一个实施例中，表征触摸包括从由设备所提供的触摸检测系统(例如，触摸检测器)接收信号。触摸检测系统可以是有源检测系统(例如，红外线，超声波)，无源检测系统(例如，电容性)，或系统的组合。表征悬停也可以包括从由设备所提供的悬停检测系统(例如，悬停检测器)接收信号。悬停检测系统也可以是有源检测系统(例如，红外线，超声波)，无源检测系统(例如，电容性)，或系统的组合。表征组合的触摸和悬停事件也可以包括从被包括到设备中的有源检测系统或无源检测系统接收信号。信号可以是，例如，电压、电流、中断、计算机信号、电子信号，或检测器可以通过其提供有关检测器检测到的事件的信息的其他有形的信号。在一个实施例中，触摸检测系统和悬停检测系统可以是同一个系统。在一个实施例中，触摸检测系统和悬停检测系统可以被包括到设备中或由设备提供。
图2示出了模拟的触敏和悬停敏感设备200，其中，一个手指正在执行触摸动作，而另一手指正在执行悬停动作。由于正在同时执行触摸动作和悬停动作，因此，设备200可以将两个动作解释为单个组合的动作。作为说明，在虚拟键盘上的某一键上方悬停的手指210可以导致该键被突出显示。然后，在被突出显示的键上方作出另一悬停动作(例如，模拟的键入动作)可以导致输入动作，该输入动作导致某一击键出现在文本输入框中。例如，字母e或E可以被置于文本输入框中。但是，字母有两个选择，小写e或大写E。触摸或悬停敏感设备上的键入体验会受可以选择大小写字母的简易性或难度的影响。
在图2中，示出了拇指220正在触摸设备200。拇指220可以正在触摸控制响应于手指210作出的悬停动作输入的字母是小写e还是大写E的用户界面元素(例如，虚拟Shift键)。在图2中，拇指200执行了导致由悬停动作产生大写E的触摸动作。通常，用户可能必须在Shift键上方执行悬停动作，然后，必须将他们的手指移到所希望的字母，接着，必须输入字母。用户可能必须针对计划作为大写字母输入的每一个击键在Shift键上方悬停。设备200通过组合同时的触摸和悬停动作，提供更大的灵活性。在一个示例中，设备200促进利用拇指220在Shift键上执行触摸并保持动作，然后，利用手指210，输入与希望多的大写字母那样多的大写字母。当用户希望返回到小写键入时，用户将简单地从屏幕抬起拇指220，而无需重新定位悬停的手指210。
图3示出了触敏和悬停敏感的I/O接口300。线320表示与悬停敏感的I/O接口300相关联的悬停空间的外部界限。线320被定位在与I/O接口300相隔距离330处。距离330以及如此线320可以对于不同的装置具有不同的尺寸和位置，这取决于例如由支持I/O接口300的设备所使用的接近度检测技术。
示例装置和方法可以标识位于由I/O接口300和线320包围的悬停空间中的对象。示例装置和方法也可以标识正在触摸I/O接口300的对象。例如，设备300可以在时间T1在对象310触摸I/O接口300时检测对象310。由于对象312既不触摸I/O接口310也不在I/O接口300的悬停区域中，因此，在时间T1，可能检测不到对象312。但是，在时间T2，对象312可以进入悬停空间并被检测到。I/O接口300可以被配置成判断是将在时间T1发生的触摸动作和在时间T2发生的悬停动作当作分开的动作还是当作组合的动作。判断可以取决于在时间T1和时间T2之间流逝的时间量、与对象310的触摸动作和对象312的悬停动作相关联的用户界面元素，或根据其他信息。
作为时间分量的说明，如果触摸和悬停动作在预确定的时间阈值内发生，那么，动作可以被视为组合的触摸和悬停动作。但是，如果触摸和悬停动作分隔超过时间阈值量，那么，它们可以被视为分开的动作。时间阈值量可以是，例如，小于一秒的.01、小于一秒的.1，小于一秒的.5，小于一秒，或其他时间段。在一个实施例中，可以使用不同的时间阈值。在一个实施例中，阈值时间量可以是可配置的。
作为用户界面组件的说明，如果触摸动作与某一用户界面元素(例如，Shift键)相关联，那么，在触摸Shift键和输入一个击键的悬停动作之间流逝的时间量可以是不相关的。当描述Shift键时，触摸和悬停组合可被用在不同的应用中。考虑一个视频游戏，可以使用触摸动作来选择一个人物或交通工具(例如，直升机)来移动，可以使用悬停动作来指示移动该人物或交通工具的方向和速度。如果用户将他们的手指悬停于靠近屏幕之处，那么，人物可以移动得比用户将他们的手指悬停于远离屏幕之处时更快。在另一视频游戏中，可以使用悬停动作来选择开火的武器。例如，用户可以在机枪上悬停来选择武器，然后可以在屏幕上机枪被假定瞄准的位置轻击。在另一视频游戏中，可以使用触摸动作的有序对来选择起始点和终点，并可以使用随后的悬停动作来指示速度或强度。例如，利用一个手指的第一触摸可以指示来自火焰喷射器的火焰的源，利用同一个手指的第二触摸可以指示火焰被假定发送的方向，并且利用分开的手指、笔，或指示笔的悬停动作可以指示火焰的强度。可以通过将正在悬停的对象(例如，手指、指示笔)移动得靠近或远离屏幕来改变强度。当描述键入和视频游戏时，可以执行组合的触摸和悬停动作的其他组合。
不同的用户可以具有关于应该如何处理同时的触摸和悬停动作的不同的希望。如此，在一个实施例中，示例装置和方法可以提供应用编程接口(API)，通过该应用编程接口，用户、程序、进程，或其他动作者可以配置或重新配置I/O接口300。如此，一个用户可能希望触摸是主要的而悬停是次要的，另一用户可能希望悬停是主要的而触摸是次要的，再一个用户可能希望没有主要/次要排序。另外，对于不同的应用或在不同的时间，用户可能希望不同的排序、手势，或阈值时间。配置也可以标识要被标识和处理的不同的触摸和悬停动作的组合。配置也可以提供用于处理触摸和悬停动作的信息。例如，配置可包括回调地址、套接字、服务、进程，或可以响应于组合的动作而参与处理动作并控制用户界面元素的其他实体。在一个实施例中，配置可以使用支持I/O接口300的设备中的逻辑来执行，而在另一个实施例中，配置可以在设备之外执行。
图4示出了触敏和悬停敏感的I/O接口400。线420描绘了与I/O接口400相关联的悬停空间的界限。线420被定位在与I/O接口400相隔距离430处。在I/O接口400和线420之间可以存在悬停空间。尽管示出了直线，但是，悬停空间可以在大小和形状方面变化。
图4示出了对象410触摸I/O接口400和对象412触摸I/O接口400。另外，图4还示出了对象414悬停在悬停空间，对象416悬停在悬停空间。对象416可以在显示在I/O接口400上的特定用户界面元素490上方悬停。尽管某些触摸和悬停动作可以涉及首先触摸I/O接口400并且然后执行悬停动作(例如，键入)，但是，某些触摸和悬停动作可以涉及首先在用户界面元素490上悬停并且然后执行额外的触摸或悬停动作。由于I/O接口400可以检测到多个触摸事件和多个悬停事件，以及事件发生的顺序，以及事件的组合，因此，丰富的用户界面交互集合是可能的。例如，对象416可以在用户界面元素490上悬停来选择要在画画应用中使用的颜色。用户界面元素490可以是调色板，其中有单独的颜色以及在单独的颜色之间形成过渡的混合的颜色可用。对象416悬停在元素490上方的距离可以控制是选择单个颜色还是选择颜色的组合。对象410和412可以标识要利用由对象416选择的颜色画的线。对象414可以控制线的粗度。例如，越靠近I/O400的悬停对象414可以产生越细的线，而越远离I/O接口400的悬停对象414可以产生越粗的线。
下文的详细描述的某些部分是按照算法和对存储器内的数据位的运算的符号表示来给出的。这些算法描述和表示被本领域技术人员使用来将其作品的实质传达给其他人。算法被认为是产生结果的运算序列。运算可包括创建和操纵采用电子值的形式的物理量。创建或操纵采用电子值形式的物理量产生了具体的、有形的、有用的、真实世界结果。
原则上出于常见用法的原因将这些信号称作位、值、元素、符号、字符、项、数字以及其它术语被证明有时是方便的。然而，应当记住，这些和类似术语都应与适当的物理量相关联并且仅仅是应用于这些量的方便标签。除非另外具体声明，否则应理解贯穿本说明书，包括处理、计算以及确定在内的术语指的是计算机系统、逻辑、处理器或操纵和变换被表示为物理量的数据(如电子值)的类似电子设备的动作和过程。
参考流程图可更好地理解示例方法。出于简化，所示的方法被示出并描述为一系列框。然而，方法可不受框的顺序的限制，因为在某些实施例中，框可以与所示和所描述的不同顺序出现。而且，为了实现某一示例方法，可能要求比全部所示框少的框。框可被组合或分成多个组件。此外，附加的或替代的方法可采用附加的、未示出的框。
图5示出了与同时的触摸和悬停接口相关联的示例方法500。方法500包括，在530，检测与输入/输出接口的触摸交互。方法500还可包括，在540，检测与输入/输出接口的悬停交互。触摸交互和悬停交互是相关的并至少部分地同时操作，因此可以被同时检测为单独的事件或作为组合的事件。
在一个实施例中，在530检测触摸交互涉及从检测器接收第一信号，在540检测悬停交互涉及从检测器接收第二信号。这是将事件检测为同时的单独的事件。检测器可包括，例如，一组电容性节点。尽管描述了两个单独的信号，一个与检测触摸相关联，一个与检测悬停相关联，但是在一个实施例中，检测触摸交互和检测悬停交互可包括从检测器接收单个信号。这是将事件检测为组合的事件。单个信号可以提供有关组合的触摸和悬停事件的信息，并非接收有关分开的触摸和悬停事件的分开的信号。
在一个实施例中，触摸交互和悬停交互两者都可以由同一个对象执行。例如，用户可以将手指悬停在用户界面元素上方以选择该元素，可以触摸该元素的一部分以选择由用户界面元素所提供的特定特征，然后可以悬停以控制所提供的特征的一个方面。在另一个实施例中，触摸交互和悬停交互可以由两个分开的对象执行。例如，用户可以使用带有电容性笔尖的指示笔来选择一个项，并可以使用手指来控制由所选定的项执行的动作。
方法500也可以包括，在550，标识与触摸交互和悬停交互相关联的组合的触摸和悬停交互。组合的触摸和悬停交互可以取决于与一个或多个悬停交互至少部分地并行地(例如，部分地同时，部分地并行地)发生的一个或多个触摸。在一个实施例中，触摸交互可包括串行地或至少部分地并行地发生的两个或更多个触摸交互。例如，用户可以在第一位置触摸I/O接口以标识视频游戏效果(例如，火焰)的起始位置，并可以在第二位置触摸I/O接口以标识该效果的结束位置。另外，悬停交互可包括串行地或至少部分地并行地发生的两个或更多个悬停交互。例如，用户可以将第一手指悬停在第一位置上方并处于第一高度处以指示与从虚拟小提琴弦发出声音相关联的强度，并可以将第二手指悬停在第二位置上方并处于第二高度处以指示与由虚拟小提琴弦产生的声音相关联的效果(例如，混响)。
方法500也可以包括，在560，根据组合的触摸和悬停交互来有选择地控制设备。在一个实施例中，根据组合的触摸和悬停交互来有选择地控制设备包括从输入/输出接口提供输入信号。例如，组合的触摸和悬停交互可以标识要被输入到文本框中的字符、要被添加到图形中的图形、要用于构建汉字字符的笔触，或其他输入。在一个实施例中，根据所述组合的触摸和悬停交互来有选择地控制所述设备包括将输出信号提供到所述输入/输出接口。例如，组合的触摸和悬停交互可以标识要被显示在虚拟画画程序中的笔触位置、宽度、颜色和强度。类似地，组合的触摸和悬停交互可以标识要由虚拟乐器弹奏的所期望的音符、音量，以及混响。
更一般而言，触摸交互可以控制用户界面元素的第一属性，悬停交互可以控制用户界面元素的第二不同的属性。组合的触摸和悬停交互可以同时协调控制第一属性和第二属性。第一属性可以是对要显示的用户界面元素的选择，第二属性可以是用户界面元素的特性。
方法500可以由不同的应用以不同的方式使用。如此，根据所述组合的触摸和悬停交互来有选择地控制所述设备可包括控制键入应用、控制视频游戏、控制虚拟画画应用，或控制虚拟乐器，或控制其他应用。
图6示出了类似于方法500(图5)的示例方法600。例如，方法600包括在630检测触摸交互，在640检测悬停交互，在640标识组合的触摸和悬停事件，以及在650控制I/O接口。然而，方法600还包括额外的动作。
通常，用户动作的外观、操作，及其他属性可以是通过屏幕上配置可配置的。配置(如果有的话)可以通过用户与I/O接口的交互进行，而不是通过编程控制。另外，由于同时的触摸动作和悬停动作不被允许，因此，没有同时的触摸和悬停动作的配置。示例装置和方法向支持同时的触摸和悬停动作的配置提供更加可配置的并且可扩展的方法。为支持此可配置性，方法600可包括，在610，接收入站消息。例如，可以通过由在设备上运行的进程所提供的应用编程接口(API)来接收消息。在不同的实施例中，也可以使用其他消息传递方法来接收入站消息，包括，例如，套接字、远程过程调用、中断，或共享的存储器。入站消息可包括控制将被接受的组合的类型、如何解析多个触摸、如何解析多个悬停、如何解析同时的动作、如何解析动作的组合、分开的但是相关的动作的时间间隔、事件处理程序的回调地址的配置信息，或其他信息。方法600可以，根据在610接收入站消息来有选择地重新配置哪些组合被接受以及如何处理组合。
用户可以在不同的时间以不同的方式与触敏和悬停敏感的屏幕进行交互。例如，在第一时间，用户可以正在使用文本应用，在第二时间，用户可以正在编辑照片，而在第三时间，用户可以正在处理他们的电子邮件。不同的应用可以具有用户可以以不同的方式与其交互的不同类型的界面。用户可以利用他们的食指与他们的文本应用进行交互，可以利用他们的拇指与他们的电子邮件应用进行交互，可以利用多个手指与视频游戏进行交互，并可以利用电子画笔和多个手指与画画应用进行交互。与虚拟乐器相关联的用户界面也可以使用多个同时的触摸和悬停交互。例如，虚拟小提琴可以使用触摸动作来选择要演奏的弦，使用悬停动作来模拟将弓在弦上通过。悬停动作的接近度可以控制乐器的音量。
尽管图5和6示出了串行地发生的各种动作，但是，应该理解，图5和6中所示出的各种动作可以基本上并行地发生。作为说明，第一进程可以标识触摸动作，第二进程可以标识悬停动作，而第三进程可以处理组合的触摸和悬停动作。尽管描述了三个进程，但是要理解可采用更多或更少数量的进程，以及可采用轻量进程、常规进程、线程以及其他方法。
在一个示例中，方法可被实现为计算机可执行指令。从而，在一个示例中，计算机可读存储介质可存储计算机可执行指令，如果机器(如计算机)执行，计算机可执行指令使得机器执行本文所述或要求保护的方法，如方法500或600。尽管与所列方法相关联的可执行指令被描述为存储在计算机可读存储介质上，但是要理解与本文所述或要求保护的其他示例方法相关联的可执行指令也可被存储在计算机可读存储介质上。在不同实施例中，本文所述的示例方法可以不同方式被触发。在一个实施例中，一种方法可由用户手动触发。在另一示例中，一种方法可被自动触发。
图7示出了示例云操作环境700。云操作环境700支持将计算、处理、存储、数据管理、应用、以及其他功能作为抽象服务而不是作为独立产品来提供。服务可由可被实现为一个或多个计算设备上的一个或多个进程的虚拟服务器来提供。在某些实施例中，进程可在服务器之间迁移而不中断云服务。在云中，共享资源(如计算、存储)可通过网络被提供给包括服务器、客户机、以及移动设备的计算机。不同的网络(如以太网、Wi-Fi、802.x、蜂窝)可被用于访问云服务。与云交互的用户可能不需要知道实际上正在提供服务(如计算、存储)的设备的细节(如位置、名称、服务器、数据库)。用户可经例如web浏览器、瘦客户端、移动应用、或以其他方式来访问云服务。
图7示出了驻留在云中的示例同时的触摸和悬停服务760。同时的触摸和悬停服务760可以依赖于服务器702或服务704以执行处理，并可以依赖于数据存储706或数据库708来存储数据。尽管示出了单个服务器702、单个服务704、单个数据存储706，以及单个数据库708，但是，服务器、服务、数据存储，以及数据库的多个实例可以驻留在云中，因此，可以由同时的触摸和悬停服务760使用。
图7示出了访问云中的同时的触摸和悬停服务760的各种设备。设备包括计算机710、平板720、膝上型计算机730、个人数字助理740、以及移动设备(如蜂窝电话、卫星电话)750。使用不同的设备的不同的位置处的不同的用户可以通过不同的网络或接口访问同时的触摸和悬停服务760。在一个示例中，同时的触摸和悬停服务760可以被移动设备750访问。在另一个示例中，同时的触摸和悬停服务760的某些部分可以驻留在移动设备750上。同时的触摸和悬停服务760可以执行动作，包括，例如，配置触摸和悬停敏感的I/O接口、处理组合的触摸和悬停动作的回调、允许用户定义组合的触摸和悬停动作，或其他服务。在一个实施例中，同时的触摸和悬停服务760可以执行此处所描述的方法的某些部分(例如，方法500、方法600)。
图8是描绘示例性移动设备800的系统图，该移动设备包括各种可选的硬件和软件组件，总地示于802处。移动设备800中的组件802可与其它组件通信，但出于容易例示的目的而未示出所有连接。该移动设备800可以是各种计算设备(例如，蜂窝电话、智能电话、手持式计算机、个人数字助理(PDA)等)，并且可允许与诸如蜂窝或卫星网络的一个或多个移动通信网络804进行无线双向通信。
移动设备800可包括控制器或处理器810(例如，信号处理器、微处理器、专用集成电路(ASIC)，或其他控制和处理逻辑电路)，用于执行任务，包括触摸检测、悬停检测、信号编码、数据处理、输入/输出处理、功率控制，或其他功能。操作系统812可控制对组件802的分配和使用，并支持应用程序814。应用程序814可包括移动计算应用程序(例如，电子邮件应用程序、日历、联系人管理器、web浏览器、消息收发应用)，或其他计算应用。
移动设备800可包括存储器820。存储器820可包括不可移动存储器822或可移动存储器824。不可移动存储器822可包括随机存取存储器(RAM)、只读存储器(ROM)、闪存、硬盘、或其它存储器存储技术。可移动存储器824可包括闪存或订户身份模块(SIM)卡，其在GSM通信系统中是公知的，或者其它存储器存储技术，诸如“智能卡”。存储器820可用于存储数据或用于运行操作系统812和应用814的代码。示例数据可包括触摸动作数据、悬停动作数据、组合触摸和悬停动作数据、用户界面元素状态、网页、文本、图像、声音文件、视频数据，或通过一个或多个有线或无线网络被发送到一个或多个网络服务器或其他设备或从它们接收到的其他数据集。存储器820可存储诸如国际移动订户身份(IMSI)等订户标识符，以及诸如国际移动设备标识符(IMEI)等设备标识符。可将所述标识符传送给网络服务器以标识用户或设备。
移动设备800可以支持一个或多个输入设备830，包括，但不仅限于，既是触摸敏感又是悬停敏感的屏幕832、麦克风834、相机836、物理键盘838，或轨迹球840。移动设备800还可支持输出设备850，包括但不限于：扬声器852以及显示器854。显示器854可以被包括到触敏和悬停敏感的I/O接口中。其他可能的输入设备(未示出)包括加速度计(例如，一维、二维、三维)。其他可能的输出设备(未示出)可包括压电或其他触觉输出设备。某些设备可以提供一个以上的输入/输出功能。输入设备830可包括自然用户接口(NUI)。NUI是使得用户能够以“自然”方式与设备交互而不受由诸如鼠标、键盘、遥控器及其它等输入设备强加的人为约束的接口技术。NUI方法的示例包括依赖于语音识别、触摸和指示笔识别、(屏幕上和屏幕附近的)姿势识别、空中姿势、头部和眼睛跟踪、嗓音和语音、视觉、触摸、姿势、以及机器智能的那些方法。NUI的其它示例包括使用加速计/陀螺仪、脸部识别、三维(3D)显示、头、眼以及凝视跟踪、身临其境的增强现实和虚拟现实系统的运动姿势检测(所有这些都提供更为自然的接口)，以及用于通过使用电场感测电极(脑电波图(EEG)和相关方法)感测脑部活动的技术。由此，在一特定示例中，操作系统812或应用814可包括作为允许用户经由语音命令来操作设备800的语音用户界面的一部分的语音识别软件。进一步，设备800可包括输入设备和允许通过用户的空间手势来进行用户交互的软件，诸如检测并解释向应用提供输入的同时的触摸和悬停手势。
无线调制解调器860可以耦合到天线891。在一些示例中，射频(RF)滤波器被使用且处理器810不需要针对所选频带选择天线配置。线调制解调器860可支持处理器810和外部设备之间的双向通信。调制解调器860被一般性地示出，并且可包括用于与移动通信网络804进行通信的蜂窝调制解调器和/或其它基于无线电的调制解调器(例如蓝牙864或Wi-Fi862)。无线调制解调器860可被配置用于与一个或多个蜂窝网络(诸如，用于在单个蜂窝网络内、蜂窝网络之间、或移动设备与公共交换电话网络(PSTN)之间的数据和语音通信的全球移动通信系统(GSM)网络)进行通信。移动设备800还可使用例如近场通信(NFC)元素893来本地地通信。
移动设备800可包括至少一个输入/输出端口880、电源882、诸如全球定位系统(GPS)接收机之类的卫星导航系统接收机884、加速度计886、或物理连接器890，该物理连接器可以是通用串行总线(USB)端口、IEEE1394(火线)端口、RS-232端口、或其它端口。所示组件802不是必需的或穷举的，因为其它组件可被删除或添加。
移动设备800可包括被配置成提供移动设备800的功能的同时的触摸和悬停逻辑899。例如，同时的触摸和悬停逻辑899可以提供用于与服务(例如，服务760，图7)进行交互的客户端。此处所描述的示例方法的某些部分可以由同时的触摸和悬停逻辑899执行的。类似地，同时的触摸和悬停逻辑899可以实现此处所描述的装置的某些部分。
图9示出了提供同时的触摸和触摸接口的装置900。在一个示例中，装置900包括被配置成连接处理器910、存储器920、一组逻辑930、接近度检测器960、触摸检测器965，以及触敏和悬停敏感的I/O接口950的接口940。在一个实施例中，接近度检测器960和触摸检测器965可以共享一组电容性感测节点，这些节点为输入/输出接口提供触摸敏感性和悬停敏感性两者。装置900的元件可以被配置成相互进行通信，但为清楚起见，并未示出所有连接。
触摸检测器965可以检测对象975何时触摸I/O接口950。接近度检测器960可以检测与装置900相关联的悬停空间970中的对象980。悬停空间970可以是，例如，位于I/O接口950附近的并在可以被接近度检测器960访问的区域中的三维体。悬停空间970具有有限边界。因此，接近度检测器960可能不会检测到位于悬停空间970外面的对象999。
装置900可包括被配置成产生涉及由输入/输出接口检测到的同时的触摸和悬停事件的表征数据的第一逻辑932。表征数据可以描述，例如，触摸的位置、悬停的位置、触摸发生的时间、悬停发生的时间、触摸移动的方向、悬停移动的方向、与触摸相关联的手势、与悬停相关联的手势，或其他信息。在一个实施例中，第一逻辑932可以从与组合的同时的触摸和悬停事件相关联的信号产生表征数据。在另一个实施例中，第一逻辑932可以从与单独的触摸和悬停事件相关联的信号产生表征数据。
装置900可包括第二逻辑934，所述第二逻辑934被配置成根据所述组合的触摸和悬停事件来有选择地控制接收来自所述输入/输出接口的输入或有选择地控制向所述输入/输出接口提供输出。例如，触摸和悬停事件的某一组合可以表示，某一输入将发生(例如，向文本框添加大写E)，而触摸和悬停事件的另一组合可以表示，某一输出将发生(例如，从虚拟小提琴弦演奏声音，在视频游戏中射出虚拟火焰)。
组合的触摸和悬停事件可包括单个触摸部分和单个悬停部分。在一个实施例中，触摸和悬停事件的触摸部分控制被显示在输入/输出接口950上的用户界面元素的第一属性，而触摸和悬停事件的悬停部分控制被显示在I/O接口950上的用户界面元素的第二属性。例如，触摸部分可以标识将发生动作的位置，悬停部分可以标识要在该位置发生的动作。在另一个示例中，触摸部分可以标识要被控制的对象(例如，虚拟小提琴弦)，悬停部分可以标识要应用于弦的效果(例如，运弓、弹拔)和效果的强度(例如，音量控制)。
组合的触摸和悬停事件可包括多个触摸部分或多个悬停部分。在一种动作中，第一触摸部分可以标识将从其中发出效果(例如，由魔咒产生的火焰)的位置，第二触摸部分可以标识效果将被应用的方向，第一悬停部分可以标识效果的特性(例如，强度)，第二悬停部分可以标识效果的另一特性(例如，火焰将散开的角度)。触摸部分和悬停部分的不同组合可被用在不同的应用中。
例如，触摸和悬停事件的触摸部分可包括输入/输出接口950上的两个或更多个触摸，或触摸和悬停事件的悬停部分可包括与输入/输出接口950相关联的悬停空间中的两个或更多个悬停。两个或更多个触摸和两个或更多个悬停可以至少部分地并行地发生，以产生与设备900的不同的丰富的交互。
装置900可包括重新配置第二逻辑934如何处理组合的触摸和悬停事件的第三逻辑936。第三逻辑936可以响应于通过消息收发接口从用户或应用接收到的消息，重新配置第二逻辑934。
900可包括存储器920。存储器920可包括不可移动存储器或可移动存储器。不可移动存储器可包括随机存取存储器(RAM)、只读存储器(ROM)、闪存、硬盘，或其他存储器技术。可移动存储器可包括闪存、或其他存储器技术，诸如“智能卡”。存储器920可以被配置成存储用户界面状态信息，特征数据、对象数据，或其他数据。
设备900可包括处理器910。处理器910可以是，例如，信号处理器、微处理器、专用集成电路(ASIC)，或用于执行包括信号编码、数据处理、输入/输出处理、功率控制，或其他功能的任务的其他控制和处理逻辑电路。处理器910可以被配置成与提供同时的触摸和悬停处理的逻辑930进行交互。
在一个实施例中，设备900可以是通过包括逻辑930组而被转换成专用计算机的通用计算机。逻辑930组可以被配置成执行输入和输出。设备900可以通过，例如，计算机网络，与其他设备、进程，以及服务进行交互。
下面包括了此处使用的选定的术语的定义。定义包括在术语的范围内并可以用于实现的组件的各种示例或形式。示例不旨在是限制性的。术语的单数以及复数形式都可以在定义内。
对“一个实施例”、“实施例”、“一个示例”以及“示例”的引用表示如此描述的实施例或示例可包括特定特征、结构、特性、属性、元件，或局限性，但是，并非每一个实施例或示例都一定包括该特定特征、结构、特性、属性，元件或局限性。此外，短语“在一个实施例中”的重复使用不一定地是指同一个实施例，但是它可以。
如此处所使用的，“计算机可读取的存储介质”是指存储指令或数据的介质。“计算机可读取的存储介质”不是指传播的信号。计算机可读取的存储介质可以呈现许多形式，包括但不仅限于，非易失性介质、以及易失性介质。非易失性介质可包括，例如，光盘、磁盘、磁带，及其他介质。易失性介质可包括，例如，半导体存储器、动态存储器，及其他介质。计算机可读取的存储介质的常见形式可包括，但不仅限于，软盘、硬盘、磁带、其他磁性介质、专用集成电路(ASIC)、光盘(CD)、随机存取存储器(RAM)、只读存储器(ROM)、存储器芯片或卡、记忆棒，及计算机、处理器或其他电子设备可以从其中读取的其他介质。
如此处所使用的，“数据存储”是指可以存储数据的物理或逻辑实体。数据存储可以是，例如，数据库、表、文件、列表、队列、堆、存储器、寄存器、及其他物理储存库。在不同的示例中，数据存储可以驻留在一个逻辑或物理实体中，或可以分布在两个或更多逻辑或物理实体之间。
如此处所使用的，“逻辑”包括，但不仅限于，硬件、固件、在机器上执行的软件，或每一项的执行功能或动作，或从另一逻辑，方法，或系统导致功能或动作的组合。逻辑可包括软件控制的微处理器、单独逻辑(例如，ASIC)、模拟电路、数字电路、编程逻辑设备、包含指令的存储器设备、及其他物理设备。逻辑可包括一个或多个门、门的组合，或其他电路组件。在描述多个逻辑的逻辑的情况下，可以将多个逻辑的逻辑包括到一个物理逻辑中。类似地，在描述单一逻辑的逻辑的情况下，可以将该单一逻辑的逻辑分布在多个物理逻辑之间。
就在说明书或者权利要求书中使用的术语“包括”而言，这一术语旨在以与术语“包括”在用作权利要求书中的过渡词时所解释的相似的方式是包含性的。
就在说明书或权利要求书中术语“或”而言(例如，A或B)，意指“A或B或两者”。当申请人打算表示“只有A或B但不是两者”时，将使用术语“只有A或B但不是两者”。如此，此处的术语“或”的使用是包括性的，而不是排他的使用。参见，BryanA.Garner，ADictionaryofModernLegalUsage624(1995，第二版)。
尽管用对结构特征或方法动作专用的语言描述了本主题，但可以理解，所附权利要求书中定义的主题不必限于上述具体特征或动作。更确切而言，上述具体特征和动作是作为实现权利要求的示例形式公开的。

Claims (15)

1.一种用于与具有既是触敏又是悬停敏感的输入/输出接口的设备进行对接的方法，包括：
检测与所述输入/输出接口的触摸交互；
检测与所述输入/输出接口的悬停交互，其中，所述触摸交互和所述悬停交互是相关的并且至少部分地同时操作；
标识与所述触摸交互和所述悬停交互相关联的组合的触摸和悬停交互，以及
根据所述组合的触摸和悬停交互来有选择地控制所述设备。
2.如权利要求1所述的方法，其特征在于，其中检测所述触摸交互包括从检测器接收第一信号并且其中检测所述悬停交互包括从所述检测器接收第二信号。
3.如权利要求1所述的方法，其特征在于，检测所述触摸交互和检测所述悬停交互包括从检测器接收单个信号。
4.如权利要求1所述的方法，其特征在于，所述触摸交互和所述悬停交互由同一个对象执行。
5.如权利要求1所述的方法，其特征在于，所述触摸交互和所述悬停交互由两个分开的对象执行。
6.如权利要求1所述的方法，其特征在于，所述触摸交互是两个或更多个触摸交互，并且其中所述两个或更多个触摸交互串行地或至少部分地并行地发生。
7.如权利要求1所述的方法，其特征在于，所述悬停交互是两个或更多个悬停交互，并且其中所述两个或更多个悬停交互串行地或至少部分地并行地发生。
8.如权利要求6所述的方法，其特征在于，所述悬停交互是两个或更多个悬停交互，并且其中所述两个或更多个悬停交互串行地或至少部分地并行地发生。
9.如权利要求1所述的方法，其特征在于，根据所述组合的触摸和悬停交互来有选择地控制所述设备包括从所述输入/输出接口提供输入信号。
10.如权利要求1所述的方法，其特征在于，根据所述组合的触摸和悬停交互来有选择地控制所述设备包括将输出信号提供到所述输入/输出接口。
11.如权利要求9所述的方法，其特征在于，根据所述组合的触摸和悬停交互来有选择地控制所述设备包括将输出信号提供到所述输入/输出接口。
12.如权利要求1所述的方法，其特征在于，根据所述组合的触摸和悬停交互来有选择地控制所述设备包括控制键入应用、控制视频游戏、控制虚拟画画应用，或控制虚拟乐器。
13.如权利要求1所述的方法，其特征在于，所述触摸交互控制用户界面元素的第一属性，其中所述悬停交互控制所述用户界面元素的第二属性，并且其中所述组合的触摸和悬停交互同时协调控制所述第一属性和所述第二属性。
14.如权利要求13所述的方法，其特征在于，所述第一属性是对要显示的用户界面元素的选择并且所述第二属性是所述用户界面元素的特性。
15.一种装置，包括：
既然是触敏又是悬停敏感的输入/输出接口，其中所述输入/输出接口包括为所述输入/输出接口提供触摸敏感性和悬停敏感性两者的一组电容性感测节点；
第一逻辑，所述第一逻辑被配置成产生涉及由所述输入/输出接口检测到的同时的触摸和悬停事件的表征数据；
第二逻辑，所述第二逻辑被配置成根据所述组合的触摸和悬停事件来有选择地控制接收来自所述输入/输出接口的输入或有选择地控制向所述输入/输出接口提供输出，以及
第三逻辑，所述第三逻辑重新配置所述第二逻辑如何处理所述组合的触摸和悬停事件，其中所述第三逻辑响应于通过消息收发接口从用户或应用接收到的消息来重新配置所述第二逻辑。
CN201480051070.8A 2013-09-16 2014-09-12 同时的悬停和触摸接口 Pending CN105612486A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/027,288 US20150077345A1 (en) 2013-09-16 2013-09-16 Simultaneous Hover and Touch Interface
US14/027,288 2013-09-16
PCT/US2014/055289 WO2015038842A1 (en) 2013-09-16 2014-09-12 Simultaneous hover and touch interface

Publications (1)

Publication Number Publication Date
CN105612486A true CN105612486A (zh) 2016-05-25

Family

ID=51626615

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480051070.8A Pending CN105612486A (zh) 2013-09-16 2014-09-12 同时的悬停和触摸接口

Country Status (10)

Country Link
US (1) US20150077345A1 (zh)
EP (1) EP3047367A1 (zh)
JP (1) JP2016538659A (zh)
KR (1) KR20160057407A (zh)
CN (1) CN105612486A (zh)
AU (1) AU2014318661A1 (zh)
CA (1) CA2922393A1 (zh)
MX (1) MX2016003187A (zh)
RU (1) RU2016109187A (zh)
WO (1) WO2015038842A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108031112A (zh) * 2018-01-16 2018-05-15 北京硬壳科技有限公司 用于控制终端的游戏手柄
CN109074154A (zh) * 2016-06-29 2018-12-21 谷歌有限责任公司 增强和/或虚拟现实中的悬停触摸输入补偿
CN114008567A (zh) * 2019-06-19 2022-02-01 微软技术许可有限责任公司 触摸器具的自适应悬停操作

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9582178B2 (en) * 2011-11-07 2017-02-28 Immersion Corporation Systems and methods for multi-pressure interaction on touch-sensitive surfaces
US9170736B2 (en) * 2013-09-16 2015-10-27 Microsoft Corporation Hover controlled user interface element
US10025489B2 (en) * 2013-09-16 2018-07-17 Microsoft Technology Licensing, Llc Detecting primary hover point for multi-hover point device
JP6039527B2 (ja) * 2013-10-18 2016-12-07 楽天株式会社 動画生成装置、動画生成方法及び動画生成プログラム
FR3017723B1 (fr) * 2014-02-19 2017-07-21 Fogale Nanotech Procede d'interaction homme-machine par combinaison de commandes tactiles et sans contact
US10719132B2 (en) * 2014-06-19 2020-07-21 Samsung Electronics Co., Ltd. Device and method of controlling device
US9778749B2 (en) 2014-08-22 2017-10-03 Google Inc. Occluded gesture recognition
US11169988B2 (en) 2014-08-22 2021-11-09 Google Llc Radar recognition-aided search
US10817065B1 (en) 2015-10-06 2020-10-27 Google Llc Gesture recognition using multiple antenna
KR102559030B1 (ko) * 2016-03-18 2023-07-25 삼성전자주식회사 터치 패널을 포함하는 전자 장치 및 그 제어 방법
US11003345B2 (en) * 2016-05-16 2021-05-11 Google Llc Control-article-based control of a user interface
US10671450B2 (en) * 2017-05-02 2020-06-02 Facebook, Inc. Coalescing events framework
JP7280032B2 (ja) * 2018-11-27 2023-05-23 ローム株式会社 入力デバイス、自動車
US11868537B2 (en) 2019-07-26 2024-01-09 Google Llc Robust radar-based gesture-recognition by user equipment
JP7316383B2 (ja) 2019-07-26 2023-07-27 グーグル エルエルシー Ｉｍｕおよびレーダーを介した認証管理
CN118192796A (zh) 2019-08-30 2024-06-14 谷歌有限责任公司 移动设备的输入方法
CN113892072A (zh) 2019-08-30 2022-01-04 谷歌有限责任公司 用于暂停的雷达姿势的视觉指示器
FR3107765B3 (fr) 2020-02-28 2022-03-11 Nanomade Lab Capteur de détection de proximité et de mesure de force de contact combiné
US11681399B2 (en) * 2021-06-30 2023-06-20 UltraSense Systems, Inc. User-input systems and methods of detecting a user input at a cover member of a user-input system

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100261526A1 (en) * 2005-05-13 2010-10-14 Anderson Thomas G Human-computer user interaction
CN102214040A (zh) * 2010-04-08 2011-10-12 阿瓦雅公司 用于多状态触摸屏设备的多模式触摸屏用户界面
US20110254796A1 (en) * 2009-12-18 2011-10-20 Adamson Peter S Techniques for recognizing temporal tapping patterns input to a touch panel interface
WO2011136783A1 (en) * 2010-04-29 2011-11-03 Hewlett-Packard Development Company L. P. System and method for providing object information
US20120050180A1 (en) * 2010-08-27 2012-03-01 Brian Michael King Touch and hover switching
US20120242581A1 (en) * 2011-03-17 2012-09-27 Kevin Laubach Relative Touch User Interface Enhancements
US20120268410A1 (en) * 2010-01-05 2012-10-25 Apple Inc. Working with 3D Objects

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101443341B1 (ko) * 2008-06-30 2014-11-03 엘지전자 주식회사 휴대 단말기 및 그 동작제어 방법
US9323398B2 (en) * 2009-07-10 2016-04-26 Apple Inc. Touch and hover sensing
EP2575006B1 (en) * 2011-09-27 2018-06-13 Elo Touch Solutions, Inc. Touch and non touch based interaction of a user with a device
US9152226B2 (en) * 2012-06-15 2015-10-06 Qualcomm Incorporated Input method designed for augmented reality goggles
US20140007115A1 (en) * 2012-06-29 2014-01-02 Ning Lu Multi-modal behavior awareness for human natural command control
US8928609B2 (en) * 2012-07-09 2015-01-06 Stmicroelectronics International N.V. Combining touch screen and other sensing detections for user interface control
US20140267004A1 (en) * 2013-03-13 2014-09-18 Lsi Corporation User Adjustable Gesture Space
US20140267142A1 (en) * 2013-03-15 2014-09-18 Qualcomm Incorporated Extending interactive inputs via sensor fusion
US9170676B2 (en) * 2013-03-15 2015-10-27 Qualcomm Incorporated Enhancing touch inputs with gestures
US9405461B2 (en) * 2013-07-09 2016-08-02 Blackberry Limited Operating a device using touchless and touchscreen gestures

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100261526A1 (en) * 2005-05-13 2010-10-14 Anderson Thomas G Human-computer user interaction
US20110254796A1 (en) * 2009-12-18 2011-10-20 Adamson Peter S Techniques for recognizing temporal tapping patterns input to a touch panel interface
US20120268410A1 (en) * 2010-01-05 2012-10-25 Apple Inc. Working with 3D Objects
CN102214040A (zh) * 2010-04-08 2011-10-12 阿瓦雅公司 用于多状态触摸屏设备的多模式触摸屏用户界面
WO2011136783A1 (en) * 2010-04-29 2011-11-03 Hewlett-Packard Development Company L. P. System and method for providing object information
US20120050180A1 (en) * 2010-08-27 2012-03-01 Brian Michael King Touch and hover switching
US20120242581A1 (en) * 2011-03-17 2012-09-27 Kevin Laubach Relative Touch User Interface Enhancements

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109074154A (zh) * 2016-06-29 2018-12-21 谷歌有限责任公司 增强和/或虚拟现实中的悬停触摸输入补偿
CN109074154B (zh) * 2016-06-29 2021-08-31 谷歌有限责任公司 增强和/或虚拟现实中的悬停触摸输入补偿
CN108031112A (zh) * 2018-01-16 2018-05-15 北京硬壳科技有限公司 用于控制终端的游戏手柄
CN114008567A (zh) * 2019-06-19 2022-02-01 微软技术许可有限责任公司 触摸器具的自适应悬停操作
CN114008567B (zh) * 2019-06-19 2024-05-14 微软技术许可有限责任公司 触摸器具的自适应悬停操作

Also Published As

Publication number Publication date
MX2016003187A (es) 2016-06-24
RU2016109187A3 (zh) 2018-07-13
KR20160057407A (ko) 2016-05-23
JP2016538659A (ja) 2016-12-08
AU2014318661A1 (en) 2016-03-03
WO2015038842A1 (en) 2015-03-19
US20150077345A1 (en) 2015-03-19
EP3047367A1 (en) 2016-07-27
RU2016109187A (ru) 2017-09-20
CA2922393A1 (en) 2015-03-19

Similar Documents

Publication Publication Date Title
CN105612486A (zh) 同时的悬停和触摸接口
CN103870535B (zh) 信息搜索方法和装置
EP3469477B1 (en) Intelligent virtual keyboards
KR102045841B1 (ko) 전자 장치에서 태스크 추천 아이콘을 생성하는 방법 및 장치
KR102189854B1 (ko) 개인적 엔티티들을 모델링
KR102613774B1 (ko) 애플리케이션 관련 사용자 데이터를 추출하고 공유하기 위한 시스템 및 방법
US8893054B2 (en) Devices, systems, and methods for conveying gesture commands
US11200247B2 (en) Method and system for keyword search using messaging service
US20170357521A1 (en) Virtual keyboard with intent-based, dynamically generated task icons
US20160034058A1 (en) Mobile Device Input Controller For Secondary Display
CN105320425A (zh) 基于场境的用户界面的呈现
CN105190520A (zh) 用于使能触摸的设备的悬停手势
GB2503071A (en) Unlocking patterns and executing an action
CN106796789A (zh) 与话音参考点的协同言语交互
CN105900056A (zh) 辅助显示器的悬停敏感控制
CN108829456A (zh) 应用程序预加载方法、装置、存储介质及终端
KR101943988B1 (ko) 컨텐트 전송 방법 및 시스템, 기기와 그 기록 매체
CN105518624A (zh) 用于在用户设备中互通应用的方法和装置
CN105659202A (zh) 探测多悬停点设备的主要悬停点
CN105190469B (zh) 使对象的指定位置被提供给设备
CN108664286A (zh) 应用程序预加载方法、装置、存储介质及移动终端
CN103678441A (zh) 设备及使用该设备的内容搜索方法
CN107111441A (zh) 多级用户界面
US9935939B1 (en) Keyboard login manager
CN110799943A (zh) 从图形键盘内访问应用程序功能

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20160525