CN103782252A - 使用轨迹板输入设备控制显示器上的光标的系统和方法 - Google Patents

使用轨迹板输入设备控制显示器上的光标的系统和方法 Download PDF

Info

Publication number
CN103782252A
CN103782252A CN201280032388.2A CN201280032388A CN103782252A CN 103782252 A CN103782252 A CN 103782252A CN 201280032388 A CN201280032388 A CN 201280032388A CN 103782252 A CN103782252 A CN 103782252A
Authority
CN
China
Prior art keywords
track pad
equipment
motion
input equipment
pad input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201280032388.2A
Other languages
English (en)
Other versions
CN103782252B (zh
Inventor
M·布朗
R·盖斯
H·霍
T·E·斯塔内
G·陶布曼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of CN103782252A publication Critical patent/CN103782252A/zh
Application granted granted Critical
Publication of CN103782252B publication Critical patent/CN103782252B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/163Wearable computers, e.g. on a belt
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03547Touch pads, in which fingers can move on a surface
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • G06F3/0418Control or interface arrangements specially adapted for digitisers for error correction or compensation, e.g. based on parallax, calibration or alignment
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04812Interaction techniques based on cursor appearance or behaviour, e.g. being affected by the presence of displayed objects
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B2027/0178Eyeglass type

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

公开了使用轨迹板输入设备控制显示器上的光标的系统和方法。该系统和方法可被示出为基于所识别的关于轨迹板输入设备或计算设备的运动的信息控制与轨迹板输入设备相分离的显示器上的光标。可以确定转换因子以将到轨迹板输入设备的输入与响应于该输入的显示器上的光标控制相关联。当运动信息指示轨迹板输入设备或计算设备处于运动中时,可以调整转换因子。通过在输入信号内过滤掉机械振动信号来平滑化来自到轨迹板输入设备的输入的输入信号。还可以通过从输入信号中减去轨迹板输入设备的绝对运动来平滑化输入信号。

Description

使用轨迹板输入设备控制显示器上的光标的系统和方法
相关申请的交叉引用
本申请要求于2011年6月29日申请的、申请序列号为第13/172,344号的美国专利申请以及于2012年5月7日申请的、申请序列号为第13/465,836号的美国专利申请的优先权,在此合并其内容作为参考。
技术领域
本公开涉及输入设备,作为示例,涉及轨迹板输入设备和这种设备在运动中的功能。
背景技术
轨迹板输入设备使用触觉传感器将用户的手指或其它物体的运动和位置映射到屏幕上的相对位置。引入轨迹板输入设备作为轨迹球和指示杆(pointing stick)的备选和取代物,轨迹球依靠传感器来跟踪插口中球的旋转,而指示杆通过感应使用一对电阻应变仪施加的力来进行操作。轨迹板输入设备通常用于便携式计算机上,但是其可以用作任意一种指示输入设备的替代品。
轨迹板输入设备使用电容式感应、导电传感、或其它技术来跟踪物体的位置。通过沿着轨迹板输入设备的表面滑动他们的手指,用户可以与轨迹板输入设备进行交互以控制显示器上的光标。此外,一些轨迹板输入设备包括以下能力:其解释对轨迹板输入设备进行轻拍(tapping)的动作,以指示对显示器上的对象进行“点击”或选择。此外,一些轨迹板输入设备包括接近传感器或深度传感器,能够感应在一体积或感应区域内的移动。
与轨迹板输入设备相关联的设置或相关联的设备驱动软件可以允许用户调节对触摸轨迹板输入设备的灵敏度。例如,对于轨迹板输入设备的高速设置,手指在轨迹板输入设备上一英寸的滑动会使得光标在显示器的整个屏幕上移动,而轨迹板输入设备的低速设置会响应于同样一英寸的滑动而产生在四分之一屏幕上的移动。类似地,轻拍的灵敏度也是可以配置的。高触摸灵敏度设置的轨迹板输入设备会注意到触摸屏上的轻轻的轻拍,而低触摸灵敏度设置的轨迹板输入设备不会检测到同样的轻轻的轻拍。
发明内容
本公开公开了控制显示器上的光标的方法、设备和其它事物,其中,使用与显示器分离的轨迹板输入设备、基于所识别的轨迹板输入设备或计算设备的运动,来控制光标。
在一个示例中,提供了一种控制显示器上的光标的方法。在该方法中,轨迹板输入设备被配置为控制单独的显示器上的光标。该显示器可以耦接到计算设备。该方法包括但不限于识别关于轨迹板输入设备或计算设备的运动信息。此外,该方法包括:从轨迹板输入设备接收输入信号,其指示到轨迹板输入设备的感应区域的输入。该方法还包括,确定在轨迹板输入设备上接收的输入与光标响应于该输入在显示器上的虚拟空间中所移动距离之间的转换因子。所识别的关于轨迹板输入设备或计算设备的运动的信息可以指示轨迹板输入设备处于运动中。结果,基于所识别的信息可以对转换因子进行调整。
在另一个示例中,提供了其上存储有指令的非临时性计算机可读介质。该指令包括可由计算设备执行的指令。该指令包含用来控制单独的显示器上的光标的指令。该显示器可以耦接到计算设备,而轨迹板输入设备可以配置为控制该显示器上的光标。该指令进一步包含用于识别关于轨迹板输入设备或计算设备的运动的信息的指令。此外,该指令包含用于从轨迹板输入设备接收指示到轨迹板输入设备的感应区域的输入的输入信号的指令。根据该指令,可以确定在轨迹板输入设备上接收的输入与光标响应于该输入在显示器上的虚拟空间中所移动距离之间的转换因子。该指令还包含用于当所识别的关于轨迹板输入设备或计算设备的运动的信息指示轨迹板输入设备处于运动中时,调整转换因子的指令。可以基于所识别的信息进行对转换因子的调整。
在另一个示例中,提供了一种计算设备。该计算设备包括但不限于显示器和与该显示器分离的轨迹板输入设备。轨迹板输入设备可以配置为控制该显示器上的光标。计算设备还包括数据存储,其指示可由计算设备执行以执行功能的指令。该功能包括识别关于轨迹板输入设备或计算设备的运动的信息。此外,该功能包括从轨迹板输入设备接收指示到轨迹板输入设备的感应区域的输入的输入信号。根据该功能,可以确定在轨迹板输入设备上接收的输入与光标响应于该输入在显示器上的虚拟空间中所移动距离之间的转换因子。该功能进一步包括当所识别的关于轨迹板输入设备或计算设备的运动的信息指示了轨迹板输入设备处于运动中时,调整转换因子。可以基于所识别的信息对转换因子进行调整。
上述概要仅是说明性的,而不是试图以任何方式进行限定。除了上面所述的说明性的方面、实施例和特征之外,通过参考附图和下面的详细描述,进一步的方面、实施例和特征将变得明显。
附图说明
图1示出了计算设备的示例。
图2是根据此处所述的至少一些实施例的一种方法的示例框图,该方法基于轨迹板输入设备或计算设备的运动调整对到轨迹板输入设备的输入的控制。
图3示出了通过过滤掉机械振动来平滑化到轨迹板输入设备的输入的示例。
图4示出了通过将轨迹板输入设备的运动与输入进行比较来平滑化到轨迹板输入设备的输入的示例。
图5示出了示例系统。
图6示出了图5的系统的可选视图。
图7示出了可穿戴计算设备可在其中运作的计算机网络基础架构的示例示意图。
图8是示出了根据此处所述的至少一些实施例安排的、在计算系统中使用的示例计算设备功能性框图。
图9是示出根据此处所示的至少一些实施例来安排的、包括在计算设备上执行计算机过程的计算机程序的示例计算机程序产品的概念性部分视图的示意图。
具体实施方式
在下面的详细描述中,参考在此形成一部分的附图。在附图中,相似的符号典型地标记相似的组件,除非上下文语境有不同的规定。在详细描述、附图和权利要求中的所描述的说明性实施例不意味着进行限定。在不脱离此处所示的主题的范围的情况下,可以使用其它实施例并进行其它改变。容易理解,本公开的方面,如此处一般所述的和在附图中示出的那样,能够以各种各种不同的配置来安排、代替、组合、分隔和设计,所有这些在此都是明确可以预期的。
本公开会公开控制显示器上的光标的方法、设备和其它事物,其中,使用与该显示器分离的轨迹板输入设备、基于所识别的轨迹板输入设备或计算设备的运动来控制光标。该设备和方法可以被示出为确定在轨迹板输入设备上接收到的输入与光标响应于该输入在显示器上的虚拟空间中所移动距离之间的转换因子。也可以确定光标响应于输入而移动的方向之间的关系。到轨迹板输入设备的感应区域的输入可以产生指示到计算设备的输入的输入信号。在一个示例中,所识别的关于轨迹板输入设备或计算设备的运动的信息可以指示轨迹板输入设备或计算设备处于运动之中。结果,可以基于所识别的信息来对转换因子进行调整。作为结果,光标移动的方向也可以被改变。在另一个示例中,当轨迹板输入设备或计算设备的运动幅度超出了阈值时,可以进行调整。
在一个示例中,调整转换因子可以包括调整轨迹板输入设备的灵敏度。在另一个示例中,调整转换因子可以包括调整光标的增益控制移动或调整光标的加速度因子。
在一个示例中,到轨迹板输入设备的感应区域的输入可以是在感应区域内的滑动运动。基于所识别的关于轨迹板输入设备的运动的信息可以平滑化到轨迹板输入设备的输入信号。例如,可以从到轨迹板输入设备的输入信号中过滤掉机械振动信号。
在另一个示例中,关于轨迹板输入设备或计算设备的运动的信息可以被识别并用于对接收自轨迹板输入设备的输入信号进行平滑化、预测、从中消除错误或重构。
在其它示例中,基于所识别的关于轨迹板输入设备或计算设备的运动的信息可以以多种方式来控制到轨迹板输入设备的输入。例如,轨迹板输入设备可以以绝对模式或相对模式运行。作为另一个示例,基于轨迹板输入设备或计算设备的运动,可以相应地控制到轨迹板输入设备的某些区域的输入。在另一个示例中,输入到轨迹板输入设备的姿态可以基于轨迹板输入设备或计算设备的动作而指示期望的功能。
在另一个示例中,轨迹板输入设备可以被耦接到计算设备。此外,计算设备可以是可穿戴计算设备的形式。在一些示例中,可以识别关于计算设备的运动的信息。所识别的信息可以指示可穿戴计算设备的用户的运动。可以基于可穿戴计算设备的用户的运动来调整对显示器上的光标的控制。
现在参考附图,图1示出了计算设备100的示例。计算设备100可以包括耦接到存储器104的处理器102。此外,计算设备100可以包括运动识别器106、轨迹板输入设备108和显示器112,所有这些设备都被耦接到处理器102和存储器104。
处理器102可以是耦接到存储器104的任意类型的处理器,例如,微处理器、数字信号处理器(DSP)、多核处理器等等。存储器104可以是任意类型的存储器,比如,易失性存储器,像随机存取存储器(RAM)、动态随机存取存储器(DRAM)、静态随机存取存储器(SRAM),或者非易失性存储器,像只读存储器(ROM)、闪存、磁盘或光盘或者致密盘只读光盘(CD-ROM),以及用于在临时或永久的基础上存储数据或程序的其它设备。
运动识别器106可以配置为识别关于轨迹板输入设备108的运动的信息。在一个示例中,所识别的信息可以指示轨迹板输入设备108处于运动中。在另一个示例中,所述信息可以指示机械振动正在影响轨迹板输入设备108。耦接到处理器102和存储器104的运动识别器106也可能够确定轨迹板输入设备108的运动幅度和/或方向。
在一个实施例中,计算设备100和轨迹板输入设备108可以一起移动。例如,计算设备100和轨迹板输入设备108可以都附属于共同的装置。同样地,它们可能都经受同样的运动或机械振动。运动识别器106可以识别关于轨迹板输入设备108和计算设备100中的一个或两个的信息。在另一个实施例中,计算设备100和轨迹板输入设备108可以独立地移动。例如,轨迹板输入设备108可以与计算设备100分离,并可以适当地将信息转播给计算设备100。在另一个实施例中,运动识别器106可以在计算设备100上,而不在轨迹板输入设备108上。然而,运动识别器106和计算设备100可以以其它方式严格地连接,使得关于轨迹板输入设备108的运动的信息可以由运动识别器106识别。在示例中,如果计算设备100和轨迹板输入设备108不是刚性连接的,而是通过铰链或其它机械结构连接的,那么关于轨迹板输入设备108的运动的信息可以被识别。计算设备100可以进一步配置为对运动识别器106和轨迹板输入设备108之间的相对方位进行假定。例如,计算设备100可以包括硬件传感器以检测轨迹板输入设备108的相对方位。给定相对方位,就可以通过计算确定关于轨迹板输入设备108的运动的信息。因此,计算设备100和轨迹板输入设备108可以经历单独的或共同的运动或机械振动,而关于计算设备100和轨迹板输入设备108中的一个或两个的运动的信息可以由运动识别器106识别。
在一个实施例中,运动识别器106可以包括耦接到轨迹板输入设备108的加速计。加速计可能够确定轨迹板输入设备108何时处于运动中。在一个示例中,加速计输出可以使计算设备100能够确定轨迹板输入设备108的运动幅度和/或方向。类似地,加速计或其它运动识别器可以耦接到计算设备100并使计算设备100能够确定计算设备100的运动幅度和/或方向。在一个实施例中,运动识别器106可以包括陀螺仪。在另一个实施例中,运动识别器106可以包括基于光流的运动传感器。
运动识别器106也可以包括用于提供关于轨迹板输入设备108和/或计算设备100的运动的信息的多种运动传感器中的一种或其组合。例如,传感器融合可以允许对来自加速计、陀螺仪、照相机、磁力计等的传感数据进行组合以得到信息的组合。除了使用单独的加速计、陀螺仪或其它类型的运动识别器106之外,可以使用传感器融合。类似地,传感器融合可以由来自一个或多个同样的传感器的传感数据融合而成。
计算设备100也可以包括或耦接到轨迹板输入设备108。计算设备100可以接收到轨迹板输入设备108的传感区域110的输入。传感区域110可以是包括轨迹板输入设备108表面的空间体积。然而,在一个示例中,轨迹板输入设备108的传感区域110可以不包括表面,如下面当轨迹板输入设备108包括接近传感器、照相机等等时所述。到传感区域110的输入可以被施加到轨迹板输入设备108的表面、传感区域110内或者这二者。虽然传感区域110被示为立方体,但传感区域110可以是任意种类的二维或三维区域或其组合。轨迹板输入设备108可以经由电容感应、电阻感应或表面声波(SAW)过程等等来感知手指或其它指示设备(pointing device)的位置和移动中的至少一个。例如,轨迹板输入设备108可能够感应手指在与感应区域110的表面平行或在同一平面内的方向上、在与感应区域110的表面垂直的方向上或者在这两个方向上的移动,并且也可能够感应施加到该表面的压力的水平。在一个示例中,轨迹板输入设备108可以由一个或多个半透明或透明的绝缘层以及一个或多个半透明或透明的导电层组成。可替换地,轨迹板输入设备108也可能够感应与由感应区域定义的体积内的交互。轨迹板输入设备108可以包括接近传感器、能够可选地跟踪用户的手指和四肢或其它物体的深度照相机、深度传感器、铁耳明式电子乐器、跟踪手持磁性物体的磁性传感器以及其它类型的传感器。
在电容感应的示例中,一个或多个绝缘层可以被涂上一个或多个导电层,并且驱动信号可以被施加到一个或多个导电层中的至少一个。可以使用不同的电容技术来确定与感应区域110接触的位置。例如,用表面电容的方法,仅在绝缘层的一侧涂上导电层。对导电层可以施加一个小电压,以形成静电场。当用户的手指触摸表面时,动态地形成电容器,并且轨迹板输入设备108可以根据电容的变化间接地确定触摸的位置。可替换地,可以使用互电容的方法来确定在多个位置处的触摸位置(例如,多点触摸)。电容感应也可以允许接近检测。在一个示例中,基于电容的传感器可以使轨迹板输入设备108能够在接触或者不接触感应区域110表面的情况下检测到在感应区域110的体积内的交互。例如,轨迹板输入设备108可以检测用户的手指或其它物体何时接近轨迹板输入设备108的表面,还可以识别在感应区域110内的精确的或大体上精确的位置。在电阻感应的示例中,与表面的接触使得由狭窄缝隙分隔开的两个薄的导电层之间的电流在接触点处产生变化。在SAW过程的示例中,与表面的接触产生经过表面的超声波的变化。
在一个示例中,部分表面可以被形成为具有凸起的、凹陷的或粗糙的表面,以便当用户的手指到达表面边缘时向用户提供触觉反馈。在另一个示例中,轨迹板输入设备108可以识别感应区域110内的姿态或特定手指动作。
计算设备100也包括耦接到计算设备100的显示器112。例如,显示器112可以是液晶显示器(LCD)、全息显示器,或者配置为将显示投影到表面,以及其它类型的显示器。显示器112可以包括任意数量的像素,产生任意质量的分辨率。显示器112还可以是由立体像素组成的三维显示器。轨迹板输入设备108可以用于控制在显示器112上可见的光标114的移动。光标114可以是用于展示显示器112上的位置的指示符,所述指示符可以响应于来自轨迹板输入设备108的输入。在一个示例中,光标114可以是向上指或者向左指的箭头的传统形状。在另一个示例中,光标114可以被描绘为任意数量的其它形状。光标114还可以取决于计算设备100的环境而改变形状,或在显示器112上留下表示光标114移动的消失轨迹。
虽然会关于控制光标114的移动地描述轨迹板输入设备108,但这种描述并不意味着限定。方法和系统也可以应用的其它可替换方式也是存在的。轨迹板输入设备108可以用来移动滑动器或在显示器112上将二维或三维物体推来推去。例如,用户可能够使用轨迹板输入设备108来用他们的手指弹泡泡或撞气球。在其它示例中,轨迹板输入设备108可以用来控制网页或地图的滚动、图像或文档等等的浏览或缩放等等。
在一个实施例中,轨迹板输入设备108可以是将手指在轨迹板输入设备108的感应区域110内的运动转换为显示器112上的光标114的运动的指示设备。轨迹板输入设备108可以将感应区域110内的姿态或手指动作解释为特殊命令而不是意图控制光标114的运动。例如,特殊命令可以触发向应于姿态而执行的功能。
在一个示例中,轨迹板输入设备108可以与显示器112分离。可替换地,在显示器112是触摸屏显示器的情况下,轨迹板输入设备108的功能可以被结合到显示器112中。
图2是根据此处所述的至少一些实施例,基于轨迹板输入设备或计算设备的运动调整对到轨迹板输入设备的输入的控制的方法200的示例框图。图2中所示的方法200呈现了例如图1中的计算设备100可以使用的方法的实施例。方法200可以包括由一个或多个框201-209所示的一个或多个操作、功能或动作。虽然按顺序示出了框,但这些框也可以并行地和/或以不同于此处所示的那些顺序来执行。此外,基于所期望的该方法的实现方式,各个框可以被组合到较少的框中、划分到附加的框中和/或从该方法中消除。
此外,对于方法200和此处公开的其它流程和方法,流程图显示了本实施例的一种可能实现方式的功能和操作。在这点上,每个框可以代表程序代码的模块、段或部分,包括可由处理器执行以实现过程中的特定逻辑功能或步骤的一个或多个指令。程序代码可以存储于任意类型的计算机可读介质上,所述计算机可读介质例如,包括磁盘或硬盘的存储设备。计算机可读介质可以包括非临时性计算机可读介质,例如用于短期存储数据的诸如寄存器、处理器高速缓存和随机存取存储器(RAM)之类的计算机可读介质。计算机可读介质还可以包括非临时性介质,诸如例如,次要的或持久长期的存储装置,像只读存储器(ROM)、光盘或磁盘、致密盘只读光盘(CD-ROM)。计算机可读介质也可以是任意其它的易失性或非易失性存储系统。计算机可读介质可以被认为是计算机可读存储介质,例如有形存储设备。
此外,对于方法200和此处公开的其它流程和方法,图2中的每个框可以代表被布线为执行过程中的特定逻辑功能的电路。
一开始,在框201,方法200包括识别关于轨迹板输入设备的运动的信息。在一些示例中,关于轨迹板输入设备的运动的信息可以是对轨迹板输入设备是否处于运动中的指示。在一些示例中,关于轨迹板输入设备的运动的信息可以显露影响轨迹板输入设备的机械振动的量。在一些示例中,关于轨迹板输入设备的运动的信息可以是轨迹板输入设备的运动幅度和/或方向,或者影响轨迹板输入设备的振动的量。例如,关于轨迹板输入设备的运动的信息可以通过从耦接到轨迹板输入设备的加速计接收输出来进行识别。在一些示例中,可以将关于轨迹板输入设备的运动的信息与之前识别的信息或之前识别的信息的统计分析进行比较以确定相对重要性。例如,在轨迹板输入设备和计算设备附属于共同装置的情况下,关于计算设备的运动的信息也可以被识别。
在一个示例中,关于轨迹板输入设备或计算设备的运动的信息可以被实时地连续识别。在另一个示例中,关于轨迹板输入设备或计算设备的运动的信息可以在固定时间间隔的基础上被识别。例如,当关于轨迹板输入设备的运动的信息指示轨迹板输入设备处于运动中时,计算设备可以开始连续地识别轨迹板输入设备的运动。在一个示例中,该信息可以存储于计算设备的存储器中达预定时间长度。
在计算设备和轨迹板输入设备独立移动的实施例中,关于轨迹板输入设备的运动的信息可以包括关于计算设备的运动的信息。计算设备可以包括单独的运动识别器。
在框203,方法200包括从轨迹板输入设备接收指示到轨迹板输入设备的感应区域的输入的输入信号。到轨迹板输入设备的输入可以是对在轨迹板输入设备的感应区域内的位置或移动的指示。例如,感应区域可以是空间的表面或体积中的一者或二者的任意组合。在表面的示例中,输入可以是在轨迹板输入设备的表面的一个位置上的轻拍,或者是在轨迹板输入设备的表面上的滑动运动。输入可以在与表面平行或在同一平面内的方向上,在与表面垂直的方向上或者在这两个方向上。在一个示例中,到轨迹板输入设备的感应区域的输入可以指示同时发生的多于一个输入的位置或移动。例如,到轨迹板输入设备的感应区域的输入可以基于两个手指与轨迹板输入设备的表面的接触或在轨迹板输入设备的感应区域内的交互来指示两个位置或移动。在另一个示例中,到感应区域的输入既可以是与感应区域表面的接触,也可以是在感应区域体积内的交互。
在框205,方法200包括确定到轨迹板输入设备的感应区域的输入和光标响应于输入信号在显示器虚拟空间中移动的距离之间的转换因子。转换因子可以用来在不改变相对量的情况下将测量的量转换为不同单位的度量。在一个示例中,转换因子可以响应于输入使到轨迹板输入设备的输入与对显示器上光标的控制相关。例如,到轨迹板输入设备的输入可以是在轨迹板输入设备的感应区域内的滑动运动。响应于该输入,光标可以在显示器上移动。在轨迹板输入设备的感应区域内的滑动运动可以导致光标在显示器上的虚拟空间中移动距离。例如,虚拟空间中的距离可以是许多像素。在示例中,转换因子可以将在轨迹板输入设备的表面上的一英寸的移动与光标在显示器上移动500像素相关联。其它转换也是可能的。同样地,可以在轨迹板输入设备的感应区域内的运动长度与显示器上的像素数量之间建立转换因子。然而,距离可以是显示器的虚拟空间中的任意距离,例如在三维虚拟空间的情况下的立体像素的数量以及其它类型的距离。
然而,对确定转换因子的描述是作为示例来描述的,而不是意图限定。也可以确定到感应区域的输入和光标响应于输入信号而移动的方向之间的关系。
在一个实施例中,计算设备的存储器可以存储在轨迹板输入设备的感应区域内的移动长度和显示器的虚拟空间中的对应距离之间的多个转换因子。在另一个实施例中,设备驱动器或软件驱动器可以使用转换因子。在一个示例中,轨迹板输入设备的设备驱动器可以利用转换因子并允许轨迹板输入设备与计算设备的应用或操作系统通信。设备驱动器可以存储于计算设备的存储器中。可选地,应用的软件驱动器可以利用转换因子。
在框207,方法200包括确定所识别的信息是否指示了轨迹板输入设备处于运动中。在一个示例中,该决定依赖于来自框201的所识别的关于轨迹板输入设备或计算设备的运动的信息。例如,加速计的输出可以指示轨迹板输入设备或计算设备处于运动中。在另一个示例中,加速计的输出可以指示轨迹板输入设备或计算设备正受机械振动影响。在其它示例中,包括陀螺仪、光传感器或照相机(例如,使用计算机视觉)的其它传感器的输出可以指示轨迹板输入设备或计算设备的运动。
在一个实施例中,可以通过确定轨迹板输入设备或计算设备的动作幅度是否在建立的阈值之上来在框207做出决定。例如,耦接到轨迹板输入设备的加速计可测量振动量并将该量与建立的阈值进行比较。
在一个示例中,可以确定轨迹板输入设备或计算设备可不处于运动中。结果,计算设备无需调整转换因子就可以控制到感应区域的输入。在另一个示例中,可以确定轨迹板输入设备或计算设备可处于运动中。因此,执行方法200的框209。
在框209,方法200包括基于所识别的关于轨迹板输入设备的动作的信息来调整转换因子。在一个示例中,调整转换因子可以包括调整轨迹板输入设备的灵敏度。例如,可以通过改变感应与轨迹板输入设备的表面的接触的阈值来调整轨迹板输入设备的灵敏度。在一个示例中,可以确定轨迹板输入设备或计算设备的运动幅度。基于该幅度,可以相对于轨迹板输入设备或计算设备的运动幅度来改变感应接触的阈值。在另一个示例中,当所识别的关于轨迹板输入设备或计算设备的运动的信息指示轨迹板输入设备或计算设备处于运动中时,可以将感应接触的阈值改变到预定水平。
在一个实施例中,该阈值可以是电容阈值。例如,轨迹输入设备可以由两个或更多个导电层组成。当两个导体彼此相对地平放时,可以形成电容器的栅格。在一个示例中,可以在栅格的每个位置处测量电容。然后可以将电容与电容阈值进行比较以确定是否与轨迹板输入设备的表面进行了接触。
在一个实施例中,可以调整深度传感器的灵敏度。例如,电容传感器可以用来检测在感应区域或体积内的交互。传感器可能够追踪在感应区域内的手指或物体并检测手势(例如,握拳、指示等等)。基于所识别的关于轨迹板输入设备的运动的信息,依据对灵敏度的调整可以减少在对物体位置、手的位置、指尖位置、手的任意关节的位置等等的检测中的噪声量。
在另一个实施例中,阈值可以是压力阈值。在电容器栅格的示例中,可以测量电容的总量。手指接触轨迹板输入设备的表面的压力可以与电容总量相关。例如,随着手指与表面接触的压力增加,手指会变平。由此产生的更大的表面接触会导致更大的总电容。在另一个实施例中,轨迹板输入设备可以使用电阻感应来感应位置或移动。类似地,使用电阻传感器感应到的压力可以与用来感应与轨迹板输入设备的表面接触的压力的阈值进行比较。
在另一个实施例中,该阈值可以是期间与轨迹板输入设备的表面的接触被保持的持续时间。在一个示例中,轨迹板输入设备可以处于运动中并且会发生轻轻的“颠簸”或与表面的意外接触。通过改变感应与表面的接触所需的持续时间,轨迹板输入设备可能够区分与表面的意外接触和有意接触。
在一个示例中,调整转换因子可以包括响应于来自轨迹板输入设备的输入来调整光标的增益控制移动。在一个示例中,在轨迹板输入设备的感应区域内的运动长度和显示器上的光标在显示器的虚拟空间中移动的距离之间可以建立转换因子。例如,在轨迹板输入设备的感应区域上的一英寸运动或划动(stroke)可以使光标在显示器上移动500个像素。在一个示例中,可以基于计算设备的运动对转换因子施加增益。例如,当所识别的关于计算设备的信息指示该设备处于运动中时,转换因子可以减少到二分之一。同样地,可以将增益调整到二分之一。在另一个示例中,可以相对于从所识别的信息中确定的运动幅度来确定增益。
在一个示例中,可以基于所识别的关于轨迹板输入设备的运动的信息、响应于输入信号对光标的移动方向进行调整。除了在对到感应区域的输入和光标响应于其在显示器的虚拟空间中的移动距离之间的转换因子进行调整之外,可以进行这种调整。同样地,作为多种时空过滤的结果,除了光标响应于输入信号移动的运动幅度之外,运动方向也可以被改变。
在一个示例中,调整转换因子可以包括调整光标的加速因子。在一个示例中,加速因子可以指的是在手指在轨迹板输入设备的感应区域内运动的期间,显示器上的光标的速度变化。在一个示例中,在轨迹板输入设备的表面上的运动已经超过阈值之后,光标的速度会增加。加速因子可以实现手指在轨迹板输入设备的表面上的快速滑动,从而允许光标在显示器上移动长距离。在一个示例中,可以基于轨迹板输入设备或计算设备的运动调整加速因子。例如,当计算设备处于运动中时,轨迹板输入设备可以降低加速因子。这可允许光标在显示器上缓慢移动。这也可以防止光标响应于影响轨迹板输入设备表面上的运动的机械振动而在显示器各处快速移动。在另一个示例中,调整转换因子可以包括调整多于一个的加速因子。例如,多于一个的加速因子会导致光标对在轨迹板输入设备的表面上的滑动动作的非线性响应。
在一个示例中,调整转换因子可以包括调整轨迹板输入设备的点精度。在一个示例中,当所识别的关于轨迹板输入设备或计算设备的运动的信息指示轨迹板输入设备或计算设备处于运动中时,可以期望降低轨迹板输入设备的点精度。在一些示例中,可以通过调整光标的加速因子来减小点精度。在另一个示例中,可通过调整用来感应轨迹板输入设备的感应区域内的位置或移动的电容或电阻传感器的灵敏度或分辨率来降低点精度。
在另一个示例中,转换因子可以调整相对于轨迹板输入设备或计算设备的运动幅度的量。可以确定轨迹板输入设备或计算设备的运动幅度并将其与已知幅度进行比较。在一个示例中,可以基于所识别的关于运动的信息的过去历史来确定已知幅度。在另一个实施例中,可以基于运动识别器的检测能力和限制来预定已知幅度。在一个示例中,可以使用查找表来确定可以基于运动幅度而施加到转换因子的调整量。在另一个示例中,可以使用公式或算法来基于运动幅度确定调整总量。
在另一个示例中,调整转换因子可以包括控制到绝对模式中的轨迹板输入设备的输入。例如,在绝对模式中,轨迹板输入设备可以识别在其接收输入的轨迹板输入设备的感应区域内的位置。在一个示例中,在绝对模式中,轨迹板输入设备报告手指与轨迹板输入设备的表面进行接触的绝对位置。可以关于坐标系绝对地测量手指的绝对位置。在一个示例中,与轨迹板输入设备的表面平行的二维坐标系(即,x-y轴)的原点位于轨迹板输入设备的正方形表面的左下角。因此,轨迹板输入设备可以向计算设备报告位置的绝对坐标。
类似地,在另一个示例中,轨迹板输入设备也可以报告与轨迹板输入设备的表面垂直的第三维度(即,z轴)中的到轨迹板输入设备的感应区域的输入的绝对位置。该第三维度可以使轨迹板输入设备能够识别在感应区域体积内的位置。在一个示例中,第三维度中的绝对位置可以指示与表面的接触压力。在可以使用电容传感器形成轨迹板输入设备的示例中,绝对位置的第三维度报告总的手指电容。与表面的接触压力会影响总的电容。在另一个示例中,第三维度可以使用体积感应来指示到感应区域表面的深度或接近度。
在另一个示例中,控制到绝对模式中的轨迹板输入设备的输入也可以包括报告同绝对位置一起的第四值。在一个示例中,第四值可以在感应区域内的手指或感应区域内的指示笔或手写笔之间有所不同。在另一个示例中,第四值可以指示在轨迹板输入设备的感应区域内交互的手指的数量。在另一个示例中,第四值可以指示与感应区域的表面接触的相对大小。第四值可以在接触表面的平均大小的手指和使用手掌与表面的接触之间有所不同。
在另一个示例中,调整转换因子可以包括调整对到轨迹板输入设备的感应区域内的区域的输入的控制。在一个示例中,轨迹板输入设备可以以绝对模式运行。轨迹板输入设备的感应区域内的某些区域可以引起功能响应于与这些区域的接触或交互而在计算设备上被执行。在一个示例中,“热点(hotspots)”或特定位置可具有预定的功能,所述功能在与位置的触摸被做出时可以被执行。“热点”可以用来将超出与传统鼠标类似的功能的功能添加轨迹板输入设备。在另一个示例中,边缘运动可以引起显示器上的窗口上下滚动。沿着轨迹板输入设备的表面移动手指会导致显示器上的窗口向上滚动。
在一个示例中,“热点”或边缘运动的区域大小可以基于所识别的关于轨迹板输入设备或计算设备的信息进行调整。例如,当计算设备处于运动中时,可以增大热点的大小。这可以使得当轨迹板输入设备移来移去时,用户很容易与热点接触。在另一个示例中,当计算设备的运动幅度在阈值之上时,可以禁用到轨迹板输入设备的感应区域内的某些区域的输入。例如,当轨迹板输入设备处于运动中时,可以禁用或锁定“热点”或边缘运动。
在一个示例中,调整转换因子可以包括控制到相对模式中的轨迹板输入设备的输入。在相对模式中,可以在关于固定坐标系的分量方向上以相对运动量接收在轨迹板输入设备的感应区域内的移动。可以相对于与轨迹板输入设备的表面平行和/或垂直的二维或三维(即,x-y-z轴)坐标系来建立分量方向。在一个示例中,向计算设备报告相对运动。例如,可以向计算设备报告手指的相对于该手指之前在轨迹板输入设备的表面上的位置或感应区域内的深度的位置变化。
在另一个示例中,光标运动的衰减也可以是位置的函数。例如,可以建立与轨迹板输入设备的表面或深度传感器垂直的z轴,而与z轴垂直的x-y平面可以在离开表面或深度传感器的各种z轴位置或距离处存在。用户可以指示用来快速移动光标的到在接近于表面或深度传感器的第一x-y平面内的感应区域的输入。可替换地,用户可以远离表面地移动他们的手指并且指示用来缓慢移动光标的到感应区域的第二x-y平面内的感应区域的输入。
在一个示例中,基于所识别的关于轨迹板输入设备或计算设备的运动的信息,轨迹板输入设备可以以相对模式或绝对模式运行。例如,当所识别的信息指示轨迹板输入设备处于运动中时,可以控制到相对模式中的轨迹板输入设备的输入。
依据图2的方法200,基于所识别的关于轨迹板输入设备或计算设备的运动的信息还可以控制轨迹板输入设备的其它方面。在一个示例中,基于计算设备的运动可以调整轨迹板输入设备的感应区域内的区域的大小,在该区域中可以输入到轨迹板输入设备的输入。在另一个示例中,基于轨迹板输入设备的运动可以调整轨迹板输入设备的感应区域内的位置,在该位置处可以输入到轨迹板输入设备的输入。
在一个示例中,与轨迹板输入设备的表面的短暂接触(其中,一个手指可以触摸表面并随后停止与表面的接触,其在与轨迹板输入设备平行的方向上几乎没有或没有运动)可以被识别为轻拍。例如,可以参考三维坐标系确定接触的绝对位置。轨迹板输入设备可以检测在与轨迹板输入设备的表面垂直的方向(即,z轴)上的接触,所述接触处于超过阈值某一距离的深度处,但在非常短的时间段之后就消失了。在接触期间,可能在与轨迹板输入设备表面平行的方向(即,x-y轴)上几乎没有或没有运动。在另一个示例中,轨迹板输入设备可以识别与轨迹板输入设备表面的两个连续的接触。连续的轻拍可以在一段持续时间内发生。在一个示例中,这可能与通常使用鼠标输出的双击的方法类似。
在一个示例中,当所识别的关于轨迹板输入设备或计算设备的运动的信息指示轨迹板输入设备或计算设备处于运动中时,可以调整用来提供输入的其中与表面的两个连续接触能够发生的持续时间。例如,当确定计算设备处于运动中时,可以增加该持续时间。在另一个示例中,可以将响应于与轨迹板输入设备表面的一个接触而执行的计算设备上的功能调整为响应于与表面的两个连续接触而执行。例如,当所识别的信息指示轨迹板输入设备处于运动中时,之前响应于与表面的一个接触而被执行的选择图标的功能现在可以响应于与轨迹板输入设备表面的两个连续接触而执行。在另一个示例中,来自轨迹板输入设备的输入信号可以指示在轨迹板输入设备的感应区域内的两个滑动运动。可以将调整后的转换因子应用到每个滑动运动中。
在另一个示例中,当轨迹板输入设备或计算设备的运动幅度在阈值之上时,可以改变响应于在轨迹板输入设备的感应区域内指示的姿态而执行的功能。识别的姿态可以是轻拍姿态、滑动运动姿态或二者的组合。在一个示例中,姿态可以是在轨迹板输入设备的感应区域内将两根手指捏在一起。在另一个示例中,姿态可以是在轨迹板输入设备的感应区域内旋转两根手指,或用一根手指做螺旋运动。在一个示例中,当计算设备静止时,指示表面上的线性滑动运动的常规划动可以控制一个功能的执行。当确定计算设备处于运动中时,指示表面上的线性运动的同样的划动会导致响应于姿态的要执行的不同功能。例如,响应于到轨迹板输入设备的感应区域的输入,可以锁定显示器。当显示器被锁定时,在轨迹板输入设备的表面上或感应区域内的移动可不再引起显示器上的光标移动。
参考图3,图3示出了通过过滤掉机械振动来平滑化到轨迹板输入设备300的输入的示例。在一个示例中,轨迹板输入设备300的感应区域301可以接收输入,而轨迹板输入设备300可能处于运动中或正在受机械振动影响。可以参照坐标系302来输入在轨迹板输入设备300的感应区域301内的移动或运动。坐标系302可以是二维的或三维的。在感应区域301内输入的运动可以配置为控制显示器306上的光标304。显示器306也可以利用坐标系308将在表面301上的运动映射为光标304的运动。在一个示例中,可以在与坐标系302的一个维度平行的感应区域301内输入运动。例如,该运动可以是x方向上的线性运动。运动可以产生输入信号310。例如,输入信号310可以指示相对于时间的x方向上的位置。在一个示例中,输入信号310可以包括机械振动信号312。机械振动信号312可以归因于影响轨迹板输入设备300的机械振动。机械振动可以是由于不规则的运动、处于较低频率的运动或一次性运动或冲量以及其它振动源所导致的。例如,频率高于6赫兹的机械振动信号可能是振动的结果,而频率低于6赫兹的机械振动信号可能是真实信号和噪声的组合。通过过滤掉机械振动信号312可以平滑化输入信号310。例如,输入信号310可以被平滑化以生成平滑化输入信号314。可以将来自输入信号310的噪声分离出来以生成平滑化输入信号314。然后,光标304可以响应于平滑化输入信号314而在显示器上平滑移动。
在一个示例中,可以使用耦接到轨迹板输入设备300的运动识别器316来平滑化输入信号310。例如,可以使用加速计输出来确定表面301上的运动是用户有意的。在一个示例中,可以将低通滤波器应用到加速计输出的傅里叶变换以过滤掉在频率阈值之上的移动。例如,可以确定频率在为大约6赫兹的阈值之上的任何移动都是非故意移动。可以记录非故意移动发生的时间,然后,输入信号310可以被相应地平滑化。因此,可以忽略频率在阈值之上的机械振动信号312。在另一个示例中,可以基于所识别的关于轨迹板输入设备300的运动的信息来调整频率阈值。可以通过相对于轨迹板输入设备300的运动幅度的量来调整频率阈值。虽然图3中所示的示例是一维的,但是类似的技术可以在更高维度中使用,其中可以包括对多维傅里叶变换的使用。
图4示出了通过将轨迹板输入设备400的运动与输入进行比较来对到轨迹板输入设备400的输入平滑化的示例。在一个示例中,轨迹板输入设备的感应区域401可以接收输入,而轨迹板输入设备400可能处于运动中或受机械振动影响。可以参照坐标系402来输入感应区域401内的移动或运动。坐标系402可以是二维的或三维的。感应区域401内的移动或运动可以生成输入信号404。例如,输入信号404可以指示参照坐标系402的在感应区域401内的运动路径。输入信号404也可以指示在感应区域401表面上的运动路径。当输入移动或运动时,运动识别器406可以识别关于轨迹板输入设备400的运动的信息。在一个示例中,运动识别器406可以生成运动信息408。例如,运动信息408可以指示相对于时间的相对于坐标系402的y轴上的速度。计算设备可以将轨迹板输入设备400的运动与轨迹板输入设备400的感应区域401内的运动进行比较。在一个示例中,比较输入信号404和运动信息408以产生平滑化输入信号410。然后,计算设备可以使用平滑化输入信号来控制显示器上的光标。
在一个示例中,可以通过从输入信号404中减去轨迹板输入设备400的运动来平滑化输入信号404。运动识别器406可以生成运动信息408。例如,通过从耦接到轨迹板输入设备400的加速计中接收输出可以识别关于轨迹板输入设备400的绝对运动的信息。运动信息408可以指示轨迹板输入设备400在y方向上移动达一小段时间,而在感应区域401内输入了与x方向平行的线性运动。轨迹板输入设备400的用户会有意输入与x方向平行的线性运动。通过从输入信号404中减去运动信息408,可以产生平滑化输入信号410。平滑化输入信号410可以指示与x方向平行的线性运动,如原本有意地那样。
在另一个示例中,当来自耦接到轨迹板输入设备400的加速计的输出指示运动时,可以接收来自该加速计的输出。可以将轨迹板输入设备400的运动与感应区域401内的运动进行比较。可以确定对输入信号404的修正。例如,可以基于运动的二维或三维运动空间中的加速计的输出而知道轨迹板输入设备400的运动。手指可以在感应区域401内移动或在同样的运动空间中的表面上移动。可以将轨迹板输入设备400的运动与到轨迹板输入设备400的运动的输入进行比较以通过修正输入信号得到更平滑的结果。在一个示例中,手指的运动可以发生于第二运动空间。通过使用例如坐标变换矩阵将第二运动空间中的运动转换到轨迹板输入设备的运动空间可以对来自轨迹板输入设备的输入信号进行修正。
在其它示例中,可以使用其它方法将运动信息408与输入到感应区域401的运动进行比较。例如,一些方法可以包括随时间推移的训练和/或机器学习,并包括非线性计算。在一个示例中,轨迹板输入设备400的用户可能正乘坐移动的交通工具(例如,公共汽车),交通工具会突然撞上颠簸。结果,轨迹板输入设备400很可能突然向上移动,然后返回向下。然而,通常用户手臂的响应会延迟,用户指尖的运动幅度很可能会不如轨迹板输入设备400的运动幅度大。这可能是由于以下事实:用户的手臂和指尖比用户的躯干更能吸收震动,并被肩部、手肘和腕关节保护。该方法可以预测并减轻轨迹板输入设备400和用户指尖或其它物体之间的相对运动的差异。
例如,此处所述的方法可以使用关于冲量(即,颠簸)、加速(例如,乘坐电梯、在移动的车辆中转弯、火车减速等等)、周期性运动(例如,跑步或散步)或者轨迹板输入设备400上的相对于用户手指作用的其它运动之间的经验关系的信息。根据该关系,可以使用轨迹板输入设备400的冲量、加速、周期性运动或其它运动的运动信息408来平滑化、预测输入信号404或减少来自输入信号404的手指位置信息中的错误。可以从输入信号404中消除由于颠簸而产生的非期望的外部信号以留下所期望的信号或用户手指有意的运动。在一个示例中,可通过检测当前场景(例如,散步、跑步、乘坐公共汽车等)并对该场景应用适当的算法来完成这一过程。可替换地,可以训练通用算法来处理多个场景的到轨迹板输入设备400的输入。可以基于各种运动模式、情况或场景的训练数据、通过机器学习或其它基于训练的系统来开发算法。此外,算法或属于该算法的数据可以存储于数据库中并在示例方法执行期间被访问以确定对信号进行适当的修改。
在另一个示例中,可以使用与轨迹板输入设备400的表面垂直的方向上的运动来控制对表面轻拍的检测。运动识别器406可以确定在与轨迹板输入设备400的表面垂直的方向上已经发生运动。在运动的同时也会发生对轨迹板输入设备400的表面的轻拍。在向轨迹板输入设备400的运动的方向使得表面靠近用户的手指或用来接触表面的其它物体地移动的情况下,对表面的轻拍会被降级为非轻拍。结果,轨迹板输入设备400可以忽略并且不指示对计算设备的轻拍以作为与表面垂直的运动的结果。类似地,可以使用接近传感器来感应感应区域401内的近似轻拍。在与表面垂直的运动的时候,手指或其它物体可能已经几乎接触到轨迹板输入设备400的表面。然而,手指或物体可以没有实际接触到表面(或者没有使用足够引起输入被接收到的力接触表面),因为运动可能已经将表面带离了手指或物体。结果,轨迹板输入设备400将近似轻拍提升为实际轻拍并指示对计算设备的轻拍。
在另一个示例中,用户可能正在公共汽车、汽车、火车或其它移动的交通工具上操作触敏腕表、触敏移动电话或其它计算设备。该交通工具可能会撞上颠簸,而用户可能碰巧在准确的同一时间轻拍。结果,该轻拍会被过滤掉。
在一个实施例中,用来控制显示器上的光标的计算设备可以是可穿戴计算设备。图5示出了示例系统500。系统500以可穿戴计算设备的形式展示。虽然图5示出了眼镜502作为可穿戴计算设备的示例,但是可以附加地或可替换地使用其它类型的可穿戴计算设备。如图5所示,眼镜502包括包含镜框504和506以及中心支架508的框架元件、透镜元件510和512以及延伸侧臂514和516。中心支架508以及延伸侧臂514和516配置为分别经由用户的鼻子和耳朵将眼镜502固定到用户脸部。框架元件504、506和508以及延伸侧臂514和516可以由塑料或金属的实心结构组成,或由类似材料的中空结构组成以便允许连线和组件互连在内部以特定路线通过眼镜502。透镜元件510和512中的每一个可以由配置为显示投影图像或图形的材料组成。透镜元件510和512中的每一个也可以足够透明以使得用户可以通过透镜元件看。在一个示例中,组合透镜元件510和512的这两个特征会促进增强现实或抬头显示,其中,投影的图像或图形可以叠加到用户通过透镜元件510和512感知到的真实世界的视图上。
延伸侧臂514和516是各自分别从框架元件504和506处延伸出的突起物,并且定位于用户耳后以将眼镜502固定到用户。延伸侧臂514和516还可以通过绕着用户头部的后部延伸而将眼镜502固定到用户。附加地或可替换地,例如,系统500可以连接到头戴式头盔结构或固定于在头戴式头盔结构内。其它可能性也是存在的。
系统500也可以包括机载计算系统518、摄影机520、传感器522以及手指可操作轨迹板输入设备524、526。机载计算系统518被展示为位于眼镜502的延伸侧臂514上;然而,可以在眼镜502的其它部件上提供机载计算系统518。例如,机载计算系统518可以包括处理器和存储器。机载计算系统518可以配置为接收并分析来自摄影机520和手指可操作轨迹板输入设备524、526(也可能来自其它传感设备、用户接口或这二者)的数据,并生成图像以用于输出到透镜元件510和512。
摄影机520被展示为位于眼镜502的延伸侧臂514上;然而,可以在眼镜502的其它部件上提供摄影机520。摄影机520可以配置为以各种分辨率或以不同的帧速率捕获图像。许多小型化的摄影机,诸如例如那些在手机或网络摄像头中使用的摄影机,可以被包含到系统500的示例中。虽然图5示出了一个摄影机520,但是可以使用更多个摄影机,并且每一个都可以配置为捕获相同的视图或捕获不同的视图。例如,摄影机520可以是前向的以对用户感知到的真实世界视图的至少一部分进行捕获。然后,可以使用摄影机520捕获的这种前向图像来生成增强现实,在所述增强现实中,计算机生成的图像看起来像是与用户感知到的真实世界视图交互。
传感器522被展示为安装于眼镜502的延伸侧臂516上;然而,可以在眼镜502的其它部件上提供传感器522。例如,传感器522可以包括陀螺仪或加速计中的一个或多个。其它传感设备可以包含于传感器522中,或者传感器522可以执行其它感应功能。
手指可操作轨迹板输入设备524、526被展示为安装于眼镜502的延伸侧臂514、516上。用户可以使用手指可操作的轨迹板输入设备524、526中的每一个来输入命令。手指可操作轨迹板输入设备524、526可以经由电容感应、电阻感应或表面声波过程等等来感应手指的位置和移动中的至少一个。手指可操作轨迹板输入设备524、526可能够感应手指在与板表面平行或在同一平面内的方向上、在与板表面垂直的方向上或者在这两个方向上的移动,并且也可能够感应施加的压力的水平。手指可操作轨迹板输入设备524、526可能够感应手指移动或与轨迹板输入设备524、526接触或不接触的物体的移动。例如,轨迹板输入设备524、526可能够进行接近检测。手指可操作轨迹板输入设备524、526可以由一个或多个半透明或透明的绝缘层以及一个或多个半透明或透明的导电层组成。手指可操作轨迹板输入设备524、526的边缘可以是凸起的、凹陷的或粗糙的表面,以便在用户的手指到达手指可操作轨迹板输入设备524、526的边缘时向用户提供触觉反馈。手指可操作轨迹板输入设备524、526中的每一个可以独立操作,并可以提供不同的功能。手指可操作轨迹板输入设备524、526可以控制透镜元件510、512上的显示上的光标。
图6示出了图5的系统500的备选视图。如图6中所示,透镜元件510和512可以充当显示元件。眼镜502可以包括:第一投影器528,所述第一投影器528耦接到延伸侧臂516的内表面并配置为将显示信息530投影到透镜元件512的内表面上。附加地或可替换地,第二投影器532可以耦接到延伸侧臂514的内表面,并可以配置为将显示534投影到透镜元件510的内表面上。
透镜元件510和512可以充当光投影系统中的组合器,并可以包括涂层,所述涂层反射来自投影器528和532并投影在透镜元件510和512上的光。在一些实施例中,不会使用特殊的涂层(例如,当投影器528和532是扫描激光设备时)。
在可替换实施例中,也可以使用其它类型的显示元件。例如,透镜元件510、512本身可以包括:透明的或半透明的矩阵显示器,例如电致发光显示器或液晶显示器,用于将图像传送到用户眼睛的一个或多个波导管,或能将清晰的接近眼睛的图像传送给用户的其它光学元件。对应的显示器驱动器可以被安置于框架元件504和506内以用于驱动这种矩阵显示器。可替换地或附加地,可以使用激光或LED源和扫描系统直接在用户的一个或两个眼睛的视网膜上绘制光栅显示。其它可能性也是存在的。
在一个示例中,关于计算设备的运动的信息可以包括指示例如系统500的可穿戴计算设备的用户的运动的信息。可穿戴计算设备的用户的运动可以指示用户正在散步。例如,加速计可以配置为提供指示可穿戴计算设备的用户的运动的输出。来自加速计的输出可以指示表明用户正在散步的运动的周期模式。
在一个示例中,当关于可穿戴计算设备用户的运动的信息指示该用户正在散步时,可以对转换因子进行调整。转换因子可以使轨迹板输入设备的感应区域内的运动与光标响应于输入信号在显示器的虚拟空间中移动的距离或方向相关。可以基于所识别的关于可穿戴计算设备的用户的运动的信息来调整转换因子。在另一个示例中,当所识别的关于可穿戴计算设备用户的运动的信息指示了用户正在散步时,可以对转换因子进行调整。在另一个示例中,当计算设备的运动幅度在阈值之上时,可以锁定显示器上光标的位置。例如,当用户散步时,运动幅度可能在阈值之上并且光标会保持在显示器上的不变位置。当运动幅度减小或用户停止散步或减缓移动速度时,可以解锁光标。
在一个示例中,可穿戴计算设备的用户走在街上会导致机械振动。在另一个示例中,可穿戴计算设备的用户乘坐公共汽车会导致机械振动。通过过滤掉输入信号中的机械振动可以平滑化到轨迹板输入设备的输入信号。
在另一个示例中,当可穿戴计算设备的用户正在散步时,可以以相对模式操作轨迹板输入设备。在另一个示例中,可以调整轨迹板输入设备的灵敏度以增加对与轨迹板输入设备的表面的接触的感应的阈值。例如,这种方法可以防止在用户散步时意外的轻拍被作为计算设备的输入来对待。
在一个示例中,关于可穿戴计算设备的用户的运动的信息可以包括关于用户的三维运动的信息。当经由轨迹板输入设备输入运动时,可以使用该运动信息对用户手臂的运动进行平滑化、预测、从中消除错误、或重建。
进一步地,虽然参照控制分离的显示器上的光标的移动的轨迹板输入设备对公开的一些方法和系统进行了描述,但是所述系统和方法也可以应用于其它设备,包括触敏腕表、触摸屏手机、或平板计算机以及其它类型的设备。例如,当试图提供输入时,设备的用户可能正在乘坐移动的交通工具。所述系统和方法可能应用于对由设备接收的输入信号进行平滑化、预测,从中消除错误或重建。可以通过机器学习或用于设备的其它基于训练的系统来使用不同集合的训练数据开发算法。
此外,如之前所述,基于所识别的关于可穿戴计算设备的用户的运动的信息,可以应用调整转换因子的任意示例或控制轨迹板输入设备的附加方面。但是所述示例不是试图进行限定,也可以应用各种其它技术中的任意一种或其组合。
现在参考图7,示出了计算机网络基础架构700的示例示意图,可在其中操作可穿戴计算设备。计算机网络基础架构700包括配置为使用通信链路704(例如,有线或无线连接)与远程设备706通信的设备702。设备702可以是能够接收数据并显示与该数据对应或关联的信息的任意类型的设备。例如,设备702可以是头戴式显示系统,比如参照图5和6所述的眼镜502。
因此,设备702可以包括包含处理器710和显示器712的显示系统708。例如,显示器712可以是光学透视显示器(optical see-through display)、光学环视显示器(optical see-around display)或视频透视显示器(video see-throughdisplay)。处理器710可以从远程设备706接收数据,并配置该数据以用于在显示器712上显示。处理器710可以是任意类型的处理器,诸如例如微处理器或数字信号处理器。
设备702还可以包括耦接到处理器710的机载数据存储装置,比如存储器714。存储器714可以存储例如,可由处理器710访问和执行的软件。
远程设备706可以是配置为向设备702发送数据的任意类型的计算设备或发送器,包括膝上型计算机、移动电话等等。远程设备706和设备702可以包含启动通信链路704的硬件,比如处理器、发送器、接收器、天线等等。
在图7中,通信链路704被示出为无线连接。无线连接可以包括使用例如,蓝牙无线电技术、在IEEE802.11(包括任意IEEE802.11的修订版本)中描述的通信协议、蜂窝技术(比如,GSM、CDMA、UMTS、EV-DO、WiMAX或LTE)或紫蜂
Figure BPA0000184875570000222
技术等等。也可以使用有线连接。例如,通信链路704可以是经由比如通用串行总线的串行总线或并行总线的有线链路。有线连接也可以是专用连接。远程设备706可以是可以经由互联网、使用有线或无线链路访问的,并且可以包括与特定网络服务(例如,社交网络、照片分享、地址薄等等)相关联的计算集群。
图8是示出在计算系统中使用的示例计算设备800的功能性框图,所述示例计算设备800根据此处所述的至少一些实施例安排。该计算设备可以是个人计算机、移动设备、蜂窝电话、触敏腕表、平板计算机、视频游戏系统、或全球定位系统,并可以实现为可穿戴计算设备、显示设备、发送机、主机,或者图1-图7中所述的显示设备、发送器、或主机的一部分。在非常基础的配置802中,计算设备800典型地可以包括一个或多个处理器810和系统存储器820。存储器总线830可以用于在处理器810和系统存储器820之间的通信。取决于所期望的配置,处理器810可以是包括但不限于微处理器(μP)、微控制器(μC)、数字信号处理器(DSP)中的任意类型或其任意组合。存储器控制器815也可以与处理器810一起使用,或者,在一些实现方式中,存储器控制器815可以是处理器810的内部部件。
取决于所期望的配置,系统存储器820可以是包括但不限于,易失性存储器(比如RAM)、非易失性存储器(比如,ROM、闪存等等)中的任意一种或其任意组合。系统存储器820可以包括一个或多个应用程序822和程序数据824。应用程序822可以包括依据本公开而被安排为向电子电路提供输入的图像显示算法823。程序数据824可以包括能够被示出为任意数量类型的数据的内容信息825。在一些示例实施例中,应用程序822可以被安排为利用操作系统上的程序数据824而运行。
计算设备800可以具有附加的特征或功能以及促进基本配置802以及任意设备和接口之间的通信的附加的接口。例如,可以提供数据存储设备840,其包括可移除存储设备842、不可移除存储设备844或其组合。可移除存储装置和不可移除存储装置的示例包括磁盘设备,比如软盘驱动器和硬盘驱动器(HDD);光盘驱动器,比如致密盘(CD)驱动器或数字多功能盘(DVD)驱动器;固态驱动器(SSD)以及磁带驱动器,仅仅列举几例。计算机存储介质可以包括易失性的和非易失性的、非临时性的、可移除的和不可移除的介质,这些介质在任意方法或技术中实现以用于存储信息,比如计算机可读指令、数据结构、程序模块或其它数据。
系统存储器820和存储设备840是计算机存储介质的示例。计算机存储介质包括但不限于,RAM、ROM、EEPROM、闪存或其它存储技术,CD-ROM、数字多功能盘(DVD)或其它光学存储装置,盒式磁带、磁带、磁盘存储装置或其它磁性存储设备,或者可以用来存储期望的信息并由计算设备800访问的任意其它介质。这种计算机存储介质中的任意一个可以是设备800的一部分。
计算设备800也可以包括可以包含图形处理单元852的输出接口,所述图形处理单元852可以配置为经由一个或多个A/V端口或通信接口870与比如显示设备860或扬声器的各种外部设备通信。通信接口870可以包括网络控制器872,所述网络控制器872可以被安排为促进在网络通信上通过一个或多个通信端口874与一个或多个其它计算设备880的通信。通信连接是通信介质的一个示例。通信介质可以由已调制的数据信号(例如载波或其它传输机制)中的计算机可读指令、数据接口、程序模块或其它数据来具体实现,并包括任意信息传送介质。已调制的数据信号可以是这样的信号:其特性中的一个或多个可以以对信号中的信息进行编码的方式来设置和改变。。作为示例而非限制,通信介质可以包括有线介质,比如有线网络或直接连线连接,以及无线介质,比如声音、无线电频率(RF)、红外线(IR)和其它无线介质。
计算设备800可以实现为小型化便携式(或移动)电子设备的一部分,所述电子设备比如蜂窝电话、个人数据助理(PDA)、个人媒体播放器设备、无线网页监测设备(wireless web-watch device)、个人头戴式耳机设备(personalheadset device)、专用应用设备、或包括任意上述功能的混合设备。计算设备800也可以实现为包括膝上型计算机和非膝上型计算机配置两者的个人计算机。
在一些实施例中,公开的方法可以实现为以机器可读格式在非临时计算机可读存储介质或者其它非临时介质或制品上编码的计算机程序指令。图9是示出示例计算机程序产品900的概念性部分视图的示意图,该计算机程序产品900包括根据此处所示的至少一些实施例安排的、用于在计算设备上执行计算机过程的计算机程序。在一个实施例中,使用信号承载介质901提供示例计算机程序产品900。信号承载介质901可以包括一个或多个编程指令902,当所述一个或多个编程指令902由一个或多个处理器执行时,可以提供上面参考图1-8所述的功能或部分功能。因此,例如,参考图2中所示的实施例,与信号承载介质901相关联的一个或多个指令可以实现框201-209的一个或多个特征。
在一些示例中,信号承载介质901可以包含计算机可读介质903,比如但不限于,硬盘驱动器、光盘(CD)、数字视频盘(DVD)、数字磁带、存储器等等。在一些实现方式中,信号承载介质901可以包括计算机可记录介质904,比如但不限于,存储器、读/写(R/W)CD、R/W DVD等等。在一些实现方式中,信号承载介质901可以包括通信介质905,比如但不限于,数字和/或模拟通信介质(例如,光缆、波导、有线通信链路、无线通信链路等等)。因此,例如,信号承载介质901可以由无线形式的通信介质905(例如,符合IEEE802.11标准或其它传输协议的无线通信介质)传送。
例如,一个或多个编程指令902可以是计算机可执行和/或逻辑实现的指令。在一些示例中,比如图8的计算设备800的计算设备可以配置为通过计算机可读介质903、计算机可记录介质904和/或通信介质905中的一个或多个来响应于传送给计算设备800的编程指令902而提供各种操作、功能或动作。
应该理解,此处所述的安排仅仅是出于示例的目的。同样地,本领域技术人员将会理解,替代地,可以使用其它安排和其它元件(例如,机器、接口、功能、顺序、和功能的分组合等等),而且根据期望的结果,可以完全省略一些元件。此外,所描述的许多元件是功能性实体,其可以被实现为利用任意适当的组合及位置的离散的或分布式的组件或与其它组件一起实现。
虽然已经在此公开了各个方面和实施例,但是对于本领域技术人员而言,其它方面和实施例是非常明显的。此处公开的各个方面和实施例是出于说明的目的,而不是用来限制的,真实的范围由权利要求以及这些权利要求有权享有的等价物的全部范围一起来指示。也将会理解,此处使用的术语仅是出于描述特定实施例的目的,没有试图进行限定。

Claims (21)

1.一种方法,包括:
识别关于轨迹板输入设备的运动的信息;
接收到该轨迹板输入设备的感应区域的输入,接收的输入包括在该轨迹板输入设备的感应区域内的滑动运动;以及
基于该轨迹板输入设备的运动幅度与预定义阈值的比较,调整该接收的输入到移动量的转换。
2.如权利要求1的方法,其中,移动量是在显示器的虚拟空间中的距离。
3.如权利要求1的方法,进一步包括基于所识别的关于轨迹板输入设备的运动的信息调整接收的输入到方向的转换。
4.如权利要求1的方法,进一步包括基于该轨迹板输入设备的运动幅度调整接收的输入到移动量的转换。
5.如权利要求1的方法,进一步包括当运动幅度指示该轨迹板输入设备处于运动中时,调整接收的输入到移动量的转换。
6.如权利要求1的方法,其中,所述接收的输入到移动量的转换是非零转换。
7.如权利要求6的方法,其中,所述非零转换包括调整增益,该增益响应于给定的接收的输入确定给定的移动量。
8.一种非临时性计算机可读介质,其具有在其中存储的可由计算设备执行以使得该计算设备执行下列功能的指令:
识别关于轨迹板输入设备的运动的信息;
接收到该轨迹板输入设备的感应区域的输入,接收的输入包括在该轨迹板输入设备的感应区域内的滑动运动;以及
基于该轨迹板输入设备的运动幅度与预定义阈值的比较,调整该接收的输入到移动量的转换。
9.如权利要求8的非临时性计算机可读介质,其中,移动量是在显示器的虚拟空间中的距离。
10.如权利要求8的非临时性计算机可读介质,其中,所述功能进一步包括基于所识别的关于轨迹板输入设备的运动的信息调整接收的输入到方向的转换。
11.如权利要求8的非临时性计算机可读介质,其中,所述功能进一步包括基于该轨迹板输入设备的运动幅度调整接收的输入到移动量的转换。
12.如权利要求8的非临时性计算机可读介质,进一步包括当所识别的信息指示该轨迹板输入设备处于运动中时,调整接收的输入到移动量的转换。
13.如权利要求8的非临时性计算机可读介质,其中,所述接收的输入到移动量的转换是非零转换。
14.如权利要求13的非临时性计算机可读介质,其中,所述非零转换包括调整增益,该增益响应于给定的接收的输入确定给定的移动量。
15.一种计算设备,包括:
轨迹板输入设备;
运动识别器,配置为识别关于轨迹板输入设备的运动的信息;以及
数据存储装置,其指示可由计算设备执行以执行下列功能的指令:
接收到该轨迹板输入设备的感应区域的输入,接收的输入包括在该轨迹板输入设备的感应区域内的滑动运动;以及
基于该轨迹板输入设备的运动幅度与预定义阈值的比较,调整该接收的输入到移动量的转换。
16.如权利要求15的计算设备,其中,该计算设备耦接到可穿戴计算设备。
17.如权利要求16的计算设备,其中,该可穿戴计算设备是头戴式设备。
18.如权利要求15的计算设备,其中,所述移动量是在显示器的虚拟空间中的距离。
19.如权利要求15的计算设备,其中,所述功能进一步包括基于所识别的关于轨迹板输入设备的运动的信息调整接收的输入到方向的转换。
20.如权利要求15的计算设备,其中,所述功能进一步包括基于调整过的接收的输入到移动量的转换来确定响应于接收的输入的计算设备的输出以。
21.如权利要求20的计算设备,其中,所述功能进一步包括当所识别的信息指示轨迹板输入设备处于运动中时,基于调整过的转换确定对该计算设备的输出。
CN201280032388.2A 2011-06-29 2012-06-01 使用轨迹板输入设备控制显示器上的光标的系统和方法 Active CN103782252B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US13/172,344 2011-06-29
US13/172,344 US8194036B1 (en) 2011-06-29 2011-06-29 Systems and methods for controlling a cursor on a display using a trackpad input device
US13/465,836 2012-05-07
US13/465,836 US20130002534A1 (en) 2011-06-29 2012-05-07 Systems and Methods for Controlling a Cursor on a Display Using a Trackpad Input Device
PCT/US2012/040367 WO2013002952A2 (en) 2011-06-29 2012-06-01 Systems and methods for controlling a cursor on a display using a trackpad input device

Publications (2)

Publication Number Publication Date
CN103782252A true CN103782252A (zh) 2014-05-07
CN103782252B CN103782252B (zh) 2018-01-23

Family

ID=46148060

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280032388.2A Active CN103782252B (zh) 2011-06-29 2012-06-01 使用轨迹板输入设备控制显示器上的光标的系统和方法

Country Status (5)

Country Link
US (2) US8194036B1 (zh)
EP (1) EP2726961A4 (zh)
KR (1) KR101570800B1 (zh)
CN (1) CN103782252B (zh)
WO (1) WO2013002952A2 (zh)

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103399632A (zh) * 2013-07-16 2013-11-20 深圳市金立通信设备有限公司 一种手势控制的方法和移动终端
CN104156070A (zh) * 2014-08-19 2014-11-19 北京行云时空科技有限公司 一种人体智能输入体感操控系统及方法
CN105808105A (zh) * 2016-03-09 2016-07-27 青岛海信电器股份有限公司 一种显示设备的控制方法、装置以及显示系统
CN107272889A (zh) * 2017-05-23 2017-10-20 武汉秀宝软件有限公司 一种基于三维坐标的ar界面交互方法及系统
US10073590B2 (en) 2014-09-02 2018-09-11 Apple Inc. Reduced size user interface
US10281999B2 (en) 2014-09-02 2019-05-07 Apple Inc. Button functionality
US10536414B2 (en) 2014-09-02 2020-01-14 Apple Inc. Electronic message user interface
US10545657B2 (en) 2013-09-03 2020-01-28 Apple Inc. User interface for manipulating user interface objects
CN110829035A (zh) * 2019-11-19 2020-02-21 大连海事大学 一种宽半功率波束的圆极化贴片天线
CN111050073A (zh) * 2019-12-26 2020-04-21 维沃移动通信有限公司 一种对焦方法以及电子设备
US10712824B2 (en) 2018-09-11 2020-07-14 Apple Inc. Content-based tactile outputs
US10739974B2 (en) 2016-06-11 2020-08-11 Apple Inc. Configuring context-specific user interfaces
US10884592B2 (en) 2015-03-02 2021-01-05 Apple Inc. Control of system zoom magnification using a rotatable input mechanism
US11068128B2 (en) 2013-09-03 2021-07-20 Apple Inc. User interface object manipulations in a user interface
US11157143B2 (en) 2014-09-02 2021-10-26 Apple Inc. Music user interface
US11157135B2 (en) 2014-09-02 2021-10-26 Apple Inc. Multi-dimensional object rearrangement
CN113805746A (zh) * 2021-08-12 2021-12-17 荣耀终端有限公司 显示光标的方法和装置
US11250385B2 (en) 2014-06-27 2022-02-15 Apple Inc. Reduced size user interface
US11435830B2 (en) 2018-09-11 2022-09-06 Apple Inc. Content-based tactile outputs
US11513675B2 (en) 2012-12-29 2022-11-29 Apple Inc. User interface for manipulating user interface objects
US11656751B2 (en) 2013-09-03 2023-05-23 Apple Inc. User interface for manipulating user interface objects with magnetic properties
US12001650B2 (en) 2021-10-20 2024-06-04 Apple Inc. Music user interface

Families Citing this family (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5119636B2 (ja) * 2006-09-27 2013-01-16 ソニー株式会社 表示装置、表示方法
KR101416235B1 (ko) * 2008-02-12 2014-07-07 삼성전자주식회사 3차원 위치 입력 방법 및 장치
US10126836B2 (en) * 2010-08-18 2018-11-13 Lioudmila Dyer Software cursor positioning system
US8887373B2 (en) 2012-02-24 2014-11-18 Covidien Lp Vessel sealing instrument with reduced thermal spread and method of manufacture therefor
US20130257807A1 (en) * 2012-04-03 2013-10-03 Apple Inc. System and method for enhancing touch input
WO2014003796A1 (en) * 2012-06-30 2014-01-03 Hewlett-Packard Development Company, L.P. Virtual hand based on combined data
EP3327557A1 (en) * 2012-09-11 2018-05-30 FlatFrog Laboratories AB Touch force estimation in a projection-type touch-sensing apparatus based on frustrated total internal reflection
US9477313B2 (en) 2012-11-20 2016-10-25 Samsung Electronics Co., Ltd. User gesture input to wearable electronic device involving outward-facing sensor of device
US8994827B2 (en) * 2012-11-20 2015-03-31 Samsung Electronics Co., Ltd Wearable electronic device
US11237719B2 (en) 2012-11-20 2022-02-01 Samsung Electronics Company, Ltd. Controlling remote electronic device with wearable electronic device
US11372536B2 (en) 2012-11-20 2022-06-28 Samsung Electronics Company, Ltd. Transition and interaction model for wearable electronic device
US10423214B2 (en) 2012-11-20 2019-09-24 Samsung Electronics Company, Ltd Delegating processing from wearable electronic device
US10551928B2 (en) 2012-11-20 2020-02-04 Samsung Electronics Company, Ltd. GUI transitions on wearable electronic device
US10185416B2 (en) 2012-11-20 2019-01-22 Samsung Electronics Co., Ltd. User gesture input to wearable electronic device involving movement of device
US11157436B2 (en) 2012-11-20 2021-10-26 Samsung Electronics Company, Ltd. Services associated with wearable electronic device
US20140152558A1 (en) * 2012-11-30 2014-06-05 Tom Salter Direct hologram manipulation using imu
US10120540B2 (en) * 2013-03-14 2018-11-06 Samsung Electronics Co., Ltd. Visual feedback for user interface navigation on television system
US9619044B2 (en) * 2013-09-25 2017-04-11 Google Inc. Capacitive and resistive-pressure touch-sensitive touchpad
US10691332B2 (en) 2014-02-28 2020-06-23 Samsung Electronics Company, Ltd. Text input on an interactive display
CN103955319B (zh) * 2014-04-30 2017-04-12 锐达互动科技股份有限公司 一种调整书写设备书写描绘速度与平滑的方法
KR20150131577A (ko) 2014-05-15 2015-11-25 엘지전자 주식회사 글래스 타입 단말기
US9557832B2 (en) * 2014-08-25 2017-01-31 Getac Technology Corporation Cursor control apparatus and cursor control method thereof
US9405387B2 (en) 2014-09-17 2016-08-02 Getac Technology Corporation Cursor control apparatus and cursor control method thereof
CN106716320B (zh) 2014-09-30 2020-10-30 苹果公司 用于电子设备的可配置的力敏输入结构
DE102014221997A1 (de) * 2014-10-29 2016-05-04 Bayerische Motoren Werke Aktiengesellschaft Formwerkzeug zur Herstellung von warmumgeformten Bauteilen
US9606697B1 (en) 2014-11-11 2017-03-28 Google Inc. Display cursor for motion controller
KR20170124593A (ko) * 2015-03-20 2017-11-10 후아웨이 테크놀러지 컴퍼니 리미티드 지능형 상호작용 방법, 장비 및 시스템
TWI628569B (zh) 2015-09-30 2018-07-01 蘋果公司 具有適應性輸入列之鍵盤
US10409412B1 (en) 2015-09-30 2019-09-10 Apple Inc. Multi-input element for electronic device
US10180755B2 (en) 2016-02-29 2019-01-15 Apple Inc. Electronic device with dynamic thresholding for force detection
US10317989B2 (en) 2016-03-13 2019-06-11 Logitech Europe S.A. Transition between virtual and augmented reality
US10318065B2 (en) 2016-08-03 2019-06-11 Apple Inc. Input device having a dimensionally configurable input area
US10871860B1 (en) 2016-09-19 2020-12-22 Apple Inc. Flexible sensor configured to detect user inputs
WO2018102615A1 (en) * 2016-11-30 2018-06-07 Logitech Europe S.A. A system for importing user interface devices into virtual/augmented reality
US10732743B2 (en) 2017-07-18 2020-08-04 Apple Inc. Concealable input region for an electronic device having microperforations
CN107450841B (zh) * 2017-08-08 2019-05-07 腾讯科技(深圳)有限公司 交互对象控制方法及装置
US10732676B2 (en) 2017-09-06 2020-08-04 Apple Inc. Illuminated device enclosure with dynamic trackpad
EP4206875A1 (en) * 2021-12-30 2023-07-05 Ningbo Geely Automobile Research & Development Co. Ltd. A vehicle and a method for correcting a touch input miss on a touch screen of a vehicle

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101243382A (zh) * 2005-09-15 2008-08-13 苹果公司 处理跟踪板装置的原始数据的系统和方法
CN101414230A (zh) * 2007-10-17 2009-04-22 鸿富锦精密工业(深圳)有限公司 触摸板及调节触摸板灵敏度的方法
CN101727219A (zh) * 2007-12-21 2010-06-09 原相科技股份有限公司 位移侦测装置和方法
US20100321286A1 (en) * 2009-06-19 2010-12-23 Myra Mary Haggerty Motion sensitive input control
CN102023751A (zh) * 2010-12-29 2011-04-20 杨开艳 一种触控板实现定位与滑动双模式的方法
US20110109575A1 (en) * 2009-11-06 2011-05-12 Elan Microelectronics Corporation Method for cursor motion control by a touchpad to move a cursor on a display screen

Family Cites Families (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5543591A (en) 1992-06-08 1996-08-06 Synaptics, Incorporated Object position detector with edge motion feature and gesture recognition
US7911456B2 (en) 1992-06-08 2011-03-22 Synaptics Incorporated Object position detector with edge motion feature and gesture recognition
AU2586595A (en) 1994-05-12 1995-12-05 Apple Computer, Inc. Method and apparatus for noise filtering for an input device
US5856822A (en) 1995-10-27 1999-01-05 02 Micro, Inc. Touch-pad digital computer pointing-device
EP1058924B1 (en) 1998-01-26 2012-06-13 Apple Inc. Method and apparatus for integrating manual input
US6163326A (en) * 1998-02-26 2000-12-19 Micron Electronics, Inc. Input device for a laptop computer
US6429846B2 (en) * 1998-06-23 2002-08-06 Immersion Corporation Haptic feedback for touchpads and other touch controls
US6424338B1 (en) 1999-09-30 2002-07-23 Gateway, Inc. Speed zone touchpad
WO2002033541A2 (en) 2000-10-16 2002-04-25 Tangis Corporation Dynamically determining appropriate computer interfaces
US7088343B2 (en) * 2001-04-30 2006-08-08 Lenovo (Singapore) Pte., Ltd. Edge touchpad input device
US20040017355A1 (en) 2002-07-24 2004-01-29 Youngtack Shim Cursor control systems and methods
KR20050005072A (ko) 2003-07-01 2005-01-13 엘지전자 주식회사 터치 패드가 구비된 휴대용 컴퓨터에서의 커서 이동 속도제어방법
KR100543703B1 (ko) * 2003-09-08 2006-01-20 삼성전자주식회사 포인팅 장치 및 그 방법
US7495659B2 (en) 2003-11-25 2009-02-24 Apple Inc. Touch pad for handheld device
WO2005109215A2 (en) * 2004-04-30 2005-11-17 Hillcrest Laboratories, Inc. Methods and devices for removing unintentional movement in free space pointing devices
US7728823B2 (en) 2004-09-24 2010-06-01 Apple Inc. System and method for processing raw data of track pad device
US9760214B2 (en) 2005-02-23 2017-09-12 Zienon, Llc Method and apparatus for data entry input
JP4376198B2 (ja) 2005-03-25 2009-12-02 シャープ株式会社 カーソル移動装置
US20060227114A1 (en) * 2005-03-30 2006-10-12 Geaghan Bernard O Touch location determination with error correction for sensor movement
US7692637B2 (en) 2005-04-26 2010-04-06 Nokia Corporation User input device for electronic device
CN100583014C (zh) 2005-09-30 2010-01-20 鸿富锦精密工业(深圳)有限公司 页面信息处理装置及方法
US7903087B2 (en) 2006-02-13 2011-03-08 Research In Motion Limited Method for facilitating navigation and selection functionalities of a trackball incorporated upon a wireless handheld communication device
US20080036737A1 (en) * 2006-08-13 2008-02-14 Hernandez-Rebollar Jose L Arm Skeleton for Capturing Arm Position and Movement
US20090213081A1 (en) * 2007-01-10 2009-08-27 Case Jr Charlie W Portable Electronic Device Touchpad Input Controller
US8692767B2 (en) 2007-07-13 2014-04-08 Synaptics Incorporated Input device and method for virtual trackball operation
EP2017702A1 (en) 2007-07-13 2009-01-21 Flinglab AB Method for controlling the movement of a cursor
US8631358B2 (en) * 2007-10-10 2014-01-14 Apple Inc. Variable device graphical user interface
US20090174679A1 (en) 2008-01-04 2009-07-09 Wayne Carl Westerman Selective Rejection of Touch Contacts in an Edge Region of a Touch Surface
US8766925B2 (en) * 2008-02-28 2014-07-01 New York University Method and apparatus for providing input to a processor, and a sensor pad
US8300020B2 (en) 2008-08-15 2012-10-30 Apple Inc. Hybrid inertial and touch sensing input device
US20100060568A1 (en) 2008-09-05 2010-03-11 Apple Inc. Curved surface input device with normalized capacitive sensing
JP5582629B2 (ja) 2008-10-16 2014-09-03 任天堂株式会社 情報処理装置および情報処理プログラム
US8441441B2 (en) 2009-01-06 2013-05-14 Qualcomm Incorporated User interface for mobile devices
TW201027399A (en) * 2009-01-09 2010-07-16 E Lead Electronic Co Ltd Method for aiding control of cursor movement through a track pad
US8482520B2 (en) * 2009-01-30 2013-07-09 Research In Motion Limited Method for tap detection and for interacting with and a handheld electronic device, and a handheld electronic device configured therefor
US20110050563A1 (en) * 2009-08-31 2011-03-03 Timothy Douglas Skutt Method and system for a motion compensated input device
EP2483761A4 (en) 2009-09-08 2014-08-27 Qualcomm Inc TOUCH SCREEN WITH Z SPEED IMPROVEMENT
JP5207145B2 (ja) * 2009-12-24 2013-06-12 ブラザー工業株式会社 ヘッドマウントディスプレイ
TWI407346B (zh) * 2010-07-30 2013-09-01 Ind Tech Res Inst 觸控輸入裝置之軌跡補償方法與系統,及其電腦程式產品
US8610668B2 (en) * 2010-09-30 2013-12-17 Avago Technologies General Ip (Singapore) Pte. Ltd. Computer keyboard with input device

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101243382A (zh) * 2005-09-15 2008-08-13 苹果公司 处理跟踪板装置的原始数据的系统和方法
CN101414230A (zh) * 2007-10-17 2009-04-22 鸿富锦精密工业(深圳)有限公司 触摸板及调节触摸板灵敏度的方法
CN101727219A (zh) * 2007-12-21 2010-06-09 原相科技股份有限公司 位移侦测装置和方法
US20100321286A1 (en) * 2009-06-19 2010-12-23 Myra Mary Haggerty Motion sensitive input control
US20110109575A1 (en) * 2009-11-06 2011-05-12 Elan Microelectronics Corporation Method for cursor motion control by a touchpad to move a cursor on a display screen
CN102023751A (zh) * 2010-12-29 2011-04-20 杨开艳 一种触控板实现定位与滑动双模式的方法

Cited By (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11513675B2 (en) 2012-12-29 2022-11-29 Apple Inc. User interface for manipulating user interface objects
CN103399632B (zh) * 2013-07-16 2018-01-23 深圳市金立通信设备有限公司 一种手势控制的方法和移动终端
CN103399632A (zh) * 2013-07-16 2013-11-20 深圳市金立通信设备有限公司 一种手势控制的方法和移动终端
US11068128B2 (en) 2013-09-03 2021-07-20 Apple Inc. User interface object manipulations in a user interface
US11656751B2 (en) 2013-09-03 2023-05-23 Apple Inc. User interface for manipulating user interface objects with magnetic properties
US10921976B2 (en) 2013-09-03 2021-02-16 Apple Inc. User interface for manipulating user interface objects
US10545657B2 (en) 2013-09-03 2020-01-28 Apple Inc. User interface for manipulating user interface objects
US11829576B2 (en) 2013-09-03 2023-11-28 Apple Inc. User interface object manipulations in a user interface
US11720861B2 (en) 2014-06-27 2023-08-08 Apple Inc. Reduced size user interface
US11250385B2 (en) 2014-06-27 2022-02-15 Apple Inc. Reduced size user interface
CN104156070A (zh) * 2014-08-19 2014-11-19 北京行云时空科技有限公司 一种人体智能输入体感操控系统及方法
US11068083B2 (en) 2014-09-02 2021-07-20 Apple Inc. Button functionality
US11402968B2 (en) 2014-09-02 2022-08-02 Apple Inc. Reduced size user in interface
US11747956B2 (en) 2014-09-02 2023-09-05 Apple Inc. Multi-dimensional object rearrangement
US11474626B2 (en) 2014-09-02 2022-10-18 Apple Inc. Button functionality
US10536414B2 (en) 2014-09-02 2020-01-14 Apple Inc. Electronic message user interface
US10281999B2 (en) 2014-09-02 2019-05-07 Apple Inc. Button functionality
US11644911B2 (en) 2014-09-02 2023-05-09 Apple Inc. Button functionality
US11743221B2 (en) 2014-09-02 2023-08-29 Apple Inc. Electronic message user interface
US11941191B2 (en) 2014-09-02 2024-03-26 Apple Inc. Button functionality
US10073590B2 (en) 2014-09-02 2018-09-11 Apple Inc. Reduced size user interface
US11157143B2 (en) 2014-09-02 2021-10-26 Apple Inc. Music user interface
US11157135B2 (en) 2014-09-02 2021-10-26 Apple Inc. Multi-dimensional object rearrangement
US10884592B2 (en) 2015-03-02 2021-01-05 Apple Inc. Control of system zoom magnification using a rotatable input mechanism
CN105808105B (zh) * 2016-03-09 2019-03-15 青岛海信电器股份有限公司 一种显示设备的控制方法、装置以及显示系统
CN105808105A (zh) * 2016-03-09 2016-07-27 青岛海信电器股份有限公司 一种显示设备的控制方法、装置以及显示系统
US11073799B2 (en) 2016-06-11 2021-07-27 Apple Inc. Configuring context-specific user interfaces
US10739974B2 (en) 2016-06-11 2020-08-11 Apple Inc. Configuring context-specific user interfaces
US11733656B2 (en) 2016-06-11 2023-08-22 Apple Inc. Configuring context-specific user interfaces
CN107272889A (zh) * 2017-05-23 2017-10-20 武汉秀宝软件有限公司 一种基于三维坐标的ar界面交互方法及系统
US11435830B2 (en) 2018-09-11 2022-09-06 Apple Inc. Content-based tactile outputs
US11921926B2 (en) 2018-09-11 2024-03-05 Apple Inc. Content-based tactile outputs
US10928907B2 (en) 2018-09-11 2021-02-23 Apple Inc. Content-based tactile outputs
US10712824B2 (en) 2018-09-11 2020-07-14 Apple Inc. Content-based tactile outputs
CN110829035A (zh) * 2019-11-19 2020-02-21 大连海事大学 一种宽半功率波束的圆极化贴片天线
CN110829035B (zh) * 2019-11-19 2021-03-16 大连海事大学 一种宽半功率波束的圆极化贴片天线
CN111050073A (zh) * 2019-12-26 2020-04-21 维沃移动通信有限公司 一种对焦方法以及电子设备
CN111050073B (zh) * 2019-12-26 2022-01-28 维沃移动通信有限公司 一种对焦方法以及电子设备
CN113805746A (zh) * 2021-08-12 2021-12-17 荣耀终端有限公司 显示光标的方法和装置
CN113805746B (zh) * 2021-08-12 2022-09-23 荣耀终端有限公司 显示光标的方法和装置
US12001650B2 (en) 2021-10-20 2024-06-04 Apple Inc. Music user interface

Also Published As

Publication number Publication date
EP2726961A2 (en) 2014-05-07
KR20140040176A (ko) 2014-04-02
WO2013002952A2 (en) 2013-01-03
KR101570800B1 (ko) 2015-11-23
US20130002534A1 (en) 2013-01-03
CN103782252B (zh) 2018-01-23
WO2013002952A3 (en) 2013-04-04
US8194036B1 (en) 2012-06-05
EP2726961A4 (en) 2015-03-04

Similar Documents

Publication Publication Date Title
CN103782252A (zh) 使用轨迹板输入设备控制显示器上的光标的系统和方法
KR102038638B1 (ko) 가상 현실에서 핸드 헬드 디바이스를 트랙킹하는 시스템
CN108475120B (zh) 用混合现实系统的远程设备进行对象运动跟踪的方法及混合现实系统
US10720189B2 (en) Haptic effect generation for space-dependent content
CN103079661B (zh) 用于增强现实角色维持并体现观察者的认知的方法
CN109074154B (zh) 增强和/或虚拟现实中的悬停触摸输入补偿
KR20240009999A (ko) 웨어러블 디바이스들에 대한 로컬라이제이션 및 콘텐츠 전달을 위한 비컨들
US8477099B2 (en) Portable data processing appartatus
US20150220158A1 (en) Methods and Apparatus for Mapping of Arbitrary Human Motion Within an Arbitrary Space Bounded by a User's Range of Motion
CN110554769A (zh) 触笔、头戴式显示系统和相关方法
US8319746B1 (en) Systems and methods for removing electrical noise from a touchpad signal
US11644907B2 (en) Systems, devices, and methods for physical surface tracking with a stylus device in an AR/VR environment
KR20170139508A (ko) 에칭 입력의 동적 렌더링
KR102203810B1 (ko) 사용자 입력에 대응되는 이벤트를 이용한 유저 인터페이싱 장치 및 방법
JP2020537200A (ja) 画像に挿入される画像コンテンツについての影生成
KR20110016994A (ko) 사용자 인터페이스 제어를 위한 카메라 제스처들
US20150084875A1 (en) Enhanced haptic feedback for handheld mobile computing devices
CN102508562B (zh) 一种立体交互系统
US11803233B2 (en) IMU for touch detection
EP3591503B1 (en) Rendering of mediated reality content
US9377866B1 (en) Depth-based position mapping
CN102508561B (zh) 一种操作棒
CN103558913A (zh) 一种具有振动反馈的虚拟输入手套键盘
US11782548B1 (en) Speed adapted touch detection
KR101558094B1 (ko) 직관적인 핸드 모션에 기반한 멀티-모달 시스템 및 그 제어 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder

Address after: American California

Patentee after: Google limited liability company

Address before: American California

Patentee before: Google Inc.

CP01 Change in the name or title of a patent holder