CN104704451A - 提供用于定位和数据输入的触觉反馈 - Google Patents

提供用于定位和数据输入的触觉反馈 Download PDF

Info

Publication number
CN104704451A
CN104704451A CN201380052074.3A CN201380052074A CN104704451A CN 104704451 A CN104704451 A CN 104704451A CN 201380052074 A CN201380052074 A CN 201380052074A CN 104704451 A CN104704451 A CN 104704451A
Authority
CN
China
Prior art keywords
key
user
touch
sensitive display
finger
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201380052074.3A
Other languages
English (en)
Other versions
CN104704451B (zh
Inventor
T·S·佩克
J·埃佩西布尔
B·李
A·古纳瓦达纳
V·库尔卡尼
H·Z·谭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from US13/745,860 external-priority patent/US9740399B2/en
Application filed by Microsoft Corp filed Critical Microsoft Corp
Publication of CN104704451A publication Critical patent/CN104704451A/zh
Application granted granted Critical
Publication of CN104704451B publication Critical patent/CN104704451B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

描述了与向具有触敏显示器的计算设备的用户提供触觉反馈有关的各种技术。第一触觉反馈被提供来辅助用户相对于触敏显示器上所显示的图形对象来定位手指或拇指，其中无输入数据被提供给对应于该图形对象的应用。用户提出的切换命令接着被标识；此后，在触敏显示器上接收到输入手势，第二触觉反馈被提供来帮助用户向应用提出输入数据。

Description

提供用于定位和数据输入的触觉反馈
背景技术
移动计算设备已被配置成显示软输入面板，其中用户可通过选择软输入面板的按钮来生成文本。典型地，在移动计算设备上，软输入面板上的每个键表示单个字符。因此，对于要使用软输入面板向移动计算设备输入文本的用户来说，该用户可选择(例如通过轻击)代表希望被包括在这一文本中的相应字符的分立的键。由于许多移动计算设备具有相对较小的屏幕，这些计算设备已被配置有执行拼写校正和/或校正“胖手指并发症”(其中用户错误地轻击了希望被轻击的键附近的键)的软件。
传统上，当用户不能持续地看显示软输入面板的屏幕时，用户非常难以使用软输入面板准确地输入文本。对于移动计算设备来说，这可能至少部分地归因于相对较小的屏幕大小，以及因此造成的包括在屏幕上所显示的软输入面板中的相对较小的键大小。例如，在移动电话上显示的示例性软输入面板上，10个分开的键可存在于单行键中。因此用户可能难以记起哪些键在哪些行中。即使用户记起哪些键在哪些行中，用户可能仍然难以在不直接看软输入面板的情况下轻击软输入面板中的某一特定键。
发明内容
以下是在本文更详细描述的主题的简要概述。本概述不旨在是关于权利要求的范围的限制。
本文描述了与向具有触敏显示器的计算设备的用户提供触觉反馈来辅助用户向这种计算设备提出输入数据有关的各种技术。例如，移动计算设备可包括触敏显示器，其中移动计算设备的用户可通过与触敏显示器的交互来向移动计算设备提供输入。触觉反馈可最初被提供给用户来辅助用户相对于触敏显示器上显示的图形对象来初始地定向手指(如拇指或手指)。具体来说，当手指在触敏显示器的表面上转移时，第一触觉反馈可被提供给用户的手指，其中第一触觉反馈被提供来辅助用户确定这些图形对象在触敏显示器上的位置而不必查看触敏显示器。
在用户如所需地在触敏显示器上(如在特定图形对象上)定向了手指之后，用户可提出切换命令。切换命令可指示出用户已将手指定位在所希望的位置/定向，且现在希望向移动计算设备提供输入。这一切换命令可以是双次轻击、通过手指向触敏显示器施加额外的压力、摇晃移动计算设备、话音命令等。响应于检测到该切换命令，用户提出的后续手势可被解释为输入手势，使得输入被提供给移动计算设备上执行的操作系统和/或应用。对于某些应用，例如采用软输入面板来从用户接收输入的文本输入应用，触觉反馈可被连续地提供给移动计算设备的用户，使得在手指在移动计算设备的表面上转移时用户保持对手指的位置的知晓。在文本输入应用通过形状书写(shapewriting)接收输入数据时这一实施例可能尤其有益，其中用户通过用笔划连接软输入面板中的键而不是分开地轻击这些键来选择这些键。
在一示例性实施例中，包括多个键的软输入面板可被显示在计算设备的触敏显示器上。例如，计算设备的用户可能希望采用触敏显示器来向计算设备上执行的应用输入文本而不被强迫看触敏显示器。例如，用户可能正在看电影，且可能希望向朋友发消息而不将她的眼睛从电影转移开。在另一示例中，用户可能正在看演讲者且可能希望做关于该演讲者提出的演讲的笔记而不将她的眼睛移离演讲者。用户可将手指(拇指、手指或指示笔)放在触敏显示器的显示器上并开始在触敏显示器的表面上转移手指。可向用户提供触觉反馈来辅助用户标识软输入面板的键的位置。例如，可提供触觉反馈使得在手指转移通过软输入面板的键之间的边界时用户感知到摩擦力中的增加。在另一示例中，可以棋盘状图案来提供触觉反馈，使得用户感知到触敏显示器的显示第一键的第一区域与触敏显示器的显示第二键的第二、相邻区域相比具有更粗糙的表面。从而，通过在触敏显示器上转移手指，触觉反馈可辅助用户确定手指正落在软输入面板中的某一键上而不必看触敏显示器。
在用户出于定位的目的在触敏显示器的表面上转移手指时，不向移动计算设备上的应用提供输入。为了向移动计算设备上的应用提供输入(如使用软输入面板生成文本)，用户可提出切换命令，例如双次轻击或用增加的压力将手指按压在触敏显示器上。
在接收到该切换命令之后，计算设备被配置成标识由用户提出的后续输入手势。例如，用户可在某一键上提出轻击，这指示出用户希望输入由该键表示的字符。在另一示例中，计算设备可被配置成通过形状书写来生成文本，其中不是轻击分立的键来选择字符，而是用户通过在触敏显示器的表面上转移手指同时保持与该显示器的接触来连接表示所希望的字符的键。因此，为了输入单词“hello”，不是轻击表示字母“h”、“e”、“l”、“l”和“o”的分立的键，而是用户在触敏显示器上转移手指来连接表示字符“h”、“e”、“l”和“o”的键。在这一实施例中，计算设备可输出触觉反馈来辅助用户理解在手指在软输入面板上转移时软输入面板中的键相对于手指的位置。如上所述，可在软输入面板中的键的边界处或在用户转移通过键本身时提供触觉反馈，来辅助用户在用户生成输入数据时识别/记起软输入面板上键的位置。将形状书写与触觉反馈相组合可辅助用户生成文本而不被强迫持续看计算设备的显示器。
以上概述呈现了简化概述，以便提供对本文讨论的系统和/或方法的某些方面的基本理解。本概述并不是对本文所讨论的系统和/或方法的全面综述。并不旨在标识关键/重要元素，也不描绘这样的系统和/或方法的范围。其唯一目的是以简化形式呈现一些概念，作为稍后呈现的更详细说明的序言。
附图说明
图1是通过在用户与计算设备的触敏显示器交互时提供触觉反馈来便于在向计算设备提供输入方面辅助用户的示例性系统的功能框图。
图2是例示出软输入面板的某些部分示例性系统的功能框图，其中在用户的手指转移通过这些部分时提供触觉反馈。
图3是例示出软输入面板中的某些部分示例性系统的功能框图，其中在用户的手指转移通过这些部分时提供触觉反馈。
图4例示出在用户与触敏显示器交互时使用户感知到摩擦力中的变化方面可被采用的硬件。
图5例示出用户可采用来生成文本的软输入面板中的键的示例性布局。
图6例示出多个窗口小部件的排列，其中当用户的手指转移通过这些窗口小部件时向用户提供触觉反馈来辅助用户定位窗口小部件以及与窗口小部件交互。
图7是便于通过使用形状书写来生成文本的示例性系统的功能框图。
图8-13例示出示例性软输入面板中的键的示例性布局。
图14是例示出在用户与移动计算设备的触敏显示器交互时向用户提供触觉反馈的示例性方法的流程图。
图15是例示出用于向用户提供触觉反馈来辅助用户通过形状书写来提出文本的示例性方法的流程图。
图16是例示出用于向用户提供触觉反馈来辅助用户启动具有触敏显示器的计算设备上安装的某一应用的示例性方法的流程图。
图17是示例性计算系统。
具体实施方式
现在将参考附图描述与向计算设备的用户提供触觉反馈来辅助这些用户相对于触敏显示器上显示的图形对象来定位他们的手指或拇指，以及辅助用户向包括触敏显示器的计算设备提供输入有关的技术，其中贯穿全文相同的参考标号表示相同的元素。在以下描述中，出于解释的目的，提出了众多具体细节以提供对一个或多个方面的全面理解。然而，显然这(些)方面可以在没有这些具体细节的情况下被实践。在其他实例中，以框图形式示出公知的结构和设备以便于描述一个或多个方面。另外，要理解，被描述为由特定系统组件执行的功能性可由多个组件执行。类似地，例如，某一组件可被配置成执行被描述为由多个组件执行的功能性。
此外，术语“或”意指包括性“或”而非排斥性“或”。即，除非另有指定或从上下文显而易见，否则短语“X采用A或B”意指任何自然的包括性排列。即，以下任意情况都满足短语“X采用A或B”：X采用A；X采用B；或X采用A和B两者。另外，本申请中和所附权利要求书中所使用的冠词“一”和“一个”一般应被解释为是指“一个或多个”，除非另有指定或从上下文显而易见地针对单数形式。
此外，如本文所使用的，术语“组件”和“系统”旨在包含用使得在被处理器执行时执行特定功能性的计算机可执行指令配置的计算机可读数据存储。计算机可执行指令可包括例程、功能等等。还要理解组件或系统可以位于单个设备上或跨若干设备分布。此外，术语“示例性”旨在表示用作某些事物的举例说明或示例，而不意图指示优选。
现在参考图1，例示出便于向具有触敏显示器的计算设备的用户提供触觉反馈的示例性系统100，其中提供触觉反馈的供应来在与计算设备上安装的至少一个应用交互方面辅助用户。在一示例性实施例中，该应用可以是利用软输入面板来从计算设备的用户接收与希望输入的文本有关的输入的文本输入应用，其中该软输入面板包括多个键。在另一示例中，触觉反馈可被提供来辅助用户定位和选择一图形图标，该图形图标致使该图形图标所表示的应用被启动。具体来说，可在辅助用户发展肌肉记忆方面提供触觉反馈，从而允许用户与触敏显示器上显示的图形对象交互而无需用户不得不连续不断地看触敏显示器。构想了各种类型的触觉反馈技术，包括但不限于通过使用静电力、超声波振动等完成的表面摩擦调制。
系统100包括计算设备，在一示例性实施例中，该计算设备可以是诸如移动电话、图形输入板(平板)计算设备、移动媒体播放器等之类的移动计算设备。系统100包括具有一致平滑表面的触敏显示器102。尽管出于解释的目的在本文描述了利用触敏显示器的技术，但是要理解这些技术可被适用于在可或可以不包括显示器的平滑输入表面上利用。也就是说，如本文所述，可向用户呈现触觉反馈以辅助创建一实体或实体集合(如键盘上的键)的非视觉表示，辅助允许用户相对于该实体或实体集合来定位手指，以及辅助用户通过该实体或实体集合向计算设备提供输入。因此，本文所述的触敏显示器上显示的图形对象不旨在将本文所述的概念限制为显示器。
图形对象104被显示在触敏显示器102上，其中图形对象104表示或是安装在计算设备上的计算机可执行应用105的图形用户界面(GUI)的一部分。如本文将更详细描述的，应用105可以是被配置成识别与触敏显示器102上所显示的软输入面板有关的用户输入以及基于这种用户输入来生成文本的文本输入应用。这种文本可以是或包括字母字符、数字等——从而例如用户可通过该文本输入应用来提出电话号码。因此，图形对象104可以是多个键中的某一键、在用户选择时使得应用被启动的某一可选择的窗口小部件等等。
如上所述，系统100便于与触敏显示器102上显示的图形对象进行不用眼睛的交互。也就是说，系统100被配置成允许计算设备的用户向计算设备提供输入数据而不要求用户在提供这种输入数据时看触敏显示器102。这可通过例如在将与触敏显示器的用户交互解释为某一输入手势之前向用户提供触觉反馈来辅助用户相对于图形对象104来定位手指106来实现。换言之，可出于允许用户识别出例如手指106正在相对于图形对象104的某一特定位置处(例如在围绕图形对象104的边界处、在图形对象104上的某处、在图形对象的中心等)与触敏显示器102接触的目的来提供触觉反馈。例如，就软输入面板而言，一旦用户理解手指106正在软输入面板的某一键上与触敏显示器102接触，则用户可记起软输入面板中其他键相对于该键的位置。
在用户相对于图形对象104定位手指106之后，用户可采用一个或多个手势来使得输入被相对准确地提供给应用105(或操作系统)，而不必将她的眼睛引向触敏显示器102。此外，系统100被配置成在用户正向应用105(或操作系统)提出输入时向用户提供触觉反馈。例如，在已经确定用户已经相对于图形对象104定位了手指106之后，系统100可被配置成在用户的手指106被采用来向应用105提供输入数据时提供进一步的触觉反馈。
就与系统100的操作有关的更多细节而言，系统100包括传感器108，该传感器在手指106与触敏显示器102的表面接触(或悬停在表面上)时输出指示手指106在触敏显示器102上的实时位置的信号。因此，传感器108输出的信号可被监视来指示出手指106是否与触敏显示器102的表面接触，以及手指106在触敏显示器102上何处与这种显示器接触。
系统100还包括管理硬件资源的操作系统110，使得操作系统可被配置成致使向传感器108提供电源以及监视传感器108的输出。操作系统110包括监视传感器108输出的信号以及确定手指106在对应于图形对象104的某一位置处与触敏显示器102接触的位置标识器组件112。对应于图形对象104的位置可以是图形对象104与某一其他图形对象(未示出)之间的边界。在示例中，对应于图形对象104的位置可以是图形对象104上的任何位置。在又一示例中，对应于图形对象104的位置可以在图形对象104的中心。位置标识器组件112基于传感器108输出的信号以及应用105提供的(或操作系统110已知的)关于图形对象104的信息来确定手指106在对应于图形对象104的该位置处与触敏显示器接触。例如，应用105可向位置标识器组件112提供关于图形对象104要被显示在触敏显示器102上何处的信息。
操作系统110还包括反馈组件116，反馈组件响应于位置标识器组件112确定手指106在对应于图形对象104的位置处与触敏显示器接触，致使致动器118提供触觉反馈以向用户指示出手指106正在对应于图形对象104的该位置处与触敏显示器102接触。在一示例性实施例中，致动器118可控制提供给触敏显示器的导电层的电信号，其中当手指106在触敏显示器102上转移时电信号中的变化使得用户感知到触敏显示器102上摩擦力的变化。因此，例如可能希望在手指106与触敏显示器102中显示图形对象104的任何部分接触时向用户提供触觉反馈。
一旦位置标识器组件112检测到手指106在图形对象上与触敏显示器102接触，反馈组件116可使得致动器118增加提供给触敏显示器102的导电层的电流量，从而引起用户感知到摩擦力(静电摩擦)中的变化。也就是说，可使得用户感知到，与手指106没有转移通过图形对象104时相比，当手指106转移通过图形对象104时触敏显示器102的表面更粗糙。因此，不用看触敏显示器102，用户就能确定图形对象104在触敏显示器102上的位置。当位置标识器组件112确定手指106转移离开图形对象104时，反馈组件116可使得致动器118减少提供给触敏显示器102的导电层的电流，从而在手指106已经转移离开图形对象104时使得用户感知到摩擦力中的变化(例如对于用户来说触敏显示器的表面感觉上更平滑)。尽管已经将致动器118描述为提供与在触敏显示器102的表面上生成静电摩擦有关的电信号，但是要理解在向用户提供触觉反馈方面可采用其他技术。例如，致动器118可被用于生成超声波振动，可在提供触觉反馈方面使用压电致动器等。
此外，要理解上述的触觉反馈是出于定位手指106的目的而提供的。也就是说，一开始，尽管手指106在触敏显示器102上转移，但是这种转移不被操作系统110或应用105解释为输入手势(用户提出的向应用105或操作系统110提供输入的手势)。例如，如果图形对象104是软输入面板中的某一键，则手指106转移通过该图形对象104不致使该键所表示的字符被选择。
系统100可任选地包括与反馈组件116通信的扬声器120，其中扬声器120被配置成在手指106在触敏显示器102的表面上转移时向用户提供听觉反馈。例如，在手指106正在图形对象104上与触敏显示器102接触时，反馈组件116可使得扬声器120输出对该图形对象104唯一的特定音调或词。此外，反馈组件116可使得扬声器120输出指示手指106在触敏显示器102上的速度或加速度的听觉信号。这种听觉线索可辅助用户记起各图形对象在触敏显示器102上相对于彼此定位在何处。
在用户在触敏显示器102上相对于图形对象104定位了手指106之后，用户可能希望提出使得输入数据被提供给对应于该图形对象104的应用105的输入手势。如上所述，图形对象104可以是软输入面板中多个键之中的某一键，且在用户相对于该键定位了手指106之后，用户可能希望通过软输入面板来输入文本。因此，用户可提出切换命令，该切换命令向系统100指示出用户希望向应用105或操作系统110提供输入数据。操作系统110包括识别用户提出的切换命令的切换标识器组件122。这种切换命令可以是任何合适的命令，包括但不限于增加的由手指106施加于触敏显示器的压力量。
从而，传感器108(可表示多个传感器)可包括输出指示出由手指106施加于触敏显示器102的压力量的信号的压力传感器。切换标识器组件122可监视由传感器108输出的这种信号来确定手指106在触敏显示器102上提供的压力何时超出阈值。在另一示例中，传感器108可被配置成分析手指106与触敏显示器102接触的表面面积量。如可被确定的，手指106与触敏显示器102接触的表面面积的增加指示出通过手指106向触敏显示器102的表面施加的压力量。切换标识器组件122可将手指106与触敏显示器102接触的增加的表面面积识别为切换命令。在另一示例性实施例中，传感器108可被配置成分析由用户向包括触敏显示器102的计算设备的外屏(bezel)施加的压力，而切换标识器组件122可在传感器108检测到的施加于外屏的压力超出预定阈值时标识出该切换命令。
在又一些其他实施例中，用户可快速地摇晃计算设备来指示出希望将输入数据提供给应用105和/或操作系统110，可将计算设备倾斜某一角度来指示出希望将输入数据提供给应用105或操作系统110，可执行轻击或双次轻击以指示出希望将输入数据提供给应用105或操作系统110，可输出话音命令等。从而，传感器108可以是或包括陀螺仪、加速度计、压力传感器、话筒(以检测话音命令)等。切换标识器组件122可识别切换命令以及可向位置标识器组件112告知用户通过利用手指106提出的后续手势要被解释为用于向应用105和/或操作系统110提出输入数据的输入手势。
在又一示例性实施例中，用户可以特定方式相对于触敏显示器102定向手指106来指示出希望提出切换命令，而传感器108可输出指示出手指106的定向的信号。切换标识器组件122可至少部分地基于传感器108输出的信号来标识切换命令。例如，传感器108可输出指示出正以特定定向与触敏显示器接触的手指106所引起的电容性干扰的信号，而切换标识器组件122可基于这种信号来确定手指106的定向。如果手指106的定向被检测为位于特定定向，则切换标识器组件122可确定用户希望提出切换命令。
因此，在切换标识器组件122识别出由用户提出的切换命令之后，用户可采用手指106来相对于图形对象104提出输入手势。这种输入手势可以是滑扫、轻击、悬停、增加施加于触敏显示器102的压力、或某种其他合适的输入手势。位置标识器组件112可识别出手指106位于触敏显示器102上相对于图形对象104的特定位置处，并可将这种数据提供给应用105或操作系统110作为输入数据。应用105或操作系统110然后可用常规方式来解释该输入数据。
此外，当手指106所提出的手势要被解释为输入手势时(在用户相对于图形对象104定位了手指106之后)，系统100可提供触觉反馈来辅助用户向应用或操作系统110提出输入数据。例如，如果应用105被配置成接受许多图形对象上的滑扫作为输入，则反馈组件116可使得致动器118提供触觉反馈，使得用户能够识别出手指106正转移通过哪些图形对象，而不要求用户看触敏显示器102。类似地，反馈组件116可使得扬声器120输出听觉信号，听觉信号可辅助用户理解手指106在触敏显示器102上相对于图形对象104(以及其他图形对象)的位置。
在用户向应用105或操作系统110提出输入数据时在手指106相对于图形对象104的定位方面利用触觉反馈在用户通过使用触敏显示器102与应用105或操作系统110交互时发展肌肉记忆方面辅助用户。例如，在用户在触敏显示器102上转移手指106相对较少次数之后(其中触敏显示器上的各图形对象的位置一致)，用户可使用肌肉记忆快速地理解手指106相对于图形对象104的位置(例如用单次滑扫)。类似地，当用户正在提供输入数据时，尤其是在使用滑扫时，利用触觉反馈可辅助用户发展肌肉记忆，使得可相对准确地进行重复的输入手势。
现在参考图2，例示出利用触觉反馈来辅助用户相对于触敏显示器102上显示的至少一个图形对象来定位手指106以及向应用105提出输入的示例性系统200。在该示例性系统200中，应用105是利用软输入面板202从用户接收输入数据的文本输入应用，其中输入数据指示出用户希望生成的字符序列。此外，要理解尽管应用105被示为与操作系统110分开，但是应用105可被认为是操作系统110的一部分。在一示例性实施例中，应用105可以是文本消息通信应用，其中用户提出的字符序列希望被发送到该用户的某一联系人。在另一示例性实施例中，应用105可以是允许用户以计算机可读文档的形式生成和保留文本的字处理应用。在又一示例中，应用105可以是web浏览器，其中URL形式的文本可能被令人希望地置于web浏览器的某一域中。另外，应用105可以是社交联网应用，其中希望生成文本来提出状态更新或广播消息。也构想了其他应用。
图2中所示的软输入面板202可能尤其很好地适用于在诸如移动电话之类的移动计算设备上被利用，其中触敏显示器102上的实用面(real estate)相对受限。软输入面板202包括多个键204-220。尽管图2示出软输入面板202包括9个键，但是要理解软输入面板202可包括更多或更少的键。此外，软输入面板中的每个键被示为表示多个字符。在其他实施例中，软输入面板202可包括分别表示单个字符的键以及表示多个字符的键的子集。本文提出了软输入面板的其他示例性布局。
在示例性系统200中，反馈组件116被配置成使得致动器118在用户的手指106位于软输入面板202的键之间的相应边界处时提供触觉反馈。换言之，反馈组件116使得致动器118在手指位于软输入面板202的阴影区域中时向用户提供触觉反馈。
在一示例中，当用户希望相对于键214来定位手指106时，用户可将手指106放在触敏显示器102的右下角处。例如，用户可能希望生成单词“hello”。然而，用户必须首先定位表示字母“h”的键214。用户可使得手指106向上转移，而位置标识器组件112可识别出用户相对于软输入面板202的阴影区域以及软输入面板202的键204-220的位置。反馈组件116可基于触敏显示器102上正被手指106接触的位置来使得致动器118选择性地向用户提供触觉反馈。例如，一开始，当手指106从触敏显示器102的底部转移时，可向用户提供触觉反馈(用户可感知到触敏显示器102的表面有点粗糙)。响应于位置标识器组件112确定手指106到达键220，反馈组件116可使得致动器118停止向用户提供触觉反馈。从而，当手指106向上转移通过某一键(如键220)时，用户可感知到手指106在该键上。此后，位置标识器组件112确定手指106到达键220和214之间的边界，并且响应于此，反馈组件116使得致动器118向用户提供触觉反馈。再次，在手指106转移通过这一边界时，用户可感知到增加的摩擦力，这向用户指示出手指106正转移通过键之间的边界。在手指106转移通过了该边界之后，位置标识器组件112确定手指106位于触敏显示器102的键214被显示的区域上。响应于这一确定，反馈组件116使得致动器118停止提供触觉反馈。因此，当手指106转移通过触敏显示器的键214被显示的区域时，用户将感知到该区域是平滑的(与手指106转移通过边界时相对比)。使用肌肉记忆，于是用户可基于对触敏显示器102的平滑和粗糙表面的感知来确定键214(以及软输入面板202中的其他键)的位置。
如上所述，用户可能希望通过利用软输入面板202来生成单词“hello”。为了告知计算设备用户意图向应用105提出输入数据，在一示例中用户可增加手指106向触敏显示器102施加的压力量。切换标识器组件122将这种增加的压力识别为切换命令，使得通过利用手指106而提出的后续手势被解释为输入手势，其中输入数据被提供给应用105。例如，在用户已经标识出手指106落在键214上之后，用户可提出切换命令并接着执行使得数据被提供给应用105的某种输入手势。因此，在提出了切换命令之后，用户可用手指106轻击键214。此后，当用户可能意识到键204(表示字符“e”)相对于键214的位置时，用户可将手指106提离触敏显示器102的表面，并通过多次轻击技术来选择键204合适的次数以指示出字母“e”令人希望地被选择。此后，用户可提起手指106并选择键216(如可能双次轻击键216单独两次以选择字母“l”两次)，并最终可提起手指106并选择键208。
在下文将更详细地提出的另一示例性实施例中，应用软输入面板202可被配置成接收通过形状书写而作出的输入。从而，不是用户提起手指106并轻击分立的键，而是用户可通过连接表示用户希望选择的字母的键来提出输入命令。在这样的一实施例中，在用户提出输入手势的同时，反馈组件116可致使致动器118提供触觉反馈以辅助用户理解手指106相对于软输入面板202中的键正被滑扫到哪里。例如，如上所指示的，用户可最初相对于一图形对象来定位手指106，使得用户可定位键214而不必看触敏显示器102。此后，用户可提出切换命令，向系统200指示出后续手势要被解释为输入手势。用户可然后采用形状书写来提出文本。再次，如果用户希望生成文本“hello”，用户可使得手指106在触敏显示器102上从键214(表示字母“h”)转移到键204(表示字母“e”)。当手指106在这些键之间转移时，反馈组件116可使得致动器118在手指106转移通过键之间的边界时提供触觉反馈。此外，反馈组件116可使得扬声器120输出听觉信号，该听觉信号指示出手指106正转移通过哪些键、手指的转移方向、手指的转移速度、手指的转移加速度等等。该反馈可辅助用户发展和使用肌肉记忆来使用软输入面板202生成文本。例如，在用户与触敏显示器交互时提供触觉反馈(以及任选的听觉反馈)可辅助用户记起提出致使单词“hello”被生成的输入数据的感觉如何(以及任选地听上去如何)(如从键214转移到键204，从键204转移到键216，以及从键216转移到键208，从而允许用户输入单词“hello”而不必看触敏显示器102)。
此外，反馈组件116可致使致动器118提供触觉反馈来向用户确认输入手势已被适当地解释或告知用户输入手势未被识别。例如，如果用户正在采用形状书写来提出相对长的单词，且应用105已经确定所希望的单词是用户可能提出的唯一可能单词，则即使用户还未完成完整定义这一单词所需的笔划序列，反馈组件116也能使得致动器118输出触觉反馈以告知用户解码已被完成。例如，反馈组件116可致使致动器118振动电话。替代地，反馈组件116可使得扬声器120输出听觉信号来向用户指示出该输入手势已导致某一单词的完成。类似地，如果输入手势未被识别，则反馈组件116可使得致动器118向用户提供触觉反馈，从而告知用户输入手势应被重新执行。
现在参考图3，例示出系统200的另一示例性描绘，其中以棋盘状图案针对软输入面板202中的键提供触觉反馈。在图3所示的示例中，反馈组件116使得致动器118以棋盘状图案相对于软输入面板202中的键204-220提供触觉反馈。因此，例如，当位置标识器组件112确定手指106正在键204、键208、键212、键216或键220上与触敏显示器102接触时，反馈组件116可使得致动器118提供触觉反馈，致使用户感知到这些键与手指106转移通过键206、210、214或218相比具有更粗糙的表面。从而，软输入面板202中的垂直和水平方向中每隔一个键与触觉反馈的供应相关联。
再次出于解释的目的而给出用户希望生成文本“hello”的示例性场景。用户首先希望将手指106放在触敏显示器上键214被显示的位置处。在一示例中，用户可最初将手指106放在触敏显示器102的右下角。用户然后可开始将手指106向上且稍向左转移。当手指106转移通过触敏显示器102上键220被显示的地方时，用户感知到与手指106转移通过触敏显示器上与触觉反馈不相关联的键被显示的地方时相比更大的摩擦量。当手指106完成了转移通过键220之后，触觉反馈停止，用户将感知到触敏显示器102的表面是平滑的，从而向用户指示出手指106落在键214上。因此，用户可自信地相对于键214来定位手指106而不必看触敏显示器102。
如上所述，用户可然后提出切换命令，该切换命令由切换标识器组件122识别，使得后续手势被感知为输入手势。尽管图2和图3描绘了与软输入面板202(如在边界处、在键上等)有关的提供触觉反馈的示例性方式，但是所附的权利要求并不限于这些附图中所示的内容。例如，在某些情况下，可能希望在触觉反馈中提供渐变。从而，例如可能希望在手指106位于屏幕的右侧时不提供触觉反馈，而当手指106向屏幕的左侧进一步转移时提供逐渐增加的触觉反馈量。而且，计算设备的用户可定义图形用户界面中希望接收触觉反馈的位置。从而，图形用户界面的接收触觉反馈的位置可由用户以用户相信将在定位手指106或提出输入手势方面最大地辅助用户的方式来自定义。
此外，可在定位期间提供与提出输入手势时提供的触觉反馈不同的触觉反馈。例如，在手指106相对于某一图形对象的定位期间，可如图2所示在键204-220之间的相应边界处提供触觉反馈，而当用户提出输入手势时，可如图3所显示的那样根据棋盘状图案来提供触觉反馈。在又一些其他实施例中，可例如仅在键204-220的中心提供触觉反馈。
现在参考图4，示出了示例性的触敏显示器400。触敏显示器400包括多个层。示例性触敏显示器400提供可在调制诸如玻璃之类的平滑表面的表面摩擦力方面被采用的机制。触敏显示器400包括玻璃层402。透明导电层404靠近玻璃层402放置，其中例如透明导电层404可以是铟锡氧化物(ITO)或其他合适的透明导电层。触敏显示器400还可包括设置于透明导电层404附近的绝缘层406，使得透明导电层402在玻璃层402和绝缘层406之间。
电压源408被配置成向导电层404提供合适量的电压。当手指106与绝缘层406接触时，通过电压源408向导电层404提供电流，这种电流在手指106中感生出与导电层404中感生的电荷相反的电荷。如图4所示，当电流被提供给导电层404时，导致导电层404中正电荷的感生。当手指106被放置成与绝缘层406接触时，手指106的皮肤内感生出负电荷。
摩擦力f正比于μ(玻璃表面的摩擦系数)以及Ff(手指106向下按压时施加于表面的法向力)与Fe(手指106和导电层404之间的电容效应引起的电力)的和，如下：
f＝μ(Ff+Fe)       (1)
当导电层404处接收到的电流的强度变化时，导致f中的变化。用户可感测到f中的变化，但是不能感测到Fe中的变化(因为该力低于人类感知阈值)。因此，用户下意识地将f中的变化归因于μ，造成本来平滑玻璃表面的粗糙度按照手指106在触敏显示器102上的位置而变化的错觉。从而，在某些特定的设计位置处用户可感知到摩擦力中的变化。
现在参考图5，例示出一示例性移动计算设备500。移动计算设备500可以是任何合适类型的移动计算设备。移动计算设备500包括外壳502，外壳可容纳移动计算设备500的硬件。移动计算设备500还包括位于外壳502的开口中的触敏显示器504。触敏显示器504被示为显示软输入面板506，该软输入面板包括多个字符键508-522，其中字符键508-522中的每一个键代表相应的多个字符。
软输入面板506还包括模式键524，其中对模式键524的选择可使得字符键508-520中的字符在软输入面板506中呈现为大写字母。软输入面板506还包括空格键526，其中对空格键526的选择在字符之间放置空格。语言键528在被选择时可使得字符的语言或术语字典被改变。例如，对语言键528的选择可使得字符键508-522中的字符的语言从英语改变成日语，以及使得底层字典或语言模型从英语改变成日语。也构想了其他语言。退格键530在被用户选择时使得最近输入的字符被删除，而回车键531在被用户选择时可引入新行、发起某一动作等。
在用户用一只手手持移动计算设备500时，软输入面板506以人体工程学的方式被安排来映射到移动计算设备500的用户的拇指534的径向伸展范围。因此，用户可在握住移动计算设备500的同时使用她的拇指来使用软输入面板506输入文本。这便于使用软输入面板506来输入文本而不要求用户在使用软输入面板560进行形状书写时查看触敏显示器504。
下面提出以人体工程学方式安排来允许通过拇指534输入文本的其他示例性布局。在图5中所示的示例中，用户可能希望使用软输入面板506输入单词“dog”。为了输入这一单词，用户可最初将她的拇指534定位在键516上，键516表示字母“d”(以及字母“f”和“g”)。用户然后可将拇指534转移到键512，键512表示字母“o”(以及字母“p”)。此后，用户可将她的拇指534在软输入面板506上转移回键516，键516表示字母“g”。该动作由轨迹536所示，轨迹是从键516到键512并回到键516的连续笔划序列。在输入单词“dog”时，用户的拇指534保持与触敏显示器504接触(从而与其上显示的软输入面板506接触)。当用户完成了该单词时，用户可将她的拇指534提离触敏显示器504。
在图5所示的示例性实施例中，软输入面板506包括弯曲的上边界538。弯曲的上边界538在触敏显示器504上的位置可基于拇指534在触敏显示器504上的滑扫。例如，在用户用她的右手手持移动计算设备500时，弯曲的上边界538可对应于用户的拇指534的最大径向伸展范围。软输入面板506还可包括多个内部边界540-544，其中内部边界540-544与弯曲的上边界同心并且彼此同心。边界546和548可定义多个字符键508-522的外型，并可从弯曲的边界538-544的质心延伸。多个内部边界550和552可被进一步配置成分隔字符键508-522中的键。
如上所述，在一示例性实施例中，移动计算设备500可被配置成在用户的拇指534转移通过软输入面板206的任何边界538-552时向用户提供触觉反馈。在该示例中，当用户正希望输入单词“dog”时，可在拇指534转移通过边界540时向用户提供触觉反馈。此外，可在用户的拇指534转移通过边界552时提供触觉反馈。也可在用户的拇指534转移通过边界540时向用户提供触觉反馈，以及在轨迹536期间在拇指534转移通过边界552时可向用户的拇指534提供进一步的触觉反馈。在另一示例性实施例中，可相对于字符键508-522以棋盘状图案来提供触觉反馈。
现在参考图6，例示出显示了多个可选择的窗口小部件602-614的示例性触敏显示器600。尽管以特定方式示出窗口小部件602至614的大小和位置，但是要理解可以不同地安排窗口小部件。例如，窗口小部件可以更小，可间隔更大的距离等。
在该示例中，每个窗口小部件表示可通过选择该窗口小部件来被启动的相应应用。从而，例如窗口小部件602可以表示web浏览器，其中通过用户选择窗口小部件602该web浏览器被启动。在另一示例中，窗口小部件604可表示电话应用，其中对窗口小部件604的选择使得电话应用被启动。在图6所示的示例中，可在相应窗口小部件之间的边界处提供触觉反馈。然而，要理解的是可在某一窗口小部件的整体上、在各窗口小部件的中心处等提供触觉反馈。
在图6中呈现的示例中，用户可能希望选择窗口小部件606并从而启动该窗口小部件606所表示的应用，而不看触敏显示器600。用户可大致地将手指106放在触敏显示器600的右上角附近并开始向下转移手指106。再次，当相对于某一图形对象定位手指106时，滑扫不被解释为输入手势。随着用户向下转移手指106，用户将最初感知到表面有点粗糙(因为手指正转移通过窗口小部件604上方的阴影区域)。当手指106到达触敏显示器600上显示窗口小部件604的位置时，不再向用户提供触觉反馈，用户感知到在对应于窗口小部件604的位置处触敏显示器是平滑的。当手指604到达窗口小部件604和606之间的边界时，用户感知到相对于手指106位于窗口小部件604上时而言触敏显示器的表面是粗糙的。当手指106到达窗口小部件606时，用户感知到触敏显示器600是平滑的。因此，如果用户大致地知道窗口小部件的布局，则用户可确定手指106在窗口小部件606上而不必看触敏显示器600。此后，用户可提出上述的切换命令，并可利用输入手势(轻击)来选择窗口小部件606，从而启动由此窗口小部件606所表示的应用。
现在参考图7，例示出便于解码通过形状书写输入的文本的示例性系统700。根据一示例，诸如移动计算设备之类的计算设备可包括系统700以及图1所示的系统100。系统700包括软输入面板702。
软输入面板702包括多个键704-720。在图7所示的实施例中，键704-720中的每一个是相应的字符键，因为每个键代表相应的多个字符。软输入面板702还可包括其他键，如“回车”键、空格键、数字键、以及常规键盘上找到的其他键。
再次，如所示，软输入面板702中的键704-720中的每一个代表相应的多个字符。例如，键704代表字符“Q”、“W”和“E”，键706代表字符“R”、“T”和“Y”等。在其他实施例中，字符可以字母顺序或某种其他合适的安排来被排列。
在一示例性实施例中，软输入面板702被配置成从用户的手指接收通过形状书写(如在软输入面板702上的连续笔划序列)作出的输入。作为本文所使用的术语，笔划是在用户的手指(如拇指)保持与软输入面板702接触的同时手指从多个键704-720中的第一键到多个键704-720中的第二键的转移。于是，连续笔划序列是这些笔划的序列，其中用户的手指在整个笔划序列中保持与软输入面板702接触。换言之，不是用户轻击软输入面板702上的分立的键，而是用户可采用手指(或指示笔或笔)来连接表示所希望的单词中的相应字母的键。笔划722-728的序列例示出采用形状书写来提出单词“hello”。尽管笔划722-728的序列被示为是分立的笔划，但是要理解，实际上用户的手指在软输入面板702上的轨迹可看上去为连续的、弯曲的形状，笔划之间没有可容易确定的区分。
系统700还包括检测用户在软输入面板702上提出的笔划的检测器组件730。因此，例如检测器组件730可检测笔划722-728的序列，其中用户将她的手指从键714转移到键704，接着将她的手指转移到键716，接着将她的手指转移到键708。
解码器组件732与检测器组件730通信并解码软输入面板702的用户提出的笔划722-728的序列，使得解码器组件732确定该用户希望提出的字符序列(如某一单词)。根据一示例，解码器组件732可从检测器组件730接收指示出用户在软输入面板702上提出的笔划722-728的序列的信号，并可解码笔划722-728的这一序列并输出单词“hello”。由于键704-720中的每一个键表示相应的多个字符，解码器组件732可在基于用户提出的笔划而构造的可能单词之间进行消歧(如基于手指的轨迹已经通过的或手指的轨迹正在接近的相应键中的字符)。进一步，解码器组件732可被配置成校正用户输入的可能的拼写差错，以及用户的手指在软输入面板702中的键704-720上的位置中的误差。如上所述，软输入面板702可尤其良好地适用于软输入面板702的用户进行无需眼睛的文本输入。因此，当用户正在与软输入面板702交互时，她的手指可能没有被精确地放在用户希望选择的相应键上。
与执行这种解码有关，解码器组件734可包括使用标记的词以及软输入面板上用户提出的相应轨迹来被训练的形状书写模型734。更为具体而言，在数据收集/模型训练阶段，可指示用户在软输入面板上为指定的单词提出轨迹(如连续笔划序列)。这一轨迹的位置可被指派给该单词，且可对多个不同的用户和多个不同的单词重复这种操作。如可认识到的，可习得或向某些单词的轨迹应用偏差，使得所产生的形状书写模型734可相对准确地对预定字典中的各种各样的不同单词的笔划序列进行建模。而且，如果对足够多的不同单词重复该操作，形状书写模型734可推广到新的单词，相对准确地对不在该预定字典中但具有相似字符模式的单词的笔划序列进行建模。
此外，解码器组件732可任选地包括诸如英语、日语、德语等之类的特定语言的语言模型。语言模型736可被采用来基于用户提出的先前的单词来在概率上在可能的单词之间进行消岐。
系统700可进一步任选地包括扬声器120，扬声器可用声音输出由解码器组件732基于检测器组件730检测到的笔划序列解码的某一单词或单词序列。在一示例性实施例中，扬声器120可响应于用户在软输入面板702上执行笔划序列722-728来用声音输出单词“hello”。因此，用户不需要看软输入面板702来接收用户希望输入的单词已被准确解码的确认。替代地，如果解码器组件732基于检测器组件730检测到的笔划722-728的序列不正确地解码了某一单词，则用户可接收到告知用户对该单词的不正确解码的听觉反馈。例如，如果解码器组件732将用户希望提出的单词解码为“orange”，则用户可快速地确定解码器组件732不正确地解码了该用户希望提出的单词。用户然后可按压致使解码器组件732输出下一最可能的单词的按钮(未示出)，该单词可被扬声器120用声音输出。这一过程可继续，直到用户听到该用户希望输入的单词为止。在其他实施例中，通过手势或话音命令，用户可指示出希望重新执行笔划722-728的序列，使得先前解码的单词被删除。在又一示例中，解码器组件732可在笔划序列完成之前解码某一单词，并在笔划序列完成之前显示该单词。例如，当用户提出某一笔划序列时，可向用户显示多个可能的单词。
此外，可认识到解码器组件732可采用主动学习来基于软输入面板702的用户在提出笔划序列时提出的反馈来更新形状书写模型734或语言模型736。也就是说，可基于用于在软输入面板702上提出轨迹的用户的手指的大小、用户在软输入面板702上提出的轨迹的形状等来精制形状书写模型734。类似地，形状书写模型734或语言模型736所利用的字典可基于软输入面板702的用户频繁采用的单词或正被执行的某一应用来被更新。例如，如果用户希望提出不被包括在形状书写模型734的字典中的某个人的名字，则用户可向解码器组件732告知该名字，使得对应于这一名字的后续笔划序列可被解码器组件732识别和解码。在另一示例中，可基于为其正生成文本的应用来自定义字典；例如，用户在采用文本消息通信应用时提出的单词/字符序列可与用户在采用电子邮件或字处理应用时提出的单词/字符序列不同。
系统700可任选地包括可从用户接收话音输入的话筒744。如上所述，用户可提出解码器组件732已经不正确地解码了某一笔划序列的话音指示，而话筒744可接收这种话音指示。在另一示例性实施例中，解码器组件732可任选地包括被配置成接收用户说出的话语并识别其中的单词的语音识别器组件746。在一示例性实施例中，用户可口头地输出也通过软输入面板702上的轨迹输入的单词，使得说出的单词补充笔划序列，反之亦然。从而，例如，形状书写模型734可接收语音识别器组件746输出的最可能的单词的指示(其中说出的单词最初由话筒744接收)，并可利用这一输出来进一步辅助解码在软输入面板702上提出的轨迹。在另一实施例中，语音识别器组件746可接收由形状书写模型734基于检测器组件730检测到的轨迹输出的最可能的单词，并可利用这一输出作为用于解码该说出的单词的特征。对语音识别器组件746、形状书写模型734以及语言模型736的利用可增强解码的准确性。
图8示出用于诸如平板或移动电话之类的计算设备的示例性触摸屏800。触摸屏800包括允许用户通过在触摸屏800的不同区域上触摸或划轨迹来选择文本字符以及输入诸如“回车”和“退格”之类的其他命令的软输入面板(SIP)802。SIP 802可被用于许多不同的任务，如书写文本消息或电子邮件、在网站上输入数据、执行全局搜索等。
SIP 802包括多个键804-830。通过触摸各键，各键可被用于执行不同的命令。示例性的命令可包括输入文本字符、退格、换挡到不同的一组键等。
SIP 802可被配置成由用单手手持计算设备的人来使用。例如，用户可用他的右手在右下角握住移动计算设备并使用他的右手拇指在SIP 802的各种键上触摸或划轨迹，或者用他的左手在左下角握住移动计算设备并使用他的左手拇指触摸SIP 802的各种键。本文所述的每个SIP实施例可被配置成由用单手手持计算设备并使用该手的拇指来触摸SIP的键的人使用。尽管附图8-13所示的示例性SIP被配置成供用他的右手手持计算设备的人来使用，但是未被示出的其他实施例可被配置成以类似方式用左手使用。右手SIP的键(如图8-13中所示)可被聚集在触摸屏的右下角附近。例如，图8中的SIP 802的键被聚集在触摸屏800的右下角834附近。类似地，左手SIP的键可被聚集在触摸屏的左下角(如836)附近。将键聚集在触摸屏的某一角落附近可使得用户更容易用她的拇指触及到键。
SIP的键可以是矩形的、三角形的、具有其他多边形形状、和/或可具有至少部分地由非线性边界限定的形状。例如，SIP 802的键可部分地由多个弯曲的或弓形的边界来限定(包括弯曲的上边界838和弯曲的中间边界840)，部分地由多个线性边界来限定(其中一些被标记为842)，和/或部分地由触摸屏800的线性边缘来限定。例如，键820由触摸屏800的左边缘、线性边界842之一、以及弯曲的边界840之一来限定。在一些实施例中，键还可具有圆角。
用户的拇指在解剖学上以大致以她的腕附近的点为中心的弧形运动来转动。SIP的键可因此以相对应的弧形图案来被排列，以允许用户更自然地将她的拇指移动通过不同键。SIP 802可包括键之间的具有位于用户的拇指将绕她的腕旋转的位置附近的曲率中心的弯曲的边界。例如，在SIP 802中，弯曲的边界838和840可具有位于触摸屏800的右下角834之下和/或右侧的一个或多个曲率中心。弯曲的边界838和840的曲率中心(一个或多个)可位于例如计算设备的右下角处或附近，或远离触摸屏800，例如在计算设备的右下角之下以及右侧，例如在用户用右手手持计算设备时用户的拇指－腕关节所位于的地方。在某些实施例中，弯曲的边界838-840中的一个或多个可以是同心的。
在某些实施例中，弯曲的边界之一可与触摸屏的相对底角相交。例如，边界840之一与图8中的左下角836相交。SIP中弯曲的边界的数量可变化，例如从1至5或更多。在某些实施例中，弯曲的边界可在径向上被均等地分隔开，使得弯曲的边界之间定义的键具有相同的径向高度(从弯曲的边界的曲率中心测量)。
SIP的键中的某一些可比其他键更大或更小。例如，某些键可具有比其他键更大的面积。例如，图8中的键828具有比许多其他键更大的面积。某些键可比其他键更宽或更长。例如，键828比键816和818更长，而那些键比键810、812和814更长。键的大小可使得用户更容易定位和触摸键(如在键上定位和划轨迹)。在某些SIP中可使得越常用的键面积越大。例如，空格键822可比许多其他键更大，因为空格键非常常用。可使得其他较不常用的键更小。
SIP 802上某一键的位置也可使得该键被更容易或更难被触及。例如，SIP802的字母键(804-818)可被聚集在SIP 802的中心，使得它们可更容易被触及。诸如退格键824之类的其他常用键可位于字母键的一侧，其中字母键也容易地可被用户的拇指访问，因为它们也沿拇指作出的自然弧形路径定位。另一方面，诸如语言键830(标记为“ENU”)之类的较少被使用的键可被设置在SIP802的底部/内角附近(如图8中右下角834附近)或SIP 802的难以触及的其他边缘。以类似于常用QWERTY键盘的方式设置键也可使得用户更容易且快速地定位键。例如，退格键824和回车键826可被定位在SIP 802的右手侧，就像它们在QWERTY键盘上那样，使得定位那些键对于用户来说更直观。
用户在使用他的拇指触及SIP的键时可能有有限的范围。拇指范围可被径向地限制，例如由最大径向伸展和/或最小径向伸展来限制。取决于用户的解剖学、她手持设备的方式、以及设备的大小，她的拇指的最大和/或最小径向伸展限制可变化。SIP 802的最大径向边界可被设置成对应于用户的拇指的最大伸展限制。最大径向边界可包括SIP的弯曲的上边界，如上边界838。
在某些情况下，用户可向内弯曲他的拇指足够远来触及位于拇指球附近的触摸屏800的底角，而在其他情况下，触摸屏800位于拇指球附近的底角附近可能存在用户用他的拇指无法容易触及的区域，例如用户具有相对大的拇指的情况。从而，在某些实施例中，触摸屏800的位于底角附近的区域可保留开放或空白，且不是SIP 802的一部分。SIP 802的径向限制可由用户以全范围运动径向地滑扫他的拇指来设置或调整，例如这可被进行来初始地调用或打开SIP802。
在某些实施例中，SIP 802可从触摸屏的一侧向触摸屏的底部有角度地扩展(垂直于径向方向)大约90度，如图8-13中所示。在某些实施例中，SIP 802还可部分地毗连另一侧边缘，如图8-13中所示。例如，在图8中，键820和822可看上去与触摸屏800的左侧边缘相交。在其他实施例中，SIP 802可有角度地扩展大约少于90°的角度，例如介于45°和90°之间。例如，在某些情况下，用户的拇指可具有有限的角度移动性，使得不能容易地从触摸屏800的侧边缘旋转整整90°到触摸屏800的底边缘。从而，在某些实施例中，触摸屏800可在侧边缘附近和/或底边缘附近具有不是SIP 802的一部分和/或不具有SIP 802的任何键的开放或非功能区。在某些实施例中，SIP 802或触摸屏800的这些非键区域可出于显示目的而非输入目的来被使用。
在某些实施例中，SIP 802可在右手配置和左手配置之间切换。从而，如果用户换手，SIP 802可被配置成切换到触摸屏800的相对底角。在某些实施例中，移动设备可感测到用户以哪只手手持设备。例如，移动设备可包括陀螺仪传感器、压力传感器和/或可被用于确定用户正用哪只手手持设备的其他类型的传感器。在其他实施例中，用户可提供输入来使得SIP 802换边。例如，用户可按压SIP 802中能够造成SIP 802换边的键，或提出使得SIP 802换边的话音命令。在某些实施例中，用户可将她的拇指(或任何其他手指或指示笔)横向滑动穿过触摸屏的底部(如以图8中所示的箭头850的方向)，以使得SIP 802换边。例如，如果SIP 802在右下角834处，则用户可将她的拇指从右向左滑动穿过触摸屏的底部以使得SIP 802切换到左下角836。在某些实施例中，用户可将她的拇指绕触摸屏的某一底角以弧形运动滑扫(如以图8中所示的箭头852的方向)，以使得SIP 802切换到该角。也可使用各种其他传感或用户输入手段来使得SIP 802切换到触摸屏800的不同角。
SIP 802的径向和/或角度大小也可被调整。在某些实施例中，可通过将拇指从SIP 802的底角附近径向地滑扫(如以图8中的箭头854或箭头856的向外方向)来调整SIP 802的径向大小。触摸屏800可从径向拇指滑扫感测到用户的拇指伸展的最大范围，可响应于该滑扫和/或基于用户的拇指伸展来设置或调整SIP 802的径向大小。在某些实施例中，用户的拇指的最小伸展也可从径向拇指滑扫来确定。从而，SIP 802的径向边界可基于用户的径向滑扫的开始和结束来被设置或调整。在某些情况下，用户可输入多个径向滑扫，这些滑扫的平均、最大、最小或其他函数可被用于设置SIP 802的径向边界。在某些实施例中，SIP 802的径向边界可基于用户作出的一个或多个弧形角度滑扫来被设置或调整。例如，用户可在不同径向位置输入多个弧形角度滑扫以提供用户的拇指的伸展范围。在某些实施例中，用户可以其他方式来自定义SIP 802的径向边界，例如输入坐标或尺寸、从预设置配置中选择等等。
类似地，SIP 802的角度边界可基于用户输入来被调整。在某些实施例中，SIP 802的角度边界可通过有角度地以弧形滑扫来被调整，例如以图8中的箭头852的方向(或相反方向)。触摸屏800可从一个或多个滑扫感测出用户的角度拇指伸展的最大范围，而SIP 802的角度边界可根据滑扫的结束或滑扫的某种其他函数来被设置。在某些实施例中，用户可以其他方式来自定义SIP 802的角度边界，例如输入坐标或尺寸、从预设置配置中选择等等。
在某些实施例中，用户可通过从SIP 802的顶部附近向下或朝向某一角部径向地或垂直地滑扫(如以图8中的箭头854或箭头856的向内方向)来关闭或收起SIP 802。类似地，用户可通过从某一角落垂直地或径向地滑扫来重新打开或取回SIP 802。重新打开SIP 802的这种滑扫可同时被用于测量用户的拇指伸展以设定SIP 802的大小。
在某些实施例中，可使用各种手势或其他动作来操纵SIP 802。滑扫穿过触摸屏800是这种手势的一个示例。其他示例可包括双次轻击某些键或区域、使用两个手指的捏合运动、跨触摸屏800展开两个手指等。例如，在某些实施例中，双次轻击空格键可插入句号。
用某一手指轻拂或滑扫可提供各种功能，如本文所述。在某些实施例中，轻拂或滑扫动作可在文本输入之前、之后或期间被执行，以便打开或关闭SIP802、重新调整SIP 802的大小、或将SIP 802切换到另一侧或底角。
在某些实施例中，SIP 802可对字母表中的每一个字母包括一个键。在其他实施例中，SIP可包括可被用于输入不止一个字母的一个或多个键，如在图8-13中所示的实施例中。由于SIP 802在面积上受到用户的拇指的伸展的限制，空间受到限制且可能没有足够的空间来使得每个字母一个键以及具有用于像回车、空格、换挡等的其他重要功能的键。从而，通过将多个字母组合在某些键上，需要更少的键且每个键可被做得更大，使得它们能够更容易地定位触摸而不会无意地触摸相邻键。
当用户在用于多个字母的键上划轨迹时，如图8中的键804，可使用消歧程序/过程来确定用户意图输入哪些字母/单词。例如，设备可分析被顺序地划轨迹的多个键来确定用户可能正在尝试拼写的可能单词。如果确定了多个可能单词，可向用户输出(例如用声音)各种选项来供选择(有时称为输入法编辑器候选)和/或设备可为用户选择这些单词中的一个，例如最常键入的单词或语法上合适的单词。
在图8中的SIP 802中，不同键具有不同数量的与之关联的字母。键804、806、814和816各自与四个字母相关联，键812和818与三个字母相关联，而键808和810与两个字母相关联。一般来说，诸如“Q”和“Z”之类的较不常用的字母可与更多其他字母分组在一起，而诸如“A”和“O”之类的较常用的字母可与更少的其他字母分组在一起。在某些实施例中，字母可被分组使得各种不同的键在文本输入中更为均等地被使用。
更为具体地，SIP 802包括三行字母键，其中每一行包括多个键，每个键(或至少多个键)表示相应的多个字母字符。在一示例性实施例中，字母字符根据QWERTY标准来被排列。第一行键包括键804、806和808，第二行键包括键810、812和814，而第三行键包括键816和818。如所示，第一行键可以是所有行中位于离角部834(或角部836)最远的行，第二行键可位于第一行附近但更靠近角部834(或角部836)，而第三行键可位于第二行附近且与第一行和第二行的位置相比更靠近角部834(或角部836)。从而，可确定SIP 802中的表示字母字符的至少一行键由两个键组成，而SIP 802中表示字母字符的至少一个其他行的键由至少三个键组成。可采取使得代表多个字母字符的第三行键由两个键组成，以方便通过用户的手指在这些键上划轨迹而进行的字母字符输入。此外，可发现在对通过在SIP 802上用形状书写输入的文本进行消歧时，利用8个键(而不是9个)来表示全部字母字符几乎没有损失。
如所示，第一行键中，键804可表示字母字符“Q”、“W”、“E”和“R”，键806可表示字母字符“T”、“Y”、“U”和“I”，而键808可表示字母字符“O”和“P”。从而，表示四个字母字符的键可在表示字母字符的一行键中被置为紧邻表示两个字符的键。在第二行键中，键810可表示字母字符“A”和“S”，键812可表示字母字符“D”、“F”和“G”，而键814可表示字母字符“H”、“J”、“K”和“L”。因此，表示两个字母字符的键可在表示字母字符的一行键中被置为紧邻表示三个字母字符的键。此外，表示三个字母字符的键可在表示字母字符的一行键中被置为紧邻表示四个字母字符的键。最后，在第三行键中，键816可表示字符“Z”、“X”、“C”和“V”，而键818可表示字符“B”、“N”和“M”。再次，第三行键可包括两个键，而第一行和第二行键可各自包括三个键。
在一示例性实施例中，键和/或键所表示的字母字符的排列可被选择来充分优化移动设备对用户希望通过在SIP 802上用形状书写生成的文本进行消歧的能力。例如，与SIP 802的设计有关的约束可被提出：示例性约束包括对要由键表示的字母字符的顺序或相对布局的约束(如为了充分符合QWERTY布局)、限制某一字母字符可属于的字符分组的约束(如某一字母字符可属于任意数量的字符组，除非该字母字符仅可属于最初规定的组的邻居组)、以及其他约束。
可通过SIP 802生成的单词字典可被接收，其中单词字典中的单词具有例如与之对应的这些单词的使用频率/概率的某种指示。可采用整体规划(integerprogramming)来定位满足强加约束的字符组，且可利用优化功能来标识允许充分最优消歧的字符分组。在一示例中，希望通过SIP 802输入的英语单词可以是“this”；首先，用户的拇指被放在键806上然后转移到键814，接着将拇指转移到键806，接着是将拇指转移到键810。可使用这种键序生成的所有可能的候选单词(字符按图8中所示被分组)可按英语中的使用概率或频率来被标识、排序。然后基于所希望的单词“this”在候选单词中的位置来赋于得分。例如，如果单词“this”是候选单词中的第一个，则可输出第一高得分，而如果该单词“this”在候选单词中位置较低，则可输出较低得分(或零得分)。例如可对字典中的每个单词以及符合约束的每个可能的字符分组进行该过程。具有最高得分的字符分组可被输出作为所希望的字符分组。这一得分可以是跨字典中的所有单词的最高总分，可能带有按照单词的使用频率(流行度)的函数加权的单词。例如，给定字符序列、可由单个键表示的字符的最大数量、可由单个键表示的字符的最小数量的约束，以及其他约束的情况下，可为特定字典和评分函数优化如图8的SIP 802中所示分组的字符。在又一实施例中，可基于移动设备的用户的字典来优化分组，因为不同的用户可具有不同的词汇以及以不同频率使用词。
尽管整体规划是用于标识SIP 802中的字符分组的示例性技术，要理解其他技术也被考虑。例如，可采用遗传算法来学习具有已知/假设的用户频率/概率的术语的特定字典的最优布局。更进一步，尽管SIP 802例示出英语字符，要理解可使用诸如日语之类的其他语言的字符来进行字符的分组。
图9示出具有含有字母组键904-920的SIP 902的另一实施例的触摸屏900。这些字母键也各自与不止一个字母相关联，但是键904-920与键804-818不同地被分组。该SIP 902横跨顶行具有四个字母键904-910，而SIP 802横跨顶行具有三个字母键804-808，这允许在SIP 902的某些键上具有更少的字母。在各种不同实施例中，可以任意不同方式在各种大小和位置的任何数量的不同键上分组字母。
在某些实施例中，SIP可包括在每个字母一个键以及一个或多个键具有与之相关联的字母组之间来回切换SIP的键。从而，用户可使用这一键来从这些不同的选项中选择文本输入风格，这取决于具体情况或首选项。
在某些实施例中，诸如键922、924、926、928、930和932之类的非字母键可在用户换手时在SIP 902从触摸屏的一侧切换到另一侧时保持它们相对于字母键的大致位置。例如，在某些实施例中，不管SIP 902在左侧还是右侧，空格键可保持在字母键之下的位置。在其他实施例中，不管SIP在左侧还是右侧，空格键可保持在字母键的左侧或右侧。在其他实施例中，空格键可保持定位在触摸屏的靠近字母键一侧的底部边缘，如图8中那样，使得当SIP 902位于右侧时空格键在字母键的左侧，而当SIP 902在左侧时空格键在字母键的右侧。诸如回车键、退格键、大写键之类的其他键可类似地被配置成在SIP 902从一侧切换到另一侧时保持它们与字母键和/或彼此的位置关系。
随着用户的拇指沿SIP 902向上伸展更远，拇指的扁平指垫被用于触摸SIP902，导致在更远离底角处触摸SIP时有更大的接触面积。在另一方面，当拇指被极度弯曲以触及更接近SIP 902的底角的键时，拇指的指尖被用于触摸键，导致更小的接触面积。从而，在某些实施例中，某些键可具有与其他键不同的高度和/或面积。在某些实施例中，不同行的键可具有与其他行的键不同的高度和/或面积。例如，在某些实施例中，较远离触摸屏900的底角的键可比较靠近底角的键具有更大的高度和/或面积。最外或最上行的键可比较低行的键具有更大的高度。键的高度可根据行离底角的距离而随着行逐渐增加，以在拇指沿SIP902向上伸展时对应于拇指的伸平。
图9中所示的SIP 902包括三行字母字符键(也称为字母键)，其中这些行的键中的每个键表示字母字符。第一行由四个键组成：表示字符“Q”、“W”和“E”的键904、表示字符“R”和“T”的键906、表示字符“Y”、“U”和“I”的键908、以及表示字符“O”和“P”的键910。第二行键由三个键组成：表示字符“A”和“S”的键912、表示字符“D”、“F”、“G”和“H”的键914、以及表示字符“J”、“K”和“L”的键916。第三行由两个键组成：表示字符“Z”、“X”、“C”和“V”的键918、以及表示字符“B”、“N”和“M”的键920。因此，SIP 902中的各行字母字符包括有四个键的行、有三个键的行以及有两个键的行。当在键中选择字符分组时，例如可提出约束，包括字符根据QWERTY键盘按顺序排列的约束、以及每行中键的数量的约束。跨这些键的字符分组可被优化来在给定约束的情况下对字典中的单词(例如按使用频率加权)消歧。
图8-13示出具有上述特征的不同组合的SIP的若干不同实施例。图8、9和13中的SIP 802、902和1302分别包括角度方向中的弧形边界以及径向方向中的线性边界。图10、11和12中的SIP 1002、1102和1202分别包括倾斜的线性边界，而不是角度/径向边界。
图10示出具有包括键1004-1034的SIP 1002的实施例的触摸屏1000，每个键具有有线性边界的多边形。键1004-1022各自具有由线性边界限定的矩形形状，其中某些线性边界标记为1042，它们从右下向左上倾斜，某些线性边界被标记为1044和1040，它们垂直于边界1042。键1024至1034是三角形的，部分地由倾斜的边界1042、1044和1040限定且部分地由触摸屏1000的正交的底边缘和侧边缘限定。键1004-1018与图8的SIP 802中类似地被排列，具有跨字母键1004-1018类似的字符分组。
图11示出具有包括键1104至1136的SIP 1102的实施例的另一触摸屏1100，每个键具有有线性边界的多边形。键1104至1124各自具有由线性边界限定的矩形形状，其中某些线性边界标记为1144，它们从右下向左上倾斜，某些线性边界被标记为1146和1142，它们垂直于边界1144。键1126至1136是三角形的，部分地由倾斜的边界1142、1144和1146限定且部分地由触摸屏1100的正交的底边缘和侧边缘限定。键1104-1120与图9的SIP 902中类似地被排列，具有跨字母键1104-1120类似的字符分组。
图12示出具有包括键1204至1242的SIP 1202的实施例的又一触摸屏1200，每个键具有有线性边界的多边形。键1204至1230各自具有由线性边界限定的矩形形状，其中某些线性边界标记为1250，它们从右下向左上倾斜，某些线性边界被标记为1252和1246，它们垂直于边界1250。键1232至1242是三角形的，部分地由倾斜的边界1246、1250和1252限定且部分地由触摸屏1200的正交的底边缘和侧边缘限定。
SIP 1202包括三行字母键，其中第一行由5个键组成：1204-1212，其中键1204表示字符“Q”和“W”、键1206表示字符“E”和“R”、键1208表示字符“T”和“Y”、键1210表示字符“U”和“I”、以及键1212表示字符“O”和“P”。第二行也由5个键组成：1214-1222，其中键1214表示字符“A”和“S”、键1216表示字符“D”和“F”、键1218表示字符“G”和“H”、键1220表示字符“J”和“K”、以及键1222表示字符“L”和“M”。第三行由两个键组成：1224和1226，其中键1224表示字符“Z”、“X”和“C”，而键1226表示字符“V”、“B”和“N”。因此，SIP 1202包括各自包括5个键的两行字母键以及包括两个键的一行字母键。此外，SIP1202包括代表2个字母字符和3个字母字符的键，但是没有包括代表4个字母字符的键。关于SIP 1202，在确定分组字母字符的方式时强加的约束可以是字符的顺序(QWERTY)、字符的行数(如3)、以及每行中的键数。
此外，如所示，SIP 1202包括第四行，该第四行包括键1228和1230，其中这些键代表诸如句号和逗号之类的相应标点符号。第四行可附加地包括代表常用的标点符号的其他键，如问号、冒号、分号等。更进一步，SIP 1202包括与键1242分开的键1240。
图13示出具有包括键1304至1336的SIP 1302的实施例的触摸屏1300，这些键部分地由线性的倾斜径向边界限定(其中某些标记为1346)，部分地由弯曲的或弧形的边界1342和1344限定，和/或部分地由触摸屏1300的侧边缘和底边缘限定，非常像图8和9中的SIP 802和902。SIP 1302可包括“MULTI”键1334，该键允许用户切换到一替代的键布局，如对字母表中的每个字母有不同键的布局。这可允许用户手动地键入消歧程序不建议的单词，例如未被存储在消歧程序所依赖的单词字典中的单词。
SIP 1302包括三行字母键。第一行由三个键组成：表示字符“Q”、“W”和“E”的键1304、表示字符“R”、“T”、“Y”和“U”的键1306、以及表示字符“I”、“O”和“P”的键1308。第二行由三个键组成：表示字符“A”、“S”和“D”的键1310、表示字符“F”、“G”和“H”的键1312、以及表示字符“J”、“K”和“L”的键1314。第三行由两个键组成：表示字符“Z”、“X”、“C”和“V”的键1316、以及表示字符“B”、“N”和“M”的键1318。可进行如上所述在SIP 1302中用键对字符分组，来在给定指定布局约束的情况下优化特定字典(如包括SIP 1302的移动设备的用户采用的单词字典)中单词的消歧。
SIP 1002、1102和1202在字母键上的字母分组以及字母键的数量上不同。SIP 1002在最上行的字母键中包括三个键1004、1006和1008，且在第二行字母键中包括三个键1010、1012、1014。SIP 1102在最上行的字母键中包括四个键1104、1106、1108和1110，且在第二行字母键中包括三个键1112、1114和1116。SIP 1202在最上行字母键中包括5个键1204至1212，且在第二行字母键中包括5个键1214至1222。SIP 1202中的十个键1204至1222各自具有相同的高度和宽度，每个对应于两个字母。
尽管SIP 1002、1102和1202不像SIP 802和902那样包括弯曲的或弧形的键行，但是它们可被类似地配置成可由用户的拇指从触摸屏的任一底角伸展来被访问，并可以相似的方式被调整大小和在两个底角之间切换。此外，关于本文所述的SIP中的任一个，手势可使得SIP被显露(显示在触摸屏上)或被隐藏(从触摸屏的显示画面中去除)。此外，本文所述的SIP特征中的任何特征可被以类似的方式应用于弧形的SIP 802和902以及倾斜的SIP 1002、1102和1202两者。
在某些实施例中，SIP可包括诸如语言键830之类的键，它允许用户在不同语言之间切换。在某些实施例中，SIP可被配置成可用于非拉丁语言，如阿拉伯语。在这些情况中，键的布局以及SIP的边界可被调整来适合于不同数量的字符以及用于以其他语言进行文本输入的其他功能。从而，当用户击中语言键以切换到一不同语言时，SIP的布局可自动调整到一不同的布局来适应该不同的语言。
尽管已经针对图8-13中的SIP描述了键盘布局，但是要理解这些键盘布局可被包括在便于通过形状书写来进行文本输入的其他触敏输入面板中。此外，关于图8-13中所示的SIP中的任何一个，可提供触觉反馈来辅助用户相对于一个或多个键来定位手指以及辅助用户生成文本。例如，可在键之间的边界处提供触觉反馈，使得当手指转移通过这些边界时用户在边界处感知到更大的表面摩擦力。
图14-16例示出与向具有触敏显示器的计算设备的用户提供触觉反馈有关的示例性方法。尽管各方法被表示和描述为顺序地执行的一系列动作，但要理解，这些方法不受该顺序的次序的限制。例如，一些动作能以与本文描述的不同的次序发生。另外，某一动作可以与另一动作并发地发生。此外，在一些实例中，实现本文描述的方法并不需要所有动作。
此外，本文描述的动作可以是可由一个或多个处理器实现的和/或存储在计算机可读介质或媒体上的计算机可执行指令。计算机可执行指令可包括例程、子例程、程序、执行的线程等。另外，这些方法的动作的结果可以存储在计算机可读介质中，显示在显示设备上，等等。
现在参考图14，例示出便于与触敏显示器进行无需眼睛的交互的示例性方法1400。方法1400在1402处开始，并在1404处图形对象被显示在触敏显示器上。例如，该图形对象可对应于安装在包括所述触敏显示器的计算设备上的应用。如上所述，这种应用可以是利用软输入面板来生成文本的文本输入应用。因此，该图形对象可以是软输入面板中的键。
在1406，检测到手指在对应于该图形对象的位置处与触敏显示器接触。这一位置可以是该图形对象上的任何地方、在该图形对象的中心、或在紧邻该图形对象的将该图形对象与另一图形对象分开的边界处。
在1408，响应于检测到手指在对应于该图形对象的位置处与触敏显示器接触，向手指提供触觉反馈而不向对应于该图形对象的应用提供输入。例如，当手指在触敏显示器上转移时，这种触觉反馈可被用户感知到。从而，该位置可以是例如在该图形对象上，且随着用户在手指保持在该图形对象上的同时移动手指时，用户可感知到与触敏显示器上的另一位置相比该表面有点粗糙。如上所述，这种触觉反馈可被采用来辅助用户确定用户的手指相对于该图形对象在触敏显示器上何处。
在1410，在提供触觉反馈之后，标识由用户提出的切换命令。这种切换命令可以是用户使用手指施加到触敏显示器的压力的增加、将手指移离触敏显示器、话音命令、倾斜计算设备、摇晃计算设备、双次轻击等。在1412，在标识切换命令之后，检测到关于该图形对象的输入手势。例如，这种输入手势可以是在该图形对象上的笔划(滑扫)。在另一示例中，输入手势可以是轻击、双次轻击、捏合、旋转、或可在触敏显示器上提出的其他合适手势。在1414，基于输入手势，输入数据被传送到该应用。此外，可选地，在用户提出输入手势时可提供其他触觉反馈。方法1400在1416完成。
现在参考图15，例示出用于为了辅助相对于触敏显示器上的图形对象定位手指以及为了辅助用户通过形状书写来生成文本的目的而提供触觉反馈的示例性方法1500。方法1500起始于1502，且在1504在计算设备的触敏显示器上显示软输入面板。在一示例性实施例中，软输入面板可包括多个可选择的键，其中该多个键中的每个键表示相应的多个字符。此外，出于生成文本的目的，软输入面板可由某一应用使用。
在1506，检测到手指转移通过该多个键中的第一子集的键。例如，用户可将手指滑扫通过该第一子集的键。
在1508，响应于检测到手指转移通过该多个键中的第一子集的键，提供第一触觉反馈，其中该第一触觉反馈指示出该第一子集的键中手指正转移通过的相应键在触敏显示器上的位置。可这样做来辅助用户定位该子集的键中的一个或多个键。因此，输入不被提供给文本生成应用。
在1510，作出关于是否检测到切换命令的确定。如果还未检测到切换命令，则方法返回到1508，其中当用户在触敏显示器上移动手指时向用户提供触觉反馈。如果检测到切换命令，这指示出用户希望生成文本并向文本生成应用提供输入，则在1512，检测到手指正转移通过该多个键中的第二子集的键。从而，用户正采用形状书写来通过例如连接表示所希望生成的单词中的字符的键来生成文本。
在1514，提供第二触觉反馈，其中第二触觉反馈指示出该第二子集的键中手指正转移通过的相应键在触敏显示器上的位置。在1516，基于检测到手指正转移通过软输入面板的该第二子集的键而向文本生成应用提供输入数据。方法1500在1518完成。
现在转到图16，例示出便于提供触觉反馈来在启动包括触敏显示器的计算设备上的应用方面辅助用户的示例性方法1600。方法1600开始于1602，且在1604在平滑的触敏显示器上显示一图形图标，该图形图标在被选择时启动一应用。这一图形图标可与多个其他可选择的图形图标一起被显示。
在1606，检测到用户的手指在触敏显示器上对应于该图形图标的位置处。再次，该位置可以是该图形图标上的任何地方、在该图形图标的中心、在将该图形图标与某个其他图形图标分开的边界处等。
在1608，基于检测到用户的手指位于对应于该图形图标的位置处而提供第一触觉反馈。这一触觉反馈辅助用户识别该图形图标在触敏显示器上的位置而不要求用户看触敏显示器。
在1610，标识由用户提出的切换命令。在1612，在标识切换命令之后，检测关于该图形图标的输入手势。例如，这一输入手势可以是对该图形图标的轻击或双次轻击。在1614，响应于检测到已经关于该图形图标做出了输入手势而启动该应用。方法1600在1616完成。
现在参考图17，示出了可以根据本文公开的系统和方法使用的示例性计算设备1700的高级图示。例如，计算设备1700可在提供触觉反馈来辅助与触敏显示器进行无需眼睛的交互的系统中被使用。作为另一示例，计算设备1700可在支持形状书写的系统中被使用。计算设备1700包括执行存储在存储器1704中的指令的至少一个处理器1702。这些指令可以是例如用于实现被描述为由上述一个或多个组件执行的功能性的指令或用于实现上述方法中的一个或多个的指令。处理器1702可以通过系统总线1706访问存储器1704。除了存储可执行指令之外，存储器1704还可存储图形对象在触敏显示器上的位置、形状书写模型、语言模型等等。
计算设备1700还包括可由处理器1702通过系统总线1706访问的数据存储1708。数据存储1708可包括可执行指令、希望提供触觉反馈的定义的位置等。计算设备1700还包括允许外部设备与计算设备1700进行通信的输入接口1710。例如，输入接口1710可被用于从外部计算机设备、从用户等处接收指令。计算设备1700还包括使计算设备1700和一个或多个外部设备相对接的输出接口1712。例如，计算设备1700可以通过输出接口1712显示文本、图像等。
构想了通过输入接口1710和输出接口1712与计算设备1700通信的外部设备可被包括在提供实质上任何类型的用户可与之交互的用户界面的环境中。用户界面类型的示例包括图形用户界面、自然用户界面等。例如，图形用户界面可接受来自用户采用诸如键盘、鼠标、遥控器等之类的输入设备的输入，以及在诸如显示器之类的输出设备上提供输出。此外，自然语言界面可使得用户能够以无需受到诸如键盘、鼠标、遥控器等之类的输入设备强加的约束的方式来与计算设备1700交互。相反，自然用户界面可依赖于语音识别、触摸和指示笔识别、屏幕上和屏幕附近的手势识别、空中手势、头部和眼睛跟踪、话音和语音、视觉、触摸、姿势、以及机器智能等。
另外，尽管被例示为单个系统，但要理解，计算设备1700可以是分布式系统。因此，例如，若干设备可以通过网络连接进行通信并且可共同执行被描述为由计算设备1700执行的任务。
在此所述的各种功能可以以硬件、软件或其任何组合来实现。如果以软件实现，则各功能可以作为一条或多条指令或代码存储在计算机可读介质上或藉其进行传送。计算机可读介质包括计算机可读存储介质。计算机可读存储介质可以是可由计算机访问的任何可用存储介质。作为示例而非限定，这样的计算机可读介质可包括RAM、ROM、EEPROM、CD-ROM或其他光盘存储、磁盘存储或其他磁存储设备、或能被用来承载或存储指令或数据结构形式的期望程序代码且能被计算机访问的任何其他介质。如本文中所使用的盘(disk)和碟(disc)包括压缩碟(CD)、激光碟、光碟、数字多用碟(DVD)、软盘和蓝光碟(BD)，其中盘(disk)通常以磁的方式再现数据，而碟(disc)通常用激光以光学方式再现数据。另外，所传播的信号不被包括在计算机可读存储介质的范围内。计算机可读介质还包括通信介质，其包括便于计算机程序从一地向另一地转移的任何介质。连接例如可以是通信介质。例如，如果软件使用同轴电缆、光纤电缆、双绞线、数字订户线(DSL)、或诸如红外线、无线电、以及微波之类的无线技术来从网站、服务器、或其它远程源传输，则该同轴电缆、光纤电缆、双绞线、DSL、或诸如红外线、无线电、以及微波之类的无线技术被包括在通信介质的定义中。上述的组合也应当包括在计算机可读介质的范围内。
作为替代或除此之外，本文所述的功能可至少部分地由一个或多个硬件逻辑组件来执行。例如，但非限制，可被使用的硬件逻辑组件的说明性类型包括现场可编程门阵列(FPGA)、程序专用的集成电路(ASIC)、程序专用的标准产品(ASSP)、片上系统(SOC)、复杂可编程逻辑器件(CPLD)等。
以上所描述的包括一个或多个实施例的示例。当然，出于描绘前述各方面的目的而描述上述设备或方法的每个可以想到修改和改变是不可能的，但本领域内的普通技术人员可以认识到，各方面的许多另外的组合和置换都是可能的。因此，所描述的各方面旨在包括所有这些属于所附权利要求书的精神和范围内的改变、修改和变型。此外，就在详细描述或权利要求书中使用术语“包括”而言，这一术语旨在以与术语“包含”在被用作权利要求书中的过渡词时所解释的相似的方式为包含性的。

Claims (10)

1.一种在具有有平滑表面的触敏显示器的计算设备上执行的方法，所述方法包括：
在所述触敏显示器上显示一图形对象，所述图形对象对应于安装在所述计算设备上的一应用；
检测手指在对应于所述图形对象的位置处与所述触敏显示器接触；
响应于检测到所述手指在对应于所述图形对象的位置处与所述触敏显示器接触，提供第一触觉反馈而不基于所述手指在对应于所述图形对象的位置处与所述触敏显示器接触向所述应用提供输入；
在提供所述第一触觉反馈之后，标识切换命令；
在标识所述切换命令之后，检测关于所述图形对象的输入手势；以及
基于所述输入手势将输入数据传送到所述应用。
2.如权利要求1所述的方法，其特征在于，对应于所述图形对象的所述位置位于所述图形对象上。
3.如权利要求1所述的方法，其特征在于，对应于所述图形对象的所述位置是所述图形对象与另一图形对象之间的边界。
4.如权利要求1所述的方法，其特征在于，所述应用是包括显示在所述触敏显示器上的软输入面板的文本输入应用，所述软输入面板包括多个键，所述多个键中的每个键表示相应的多个字母字符，其中所述图形对象是所述软输入面板的键。
5.如权利要求4所述的方法，其特征在于，所述输入手势包括在所述触敏显示器上的穿过对应于所述多个键中的至少一个键的另一位置的笔划，所述笔划是在所述手指保持与所述触敏显示器接触的同时所述手指在所述触敏显示器上的转移，所述方法还包括：
检测所述笔划穿过所述另一位置；
响应于检测到所述第二笔划穿过所述另一位置，提供第二触觉反馈。
6.如权利要求1所述的方法，其特征在于，提供触觉反馈包括提供静电触觉反馈，其中当所述静电触觉反馈被提供时用户感知到所述触敏显示器的一区域的摩擦力的变化。
7.如权利要求1所述的方法，其特征在于，所述输入手势包括在所述触敏显示器上创建一形状的笔划序列，其中所述应用至少部分地基于所述输入手势标识由所述计算设备的用户希望提出的单词。
8.如权利要求1所述的方法，其特征在于，进一步包括：
响应于检测到所述手指在对应于所述图形对象的位置处与所述触敏显示器接触，提供指示出所述手指在对应于所述图形对象的位置处与所述触敏显示器接触的听觉反馈。
9.一种计算设备，包括：
触敏显示器，所述触敏显示器显示关于安装在所述计算设备上的一应用的图形对象；
当手指与所述触敏显示器接触时输出指示出所述手指的实时位置的信号的传感器；
配置成提供触觉反馈的致动器；
从所述传感器接收所述信号以及确定所述手指在对应于所述图形对象的位置处与所述触敏显示器接触的位置标识器组件，当确定所述手指在对应于所述图形对象的位置处与所述触敏显示器接触时，所述位置标识器组件不能向所述应用提供输入数据；
反馈组件，响应于所述位置标识器组件确定所述手指在对应于所述图形对象的位置处与所述触敏显示器接触，所述反馈组件致使所述致动器提供触觉反馈以向用户指示出所述手指在对应于所述图形对象的所述位置处与所述触敏显示器接触；
标识切换命令的切换标识器组件，其中响应于所述切换标识器组件标识出所述切换命令，所述位置标识器组件基于从所述传感器接收到的所述信号向所述应用提供输入数据。
10.如权利要求9所述的计算设备，其特征在于，所述应用是在所述触敏显示器上显示软输入面板的文本输入应用，所述软输入面板包括多个键，每个键表示相应的多个字符，其中响应于所述切换标识器组件标识出所述切换命令，当所述位置标识器组件确定所述手指在所述多个键中的键之间的边界处与所述触敏显示器接触时，所述反馈组件致使所述致动器提供触觉反馈。
CN201380052074.3A 2012-10-10 2013-10-09 提供用于定位和数据输入的触觉反馈 Active CN104704451B (zh)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US201261712155P 2012-10-10 2012-10-10
US61/712,155 2012-10-10
US13/745,860 US9740399B2 (en) 2012-10-10 2013-01-20 Text entry using shapewriting on a touch-sensitive input panel
US13/745,860 2013-01-20
US13/787,832 US9547430B2 (en) 2012-10-10 2013-03-07 Provision of haptic feedback for localization and data input
US13/787,832 2013-03-07
PCT/US2013/063965 WO2014058940A1 (en) 2012-10-10 2013-10-09 Provision of haptic feedback for localization and data input

Publications (2)

Publication Number Publication Date
CN104704451A true CN104704451A (zh) 2015-06-10
CN104704451B CN104704451B (zh) 2017-07-11

Family

ID=50433764

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380052074.3A Active CN104704451B (zh) 2012-10-10 2013-10-09 提供用于定位和数据输入的触觉反馈

Country Status (4)

Country Link
US (1) US9547430B2 (zh)
EP (1) EP2907006A1 (zh)
CN (1) CN104704451B (zh)
WO (1) WO2014058940A1 (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105824407A (zh) * 2016-02-04 2016-08-03 维沃移动通信有限公司 触摸反馈方法及移动终端
WO2016206069A1 (en) * 2015-06-26 2016-12-29 Microsoft Technology Licensing, Llc Passive haptics as reference for active haptics
CN107209589A (zh) * 2015-12-22 2017-09-26 深圳市柔宇科技有限公司 触控屏的触控交互方法及电子终端
CN108536280A (zh) * 2018-01-30 2018-09-14 吉林大学 一种应用指垫的静电力和振动融合触觉再现装置及方法
CN110413102A (zh) * 2018-04-26 2019-11-05 天马日本株式会社 电子设备以及用于电子设备的控制方法
CN110869886A (zh) * 2017-06-30 2020-03-06 微软技术许可有限责任公司 触觉反馈系统

Families Citing this family (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10007341B2 (en) * 2011-06-21 2018-06-26 Northwestern University Touch interface device and method for applying lateral forces on a human appendage
JP5966963B2 (ja) * 2013-02-15 2016-08-10 株式会社デンソー 文字入力装置、および文字入力方法
USD778293S1 (en) * 2013-07-02 2017-02-07 Microsoft Corporation Display screen with graphical user interface
TW201502961A (zh) * 2013-07-05 2015-01-16 Wen-Fu Chang 觸控裝置之輸入鍵輸入方法
US20150040027A1 (en) * 2013-07-31 2015-02-05 Yi-Chuan Cheng Portable Device with Handedness Switching Module
USD739870S1 (en) * 2013-08-09 2015-09-29 Microsoft Corporation Display screen with graphical user interface
USD732065S1 (en) * 2013-08-09 2015-06-16 Microsoft Corporation Display screen with graphical user interface
USD732066S1 (en) * 2013-08-09 2015-06-16 Microsoft Corporation Display screen with graphical user interface
USD738902S1 (en) * 2013-08-09 2015-09-15 Microsoft Corporation Display screen with graphical user interface
USD732064S1 (en) * 2013-08-09 2015-06-16 Microsoft Corporation Display screen with graphical user interface
USD732568S1 (en) * 2013-08-09 2015-06-23 Microsoft Corporation Display screen with graphical user interface
USD778310S1 (en) 2013-08-09 2017-02-07 Microsoft Corporation Display screen with graphical user interface
USD771111S1 (en) 2013-08-30 2016-11-08 Microsoft Corporation Display screen with graphical user interface
US20150084875A1 (en) * 2013-09-26 2015-03-26 Min Liu Enhanced haptic feedback for handheld mobile computing devices
JP6351964B2 (ja) * 2013-12-11 2018-07-04 株式会社東海理化電機製作所 入力装置
JP2015130168A (ja) * 2013-12-31 2015-07-16 イマージョン コーポレーションＩｍｍｅｒｓｉｏｎ Ｃｏｒｐｏｒａｔｉｏｎ 摩擦拡張制御、及び、タッチコントロールパネルのボタンを摩擦拡張制御部へと変換する方法
USD704673S1 (en) * 2014-01-25 2014-05-13 Dinesh Agarwal Curved split-screen cellphone
USD768204S1 (en) * 2014-08-25 2016-10-04 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
US9774693B2 (en) * 2015-04-29 2017-09-26 Facebook, Inc. Methods and systems for viewing user feedback
US20160357411A1 (en) * 2015-06-08 2016-12-08 Microsoft Technology Licensing, Llc Modifying a user-interactive display with one or more rows of keys
US10664053B2 (en) 2015-09-30 2020-05-26 Apple Inc. Multi-transducer tactile user interface for electronic devices
KR102449879B1 (ko) 2015-12-02 2022-10-05 삼성디스플레이 주식회사 표시 장치 및 그 구동 방법
US10719233B2 (en) * 2016-01-18 2020-07-21 Microsoft Technology Licensing, Llc Arc keyboard layout
WO2017184634A2 (en) * 2016-04-21 2017-10-26 Apple Inc. Tactile user interface for electronic devices
US10332628B2 (en) * 2016-09-30 2019-06-25 Sap Se Method and system for control of an electromechanical medical device
US10372412B2 (en) * 2016-10-25 2019-08-06 Microsoft Technology Licensing, Llc Force-based interactions with digital agents
US20180121000A1 (en) * 2016-10-27 2018-05-03 Microsoft Technology Licensing, Llc Using pressure to direct user input
US10599222B2 (en) * 2018-07-12 2020-03-24 International Business Machines Corporation Haptic feedback in networked components
WO2020240578A1 (en) * 2019-05-24 2020-12-03 Venkatesa Krishnamoorthy Method and device for inputting text on a keyboard
US11820215B2 (en) * 2019-11-04 2023-11-21 Hyundai Mobis Co., Ltd. System and method for controlling display of vehicle
WO2021139864A2 (en) * 2020-01-06 2021-07-15 Camar Aps Tactile proactive guidance solution in touchscreens
US11513604B2 (en) 2020-06-17 2022-11-29 Motorola Mobility Llc Selectable response options displayed based-on device grip position
US11595511B2 (en) 2020-07-30 2023-02-28 Motorola Mobility Llc Adaptive grip suppression within curved display edges
US20210117003A1 (en) * 2020-10-23 2021-04-22 Intel Corporation Computing platforms and related methods for providing accessible user interfaces
CN113052078A (zh) * 2021-03-25 2021-06-29 Oppo广东移动通信有限公司 空中书写轨迹识别方法、装置、存储介质及电子设备
US11775084B2 (en) * 2021-04-20 2023-10-03 Microsoft Technology Licensing, Llc Stylus haptic component arming and power consumption
US11726734B2 (en) 2022-01-13 2023-08-15 Motorola Mobility Llc Configuring an external presentation device based on an impairment of a user
US12131009B2 (en) * 2022-01-13 2024-10-29 Motorola Mobility Llc Configuring an external presentation device based on user handedness

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090117943A1 (en) * 2007-11-06 2009-05-07 Lg Electronics Inc. Mobile terminal and method for converting broadcast channel of a mobile terminal
US20100235726A1 (en) * 2009-03-16 2010-09-16 Bas Ording Methods and Graphical User Interfaces for Editing on a Multifunction Device with a Touch Screen Display
US20120113008A1 (en) * 2010-11-08 2012-05-10 Ville Makinen On-screen keyboard with haptic effects

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5544295A (en) 1992-05-27 1996-08-06 Apple Computer, Inc. Method and apparatus for indicating a change in status of an object and its disposition using animation
KR101289110B1 (ko) * 2001-11-01 2013-08-07 임머숀 코퍼레이션 촉각을 제공하기 위한 방법 및 장치
CN101506758A (zh) * 2006-09-27 2009-08-12 诺基亚公司 触觉型触摸屏
TWI416399B (zh) 2007-12-28 2013-11-21 Htc Corp 手持式電子裝置及其操作方法
US8250001B2 (en) * 2008-12-18 2012-08-21 Motorola Mobility Llc Increasing user input accuracy on a multifunctional electronic device
WO2010110550A1 (en) 2009-03-23 2010-09-30 Core Logic Inc. Apparatus and method for providing virtual keyboard
US20100277414A1 (en) 2009-04-30 2010-11-04 Qualcomm Incorporated Keyboard for a portable computing device
GB2474047B (en) 2009-10-02 2014-12-17 New Transducers Ltd Touch sensitive device
US9501145B2 (en) 2010-05-21 2016-11-22 Disney Enterprises, Inc. Electrovibration for touch surfaces
US8918734B2 (en) * 2010-07-28 2014-12-23 Nuance Communications, Inc. Reduced keyboard with prediction solutions when input is a partial sliding trajectory
US20120162078A1 (en) 2010-12-28 2012-06-28 Bran Ferren Adaptive virtual keyboard for handheld device
JP5496337B2 (ja) * 2011-02-04 2014-05-21 パナソニック株式会社 電子機器
US20120256848A1 (en) 2011-04-08 2012-10-11 Research In Motion Limited Tactile feedback method and apparatus
CN102375691A (zh) 2011-10-25 2012-03-14 中兴通讯股份有限公司 一种虚拟键盘布局方法及键盘

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090117943A1 (en) * 2007-11-06 2009-05-07 Lg Electronics Inc. Mobile terminal and method for converting broadcast channel of a mobile terminal
US20100235726A1 (en) * 2009-03-16 2010-09-16 Bas Ording Methods and Graphical User Interfaces for Editing on a Multifunction Device with a Touch Screen Display
US20120113008A1 (en) * 2010-11-08 2012-05-10 Ville Makinen On-screen keyboard with haptic effects

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016206069A1 (en) * 2015-06-26 2016-12-29 Microsoft Technology Licensing, Llc Passive haptics as reference for active haptics
CN106662949A (zh) * 2015-06-26 2017-05-10 微软技术许可有限责任公司 作为主动触觉机构的参考的被动触觉机构
CN106662949B (zh) * 2015-06-26 2020-12-15 微软技术许可有限责任公司 作为主动触觉机构的参考的被动触觉机构
US11163362B2 (en) 2015-06-26 2021-11-02 Microsoft Technology Licensing, Llc Passive haptics as reference for active haptics
CN107209589A (zh) * 2015-12-22 2017-09-26 深圳市柔宇科技有限公司 触控屏的触控交互方法及电子终端
CN107209589B (zh) * 2015-12-22 2020-07-28 深圳市柔宇科技有限公司 触控屏的触控交互方法及电子终端
CN105824407A (zh) * 2016-02-04 2016-08-03 维沃移动通信有限公司 触摸反馈方法及移动终端
CN105824407B (zh) * 2016-02-04 2019-01-11 维沃移动通信有限公司 触摸反馈方法及移动终端
CN110869886A (zh) * 2017-06-30 2020-03-06 微软技术许可有限责任公司 触觉反馈系统
CN108536280A (zh) * 2018-01-30 2018-09-14 吉林大学 一种应用指垫的静电力和振动融合触觉再现装置及方法
CN110413102A (zh) * 2018-04-26 2019-11-05 天马日本株式会社 电子设备以及用于电子设备的控制方法
CN110413102B (zh) * 2018-04-26 2024-09-17 天马日本株式会社 电子设备以及用于电子设备的控制方法

Also Published As

Publication number Publication date
WO2014058940A1 (en) 2014-04-17
CN104704451B (zh) 2017-07-11
US20140101545A1 (en) 2014-04-10
EP2907006A1 (en) 2015-08-19
US9547430B2 (en) 2017-01-17
WO2014058940A9 (en) 2014-06-12

Similar Documents

Publication Publication Date Title
CN104704451B (zh) 提供用于定位和数据输入的触觉反馈
CN104704453B (zh) 在触敏输入面板上使用形状书写来进行文本输入
KR101704549B1 (ko) 문자 입력 인터페이스 제공 방법 및 장치
US10268370B2 (en) Character input device and character input method with a plurality of keypads
CN104704452A (zh) 移动计算设备上的拆分虚拟键盘
US10606474B2 (en) Touch screen finger tracing device
KR101636705B1 (ko) 터치스크린을 구비한 휴대 단말의 문자 입력 방법 및 장치
US9298270B2 (en) Written character inputting device and method
AU2017262857B2 (en) Touch screen overlay for the visually impaired and computer program
EP3224703B1 (en) Electronic apparatus and method for displaying graphical object thereof
Alajarmeh Non-visual access to mobile devices: A survey of touchscreen accessibility for users who are visually impaired
TWI430651B (zh) 智慧型輸入系統及其輸入裝置與電子設備
Uddin Improving Multi-Touch Interactions Using Hands as Landmarks
KR101454896B1 (ko) 터치 패널을 이용한 한글 입력 장치 및 그의 한글 입력 방법
TWI429276B (zh) 智慧型輸入方法
WO2013078621A1 (zh) 用于电子设备的触屏输入方法和电子设备
TWI468986B (zh) 電子裝置、其輸入方法與電腦程式產品
TWI432015B (zh) 智慧型輸入方法
Gaur AUGMENTED TOUCH INTERACTIONS WITH FINGER CONTACT SHAPE AND ORIENTATION
TWI432016B (zh) 智慧型輸入系統及方法
US20160357411A1 (en) Modifying a user-interactive display with one or more rows of keys
Santos Designing wearable interfaces for blind people

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20170606

Address after: Washington State

Applicant after: Micro soft technique license Co., Ltd

Address before: Washington State

Applicant before: Microsoft Corp.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant