CN104035712B - 用于基于姿势的键盘的姿势完成路径显示 - Google Patents

用于基于姿势的键盘的姿势完成路径显示 Download PDF

Info

Publication number
CN104035712B
CN104035712B CN201410085705.8A CN201410085705A CN104035712B CN 104035712 B CN104035712 B CN 104035712B CN 201410085705 A CN201410085705 A CN 201410085705A CN 104035712 B CN104035712 B CN 104035712B
Authority
CN
China
Prior art keywords
posture
path
character keys
completes
equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410085705.8A
Other languages
English (en)
Other versions
CN104035712A (zh
Inventor
萨德·尤金·斯特纳
尼马尔·帕特尔
翟树民
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of CN104035712A publication Critical patent/CN104035712A/zh
Application granted granted Critical
Publication of CN104035712B publication Critical patent/CN104035712B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233Character input methods
    • G06F3/0237Character input methods using prediction or retrieval techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0489Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using dedicated keyboard keys or combinations thereof
    • G06F3/04895Guidance during keyboard input operation, e.g. prompting

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Input From Keyboards Or The Like (AREA)

Abstract

本发明涉及用于基于姿势的键盘的姿势完成路径显示。一种计算设备可以被配置成接收第一输入姿势的指示,第一输入姿势的第一部分指示图形键盘的多个字符键中的第一字符键,并且第一输入姿势的第二部分指示多个字符键中的第二字符键。计算设备还可以被配置成至少部分地基于第一字符键和第二字符键,确定候选词。计算设备可以被配置成输出从第二字符键延伸的姿势完成路径,以在显示图形键盘的显示设备的区域处显示。而且,计算设备可以被配置成:响应于基本经过姿势完成路径的第二输入姿势的指示,选择候选词。

Description

用于基于姿势的键盘的姿势完成路径显示
背景技术
一些计算设备(例如移动电话、平板电脑等)可以提供图形键盘作为撰写文本的图形用户界面(例如,使用存在敏感输入设备和/或显示器,诸如触摸屏)的一部分。图形键盘可以使计算设备的用户能够输入文本(例如电子邮件、文本消息、或文档等)。例如,计算设备的存在敏感显示器可以输出图形(或者“软”)键盘,其使用户能够通过指示(例如通过敲击)在存在敏感显示器处显示的键来输入数据。
在一些情况下,计算设备可以呈现连续姿势图形键盘(有时称为“姿势键盘”或者“结合姿势键盘”),用户通过其可以通过在与图形键盘的键相关联的存在敏感显示器的区域上滑动他或她的手指进行交互,由此基本以姿势表示将被输入到计算设备的词。换句话说,用户可以通过在存在敏感显示器处输出的词的字母上描绘(trace),来在单个姿势中输入整个词。以此方式,连续姿势图形键盘提供允许用户通过姿势输入一个词或一组词的输入方法。同样地,特别是与存在敏感屏幕(例如与计算设备可操作地耦合或者集成的存在敏感屏幕)的单手敲击相比,连续姿势图形键盘可以允许用户实现某个效率程度。
然而,一些连续姿势图形键盘具有某些缺陷。例如,当用户对存在敏感显示器执行姿势以输入更长的词或短语时,选择图形键盘的相应键所需的时间量可能增加。在某些示例中,这导致用户可能执行输入错误的可能性的相应增加。而且,实际上,用户可能很难选择词/短语中的下一个字母并且同时确定是否从被输出用于在计算设备处显示的预测词的列表中选择。从而,姿势键盘的各种缺陷可能降低用户可以将文本输入到计算设备的速度。
发明内容
一方面,本公开描述了一种方法,包括:通过计算设备输出包括多个字符键的图形键盘以在显示设备处显示。该方法还可以包括:在计算设备处接收第一输入姿势的指示,第一输入姿势的第一部分指示多个字符键中的第一字符键,并且第一输入姿势的第二部分指示多个字符键中的第二字符键。根据本公开的该方面,该方法还可以包括:通过计算设备并且至少部分地基于第一字符键和第二字符键,确定候选词。该方法可以另外包括:通过计算设备输出从第二字符键延伸的姿势完成路径以在显示图形键盘的显示设备的区域处显示。而且,该方法可以包括:通过计算设备并且响应于接收基本经过(traverse)姿势完成路径的第二输入姿势的指示,选择候选词。
另一方面,本公开描述了一种计算设备,包括:显示设备;一个或多个处理器;用户界面模块,可由一个或多个处理器操作,并且被配置成输出包括多个字符键的图形键盘以在显示设备处显示;以及姿势模块。根据本公开的该方面,姿势模块可由一个或多个处理器操作,并且被配置成接收第一输入姿势的指示,第一输入姿势的第一部分指示多个字符键中的第一字符键,并且第一输入姿势的第二部分指示多个字符键中的第二字符键。姿势模块还可以被配置成至少部分地基于第一字符键和第二字符键,确定候选词。此外,姿势模块可以被配置成输出从第二字符键延伸的姿势完成路径,以通过用户界面模块在显示图形键盘的显示设备的区域处显示。姿势模块可以进一步被配置成:输出候选词以通过用户界面模块在显示图形键盘的显示设备的区域处并且邻近姿势完成路径显示,并且响应于接收基本经过姿势完成路径的第二输入姿势的指示,选择候选词。
在进一步方面,本公开描述了一种包括指令的计算机可读存储介质。这些指令在被执行时配置计算设备的一个或多个处理器输出包括多个字符键的图形键盘以在显示设备处显示。这些指令在被执行时还可以配置计算设备的一个或多个处理器接收第一输入姿势的指示,第一输入姿势的第一部分指示多个字符键中的第一字符键,并且第一输入姿势的第二部分指示多个字符键中的第二字符键。这些指令在被执行时可以进一步配置计算设备的一个或多个处理器至少部分地基于第一字符键和第二字符键,确定候选词。另外,这些指令在被执行时可以进一步配置计算设备的一个或多个处理器输出从第二字符键朝向与候选词中的预测的下一个字母相对应的第三字符键延伸的姿势完成路径,以由通过用户界面模块在显示图形键盘的显示设备的区域处显示。这些指令在被执行时还可以配置计算设备的一个或多个处理器响应于接收基本经过姿势完成路径的第二输入姿势的指示,选择候选词。
在附图和以下的描述中阐述了一个或多个示例的细节。本公开的其他特征、目标和优点从说明书和附图并且从权利要求将是显而易见的。
附图说明
图1是图示根据本公开的一个或多个技术的可以用于显示用于选择候选词的姿势完成路径的示例计算设备的框图。
图2是图示根据本公开的一个或多个技术的如图1中所示的计算设备的一个示例的进一步细节的框图。
图3A至图3D是图示根据本公开的一个或多个技术的包括图形键盘和姿势完成路径的视觉表示的示例用户界面的概念图。
图4A和图4B是图示根据本公开的一个或多个技术的包括图形键盘和多个姿势完成路径的示例用户界面的概念图。
图5是图示根据本公开的一个或多个技术的用于显示用于选择候选词的姿势完成路径的示例技术的流程图。
图6是图示根据本公开的一个或多个技术的输出用于在远程设备处显示的图形内容的示例计算设备的框图。
具体实施方式
本公开描述了用于显示姿势完成路径的视觉描绘的系统和技术,其允许用户通过执行基本经过(例如,经过或几乎经过)姿势完成路径的姿势,来选择候选词(也被称为预测词或建议词)。在采用姿势键盘的一些计算设备中,计算设备被配置成在邻近示出姿势键盘的显示器的区域(例如,之上)的区域处显示候选词。因为许多姿势键盘的尺寸大于典型的可察觉人类视觉弧,用户可能通常没注意到词建议或候选词。另外,即使用户察觉了候选词并且希望选择其,用户必须停止他或她正执行的姿势,并且将输入单元(例如用户的手指、触控笔等)移动到显示期望候选的存在敏感显示器的区域。在两种情况下(没注意到候选词或者必须将输入单元移动到显示候选词的显示器的区域),这可能导致降低文本输入速率。
根据本公开的一个或多个方面,计算设备被配置成输出姿势完成路径,以在显示姿势键盘的显示设备的区域处显示。姿势完成路径可以例如是用于当由用户基本执行(例如,执行或几乎执行)时使计算设备选择与姿势完成路径相关联的候选词的姿势的路径的视觉表示。响应于接收基本经过姿势完成路径的姿势的指示,计算设备可以选择与姿势完成路径相关联的候选词。这可以增加用户察觉姿势完成路径的可能性。另外,如果姿势完成路径与用户期望输入的候选词相关联,则用户可以更可能经过姿势完成路径,以选择候选词(例如,与在挨着图形键盘的显示器的区域处显示候选词相比)。
在一些示例中,计算设备还可以被配置成输出候选词,以在邻近姿势完成路径的显示设备的区域处显示。通过输出候选词以挨着姿势完成路径显示,计算设备可以增加设备的用户察觉候选词的可能性。
另外,在一些示例中,计算设备可以输出姿势完成路径以在从设备确定为最近指示的字符键的字符键延伸的位置处显示。因为计算设备输出姿势完成路径以在该位置处显示(例如,与姿势键盘的另一个位置相对或邻近姿势键盘),用户更可能察觉姿势完成路径。在一些示例中,当姿势完成路径可能接近用户将输入单元定位在的显示器的位置时,用户可以能够更快地基本经过姿势完成路径。以这些方式,姿势完成路径可以增加用户将文本输入提供到计算设备的效率。
图1是图示根据本公开的一个或多个技术的可以用于呈现用于选择候选词的姿势完成路径的视觉描绘的示例性计算设备2的框图。在一些示例中,计算设备2可以与用户18相关联。与计算设备2相关联的用户可以通过将各种用户输入提供给计算设备2,来与计算设备2交互。
计算设备2的示例可以包括但不限于便携式或移动设备,诸如移动电话(包括智能手机)、膝上型计算机、台式计算机、平板电脑、智能电视平台、相机、个人数字助理(PDA)、服务器、大型机等。如图1的示例中所示,计算设备2可以是平板电脑。在一些示例中,计算设备2可以包括用户接口(UI)设备4、UI模块6、姿势模块8、以及语言模型10。实现本公开的技术的计算设备2的其他示例可以包括图1中未示出的附加组件。
计算设备2可以包括至少一个UI设备4。在一些示例中,UI设备4被配置成接收触觉、音频或视觉输入。除了从用户18接收输入之外,UI设备4可以被配置成输出内容,诸如用于显示的图形用户界面(GUI)12。在图1的示例中,UI设备4可以包括显示GUI12并且使用在存在敏感显示器处或附近的电容、电感和/或光学检测从用户18接收输入的存在敏感显示器。
如图1中所示,计算设备2可以包括UI模块6。UI模块6可以执行一个或多个功能,以接收诸如用户输入的输入,并且将这样的输入发送到与计算设备2相关联的其他组件,诸如姿势模块8。例如,UI模块6可以确定在UI设备4处由用户18执行的姿势。UI设备6还可以从诸如姿势模块8的与计算设备2相关联的组件接收数据。使用该数据,UI模块6可以使与计算设备2相关联的其他组件(诸如UI设备4),基于该数据提供输出。例如,UI模块6可以从姿势模块8接收数据,使UI设备4在GUI12的文本输入域14和/或图形键盘16中显示信息。
UI模块6可以以各种方式实现。例如,UI模块6可以被实现为可下载或者预装应用或“app”。在另一个示例中,UI模块6可以被实现为计算设备2的硬件单元的一部分。在另一个示例中,UI模块6可以被实现为计算设备2的操作系统的一部分。
在一些示例中,计算设备2包括姿势模块8。姿势模块8可以包括对计算设备2执行任何多种操作的功能。例如,姿势模块8可以包括输出用于根据在此描述的技术选择候选词的姿势完成路径以在UI4处显示的功能。姿势模块8可以以各种方式实现。例如,姿势模块8可以被实现为可下载或预装应用或“app”。在其他示例中,姿势模块8可以被实现为计算设备2的硬件单元的一部分或者计算设备2的操作系统的一部分。
姿势模块8可以从诸如UI模块6的与计算设备2相关联的组件接收数据。例如,姿势模块8可以从UI模块6接收姿势数据,其使得姿势模块8从姿势数据确定候选词,并且输出姿势完成路径以在UI设备4处显示。姿势模块8还可以将数据发送至与计算设备2相关联的组件,诸如UI模块6。例如,姿势模块8可以将从姿势数据确定的候选词或者用于选择候选词的姿势完成路径发送至使UI设备4显示GUI12的UI模块6。
如图1中所示,GUI12可以是由UI模块6生成的用户界面,其允许用户18与计算设备2交互。GUI12可以包括图形内容。图形内容通常可以包括文本、图像、一组运动图像等。在图1中,图形内容可以包括图形键盘16、文本输入区14、以及词建议区24A-C(共同为“词建议区24”)。图形键盘16可以包括多个字符键20,诸如“F”键20A、“U”键20B、“N”键20C、“D”键20D、以及“A”键20E。在一些示例中,包括在图形键盘16中的多个字符键20中的每个都表示单个字符。在其他示例中,包括在图形键盘16中的多个字符键20中的一个或多个表示基于多个模式选择的一组字符。
在一些示例中,文本输入区14可以包括字符或其他图形内容,其包括在例如文本消息、文档、电子邮件消息、web浏览器、或期望文本输入的任何其他应用或对象中。例如,文本输入区14可以包括由用户18经由在UI设备4处执行的姿势选择的字符或其他图形内容。
在一些示例中,词建议区24中的每个都可以显示候选词。UI模块6可能使UI设备4显示图形键盘16,并且检测具有姿势路径22的姿势,在一些示例中,其可以通过姿势模块8递增地确定。另外,根据本公开的多个方面,UI模块6可以使UI设备4在词建议区24中显示从姿势确定的候选词,并且叠加在图形键盘16上显示用于选择候选词的姿势完成路径26。在其他示例中,例如,如图3A中所示,GUI12可以不包括词建议区24,并且作为替换,可以在GUI12的不同区域处显示候选词,诸如邻近姿势完成路径26,例如,与图形键盘16的一部分叠加。
在一些示例中,计算设备2包括语言模型10。语言模型10可以包括词典(lexicon)。在一些示例中,词典可以包括词的列表,并且可以包括关于所列词的附加信息。词典可以由数据结构的范围表示,诸如矩阵、列表和/或树。例如,语言模型10可以包括存储为特里数据结构的词典。词典特里数据结构可以包含多个节点,每个节点可以表示字母。词典特里中的第一节点可以称为可以不对应于字母的入口节点。在其他示例中,入口节点可以对应于字母。每个节点可以具有一个或多个子节点。例如,入口节点可以具有二十六个子节点,每个对应于英文字母表中的字母。
词典特里中的节点的子集每个都可以包括指示节点是端节点的标记。词典特里的每个端节点可以指示完整词(例如,候选词)。沿着从入口节点到端节点的节点路径由节点表示的字母可以拼写出由端节点指示的词。在一些示例中,语言模型10可以是安装在计算设备2上的默认字典。在其他示例中,语音模型10可以包括词典的多个源,其可以被存储在计算设备2处或者存储在一个或多个远程计算设备处,并且经由一个或多个通信信道对计算设备2可存取。
在一些示例中,语言模型10可以在计算设备2的固件中实现。语言模型10可以包括语言模型频率信息,诸如,n-元语言模型。n-元语言模型可以基于序列中的在先前项提供用于连续序列项中的项xi(字母或词)的概率分布(即P(xi|xi-(n-1),...,xi-1))。例如,二元语言模型(n-元模型,其中n=2)可以提供字母“w”在序列“no”之后的概率。在一些示例中,语言模型10包括具有集成的语言模型频率信息的词典特里。例如,词典特里的每个节点可以包括字母和概率值的表示。
如图1中所示,代替执行用于词的每个字符键的不连续姿势(例如,敲击),用户18可以执行指示词的一部分的单个连续姿势(由姿势路径22指示),并且然后基本经过(例如,经过或几乎经过)用于指示由姿势模块8使用语言模型10确定的候选词(例如,显示在词建议区24处的词之一)的姿势完成路径26。当用户18基本沿着姿势路径22执行姿势时,计算设备2可以递增地确定由姿势路径22指示的词。通过当被执行时递增地解码姿势路径22,计算设备2以减少的后姿势输入处理时间向用户18呈现一个或多个候选词。而且,通过使用户18能够通过单个姿势(包括姿势22和基本经过姿势完成路径26的姿势)输入词或短语,本公开的技术使用户18能够增加在设备2处输入文本的速率。
如图1的示例中所示,UI模块6可以使UI设备4显示GUI12。用户18可能期望将例如词“fundamental”的文本输入到文本输入区14中。根据本公开的技术,用户18可以执行在图形键盘16处由姿势22指示的姿势。在一个示例中,姿势可以是连续动作,其中用户18的手指(或另一个输入单元,诸如触控笔)移动到UI设备4附近,使得由手指执行的姿势贯穿姿势路径22的执行由UI设备4检测到。在不同示例中,用户18可以将他/她的手指移动到UI设备4附近,使得手指暂时由UI设备4检测到,并且然后用户18的手指移动离开UI设备4,使得手指不再被检测到。姿势路径22可以包括多个部分。在一些示例中,姿势路径22可以被划分为具有基本相等的持续时间的部分。
虽然用户18执行由姿势路径22指示的姿势,以指示多个字符键20中的一系列字符键,但是UI模块6可以检测在存在敏感显示器处的姿势路径22。如图1中所示,用户18通过描绘穿过或在与期望词的字符(即,由“F”键20A、“U”键20B、“N”键20C、“D”键20D、以及“A”键20E表示的字符)对应的图形键盘16的字符键附近的姿势路径22,执行姿势。UI模块6可以将指示姿势路径22的数据发送至姿势模块8。在一些示例中,当姿势由UI设备4检测到并且由UI模块6接收时,UI模块6将指示姿势路径22的数据递增地发送至姿势模块8。例如,当姿势由UI设备4检测到并且由UI模块6接收时,UI模块6可以将指示姿势路径22的坐标对的流发送至姿势模块8。
响应于从UI模块6接收表示姿势路径22的数据,姿势模块8可以确定候选词。候选词可以是由计算设备2向用户18建议的词,其包括由姿势22指示的一组键(并且在一些示例中,是与多组键一起形成完整词或多个词的短语的附加字符)。该组键可以基于姿势22和词典被确定。姿势模块8可以通过确定由姿势22经过的一组对准点,确定用于多个字符键20中的至少两个键中的每个的相应成本值,并且比较用于多个字符键20中的至少两个键中的至少每个的相应成本值,来确定候选词。
对准点是沿着姿势22的点,其可以指示多个字符键20中的键。对准点可以包括对应于对准点的所确定位置的一个或多个坐标。例如,对准点可以包括对应于在GUI12处的点的笛卡尔坐标。
在一些示例中,姿势模块8可以分析姿势路径22的段的曲率、表示检测路径22的段的速率的局部速度、以及表示检测姿势路径22的速率的总体速度。如果姿势模块8确定用于局部速度的较慢速度或暂停,则姿势模块8可以确定该段处的点更可能是对准点。如果姿势模块8确定姿势被很快绘制,则姿势模块8可以确定姿势更可能不准确,并且从而姿势模块8可以增加对语言模块(即,n-元频率)而不是空间模型的权重。在一个示例中,姿势模块8可以基于具有高曲率值的姿势路径22的段,确定该组对准点中的对准点。
在图1的示例中,姿势模块8可以确定在姿势路径22的开始处的第一对准点、在姿势路径22经历曲率的第一次显著改变的点处的第二对准点、姿势路径22经历曲率的第二次显著改变的点处的第三对准点、以及姿势路径22的结束处的第四对准点。在还有的其他示例中,本公开的技术可以将姿势路径22的形状识别为特征,并且基于姿势路径22的形状确定对准点。
在一些示例中,姿势模块8可以确定用于包括在键盘16中的多个字符键20中的至少两个字符键中的每个的相应成本值。相应成本值中的每个可以表示对准点指示键的概率。在一些示例中,相应成本值可以基于姿势路径22的物理特征、对准点、和/或键。例如,相应成本值可以基于对准点相对于多个字符键20中的一个或多个的物理位置的物理位置。在一些示例中,相应成本值可以基于语言模型10。例如,相应成本值可以基于在第一键之后将选择第二键的概率(例如,在“F”键20A之后将选择“U”键20B的概率)。在一些示例中,为其确定相应成本值的字符键可以至少部分地基于语言模型10被选择。在一些示例中,在存在对准点指示字符键的较大可能性的地方,成本值较低。在其他示例中,在存在对准点指示键的较大可能性的地方,成本值较高。
在图1的示例中,姿势模块8可以确定表示第一对准点指示“F”键20A的概率的第一成本值、以及表示第一对准点指示诸如“G”键(在图1中未标记)的另一个键的概率的第二成本值。类似地,姿势模块8可以确定表示第二对准点指示“U”键20B的概率的第三成本值、以及表示第二对准点指示“Y”键(在图1中未标记)的概率的第三成本值。姿势模块8可以确定表示第三对准点指示“N”键20C的概率的第五成本值、以及表示第三对准点指示“B”键(在图1中未标记)的概率的第六成本值。最后,姿势模块8可以确定表示第二对准点指示“D”键20D的概率的第三成本值、以及表示第二对准点指示“C”键(在图1中未标记)的概率的第三成本值。
姿势模块8可以比较用于多个字符键20中的至少两个键的相应成本值,以确定具有组合的成本值的键的结合。组合的成本值可以表示姿势路径22指示键的组合的概率。姿势模块8可以比较用于多个字符键20中的至少两个字符键的相应成本值,以确定至少两个字符键中的哪个由对准点指示。姿势模块8可以通过确定哪些字符键由每个对准点指示,确定字符键的组合。在一些示例中,姿势模块8确定至少两个字符键中的哪个由对准点指示,而与哪些字符键由其他对准点指示不相关。在其他示例中,姿势模块8基于哪些键由其他对准点指示,确定至少两个键中的哪个键由对准点指示。在这样的示例中,姿势模块8可以基于用于当前对准点的相应成本值,修订哪个字符键由先前对准点指示的确定。
在一些示例中,姿势模块8在UI设备4完成检测姿势路径22的时间之前,开始确定候选词。在图1的示例中,除了在UI设备4完成检测姿势路径22之后确定候选词之外,当检测到姿势路径22时,姿势模块8可以确定多个候选词,诸如“fun”、“funny”、以及“funk”。另外,在图1的示例中,当检测到姿势路径22时,姿势模块8可以同时修订所确定的多个候选词,诸如将“fun”修订为“fundamental”。而且,除了基于姿势路径22的几何形状确定候选词之外,本公开的技术可以基于由姿势指示的一组字符来确定候选词。姿势模块8可以将所确定的词发送至UI模块6,然后其可以使UI设备4在GUI12的文本输入区14中显示词“fund”。
根据本公开的一个或多个方面,姿势模块8将姿势完成路径26输出到UI模块6以在UI设备4(例如,作为GUI12的一部分)处显示,当由输入单元基本经过时,其使计算设备2选择候选词(例如,词建议区24中的词之一)。具体地,UI设备4可以在显示图形键盘16的GUI12的区域处输出姿势完成路径26。在一些实现中,如图1中所示,姿势模块8可以将数据发送至UI设备4,其使UI设备4将姿势完成路径26显示为与图形键盘16的一部分叠加的图形元素。
基于从姿势模块8接收的数据,UI模块6可以使UI设备4至少部分地基于至少一个候选词,在具有图形键盘16的区域的位置处,显示姿势完成路径26。例如,如上所述,姿势模块8可以基于姿势路径22,确定至少一个候选词。至少一个候选词可以包括包含除了由姿势路径22指示的那些之外的附加字母的词。以此方式,至少一个候选词可以是预测词。姿势模块8可以至少部分地基于预测词,输出姿势完成路径26。
例如,如图1中所示,姿势模块8已确定显示在GUI12的词建议区24A-C处的三个候选词(分别为“fundraising”、“fundamental”、以及“fund”)。姿势模块8可以例如基于三个候选词的相应成本值,确定在第二词建议区24B中所示的“fundamental”最可能是用户18想要输入的词。另外,姿势模块8可以确定由姿势路径22指示的多个字符键20中的最后一个是“D”键20D。例如,姿势模块8可以确定姿势路径22(如在那时检测到的)结束于“D”键20D。至少部分地基于这两个确定,姿势模块8可以将从最近指示的字符键(图1中的“D”键20D)的位置延伸的姿势完成路径26输出到UI模块6以在UI设备4在GUI12的区域处显示。
在一些示例中,姿势模块8可以将数据输出到UI模块6,其使UI设备4在GUI12的区域处显示从最近指示的字符键的位置朝向对应于候选词中的预测的下一个字母的字符键延伸的姿势完成路径26。例如,如图1中所示,姿势完成路径26从“D”键20D朝向“A”键20E延伸,“A”键是第二词建议区24B中所示的候选词“fundamental”中的预测的下一个字母。在一些示例中,如图1中所示,姿势完成路径26可以从“D”键20D朝向“A”键20E的中心延伸。在其他示例中,如图3A中所示,姿势完成路径26可以从“D”键20D朝向“A”键20E的边缘延伸。当UI设备4输出从最近指示的字符键朝向对应于候选词中的预测的下一个字母的字符键延伸的姿势完成路径26时,这可能影响用户18已经作出的运动,例如,朝向预测的下一个字母,以选择与姿势完成路径26相关联的候选词。
在一些实现中,姿势完成路径26可以不在预测的下一个字母处结束,而是可以延伸通过预测的下一个字母,例如,到图形键盘16的边界或者UI设备4的边缘。通过输出姿势完成路径26以在GUI12在延伸通过下一个字母的位置处显示,姿势模块8可以改进由用户18执行以指示预测的下一个字母的姿势的指示与由用户18执行以基本经过姿势完成路径26的姿势的指示之间的差别(并且指示相关联的候选词)。
例如,在一些情况下,当UI设备4充分大,图形键盘16不延伸到UI设备4的边缘时,姿势模块8可以将数据输出到UI模块6,其使UI设备4在用户界面12在从“D”键20D延伸到图形键盘16的边界的区域处显示姿势完成路径26。作为另一个示例,在一些情况下,当图形键盘16延伸到UI设备4的边缘时,姿势模块8可以将数据输出到UI模块6,其使UI设备4在用户界面12在从“D”键20D延伸到UI设备4的边缘的区域处显示姿势完成路径26。在一些示例中,UI设备4的边缘和图形键盘16的边界可以是基本相同的位置。当UI设备4输出朝向图形键盘16的边界和/或UI设备4的边缘延伸的姿势完成路径26时,用户18不需要准确地控制用户18停止执行基本经过姿势完成路径26的姿势的位置。例如,用户18可以执行输入单元(例如,他或她的手指或触控笔)到或者通过边界,以完成基本经过姿势完成路径26的姿势。在一些情况下,当用户18仅需要执行弹道(例如,快但不太准确)移动而不执行定位(例如,较慢但更准确)移动时,该允许的不准确可以增加用户18完成姿势的速度。
姿势模块8可以生成姿势完成路径26以在GUI12处显示为与图形键盘16的一部分叠加的半透明或不透明的图形元素。例如,姿势完成路径26可以是具有限定宽度的线,如图1中所示。姿势完成路径26的形状的其他示例在图3A至图3D中示出。姿势模块8可以至少部分地基于平衡用户18察觉姿势完成路径26的能力和姿势完成路径26遮挡图形键盘16的在下部分的程度,来选择姿势完成路径26的不透明度。在一些示例中,姿势完成路径26的不透明度可以由用户18例如使用用于图形键盘16的设定菜单来调节。另外地或可替换地,姿势完成路径26的颜色可以由用户18例如使用在GUI12处显示的设定菜单来预定义或选择。
在一些实现中,姿势模块8还可以将数据输出到UI模块6,其使UI设备4显示与姿势完成路径26相关联的候选词,以在GUI12处邻近姿势完成路径26显示。在一些示例中,姿势模块8可以确定具有最高当前可能性(例如,最低成本值)的候选词,并且可以输出姿势完成路径26和候选词,以在GUI设备12处显示并且与图形键盘16叠加。例如,如图1中所示,UI设备4输出候选词“fundamental”28,以邻近姿势完成路径26显示。“邻近姿势完成路径26”可以包括与图形键盘16叠加的位置,其在姿势完成路径26之上、之下、在其一侧或者另外接近其。在一些示例中,接近姿势完成路径26的位置可以在姿势完成路径26的预定距离内。通过生成候选词“fundamental”28以邻近姿势完成路径26显示,因为当用户18执行指示“D”键20D的姿势路径22的部分时,用户18的视觉焦点很可能在于接近“D”键20D的图形键盘16,姿势模块8可以增加用户18察觉候选词“fundamental”28的可能性(例如,与显示在词建议区24处的候选词相比)。虽然图1图示了除了邻近姿势完成路径26显示的候选词“fundamental”28之外的显示在词建议区24处的候选词,但是在其他示例中,例如,如图4A和图4B中所示,UI模块6可以不显示词建议区24。
图1图示了姿势模块8生成姿势路径22和姿势完成路径26并且将它们发送至UI模块6的示例,其使UI设备4在GUI12处显示姿势路径22和姿势完成路径26。在一些示例中,姿势路径22的视觉描述可以不同于姿势完成路径26的视觉描述。例如,视觉描述可以是不同颜色、不透明度、厚度等。在一些实现中,姿势模块8可以将数据输出到UI模块6,其使UI设备4显示姿势路径22的一部分的视觉描述。例如,UI设备4可以仅输出姿势路径22的更近指示的部分,以在GUI12处显示,并且诸如通过使姿势路径22的不太近的部分看起来逐渐消失,可以使姿势路径22的不太近的部分不被输出以在GUI12处显示。在其他示例中,姿势模块8可以不生成姿势路径22的所有或一部分的视觉描述以在GUI12处显示。
因此,在一些示例中,姿势模块8可以便于用户18的文本输入。姿势模块8可以以增加用户18察觉姿势完成路径26的可能性的方式和GUI12的位置,生成用于由UI设备4显示的姿势完成路径26(并且任选地,候选词)。当姿势完成路径26与用户18想要输入的候选词相关联时,用户18可以通过执行基本经过姿势完成路径26的姿势并且由此选择候选词,来选择候选词。因为姿势完成路径26从姿势路径22的当前指示部分(例如,字符键20中的最近指示的字符键)的结束附近的图形键盘16的位置延伸,通过执行从用户18作出指示姿势路径22的姿势延伸的姿势,可以由用户18便利地基本经过姿势完成路径26。以此方式,姿势完成路径26可以便于由用户18到计算设备2的文本输入。
图2是图示根据本公开的一个或多个技术的图1中所示的计算设备的一个示例的进一步细节的框图。图2仅示出如图1中所示的计算设备2的一个特定示例,并且可以在其他实例中使用计算设备2的许多其他示例。
如图2的示例中所示,计算设备2包括一个或多个处理器40、一个或多个输入设备42、一个或多个通信单元44、一个或多个输出设备46、一个或多个存储设备48、以及用户接口(UI)设备4。在图2的示例中,计算设备2进一步包括UI模块6、姿势模块8、词预测模块50、以及操作系统58,其可由一个或多个处理器40执行。计算设备2进一步包括语言模型10和键区52。组件4、40、42、44、46和48中的每个都使用用于组件间通信的通信信道50(物理地、可通信地、和/或可操作地)被耦合。在一些示例中,通信信道50可以包括系统总线、网络连接、过程间通信数据结构、或者用于通信数据的任何其他方法。UI模块6、姿势模块8、以及词预测模块50还可以相互、以及与诸如语言模块10和键区52的计算设备2中的其他组件通信信息。
在一个示例中,一个或多个处理器40被配置成实现用于在计算设备2内执行的功能和/或过程指令。例如,处理器40可以能够处理由存储设备48存储的指令。一个或多个处理器40的示例可以包括微处理器、控制器、数字信号处理器(DSP)、专用集成电路(ASIC)、场可编程门阵列(FPGA)、或等效的离散或集成逻辑电路中的任一个或多个。
一个或多个存储设备48可以被配置成在操作期间将信息存储在计算设备2内。在一些示例中,存储设备48被描述为计算机可读存储介质。在一些示例中,存储设备48是暂时性存储器,意味着存储设备48的主要目的不是长期存储。在一些示例中,存储设备48被描述为易失性存储器,意味着当不给存储设备48供电时,存储设备48不保持所存储的内容。易失性存储器的示例包括随机存取存储器(RAM)、动态随机存取存储器(DRAM)、静态随机存取存储器(SRAM)、以及本领域中已知的其他形式的易失性存储器。在一些示例中,存储设备48被用于存储用于由处理器40执行的程序指令。在一个示例中,存储设备48由在计算设备2上运行的软件或应用(例如,姿势模块8)使用,以在程序执行期间暂时存储信息。
在一些示例中,存储设备48可以进一步包括被配置用于信息的长期存储的一个或多个存储设备48。在一些示例中,存储设备48包括非易失性存储元件。这样的非易失性存储元件的示例包括磁性硬盘、光盘、软盘、闪存、或电可编程存储器(EPROM)或电可擦除可编程(EEPROM)存储器的形式。
在一些示例中,计算设备2还包括一个或多个通信单元44。在一个示例中,计算设备2利用通信单元44,经由诸如一个或多个无线网络的一个或多个网络与外部设备通信。通信单元44可以是网络接口卡,诸如,以太网卡、光学收发器、射频收发器、或可以发送和接收信息的任何其他类型的设备。这样的网络接口的其他示例可以包括蓝牙、3G和WiFi无线电计算设备、以及通用串行总线(USB)。在一些示例中,计算设备2利用通信单元44,与诸如服务器的外部设备无线通信。
在一个示例中,计算设备2还包括一个或多个输入设备42。在一些示例中,输入设备42被配置成通过触觉、音频或视频源从用户接收输入。输入设备42的示例包括存在敏感显示器、鼠标、键盘、语音响应系统、摄像机、麦克风或者用于检测来自用户的命令的任何其他类型的设备。在一些示例中,存在敏感显示器包括触敏屏幕。
一个或输出设备46还可以包括在计算设备2中。在一些示例中,输出设备46被配置成使用触觉、音频或视觉刺激将输出提供给用户。在一个示例中,输出设备46包括存在敏感显示器、声卡、视频图形适配卡、或者用于将信号转换为人类或机器可理解的合适形式的任何其他类型的设备。输出设备46的附加示例包括扬声器、阴极射线管(CRT)监视器、液晶显示器(LCD)、或可以生成对于用户的可理解输出的任何其他类型的设备。在一些示例中,UI设备4可以包括输入设备42和/或输出设备46的功能。在图2的示例中,UI设备4可以是触敏屏幕。
计算设备2还可以包括UI设备4。在一些示例中,UI设备4被配置成接收触觉、音频或视觉输入。除了从用户18接收输入之外,UI设备4可以被配置成输出诸如图形用户界面(GUI)12的内容以显示。在图1的示例中,UI设备4可以包括存在敏感显示器,其使用在存在敏感显示器处或附近的电容、电感和/或光学检测,显示GUI12并且从用户18接收输入。在一些示例中,UI设备4是输入设备44之一和输出设备46之一。
在一些示例中,计算设备2的UI设备4可以包括输入设备42和/或输出设备46的功能。在一些示例中,存在敏感屏幕可以检测存在敏感屏幕处和/或附近的对象。作为一个示例性范围,存在敏感屏幕可以检测在存在敏感屏幕的两英寸或更小内的对象,诸如,手指或触控笔。存在敏感屏幕可以确定对象被检测到的存在敏感屏幕的位置(例如,(x,y)坐标)。在另一个示例性范围内,存在敏感屏幕可以检测离存在敏感屏幕六英寸或更小的对象。其他示例性范围也可以。存在敏感屏幕可以使用电容、电感和/或光学识别技术,确定由用户的手指选择的屏幕的位置。在一些示例中,存在敏感屏幕使用关于输出设备46描述的触觉、音频、或视频刺激将输出提供给用户。在图2的示例中,UI设备4在UI设备4的存在敏感屏幕处呈现用户界面(诸如图1的图形用户界面12)、以及在计算设备2上执行的其他各种功能和应用。
计算设备2可以包括操作系统58。在一些示例中,操作系统58控制计算设备2的组件的操作。例如,在一个示例中,操作系统58便于UI模块6、姿势模块8、和/或词预测模块50与处理器40、通信单元44、存储设备48、输入设备42、以及输出设备46的通信。UI模块6和姿势模块8中的每个都可以包括可以由计算设备2执行的程序指令和/或数据。作为一个示例,UI模块6可以包括使计算设备2执行在本公开中描述的一个或多个操作和动作的指令。
语言模型10可以包括词典,其可以类似于图1中所示的语言模型10。在一些示例中,词典可以包括词的列表,并且可以包括关于所列词的附加信息。词典可以由数据结构的范围表示,诸如阵列、列表和/或树。例如,语言模型10可以包括存储为特里数据结构的词典。
多个键的物理特征可以包括在键区52中。例如,键区52可以包括与显示每个键的图形键盘16的位置和/或区域对应的一组坐标,用于多个键中的每个键。
计算设备2可以包括附加组件,为了清楚起见,在图2中未示出。例如,计算设备2可以包括电池,以向计算设备2的组件供电。类似地,图2中所示的计算设备2的组件可以不必须在计算设备2的每个示例中。例如,在一些配置中,计算设备2可以不包括通信单元44。
根据本公开的一个或多个方面,姿势模块8可由一个或多个处理器40操作,以确定由与由用户18执行的姿势对应的姿势路径(例如,图1的姿势路径22)指示的一系列字符。另外,姿势模块8可由一个或多个处理器40操作,以基于该系列字符中的至少两个字符确定候选词,并且由UI模块在UI设备4处输出姿势完成路径(例如图1的姿势完成路径26)以显示,当由通过用户18执行的姿势基本经过时,选择候选词。
姿势模块8接收由用户(例如图1的用户18)在UI设备4(例如存在敏感显示器)处描绘的姿势路径的指示,并且基于例如语言模型10和用于多个字符串中的每个的成本值,确定一个或多个候选词,如关于图1所描述的。基于一个或多个候选词,姿势模块8生成并且将姿势完成路径输出到UI模块6,以在UI设备4处显示。在一些情况下,姿势完成路径与一个或多个候选词中的一个相关联,使得当姿势模块8(例如从UI设备4和/或UI模块6)接收用户已执行基本经过姿势完成路径的姿势的指示时,姿势模块8选择相关联的候选词。
姿势模块8可以生成姿势完成路径,以由UI模块6在显示图形键盘的UI设备4的区域处显示。图3A至图3D是根据本公开的一个或多个方面的由UI模块6输出以在UI设备4处显示的示例GUI12。示例GUI12包括图形键盘16和文本输入域14。图3A至图3D的示例GUI12图示姿势模块8可以生成并且输出到UI模块以在UI设备4处显示的不同姿势完成路径的示例。在图3A至图3D的示例中,姿势模块8至少部分地基于至少一个候选词,输出姿势完成路径以在图形键盘16的区域内的位置处显示。
例如,如图3A至图3D中所示,姿势模块8已确定在词建议区24A-C处显示的三个候选词(分别为“fundraising”、“fundamental”、以及“fund”)。姿势模块8可以例如基于三个候选词的相应成本值,确定第二词建议区24B中所示的“fundamental”最可能是用户18想要输入的词。另外,姿势模块8可以确定由姿势路径22指示的多个字符键20中的最后一个是“D”键20D。例如,姿势模块8可以确定姿势路径22(当前被检测到)在“D”键20D处结束。至少部分地基于这两个确定,姿势模块8可以输出从最近指示的字符键(图1中的“D”键20D)的位置延伸的姿势完成路径,以在UI设备4的区域处显示。
如图3A中所示,姿势完成路径62a可以包括从“D”键20D(最近指示的键)朝向“A”键20E(候选词“fundamental”中的下一个字符)延伸的线。当姿势模块8将姿势完成路径62a输出到UI模块6以在UI设备4在从最近指示的字符键朝向与候选词中的预测的下一个字母对应的字符键延伸的位置处显示时,这可能影响用户18已经作出以选择与姿势完成路径62a相关联的候选词的动作,例如朝向预测的下一个字母。
与图1中所示的姿势完成路径26相对,图3A中所示的姿势完成路径62a不朝向“A”键20E的中心延伸。相反,姿势完成路径62a朝向“A”键20E的边缘延伸,而不是直接通过“A”键20E。以此方式,姿势完成路径26从朝向“A”键20E的中心的路径偏离。例如,姿势完成路径62a可以在“A”键20E的外围部分之上延伸,或者可以在“A”键20E之上、之下延伸或延伸到其一侧。通过将姿势完成路径62a输出到UI模块6以在与“A”键20E不直接叠加的GUI12的位置处显示,姿势模块8可以减小基本经过姿势完成路径62a的姿势检测作为指示“A”键20E的姿势或者指示“A”键20E的姿势作为基本经过姿势完成路径62a的姿势的错误检测的机会。另外,通过将姿势完成路径62a输出到UI模块6以在与“A”键20E不直接叠加的GUI12的位置处显示,姿势模块8可以改进姿势完成路径62a可能叠加的字符键的可见度(例如,在图1的示例中)。
类似于图1中所示的姿势完成路径26,姿势模块8可以将姿势完成路径62a输出到UI模块6,以在UI设备4在延伸通过“A”键20E的位置处显示,例如到图形键盘16的边界或者UI设备4的边缘。
在一些示例中,姿势完成路径62a可以描绘曲线。姿势模块8生成曲线,以继续姿势路径22的曲率或者从弯曲姿势路径22过渡到直线路径或不同曲率。例如,与弯曲姿势路径22和直姿势完成路径62a之间的急剧过度相比,这可以允许用户执行以基本经过姿势完成路径62a的姿势更加自然。在其他示例中,例如,类似于图1中所示的姿势完成路径26,姿势完成路径62a可以限定基本直的线。
在其他示例中,姿势模块8可以将不延伸到图形键盘16的边界或者UI设备4的边缘的姿势完成路径输出到UI模块6,以由UI设备4显示。图3B是图示根据本公开的一个或多个方面的另一个示例姿势完成路径62b的GUI12。类似于姿势完成路径26和62a,姿势模块8在从“D”键20D(最近指示的键)延伸的GUI12的位置处输出姿势完成路径62b。在图3B的示例中,姿势完成路径62b描绘邻近“D”键20D开始和结束的环。例如,如图3B中所示,姿势完成路径62b描绘在与“D”键20D叠加的位置处开始和结束的环。
姿势完成路径62b从姿势路径22的结束在顺时针方向上延伸。在其他实现中,姿势完成路径62b可以从姿势路径22的结束在逆时针方向上延伸。例如,姿势模块8可以基于姿势路径22的形状,来确定姿势完成路径62b的旋转方向,例如,使得用户可以将指示姿势路径22的姿势继续平滑至基本经过姿势完成路径62b的姿势。在图3B的示例中,与图形键盘16相比,姿势完成路径62b相对小(例如,覆盖图形键盘16的相对小部分)。在其他示例中,姿势模块8可以输出姿势完成路径62b,以与图形键盘16的较大部分叠加,例如作为较大环。
在一些示例中,用户不需要准确地描绘姿势完成路径62b以指示候选词“fundamental”28。例如,姿势模块8可以被配置成解释从UI设备(例如,从UI设备4经由UI模块6)接收的指示,其指示当姿势基本经过姿势完成路径62b时,用户已执行从“D”键20D或者以“D”键20D为中心延伸(接近环的任何尺寸或形状)的环。这可以允许用户执行不太准确(并且潜在更快)的姿势,以基本经过姿势完成路径62b,并且指示候选词“fundamental”28。
姿势模块8可以输出为其他形状或视觉格式的姿势完成路径。图3C是图示根据本公开的一个或多个方面的另一个示例姿势完成路径62c的GUI12。姿势完成路径62c包括从“D”键20D(最近指示的键)延伸的涂写形状。类似于图3B中所示的姿势完成路径62b,姿势完成路径62c在其他示例中可以具有不同涂写形状和/或不同尺寸。例如,姿势模块8可以将姿势完成路径62c输出到UI模块6,以与图形键盘16的较大部分叠加,或者可以输出具有不同涂写形状的姿势完成路径62c。
而且,类似于图3B,在一些示例中,用户不需要准确地描绘姿势完成路径62c,以指示候选词“fundamental”28。例如,姿势模块8可以被配置成解释从UI设备4(例如,从UI设备经由UI模块6)接收的指令,当姿势基本经过姿势完成路径6时,用户已执行从“D”键20D或者以“D”键20D为中心延伸(接近姿势完成路径62c的任何尺寸或形状)的涂写。这可以允许用户执行不太准确的(并且潜在更快)姿势,以基本经过姿势完成路径62c,并且指示候选词“fundamental”28。
在其他示例中,姿势模块8可以将指示诸如敲击的不连续姿势而不是连续姿势的姿势完成路径输出到UI模块6。图3D是图示另一个示例姿势完成路径62d的GUI12。姿势完成路径62d包括大约以最近指示的键(图3D中的“D”键20D)为中心的圆。姿势完成路径62d指示用户可以在“D”键20D处执行敲击姿势,以选择候选词“fundamental”28。在其他示例中,代替大约以“D”键20D为中心的圆,姿势完成路径62d可以包括位于“D”键20D处的突出显示或其他视觉强调。在一些实现中,姿势完成路径62d可以包括向用户指示用户将敲击“D”键20D以指示候选词“fundamental”28的脉动或移动视觉元素。
在一些情况下,姿势完成路径62d可以指示多于一个字符键,例如姿势完成路径62d可以包括多个视觉指示符,每个指示符都与相应字符键相关联。例如,姿势完成路径62d可以包括多个离散视觉指示符,每个视觉指示符都与相应字符键相关联,用于保留在候选词中的字母。每个视觉指示符都可以是例如圆、突出显示、或位于或邻近相应字符键的其他视觉强调。在一些示例中,姿势完成路径62d中的视觉指示符可以拥有不同的视觉特性,诸如,对于候选词中的下一个字母更多不透明,并且对于候选词中的随后字母更少不透明。
另外,如图3A至图3D中所示,姿势模块8可以将与邻近姿势完成路径的姿势完成路径(例如,姿势完成路径62a、62b、62c或62d)相关联的候选词“fundamental”28输出到UI模块6,以由UI设备4显示。例如,如图3A至图3D中所示,姿势模块8输出候选词“fundamental”28以在UI设备4在姿势完成路径之上、之下、一侧或另外附近显示。通过邻近姿势完成路径26输出候选词“fundamental”28,由于当用户执行指示“D”键20D的姿势的部分时,用户18的视觉焦点很可能在于“D”键20D附近的姿势键盘16,姿势模块8可以增加用户18察觉候选词“fundamental”28的可能性(例如,与在词建议区24处显示的候选词相比)。虽然图3A至图3D图示除了邻近姿势完成路径显示的候选词“fundamental”28之外的在词建议区24处显示的候选词,但是在其他示例中,例如,如图4A和图4B中所示,UI模块6可以不生成词建议区24以显示。
当半透明或不透明图形元素与图形键盘16的一部分叠加时,姿势模块8可以将姿势完成路径62a、62b、62c和62d(共同为“姿势完成路径62”)中的任一个输出到UI模块6,以在UI设备4处显示。姿势模块8可以通过平衡用户18察觉姿势完成路径62的能力和姿势完成路径62遮蔽图形键盘16的在下部分的程度,来选择姿势完成路径62的不透明度。在一些示例中,姿势完成路径62的不透明度可以由用户例如使用用于图形键盘16的设定菜单来调节。
图3A至图3D图示姿势模块8将姿势路径22和姿势完成路径62的视觉描述输出到UI模块6以在GUI12处显示的示例。在一些示例中,姿势路径22的视觉描述可以不同于姿势完成路径62的视觉描述。例如,视觉描述可以为不同颜色、不透明度、厚度等。在一些实现中,姿势模块8可以输出姿势路径22的一部分而不是所有姿势路径22的视觉描绘。例如,姿势模块8可以仅将姿势路径22的更近指示的部分输出到UI模块6以在GUI12处显示,并且诸如通过使姿势路径22的不太近的部分看起来逐渐消失,可以使姿势路径22的不太近的部分不输出到UI模块6以在GUI12处显示。在一些情况下,当用户暂停执行限定姿势路径22的姿势时,姿势模块8可以使姿势路径22看起来逐渐消失。这可以例如通过去除与图形键盘16的一部分叠加的姿势路径22的视觉描述,澄清图形键盘16的显示。在其他示例中,姿势模块8可以不将姿势路径22输出到UI模块6以在GUI12处显示。
类似地,在一些示例中,在用户执行限定姿势路径22的姿势的同时,姿势模块8可以一直不将姿势完成路径62输出到UI模块6以在UI设备4处显示。例如,姿势模块8可以不将姿势完成路径62输出到UI模块6以在UI设备4处显示,直到用户例如在“D”键20D处暂停执行姿势为止。在一些情况下,在用户积极地执行限定姿势路径22的姿势的同时不输出姿势完成路径62可以防止与图形键盘16的一部分叠加的姿势完成路径62的视觉描述遮蔽图形键盘16的部分。对于一些用户,仅当用户暂停执行限定姿势路径22的姿势时显示姿势完成路径62可以是优选的,所以用户可以更好地看到图形键盘16。
可替换地,在用户执行限定姿势路径22的姿势的同时,姿势模块8将姿势完成路径62输出到UI模块6以显示的一些示例中,当用户暂停执行限定姿势路径22的姿势时,姿势模块8可以使姿势完成路径62和/或候选词“fundamental”28被视觉强调。例如,当用户暂停执行限定姿势路径22的姿势时,姿势模块8可以输出使UI模块6使用颜色、强度、或明显运动来突出显示姿势完成路径62和/或候选词“fundamental”28的数据。这可以改进在用户暂停执行限定姿势路径22的姿势的同时,用户察觉姿势完成路径62和/或候选词“fundamental”28的可能性。
在一些实现中,姿势模块8可以将多个姿势完成路径输出到UI设备6以在UI设备4处显示,每个路径均与相应候选词相关联。图4A和图4B是图示根据本公开的一个或多个技术的包括图形键盘16和多个姿势完成路径的示例GUI12的概念图。示例GUI12包括图形键盘16和文本输入域14。在图4A和图4B的示例中,姿势模块8将姿势完成路径输出到UI模块6,以至少部分地基于至少一个候选词,在UI设备4在图形键盘16的区域内的位置处显示。
例如,如图4A和图4B中所示,姿势模块8已经确定两个候选词“fundamental”72a和“fundraising”72b(共同为“候选词72”)。姿势模块8将候选词“fundamental”72a和“fundraising”72b输出到UI模块6,以在GUI12在与图形键盘16叠加的位置处显示。另外,姿势模块8将候选词“fundamental”72a和“fundraising”72b输出到UI模块6,以分别在GUI12在邻近第一姿势完成路径70a和第二姿势完成路径70b(共同为“姿势完成路径70”)的位置处显示。姿势模块8可以使候选词“fundamental”72a与第一姿势完成路径70a相关联,并且使候选词“fundraising”72b与第二姿势完成路径70b相关联。以此方式,当姿势模块8接收到用户已执行基本经过第一姿势完成路径70a的姿势的指示时,姿势模块8可以选择候选词“fundamental”72a以输入到文本输入域14。类似地,当姿势模块8接收到用户已执行基本经过第二姿势完成路径70b的姿势的指示时,姿势模块8可以选择候选词“fundraising”72b以输入到文本输入域14。
如图4A和图4B中所示,姿势模块8将在从“D”键20D(最近指示的键)延伸的位置处的姿势完成路径70输出到UI模块6以在GUI12处显示。在一些示例中,如图4A中所示,第一姿势完成路径70a和第二姿势完成路径70b中的每个都在通常水平方向(其中,相对于图形键盘16限定水平方向)上从“D”键20D延伸。第一姿势完成路径70a在第一方向上朝向图形键盘16的第一边界74延伸,并且第二姿势完成路径70b在第二方向上朝向图形键盘16的第二边界76延伸。在一些示例中,如图4A中所示,第一和第二方向可以基本彼此相反。在一些示例中,姿势模块8在与位于相应姿势完成路径70之上的相关联的候选词72相反的水平方向上将姿势完成路径70输出到UI模块6可以提供容易可察觉的候选词72和姿势完成路径70,同时使用图形键盘16执行输入文本的姿势。
在一些情况下,除了或者作为将姿势完成路径70输出为水平线的替选,姿势模块8可以在相对于图形键盘16的一个或两个垂直定向(例如,向上和/或向下)上,将从“D”键20D延伸的姿势完成路径输出到UI模块6,以在UI设备4处显示。这可以允许姿势模块8输出一个、两个、三个或四个候选词72和相关联的姿势完成路径70。
如图4B中所示,在一些实现中,代替将姿势完成路径70输出为水平线,姿势模块8可以在其他定向上将姿势完成路径70之一或两者输出到UI模块6以在UI设备4处显示。例如,姿势模块8可以将每个姿势完成路径70输出到UI模块6,以在从“D”键20D(最近指示的字符键20)朝向候选词72中的相应候选词的预测的下一个字母键延伸的定向上显示。在图4B的示例中,这导致姿势模块8将从“D”键20D朝向(并且通过)“A”键20E的第一姿势完成路径70a输出到UI模块6以在GUI12处显示,并且将从“D”键20D朝向(并且通过)“R”键20F延伸的第二姿势完成路径70b输出到UI模块6以在GUI12处显示。这可能影响用户已经作出以选择与姿势完成路径70中的相应路径相关联的候选词72中的相应候选词的动作,例如朝向预测的下一个字母。
在一些情况下,第二姿势完成路径70b或类似姿势完成路径不朝向图形键盘16或UI设备4的垂直边界(例如,第一边界72和第二边界76)延伸。作为代替,第二姿势完成路径70b朝向GUI12的中心(可替换地,图形键盘16的顶部或者UI设备4的中心)延伸。在这些示例中的一些示例中,第二姿势完成路径70b可以延伸到图形键盘16的顶部边界78(例如,图形键盘16和文本输入域14或另一个邻近UI元素之间的边界)。在这些示例中的其他示例中,第二姿势完成路径70b可以延伸到图形键盘16的底部边界78。姿势模块8可以至少部分地基于最近指示的字符键20(例如,“D”键20D)、候选词中的预测的下一个字母和/或姿势模块8是否仅沿着基本方向(例如,关于图4A所描述的,水平地和/或垂直地)输出姿势完成路径70,确定第二姿势完成路径70b(和第一姿势完成路径70a)延伸的方向。
在一些示例中,代替将姿势完成路径70输出为直线(无论是水平还是被另外定向),姿势模块8可以以其他视觉格式,例如,图3A至图3D中所示的格式之一,将姿势完成路径70输出到UI模块6以在UI设备4处显示。在一些实现中,姿势模块8可以以第一视觉格式将第一姿势完成路径70a输出到UI模块6,并且以第二不同视觉格式将第二姿势完成路径70b输出到UI模块6。在其他实现中,姿势模块8可以以类似或基本相同的视觉格式,将第一姿势完成路径70a和第二姿势完成路径70b输出到UI模块6。另外地或可替换地,第一姿势完成路径70a和第二姿势完成路径70b的不透明度、颜色、尺寸等可以相同或者不同。
图5是图示根据本公开的一个或多个技术的用于显示用于选择候选词的姿势完成路径的示例技术的流程图。图5的技术可以通过计算设备的一个或多个处理器执行,诸如图1和图2中所示的计算设备2。为了说明的目的,以下在图1和图2的计算设备2的上下文内描述图5,但是图5的技术可以通过具有不同于计算设备2的配置的计算设备执行。
图5的技术包括通过UI模块6输出图形键盘16以在UI设备4处显示(82)。在一些示例中,UI模块6还可以输出文本输入域14和/或其他UI元素,以在UI设备4处显示。在一些情况下,如图1中所示,图形键盘16可以包括每个都与一个或多个字符相关联的多个字符键20。图形键盘16可以包括如图1中所示的QWERTY格式,或者可以包括不同格式,诸如德沃夏克(Dvorak)简化键盘等。
图5的技术还包括通过姿势模块8接收第一姿势的第一指示的第一指示(84)。第一指示可以包括例如由姿势模块8从UI模块6和/或UI设备4接收的指示。第一姿势可以包括例如由姿势路径22指示的姿势。第一姿势可以指示多个字符键20中的第一字符键和多个字符键20中的第二字符键。在一些示例中,第一姿势可以指示附加字符键,例如多个字符键20中的至少三个字符键。在一些情况下,姿势模块8可以使用语言模型10确定由第一姿势指示的字符键20和确定与多个字符键20中的相应字符键相关联的成本值,如关于图1所描述的。
至少部分地基于由第一姿势指示的第一和第二字符键,姿势模块8可以确定至少一个候选词(86)。在一些情况下,姿势模块8可以基于第一和第二字符键、相应成本值、以及语言模型10,来确定至少一个候选词。在一些示例中,姿势模块8可以确定单个候选词。在其他示例中,姿势模块8可以确定多个候选词。
图5的技术还可以包括:通过姿势模块8输出从第二字符键延伸的姿势完成路径26以在显示图形键盘16的UI设备4(例如,显示器)的区域处显示(88)。在一些示例中,姿势模块8可以将从第二字符键(例如,“D”键20D)朝向与姿势完成路径26相关联的候选词的下一个字母(例如,图1中的“A”键20E)延伸的姿势完成路径26输出到UI模块6,以在GUI12的区域处显示。姿势完成路径26可以包括例如直线、曲线、环、涂写等。在一些情况下,姿势模块8可以将与姿势完成路径26相关联的候选词输出到UI模块6,以在邻近显示姿势完成路径26的UI设备4的区域(例如,在姿势完成路径26之上、之下或其一侧)的UI设备4的区域处显示。
该技术可以进一步包括:通过姿势模块8并且响应于接收基本经过姿势完成路径26的第二输入姿势的第二指示,选择候选词(90)。在一些示例中,第二指示可以是由姿势模块8从UI模块6和/或UI设备4接收的指示。第二输入姿势可以包括例如由用户18执行的基本经过姿势完成路径26的姿势。候选词可以包括与姿势完成路径26相关联的候选词,诸如图1中的候选词“fundamental”28。当选择了候选词时,姿势模块8可以使UI模块在GUI12的文本输入域14处显示所选候选词。
因为姿势模块8将姿势完成路径26输出到UI模块6,以在显示图形键盘16的UI设备4的区域的一部分处显示,用户18更可能察觉姿势完成路径26,并且如果姿势完成路径26与用户想要输入的候选词相关联,则基本经过姿势完成路径26,以选择候选词(例如,与在挨着图形键盘的显示器的区域处显示候选词相比)。姿势模块8可以通过输出姿势完成路径26以在从姿势模块8确定为最近指示的字符键的字符键延伸的位置处显示,进一步便于觉察。由于姿势完成路径26可能接近用户18将输入单元定位的US设备4的位置,这还可以允许用户18快速地基本经过姿势完成路径26。另外,当姿势模块8被配置成将候选词输出到UI模块6以在邻近姿势完成路径26的UI设备4的区域处显示时,姿势模块8可以增加设备的用户18察觉候选词的可能性。以这些方式,姿势完成路径26可以增加用户18进行文本输入的效率。
图6是图示根据本公开的一个或多个技术的输出图形内容以在远程设备处显示的示例计算设备的框图。图形内容通常可以包括可以被输出以显示的任何视觉信息,诸如文本、图像、一组运动图像等。图6中所示的示例包括计算设备2、存在敏感显示器101、通信单元110、投影仪120、投影屏幕122、平板设备126、以及视觉显示设备130。虽然图1和图2中的示例作为单机计算设备2被示出,但是计算设备通常可以是包括用于执行软件指令的处理器或其他合适计算环境的任何组件或系统,并且例如不需要包括存在敏感显示器。
如图6的示例中所示,计算设备2可以是包括关于图2中的处理器40描述的功能的处理器。在这样的示例中,计算设备2可以通过可以为系统总线或其他合适连接的通信信道103A,可操作地耦合至存在敏感显示器101。计算设备2还可以通过也可以为系统总线或其他合适连接的通信信道103B,可操作地耦合至以下进一步描述的I/O设备110。虽然被单独示出为图6中的示例,但是计算设备2可以通过任何数量的一个或多个通信信道,可操作地耦合至存在敏感显示器101和I/O设备110。
在其他示例中,诸如先前在图1至图2中所示的,计算设备2可以是便携式或移动设备,诸如移动电话(包括智能手机)、膝上型计算机等。在一些示例中,计算设备2可以是台式计算机、平板电脑、智能电视平台、相机、个人数字助理(PDA)、服务器、大型机等。
如图6中所示,计算设备2还可以包括和/或与通信单元110可操作地耦合。通信单元110可以包括如图2中描述的通信单元44的功能。通信单元110的示例可以包括网络接口卡、以太网卡、光学收发器、射频收发器、或可以发送和接收信息的任何其他类型的设备。这样的通信单元的其他示例可以包括蓝牙、3G和WiFi无线电设备、通用串行总线(USB)接口等。计算设备2还可以包括和/或与一个或多个其他设备可操作地耦合,例如输入设备、输出设备、存储器、存储设备等,为了简单和说明的目的,在图6中未示出。
图6还图示了投影仪120和投影屏幕122。投影设备的其他这样的示例可以包括电子白板、全息显示设备、以及用于显示图形内容的任何其他合适设备。投影仪120和投影屏幕122可以包括使相应设备能够与计算设备2通信的一个或多个通信单元。在一些示例中,一个或多个通信单元可以使能投影仪120和投影屏幕122之间的通信。投影仪120可以从计算设备2接收包括图形内容的数据。响应于接收数据,投影仪120可以将图形内容投射到投影屏幕122上。在一些示例中,投影仪120可以使用光学识别或其他合适技术,确定在投影屏幕处的一个或多个用户输入(例如连续姿势、多触摸姿势、单触摸姿势等),并且使用一个或多个通信单元将这样的用户输入的指示发送到计算设备2。
在一些示例中,投影屏幕122可以包括存在敏感显示器124。存在敏感显示器124可以包括如在本公开中描述的UI设备的功能子集或者所有功能。在一些示例中,存在敏感显示器124可以包括附加功能。投影屏幕122(例如,电子白板)可以从计算设备2接收数据,并且显示图形内容。在一些示例中,存在敏感显示器124可以使用电容、电感和/或光学识别技术,确定在投影屏幕122处的一个或多个用户输入(例如连续姿势、多触摸姿势、单触摸姿势等),并且使用一个或多个通信单元,将这样的用户输入的指示发送至计算设备2。
图6还图示了平板设备126和视觉显示设备130。平板设备126和视觉显示设备130中的每个都可以包括计算和连接能力。平板设备126的示例可以包括电子读取器设备、可翻转笔记本设备、混合平板设备等。视觉显示设备130的示例可以包括电视、电脑显示器等。如图6中所示,平板设备126可以包括存在敏感显示器128。视觉显示设备130可以包括存在敏感显示器132。存在敏感显示器128、132可以包括如在本公开中描述的UI设备4的功能子集或所有功能。在一些示例中,存在敏感显示器128、132可以包括附加功能。在任何情况下,存在敏感显示器132例如可以从计算设备2接收数据并且显示图形内容。在一些示例中,存在敏感显示器132可以使用电容、电感和/或光学识别技术,确定在投影屏幕处的一个或多个用户输入(例如连续姿势、多触摸姿势、单触摸姿势等),并且使用一个或多个通信单元,将这样的用户输入的指示发送至计算设备2。
如上所述,在一些示例中,计算设备2可以输出图形内容,以在通过系统总线或其他合适通信信道耦合至计算设备2的存在敏感显示器101处显示。计算设备2还可以输出图形内容以在诸如投影仪120、投影屏幕122、平板设备126、以及视觉显示设备130的一个或多个远程设备处显示。例如,根据本公开的技术,计算设备2可以执行一个或多个指令,以生成和/或修改图形内容。计算设备2可以将包括图形内容的数据输出到计算设备2的通信单元,诸如通信单元110。通信单元110可以将数据发送至一个或多个远程设备,诸如投影仪120、投影屏幕122、平板设备126、和/或视觉显示设备130。以此方式,处理器102可以输出图形内容以在一个或多个远程设备处显示。在一些示例中,一个或多个远程设备可以在包括在相应远程设备中和/或可操作地耦合至相应远程设备的存在敏感设备处输出图形内容。
在一些示例中,计算设备2可以不在可操作地耦合至计算设备2的存在敏感显示器101处输出图形内容。在其他示例中,计算设备2可以输出图形内容,以在通过通信信道103A耦合至计算设备2的存在敏感显示器101处并且在一个或多个远程设备处显示。在这样的示例中,图形内容可以基本同时显示在每个相应设备处。例如,一些延迟可能由于将包括图形内容的数据发送至远程设备的通信时延被引入。在一些示例中,由计算设备2生成并且被输出以在存在敏感显示器101处显示的图形内容可以不同于被输出以在一个或多个远程设备处显示的图形内容显示。
计算设备2可以使用任何合适通信技术来发送和接收数据。例如,计算设备2可以使用网络链接112A,可操作地耦合至外部网络114。图6中所示的每个远程设备都可以通过相应网络链路112B、112C和112D中的一个,可操作地耦合至网络外部网络114。以太网114可以包括网络集线器、网络交换机、网络路由器等,其可操作地相互耦合,由此提供图6中所示的计算设备2和远程设备之间的信息交换。在一些示例中,网络链路112A至112D可以是以太网、ATM或其他网络连接。这样的连接可以是无线和/或有线连接。
在一些示例中,计算设备2可以使用直接设备通信118,可操作地耦合至包括在图6中的一个或多个远程设备。直接设备通信118可以包括计算设备2使用有线或无线通信与远程设备直接发送和接收数据的通信。即,在直接设备通信118的一些示例中,在远程设备处被接收之前,通过计算设备2发送的数据可以不被一个或多个附加设备被转发,并且反之亦然。直接设备通信118的示例可以包括蓝牙、近场通信、通用串行总线、WiFi、红外线等。图6中所示的一个或多个远程设备可以通过通信链路116A至116D与计算设备2可操作地耦合。在一些示例中,通信链路112A至112D可以是使用蓝牙、近场通信、通用串行总线、红外线等的连接。这样的连接可以是无线和/或有线连接。
根据本公开的技术,计算设备2可以使用外部网络114可操作地耦合至视觉显示设备130。计算设备2可以输出图形键盘,以在存在敏感显示器132处显示。例如,计算设备2可以将包括图形键盘的表示的数据发送至通信单元110。通信单元110可以使用外部网络114,将包括图形键盘的表示的数据发送至视觉显示设备130。响应于使用外部网络114接收数据,视觉显示设备130可以使存在敏感显示器132输出图形键盘。响应于用户在存在敏感显示器132处执行姿势以选择键盘的一组键,视觉显示设备130可以使用外部网络114将姿势的指示发送至计算设备2。通信单元110可以接收姿势的指示,并且将指示发送至计算设备2。
计算设备2被配置成输出姿势完成路径,以在显示图形键盘的存在敏感显示器132的区域处显示。姿势完成路径是用于姿势的路径的视觉表示,当由用户执行时,使计算设备2选择与姿势完成路径相关联的候选词。响应于接收基本经过姿势完成路径的姿势的指示,计算设备2可以选择与姿势完成路径相关联的候选词。这可以增加用户察觉姿势完成路径的可能性。另外,如果姿势完成路径与用户想要输入的候选词相关联,则用户更可能基本经过姿势完成路径,以选择候选词(例如,与在挨着图形键盘的存在敏感显示器132的区域处显示候选词相比)。
在一些示例中,计算设备2还可以被配置成输出候选词,以在邻近姿势完成路径的存在敏感显示器132的区域处显示。通过输出候选词以挨着姿势完成路径显示,计算设备2可以增加设备的用户察觉候选词的可能性。
另外,在一些示例中,计算设备2可以输出姿势完成路径,以在从计算设备2确定为最近指示的字符键的字符键延伸的位置处显示。因为计算设备2输出姿势完成路径,以在该位置(例如,与姿势键盘的另一个位置或者邻近姿势键盘相对)处显示,用户更可能察觉姿势完成路径。在一些示例中,当姿势完成路径可能接近用户将输入单元定位的存在敏感显示器132的位置时,用户可以能够更快地基本经过姿势完成路径。以这些方式,姿势完成路径可以增加用户将文本输入提供给计算设备的效率。
在一个或多个示例中,在此描述的功能可以在硬件、软件、固件、或其任何结合中实现。如果在软件中实现,功能可以作为一个或多个指令或代码被存储在计算机可读介质上或者在计算机可读介质上被发送并且由基于硬件的处理单元执行。计算机可读介质可以包括对应于诸如数据存储介质的有形介质的计算机可读存储介质、或者包括便于例如根据通信协议将计算机程序从一个位置传送到另一个位置的任何介质的通信介质。以此方式,计算机可读介质通常可以对应于(1)为非暂时性的有形计算机可读存储介质、或者(2)诸如信号或载波的通信介质。数据存储介质可以是可以由一个或多个计算机或者一个或多个处理器存取以取得用于实现在本公开中描述的技术的指令、代码和/或数据结构的任何可用介质。计算机程序产品可以包括计算机可读介质。
通过示例并且不限制,这样的计算机可读存储介质可以包括RAM、ROM、EEPROM、CD-ROM或其他光盘存储、磁盘存储、或其他磁性存储设备、闪存、或可以用于以指令或数据结构的形式存储期望程序代码并且可以由计算机存取的任何其他介质。而且,任何连接都可以被适当地称为计算机可读介质。例如,如果使用同轴电缆、光纤光缆、双绞线、数字用户线(DSL)、或诸如红外线、无线电和微波的无线技术,从网站、服务器或其他远程源发送指令,则同轴电缆、光纤光缆、双绞线、数字用户线(DSL)、或诸如红外线、无线电和微波的无线技术包括在介质的定义中。然而,应该理解,计算机可读存储介质和数据存储介质不包括连接、载波、信号或其他暂时性介质,而是非暂时性有形存储介质。在此使用的磁盘和光盘包括压缩盘(CD)、激光盘、光盘、数字多媒体盘(DVD)、软盘和蓝光盘,其中,磁盘通常磁性地产生数据,而光盘通过激光器光学地产生数据。以上的结合也应包括在计算机可读介质的范围内。
指令可以由一个或多个处理器执行,诸如一个或多个数字信号处理器(DSP)、通用微处理器、专用集成电路(ASIC)、场可编程逻辑阵列(FPGA)、或其他等效集成或离散逻辑电路。从而,在此使用的术语“处理器”可以指任何以上结构或者适用于实现在此描述的技术的任何其他结构。另外,在一些方面,在此描述的功能可以提供在专用硬件和/或软件模块内。而且,这些技术可以在一个或多个电路或者逻辑元件中被完全实现。
本公开的技术可以在广泛多种设备或装置中实现,包括无线手持机、集成电路(IC)或一组IC(例如芯片集)。在本公开中描述了各种组件、模块或单元,以强调被配置成执行所公开的技术的设备的功能方面,但是不必须要求通过不同硬件单元实现。而是,如上所述,各种单元可以连同合适软件和/或固件,结合在硬件单元中或者由包括上述一个或多个处理器的可互操作硬件单元的集合提供。
描述了多个示例。这些和其他示例在所附权利要求的范围内。

Claims (18)

1.一种方法,包括:
通过计算设备输出包括多个字符键的图形键盘以在显示设备处显示;
在所述计算设备处接收第一输入姿势的指示,所述第一输入姿势的第一部分指示所述多个字符键中的第一字符键,并且所述第一输入姿势的第二部分指示所述多个字符键中的第二字符键;
通过所述计算设备并且至少部分地基于所述第一字符键和所述第二字符键,确定候选词;
通过所述计算设备输出从所述第二字符键延伸的姿势完成路径以在显示所述图形键盘的所述显示设备的区域处显示,所述第二字符键是最近指示的字符键,并且所述姿势完成路径与所述候选词相关联;以及
通过所述计算设备并且响应于接收基本经过所述姿势完成路径的第二输入姿势的指示,选择与所述姿势完成路径相关联的所述候选词。
2.根据权利要求1所述的方法,进一步包括:通过所述计算设备输出所述候选词,以显示在邻近所述姿势完成路径处。
3.根据权利要求1所述的方法,其中,输出从所述第二字符键延伸的所述姿势完成路径包括:输出从所述第二字符键延伸到所述图形键盘的边界的所述姿势完成路径。
4.根据权利要求1所述的方法,其中,输出从所述第二字符键延伸的所述姿势完成路径包括:输出从所述第二字符键延伸到所述显示设备的边缘的所述姿势完成路径。
5.根据权利要求1所述的方法,其中,输出从所述第二字符键延伸的所述姿势完成路径包括:输出从所述第二字符键朝向与所述候选词的第三个字母相对应的第三字符键的中心延伸的所述姿势完成路径。
6.根据权利要求1所述的方法,其中,输出从所述第二字符键延伸的所述姿势完成路径包括:输出从所述第二字符键朝向与所述候选词的第三个字母相对应的第三字符键的边缘延伸的所述姿势完成路径。
7.根据权利要求1所述的方法,其中,输出从所述第二字符键延伸的所述姿势完成路径包括:输出在所述第二字符键处开始和结束的环。
8.根据权利要求1所述的方法,进一步包括:在输出从所述第二字符键延伸的所述姿势完成路径之前,接收所述第一输入姿势在所述第二字符键处或附近的暂停的指示,其中,输出从所述第二字符键延伸的所述姿势完成路径包括:响应于所述第一输入姿势的暂停的指示,输出从所述第二字符键延伸的所述姿势完成路径。
9.根据权利要求1所述的方法,其中,确定所述候选词包括:确定第一候选词,其中,输出从所述第二字符键延伸的所述姿势完成路径包括:输出从所述第二字符键延伸的第一姿势完成路径,所述方法进一步包括:
至少部分地基于所述第一字符键和所述第二字符键并且通过所述计算设备,确定第二候选词;以及
通过所述计算设备输出从所述第二字符键延伸的第二姿势完成路径以在显示所述图形键盘的所述显示设备的所述区域处显示。
10.根据权利要求9所述的方法,其中,通过所述计算设备并且响应于接收基本经过所述姿势完成路径的所述第二输入姿势的所述指示选择所述候选词包括:通过所述计算设备并且响应于接收基本经过所述第一姿势完成路径的第三输入姿势的指示,选择所述第一候选词。
11.根据权利要求9所述的方法,其中,通过所述计算设备并且响应于接收基本经过所述第二姿势完成路径的第四输入姿势的指示,选择所述第二候选词。
12.根据权利要求9所述的方法,其中,输出从所述第二字符键延伸的所述第一姿势完成路径包括:输出在相对于所述图形键盘的第一水平方向上从所述第二字符键延伸的所述第一姿势完成路径,并且其中,输出从所述第二字符键延伸的所述第二姿势完成路径包括:输出在相对于所述图形键盘的第二水平方向上从所述第二字符键延伸的所述第二姿势完成路径。
13.根据权利要求12所述的方法,进一步包括:
通过所述计算设备输出所述第一候选词,以显示在邻近所述第一姿势完成路径处;以及
通过所述计算设备输出所述第二候选词,以显示在邻近所述第二姿势完成路径处。
14.根据权利要求1所述的方法,其中,所述图形键盘包括与QWERTY布局不同的布局。
15.根据权利要求1所述的方法,进一步包括:通过所述计算设备以第一视觉格式输出姿势路径以在所述显示设备处显示,其中,输出从所述第二字符键延伸的所述姿势完成路径包括:以第二不同视觉格式输出从所述第二字符键延伸的所述姿势完成路径。
16.根据权利要求1所述的方法,进一步包括:通过所述计算设备输出由所述第一输入姿势描绘的姿势路径以在显示所述图形键盘的所述显示设备的所述区域处显示。
17.一种计算设备,包括:
显示设备;
一个或多个处理器;
用户接口模块,可通过所述一个或多个处理器操作并且被配置成输出包括多个字符键的图形键盘以在所述显示设备处显示;以及
姿势模块,可通过所述一个或多个处理器操作并且被配置成:
接收第一输入姿势的指示,所述第一输入姿势的第一部分指示所述多个字符键中的第一字符键,并且所述第一输入姿势的第二部分指示所述多个字符键中的第二字符键,
至少部分地基于所述第一字符键和所述第二字符键,确定候选词;
输出从所述第二字符键延伸的姿势完成路径,以通过所述用户接口模块在显示所述图形键盘的所述显示设备的区域处显示,所述第二字符键是最近指示的字符键,并且所述姿势完成路径与所述候选词相关联,
输出所述候选词,以通过所述用户接口模块在显示所述图形键盘的所述显示设备的所述区域处并且邻近所述姿势完成路径显示,以及
响应于接收基本经过所述姿势完成路径的第二输入姿势的指示,选择与所述姿势完成路径相关联的所述候选词。
18.根据权利要求17所述的计算设备,其中,所述候选词包括第一候选词,其中,所述姿势完成路径包括从所述第二字符键延伸的第一姿势完成路径,并且其中,所述姿势模块被进一步配置成:
至少部分地基于所述第一字符键和所述第二字符键并且通过所述计算设备,确定第二候选词;以及
输出从所述第二字符键延伸的第二姿势完成路径,以在显示所述图形键盘的所述显示设备的所述区域处显示。
CN201410085705.8A 2013-03-08 2014-03-10 用于基于姿势的键盘的姿势完成路径显示 Active CN104035712B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/791,418 US8701050B1 (en) 2013-03-08 2013-03-08 Gesture completion path display for gesture-based keyboards
US13/791,418 2013-03-08

Publications (2)

Publication Number Publication Date
CN104035712A CN104035712A (zh) 2014-09-10
CN104035712B true CN104035712B (zh) 2016-08-17

Family

ID=50441619

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410085705.8A Active CN104035712B (zh) 2013-03-08 2014-03-10 用于基于姿势的键盘的姿势完成路径显示

Country Status (5)

Country Link
US (1) US8701050B1 (zh)
KR (1) KR101426937B1 (zh)
CN (1) CN104035712B (zh)
DE (1) DE102014002984A1 (zh)
GB (1) GB2511646B (zh)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8863020B2 (en) * 2010-12-02 2014-10-14 Blackberry Limited Portable electronic device and method of controlling same
AU2010366331B2 (en) * 2010-12-30 2016-07-14 Interdigital Ce Patent Holdings User interface, apparatus and method for gesture recognition
US9064436B1 (en) 2012-01-06 2015-06-23 Google Inc. Text input on touch sensitive interface
CN104007832B (zh) * 2013-02-25 2017-09-01 上海触乐信息科技有限公司 连续滑行输入文本的方法、系统及设备
US20140365878A1 (en) * 2013-06-10 2014-12-11 Microsoft Corporation Shape writing ink trace prediction
US9952763B1 (en) 2014-08-26 2018-04-24 Google Llc Alternative gesture mapping for a graphical keyboard
WO2016137514A1 (en) 2015-02-27 2016-09-01 Hewlett-Packard Development Company, L.P. Detecting finger movements
CN109790006B (zh) * 2016-08-15 2021-08-10 可口可乐公司 从混合后饮料分配器中选择和分配共混饮料
CN107817942B (zh) * 2016-09-14 2021-08-20 北京搜狗科技发展有限公司 一种滑行输入方法、系统和一种用于滑行输入的装置
US10884610B2 (en) 2016-11-04 2021-01-05 Myscript System and method for recognizing handwritten stroke input
US10824293B2 (en) * 2017-05-08 2020-11-03 International Business Machines Corporation Finger direction based holographic object interaction from a distance
KR102474245B1 (ko) * 2017-06-02 2022-12-05 삼성전자주식회사 스와이프 입력에 기초하여 입력 문자를 판단하는 시스템 및 방법
US11188158B2 (en) 2017-06-02 2021-11-30 Samsung Electronics Co., Ltd. System and method of determining input characters based on swipe input
US20220374141A1 (en) * 2021-05-20 2022-11-24 ThingThing LTD Performance-oriented gesture type decoding for keyboards

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7453439B1 (en) * 2003-01-16 2008-11-18 Forward Input Inc. System and method for continuous stroke word-based text input
US7487461B2 (en) * 2005-05-04 2009-02-03 International Business Machines Corporation System and method for issuing commands based on pen motions on a graphical keyboard
CN101390039A (zh) * 2006-01-05 2009-03-18 苹果公司 用于便携式电子设备的键盘

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100327209B1 (ko) 1998-05-12 2002-04-17 윤종용 첨펜의자취를이용한소프트웨어키보드시스템및그에따른키코드인식방법
US7293231B1 (en) 1999-03-18 2007-11-06 British Columbia Ltd. Data entry for personal computing devices
US7030863B2 (en) 2000-05-26 2006-04-18 America Online, Incorporated Virtual keyboard system with automatic correction
CA2392446C (en) 1999-05-27 2009-07-14 America Online Incorporated Keyboard system with automatic correction
AU2001270420A1 (en) 2000-07-21 2002-02-05 Raphael Bachmann Method for a high-speed writing system and high-speed writing device
US7042443B2 (en) 2001-10-11 2006-05-09 Woodard Scott E Speed Writer program and device with Speed Writer program installed
WO2003098417A2 (en) * 2002-05-21 2003-11-27 Koninklijke Philips Electronics N.V. Object entry into an electronic device
US7151530B2 (en) 2002-08-20 2006-12-19 Canesta, Inc. System and method for determining an input selected by a user through a virtual interface
US7199786B2 (en) 2002-11-29 2007-04-03 Daniel Suraqui Reduced keyboards system using unistroke input and having automatic disambiguating and a recognition method using said system
US7251367B2 (en) 2002-12-20 2007-07-31 International Business Machines Corporation System and method for recognizing word patterns based on a virtual keyboard layout
US7098896B2 (en) * 2003-01-16 2006-08-29 Forword Input Inc. System and method for continuous stroke word-based text input
US7382358B2 (en) * 2003-01-16 2008-06-03 Forword Input, Inc. System and method for continuous stroke word-based text input
SG135918A1 (en) 2003-03-03 2007-10-29 Xrgomics Pte Ltd Unambiguous text input method for touch screens and reduced keyboard systems
US7250938B2 (en) 2004-01-06 2007-07-31 Lenovo (Singapore) Pte. Ltd. System and method for improved user input on personal computing devices
US7706616B2 (en) 2004-02-27 2010-04-27 International Business Machines Corporation System and method for recognizing word patterns in a very large vocabulary based on a virtual keyboard layout
US20060176283A1 (en) 2004-08-06 2006-08-10 Daniel Suraqui Finger activated reduced keyboard and a method for performing text input
US7508324B2 (en) 2004-08-06 2009-03-24 Daniel Suraqui Finger activated reduced keyboard and a method for performing text input
US8036878B2 (en) 2005-05-18 2011-10-11 Never Wall Treuhand GmbH Device incorporating improved text input mechanism
US8059101B2 (en) 2007-06-22 2011-11-15 Apple Inc. Swipe gestures for touch screen keyboards
WO2010035574A1 (ja) * 2008-09-29 2010-04-01 シャープ株式会社 入力装置、入力方法、プログラム、および記録媒体
US8605039B2 (en) * 2009-03-06 2013-12-10 Zimpl Ab Text input
US9189472B2 (en) * 2009-03-30 2015-11-17 Touchtype Limited System and method for inputting text into small screen devices
US8135582B2 (en) 2009-10-04 2012-03-13 Daniel Suraqui Keyboard system and method for global disambiguation from classes with dictionary database from first and last letters
US20110099506A1 (en) * 2009-10-26 2011-04-28 Google Inc. Predictive Text Entry for Input Devices
KR101557358B1 (ko) * 2010-02-25 2015-10-06 엘지전자 주식회사 문자열 입력 방법 및 그 장치
US8918734B2 (en) 2010-07-28 2014-12-23 Nuance Communications, Inc. Reduced keyboard with prediction solutions when input is a partial sliding trajectory
WO2012076743A1 (en) * 2010-12-08 2012-06-14 Nokia Corporation An apparatus and associated methods for text entry
WO2013119712A1 (en) * 2012-02-06 2013-08-15 Colby Michael K Character-string completion

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7453439B1 (en) * 2003-01-16 2008-11-18 Forward Input Inc. System and method for continuous stroke word-based text input
US7487461B2 (en) * 2005-05-04 2009-02-03 International Business Machines Corporation System and method for issuing commands based on pen motions on a graphical keyboard
CN101390039A (zh) * 2006-01-05 2009-03-18 苹果公司 用于便携式电子设备的键盘

Also Published As

Publication number Publication date
KR101426937B1 (ko) 2014-08-07
US8701050B1 (en) 2014-04-15
GB2511646A (en) 2014-09-10
CN104035712A (zh) 2014-09-10
GB2511646B (en) 2016-02-10
GB201404075D0 (en) 2014-04-23
DE102014002984A1 (de) 2014-09-11

Similar Documents

Publication Publication Date Title
CN104035712B (zh) 用于基于姿势的键盘的姿势完成路径显示
CN104718544B (zh) 部分手势文本输入的方法、计算设备及系统
JP6502613B2 (ja) テキスト入力方法および装置
CN105009064B (zh) 使用语言和空间模型的触摸键盘
CN104685451B (zh) 姿势适应选择
JP6151381B2 (ja) 国際言語のための仮想キーボード入力
US20200050661A1 (en) Incremental Multi-Word Recognition
CN102141889B (zh) 用于编辑的打字辅助
CN105308551B (zh) 用于连续手势输入的多图形键盘
CN104020943B (zh) 字符串替换
CN105164616B (zh) 用于输出候选字符串的方法、计算设备及存储介质
CN105074643B (zh) 非词典字符串的手势键盘输入
US9304595B2 (en) Gesture-keyboard decoding using gesture path deviation
CN104123012B (zh) 使用替代评分的非字典字符串的姿态键盘输入
CN110083254A (zh) 多手势文本输入预测
CN105122185A (zh) 使用过去交互数据的文本建议输出
CN104756062B (zh) 解码用于图形键盘的不准确手势
WO2018187097A1 (en) Text entry interface
WO2023040724A1 (zh) 信息显示方法、装置、电子设备和存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CP01 Change in the name or title of a patent holder

Address after: American California

Patentee after: Google limited liability company

Address before: American California

Patentee before: Google Inc.

CP01 Change in the name or title of a patent holder