CN108701124A - 预测接下来的字母并在图形键盘的键中显示它们 - Google Patents

预测接下来的字母并在图形键盘的键中显示它们 Download PDF

Info

Publication number
CN108701124A
CN108701124A CN201680081899.1A CN201680081899A CN108701124A CN 108701124 A CN108701124 A CN 108701124A CN 201680081899 A CN201680081899 A CN 201680081899A CN 108701124 A CN108701124 A CN 108701124A
Authority
CN
China
Prior art keywords
character
key
computing device
input
instruction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201680081899.1A
Other languages
English (en)
Inventor
毕小俊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of CN108701124A publication Critical patent/CN108701124A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233Character input methods
    • G06F3/0237Character input methods using prediction or retrieval techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/20Natural language analysis
    • G06F40/274Converting codes to words; Guess-ahead of partial word inputs

Abstract

描述了一种计算设备,其输出用于显示的包括一组键的图形键盘。该组键包括与第一字符相关联的第一键。计算设备确定包括第一字符的候选词,并确定与候选词相关联的分值,该分值指示通过该组键的一个或多个的一个或多个后续选择输入候选词的概率。响应于确定与候选词相关联的分值满足阈值,计算设备基于候选词的拼写确定候选词的第二字符,并输出用于在第一键内显示的第一字符的图形指示和第二字符的图形指示。

Description

预测接下来的字母并在图形键盘的键中显示它们
背景技术
一些计算设备(如移动电话、平板电脑等)可以提供图形键盘作为用于使用存在敏感显示器(如触摸屏)来撰写文本的图形用户界面(GUI)的一部分。图形键盘可以使计算设备的用户能够输入文本(如撰写电子邮件、文本消息、文档等)。例如,计算设备的存在敏感显示器可以呈现图形(或“软”)键盘,其通过指示(如通过轻敲或滑过)在存在敏感显示器处显示的键来使得用户能够输入数据。为了帮助用户在图形键盘上提供文本输入,一些计算设备可以在图形键盘的建议区域中提供单词建议或拼写和语法校正,该建议区域与其中显示键盘的图形键的显示区域分开。在某些情况下,一组给定的单词建议可能没有用或不相关。如果给出的一个建议的单词实际上是有用的或相关的,则可能要求用户停止在图形键盘的键处键入,查看建议的单词,并且然后在建议区域提供额外的输入以选择给出的建议的单词。因此,在用户通过存在敏感显示器输入文本期间这一系列步骤导致一定程度的低效率。
发明内容
在一个示例中,一种方法包括:计算设备输出用于显示的图形键盘,所述图形键盘包括多个键;所述计算设备确定包括所述第一字符的至少一个候选词;并且所述计算设备确定与所述至少一个候选词相关联的分值,所述分值指示通过所述多个键中的一个或多个的一个或多个后续选择输入所述至少一个候选词的概率。所述多个键包括与第一字符相关联的第一键。所述方法还包括:响应于确定与所述至少一个候选词相关联的所述分值满足阈值,所述计算设备基于所述至少一个候选词的拼写确定所述至少一个候选词的第二字符;以及,由所述计算设备输出用于在所述第一键内显示的所述第一字符的图形指示和所述第二字符的图形指示。在至少一个候选词的拼写中,所述第二字符紧跟在第一字符之后。
在另一示例中,一种设备包括:存在敏感显示器;至少一个处理器;以及,存储器。所述图形键盘包括多个键。所述多个键包括与第一字符相关联的第一键。所述存储器存储指令,所述指令在由所述至少一个处理器执行时使所述至少一个处理器:输出用于在所述存在敏感显示器处显示的图形键盘;确定包括所述第一字符的至少一个候选词;并且确定与所述至少一个候选词相关联的分值,所述分值指示通过所述多个键中的一个或多个的一个或多个后续选择输入所述至少一个候选词的概率。所述存储器存储指令,所述指令当被至少一个处理器执行时,进一步使得所述至少一个处理器:响应于确定与所述至少一个候选词相关联的所述分值满足阈值,基于所述至少一个候选词的拼写确定所述至少一个候选词的第二字符,以及,输出用于在所述第一键内显示的所述第一字符的图形指示和所述第二字符的图形指示。在所述至少一个候选词的所述拼写中所述第二字符紧跟在所述第一字符之后。
在另一示例中,使用指令编码计算机可读存储介质,所述指令当被执行时,使计算设备的至少一个处理器:输出用于显示的图形键盘;确定包括所述第一字符的至少一个候选词;并且确定与所述至少一个候选词相关联的分值,所述分值指示通过所述多个键中的一个或多个的一个或多个后续选择输入所述至少一个候选词的概率。所述指令当被执行时进一步使得至少一个处理器:响应于确定与所述至少一个候选词相关联的所述分值满足阈值,基于所述至少一个候选词的拼写确定所述至少一个候选词的第二字符,并且输出用于在所述第一键内显示的所述第一字符的图形指示和所述第二字符的图形指示。在所述至少一个候选词的所述拼写中所述第二字符紧跟在所述第一字符之后。
在附图和以下描述中阐述了本公开的一个或多个示例的细节。根据说明书和附图以及权利要求,其他特征、目的和优点将是显然的。
附图说明
图1A-1C是示出根据本公开的一种或多种技术的可用于预测接下来的字母并在图形键盘的键内显示它们的示例计算设备的概念图。
图2是示出根据本公开的一种或多种技术的如图1A中所示的计算设备的一个示例的进一步细节的框图。
图3是示出根据本公开的一种或多种技术的输出图形内容以供在远程设备处显示的示例计算设备的概念图。
图4A-4B是示出根据本公开的一种或多种技术的图1中所示的计算设备的第一示例的进一步细节的概念图。
图5A-5B是示出根据本公开的一种或多种技术的图1A中所示的计算设备的第二示例的进一步细节的概念图。
图6A-6B是示出根据本公开的一种或多种技术的图1A中所示的计算设备的第三示例的进一步细节的概念图。
图7是示出根据本公开的一种或多种技术的示例计算设备的示例操作的流程图,该示例计算设备被配置为预测接下来的字母并在图形键盘的键内显示它们。
具体实施方式
通常,本公开涉及用于使计算设备能够在图形键盘的单个键内显示设备预测将从图形键盘的后续输入中选择的两个或更多个接下来的字母的技术。换句话说,计算设备可以在用户已经提供输入的键内显示建议词的可选部分(例如,两个或更多个字母)。例如,示例计算设备可以在图形键盘的第一键内显示通常与第一键相关联的字母连同通常与被预测在选择第一键之后要选择的不同键相关联的接下来的字母。响应于接收到对第一键的选择的指示,计算设备可以确定在第一键内显示的两个字母的选择。例如,为了拼写单词“That”,计算设备可以接收选择“Th”的第一用户输入和选择“at”的第二用户输入,而不是拼写单词“that”的每个字母的四个独立用户输入。
不是要求用户搜索并提供输入以选择在图形键盘的分开的建议区域内显示的整个建议单词,计算设备可以在图形键盘的各别键内显示一个或多个建议单词的两个或更多个接下来的字母。通过在图形键盘的键内显示建议的单词的部分而不是整个建议的单词,示例计算设备可以向用户提供更有用和相关的建议,因为计算设备更可能正确地预测可能被选中的下一个或多个字母,而不是预测整个建议的单词的所有字母。另外,通过提供具有完全在图形键盘的键内的接下来的字母预测的图形键盘,用户不需要在键盘的与图形键不同的分开的区域处提供输入,从而使得能够使用较少的输入更快地输入单词。以这种方式,本公开的技术可以减少用户输入期望单词所花费的时间,这可以改善计算设备的用户体验。
图1A-C是示出根据本公开的一种或多种技术的可用于预测接下来的字母并在图形键盘的键内显示它们的示例计算设备的概念图。计算设备110可以表示移动设备,诸如智能电话、平板计算机、膝上型计算机、计算机化手表、计算机化眼镜、计算机化手套或任何其他类型的便携式计算设备。计算设备110的附加示例包括台式计算机、电视、个人数字助理(PDA)、便携式游戏系统、媒体播放器、电子书阅读器、移动电视平台、汽车导航和娱乐系统、车辆(例如,汽车、飞机或其他车辆)驾驶舱显示器或可输出用于显示的图形键盘的任何其他类型的可穿戴和不可穿戴的、移动的或非移动的计算设备。
计算设备110包括存在敏感(presence-sensitive)显示器(PSD)112、用户界面(UI)模块120和键盘模块122。模块120和122可执行使用驻留在计算设备110中和/或在计算设备110处执行的软件、硬件、固件或硬件、软件和固件的混合物描述的操作。计算设备110的一个或多个处理器可执行存储在计算设备110的存储器或其他非暂时性存储介质中的指令,以执行模块120和122的操作。计算设备110可执行模块120和122作为在底层硬件上执行的虚拟机。模块120和122可作为操作系统或计算平台的一个或多个服务来执行。模块120和122可以作为计算平台的应用层处的一个或多个可执行程序来执行。
计算设备110的PSD 112可以用作计算设备110的相应输入和/或输出设备。可以使用各种技术来实现PSD 112。例如,PSD 112可以用作使用存在敏感输入屏幕的输入设备,存在敏感输入屏幕例如是电阻式触摸屏、表面声波触摸屏、电容式触摸屏、投射电容式触摸屏、压敏屏幕、声学脉冲识别触摸屏或其他存在敏感显示技术。PSD 112还可以用作使用任何一个或多个显示设备的输出(例如,显示器)设备,所述任何一个或多个显示设备例如是液晶显示器(LCD)、点阵显示器、发光二极管(LED)显示器、有机发光二极管(OLED)、电子墨水或能够向计算设备110的用户输出可视信息的显示器类似的单色或彩色显示器。
PSD 112可以检测来自相应计算设备110的用户的输入(例如,触摸和非触摸输入)。PSD 112可以通过检测来自用户的一个或多个手势来检测输入的指示(例如,用户用手指或手写笔在PSD 112的一个或多个位置处或附近触摸、指向和/或滑动)。PSD 112可以以用户界面(例如,用户界面114)的形式向用户输出信息,该用户界面可以与计算设备110提供的功能相关联。这样的用户界面可以与计算平台、操作系统、应用和/或在计算设备110处执行或可从计算设备110访问的服务(例如,电子消息应用、聊天应用、因特网浏览器应用、移动或桌面操作系统、社交媒体应用、电子游戏和其他类型的应用)。例如,PSD 112可以呈现用户界面114,其如图1A-1C所示可以是在计算设备110处执行的聊天应用的图形用户界面,并且包括在PSD 112的各个位置处显示的各种图形元素。
如图1A-1C中所示,用户界面114是聊天用户界面的一部分,然而用户界面114可以是包括图形键盘的任何图形用户界面。用户界面114包括输出区域116A、图形键盘116B、编辑区域116C和建议区域116D。计算设备110的用户可以在图形键盘116B处提供输入以在编辑区域116C内产生文本字符,其形成在输出区域116A内显示的电子消息的内容。在输出区域116A内显示的消息形成在计算设备110的用户与不同计算设备的用户之间的聊天对话。
UI模块120管理与PSD 112和计算设备110的其他组件的用户交互。换句话说,UI模块120可以充当计算设备110的各种组件之间的中介,以基于PSD 112检测到的用户输入进行确定,并且响应于用户输入在PSD 112处生成输出。UI模块120可以从计算设备110的应用、服务、平台或其他模块接收指令以使PSD 112输出用户界面(例如,用户界面114)。UI模块120可当用户查看PSD 112处呈现的用户界面并与其交互时管理由计算设备110接收的输入,并响应于从正在处理用户输入的计算设备110的应用、服务、平台或其他模块接收附加指令而更新用户界面。
计算设备110的键盘模块122可以执行用于文本输入的传统的图形键盘操作,例如:生成用于在PSD 112处显示的图形键盘布局,将在PSD 112处检测到的输入映射到键的选择,基于所选择的键确定字符,或基于从所选键确定的字符预测或自动校正单词和/或短语。键盘模块122可以是在计算设备110处执行的单独应用、服务或模块,并且在其他示例中,键盘模块122可以是其子组件。例如,键盘模块122可以集成到在计算设备110处执行的聊天或消息传递应用中,而在其他示例中,键盘模块122可以是由计算设备110的应用或操作平台在应用或操作平台都需要图形键盘输入功能的任何时候调用的独立应用或子例程。在一些示例中,计算设备110可以从服务提供商的应用库(例如,经由因特网)下载并安装键盘模块122。在其他示例中,键盘模块122可以在计算设备110的生产期间被预加载。
图形键盘116B包括图形键118和在建议区域116D中显示的建议的单词。可以由计算设备110基于历史日志或词典等来确定建议区域116D中显示的建议单词。键118中的每一个通常可以表示来自字符集(例如,英文字母表的字母、阿拉伯数字、符号、情感符和表情符号等)的单个字符。如图1A所示,图形键盘116B可以包括传统的“QWERTY”键盘布局。其他示例可以包含不同语言\不同字符集或不同字符布局的字符。在一些示例中,图形键盘116B可以包括所选语言的字母表中的每个字母。例如,如图所示,图形键盘116B包括26个英语字母。在一些示例中,图形键盘116可以包括部分字母集。如图所示,图形键盘116B可以包括大写选择键124,其改变图形键盘116B中显示的字母的大小写。在一些示例中,图形键盘116B可以包括改变在图形键盘116B中显示的键118的一个或多个键。例如,图形键盘116B可以包括数字键125,其当被选择时可以使图形键盘116B显示数字而不是字母。
键盘模块122可以向UI模块120输出指定在用户界面114内的图形键盘116B的布局的信息。例如,该信息可包括指定键118的位置、大小、颜色和其他特征的指令。关于从键盘模块122接收的信息,UI模块120可使PSD 112将图形键盘116B显示为用户界面114的一部分。
键118中的至少一些可以与各字符(例如,字母、数字、标点符号或其他字符)相关联。计算设备110的用户可以在PSD 112的位置处提供输入,在该位置处显示一个或多个键118以把内容(如字符等)输入到编辑区域116C中(例如,用于撰写发送和在输出区域116A内显示的消息)。键盘模块122可以从UI模块120接收信息,其指示与PSD 112检测到的与每个键的位置相关的输入相关联的位置。使用空间和/或语言模型,键盘模块122可以把输入转换为键和字符、单词、短语或其他短语的选择。
例如,当计算设备110的用户在PSD 112呈现键118的PSD 112的位置处或附近提供用户输入时,PSD 112可以检测用户输入。UI模块120可以从PSD 112接收在PSD 112处的用户输入的指示,并向键盘模块122输出关于用户输入的信息。关于用户输入的信息可以包括由PSD 112检测到的一个或多个触摸事件(例如,关于输入的位置和其他信息)的指示。
基于从UI模块120接收的信息,键盘模块122可把在PSD 112处的检测到的输入映射到键118的选择,基于所选键118确定字符,以及短语预测或自动更正基于与所选键118相关联的字符所确定的单词和/或短语。例如,键盘模块122可以包括空间模型,该空间模型可以基于键118的位置和关于输入的信息确定最可能选择的一个或多个键118。响应于确定最可能选择的一个或多个键118,键盘模块122可确定一个或多个字符、单词和/或短语。例如,从PSD 112处的用户输入中选择的一个或多个键118中的每一个可以表示单个字符或包括与键相关联的字符和候选词的第二字符的组合。键盘模块122可以确定基于一个或多个所选键118选择的字符序列。在一些示例中,键盘模块122可以将语言模型应用于字符序列以确定用户基于键118的选择试图输入的一个或多个最可能的候选字母、语素、单词和/或短语。
键盘模块122可以将字符和/或候选词和短语的序列发送到UI模块120,并且UI模块120可以使PSD 112呈现从一个或多个键118的选择确定作为编辑区域116C内的文本的字符和/或候选词。在一些示例中,当用作执行文本输入操作的传统键盘时,并且响应于在键118处接收用户输入(例如,当用户在图形键盘116B处键入以在编辑区域116C内输入文本时),键盘模块122可以使UI模块120将候选词显示为建议区域116D内的一个或多个可选建议。用户可以在建议区域116D内选择单独的建议,而不是键入键118的所有单独的字符键。
不是简单地在编辑区域116C或建议区域116D内显示单词建议,键盘模块122可使UI模块120在一个或多个键118的图形表示内显示预测的可能从未来的用户输入中选择的接下来的字母。例如,键盘模块122可以输出用于显示的图形键盘116B,其如图1A所示包括作为键118之一的、与第一字符(例如,'t')相关联的键126。
键盘模块122可以(例如,从词典)确定包括与键126相关联的第一字符的至少一个候选词。例如,键盘模块122可以将第一字符输入到词典中,并作为响应接收键盘模块122从词典中识别为包括第一字符的潜在词的一个或多个候选字符、单词或短语的指示。例如,响应于将与键126相关联的第一字符(例如,'t')输入到词典中,键盘模块122可以从词典接收词语“This”、“The”和“That”的指示。
响应于确定包括第一字符的至少一个候选词,键盘模块122可以确定与至少一个候选词相关联的分值(score),该分值指示在一个或多个键118的随后的选择期间选择至少一个候选词的概率。例如,键盘模块122可以将语言模型概率或相似性系数(如Jaccard相似性系数)分配给从计算设备110的词典接收的一个或多个候选词,其包括第一字符作为下一个输入字符。在一些示例中,键盘模块122可以使用语言模型来计算每个候选词的分值。并且在一些示例中,键盘模块122可以从词典接收与每个候选词相关联的分值的指示。在任何情况下,分配给一个或多个候选词中的每一个的分值或语言模型概率可以指示候选词通常被发现位于从由PSD 112检测到的文本输入生成的单词序列(例如,句子)之后、之前和/或之内的确定度或可能性程度。
响应于确定与至少一个候选词相关联的、指示在随后选择一个或多个键118期间选择该至少一个候选词的概率的分值,键盘模块122可确定与至少一个候选词相关联的分值是否满足阈值。阈值可以是由计算设备110的制造商、UI模块120的设计者、键盘模块122的设计者、计算设备110的用户或由其他人选择的预定值。在一些示例中,可以计算阈值。例如,可以由计算设备110基于用户与计算设备110的交互的历史日志来计算阈值。
响应于确定与至少一个候选词相关联的分值不满足阈值,键盘模块122可输出用于在键126内显示的第一字符的图形指示,并且避免输出第二字符的图形指示。例如,键盘模块122可向UI模块120发送信息,该信息使PSD 112把键126显示为具有作为字母't'的第一字符的图形指示128,并且避免输出作为字母'h'的第二字符的图形指示130。
响应于确定与至少一个候选词相关联的分值满足阈值,键盘模块122可确定该至少一个候选词的第二字符。在一些示例中,键盘模块122可基于至少一个候选词的拼写来确定至少一个候选词的第二字符。例如,响应于确定候选词是“that”,键盘模块122可将第一字母确定为“t”而将第二字符确定为“h”。更具体地,键盘模块122可将第二字符确定为紧接在至少一个候选词的拼写中的第一字符之后的字符。
响应于确定至少一个候选词的第二字符,键盘模块122可输出用于在键126内显示第一字符的图形指示和第二字符的图形指示。在图1A的示例中,键盘模块122可以向UI模块120发送信息,该信息使得PSD 112将键126显示为具有作为字母't'的第一字符的图形指示128并且还具有作为字母'h'的第二字符的图形指示130。
在输出第一字符的图形指示128和第二字符的图形指示130之后,键盘模块122可以接收对键126的选择的指示。例如,键盘模块122可以从UI模块120接收信息,其指示用户已经在PSD 112的位置处或附近提供了用户输入140,在该位置处显示了键126。
响应于接收到用户输入140的指示,键盘模块122可以确定用户输入140是否对应于单独选择第一字符或者选择第一字符和第二字符的组合,例如,第一字符后跟有第二字符。在图1B的示例中,键盘模块122可基于与用户输入140相关联的轻击的数量(例如,不同的向下触摸和向上触摸事件)、与用户输入140相关联的滑动方向、与用户输入140相关联的压力量或与键126的选择相关联的其他特征或参数确定用户输入140是否仅对应于第一字符(例如,字母't')或包括第一字符和第二字符的组合(例如,短语'th')。
响应于确定用户输入140不对应于对第一字符和第二字符的组合的选择,键盘模块122可以使UI模块120输出单独的用于显示的第一字符(如字母't')并且避免将第二字符(如字母'h')输出到PSD 112。
响应于确定用户输入140对应于对第一字符和第二字符的组合的选择,键盘模块122可以使UI模块120向PSD 112输出包括第一字符和第二字符的组合(例如,短语'th')用于显示。如图1B所示,PSD 112将包括第一字符和第二字符的组合显示为编辑区域116C中的文本。
键盘模块122可以重复如上所述的一个或多个操作。例如,键盘模块122可以基于包括第一字符和第二字符的组合(例如,短语'th')的先前选择以及与键150相关联的字母(例如,'a')来确定短语(例如,Tha'),并将该短语输入到词典中,并且作为响应,接收单词“That”的指示。如图1C所示,键盘模块122可以使UI模块120在PSD 112和键150内显示与键150相关联的字符(例如,字母“a”)的图形指示152和基于建议的单词“that”确定的预测的下一个字母(例如,字母't')的图形指示154。
响应于键盘模块122确定用户输入150对应于包括与键150相关联的字符和预测的接下来的字母的组合,键盘模块122可以使UI模块120向PSD 112输出用于显示的包括与键150相关联字符和预测的接下来的字母的组合(例如,短语'at')。如图1C所示,作为响应,PSD 112作为在编辑区域116C中的文本显示建议的单词“that”。
通过在图形键盘的键内显示预测的接下来的字母,示例计算设备(例如,计算设备110)可以提供更有用和相关的建议,因为示例计算设备不是显示整个单词,而是一次显示建议单词的部分(例如,两个或更多个字符)。此外,由于示例计算设备在图形键盘的键内显示预测的建议单词的部分,因此示例计算设备的用户可以容易地找到并选择预测字母,而不是要求用户离开键并且通过单独的建议区域来搜索和选择所需的单词。以这种方式,本公开的技术可以通过减少用户搜索和选择预测字母的时间量以及减少计算设备键入单词所需的用户输入的数量来改善用户对于示例计算设备的体验。
尽管先前的示例应用于A键和T键,但是这样的示例可以基本上应用于图形键盘116B的任何键。此外,尽管图1A-C所示的示例描述了一次应用于单个键的技术(例如,图1B中的键126、图1C中的键150),这些示例可以基本上同时应用于图形键盘116B的多个键118上。另外,尽管前面的示例示出了PSD 112在键的右上区域中显示预测的接下来的字母的图形指示,但是预测的接下来的字母可以位于键内的任何合适的区域中,例如,在键内的左下角、左上角、右下角或另一个区域。
图2是示出根据本公开的一种或多种技术的如图1A中所示的计算设备110的一个示例的进一步细节的框图。下面在图1A的计算设备110的上下文中描述图2的计算设备200。在一些示例中,图2的计算设备200表示图1A的计算设备110的。图2仅示出了计算设备200的一个特定示例,并且计算设备200的许多其他示例可以在其他情况中使用,并且可以包括示例计算设备200中包括的组件的子集,或者可以包括图2中未示出的附加组件。
如图2的示例中所示,计算设备200包括存在敏感显示器212、一个或多个处理器240、一个或多个输入组件242、一个或多个通信单元244、一个或多个输出组件246以及一个或多个存储组件248。存在敏感显示器212包括显示组件202和存在敏感输入组件204。
计算设备200的一个或多个存储组件248被配置为存储UI模块220和键盘模块222。UI模块220包括文本输入模块226,并且键盘模块222包括语言模型(LM)模块224和空间模型(SM)模块228。另外,存储组件248被配置为存储词典数据存储器234A和阈值数据存储器234B。总的来说,数据存储器234A和234B在这里可以称为“数据存储器234”。
通信信道250可以互连组件202、204、212、240、242、244、246和248中的每一个以用于组件间通信(物理地、通信地和/或可操作地)。在一些示例中,通信信道250可以包括系统总线、网络连接、进程间通信数据结构或用于传送数据的任何其他方法。
计算设备200的一个或多个输入组件242可以接收输入。输入的示例是触觉、音频、图像和视频输入。在一个示例中,计算设备200的输入组件242包括存在敏感显示器、触敏屏幕、鼠标、键盘、语音响应系统、麦克风或用于检测来自人或机器的输入的任何其他类型的设备。在一些示例中,输入组件242包括一个或多个传感器组件,诸如一个或多个位置传感器(GPS组件、Wi-Fi组件、蜂窝组件)、一个或多个温度传感器、一个或多个移动传感器(例如,加速度计、陀螺仪)、一个或多个压力传感器(例如,气压计)、一个或多个环境光传感器以及一个或多个其他传感器(例如,麦克风、静态相机、摄像机、身体相机、眼镜或可操作地耦合到计算设备200的相机设备、红外接近传感器、湿度计,等等)。
计算设备200的一个或多个输出组件246可以生成输出。输出的示例是触觉、音频、静止图像和视频输出。在一个示例中,计算设备200的输出组件246包括存在敏感显示器、声卡、视频图形适配器卡、扬声器、阴极射线管(CRT)监视器、液晶显示器(LCD)或用于向人或机器生成输出的任何其他类型的设备。
计算设备200的一个或多个通信单元244可通过在一个或多个网络上发送和/或接收网络信号,经由一个或多个有线和/或无线网络与外部设备通信。例如,通信单元244可被配置为通过网络与远程计算系统通信,用于在图形键盘的键内显示建议单词的部分。模块220和/或222可以响应于经由通信单元244输出用于向远程计算系统传输的触摸事件序列经由通信单元244从远程计算系统接收字符序列的指示。通信单元244的示例包括网络接口卡(如以太网卡)、光学收发器、射频收发器、GPS接收器或可发送和/或接收信息的任何其他类型的设备。通信单元244的其他示例可以包括短波无线电设备、蜂窝数据无线电设备、无线网络无线电设备以及通用串行总线(USB)控制器。
计算设备200的存在敏感显示器212包括显示组件202和存在敏感输入组件204。显示组件202可以是由存在敏感显示器212显示信息的屏幕,并且存在敏感输入组件204可检测显示组件202处和/或附近的对象。作为一个示例范围,存在敏感输入组件204可以检测对象,例如在显示组件202的两英寸或更小内的手指或指示笔。存在敏感输入组件204可确定检测到对象的显示组件202的位置(如[x,y]坐标)。在另一示例范围中,存在敏感输入组件204可从显示组件202检测六英寸或更小的对象,并且其他范围也是可能的。存在敏感输入组件204可使用电容、电感和/或光学识别技术确定用户的手指选择的显示组件202的位置。在一些示例中,存在敏感输入组件204还使用如关于显示组件202所描述的触觉、音频或视频刺激向用户提供输出。在图2的示例中,存在敏感显示器212可以呈现用户界面(诸如用于在图形键盘的键内显示建议单词的部分的图形用户界面,如图1A-C所示)。
虽然被示为计算设备200的内部组件,但是存在敏感显示器212还可以表示与计算设备200共享数据路径以用于发送和/或接收输入和输出的外部组件。例如,在一个示例中,存在敏感显示器212表示位于计算设备200的外部封装(例如,移动电话上的屏幕)内并且物理连接到计算设备200的外部封装的计算设备200的内置组件。在另一示例中,存在敏感显示器212表示位于计算设备200的包装或外壳外部并且与计算设备200的包装或外壳物理分离的计算设备200的外部组件(例如,与计算设备200共享有线和/或无线数据路径的监视器、投影仪等)。
计算设备200的存在敏感显示器212可以从计算设备200的用户接收触觉输入。存在敏感显示器212可以通过检测来自用户的一个或多个轻击或非轻击手势(如用户用手指或手写笔触摸或指向存在敏感显示器212的一个或多个位置)来接收触觉输入的指示。存在敏感显示器212可以向用户呈现输出。存在敏感显示器212可以将输出呈现为图形用户界面(例如,图1A-C的116C的编辑区域),其可与计算设备200的各种功能块所提供的功能相关联。例如,存在敏感显示器212可以呈现在计算设备200处执行或可由计算设备200访问的计算平台、操作系统、应用或服务(例如,电子消息应用、导航应用、因特网浏览器应用、移动操作系统等)的组件的各种用户界面。用户可以与相应的用户界面交互以使计算设备200执行与一个或多个各种功能相关的操作。例如,UI模块220可以使存在敏感显示器212呈现与计算设备200的文本输入功能相关联的图形用户界面。计算设备200的用户可以查看呈现为与文本输入功能相关联的反馈的输出,并提供输入到存在敏感显示器212以使用文本输入功能撰写附加文本。
计算设备200的存在敏感显示器212可以检测作为来自计算设备200的用户的输入的二维和/或三维手势。例如,存在敏感显示器212的传感器可以检测在存在敏感显示器212的传感器的阈值距离内的用户的移动(例如,移动手、手臂、笔、手写笔等)。存在敏感显示器212可确定移动的二维或三维矢量表示,并且将矢量表示与具有多个维度的手势输入(例如,挥手、捏、拍、笔敲等)相关联。换句话说,存在敏感显示器212可以检测多维手势,而不需要用户在存在敏感显示器212输出用于显示的信息的屏幕或表面处或附近做出手势。相反,存在敏感显示器212可以检测在传感器处或附近执行的多维手势,该传感器可以或可以不位于存在敏感显示器212输出用于显示的信息的屏幕或表面附近。
一个或多个处理器240可实现功能和/或执行与计算设备200相关联的指令。处理器240的示例包括应用处理器、显示控制器、辅助处理器、一个或多个传感器集线器以及配置为用作处理器、处理单元或处理设备的任何其他硬件。模块220、222、224、226和228可由处理器240操作以执行计算设备200的各种动作、操作或功能。例如,计算设备200的处理器240可检索和执行由存储组件248存储的指令,其使得处理器240执行操作模块220、222、224、226和228。指令在由处理器240执行时可使计算设备200在存储组件248内存储信息。
计算设备200内的一个或多个存储组件248可以存储用于在计算设备200的操作期间进行处理的信息(例如,计算设备200可以存储在计算执行期间由模块220、222、224、226和228存取的数据。装置200)。在一些示例中,存储组件248是临时存储器,这意味着存储组件248的主要目的不是长期存储。计算设备200上的存储组件248可以被配置用于作为易失性存储器将信息短期存储,并且因此如果断电则不保留存储的内容。易失性存储器的示例包括随机存取存储器(RAM)、动态随机存取存储器(DRAM)、静态随机存取存储器(SRAM)以及本领域中已知的其他形式的易失性存储器。
在一些示例中,存储组件248还包括一个或多个计算机可读存储介质。在一些示例中,存储组件248包括一个或多个非暂时性计算机可读存储介质。存储组件248可以被配置为存储比通常由易失性存储器存储的信息量更大的信息量。存储组件248还可以被配置用于作为非易失性存储空间长期存储信息并且在电源开/关循环之后保留信息。非易失性存储器的示例包括磁性硬盘、光盘、软盘、闪存或电可编程存储器(EPROM)或电可擦除和可编程存储器(EEPROM)的形式。存储组件248可以存储与模块220、222、224、226和228以及数据存储器234相关联的程序指令和/或信息(例如,数据)。存储组件248可以包括被配置为存储与模块220、222、224、226和228以及数据存储器234相关联的数据或其他信息的存储器。
UI模块220类似于图1的计算设备110的UI模块120并且可以包括图1的计算设备110的UI模块120的所有功能。另外,UI模块220包括文本输入模块226,其执行用于管理计算设备200在存在敏感显示器212处提供的用于处理来自用户的文本输入的特定类型的用户界面的操作。UI模块220和文本输入模块226可以通过通信信道250发送信息,该信息使存在敏感显示器212的显示组件202呈现图形键盘,用户可以通过在存在敏感输入组件204处提供轻击和非轻击手势从该图形键盘提供文本输入(例如,一系列文本字符)。
键盘模块222可以包括图1的计算设备110的键盘模块122的所有功能,并且可以执行类似的文本输入操作。键盘模块122可以是独立应用、服务(例如,可从基于云的远程计算系统或服务器访问)或在计算设备110处执行的模块,并且在其他示例中,键盘模块122可以是其子组件。
阈值数据存储器234B可包括一个或多个基于距离或空间的阈值、概率阈值或键盘模块222用于推断键的选择是否自己选择第一字符或包括第一字符和预测的第二字符的组合的其他比较值。存储在阈值数据存储器234B中的阈值可以是可变阈值(例如,基于函数或查找表)或固定值(例如,在生产期间或通过操作平台更新而预编程)。例如,阈值数据存储器234B可包括第一量的压力或压力范围和第二量的压力或压力范围。键盘模块222可以将所接收的压力量与第一和第二阈值中的每一个进行比较。如果施加的压力量满足第一阈值(例如,在第一压力范围内),则键盘模块222可以增加仅包括与键相关联的字母的字符序列的概率或分值。如果施加的压力量满足第二阈值(例如,在第二压力范围内),则键盘模块222可以将包括与键相关联的字母和预测的接下来的字母的组合的字符序列的概率或分值增加超过第一量的第二量。如果施加的压力量既不满足第一阈值也不满足第二阈值(例如,在第一和第二范围之外),则键盘模块222可以降低包括与键相关联的字母的字符序列的概率或分值。
在另一个示例中,阈值数据存储器234B可以包括分值阈值。键盘模块222可以将与使用模块224和/或模块228确定的候选词相关联的分值与分值阈值进行比较。如果分值满足(例如,指示比分值阈值更可能的分值),则键盘模块222可以输出与候选词相关联的字符(例如,接下来的字母)。
在另一个示例中,阈值数据存储器234B可以包括手势输入定时阈值。键盘模块222可以将轻击手势之间的时间延迟与手势输入定时阈值进行比较。如果轻击手势之间的时间延迟满足(例如,小于),则键盘模块222可确定轻击手势是单个用户输入。然而,如果轻击手势之间的时间延迟不满足(例如,大于),则键盘模块222可以确定轻击手势为不同的用户输入。
SM模块228可以接收一系列触摸事件作为输入,并输出可能表示触摸事件的序列的字符或字符序列以及指示字符序列多么可能或以何精度定义触摸事件的确定度或空间模型分值。换句话说,SM模块228可执行识别技术以推断触摸事件和/或推断作为图形键盘的键处的选择或手势的触摸事件。键盘模块222可以使用从SM模块228输出的空间模型分值来确定模块222响应于文本输入而输出的一个或多个潜在词的总分值。
LM模块224可以接收字符序列作为输入,并且输出一个或多个候选词或词对(pair)作为LM模块224从词典数据存储器234A识别为对于语言上下文(例如,书面语言的句子)中的字符序列的潜在建议的字符序列。例如,LM模块224可以将语言模型概率分配给位于词典数据存储器234A的一个或多个候选词或词对,其包括与输入的字符序列相同的至少一些字符。分配给一个或多个候选词或词对中的每一个的语言模型概率表示,在接收由LM模块224分析的当前字符序列之前和/或之后,候选词或词对通常被发现在从存在敏感输入组件204检测到的文本输入生成的单词序列(例如,句子)之后、之前和/或之内定位的确定性程度或可能性程度。
词典数据存储器234A可以包括表示一种或多种书面语言的词典的一个或多个数据库(例如,哈希表、链表、排序的数组、图形等)。每个字典可以包括书面语言词汇表(例如,包括语法、俚语和口语单词使用)中的单词和单词组合的列表。键盘模块222的LM模块224可以通过将序列的各部分与词典数据存储器234A中的每个词进行比较,在词典数据存储器234A中对字符序列执行查找。LM模块224可以基于输入的字符序列与词典数据存储器234A中的每个单词之间的比较,将相似性系数(例如,Jaccard相似性系数)分配给词典数据存储器234A中的每个单词,并确定具有最大相似系数的来自词典数据存储器234A的一个或多个候选单词。换句话说,具有最大相似系数的一个或多个候选词可以首先表示词典数据存储器234A中具有与字符序列的拼写最密切相关的拼写的潜在词。LM模块224可以确定包括字符序列的部分或全部字符的一个或多个候选词,并确定具有最高相似系数的一个或多个候选词表示字符序列的潜在校正拼写。在一些示例中,具有最高相似系数的候选词匹配从一系列触摸事件生成的字符序列。例如,字符序列h-i-t-h-e-r-e的候选词可包括“hi”、“hit”、“here”、“hi there”和“hit here”。
LM模块224可以是n元语言模型。n元语言模型可以提供:基于序列(即,P(xi|xi-(n-1),...,xi-1))中的在前项目的项目的连续序列中的项目xi(字母或单词)的概率分布;或者,基于序列(即,P(xi|xi+1,...,xi+(n-1)))中的后续项目的项目连续序列中的项目xi的概率分布。类似地,n元语言模型可以提供:基于序列中的在前项目和序列(即,P(xi|xi-(n-1),...,xi+(n-1)))中的后续项目的项目连续序列中的项目xi概率分布。例如,二元语言模型(其中n=2的n元模型)可以提供单词“there”在序列(即句子)中跟随单词“hi”的第一概率和单词“here”在不同的句子中跟随“hit”这个词不同的概率。三元语言模型(其中n=3的n元模型)可以提供单词“here”在序列中接着两个单词“hey over”的概率。
响应于接收字符序列,LM模块224可以从词典数据存储器234A输出具有与序列的最高相似系数和最高语言模型分值的一个或多个单词和单词对。键盘模块222可以执行进一步的操作以确定最高等级的单词或单词对中的哪一个要输出到文本输入模块226作为最佳表示从文本输入模块226接收的触摸事件序列的字符序列。键盘模块222可以将从LM模块224输出的语言模型分值与从SM模块228输出的空间模型分值组合以得出总分值,该总分值指示由文本输入定义的触摸事件序列表示词典数据存储器234A中的每个最高等级的词或词对。
为了提供更有用和相关的键盘模块222的建议并且减少用户搜索要选择的键或建议的时间量,模块224和228可确定键盘模块222使得显示在由键盘模块222显示的图形键内的一个或多个候选词的预测字母。语言模块224可接收由键盘模块222显示的键的字符作为输入,并输出候选词。候选词可以表示LM模块224从词典数据存储器234A识别为对语言上下文(例如,书面语言的句子)中的键的输入字符的潜在建议的字符序列。基于键盘模块222确定由模块224和228确定并且与候选词相关联的分值满足由阈值数据存储器234B存储的分值阈值,键盘模块222可以在键盘模块222显示的键内显示紧跟着LM模块224确定的一个或多个候选词的拼写中的该键的字符的字母。
键盘模块222可以基于用来选择键盘模块222显示的键的用户输入来确定是否仅输出键盘模块222显示的该键的字符,或者是否连同紧跟候选词拼写中的该键字符的字母输出该键的字符。例如,键盘模块222可以基于在用户输入期间应用的由PSD 212检测的压力量和由阈值数据存储器234B存储的一个或多个压力阈值的比较来确定是否输出由键盘模块222显示的键的字符和紧跟在候选词的拼写中的该键的字符之后的字母。在另一示例中,键盘模块222可基于在用户输入期间由PSD 212检测到的滑动手势确定是否输出由键盘模块222显示的键的字符和紧接在候选词的拼写中的该键的字符之后的字母。还可以使用语言和空间信息的任何其他组合,包括用于确定用户输入是否对应于单独选择第一字符或者选择第一字符和第二字符的组合的机器学习功能。以这种方式,根据所描述的技术操作的计算设备可以提供更有用和相关的建议,因为示例计算设备一次显示建议单词的两个或更多个字符,而不是整个单词。
图3是示出根据本公开的一种或多种技术的输出图形内容以供在远程设备处显示的示例计算设备的概念图。通常,图形内容可包括可以输出用于显示的任何视觉信息,例如文本、图像、一组运动图像等。图3中所示的示例包括计算设备300、存在敏感显示器301、通信单元310、投影仪320、投影仪屏幕322、平板设备326和视觉显示设备330。尽管出于图1A-C中的示例的目的而示出为独立计算设备,但是诸如计算设备110的计算设备通常可以指包括用于执行软件指令的处理器或其他合适的计算环境的任何组件或系统,并且例如不需要包括存在敏感显示器。
如图3的示例中所示,计算设备300可以是包括关于图2中的处理器240所描述的功能的处理器。在这样的示例中,计算设备300可以通过通信信道303A可操作地耦合到存在敏感显示器301,通信信道303A可以是系统总线或其他合适的连接。计算设备300还可以通过通信信道303B可操作地耦合到通信单元310,如下面进一步描述,通信信道303B也可以是系统总线或其他合适的连接。尽管在图3中作为示例单独示出,计算设备300可以通过任意数量的一个或多个通信信道可操作地耦合到存在敏感显示器301和通信单元310。
在一些示例中,例如先前通过如图1A-C所示的计算设备所示,计算设备300可以是便携式或移动设备,诸如移动电话(包括智能电话)、膝上型计算机等。在一些示例中,计算设备300可以是台式计算机、平板计算机、智能电视平台、相机、个人数字助理(PDA)、服务器、大型机等。
存在敏感显示器301象如图1A-C所示的PSD那样可以包括显示组件302和存在敏感输入组件304。显示组件302可以例如从计算设备300接收数据并显示图形内容。在一些示例中,存在敏感输入组件304可以使用电容、电感和/或光学识别技术在存在敏感显示器301处确定一个或多个用户输入(例如,连续手势、多点触摸手势、单点触摸手势等),并使用通信信道303A向计算设备300发送这种用户输入的指示。在一些示例中,存在敏感输入组件304可以物理地定位在显示组件302的顶部,使得当用户将输入单元定位在由显示组件302显示的图形元素上时,存在敏感输入组件304的位置对应于显示图形元素的显示组件302的位置。
如图3所示,计算设备300还可以包括通信单元310和/或可操作地与通信单元310耦合。通信单元310可以包括如图2所述的通信单元244的功能。通信单元310的示例可以包括网络接口卡、以太网卡、光学收发器、射频收发器或可以发送和接收信息的任何其他类型的设备。这种通信单元的其他示例可以包括蓝牙、3G、4G、LTE和Wi-Fi无线电设备、通用串行总线(USB)接口等。计算设备300还可以包括一个或多个其他设备和/或可操作地与一个或多个其他设备耦合,一个或多个其他设备例如是图3中为了简洁和说明的目的而未示出的输入设备、输出设备、存储器、存储设备等。
图3还示出了投影仪320和投影仪屏幕322。投影设备的其他这样的示例可以包括电子白板、全息显示设备和用于显示图形内容的任何其他合适的设备。投影仪320和投影仪屏幕322可以包括使得各个设备能够与计算设备300通信的一个或多个通信单元。在一些示例中,一个或多个通信单元可以实现投影仪320和投影仪屏幕322之间的通信。投影仪320可以接收来自计算设备300的包括图形内容的数据。投影仪320响应于接收数据可以将图形内容投影到投影仪屏幕322上。在一些示例中,投影仪320可以使用光学识别或其他合适的技术确定在投影仪屏幕上的一个或多个用户输入(例如,连续手势、多点触摸手势、单点触摸手势等),并使用一个或多个通信单元向计算设备300发送这种用户输入的指示。
在一些示例中,投影仪屏幕322可以包括存在敏感显示器324。存在敏感显示器324可以包括如本公开中所描述的UI模块120的功能子集或所有功能。在一些示例中,存在敏感显示器324可以包括附加功能。投影仪屏幕322(例如,电子白板)可以从计算设备300接收数据并显示图形内容。在一些示例中,存在敏感显示器324可以使用电容、电感和/或光学识别技术在投影仪屏幕322处确定一个或多个用户输入(例如,连续手势、多点触摸手势、单点触摸手势等),并且使用一个或多个通信单元向计算设备300发送这种用户输入的指示。
图3还示出了平板设备326和视觉显示设备330。平板设备326和视觉显示设备330均可以包括计算和连接能力。平板设备326的示例可以包括电子阅读器设备、可转换笔记本设备、混合平板设备等。视觉显示设备330的示例可以包括电视、计算机监视器等。如图3所示,平板设备326可以包括存在敏感显示器328。视觉显示设备330可以包括存在敏感显示器332。存在敏感显示器328、332可以包括在本公开中描述的UI设备120的功能子集或所有功能。在一些示例中,存在敏感显示器328、332可以包括附加功能。在任何情况下,存在敏感显示器332例如可以从计算设备300接收数据并显示图形内容。在一些示例中,存在敏感显示器332可以使用电容、电感和/或光学识别技术在投影仪屏幕上确定一个或多个用户输入(例如,连续手势、多点触摸手势、单点触摸手势等),并且使用一个或多个通信单元向计算设备300发送这种用户输入的指示。
如上所述,在一些示例中,计算设备300可以输出图形内容以在存在敏感显示器301处显示,该存在敏感显示器301通过系统总线或其他合适的通信信道耦合到计算设备300。计算设备300还可输出图形内容以供在一个或多个远程设备处显示,一个或多个远程设备例如是投影仪320、投影仪屏幕322、平板设备326和视觉显示设备330。例如,计算设备300可执行一个或多个指令以根据本公开的技术生成和/或修改图形内容。计算设备300可以将包括图形内容的数据输出到计算设备300的通信单元,例如通信单元310。通信单元310可以将数据发送到一个或多个远程设备,例如投影仪320、投影仪屏幕322、平板设备326和/或视觉显示设备330。以这种方式,计算设备300可以输出图形内容以便在一个或多个远程设备上显示。在一些示例中,远程设备中的一个或多个可以在包括在和/或可操作地耦合到相应远程设备的存在敏感显示器处输出图形内容。
在一些示例中,计算设备300可以不在可操作地耦合到计算设备300的存在敏感显示器301处输出图形内容。在其他示例中,计算设备300可以输出图形内容以在存在敏感显示器301处并且在一个或多个远程设备处显示,存在敏感显示器301通过通信信道303A耦合到计算设备300。在这样的示例中,图形内容可以基本上同时在每个相应设备处显示。例如,可以通过通信等待时间引入一些延迟,以将包括图形内容的数据发送到远程设备。在一些示例中,由计算设备300生成的图形内容和用于在存在敏感显示器301处显示的输出可以与用于在一个或多个远程设备处显示的图形内容显示输出不同。
计算设备300可以使用任何合适的通信技术来发送和接收数据。例如,计算设备300可以使用网络链路312A可操作地耦合到外部网络314。图3中所示的每个远程设备都可以通过相应的网络链路312B、312C和312D之一可操作地耦合到网络外部网络314。外部网络314可以包括网络集线器、网络交换机、网络路由器等,它们可操作地相互耦合,从而提供在计算设备300和图3所示的远程设备之间的信息交换。在一些示例中,网络链路312A-D可以是以太网、异步传输模式或其他网络连接。这种连接可以是无线和/或有线连接。
在一些示例中,计算设备300可以使用直接设备通信318可操作地耦合到图3中包括的一个或多个远程设备。直接设备通信318可以包括那些计算设备300使用有线或无线通信由此直接与远程设备发送和接收数据的通信。也就是说,在直接设备通信318的一些示例中,计算设备300发送的数据在被远程设备接收之前可不被一个或多个附加设备转发,并且反之亦然。直接设备通信318的示例可以包括蓝牙、近场通信、通用串行总线、Wi-Fi,红外线等。图13中示出的一个或多个远程设备可以通过通信链路316A-D与计算设备300可操作地耦合。在一些示例中,通信链路312A-D可以是使用蓝牙、近场通信、通用串行总线、红外线等的连接。这种连接可以是无线和/或有线连接。
根据本公开的技术,计算设备300可以可操作地耦合到PSD 301、投影仪屏幕322、平板设备326和PSD 332中的一个或多个,计算设备300使用外部网络314在图形键盘的单个键内显示所述设备预测的将从图形键盘的后续输入中选择的两个或更多个接下来的字母。例如,计算设备300可以允许用户在图形键盘的单个键内选择计算设备300预测的将从图形键盘的后续输入中选择的两个或更多个接下来的字母的建议,而不是用户在图形键盘之外选择整个候选词的建议,然后必须在投影仪屏幕322的建议区域和图形键盘区域之间跋涉(wading)。更具体地,投影仪屏幕322可以在投影仪屏幕322处显示的图形键盘的单个键内显示一个或多个预测的接下来的字母。响应于存在敏感显示器324接收由用户选择图形键盘的单个键的输入,计算设备300可以确定输入是选择通常仅与单个键相关联的字符还是通常与单个键相关联的字符和一个或多个预测的接下来的字母。
图4A-4B是示出根据本公开的一种或多种技术的图1A中所示的计算设备110的第一示例的进一步细节的概念图。如图所示,PSD 412可以是图1A的PSD 112的示例。例如,PSD412可以包括在图1A的计算设备110中,并且PSD 412可以用于UI模块120和键盘模块122,如图1A所示。如图所示,PSD 412可以显示用户界面414,其可以基本上类似于图1A的用户界面114。例如,用户界面414可以包括:输出区域416A,其是图1A的输出区域116A的示例;图形键盘416B,其是图1A的图形键盘116B的示例;编辑区域416C,其是图1A的编辑区域116C的示例;以及,建议区域416D,其是图1的建议区域116D的示例。
在图4A的示例中,PSD 412接收选择图形键盘416B的键426的用户输入440的指示。如图4A所示,用户输入440包括:在PSD 412的位置处的第一轻击手势,该位置在键426内并且基本上在第一字符(例如,'T')的图形指示上;以及,在PSD 412的位置处的第二轻击手势,该位置在键426内并且基本上在第二字符(例如,'h')的图形指示上。更具体地,当用户将第一手指基本上放置在第一字符(例如,“T”)的图形指示上并且将第二手指基本上放置在第二字符(例如,'h')的图形指示上时,PSD 412可以接收用户输入440的指示。
尽管图4A示出了与第二手指在键426内的放置同时的第一手指在键426内的放置,但是一些示例允许PSD 412在用户提供不同时的多个轻击手势时接收用户输入的指示。例如,PSD 412和/或计算设备110可以使用手势输入定时阈值。更具体地,当第一手势和第二手势之间的时间差或延迟满足(例如,小于)手势输入时间阈值时,计算设备110的键盘模块122可以确定第一手势和第二手势形成单个用户输入。
响应于接收到用户输入440的指示,键盘模块122可以确定用户输入440是否对应于单独选择第一字符或者选择第一字符和第二字符的组合。例如,键盘模块122可基于与用户输入440相关联的轻击数量(例如,不同的向下触摸和向上触摸事件)确定用户输入440是否仅对应于第一字符(例如,字母't')或包括第一字符和第二字符的组合(例如,短语'th')。更具体地,响应于键盘模块122从PSD 412接收指示用户输入440包括与在键426内放置第二手指基本上同时(例如,在手势输入定时阈值内)的在键内放置第一手指的信息,键盘模块122可以确定用户输入440对应于包括第一字符和第二字符的组合(例如,短语'th')。
在图4A的示例中,响应于确定用户输入440对应于对第一字符和第二字符的组合的选择,键盘模块122可以使UI模块120向PSD 412输出用于在PSD 412上显示的包括第一字符和第一字符的组合(例如,短语'th')。如图4A所示,作为响应,PSD 412将包括第一字符和第二字符的组合显示为编辑区域416C中的文本。
然而,在图4B的示例中,PSD 412接收选择图形键盘416B的键426的用户输入442的指示。如图4B所示,用户输入442包括仅在键426内的第一轻击手势。更具体地,用户可以仅将第一手指放置在键426内而不用任何其他手指提供任何其他手势。
响应于接收到用户输入442的指示,键盘模块122可以确定用户输入442是对应于单独选择第一字符还是选择第一字符和第二字符的组合。例如,键盘模块122可基于与用户输入442相关联的轻击数量确定用户输入442是仅对应于第一字符(例如,字母't')还是包括第一字符和第二字符的组合(例如,短语'th')。更具体地,响应于键盘模块122从PSD 412接收指示用户输入442包括仅在键426内放置第一手指的信息,键盘模块122可确定用户输入442对应于单独的第一字符(例如,字母't')。
在图4B的示例中,响应于确定用户输入442对应于单独选择第一字符((例如,字母't'),键盘模块122可以使UI模块120向PSD 412仅输出用于在PSD 412上显示的第一字符。如图4B所示,作为响应,PSD 412仅在编辑区域416C中将第一字符显示为文本。
尽管图4A-4B示出了具有两个手势的用户输入,可使用任何合适数量的手势。例如,包括三个轻击的用户输入可指示对预测字母的选择,并且包括一个或两个轻击的用户输入可指示通常与键相关联的字符的选择,包括四个轻击的用户输入可指示对预测字母的选择,并且包括一个、两个或三个轻击的用户输入可指示通常与键相关联的字符的选择,等等。另外,尽管图4A-4B示出了左手的中指和食指在键426内的放置,但是一些示例允许用户使用手指和/或手写笔的其他组合。例如,用户可以通过将手写笔与PSD 512接触而不是使用用户左手的右食指来使用手写笔来应用轻击手势。在另一情况中,用户可以使用用户右手的食指而不是使用用户左手的食指来应用轻击手势。
图5A-5B是示出根据本公开一种或多种技术的图1A所示的计算设备110的第二示例的进一步细节的概念图。如图示,PSD 512可以是图1A的PSD 112的示例。例如,PSD 512可包括在图1A的计算设备110中,并且PSD 512可用于UI模块120和键盘模块122,如图1A中所示。如图所示,PSD 512可显示用户界面514,其可以基本上类似于图1A的用户界面114。例如,用户界面514可包括:输出区域516A,其是图1A的输出区域116A的示例;图形键盘516B,其是图1A的图形键盘116B的示例;编辑区域516C,其是图1A的编辑区域116C的示例;以及,建议区域516D,其是图1的建议区域116D的示例。
在图5A的示例中,PSD 512接收选择图形键盘516B的键526的用户输入540的指示。如图5A所示,用户输入540包括键526内的滑动手势,其从键526内的第一字符(例如,'T')的图形指示朝向键526内的第二字符(例如,'h')的图形指示移动。更具体地,用户可以将手指基本上放置在第一字符(例如,'T')的图形指示上并且可以在保持与PSD 512的接触的同时朝向在键526内的第二字符(例如,'h')的图形指示滑动手指。
响应于接收到用户输入540的指示,键盘模块122可确定用户输入540是对应于单独选择第一字符还是选择第一字符和第二字符的组合。例如,键盘模块122可基于与用户输入540相关联的滑动方向确定用户输入540是仅对应于第一字符(例如,字母't')还是包括第一字符和第二字符的组合(例如,短语'th')。更具体地,响应于键盘模块122从PSD 512接收指示用户输入540包括从键526内的第一字符(例如,'T')的图形指示朝向键526内的第二字符(例如'h')的图形指示移动的在键526内的滑动手势的信息,键盘模块122可确定用户输入540对应于包括第一字符和第二字符的组合(例如,短语'th')。
在图5A的示例中,响应于确定用户输入540对应于对第一字符和第二字符的组合的选择,键盘模块122可以使UI模块120向PSD 512输出用于在PSD 512上显示的包括第一字符和第一字符的组合(例如,短语'th')。如图5A所示,作为响应,PSD 512将包括第一字符和第二字符的组合显示为编辑区域516C中的文本。
在图5B的示例中,然而,PSD 512接收选择图形键盘516B的键526的用户输入542的指示。如图5B所示,用户输入542包括键526内的轻击手势而没有滑动手势。更具体地,用户可以将手指放置在键526内并且在不应用滑动手势的情况下移动手指远离PSD 516。
响应于接收到用户输入542的指示,键盘模块122可以确定用户输入542是对应于单独选择第一字符还是选择第一字符和第二字符的组合。例如,键盘模块122可基于与用户输入540相关联的滑动方向确定用户输入542是仅对应于第一字符(例如,字母't')还是包括第一字符和第二字符的组合(例如,短语'th')。更具体地,响应于键盘模块122从PSD 512接收用户输入542包括键526内的轻击手势而没有滑动手势的指示,键盘模块122可以确定用户输入542仅对应于第一字符(例如,字母't')。在另一示例中,响应于键盘模块122从PSD512接收用户输入542包括键526内的轻击手势以及从在键526内的第一字符(例如,'T')的图形指示远离键526内的第二字符(例如,'h')的图形指示移动的滑动手势的指示,键盘模块122可以确定用户输入542对应于单独的第一字符(例如,字母't')。
在图5B的示例中,响应于确定用户输入542对应于单独选择第一字符(例如,字母't'),键盘模块122可以使UI模块120向PSD 512仅输出用于在PSD 512上显示的第一字符。如图5B所示,作为响应,PSD 512在编辑区域516C中仅将第一字符显示为文本。
尽管图5A-5B示出了左手的食指在键526内的放置,一些示例允许用户使用手指和/或手写笔的其他组合。例如,用户可以通过将手写笔与PSD 512接触而不是使用用户左手的食指来使用手写笔应用滑动手势。在另一情况中,用户可以使用用户右手的食指而不是使用用户左手的食指来应用滑动手势。
图6A-6B是示出根据本公开的一种或多种技术的图1A中所示的计算设备110的第三示例的进一步细节的概念图。如图所示,PSD 612可以是图1A的PSD 112的示例。例如,PSD612可以包括在图1的计算设备110中,并且PSD 612可以用于UI模块120和键盘模块122,如图1A中所示。如图所示,PSD 612可以显示用户界面614,其可以基本上类似于图1A的用户界面114。例如,用户界面614可以包括:输出区域616A,其是图1A的输出区域116A的示例;图形键盘616B,其是图1A的图形键盘116B的示例;编辑区域616C,其是图1A的编辑区域116C的示例;以及,建议区域616D,其是图1的建议区域116D的示例。
在图6A的示例中,PSD 612接收选择图形键盘616B的键626的用户输入640的指示。如图6A所示,用户输入640包括在键626内以第一压力量施加的轻击手势。更具体地,用户可以将手指基本上放置在第一字符的图形指示上(例如,'T'),并且在这样做时,在键626处向PSD 612施加第一量的压力。
响应于接收到用户输入640的指示,键盘模块122可确定用户输入640是对应于单独选择第一字符还是选择第一字符和第二字符的组合。例如,键盘模块122可基于与用户输入640相关联的压力量确定用户输入640是仅对应于第一字符(例如,字母't')还是包括第一字符和第二字符的组合(例如,短语'th')。更具体地,响应于键盘模块122从PSD 612接收包括满足(例如,超出或在一定范围内等)压力阈值的第一量的压力的用户输入640的指示,键盘模块122可确定用户输入640对应于包括第一字符和第二字符(例如,短语'th')的组合。压力阈值可以是压力值或压力值范围。在一些示例中,可由计算设备110自动确定压力阈值。在一些示例中,压力阈值可以是用户选择的。
在图6A的示例中,响应于确定用户输入640对应于对第一字符和第二字符的组合的选择,键盘模块122可以使UI模块120向PSD 612输出用于在PSD 612上显示的包括第一字符和第二字符的组合(例如,短语'th')。如图6A所示,作为响应,PSD 612将包括第一字符和第二字符的组合显示为编辑区域616C中的文本。
然而,在图6B的示例中,PSD 612接收选择图形键盘616B的键626的用户输入642的指示。如图6B所示,用户输入642包括在键626内以第二压力量施加的轻击手势。更具体地,用户可以将手指基本上放置在第一字符(例如,'T')的图形指示上并在键626处对PSD 612施加第二压力。
响应于接收到用户输入642的指示,键盘模块122可确定用户输入642是对应于单独选择第一字符还是选择第一字符和第二字符的组合。例如,键盘模块122可基于与用户输入642相关联的压力量确定用户输入642是仅对应于第一字符(例如,字母't')还是包括第一字符和第二字符的组合(例如,短语'th')。更具体地,响应于键盘模块122从PSD 612接收用户输入640包括不满足(例如,不超出或在范围外等)压力阈值的第二压力量的指示,键盘模块122可以确定用户输入642仅对应于第一字符(例如,字母't')。
在图6B的示例中,响应于确定用户输入642对应于单独选择第一字符(例如,字母't'),键盘模块122可以使UI模块120向PSD 612输出用于在PSD 612上显示的仅仅第一字符。如图6B所示,作为响应,PSD 612仅在编辑区域616C中将第一字符显示为文本。
尽管图6A-6B示出了左手的食指在键626内的放置,但是一些示例允许用户使用手指和/或手写笔的其他组合。例如,用户可以通过将手写笔与PSD 612接触而不是使用用户左手的食指来使用手写笔施加一定量的压力。在另一个情况中,用户可以使用用户右手的食指而不是使用用户左手的食指来施加一定量的压力。另外,尽管图6A-6B示出了满足压力阈值的较高压力(例如,第一量压力)和不满足压力阈值的较低压力(例如,第二量压力),但是在其他示例中,较低压力可以满足压力阈值,并且较高的压力可能不满足压力阈值。
图7是示出根据本公开的一种或多种技术的示例计算设备的示例操作的流程图,该示例计算设备被配置为预测接下来的字母并在图形键盘的键内显示它们。图7的过程可以由例如图1A的计算设备110的计算设备的一个或多个处理器执行。图7的过程的动作在一些示例中可以以任何顺序重复、省略和/或执行。仅出于说明的目的,下面在图1A的计算设备110和图2的计算设备210的上下文中描述图7。
在图7的示例中,计算设备110输出(700)用于显示的包括一组键的图形键盘,该组键包括与第一字符相关联的第一键。例如,图1A的PSD 11可以显示具有键118的图形键盘116B。在该示例中,PSD 112可以显示与字符'T'相关联的键126。
计算设备110确定(710)包括第一字符的至少一个候选词。例如,计算设备110的键盘模块122可把字符'T'输出给语言模式模块如图2的LM模块224,然后接收包括字符'T'的候选词(例如,“That”)。计算设备110确定(720)与该至少一个候选词相关联的分值,该分值指示通过该组键的一个或多个的一个或多个后续选择输入至少一个候选词的概率。例如,响应于计算设备110的键盘模块122将字符符'T'输出给语言模式模块,计算设备110可以从语言模式模块接收与至少一个候选词相关联的分值。计算设备730确定(730)与至少一个候选词相关联的分值是否满足阈值。例如,计算设备110可以确定与至少一个候选词相关联的分值是否指示与由阈值指示的概率相比较将选择至少一个候选词的更高的概率。
响应于计算设备110确定与至少一个候选词相关联的分值满足阈值(730的“满足”),计算设备110确定(740)该至少一个候选词的第二字符。例如,计算设备110可以确定在至少一个候选词的拼写中的紧跟第一字符之后的字符是第二字符。计算设备输出(750)用于在第一键内显示的第一字符的图形指示和第二字符的图形指示。例如,PSD 112在键126内显示第一字符(例如,'T')的图形指示和第二字符(例如,'h')的图形指示。
计算设备110接收(760)选择第一键的输入。例如,PSD 112接收图1B的用户输入140。在另一示例中,PSD 112接收图1C的用户输入142。计算设备110确定(770)选择第一键的输入是对应于第一字符还是对应于第一和第二字符的组合。例如,响应于PSD 112接收图1B的用户输入140,计算设备110确定用户输入140选择第一和第二字符的组合。更具体地,计算设备110的键盘模块122可以基于与用户输入140相关联的轻击量、与用户输入140相关联的滑动方向、与用户输入相关联的压力量或与键126的选择相关联的其他特征或参数来确定用户输入140选择第一和第二字符的组合。
在另一示例中,响应于PSD 112接收图1C的用户输入142,计算设备110确定用户输入142仅选择第一字符。更具体地,计算设备110的键盘模块122可基于与用户输入142相关联的轻击量、与用户输入142相关联的滑动方向、与用户输入相关联的压力量或与键126的选择相关联的其他特征或参数来确定用户输入142单独选择第一字符。
响应于计算设备110确定与至少一个候选词相关联的分值不满足阈值(730的“不满足”),计算设备110输出(780)用于在第一键内显示的第一字符的图形指示。例如,计算设备110仅在键112内输出用于在PSD 112上显示的仅仅第一字符(例如,'T')的图形指示。计算设备110避免(790)输出第二图形指示的图形指示。例如,计算设备110在键126内输出用于在PSD 112上显示的第一字符(例如,'T')的图形指示,而没有第二字符(例如,'h')的图形指示。
以下编号的子句可以说明本公开的一个或多个方面:
子句1.一种方法,包括:计算设备输出用于显示的图形键盘,所述图形键盘包括多个键,所述多个键包括与第一字符相关联的第一键;所述计算设备确定包括所述第一字符的至少一个候选词;所述计算设备确定与所述至少一个候选词相关联的分值,所述分值指示通过所述多个键中的一个或多个的一个或多个后续选择输入所述至少一个候选词的概率;以及,响应于确定与所述至少一个候选词相关联的所述分值满足阈值:所述计算设备基于所述至少一个候选词的拼写确定所述至少一个候选词的第二字符,其中,在所述至少一个候选词的所述拼写中所述第二字符紧跟在所述第一字符之后;以及,由所述计算设备输出用于在所述第一键内显示的所述第一字符的图形指示和所述第二字符的图形指示。
子句2.根据子句1所述的方法,还包括:在输出所述第一字符的所述图形指示和所述第二字符的所述图形指示之后,由所述计算设备接收选择所述第一键的输入;以及,通过所述计算设备确定选择所述第一键的所述输入是对应于单独的所述第一字符还是对应于由所述第二字符跟随的所述第一字符。
子句3.根据子句1-2的任何组合所述的方法,还包括:所述计算设备确定选择所述第一键的所述输入是所述第一键内的单击手势还是包括所述第一键内的第一点击手势和所述第一键内的第二点击手势的组合;以及,响应于确定选择所述第一键的所述输入是包括所述第一键内的所述第一点击手势和所述第一键内的所述第二点击手势的组合,由所述计算设备输出用于显示的所述第一字符和所述第二字符。
子句4.根据子句1-3的任何组合所述的方法,还包括:响应于确定选择所述第一键的所述输入是所述第一键内的所述单击手势,由所述计算设备输出用于显示的所述第一字符。
子句5.根据子句1-4的任何组合所述的方法,还包括:所述计算设备确定选择所述第一键的所述输入是否是所述第一键内朝向所述第二字符的图形指示移动的滑动手势;以及,响应于确定选择所述第一键的所述输入是所述第一键内朝向所述第二字符的图形指示移动的所述滑动手势,由所述计算设备输出用于显示的所述第一字符和所述第二字符。
子句6.根据子句1-5的任何组合所述的方法,还包括:响应于确定选择所述第一键的所述输入不是所述第一键内朝向所述第二字符的图形指示移动的所述滑动手势,由所述计算设备输出用于显示的所述第一字符。
子句7.根据子句1-6的任何组合所述的方法,还包括:所述计算设备确定选择所述第一键的所述输入是否满足压力阈值;以及,响应于确定选择所述第一键的所述输入满足所述压力阈值,由所述计算设备输出用于显示的所述第一字符和所述第二字符。
子句8.根据子句1-7的任何组合所述的方法,还包括:响应于确定选择所述第一键的所述输入不满足所述压力阈值,由所述计算设备输出用于显示的所述第一字符。
子句9.根据子句1-8中任何组合所述的方法,还包括:响应于确定与所述至少一个候选词相关联的所述分值不满足所述阈值:所述计算设备输出用于在第一键内显示的所述第一字符的所述图形指示;以及,所述计算设备避免输出所述第二图形指示的所述图形指示。
子句10.一种计算设备,包括:存在敏感显示器;至少一个处理器;以及用于存储指令的存储器,所述指令在由所述至少一个处理器执行时使所述至少一个处理器:输出用于在所述存在敏感显示器处显示的图形键盘,所述图形键盘包括多个键,所述多个键包括与第一字符相关联的第一键;确定包括所述第一字符的至少一个候选词;确定与所述至少一个候选词相关联的分值,所述分值指示通过所述多个键中的一个或多个的一个或多个后续选择输入所述至少一个候选词的概率;以及,响应于确定与所述至少一个候选词相关联的所述分值满足阈值:基于所述至少一个候选词的拼写确定所述至少一个候选词的第二字符,其中,在所述至少一个候选词的所述拼写中所述第二字符紧跟在所述第一字符之后;以及,输出用于在所述第一键内显示的所述第一字符的图形指示和所述第二字符的图形指示。
子句11.根据子句10所述的计算设备,其中,所述指令在被执行时使得所述至少一个处理器:在输出所述第一字符的所述图形指示和所述第二字符的所述图形指示之后,接收选择所述第一键的输入;以及,确定选择所述第一键的所述输入是对应于单独的所述第一字符还是对应于跟随了所述第二字符的所述第一字符。
子句12.根据子句10-11的任何组合所述的计算设备,其中,所述指令在被执行时使得所述至少一个处理器:确定选择所述第一键的所述输入是所述第一键内的单击手势还是包括所述第一键内的第一点击手势和所述第一键内的第二点击手势的组合;以及,响应于确定选择所述第一键的所述输入是包括所述第一键内的所述第一点击手势和所述第一键内的所述第二点击手势的组合,输出用于在所述存在敏感显示器处显示的所述第一字符和所述第二字符。
子句13.根据子句10-12的任何组合所述的计算设备,其中,所述指令在被执行时使得所述至少一个处理器:响应于确定选择所述第一键的所述输入是所述第一键内的所述单击手势,输出用于在所述存在敏感显示器处显示的所述第一字符。
子句14.根据子句10-13的任何组合所述的计算设备,其中,所述指令在被执行时使得所述至少一个处理器:确定选择所述第一键的所述输入是否是所述第一键内朝向所述第二字符的图形指示移动的滑动手势;以及,响应于确定选择所述第一键的所述输入是所述第一键内朝向所述第二字符的图形指示移动的滑动手势,输出用于在所述存在敏感显示器处显示的所述第一字符和所述第二字符。
子句15.根据子句10-14的任何组合所述的计算设备,其中,所述指令在被执行时使得所述至少一个处理器:响应于确定选择所述第一键的所述输入不是所述第一键内朝向所述第二字符的图形指示移动的所述滑动手势,输出用于在所述存在敏感显示器处显示的所述第一字符。
子句16.根据子句10-15的任何组合所述的计算设备,其中,所述指令在被执行时使得所述至少一个处理器:确定选择所述第一键的所述输入是否满足压力阈值;以及,响应于确定选择所述第一键的所述输入满足所述压力阈值,输出用于在所述存在敏感显示器处显示的所述第一字符和所述第二字符。
子句17.根据子句10-16的任何组合所述的计算设备,其中,所述指令在被执行时使得所述至少一个处理器:响应于确定选择所述第一键的所述输入不满足所述压力阈值,输出用于在所述存在敏感显示器处显示的所述第一字符。
子句18.根据子句10-17的任何组合所述的计算设备,其中,所述指令在被执行时使得所述至少一个处理器:响应于确定与所述至少一个候选词相关联的所述分值不满足所述阈值:输出用于在第一键内显示的所述第一字符的所述图形指示;以及,避免输出所述第二图形指示的所述图形指示。
子句19.一种编码有指令的计算机可读存储介质,所述指令当由计算设备的至少一个处理器执行时,使所述至少一个处理器:输出用于显示的图形键盘,所述图形键盘包括多个键,所述多个键包括与第一字符相关联的第一键;确定包括所述第一字符的至少一个候选词;确定与所述至少一个候选词相关联的分值,所述分值指示通过所述多个键中的一个或多个的一个或多个后续选择输入所述至少一个候选词的概率;以及,响应于确定与所述至少一个候选词相关联的所述分值满足阈值:基于所述至少一个候选词的拼写确定所述至少一个候选词的第二字符,其中,在所述至少一个候选词的所述拼写中所述第二字符紧跟在所述第一字符之后;以及,输出用于在所述第一键内显示的所述第一字符的图形指示和所述第二字符的图形指示。
子句20.根据子句19所述的计算机可读存储介质,其中,所述指令在被执行时使得所述至少一个处理器:在输出所述第一字符的所述图形指示和所述第二字符的所述图形指示之后,接收选择所述第一键的输入;以及,确定选择所述第一键的所述输入是对应于单独的所述第一字符还是对应于跟随了所述第二字符的所述第一字符。
子句21.根据子句19-20的任何组合所述的计算机可读存储介质,其中,所述指令在被执行时使得所述至少一个处理器:确定选择所述第一键的所述输入是所述第一键内的单击手势还是包括所述第一键内的第一点击手势和所述第一键内的第二点击手势的组合;以及,响应于确定选择所述第一键的所述输入是包括所述第一键内的所述第一点击手势和所述第一键内的所述第二点击手势的组合,输出用于显示的所述第一字符和所述第二字符。
子句22.根据子句19-21的任何组合所述的计算机可读存储介质,其中,所述指令在被执行时使得所述至少一个处理器:响应于确定选择所述第一键的所述输入是所述第一键内的所述单击手势,输出用于显示的所述第一字符。
子句23.根据子句19-22的任何组合所述的计算机可读存储介质,其中,所述指令在被执行时使得所述至少一个处理器:确定选择所述第一键的所述输入是否是所述第一键内朝向所述第二字符的图形指示移动的滑动手势;以及,响应于确定选择所述第一键的所述输入是所述第一键内朝向所述第二字符的图形指示移动的所述滑动手势,输出用于显示的所述第一字符和所述第二字符。
子句24.根据子句19-23的任何组合所述的计算机可读存储介质,其中,所述指令在被执行时使得所述至少一个处理器:响应于确定选择所述第一键的所述输入不是所述第一键内朝向所述第二字符的图形指示移动的所述滑动手势,输出用于显示的所述第一字符。
子句25.根据子句19-24的任何组合所述的计算机可读存储介质,其中,所述指令在被执行时使得所述至少一个处理器:确定选择所述第一键的所述输入是否满足压力阈值;以及,响应于确定选择所述第一键的所述输入满足所述压力阈值,输出用于显示的所述第一字符和所述第二字符。
子句26.根据子句19-25的任何组合所述的计算机可读存储介质,其中,所述指令在被执行时使得所述至少一个处理器:响应于确定选择所述第一键的所述输入不满足所述压力阈值,输出用于显示的所述第一字符。
子句27.根据子句19-26的任何组合所述的计算机可读存储介质,其中,所述指令在被执行时使得所述至少一个处理器:响应于确定与所述至少一个候选词相关联的所述分值不满足所述阈值:输出用于在第一键内显示的所述第一字符的所述图形指示;以及,避免输出所述第二图形指示的所述图形指示。
子句28.一种计算设备,包括用于执行子句1-9的任何组合所述的方法的装置。
子句29.一种编码有指令的计算机可读存储介质,所述指令在被执行时使得计算设备执行子句1-9的任何组合的方法。
在一个或多个示例中,所描述的功能可以硬件、软件、固件或其任何组合来实施。如果以软件实现,则功能可以作为一个或多个指令或代码通过计算机可读介质被存储或传输,并且由基于硬件的处理单元执行。计算机可读介质可以包括:计算机可读存储介质,其对应于诸如数据存储介质的有形介质;或者通信介质,其包括有助于例如根据通信协议将计算机程序从一个地方传送到另一个地方的任何介质的。以这种方式,计算机可读介质通常可以对应于:(1)有形计算机可读存储介质,其是非暂时性的;或(2)通信介质,诸如信号或载波。数据存储介质可以是可由一个或多个计算机或一个或多个处理器访问以检索用于实现本公开中描述的技术的指令、代码和/或数据结构的任何可用介质。计算机程序产品可包括计算机可读介质。
作为示例而非限制,这种计算机可读存储介质可包括随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、光盘读取-仅存储器(CD-ROM)或其他光盘存储器、磁盘存储器或其他磁存储设备、闪存或可用于以指令或数据结构的形式存储所需程序代码并且可以通过计算机访问的任何其他存储介质。而且,任何连接都适当地称为计算机可读介质。例如,如果使用同轴电缆、光纤电缆、双绞线、数字用户线(DSL)或无线技术(如红外线、无线电和微波)从网站、服务器或其他远程源传输指令,则同轴电缆、光纤电缆、双绞线、DSL或无线技术(如红外、无线电和微波)都包含在介质的定义中。然而,应该理解,计算机可读存储介质和数据存储介质不包括连接、载波、信号或其他瞬态介质,而是相反针对非瞬态有形存储介质。这里使用的磁盘和光盘包括致密盘(CD)、激光光盘、光盘、数字通用光盘(DVD)、软盘和蓝光光盘,其中,磁盘通常以磁性方式再现数据,而光盘通过激光光学地再现数据。上述的组合也应包括在计算机可读介质的范围内。
指令可以由一个或多个处理器执行,所述一个或多个处理器例如是一个或多个数字信号处理器(DSP)、通用微处理器、专用集成电路(ASIC)、现场可编程逻辑阵列(FPGA)或其他等效集成或分立逻辑电路。因此,如本文所使用的术语“处理器”可以指前述结构或适合于实现本文描述的技术的任何其他结构的任何一种。另外,在一些方面,可以在专用硬件和/或软件模块内提供本文描述的功能。而且,这些技术可以在一个或多个电路或逻辑元件中完全实现。
本公开的技术可在包括无线手持机、集成电路(IC)或一组IC(例如,芯片组)的各种设备或装置中实现。在本公开中描述了各种组件、模块或单元以强调被配置为执行所公开的技术的设备的功能方面,但不一定需要由不同的硬件单元实现。而是,如上所述,各种单元可以组合在硬件单元中,或者由可互操作的硬件单元的集合结合合适的软件和/或固件提供,该可互操作的硬件单元包括如上所述的一个或多个处理器。
已经描述了各种示例。这些和其他示例在权利要求的范围内。

Claims (13)

1.一种方法,包括:
计算设备输出用于显示的图形键盘,所述图形键盘包括多个键,所述多个键包括与第一字符相关联的第一键;
所述计算设备确定包括所述第一字符的至少一个候选词;
所述计算设备确定与所述至少一个候选词相关联的分值,所述分值指示通过所述多个键中的一个或多个的一个或多个后续选择输入所述至少一个候选词的概率;以及
响应于确定与所述至少一个候选词相关联的所述分值满足阈值:
所述计算设备基于所述至少一个候选词的拼写确定所述至少一个候选词的第二字符,其中,在所述至少一个候选词的所述拼写中所述第二字符紧跟在所述第一字符之后;以及
由所述计算设备输出用于在所述第一键内显示的所述第一字符的图形指示和所述第二字符的图形指示。
2.根据权利要求1所述的方法,还包括:
在输出所述第一字符的图形指示和所述第二字符的图形指示之后,由所述计算设备接收选择所述第一键的输入;以及
通过所述计算设备确定选择所述第一键的所述输入是对应于单独的所述第一字符还是对应于跟随了所述第二字符的所述第一字符。
3.根据权利要求2所述的方法,还包括:
所述计算设备确定选择所述第一键的所述输入是所述第一键内的单击手势还是包括所述第一键内的第一点击手势和所述第一键内的第二点击手势的组合;以及
响应于确定选择所述第一键的所述输入是包括所述第一键内的所述第一点击手势和所述第一键内的所述第二点击手势的组合,由所述计算设备输出用于显示的所述第一字符和所述第二字符。
4.根据权利要求3所述的方法,还包括:
响应于确定选择所述第一键的所述输入是所述第一键内的单击手势,由所述计算设备输出用于显示的所述第一字符。
5.根据权利要求2所述的方法,还包括:
所述计算设备确定选择所述第一键的所述输入是否是所述第一键内朝向所述第二字符的图形指示移动的滑动手势;以及
响应于确定选择所述第一键的所述输入是所述第一键内朝向所述第二字符的图形指示移动的滑动手势,由所述计算设备输出用于显示的所述第一字符和所述第二字符。
6.根据权利要求5所述的方法,还包括:
响应于确定选择所述第一键的所述输入不是所述第一键内朝向所述第二字符的图形指示移动的滑动手势,由所述计算设备输出用于显示的所述第一字符。
7.根据权利要求2所述的方法,还包括:
所述计算设备确定选择所述第一键的所述输入是否满足压力阈值;以及
响应于确定选择所述第一键的所述输入满足所述压力阈值,由所述计算设备输出用于显示的所述第一字符和所述第二字符。
8.根据权利要求7所述的方法,还包括:
响应于确定选择所述第一键的所述输入不满足所述压力阈值,由所述计算设备输出用于显示的所述第一字符。
9.根据权利要求1-8中任一项所述的方法,还包括:
响应于确定与所述至少一个候选词相关联的所述分值不满足所述阈值:
所述计算设备输出用于在第一键内显示的所述第一字符的图形指示;以及
所述计算设备避免输出所述第二图形指示的图形指示。
10.一种编码有指令的计算机可读存储介质,所述指令当由计算设备的至少一个处理器执行时,使所述至少一个处理器:
输出用于显示的图形键盘,所述图形键盘包括多个键,所述多个键包括与第一字符相关联的第一键;
确定包括所述第一字符的至少一个候选词;
确定与所述至少一个候选词相关联的分值,所述分值指示通过所述多个键中的一个或多个的一个或多个后续选择输入所述至少一个候选词的概率;以及
响应于确定与所述至少一个候选词相关联的所述分值满足阈值:
基于所述至少一个候选词的拼写确定所述至少一个候选词的第二字符,其中,在所述至少一个候选词的所述拼写中所述第二字符紧跟在所述第一字符之后;以及
输出用于在所述第一键内显示的所述第一字符的图形指示和所述第二字符的图形指示。
11.一种计算设备,包括:
存在敏感显示器;
至少一个处理器;以及
存储器,用于存储指令,所述指令在由所述至少一个处理器执行时使所述至少一个处理器:
输出用于在所述存在敏感显示器上显示的图形键盘,所述图形键盘包括多个键,所述多个键包括与第一字符相关联的第一键;
确定包括所述第一字符的至少一个候选词;
确定与所述至少一个候选词相关联的分值,所述分值指示通过所述多个键中的一个或多个的一个或多个后续选择输入所述至少一个候选词的概率;以及
响应于确定与所述至少一个候选词相关联的所述分值满足阈值:
基于所述至少一个候选词的拼写确定所述至少一个候选词的第二字符,其中,在所述至少一个候选词的所述拼写中所述第二字符紧跟在所述第一字符之后;以及
输出用于在所述第一键内显示的所述第一字符的图形指示和所述第二字符的图形指示。
12.根据权利要求11所述的计算设备,还包括用于执行由权利要求1-9中任一项所述的方法的装置。
13.一种计算机可读存储介质,包括用于执行权利要求1-9中任一项所述的方法的装置。
CN201680081899.1A 2016-05-17 2016-12-21 预测接下来的字母并在图形键盘的键中显示它们 Pending CN108701124A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US15/157,229 2016-05-17
US15/157,229 US20170336969A1 (en) 2016-05-17 2016-05-17 Predicting next letters and displaying them within keys of a graphical keyboard
PCT/US2016/068057 WO2017200578A1 (en) 2016-05-17 2016-12-21 Predicting next letters and displaying them within keys of a graphical keyboard

Publications (1)

Publication Number Publication Date
CN108701124A true CN108701124A (zh) 2018-10-23

Family

ID=57794379

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680081899.1A Pending CN108701124A (zh) 2016-05-17 2016-12-21 预测接下来的字母并在图形键盘的键中显示它们

Country Status (4)

Country Link
US (1) US20170336969A1 (zh)
EP (1) EP3403190A1 (zh)
CN (1) CN108701124A (zh)
WO (1) WO2017200578A1 (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
USD771646S1 (en) * 2014-09-30 2016-11-15 Apple Inc. Display screen or portion thereof with graphical user interface
US9678664B2 (en) 2015-04-10 2017-06-13 Google Inc. Neural network for keyboard input decoding
US10453074B2 (en) * 2016-07-08 2019-10-22 Asapp, Inc. Automatically suggesting resources for responding to a request
US10083451B2 (en) 2016-07-08 2018-09-25 Asapp, Inc. Using semantic processing for customer support
US20180101599A1 (en) * 2016-10-08 2018-04-12 Microsoft Technology Licensing, Llc Interactive context-based text completions
US20180196567A1 (en) * 2017-01-09 2018-07-12 Microsoft Technology Licensing, Llc Pressure sensitive virtual keyboard
US11061556B2 (en) * 2018-01-12 2021-07-13 Microsoft Technology Licensing, Llc Computer device having variable display output based on user input with variable time and/or pressure patterns
CN113849093A (zh) * 2021-09-28 2021-12-28 联想(北京)有限公司 一种控制方法、装置及电子设备
US20230315216A1 (en) * 2022-03-31 2023-10-05 Rensselaer Polytechnic Institute Digital penmanship

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW201013466A (en) * 2008-09-29 2010-04-01 Sharp Kk Input device, input method, and storage medium in which program is stored
CN103380407A (zh) * 2012-02-24 2013-10-30 捷讯研究有限公司 在触摸屏键盘与候选字母靠近关联的分区中提供词预测的触摸屏键盘
CN103455165A (zh) * 2012-05-31 2013-12-18 捷讯研究有限公司 具有校正词预测的触摸屏键盘
CN104718543A (zh) * 2012-10-16 2015-06-17 谷歌公司 基于特征的自动校正
CN105431809A (zh) * 2013-03-15 2016-03-23 谷歌公司 用于国际语言的虚拟键盘输入

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10154144A (ja) * 1996-11-25 1998-06-09 Sony Corp 文章入力装置及び方法
US7443316B2 (en) * 2005-09-01 2008-10-28 Motorola, Inc. Entering a character into an electronic device
US9128921B2 (en) * 2012-05-31 2015-09-08 Blackberry Limited Touchscreen keyboard with corrective word prediction

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW201013466A (en) * 2008-09-29 2010-04-01 Sharp Kk Input device, input method, and storage medium in which program is stored
CN103380407A (zh) * 2012-02-24 2013-10-30 捷讯研究有限公司 在触摸屏键盘与候选字母靠近关联的分区中提供词预测的触摸屏键盘
CN103455165A (zh) * 2012-05-31 2013-12-18 捷讯研究有限公司 具有校正词预测的触摸屏键盘
CN104718543A (zh) * 2012-10-16 2015-06-17 谷歌公司 基于特征的自动校正
CN105431809A (zh) * 2013-03-15 2016-03-23 谷歌公司 用于国际语言的虚拟键盘输入

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
CIHAN TOPAL等: "On the efficiency issues of virtual keyboard design", 《2012 IEEE INTERNATIONAL CONFERENCE ON VIRTUAL ENVIRONMENTS HUMAN-COMPUTER INTERFACES AND MEASUREMENT SYSTEMS (VECIMS) PROCEEDINGS》 *

Also Published As

Publication number Publication date
EP3403190A1 (en) 2018-11-21
US20170336969A1 (en) 2017-11-23
WO2017200578A1 (en) 2017-11-23

Similar Documents

Publication Publication Date Title
CN108700951B (zh) 图形键盘内的图标符号搜索
EP3479213B1 (en) Image search query predictions by a keyboard
US9977595B2 (en) Keyboard with a suggested search query region
US10140017B2 (en) Graphical keyboard application with integrated search
US11327652B2 (en) Keyboard automatic language identification and reconfiguration
US20170308290A1 (en) Iconographic suggestions within a keyboard
CN108701124A (zh) 预测接下来的字母并在图形键盘的键中显示它们
US9946773B2 (en) Graphical keyboard with integrated search features
US8756499B1 (en) Gesture keyboard input of non-dictionary character strings using substitute scoring
WO2017181355A1 (en) Automatic translations by keyboard
US10146764B2 (en) Dynamic key mapping of a graphical keyboard
WO2016144450A1 (en) Suggestion selection during continuous gesture input

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20181023