CN105659194A - 用于屏幕上键盘的快速任务 - Google Patents

用于屏幕上键盘的快速任务 Download PDF

Info

Publication number
CN105659194A
CN105659194A CN201480052683.3A CN201480052683A CN105659194A CN 105659194 A CN105659194 A CN 105659194A CN 201480052683 A CN201480052683 A CN 201480052683A CN 105659194 A CN105659194 A CN 105659194A
Authority
CN
China
Prior art keywords
text
fast
key
fast worktodo
worktodo
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480052683.3A
Other languages
English (en)
Other versions
CN105659194B (zh
Inventor
J·A·格里夫斯
E·N·巴杰
D·E·利内迪
H·巴伯拉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN105659194A publication Critical patent/CN105659194A/zh
Application granted granted Critical
Publication of CN105659194B publication Critical patent/CN105659194B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0489—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using dedicated keyboard keys or combinations thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233—Character input methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/103—Formatting, i.e. changing of presentation of documents
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/12—Use of codes for handling textual entities
    • G06F40/151—Transformation

Abstract

描述了用于屏幕上键盘的快速任务，其中屏幕上键盘支持被配置成以经定义的方式编辑被选择的文本的多个快速任务。除了键的默认动作或“普通”字符输入功能之外，可将快速任务功能分派到屏幕上键盘的各个键。在文本输入期间，各键正常地操作以执行与字符输入有关的功能，诸如导致对应的文本字符的输入。当文本被选择时或处在其它被指定的交互情形中时，与快速任务相关联的键的操作可自动触发快速任务来以对应方式修改被选择的文本。因此，取决于交互情形，屏幕上键盘的同一键可被用于发起与字符输入或者将快速任务应用到文本有关的功能。

Description

用于屏幕上键盘的快速任务
背景
诸如移动电话、便携式和平板接收机、娱乐设备、手持导航设备等之类的计算设备被普遍实现为具有屏幕上键盘(例如，软键盘)，屏幕上键盘可被用于文本输入和/或与计算设备的其它交互。当用户经由文本框输入或编辑文本字符或以其它方式使用屏幕上键盘来与文本交互时，在某些设备上编辑所输入的文本可能是困难的。例如，由于设备和屏幕上键盘的受限尺寸，对文本进行格式化、插入缺失的字符、和/或改变/转换移动电话上的输入文本串可能是有挑战性的。虽然针对误拼写的单词可提供文本预测候选，但是文本预测通常并不解决类似于错误的标点、符合插入、语言翻译等的情形。因此，使用传统的屏幕上键盘来实现这些文本编辑任务仍然是有挑战性的。
概述
此处描述了用于屏幕上键盘的快速任务。在一个或多个实现中，屏幕上键盘可支持被配置成以经定义的方式编辑被选择的文本的多个快速任务。除了键的默认动作或“普通”字符输入功能之外，可将快速任务功能分派到屏幕上键盘的各个键。在文本输入期间(例如，当光标活跃时)，各键正常的操作以执行与字符输入有关的功能，诸如导致对应的文本字符的输入。当文本被选择时或处在其它被指定的交互情形中时，与快速任务相关联的键的操作可自动触发快速任务来以对应方式修改被选择的文本。因此，取决于交互情形，屏幕上键盘的同一键可被用于发起与字符输入或者将快速任务应用到文本有关的功能。
提供本概述以便以简化的形式介绍以下在详细描述中进一步描述的一些概念。本概述并非旨在标识出要求保护的主题的关键特征或必要特征，亦非旨在用作辅助确定要求保护的主题的范围。
附图简述
参考附图来描述具体实施方式。在附图中，附图标记最左边的数字标识该附图标记首次出现的附图。在说明书和附图的不同实例中使用相同的附图标记可指示相似或相同的项目。
图1示出其中可以实现用于屏幕上键盘的快速任务的各方面的示例操作环境。
图2描绘了根据一个或多个实现的其中应用快速任务的示例过程。
图3描绘了根据一个或多个实现的表示用于确定何时应用快速任务的逻辑的示例过程。
图4示出了根据一个或多个实施例的示例快速任务情形。
图5示出了根据一个或多个实施例的各个示例快速任务。
图6描绘了根据一个或多个实现的其中表示针对被选择的文本的与快速任务相关联的多个修改的示例过程。
图7示出了根据一个或多个实施例的与多个修改相关联的快速任务的各个示例。
图8描绘了可使用在用于文本预测的自适应语言模型的一个或多个实现中的示例系统和设备。
详细描述
概览
当用户使用屏幕上键盘将文本字符输入到文本框中时，在某些小外形因子设备上编辑所输入的文本可能是困难的。例如，由于设备和屏幕上键盘的受限尺寸，对文本进行格式化、插入缺失的字符、和/或改变/转换移动电话上的输入文本串可能是有挑战性的。
此处描述了用于屏幕上键盘的快速任务。根据所描述的技术，屏幕上键盘可支持被配置成以经定义的方式编辑被选择的文本的多个快速任务。除了键的默认动作或“普通”字符输入功能之外，可将快速任务功能分派到屏幕上键盘的各个键。在文本输入期间(例如，当光标活跃时)，各键正常的操作以执行与字符输入有关的功能，诸如导致对应的文本字符的输入。当文本被选择时或处在其它被指定的交互情形中时，与快速任务相关联的键的操作可自动触发快速任务来以对应方式修改被选择的文本。因此，取决于交互情形，屏幕上键盘的同一键可被用于发起与字符输入或者将快速任务应用到文本有关的功能。
在以下的讨论中，题为“操作环境”的章节描述了可根据用于屏幕上键盘的快速任务的一个或多个实现来采用的示例环境。接着，题为“快速任务细节”的章节描述了根据一个或多个实现的快速任务的示例细节和过程。最后，题为“示例系统”的章节描述了可被用于屏幕上键盘的快速任务的一个或多个实现的示例系统和设备。
操作环境
图1示出其中可以实现用于屏幕上键盘的快速任务的各实施例的示例系统100。该示例系统100包括计算设备102，计算设备102可以是任何一个固定或移动设备或其组合，并且采用消费设备、计算机设备、便携式设备、通信设备、导航设备、媒体回放设备、娱乐设备、游戏设备、和/或电子设备等任何形式。例如，计算设备102可被实现为电视机客户端设备104、计算机106和/或连接到显示设备110以显示媒体内容的游戏系统108。替换地，计算设备可以是任何类型的便携式计算机、移动电话、或包括集成显示器114的便携式设备112。可以用各种组件来实现这些计算设备中的任一个，诸如处理器和存储设备、以及如下面参考图8所示的示例设备进一步描述的不同组件的任意组合。
计算设备102的集成显示器114或显示器设备110可以是触摸屏显示器，该触摸屏显示器被实现成感测触摸和手势输入，诸如显示在触摸屏显示器上的用户界面中的用户发起的字符、键、敲击、或选择符输入。替代地或附加地，计算设备的示例可包括其它各种输入机制和设备，诸如键盘、鼠标、屏幕上键盘、远程控制鼠标、游戏控制器、或任何其它类型的用户发起的和/或用户可选择的输入设备。
在各实现中，计算设备102可包括输入模块116，输入模块116检测和/或识别与各种不同类型的输入有关的输入传感器数据118，输入诸如屏幕上键盘字符输入、触摸输入和手势、基于相机的手势、控制器输入、以及其它用户选择的输入。输入模块116表示标识触摸输入和/或手势并使对应于该触摸输入和/或手势的操作被执行的功能。例如，输入模块116可被配置成识别所检测到的通过由用户的手(例如，使用触摸屏功能)与触摸屏显示器的交互而作出的手势。附加地或替代地，输入模块116可被配置成识别相机所检测到的手势，诸如用户的手的挥动、抓的手势、手臂位置、或其它经定义的手势。因此，触摸输入、手势、以及其它输入还可通过输入传感器数据118被识别为包括可用于区分输入模块116所识别的不同输入的属性(例如，移动、选择点、位置、速度、朝向等)。这一区分然后可用作从输入中标识手势并因此基于对手势的标识来标识要执行的操作的基础。
计算设备包括键盘输入模块120，键盘输入模块120可被实现为计算机可执行指令，诸如由一个或多个处理器执行以实现此处描述的各个实施例的软件应用或模块。键盘输入模块120表示用于提供和管理用于与计算设备120的键盘交互的屏幕上键盘。键盘输入模块120可被配置成导致屏幕上键盘的表示被选择性地在不同时间呈现，诸如在文本输入框、搜索控件、或其它文本输入控件被激活时。屏幕上键盘可被提供用于显示在外部显示器(诸如显示器设备110)上或集成显示器(诸如集成显示器114)上。另外，需要注意，硬件键盘/输入设备也可实现具有至少一些适用于此处所描述的技术的软键的可适配的“屏幕上”键盘。例如，作为外部设备提供或与计算设备102集成的硬件键盘可包含可被用于实现此处所描述的快速任务的显示器设备、触摸键、和/或触摸屏。在这种情况下，键盘输入模块120可被提供作为硬件键盘/输入设备的设备驱动的组件。
键盘输入模块120可包括或以其它方式利用文本预测引擎122，文本预测引擎122表示用于处理和解释字符输入124以形成和提供对于对应于字符输入124的候选单词的预测。例如，屏幕上键盘可被选择性地展示在不同交互情形中供在文本输入框、口令输入框、搜索控件、数据表格、消息对话、或用户界面126的其它文本输入控件(诸如表格、HTML页面、应用UI、或促进用户输入字符输入124(例如，字母、数字、和/或其它字母数字字符)的文档)。
总的来说，文本预测引擎122确定最接近地匹配于被输入的字符输入124的一个或多个可能的候选。以此方式，文本预测引擎122可通过提供响应于用户所输入的字符输入124而被确定的一个或多个预测性单词来促进文本输入。例如，文本预测引擎122所预测的单词可被用于执行输入文本的自动校正、呈现一个或多个单词作为供用户选择来完成的候选、修改或改正输入文本、自动改变对应于所预测的单词的屏幕上键盘的键的触摸敲击面积等等。
根据此处所描述的各技术，键盘输入模块120可被配置成包括或利用以上和以下所描述的快速任务模块128。一般来说，快速任务模块128表示支持屏幕上键盘的多个快速任务130的功能。快速任务130被配置成促进了传统上难以使用屏幕上键盘来执行的编辑操作。可使得对应的快速任务对其可用的编辑操作的类型包括但不限于格式化、标点、符号插入、以及以上的组合。参考以下附图描述描述了快速任务的各个非限制性示例。除了键的字符输入功能或动作之外，被各自指定以执行不同编辑操作的一组快速任务130可被分派到屏幕上键盘的各个键。快速任务模块128可操作用于管理快速任务130到键的分派、快速任务的激活和去激活、定制快速任务的创建等等。快速任务模块128还可操作用于识别与快速任务相关联的交互情形(例如，文本选择、光标位置、上下文等)，并且在快速任务被触发时应用合适的快速任务来修改被选择的文本。快速任务模块128还可实现用于确定响应于键的操作是执行默认功能(例如，插入文本字符)还是执行分派到键的快速任务的逻辑。与用于屏幕上键盘的快速任务的这种种方面有关的进一步细节可结合以下附图找到。
已描述了用于快速任务的示例操作环境，现在考虑可被用于此处所描述的一个或多个实现中的示例技术和细节。
快速任务细节
本章节参照图2、3和6中的示例过程和图4、5和7中的示例表示来讨论使用快速任务的各技术的细节。在以下讨论的各部分中，可对图1的其中可实现各方面的示例操作环境做出参考。可以使用硬件、固件或软件或其组合来实现以下描述的每一个过程的各方面。过程被示为一组框，它们指定由一个或多个设备执行的操作，不一定仅限于所示出的用于由相应的框执行操作的顺序。在至少一些实现中，各过程可由经适当配置的计算设备执行，诸如图1的示例计算设备102，它包括或以利用快速任务模块128或类似功能。
图2描绘了根据一个或多个实现的其中应用快速任务的过程200。监视经由屏幕上键盘与设备交互期间的文本输入(框202)。例如，文本可通过移动设备的屏幕上键盘来输入。虽然此处的各方面是结合屏幕上键盘来描述的，但是应当理解，可使用具有触摸键盘的硬件键盘、语音命令、或其它输入机制来实现类似的用于应用快速任务的技术。移动电话或其它计算设备102可被配置成检测和处理用于表示在经由设备输出的用户界面内输入的文本的输入。另外，计算设备102可利用快速任务模块128来在合适的情况下触发快速任务。为此，快速任务模块128可被配置成监视文本输入和击键并取决于交互情形作出关于何时发起快速任务的判断。
具体来说，识别被配置成触发分派到与字符输入功能相关联的屏幕上键盘的键的快速任务的输入情形(框204)。随后，结合交互情形应用快速任务以修改被选择的文本而不是执行与该键相关联的字符输入功能(框206)。如所提到的，屏幕上键盘的键可既与字符输入功能关联又与快速任务功能关联。响应于操作特定键，快速任务模块128被配置成确定是执行“正常”字符输入功能还是执行对应于该特定键的快速任务。这一判断可至少部分基于对当前交互情形的识别。如此处所使用的交互情形反映该特定击键(或击键顺序)以及交互的状态或上下文。交互情形可结合特定键的操作来识别。例如，当光标(例如，插入符号)活跃时，按屏幕上键盘的“T”键可导致对应的字符“t”被输入到光标的位置。另一方面，如果文本串被选择并随后按压“T”键，则这一特定交互情形可与快速任务功能相关联，诸如将被选择的文本在不同语言之间自动翻译的翻译快速任务。相应地，快速任务模块128识别交互情形为与快速任务相关联并发起与“T”键相关联的快速任务功能以修改被选择的文本串(例如，通过翻译来修改)而不是插入字符“t”。因此，一种用于识别触发快速任务的交互情形的方法是通过针对对于某一键的操作确定光标是否活跃或者文本串是否被选择。换言之，快速任务模块128可区分针对文本输入的不同状态(至少包括对应于字符输入功能的活跃光标状态)和与快速任务相关联的文本串被选择时的状态。
在一个实现中，快速任务模块128还可被配置成执行对被输入和/或被选择的文本的语义处理以告知关于是应用快速任务还是执行字符输入功能的决定。此处，快速任务模块128可解析输入文本以基于单词组合/概率、典型单词使用的库/历史、因用户而异的词典等等来推断预期的含义。如果分派到当前击键的快速任务与从语义处理中推导出的预期含义一致，则快速任务模块130将此识别为要应用快速任务的状态。因此，将交互情形识别为快速任务的触发可进一步整体或部分地基于对在与设备的交互期间被输入的文本的语义处理。
显著地，快速任务模块128被配置成基于对单个键的操作(例如，单一的操作)而不是键的组合来应用至少一些快速任务。快速任务模块128根据交互情形自动决定在键被操作时被分派到该键的多个功能中的哪一个被执行。每个功能可由对该键的单一操作(例如，单次击键)来发起。因此，快速任务可被实现和应用，而无需使用用于某些传统键盘快捷方式的击键组合和/或修改器键组合(例如，alt+A、ctrl+B等)。由于屏幕实际使用面积可能对于移动设备的屏幕上键盘而言是有限的而且键组合可能难以在小屏幕上执行，因此用于快速任务的单一键操作方法使得编辑任务对于用户而言容易实现，并因此增强了总体的用户体验。此外，屏幕上键盘可支持被分派到不同键的多个快速任务并且可使得用户能够改变分派并且作出将预定义的快速任务分派到被选择的键的因用户而异的分派。系统可进一步被配置成促进用户对定制快速任务的创建和分派。
图3描绘了根据一个或多个实现的表示用于确定何时应用快速任务的逻辑的过程300。检测到对包括在屏幕上键盘中的键的操作(框302)。这可基于结合图2所讨论的对文本输入的监视来进行。在一个方法中，快速任务模块128可实现用于监视每一次击键并且基于交互情形来控制是执行正常动作/字符输入还是执行被分派到各键的快速任务。为了解说，假设被配置成通过对文本加下划线来对被选择的文本串进行格式化的快速任务被分派到“U”键。快速任务模块128可检测何时“U”键被按下或者以其它方式在文本输入交互期间被操作，并且决定是应用该加下划线的快速任务还是导致插入“U”键的字母数字字符。
具体来说，作出关于快速任务是否被分派到该键的判断(框304)。例如，快速任务模块128可参考将快速任务映射到键的表格或其它合适的数据结构。在以上的示例中，快速任务模块128识别加下划线的快速任务被分派到“U”键。对于某些键，快速任务模块128可确定快速任务未被分派到各键和/或被禁用于各键。
如果根据框304快速任务被分派到该键，则随后分析交互情形来确定该交互情形是否被配置成触发该快速任务(框306)。当交互情形触发该快速任务时，对应于被分派到该键的快速任务的文本编辑操作被发起(框308)。另一方面，响应于根据框304确定快速任务未被分派到键和/或根据框306确定交互情形并不触发快速任务，快速任务模块128可导致该键的被指定的字符输入功能的操作(框310)。
例如，快速任务可基于交互的当前状态而被选择性地触发。这可基于对于文本输入而言光标是活跃还是不活跃，或者替代地基于用户是否已作出了文本选择。关于输入文本的上下文信息也可被用于确定如何对击键操作作出响应。在光标是活跃的情况下，键操作可以以正常模式导致被指定字符输入功能。另一方面，当文本被选择(例如，被高亮显示)时，对应于各键的快速任务可被启用并且对键的操作可随后导致对应的快速任务而不是字符输入功能。在以上的示例中，当文本在对键的操作之前已被选择时，对“U”键的操作可导致对被选择的文本加下划线。另一方面，在具有活动光标的正常文本输入模式下，对“U”键的操作可触发插入对应的字母数字字符(例如，在这一示例中为u或U)的操作。
图4示出了根据总的在400的一个示例情形的快速任务的执行。具体来说，被配置成与文本消息应用/服务交互的用户界面126被描绘为具有用于移动电话设备的屏幕上键盘402。界面包括文本消息输入框形式的文本输入控件404。在所描述的示例中，用户已与文本输入控件404交互来输入文本字符“Quepasa,amigo”。另外，用户已进行交互以作出对文本字符的选择406，因此相应地，词组“Quepasa,amigo”被表示为高亮显示。在这一情形中，根据此处所描述的各技术，选择406可以有效地激活快速任务。
如图4的示例中所表示的，用于选择“？”键的击键408可导致执行被分派的快速任务130，该快速任务130在被选择的词组前后插入西班牙语问号的字符。因此，响应于击键408作出对于词组“Quepasa,amigo”的修改410以将该词组改为“Quepasa,amigo？”。在不采用快速任务的情况下，使用移动设备的屏幕上键盘来在该词组前后插入字符可能是相当困难且低效的。还设想了以类似方式插入其它的外语语言的标点字符。另外，各种类型的快速任务和单个的快速任务可由屏幕上键盘支持，这些快速任务的一些说明性示例结合图5进行描绘和描述。
图5总体地在500处描绘了可被分派到屏幕上键盘的各键的快速任务的各个示例。例如，描绘了用于指定修改被选择的词组或串的标点的标点快速任务502。此处，标点快速任务502对应于图4的示例，除了快速任务被表示为分派到“Q”键而不是“？”键。因此，这一示例示出至少一些快速任务可被分派到不同的键，并且在一些情况下，用户可能够指定和改变快速任务到键的映射。一般来说，快速任务130可被配置成执行标点操作以在被选择的文本词组前后插入字符，其中的一个示例是插入问号字符。其它标点快速任务可被配置成使用“)”或“(”键来促进将词组括在园括号里、使用“[”、“]”、“{”、或“}”键来给词组加括号、使用“>”或“<”键来加html标记、使用“！”键来插入开头和结尾的感叹号等等。需要主意，某些快速任务可被分派到多个键。例如，按前括号“(”或后括号“)”键中的任意一个都可触发对应的用于将被选择的文本括在圆括号中的快速任务。
可实现更多的快速任务来执行针对被选择文本的不同类型的格式化。格式化快速任务可被配置成执行特殊字符(例如，时间、货币、以及社交格式)的插入、开关词首或句首大写、开关大小写、在字体间切换、设置诸如斜体或粗体之类的文本效果等等。
作为示例，图5中还示出了用于将文本串形式的合适的数字格式化为时间格式的时间格式快速任务504。在所描述的示例中，时间格式快速任务504被分派到“:”键。替代地，时间格式快速任务504可关联于和/或由用户分派到一不同的键，诸如“t”键、专用时钟功能键、或另一个被选择的键。当应用时，时间格式快速任务504可在文本串内的合适位置插入用于时间格式化的字符。例如，词组“Thegameisat500”被示为响应于应用时间格式快速任务504而被转换成“Thegameisat5:00”。需要注意，在这一示例中，初始词组未像之前的示例中那样被选择或高亮显示。这旨在表示其中快速任务模块128可识别和使用交互情形的语义上下文并自动应用快速任务的情况。因此，用户可不必非得显式地作出文本选择以使用某些快速任务。此处举例来说，快速任务模块128可推断用户想把“at500”表示为时间指示。因此，当“:”键被操作时，时间格式快速任务504被自动应用而不是在示出的光标位置插入“:”。
斜体快速任务506被描绘为可被支持的格式化快速任务的另一示例。此处，选择文本随后操作“i”键可导致被选择的文本被切换为斜体字体。在一个实现中，再次操作“i”可导致被选择的文本返回到非斜体字体。一般来说，此处所讨论的快速任务使得用户能够通过相继操作快速任务所分派到的键来在输入时的字体(例如，初始文本和格式)和通过快速任务可提供的对文本的一个或多个修改之间的循环和来回切换。与配置成在多个不同修改之间循环的快速任务有关的示例在以下结合图6和7来讨论。
类似于刚刚描述的各示例的用于执行各自格式化动作的快速任务可被定义和分派到各个被选择的键。可被分配到特定键的格式化快速任务的一些附加示例包括但不限于“b”用于对文本加粗、“c”或“shift”用于切换单词、词组或所选内容的词首大写/大小写、“f”用于改变为一种不同字体、“u”用于加下划线等等。
另一示例涉及可被用于社交或其它目的的对标签的自动格式化。一种类型的加标签是使用“#”词组来表示社交发帖。这类加标签可不仅被用于社交服务，而且可被用于电子邮件、文本消息、以及其它通信。图5表示可被分配给“#”键的社交格式快速任务508。在操作中，社交格式快速任务508操作用于将词组转换为指定格式的标签。在示出的示例中，输入的词组“AaronRodgersMVP”通过该快速任务被转换成“#AaronRodgersMVP”。此处，标签“#”的指示符已被插入在输入的词组的开头并且空格已被移除。使用不同指示符的其它类型的标签以及甚至是用户定义的格式化操作可通过快速任务来实现。
图5进一步表示了可被分配给如所示出的“t”键的翻译快速任务510。翻译快速任务510可被应用于将词组或被选择的文本从一种语言翻译成另一种语言。此处，词组“Whereisthehotel？”被自动从英语翻译成另一种语言，诸如西班牙语版本的“Dondeestáelhotel？”。翻译可通过对文本的选择并按下“t”键或与翻译快速任务510相关联的其它键来进行。用户可能够将特定语言设置为用于翻译。附加地或替代地，翻译快速任务510可被配置成在多种语言的经排序列表中循环，其细节结合以下附图来讨论。
图6描述了其中与快速任务相关联的多个修改可被应用的过程600。与要应用与被选择的文本的多个修改相关联的快速任务被分派到屏幕上键盘上的键(框602)。检测到对用于发起快速任务的键的操作(框604)。随后，响应于对该键的相继操作，表示对于被选择的文本的多个修改(框606)。
如所提到的，包括或利用快速任务模块128的屏幕上键盘可支持某些实现多个修改的快速任务。在一种方法中，根据规定修改应用的顺序的列表或数据结构来定义多个修改。例如，用于翻译的语言的列表可与翻译快速任务相关联，可用字体的列表可被用于字体选择快速任务，而时间格式快速任务可包括不同的可用时间格式。其它快速任务可操作用于在输入时的未经修改文本和对文本的特定修改之间来回切换。当与提供多个不同修改的快速任务相关联的键被选择多次时，系统可响应于对该键的依次操作在修改列表中一个接一个地循环，并且导致对对应文本的修改相继地出现在用户界面中。因此，每当键被“按下”时，根据快速任务的可用修改列表的向下继续，不同的修改可出现。当列表中的每一个修改已被呈现，则对特定键的下一次选择可导致被选择的文本返回到未经修改的形式。
为了进一步说明，图7总体地在700处描绘了其中应用了实现多个修改的快速任务的一些示例情形。例如，翻译快速任务702被描绘为与“x”键相关联。这一示例中的翻译快速任务702与语言列表704相关联。语言列表704表示与一快速任务相关联的数据，该数据足够定义和/或控制对于文本的多个修改并且规定与该快速任务有关的修改被应用的顺序。此处，语言列表704指示依次翻译成西班牙语、法语、德语、并且随后返回到默认语言(在这一示例中为英语)。在依次按下“x”键之际，快速任务模块128可操作用于在语言列表704中循环并且应用对应的到不同语言的翻译，如706处所示。用户可通过反复地按下该键在可能的修改中的一个或多个之间依次滚动，并且可通过显式的选择、进一步文本输入、和/或在超时时间段的不活动之后选择各个修改中要保留的那个。
图7中还描绘了类似的支持多个修改的时间格式快速任务708的示例。在这一情形中，时间格式快速任务708被表示为与“t”键相关联。时间格式快速任务708也可被分派为“:”键，就像结合图5讨论的时间格式快速任务504一样。在这一示例中，时间格式快速任务708与时间格式列表710相关联。该时间格式列表710指示对相关联的文本的时间格式的依次修改。在依次按下“t”之际，快速任务模块128可操作用于在时间格式列表710中循环并且应用对应的修改，如712处所示。相应地，响应于依次按下“t”键，文本的“at500”部分可被改为“at5:00”、“at5:00AM”、“at5:00PM”、并且回到“at500”。
一般来说，可针对屏幕上键盘预定义快速任务的分派。在一个实现中，分派还可由用户来配置以进行因用户而异的分派。因此，用户可选择将翻译快速任务分派到“x”并且将时间格式快速任务分派到“t”，如图7中所示的，而不是预定义的分派，诸如像图5中的将“t”用于翻译而“:”用于时间。例如，快速任务模块128可展示一个界面，通过该界面用户可与将不同的可与快速任务映射到键的映射交互。通过该界面，用户可改变预定义的分派和/或可全局地或单独地启用或禁用快速任务。另外，该界面和快速任务映射可被配置成使得用户能够通过快速任务创建对话框来创建定制快速任务。创建对话框可促进使用合适的语法、菜单、字段、和标签等等来选择定制字符插入、格式化、和/或对于快速任务的触发。定制快速任务可根据禁用快速任务创建对话框作出的用户选择来定义。定制快速任务可被分派到用户选择的键。作为示例而非限制，用户可定义用于粗体、斜体以及加下划线的组合快速任务，将被选择的文本串转换成被加粗、斜体且加了下划线的经修改的串。用户可将这一定制快速任务分派到某一键，诸如“z”键。在另一示例中，定制快速任务可被创建以促进在文本串内的特定位置处插入被选择的特殊字符。例如，可定义一个星号快速任务用于将文本包括在星号内，诸如将“HelloRobyn”改为“***HelloRobyn***”。还设想了各种其它类型的定制和预定义快速任务。
已描述了与快速任务有关的一些示例细节和技术，现在考虑可被用于此处所描述的一个或多个实现中的示例系统。
示例系统和设备
图8示出了包括示例计算设备802的示例系统800，该示例计算设备802代表可以实现本文所述的各种技术的一个或多个计算系统和/或设备。计算设备802可以是，例如，服务提供方的服务器、与客户端相关联的设备(例如，客户端设备)、片上系统、和/或任何其他合适的计算设备或计算系统。
所示的示例计算设备802包括处理系统804、一个或多个计算机可读介质806、以及相互通信地耦合的一个或多个I/O接口808。尽管没有示出，计算设备802可进一步包括系统总线或将各种组件相互耦合的其它数据和命令传输系统。系统总线可以包括不同总线结构中的任一个或其组合，诸如存储器总线或存储器控制器、外围总线、通用串行总线和/或利用各种总线体系结构中的任一种的处理器或局部总线。也构想了各种其它示例，诸如控制和数据线。
处理系统804表示使用硬件执行一个或多个操作的功能。因此，处理系统804被示为包括可被配置为处理器、功能块等的硬件元件810。这可包括在作为专用集成电路或使用一个或多个半导体构成的其它逻辑设备的硬件中的实现。硬件元件810不受形成它们的材料或者其中利用的处理机制的限制。例如，处理器可以由半导体和/或晶体管(例如，电子集成电路(IC))构成。在这一上下文中，处理器可执行指令可以是可电子地执行的指令。
计算机可读介质806被示为包括存储器/存储812。存储器/存储812表示与一个或多个计算机可读介质相关联的存储器/存储容量。存储器/存储812可包括易失性介质(如随机存取存储器(RAM))和/或非易失性介质(如只读存储器(ROM)、闪存、光盘、磁盘等等)。存储器/存储812可包括固定介质(例如，RAM、ROM、固定硬盘驱动器等)以及可移动介质(例如闪存、可移动硬盘驱动器、光盘等等)。计算机可读介质806可以下面进一步描述的各种方式来配置。
输入/输出接口808表示允许用户向计算设备802输入命令和信息的功能，并且还允许使用各种输入/输出设备向用户和/或其他组件或设备呈现信息。输入设备的示例包括键盘、光标控制设备(例如，鼠标)、用于语音操作的麦克风、扫描仪、触摸功能(例如，电容性的或被配置来检测物理接触的其它传感器)、照相机(例如，可采用可见或诸如红外频率的不可见波长来将不涉及触摸的移动检测为手势)，等等。输出设备的示例包括显示设备(例如，监视器或投影仪)、扬声器、打印机、触觉响应设备等等。计算设备802可进一步包括用于实现有线和无线通信的各种组件，包括例如用于网络通信的网络接口卡和/或用于支持无线和/或移动通信的各个天线。设想了各种不同类型的天线，包括但不限于一个或多个Wi-Fi天线、全球导航卫星系统(GNSS)或全球定位系统(GPS)天线、蜂窝天线、近场通信(NFC)214天线、和/或蓝牙天线等等。因此，计算设备802可以下面进一步描述的各种方式来配置以支持用户交互。
此处可以在软件、硬件元件或程序模块的一般上下文中描述各种技术。一般而言，此类模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、元件、组件、数据结构等等。本文使用的术语“模块”、“功能”和“组件”一般表示软件、固件、硬件或其组合。本文描述的技术的各特征是平台无关的，从而意味着该技术可在具有各种处理器的各种商用计算平台上实现。
所描述的模块和技术的实现可以被存储在某种形式的计算机可读介质上或跨某种形式的计算机可读介质传输。计算机可读介质可包括可由计算设备802访问的各种介质。作为示例而非限制，计算机可读介质可包括“计算机可读存储介质”和“通信介质”。
“计算机可读存储介质”指相对于仅信号传输、载波、或信号本身而言，允许对信息的存储的介质和/或设备。因此，计算机可读存储介质不包括信号承载介质或信号本身。计算机可读存储介质包括以适合于存储如计算机可读指令、数据结构、程序模块、逻辑元件/电路、或其他数据等的方法或技术来实现的诸如易失性和非易失性、可移动和不可移动介质和/或存储设备的硬件。该计算机可读存储介质的示例包括但不限于，RAM、ROM、EEPROM、闪存或其它存储器技术、CD-ROM、数字多功能盘(DVD)或其它光存储、硬盘、磁带盒、磁带、磁盘存储或其它磁存储设备、或者可适用于存储所需信息并可由计算机访问的其它存储设备、有形介质或制品。
“通信介质”指的是被配置为诸如经由网络向计算设备802的硬件传输指令的信号承载介质。通信介质通常用诸如载波、数据信号、或其它传输机制等已调制数据信号来体现计算机可读指令、数据结构、程序模块或其他数据。通信介质还包括任何信息传送介质。术语“已调制数据信号”是指使得以在信号中编码信息的方式来设置或改变其一个或多个特性的信号。作为示例而非限制，通信介质包括有线介质，诸如有线网络或直接线路连接，以及无线介质，诸如声学、RF、红外线和其他无线介质。
如先前所描述的，硬件元件810和计算机可读介质806代表以硬件形式实现的指令、模块、可编程器件逻辑和/或固定器件逻辑，其可在某些实施例中被采用来实现此处描述的技术的至少某些方面。硬件元件可包括集成电路或片上系统、应用专用集成电路(ASIC)、现场可编程门阵列(FPGA)、复杂可编程逻辑器件(CPLD)，和用硅或其它硬件设备实现的组件。在此上下文中，硬件元件可以充当处理设备，该处理设备执行由该硬件元件以及用于存储供执行的指令的硬件设备(例如前面描述的计算机可读存储介质)所体现的指令、模块和/或逻辑所定义的程序任务。
前面的组合也可被采用来实现本文所述的各种技术。从而，软件、硬件、或程序模块(包括文本预测引擎122、快速任务模块128、以及其它程序模块)可被实现为体现在某种形式的计算机可读介质和/或由一个或多个硬件元件810体现的一个或多个指令和/或逻辑。计算设备802可被配置成实现对应于软件和/或硬件模块的特定指令和/或功能。因此，将模块实现为可由计算设备802执行为软件的模块可至少部分以硬件完成，例如，通过使用计算机可读存储介质和/或处理系统的硬件元件810。指令和/或功能可以是一个或多个制品(例如，一个或多个计算设备802和/或处理系统804)可执行/可操作的，以实现此处描述的技术、模块、以及示例。
如在图8中进一步例示的，示例系统800使得用于当在个人计算机(PC)、电视设备和/或移动设备上运行应用时的无缝用户体验的普遍存在的环境成为可能。服务和应用在所有三个环境中基本相似地运行，以便当使用应用、玩视频游戏、看视频等时在从一个设备转换到下一设备时得到共同的用户体验。
在示例系统800中，多个设备通过中央计算设备互连。中央计算设备对于多个设备可以是本地的，或者可以位于多个设备的远程。在一个实施例中，中央计算设备可以是通过网络、因特网或其他数据通信链路连接到多个设备的一个或多个服务器计算机的云。
在一个实施例中，该互连架构使得功能能够跨多个设备来递送以向多个设备的用户提供共同且无缝的体验。多个设备的每一个可具有不同的物理要求和能力，且中央计算设备使用一平台来使得为设备定制且又对所有设备共同的体验能被递送到设备。在一个实施例中，创建目标设备的类，且使体验适应于设备的通用类。设备类可由设备的物理特征、用途类型或其他共同特性来定义。
在各种实现中，计算设备802可采取各种各样不同的配置，诸如用于计算机814、移动设备816和电视机818用途。这些配置中的每一个包括可具有一般不同的构造和能力的设备，并且因而计算设备802可根据不同的设备类中的一个或多个来配置。例如，计算设备802可被实现为计算机814类的设备，该类包括个人计算机、台式计算机、多屏幕计算机、膝上型计算机、上网本等。
计算设备802还可被实现为移动设备816类的设备，该类包括诸如移动电话、便携式音乐播放器、便携式游戏设备、平板计算机、多屏幕计算机等移动设备。计算设备802还可被实现为电视机818类的设备，该类包括在休闲观看环境中具有或连接到通常更大的屏幕的设备。这些设备包括电视机、机顶盒、游戏控制台等。
本文所描述的技术可由计算设备802的这些各种配置来支持，且不限于在本文描述的各具体示例。这是通过在计算设备802上包括快速任务模块128来示出的。快速任务模块128和其他模块的功能也可被全部或部分通过分布式系统的使用(诸如如下所述的经由平台820通过“云”822)来实现。
云820包括和/或代表资源822的平台824。平台822抽象云820的硬件(如，服务器)和软件资源的底层功能。资源824可包括可在计算机处理在位于计算设备802远程的服务器上执行时使用的应用和/或数据。资源824也可包括在因特网上和/或通过诸如蜂窝或Wi-Fi网络之类的订户网络上提供的服务。
平台822可抽象资源和功能以将计算设备802与其他计算设备相连接。平台822还可用于抽象资源的缩放以向经由平台824实现的资源822所遇到的需求提供对应的缩放级别。因此，在互联设备的实施例中，本文描述的功能的实现可分布在系统800上。例如，该功能可部分地在计算设备802上以及经由抽象云822的功能的平台820来实现。
结语
尽管已经用对结构特征和/或方法动作专用的语言描述了本技术，但可以理解，所附权利要求书中的主题不必受公开的这些具体特征或动作的限制。相反，这些具体特征和动作是作为实现所要求保护的主题内容的示例形式而公开的。

Claims (10)

1.一种方法，包括：
监视在经由屏幕上键盘与设备交互期间的文本输入；
识别被配置成触发快速任务的交互情形，所述快速任务被分派到与字符输入功能有关的所述屏幕上键盘的键；以及
结合所述交互情形应用所述快速任务以修改被选择的文本而不是执行与该键相关联的字符输入功能。
2.如权利要求1所述的方法，其特征在于，所述屏幕上键盘被配置成支持被分配给所述屏幕上键盘的不同键的多个快速任务。
3.如权利要求1所述的方法，其特征在于，识别被配置成触发快速任务的交互情形包括确定其中文本串被选择的文本输入状态。
4.如权利要求1所述的方法，其特征在于，识别被配置成触发快速任务的交互情形至少部分基于对在与设备交互期间被输入的文本的语义处理。
5.如权利要求1所述的方法，其特征在于，所述快速任务响应于对所述键的单一操作来应用。
6.如权利要求5所述的方法，其特征在于，包括所述快速任务和所述字符输入功能在内的被分派到键的多个功能可取决于所述交互情形通过所述对所述键的单一操作来操作。
7.如权利要求1所述的方法，其特征在于，响应于对所述交互情形的识别，当光标对于文本输入为活跃时，所述字符输入功能被触发以导致对应于所述键的文本字符的插入，而当光标对于文本输入为不活跃时，触发所述快速任务。
8.如权利要求1所述的方法，其特征在于，所述快速任务被配置成促进文本编辑功能以修改被选择的文本，包括以下的一个或多个：对被选择的文本进行格式化、对被选择的文本加标点、相对于被选择的文本插入符号、或者翻译被选择的文本。
9.一种计算设备，包括：
处理系统；以及
存储指令的一个或多个计算机可读介质，所述指令在由所述处理系统执行时实现：
用于所述计算设备的屏幕上键盘，所述屏幕上键盘具有多个键，每个键与一个默认的字符输入功能相关联；以及
快速任务模块，用于：
将被配置成促进文本编辑功能的两个或更多个快速任务分派到所述多个键；
响应于对特定键的操作，取决于所识别的交互情形以及对所述特定键的操作，选择性地导致与所述特定键相关联的字符输入功能或者被分派到所述特定键的快速任务的执行。
10.如权利要求9所述的计算设备，其特征在于：
在所述交互情形对应于其中光标对于文本输入为活跃的状态时，所述特定键的字符输入功能被执行；以及
在所述交互情形对应于其中用户已选择了文本串的状态时，执行所述特定键的快速任务。
CN201480052683.3A 2013-09-24 2014-09-19 用于屏幕上键盘的快速任务 Active CN105659194B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/035,758 2013-09-24
US14/035,758 US10496276B2 (en) 2013-09-24 2013-09-24 Quick tasks for on-screen keyboards
PCT/US2014/056424 WO2015047881A1 (en) 2013-09-24 2014-09-19 Quick tasks for on-screen keyboards

Publications (2)

Publication Number Publication Date
CN105659194A true CN105659194A (zh) 2016-06-08
CN105659194B CN105659194B (zh) 2019-08-06

Family

ID=51663495

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480052683.3A Active CN105659194B (zh) 2013-09-24 2014-09-19 用于屏幕上键盘的快速任务

Country Status (11)

Country Link
US (1) US10496276B2 (zh)
EP (1) EP3049897B1 (zh)
JP (1) JP6450768B2 (zh)
KR (1) KR102249054B1 (zh)
CN (1) CN105659194B (zh)
AU (1) AU2014327147B2 (zh)
BR (1) BR112016004605A8 (zh)
CA (1) CA2923738C (zh)
MX (1) MX368935B (zh)
RU (1) RU2675152C2 (zh)
WO (1) WO2015047881A1 (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106484138A (zh) * 2016-10-14 2017-03-08 北京搜狗科技发展有限公司 一种输入方法及装置
CN107545534A (zh) * 2016-06-24 2018-01-05 佳能株式会社 图像处理装置及其控制方法以及存储介质
CN111158544A (zh) * 2019-12-25 2020-05-15 维沃移动通信有限公司 一种内容添加方法及电子设备
CN112930537A (zh) * 2020-05-01 2021-06-08 尤帕斯公司 文本检测、插入符号追踪以及活动元素检测
US11461164B2 (en) 2020-05-01 2022-10-04 UiPath, Inc. Screen response validation of robot execution for robotic process automation
US11594007B2 (en) 2020-05-01 2023-02-28 UiPath, Inc. Text detection, caret tracking, and active element detection

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9898187B2 (en) 2013-06-09 2018-02-20 Apple Inc. Managing real-time handwriting recognition
DK179329B1 (en) * 2016-06-12 2018-05-07 Apple Inc Handwriting keyboard for monitors
WO2018101671A1 (en) * 2016-11-29 2018-06-07 Samsung Electronics Co., Ltd. Apparatus and method for providing sentence based on user input
US20190095047A1 (en) 2017-09-25 2019-03-28 International Business Machines Corporation Safely capturing input when a dialog is presented
CN111092971A (zh) * 2018-10-24 2020-05-01 北京搜狗科技发展有限公司 一种显示方法、装置和用于显示的装置
US11194467B2 (en) 2019-06-01 2021-12-07 Apple Inc. Keyboard management user interfaces
CN114332887A (zh) * 2019-12-26 2022-04-12 腾讯科技（深圳）有限公司 一种图像处理方法、装置、计算机设备和存储介质
KR20220086887A (ko) * 2020-12-17 2022-06-24 삼성전자주식회사 터치스크린을 포함하는 입력 장치와 이의 동작 방법

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050149879A1 (en) * 2000-01-04 2005-07-07 Apple Computer, Inc. Computer interface having a single window mode of operation
CN101180798A (zh) * 2005-06-14 2008-05-14 微软公司 使用键盘的拼音输入
US20080242353A1 (en) * 2007-04-02 2008-10-02 William Daniel Willey Input Shortcuts for a Communications Device
US20110041049A1 (en) * 2009-08-13 2011-02-17 Lesly Verdier Word Processing Style Selector System Using 2D Matrix
CN102663016A (zh) * 2012-03-21 2012-09-12 上海汉翔信息技术有限公司 电子设备上输入候选框进行输入信息扩展的系统及其方法
US20120235921A1 (en) * 2011-03-17 2012-09-20 Kevin Laubach Input Device Enhanced Interface
CN102707798A (zh) * 2011-03-24 2012-10-03 微软公司 使用按键和手势信息的文本输入
CN102866827A (zh) * 2012-08-21 2013-01-09 刘炳林 一种人机交互设备的文档编辑方法和装置
US20130082935A1 (en) * 2011-09-30 2013-04-04 Microsoft Corporation Dynamic command presentation and key configuration for keyboards
US20130246329A1 (en) * 2012-03-16 2013-09-19 Research In Motion Limited In-context word prediction and word correction

Family Cites Families (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03260760A (ja) 1990-03-12 1991-11-20 Toshiba Corp 仮名漢字変換に付随する間接入力方式
JPH06203011A (ja) 1992-12-29 1994-07-22 Canon Inc 文字入力装置
US7213601B2 (en) * 1993-02-22 2007-05-08 Heartport, Inc Minimally-invasive devices and methods for treatment of congestive heart failure
US5621875A (en) 1993-10-26 1997-04-15 Microsoft Corp. Method and system for automatic formatting of user selected text
US5818437A (en) * 1995-07-26 1998-10-06 Tegic Communications, Inc. Reduced keyboard disambiguating computer
JP3071772B2 (ja) 1998-01-22 2000-07-31 ミサワホーム株式会社 キ―入力装置
US7761175B2 (en) * 2001-09-27 2010-07-20 Eatoni Ergonomics, Inc. Method and apparatus for discoverable input of symbols on a reduced keypad
US7142197B2 (en) 2002-10-31 2006-11-28 Microsoft Corporation Universal computing device
JP2004171371A (ja) 2002-11-21 2004-06-17 Toshiba Corp 情報処理装置およびキーへの機能割り当て方法
US7167178B2 (en) 2003-01-09 2007-01-23 Research In Motion Limited Method of fast typing twin special characters
US20050187754A1 (en) 2003-12-09 2005-08-25 Dana Suess Software-based keystroke eliminator for alpha-numeric keyboards and keypads
JP4775835B2 (ja) 2003-12-22 2011-09-21 株式会社日本総合研究所 キー割り当てシステムおよびキー割り当てプログラム
EP1615111B1 (en) 2004-07-08 2008-01-02 Research In Motion Limited Adding interrogative punctuation to an electronic message
US8374846B2 (en) 2005-05-18 2013-02-12 Neuer Wall Treuhand Gmbh Text input device and method
GB2433403B (en) 2005-12-16 2009-06-24 Emil Ltd A text editing apparatus and method
US8299943B2 (en) * 2007-05-22 2012-10-30 Tegic Communications, Inc. Multiple predictions in a reduced keyboard disambiguating system
US8701037B2 (en) 2007-06-27 2014-04-15 Microsoft Corporation Turbo-scroll mode for rapid data item selection
TW200910875A (en) * 2007-08-29 2009-03-01 Inventec Appliances Corp Method and system for instantly translating text within an image
FR2928077B1 (fr) * 2008-02-29 2011-03-25 Echosens Dispositif et procede de micro-elastographie.
EA201100347A1 (ru) * 2008-08-12 2011-10-31 Килесс Системз Лтд. Система ввода данных
JP5110039B2 (ja) 2009-05-27 2012-12-26 オムロン株式会社 文字入力用のプログラムおよび情報処理装置
WO2011013125A1 (en) * 2009-07-27 2011-02-03 Storwize Ltd. Method and system for transformation of logical data objects for storage
KR101092335B1 (ko) * 2009-11-10 2011-12-09 아이프로스 아이앤씨 주식회사 컴퓨터용 키보드
WO2011091594A1 (en) * 2010-01-29 2011-08-04 Nokia Corporation Virtual keyboard, input method, and associated storage medium
US8462131B2 (en) * 2010-06-23 2013-06-11 John CHACHO Electronic device having virtual keyboard with predictive key and related methods
US20130019175A1 (en) 2011-07-14 2013-01-17 Microsoft Corporation Submenus for context based menu system
US20130027550A1 (en) * 2011-07-29 2013-01-31 Technische Universitat Berlin Method and device for video surveillance
US9652448B2 (en) 2011-11-10 2017-05-16 Blackberry Limited Methods and systems for removing or replacing on-keyboard prediction candidates
US20130275506A1 (en) * 2012-04-12 2013-10-17 J. Scott Warner Lyric posting, live track sharing, and zip code notification of music events
EP2818967B1 (en) * 2013-06-28 2018-08-22 Dialog Semiconductor GmbH Device and method for determining an operating temperature of an electronic component
US20150019653A1 (en) * 2013-07-15 2015-01-15 Civolution B.V. Method and system for adding an identifier

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050149879A1 (en) * 2000-01-04 2005-07-07 Apple Computer, Inc. Computer interface having a single window mode of operation
CN101180798A (zh) * 2005-06-14 2008-05-14 微软公司 使用键盘的拼音输入
US20080242353A1 (en) * 2007-04-02 2008-10-02 William Daniel Willey Input Shortcuts for a Communications Device
US20110041049A1 (en) * 2009-08-13 2011-02-17 Lesly Verdier Word Processing Style Selector System Using 2D Matrix
US20120235921A1 (en) * 2011-03-17 2012-09-20 Kevin Laubach Input Device Enhanced Interface
CN102707798A (zh) * 2011-03-24 2012-10-03 微软公司 使用按键和手势信息的文本输入
US20130082935A1 (en) * 2011-09-30 2013-04-04 Microsoft Corporation Dynamic command presentation and key configuration for keyboards
US20130246329A1 (en) * 2012-03-16 2013-09-19 Research In Motion Limited In-context word prediction and word correction
CN102663016A (zh) * 2012-03-21 2012-09-12 上海汉翔信息技术有限公司 电子设备上输入候选框进行输入信息扩展的系统及其方法
CN102866827A (zh) * 2012-08-21 2013-01-09 刘炳林 一种人机交互设备的文档编辑方法和装置

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107545534A (zh) * 2016-06-24 2018-01-05 佳能株式会社 图像处理装置及其控制方法以及存储介质
US11194469B2 (en) 2016-06-24 2021-12-07 Canon Kabushiki Kaisha Image processing apparatus, method for controlling the same, and storage medium
CN107545534B (zh) * 2016-06-24 2022-04-05 佳能株式会社 图像处理装置及其控制方法以及存储介质
CN106484138A (zh) * 2016-10-14 2017-03-08 北京搜狗科技发展有限公司 一种输入方法及装置
CN111158544A (zh) * 2019-12-25 2020-05-15 维沃移动通信有限公司 一种内容添加方法及电子设备
CN112930537A (zh) * 2020-05-01 2021-06-08 尤帕斯公司 文本检测、插入符号追踪以及活动元素检测
US11302093B2 (en) 2020-05-01 2022-04-12 UiPath, Inc. Text detection, caret tracking, and active element detection
US11461164B2 (en) 2020-05-01 2022-10-04 UiPath, Inc. Screen response validation of robot execution for robotic process automation
US11594007B2 (en) 2020-05-01 2023-02-28 UiPath, Inc. Text detection, caret tracking, and active element detection
US11625138B2 (en) 2020-05-01 2023-04-11 UiPath, Inc. Text detection, caret tracking, and active element detection
US11630549B2 (en) 2020-05-01 2023-04-18 UiPath, Inc. Text detection, caret tracking, and active element detection
US11734104B2 (en) 2020-05-01 2023-08-22 UiPath, Inc. Screen response validation of robot execution for robotic process automation

Also Published As

Publication number Publication date
RU2675152C2 (ru) 2018-12-17
RU2016110577A3 (zh) 2018-07-19
CA2923738A1 (en) 2015-04-02
CA2923738C (en) 2021-04-20
CN105659194B (zh) 2019-08-06
BR112016004605A8 (pt) 2020-02-11
JP2016539435A (ja) 2016-12-15
RU2016110577A (ru) 2017-09-28
KR20160060110A (ko) 2016-05-27
MX368935B (es) 2019-10-22
EP3049897B1 (en) 2021-08-18
KR102249054B1 (ko) 2021-05-10
MX2016003721A (es) 2016-05-31
AU2014327147B2 (en) 2019-05-30
JP6450768B2 (ja) 2019-01-09
EP3049897A1 (en) 2016-08-03
WO2015047881A1 (en) 2015-04-02
US20150089428A1 (en) 2015-03-26
AU2014327147A1 (en) 2016-03-03
US10496276B2 (en) 2019-12-03

Similar Documents

Publication Publication Date Title
CN105659194A (zh) 用于屏幕上键盘的快速任务
CN109690481B (zh) 用于动态功能行定制的方法和设备
US11720744B2 (en) Inputting images to electronic devices
CN106687889B (zh) 显示器便捷式文本输入和编辑
US9507519B2 (en) Methods and apparatus for dynamically adapting a virtual keyboard
US20180196854A1 (en) Application extension for generating automatic search queries
US20240143165A1 (en) Content control system
CN107111496A (zh) 可定制刀片应用
CN102426511A (zh) 系统级搜索的用户界面
KR20150082384A (ko) 제스처 중복 키들이 제거된 키보드
US20140164981A1 (en) Text entry
KR20160009054A (ko) 연속적인 제스쳐 입력을 위한 복수의 그래픽 키보드들
US20140354550A1 (en) Receiving contextual information from keyboards
WO2014025841A1 (en) Single page soft input panels for larger character sets
US9189158B2 (en) Methods, devices and systems for entering textual representations of words into a computing device by processing user physical and verbal interactions with the computing device
CN109189243A (zh) 输入法切换方法、装置及用户终端
US11899904B2 (en) Text input system with correction facility
US20160092106A1 (en) Accessible Keyboard for Mobile Devices and Tablets
CN108052212A (zh) 一种输入文字的方法、终端及计算机可读介质
US20140331160A1 (en) Apparatus and method for generating message in portable terminal
CN106168880A (zh) 一种输入控制的方法及终端
KR101352321B1 (ko) 복수의 입력 방법 간 전환 방법
KR102260468B1 (ko) 소프트웨어 키패드를 이용한 한글 모음 입력 방법
KR102356788B1 (ko) 키패드를 이용한 키워드 검색 방법 및 장치
KR102098683B1 (ko) 터치 키패드 및 이동통신 단말기

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant