CN111566609B - 基于用户输入的具有可变显示输出的计算机设备 - Google Patents

基于用户输入的具有可变显示输出的计算机设备 Download PDF

Info

Publication number
CN111566609B
CN111566609B CN201880086003.8A CN201880086003A CN111566609B CN 111566609 B CN111566609 B CN 111566609B CN 201880086003 A CN201880086003 A CN 201880086003A CN 111566609 B CN111566609 B CN 111566609B
Authority
CN
China
Prior art keywords
amount
virtual key
display output
user input
pressure
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201880086003.8A
Other languages
English (en)
Other versions
CN111566609A (zh
Inventor
L·N·穆米迪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN111566609A publication Critical patent/CN111566609A/zh
Application granted granted Critical
Publication of CN111566609B publication Critical patent/CN111566609B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0414Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using force sensing means to determine a position
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/20Natural language analysis
    • G06F40/274Converting codes to words; Guess-ahead of partial word inputs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces

Abstract

一种计算机设备和方法,被配置为接收跨用户接口设备的显示表面上的多个点的用户输入。该设备和方法检测该用户输入并且测量在该多个点中的每个点处的输入值的量。附加地,该设备和方法基于预定义的可编程动作来生成并显示显示输出,该预定义的可编程动作对应于该相应点中的至少一个相应点处的该输入值的量,该至少一个相应点处的该输入值的量相对于该相应点中的其他相应点中的一个或多个相应点处的该输入值的量变化。

Description

基于用户输入的具有可变显示输出的计算机设备
背景技术
本公开涉及具有触敏用户界面的计算机系统,并且更具体地,涉及包括基于可变用户输入时间和/或压力图案来显示可变显示输出的设备和方法。
通常,计算机设备可以包括触摸屏显示器,该触摸屏显示器在屏幕上具有虚拟键盘,以供用户将数据输入到计算机设备中。屏幕上显示的键盘图像可以是例如有英文字母的标准QWERTY键盘图像。屏幕虚拟键盘位于显示屏上并与显示屏集成在一起。显示器的触敏表面可以被配置为检测用户在虚拟键盘上的触摸、划动和手势,使得字符、词语和各种其他计算机功能被显示在显示屏上。虚拟键盘可以用用户手指的触摸或其他指示设备进行操作,诸如触控笔、鼠标、笔或操纵杆。虚拟键盘通常是可调整大小和可自定义的,使得可以根据需要来改变例如打字模式和字体。屏幕上虚拟键盘的当前版本也可以配置有预测文本引擎,以预测用户可能键入的词语。词语预测允许用户更快地生成文本,并避免乏味的单个字符键入。除了词语预测之外,当前的屏幕上虚拟键盘被配置为检测用于键入词语并执行计算机功能的划动或手势图案,诸如例如从左到右以及上下方向移动页面。屏幕上的虚拟键盘被配置为捕获划动图案的路径并确定对应的(一个或多个)词语。然而,如果用户期望重复字符或词语,则在预测文本引擎预测用户期望的正确词语之前,仍然可能使用户负担分别键入字符。因此,当利用屏幕上的虚拟键盘和/或触敏显示器时,需要进行改进。
发明内容
以下呈现了一个或多个实现的简化概述,以便于提供对这种实现的基本理解。该发明内容不是所有预期实现的广泛概述,并且既不旨在标识所有实现的关键或重要元素,也不旨在描绘任意或所有实现的范围。其目的是以简化形式呈现一个或多个实现的一些概念,作为稍后呈现的更详细描述的序言。
在一种实现中,计算机设备包括用户接口,用户接口具有显示表面并被配置为接收跨显示表面上的多个点的用户输入。该计算机设备还包括:检测器,其邻近用户接口并被配置为检测在显示表面上的多个点处的用户输入;以及测量设备,其与检测器通信,并被配置为测量在多个点中的每个点处用户输入的输入值的量。该计算机设备还包括处理器,该处理器至少与测量设备通信,并且被配置为基于预定义的可编程动作来生成显示输出,该预定义的可编程动作对应于相应点中的至少一个相应点处的输入值的量,该至少一个相应点处的输入值的量相对于相应点中的其他相应点中的一个或多个相应点处的输入值的量变化。另外,计算机设备包括显示单元,该显示单元与发生器通信并且被配置为在用户接口设备上显示显示输出。
在另一种实现中,一种在显示器上生成输出的方法,包括:接收跨用户接口设备的显示表面上的多个点的用户输入,在显示表面上的多个点处检测用户输入,以及在多个点中的每个点处测量用户输入的输入值的量。而且,该方法包括基于预定义的可编程动作来生成显示输出,该预定义的可编程动作对应于相应点中的至少一个相应点处的输入值的量,该至少一个相应点处的输入值的量相对于相应点中的其他相应点中的一个或多个处的输入值的量变化。另外,该方法包括在用户接口设备上显示显示输出。
在另一种实现中,一种计算机可读介质,该计算机可读介质存储具有计算机设备可执行的指令的一个或多个程序,该一个或多个程序包括使计算机设备接收跨用户接口设备的显示表面上的多个点的用户输入的指令,检测在显示表面上的多个点处的用户输入,并测量在多个点中的每个点处的用户输入的输入值的量。所述指令还使所述计算机设备基于预定义的可编程动作来生成显示输出,该预定义的可编程动作对应于相应点中的至少一个点处的输入值的量,该至少一个点处的输入值的量相对于相应点中的其他点中的一个或多个点处的输入值的量变化。另外,指令使计算机设备在用户接口上显示显示输出。
与本公开的实现有关的其他优点和新颖特征将在下面的描述中部分地阐述,并且在对以下内容进行检查或通过对其进行实践学习后,对于本领域技术人员而言将部分地变得更加显而易见。
附图说明
结合以下描述、所附权利要求书和附图,将更好地理解本公开的具体特征、实现和优点,在附图中:
图1是根据本公开的实现的示例计算机系统的示意框图。
图2是根据一种实现的跨计算机设备的屏幕上键盘的划动图案的示意图。
图3是根据一种实现的基于在图2中的计算机设备的屏幕上键盘上的各个字符处检测到的压力的显示器上的输出的示意图,其中该字符的文本在显示器上重复。
图4是根据一种实现的具有在计算机设备的显示器与屏幕上键盘分离的一部分上检测到的对应压力变化的手势的示意图。
图5是根据一种实现的基于与在图5中的计算机设备的显示器上检测到的手势相关联的压力的动作的显示输出的示意图。
图6是根据一种实现的具有在计算机设备的显示器上检测到的对应压力变化的另一种手势的示意图。
图7是根据一种实现的基于与在图6的计算机设备的显示器上检测到的手势相关联的压力的动作的显示输出的示意图。
图8是根据一种实现的在诸如图1的计算机设备的显示器上生成输出的方法的流程图。
具体实施方式
下面结合附图阐述的具体实施方式旨在作为对各种配置的描述,而不旨在代表可以实践本文中所描述的概念的唯一配置。为了提供对各种概念的透彻理解的目的,具体实施方式包括特定细节。然而,对于本领域技术人员而言显而易见的是,可以在没有这些具体细节的情况下实践这些概念。在某些情况下,以框图形式示出了众所周知的组件,以便于避免使这些概念模糊。在一些实现中,可以参考可以执行本文描述的动作或操作的一个或多个组件和一种或多种方法来描绘示例,其中虚线中的组件和/或动作/操作可以是可选的。
本公开涉及一种计算机设备,其被配置为基于用户的触摸输入中的变化来显示诸如字符、词语和/或动作的可变显示输出。该计算机设备可以包括但不限于诸如例如台式计算机、笔记本计算机、平板计算机、手持计算机、个人数字计算机、游戏设备、媒体播放器、移动电话的设备、或这些类型的计算机设备的组合。该计算机设备通常包括具有触摸屏显示器的用户接口,并被配置为从用户的手指、触控笔或某种其他类型的指向设备的触摸接收用户输入。用户输入可以是来自用户的手势、划动、划动图案或单次或多次触摸中的一种或多种的形式。根据一种实现,该计算机设备可以包括检测器、传感器、感测设备等,其可以被配置为检测触摸屏显示器上的用户输入,并且标识对应于用户输入的多个点的位置。该计算机系统还可包括测量设备,以测量在触摸屏显示器上检测到的用户输入的一个或多个点处的输入值的量。例如输入值可以是力、压力、时间或其某种组合。根据示例实现,基于所测量的压力量,可以在显示器上重复诸如图形的显示输出,例如字符、词语或表情符号。同样,可以基于所测量的压力和/或时间和/或位置的量来执行诸如突出显示文本和/或加粗或斜体文本的用户功能。根据示例实现,每个检测到的手势、划动、划动图案、来自用户的单次或多次触摸、以及该动作的相应一个或多个点可以对应于预定义的可编程动作。例如来自用户的每个测量的手势、划动、划动图案、单次或多次触摸可以被映射到、匹配到划动图案,并且每种划动图案可以对应于多个预定义的可编程动作之一。该计算机系统可以包括处理器,该处理器用于基于与所确定的划动图案相对应的预定义的可编程动作来生成显示输出,并且将该显示输出显示在触摸屏显示器上。
参照图1,用于基于可变的用户输入时间和/或压力图案来显示可变的显示输出的计算机系统10的示例实现可以包括计算机设备12,该计算机设备12具有用户接口14,用户接口14被配置有触摸屏显示器16,用于在显示表面21上从用户19接收用户输入17,并且还被配置为生成对应的显示输出23以呈现给用户。例如在一些情况下,用户输入17可以是多个点25的连续输入,例如连续的多点输入,诸如具有划动图案的划动。在其他情况下,用户输入17可以进一步包括一个或多个附加点,诸如在与连续多点输入重叠的时间或在连续多点输入之前或之后,用户在显示表面21上接触的附加区域。用户接口14可以包括但不限于触摸屏、触敏显示器、数字化仪、能够从用户接收用户输入17并生成用于向用户呈现的显示输出23的任意其他机制、或者任意它们的组合。用户接口14可以被配置为从用户19的手指的触摸感测和接收用户输入17,但是不限于此,并且可以感测和接收来自诸如例如触控笔、鼠标、笔或操纵杆的其他输入设备的输入。计算机设备12还可包括输入检测器18,输入检测器18检测施加到用户接口14的显示表面21上的用户输入17,包括与定义用户输入17的多个点25中的每一个相对应的位置27,以及测量设备20,其例如在多个点25的每一个处测量一个或多个输入值29的量,例如力、压力、时间或其组合。例如输入检测器18和测量设备20可以是分离的组件,或者可以是整体的组件,并且可以包括数字化、力传感器、压力传感器等。另外,计算机设备12可以包括与存储器24通信的处理器22,存储器24能够存储与多个划动图案33中的每一个中的一个或多个相关的多个可编程动作31,其可与用户输入17的多个点25匹配。处理器22可被配置为选择多个划动图案33中的匹配的一个,将多个划动图案33中所选择的一个映射到多个可编程动作31之一,并执行所选择的可编程动作35以生成显示输出23,以供用户接口14的显示器16呈现。因此,计算机设备12可以基于用户输入17执行处理器22以呈现可变的显示输出23,诸如显示重复或突出显示的文本或图形(例如表情符号)和/或执行其他显示功能,下面将更详细地讨论其示例。
参照图2,计算机设备30可以与计算机设备12相同或相似,并且可以包括在显示器16上显示的虚拟屏幕上键盘36,以供用户基于以跨键盘36的划动图案41、43、45141的形式的用户输入17来在显示器16上输入文本和/或字符32。键盘36可以在已知位置包括各种键38,以输入文本和/或字符32,其对应于在跨键盘36的多个点/位置(如键上的圆圈所表示)处划动用户输入17的图案40、41。在一些可选实现中,计算机设备30可以配备有处理器22和存储器24,其具有预测文本引擎,该预测文本引擎基于用户触摸的键38来预测建议文本42。例如如果用户开始独立地触摸键38或执行用户输入17,该用户输入17定义了例如词语‘Mississippi’的词语的划动图案,则预测文本引擎可以自动预测以字母‘M’开头的词语(例如参见图2中的建议文本42)。
根据示例实现,另外参考图3,在一个或多个点或位置的用户输入17可以具有相对于阈值和/或相对于用户输入在用户输入17的多个点或位置中的一个或多个其他点或位置处的用户输入而变化的输入值,诸如当在跨键盘36的特定字符或键38上划动时。例如当用户期望词语中的字符或键38被重复时,可以输入这样的可变输入值。例如如果打算键入词语‘Mississippi’,则计算机设备30可以被配置为使用户输入17能够定义仅在字母‘misispi’的序列上移动一次的划动图案,其中更大的压力(相对于其他位置处的压力)沿着划动图案的路径向第一个‘s’、第二个‘s’和‘p’施加,从而执行处理器22和存储器24的计算机设备30可以被配置为响应于检测到增加的压力而重复第一个‘s’、第二个‘s’和‘p’,以使得那些字符被重复,从而得到词语‘Mississippi’。
更具体地参考图3,计算机设备30的示例实现可以被配置为检测与虚拟屏幕上键盘上的一个或多个字符相对应的各个位置处的压力和/或时间量,以重复显示器16上的字符。例如如果更大的压力被施加在字符‘s’上,如阴影压力点45所示,则显示的文本32表示显示器16上的字符‘s’被重复。如上所述,计算机设备30可以被配置有具有多个预定义的可编程动作31的存储器24,一旦设备30在字符‘s’处检测到压力和/或时间测量值,则使设备30能够重复该字符‘s’。一旦检测到压力和/或时间测量,则测量设备20就可以测量在字符‘s’处接收的压力量和/或施加压力的时间量,以确定接收到的用户输入17在字符‘s’的位置处是否被识别为映射到多个可编程动作31之一的多个划动图案33之一的一部分。例如为了确定在针对字符‘s’的点45处检测到的压力量是否足够的压力以与多个划动图案33之一相关联,则可以将压力量与一个或多个压力阈值进行比较。例如如果压力量小于第一压力阈值,则用户输入17可以被识别为正常触摸。如果压力量等于或大于第一压力阈值,则用户输入17可以被识别为加压的划动图案的一部分,该加压的划动图案可以与具有多个可编程动作31中的一个或多个相对应的多个划动图案33之一匹配。例如多个可编程动作31中的对应一个可以是重复对应键38的输入(例如在字符‘s’处)。除了在点45处检测到的压力量之外,计算机设备30和/或测量设备20还可以确定在例如字符‘s’的位置处接收到用户输入17的时间长度,以便进一步确定用户输入17是否是具有多个可编程动作31中的对应一个或多个的多个划动图案33之一。在另一示例实现中,设备30可以被配置有处理器22,处理器22具有算法,该算法在键入单词‘Mississippi’时会记住与划动图案40相对应的用户输入17,使得处理器22执行的预测文本引擎可以更快地预测与该单词‘Mississippi’匹配的划动图案的未来输入。
参照图4和图5,多个可编程动作31中的另一示例可以导致显示器16上的类型不同的显示输出23。即,在这种情况下,用户输入17可以与具有多个可编程动作31中的对应的一个或多个可编程动作的多个划动图案33之一匹配,例如,对应于对在显示器16上显示的内容进行高亮、加粗、斜体等的动作。在图4和图5中所示的示例实现中,用户可以施加用户输入17,例如在多个点上施加压力,诸如在点44处在显示器16上的窗口46中的内容上施加压力,并且在点44处施加压力之后向左划动48。在该示例实现中,在点44处从用户输入17感测到的压力与向左划动48相结合可以被识别为与预定义的可编程动作相对应的划动图案,该预定义的可编程动作指示用户希望突出显示窗口46中显示的内容的一部分中的文本。不同于可以被识别为移动到下一页的动作的典型向左划动手势,在本公开中,计算机设备30可以被配置为检测手势以执行不同、无关的动作。例如如果压力量小于阈值,则划动图案可以被识别为普通划动。如果压力量等于或大于阈值,则划动图案可以被识别为具有对应的可编程动作的加压划动图案。加压动作可以基于在显示器16上的相应压力点(例如点44)处由用户输入接收的压力量,以用信号通知加压的划动图案。除了在点44处检测到的压力量之外,还可以检测用户输入在执行向左划动48之前保持在点44处的时间长度,以确定接收到的压力量是否指示加压的划动图案。
参照图5,基于与已知的划动图案匹配的图4的检测到的用户输入17(例如在压力点44处与图4所示的向左划动48组合的用户输入),多个预定义可编程动作31中的对应的一个对应于多个划动图案33中所检测到的一个指示用户期望突出显示动作50以突出显示窗口46的该部分中的内容。
参考图6和7,计算机设备30的示例实现可以被配置为检测显示器16上的用户输入17的压力以输入或重复字符、词语或表情符号。在该示例实现中,用户输入17可以包括在点50处接收压力并且在点50处接收压力之后接收U形划动图案52。在点50处从用户输入17感测到的压力与U形划动图案52结合可以被确定与多个划动图案33之一匹配,并且可以将匹配的划动图案映射到多个预定义的可编程动作31之一,在这种情况下,该动作指示用户希望生成笑脸表情符号54,如图7所示,诸如但不限于现有显示文本56的结尾。
参照图8,可以由计算机设备12和/或计算机设备30执行的方法80的一个示例包括基于可变用户输入时间和/或压力图案显示可变显示输出的方法。
例如在82处,方法80包括跨用户接口设备的显示表面上的多个点接收用户输入。例如在一种实现中,计算机设备12和/或30可以跨用户接口14的显示表面21上的多个点25接收用户输入17。上面描述了接收用户输入17的更多细节。
例如在84处,方法80包括检测在显示表面上的多个点处的用户输入。例如在一种实现中,计算机设备12和/或30可以包括输入检测器18,该输入检测器18用于检测在显示表面21上的多个点25处的用户输入17。检测用户输入17的更多细节如上所述。
例如在86,方法80包括测量在多个点中的每个点处的用户输入的输入值的量。例如在一种实现中,计算机设备12和/或30可以包括测量设备20,该测量设备20操作以在多个点25的每一个处测量用户输入17的输入值29的量。测量用户输入17的更多细节如上所述。
例如在88处,方法80包括基于预定义的可编程动作来生成显示输出,该预定义的可编程动作对应于相应点中的至少一个点处的输入值的量,该至少一个点处的输入值的量相对于相应点中的其他点中的一个或多个点处的输入值的量变化。例如在一种实现中,计算机设备12和/或30可以包括处理器22,该处理器22与存储器24进行通信并且可操作用于基于预定的可编程动作来生成显示输出23,例如多个预定的可编程动作31之一,其对应于例如与多个划动图案33中已识别的一个划动图案相关联的相应点中的至少之一处的输入值的量,其相对于在相应点25中的其他点中的一个或多个点处的输入值29的量变化。例如当用户输入17被识别为具有与多个划动图案33之一相匹配的多个点25时,则在一个或多个点处的用户输入17的压力和/或时间量可以大于或小于在其他点处的压力和/或时间量,并且这些参数的组合可以用于使多个点25与多个划动图案33中的特定一个和多个可编程动作31中的对应一个相匹配。
另外,例如在82处,方法80包括在用户接口设备上显示显示输出。例如在一种实现中,计算机设备12和/或30可以包括显示器16,显示器16可操作为显示由处理器22生成的显示输出23。
在一些替代实现中,计算机设备12和/或30可以包括检测器,该检测器还被配置为标识多个点中的每个点的位置,并且处理器被配置为基于多个点中的每个点的位置来将跨多个点的用户输入识别为与多个划动图案之一相匹配的划动图案,并通过从映射到多个划动图案的多个预定义可编程动作中选择预定义可编程动作来将划动图案映射到预定义可编程动作。
在一些替代实现中,计算机设备12和/或30可以包括测量设备,该测量设备还被配置为测量输入值作为压力,并且测量由用户输入在划动图案的多个点中的每一个点处接收的压力量,并且处理器还被配置为将多个点中的每个点处的压力量与压力阈值进行比较,以确定多个预定义可编程动作中的哪一个映射到划动图案。
在一些替代实现中,计算机设备12和/或30可以包括测量设备,该测量设备还被配置为测量作为时间的输入值,并且测量在划动图案的多个点中的每个点处保持用户输入的时间量,并且处理器还被配置为将多个点中的每个点处的时间量与时间阈值进行比较,用于确定多个预定义可编程动作中的哪个映射到划动图案。
在一些替代实现中,计算机设备12和/或30可以包括测量设备,该测量设备被配置为测量作为随时间的压力的输入值,并且测量在划动图案的多个点中的每个点处由用户输入接收的压力量,和在划动图案的多个点中的每个点处保持用户输入的时间量,并且处理器还被配置为将在相应点中的每个点处的在随时间的压力量与在随时间的压力阈值进行比较,用于确定多个预定义的可编程动作中的哪一个映射到划动图案。
在一些替代实现中,当在多个点中的至少一个点处所测量的压力量超过压力阈值时,计算机设备12和/或30可以包括处理器,该处理器被配置为将用户输入识别为加压的划动图案,使得生成与划动图案相对应的预定义的可编程动作。
在一些实现中,当在多个点中的至少一个点处所测量的压力量超过阈值并且多个点中的至少一个点的位置对应于虚拟键盘上的字符时,计算机设备12和/或30可以包括处理器,该处理器被配置为将用户输入识别为加压的划动图案,使得与加压的划动图案相对应的预定义的可编程动作生成显示输出,显示输出具有取决于所测压力量的值来重复的字符中的两个或更多个字符。
在一些实现中,当在多个点中的至少一个处测量的随时间的压力量超过随时间的压力阈值时,计算机设备12和/或30可以包括处理器,该处理器被配置为将用户输入识别为加压的划动图案,使得与加压的划动图案相对应的预定义的可编程动作生成显示输出,该显示输出具有取决于所所测量的随时间的压力量的值来重复的字符中的两个或更多个字符。
在一些实现中,当在多个点中的至少一个点处测量的压力的量超过第一阈值并且小于第二阈值,并且多个点中的至少一个点的位置对应对于虚拟键盘上的至少一个字符时,计算机设备12和/或30可以包括处理器,该处理器被配置为将用户输入识别为加压的划动图案,使得与加压的划动图案相对应的预定义的可编程动作生成具有在至少一个字符上突出显示的显示输出。
可以根据可以包括多个设备、组件、模块等的系统来呈现各种实现或特征。应当理解和意识到,各种系统可以包括附加的设备、组件、模块等,和/或可以不包括结合附图所讨论的所有设备、组件、模块等。这些方案的组合也可以被使用。
此外,结合本文公开的实现描述的方法或过程的步骤和/或动作可直接体现在硬件中,在由处理器执行的软件模块中或在两者的组合中。软件模块可以驻留在RAM存储器、闪存、ROM存储器、EPROM存储器、EEPROM存储器、寄存器、硬盘、可移动磁盘、CD-ROM或本领域已知的任意其他形式的存储介质中。示例性存储介质可以耦合到处理器,使得处理器可以从该存储介质读取信息,以及可以向该存储介质写入信息。替代地,存储介质可以与处理器集成在一起。此外,在一些实现中,处理器和存储介质可以驻留在ASIC中。另外,ASIC可以驻留在用户终端中。替代地,处理器和存储介质可以作为分立组件驻留在用户终端中。另外,在一些实现中,方法或过程的步骤和/或动作可作为代码和/或指令的一个或任意组合或集合驻留在机器可读介质和/或计算机可读介质上,所述机器可读介质和/或计算机可读介质可被并入计算机程序产品。
在一个或多个实现中,可以以硬件、软件、固件或其任意组合来实现所描述的功能。如果以软件实现,则功能可以作为在计算机可读介质上的一个或多个指令或代码被存储或传输。计算机可读介质包括计算机存储介质和通信介质两者,通信介质包括促进将计算机程序从一个地方转移到另一地方的任意介质。存储介质可以是计算机可以访问的任意可用介质。作为示例而非限制,这种计算机可读介质可包括RAM、ROM、EEPROM、CD-ROM或其他光盘存储、磁盘存储或其他磁性存储设备、或任何其他可用于以指令或数据结构形式携带或存储所需程序代码且可由计算机访问的介质。本文使用的磁盘和光盘包括压缩光盘(CD)、激光光盘、光盘、数字多功能光盘(DVD)、软盘和蓝光光盘,其中磁盘通常以磁性方式复制数据,而光盘通常以激光方式以光学方式复制数据。上述的组合也应被包括在计算机可读介质的范围内。
尽管已经以特定于结构特征和/或方法动作的语言描述了示例实现,但是应该理解,所附权利要求书中定义的实现不一定限于所描述的特定特征或动作。相反,公开了特定的特征和动作作为实现所要求保护的特征的示例形式。

Claims (13)

1.一种计算机设备,包括:
用户接口,具有显示表面并且被配置为接收被识别为跨所述显示表面上的虚拟键盘的至少第一虚拟键和第二虚拟键的单个划动手势的连续用户输入;
检测器,邻近所述用户接口并且被配置为检测被识别为跨所述显示表面上的所述虚拟键盘的所述第一虚拟键和所述第二虚拟键的所述单个划动手势的所述连续用户输入;
测量设备,与所述检测器通信,并且被配置为测量所述连续用户输入在所述第一虚拟键和第二虚拟键中的每个虚拟键处施加的压力的量,包括测量在所述第一虚拟键处施加的压力的第一量和在所述第二虚拟键处施加的压力的第二量;
处理器,与所述测量设备通信,并且被配置为:
确定在所述第一虚拟键处的压力的所述第一量和在所述第二虚拟键处的压力的所述第二量之间的压力的差异量;以及
基于预定义的可编程动作来生成显示输出,所述预定义的可编程动作对应于所述单个划动手势和压力的所述差异量,生成所述显示输出包括:
在所述第一量和所述第二量之间的压力的所述差异量大于预定阈值时,生成第一显示输出;以及
在所述差异量小于所述预定阈值时,生成与所述第一显示输出不同的第二显示输出;以及
显示单元,与所述处理器通信,并且被配置为在所述用户接口上显示所生成的所述第一显示输出或所生成的所述第二显示输出。
2.根据权利要求1所述的设备,
其中所述处理器被配置为:
基于所述所述第一虚拟键和所述第二虚拟键来将所述单个划动手势匹配到多个划动手势中的划动手势;以及
通过从被映射到所述多个划动手势的多个预定义的可编程动作选择所述预定义的可编程动作,将所述划动手势映射到所述预定义的可编程动作。
3.根据权利要求1所述的设备,
其中所述测量设备还被配置为测量所述连续用户输入被保持在所述第一虚拟键和所述第二虚拟键中的每个虚拟键处的时间量。
4.根据权利要求1所述的设备,其中所述预定义的可编程动作生成具有被重复的所述第一虚拟键的字符中的两个或更多个字符的所述显示输出。
5.根据权利要求1所述的设备,其中所述预定义的可编程动作生成具有在至少一个字符处的突出显示的所述显示输出。
6.一种在显示器上生成输出的方法,包括:
接收被识别为跨用户接口设备的显示表面上的虚拟键盘的至少第一虚拟键和第二虚拟键的单个划动手势的连续用户输入;
检测跨所述显示表面上的所述虚拟键盘的所述第一虚拟键和所述第二虚拟键的所述单个划动手势的所述连续用户输入;
测量所述连续用户输入在所述第一虚拟键和第二虚拟键中的每个虚拟键处施加的压力的量,包括测量在所述第一虚拟键处施加的压力的第一量和在所述第二虚拟键处施加的压力的第二量;
确定在所述第一虚拟键处的压力的所述第一量和在所述第二虚拟键处的压力的所述第二量之间的压力的差异量;
基于预定义的可编程动作来生成显示输出,所述预定义的可编程动作对应于所述单个划动手势和压力的所述差异量,生成所述显示输出包括;
在所述第一量和所述第二量之间的所述差异量大于预定阈值时,生成第一显示输出;以及
在所述差异量小于所述预定阈值时,生成第二显示输出;以及
在所述用户接口设备上显示所生成的所述第一显示输出或所生成的所述第二显示输出。
7.根据权利要求6所述的方法,还包括:
基于所述第一虚拟键和所述第二虚拟键来将所述单个划动手势匹配到多个划动手势中的划动手势;以及
通过从被映射到所述多个划动手势的多个预定义的可编程动作选择所述预定义的可编程动作,将所述划动手势映射到所述预定义的可编程动作。
8.根据权利要求6所述的方法,
其中所述测量还包括:测量所述连续用户输入被保持在所述第一虚拟键和所述第二虚拟键中的每个虚拟键处的时间量。
9.根据权利要求6所述的方法,其中所述预定义的可编程动作生成具有被重复的所述第一虚拟键的字符中的两个或更多个字符的所述显示输出。
10.根据权利要求6所述的方法,其中所述预定义的可编程动作生成具有在至少一个字符上的突出显示的显示输出。
11.根据权利要求6所述的方法,其中测量设备被配置为测量所述连续用户输入被保持在所述第一虚拟键和所述第二虚拟键中的每个虚拟键处的时间量。
12.根据权利要求6所述的方法,其中所述预定义的可编程动作生成具有被重复的所述第一虚拟键的字符中的两个或更多个字符的所述显示输出。
13.根据权利要求6所述的方法,其中所述预定义的可编程动作生成具有在至少一个字符上的突出显示的所述显示输出。
CN201880086003.8A 2018-01-12 2018-12-27 基于用户输入的具有可变显示输出的计算机设备 Active CN111566609B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US15/870,112 2018-01-12
US15/870,112 US11061556B2 (en) 2018-01-12 2018-01-12 Computer device having variable display output based on user input with variable time and/or pressure patterns
PCT/US2018/067768 WO2019139784A1 (en) 2018-01-12 2018-12-27 Computer device having variable display output based on user input with variable time and/or pressure patterns

Publications (2)

Publication Number Publication Date
CN111566609A CN111566609A (zh) 2020-08-21
CN111566609B true CN111566609B (zh) 2023-09-15

Family

ID=65139243

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880086003.8A Active CN111566609B (zh) 2018-01-12 2018-12-27 基于用户输入的具有可变显示输出的计算机设备

Country Status (4)

Country Link
US (1) US11061556B2 (zh)
EP (1) EP3738023A1 (zh)
CN (1) CN111566609B (zh)
WO (1) WO2019139784A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115129225A (zh) * 2021-03-26 2022-09-30 北京小米移动软件有限公司 键盘工具栏显示方法、键盘工具栏显示装置及存储介质
US20240078008A1 (en) * 2022-09-02 2024-03-07 Qualcomm Incorporated Force-based functionality for a graphical user interface including a keyboard

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1761989A (zh) * 2003-01-16 2006-04-19 克利福德·A·库什勒 基于连续笔划字词的文本输入系统和方法
CN102483662A (zh) * 2009-08-27 2012-05-30 京瓷株式会社 输入装置
CN103038728A (zh) * 2010-03-12 2013-04-10 纽昂斯通信有限公司 例如在移动电话上使用触摸屏的多模式文本输入系统
CN103827785A (zh) * 2011-09-12 2014-05-28 摩托罗拉移动有限责任公司 通过触敏显示屏使用压力差
CN107209577A (zh) * 2015-02-03 2017-09-26 谷歌公司 用户状态自适应文本输入

Family Cites Families (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7614008B2 (en) * 2004-07-30 2009-11-03 Apple Inc. Operation of a computer with touch screen interface
US6893344B2 (en) * 2002-07-01 2005-05-17 Leif Eric Brown Casino style gaming machine
JP2007058785A (ja) * 2005-08-26 2007-03-08 Canon Inc 情報処理装置及び前記装置におけるドラグオブジェクトの操作方法
US8059101B2 (en) * 2007-06-22 2011-11-15 Apple Inc. Swipe gestures for touch screen keyboards
KR101598335B1 (ko) * 2009-06-11 2016-02-29 엘지전자 주식회사 휴대 단말기 및 그 동작방법
WO2011011025A1 (en) * 2009-07-24 2011-01-27 Research In Motion Limited Method and apparatus for a touch-sensitive display
JP5304544B2 (ja) * 2009-08-28 2013-10-02 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
KR101557358B1 (ko) * 2010-02-25 2015-10-06 엘지전자 주식회사 문자열 입력 방법 및 그 장치
GB2485999A (en) * 2010-11-30 2012-06-06 St Microelectronics Res & Dev Optical keyboard each key recognising multiple different inputs
US9213421B2 (en) * 2011-02-28 2015-12-15 Blackberry Limited Electronic device and method of displaying information in response to detecting a gesture
US20160132119A1 (en) * 2014-11-12 2016-05-12 Will John Temple Multidirectional button, key, and keyboard
US10275153B2 (en) * 2011-05-19 2019-04-30 Will John Temple Multidirectional button, key, and keyboard
US20130063366A1 (en) * 2011-09-13 2013-03-14 Google Inc. User inputs of a touch-sensitive device
US8959430B1 (en) * 2011-09-21 2015-02-17 Amazon Technologies, Inc. Facilitating selection of keys related to a selected key
US8490008B2 (en) * 2011-11-10 2013-07-16 Research In Motion Limited Touchscreen keyboard predictive display and generation of a set of characters
US20130111342A1 (en) * 2011-11-02 2013-05-02 Motorola Mobility, Inc. Effective User Input Scheme on a Small Touch Screen Device
WO2013067618A1 (en) * 2011-11-09 2013-05-16 Research In Motion Limited Touch-sensitive display method and apparatus
CN106201316B (zh) * 2012-05-09 2020-09-29 苹果公司 用于选择用户界面对象的设备、方法和图形用户界面
JP6002836B2 (ja) * 2012-05-09 2016-10-05 アップル インコーポレイテッド ジェスチャに応答して表示状態間を遷移するためのデバイス、方法、及びグラフィカルユーザインタフェース
WO2013169865A2 (en) * 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
CN105260049B (zh) * 2012-05-09 2018-10-23 苹果公司 用于响应于用户接触来显示附加信息的设备、方法和图形用户界面
US9116552B2 (en) * 2012-06-27 2015-08-25 Blackberry Limited Touchscreen keyboard providing selection of word predictions in partitions of the touchscreen keyboard
US20140002374A1 (en) * 2012-06-29 2014-01-02 Lenovo (Singapore) Pte. Ltd. Text selection utilizing pressure-sensitive touch
DE112012006009T5 (de) * 2012-12-20 2014-11-27 Intel Corporation Berührungsbildschirm mit Kraftsensoren
US20160139803A1 (en) * 2013-03-11 2016-05-19 City University Of Hong Kong Regional zooming virtual keyboards for accurate typing on small displays
US20140306898A1 (en) * 2013-04-10 2014-10-16 Barnesandnoble.Com Llc Key swipe gestures for touch sensitive ui virtual keyboard
US9081500B2 (en) * 2013-05-03 2015-07-14 Google Inc. Alternative hypothesis error correction for gesture typing
WO2014201151A1 (en) * 2013-06-11 2014-12-18 Immersion Corporation Systems and methods for pressure-based haptic effects
KR102091509B1 (ko) * 2013-06-26 2020-03-20 삼성전자주식회사 문자 입력 처리 방법 및 상기 방법이 적용되는 장치
US20150304251A1 (en) * 2014-04-17 2015-10-22 Tictoc Planet, Inc. Direct Manipulation of Object Size in User Interface
US20150324100A1 (en) * 2014-05-08 2015-11-12 Tictoc Planet, Inc. Preview Reticule To Manipulate Coloration In A User Interface
US10048862B2 (en) * 2014-09-08 2018-08-14 Lenovo (Singapore) Pte. Ltd. Managing an on-screen keyboard
US9940016B2 (en) * 2014-09-13 2018-04-10 Microsoft Technology Licensing, Llc Disambiguation of keyboard input
US9632664B2 (en) * 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
CN104615591B (zh) * 2015-03-10 2019-02-05 上海触乐信息科技有限公司 基于上下文的前向输入纠错方法和装置
US9891811B2 (en) * 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
KR20170036424A (ko) * 2015-09-24 2017-04-03 삼성전자주식회사 터치 속성에 대응하는 이벤트를 제공하기 위한 방법 및 그 전자 장치
US20170336969A1 (en) * 2016-05-17 2017-11-23 Google Inc. Predicting next letters and displaying them within keys of a graphical keyboard
US20180018086A1 (en) * 2016-07-14 2018-01-18 Google Inc. Pressure-based gesture typing for a graphical keyboard
US11199965B2 (en) * 2016-12-29 2021-12-14 Verizon Patent And Licensing Inc. Virtual keyboard

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1761989A (zh) * 2003-01-16 2006-04-19 克利福德·A·库什勒 基于连续笔划字词的文本输入系统和方法
CN102483662A (zh) * 2009-08-27 2012-05-30 京瓷株式会社 输入装置
CN103038728A (zh) * 2010-03-12 2013-04-10 纽昂斯通信有限公司 例如在移动电话上使用触摸屏的多模式文本输入系统
CN103827785A (zh) * 2011-09-12 2014-05-28 摩托罗拉移动有限责任公司 通过触敏显示屏使用压力差
CN107209577A (zh) * 2015-02-03 2017-09-26 谷歌公司 用户状态自适应文本输入

Also Published As

Publication number Publication date
WO2019139784A1 (en) 2019-07-18
CN111566609A (zh) 2020-08-21
US11061556B2 (en) 2021-07-13
US20190220183A1 (en) 2019-07-18
EP3738023A1 (en) 2020-11-18

Similar Documents

Publication Publication Date Title
US8922489B2 (en) Text input using key and gesture information
US10642933B2 (en) Method and apparatus for word prediction selection
US8004503B2 (en) Auto-calibration of a touch screen
US9552125B2 (en) Input method editor
US20090066659A1 (en) Computer system with touch screen and separate display screen
KR101522375B1 (ko) 입력 방법 편집기
US20150149947A1 (en) Character deletion during keyboard gesture
EP3084580A1 (en) User interface for overlapping handwritten text input
KR20140108176A (ko) 문자열 대체
CN104063063A (zh) 输入法的数学计算输入方法和输入法系统
US20140365878A1 (en) Shape writing ink trace prediction
US10755027B2 (en) Gesture ambiguity determination and resolution
CN111566609B (zh) 基于用户输入的具有可变显示输出的计算机设备
CN103176737A (zh) 手写句子系统的基于多点触摸的校正的方法和设备
US20160266659A1 (en) Method and apparatus for word prediction using the position of a non-typing digit
KR20100024471A (ko) 터치스크린을 사용해 초성, 중성 또는 종성을 한 번에 입력하는 한글입력방법 및 장치
US20130120305A1 (en) User interface for facilitating character input
EP2778859B1 (en) Method and apparatus for word prediction using the position of a non-typing digit
CA2846561C (en) Method and apparatus for word prediction selection
US20160306528A1 (en) Display apparatus capable of accepting operation for partially selecting display content, and display method
CN111241513A (zh) 触控方法、终端和存储介质
KR101544166B1 (ko) 터치스크린을 이용한 데이터 입력 장치 및 방법과 이를 실행하기 위한 기록매체 및 프로그램
KR102138095B1 (ko) 음성 명령 기반의 가상 터치 입력 장치
EP2778860A1 (en) Method and apparatus for word prediction selection
KR101269633B1 (ko) 터치 입력 방식을 이용하여 한글을 입력하기 위한 장치 및 그 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant