CN102246126A - 基于手势的编辑模式 - Google Patents

Abstract

一种用于文档编辑的系统和方法。一种系统包括操作员输入设备、处理器、手势辨识程序和编辑模式程序。该操作员输入设备感测手势和多个同时的触摸点。该处理器被耦合到操作员输入设备。该处理器执行辨识来自输入设备的输入的手势辨识程序。该手势辨识程序辨识预定编辑模式手势并且仅仅基于该手势使得处理器执行编辑模式程序。该编辑模式程序提供用于修改当前显示的文档的多个文档编辑功能。

Description

基于手势的编辑模式

背景技术

这些年来，已经研发出各种类型的用户接口系统以便促进对计算机和其它电子设备的控制。简单的开关和旋钮足以向某些电子设备提供操作员输入信息。在另一方面，计算机系统通常已经采用了更加灵活的数据和控制输入装置。在命令行环境中键盘输入是主导性的，并且键盘输入的灵活性指示在可以预见的未来某种形式的键盘输入（例如硬或者软键盘输入）很可能继续存在。

指向设备的使用随着图形用户接口的出现而增加。鼠标、轨迹球、触摸板、操纵杆等通常被用于引导光标在图形用户接口的显示屏幕上的移动。

触摸屏技术允许显示器的表面或者近表面用作用户接口设备。当使用某些触摸屏技术时，触摸屏探测形式为屏幕触摸或者近屏幕触摸的用户输入。触摸屏是有利的，因为除了被耦合到显示器的触摸探测设备之外，不需要专用输入设备。各种触摸屏技术是可用的，包括电阻性、电容性、红外、表面声波和视频，每一种技术均具有它的优点和缺点。

使得能够辨识多个触摸点的触摸屏系统已经变得越来越普及。这些系统允许使用手势（例如，手或者手指运动）和/或和弦（chording）（例如，多个手指或者手触摸点的同时使用）来扩展并且简化触摸屏操作。然而，类似在命令行系统中的大的命令词汇表，对于用户而言，记忆一组大量的手势可能是困难的。

附图说明

为了详细地描述本发明的示例性实施例，现在将对附图进行参考，其中：

图1示出根据各种实施例的包括能够应用于各种应用的、基于手势的编辑模式的系统；

图2示出根据各种实施例的包括能够应用于各种应用的、基于手势的编辑模式的系统的框图；

图3示出根据各种实施例的用于实现能够应用于各种应用的、基于手势的编辑模式的方法的流程图；

图4示出根据各种实施例的在包括基于手势的编辑模式的系统中使用的示例性选择手势；

图5示出根据各种实施例的在包括基于手势的编辑模式的系统中使用的示例性拷贝手势；

图6示出根据各种实施例的在包括基于手势的编辑模式的系统中使用的示例性粘贴手势；

图7示出根据各种实施例的在包括基于手势的编辑模式的系统中使用的示例性剪切手势；并且

图8示出根据各种实施例的在包括基于手势的编辑模式的系统中使用的示例性撤消手势。

符号和术语

在整个以下说明和权利要求中使用了某些术语以指代特定的系统构件。如本领域技术人员将理解的，计算机公司可以用不同的名称指代构件。本文献并不打算区分名称不同而功能相同的构件。在以下讨论中和在权利要求中，术语“包含”和“包括”是以开放的方式使用的，并且因此应该被解释为意味着“包括，但是不限于…”。而且，术语“耦合”打算意指间接的、直接的、光学或者无线电连接。因此，如果第一设备耦合到第二设备，则该连接可以是通过直接电连接、通过经由其它设备和连接的间接电连接、通过光电连接或者通过无线电连接。此外，术语“软件”包括能够在处理器上运行的任何可执行代码，而与被用于存储软件的介质无关。因此，在软件的定义内包括在存储器（例如，非易失存储器）中存储并且有时被称作“嵌入固件”的代码。

具体实施方式

以下讨论针对本发明的各种实施例。虽然这些实施例中的一个或者多个可以是优选的，但是所公开的实施例不应该被解释或者被以其它方式用作限制包括权利要求的本公开的范围。另外，本领域技术人员将会理解，以下说明具有广泛的应用，并且任何实施例的讨论仅仅旨在例证该实施例，而非旨在暗示包括权利要求的本公开的范围被限于该实施例。

在任何数目的不同平台上的多种应用中，例如剪切、拷贝、粘贴、撤消、文本/对象选择等的文档编辑功能是可用的。这些编辑功能不限于编辑器或者字处理器，而是能够例如在web浏览器、电子表格应用、文档查看器、电子邮件客户端和许多其它应用中发现。通常，处理文本和/或图形的任何应用能够包括这些编辑功能。

基于触摸屏的系统采用屏幕上的手指轻叩和/或手势来启动操作。本公开的实施例包括一种新颖的基于手势的编辑模式以在基于手势的系统中简化普通文档编辑功能的使用。图1示出根据各种实施例的包括能够被应用于各种应用的、基于手势的编辑模式的系统100。系统100包括视觉显示器110、触摸和/或手势输入设备104、处理器106和数据/程序储存器112。系统100的某些实施例能够包括其它输入设备，例如键盘108、鼠标等。实施例还能够包括各种输入/输出子系统以实现例如有线和/或无线联网。在图1中，系统100被描绘成笔记本计算机，然而在实践中系统100能够是各种电子设备中的任何一种。例如，系统100能够是基于触摸屏或者手势的电话、个人数字助理、音乐播放器、桌上型计算机、卫星导航系统、游戏系统或者提供文档编辑的其它设备。

视觉显示器110向系统100的用户提供信息，并且能够是例如液晶显示器（“LCD”）、有机发光二极管（“OLED”）显示器，或者能够与基于触摸和/或手势的输入技术一起使用的任何其它显示器技术。

通过探测操作员与设备104的接触或者在设备104的附近的手势并且产生代表探测到的接触和/或手势的电信号，基于触摸和/或手势的输入设备104向系统100提供操作员输入。在图1中，用户102被示为接触基于触摸/手势的输入设备104以向系统100提供输入。能够以各种技术例如电阻性、电容性、表面声波、红外中的任何一种实现输入设备104，或者光学系统能够覆盖视觉显示器110。在某些实施例中，能够使用视频系统探测用户手势。系统100的实施例涵盖探测用户接触和/或手势并且将探测到的接触和/或手势转换成电信号的所有的输入设备。

处理器106能够是被配置为执行软件程序的通用微处理器、微控制器、数字信号处理器等。处理器的构件在该技术领域中是众所周知的并且通常包括被总线相互连接的执行单元（例如整数、定点、浮点等）、指令解码、寄存器、存储器、输入/输出端口等。

数据/程序储存器112被耦合到处理器106。数据/程序储存器112能够包括各种存储介质，例如磁储存器（例如硬盘、软盘、磁带等）、光学储存器（例如紧致盘、数字视频盘等）或者半导体存储器（例如，静态或者动态随机存取存储器（“SRAM”或者“DRAM”）、只读存储器（“ROM”）、闪存、磁随机存取存储器（“MRAM”）等）。

系统100包括在储存器112中存储的软件编程，所述软件编程当由处理器106执行时提供启动在多种应用中可用的编辑模式的手势的辨识，所述应用包括剪切、粘贴、拷贝、撤消和/或选择操作。在辨识编辑模式手势时，实施例进一步辨识对应于剪切、粘贴、拷贝、撤消和/或选择操作中的每一个的手势、执行选定的操作并且退出编辑模式。因此，实施例有利地提供简单的和一致的、执行能够被应用于多种应用的文档编辑操作的方法。

图2示出根据各种实施例的包括能够被应用于多种应用的、基于手势的编辑模式的系统100的框图。如以上解释的，显示器110向系统用户提供可视输出。显示器110被耦合到处理器106，处理器106提供在显示器110上以可视形式向用户呈现的视频数据206。视频数据206能够包括文本数据、图形数据等。

触摸/手势输入设备104探测用户接触和/或手势并且向处理器106提供代表接触和/或手势的电信号208。信号208代表识别用户希望执行的操作的接触/手势。在本公开的实施例中，信号208代表指示用户希望在显示器110上呈现的文档上启动编辑模式和/或执行编辑操作的手势。

处理器106执行在程序/数据储存器112中存储的软件编程。在储存器112中存储的编程包括编辑手势辨识程序202和编辑操作程序204。手势辨识程序202处理信号208以确定所代表的接触或者手势。手势辨识程序的实施例使得处理器106识别指示用户进入编辑模式的期望，或者使用在显示器110上呈现的文档执行剪切、粘贴、拷贝、撤消和/或选择操作的期望的手势。当特定手势已经被识别为编辑手势时，编辑操作软件204使得处理器在显示器110上呈现的文档上执行所指示的操作。因此，编辑操作204能够引起对于储存器112中的文档的修改和在显示器110上呈现的文档的对应的修改。

系统100的某些实施例包括编辑手势辨识202和执行在下面关于图3的流程图描述的操作的编辑操作204。系统100的某些实施例包括将下面关于图4-8描述的手势识别为编辑手势的编辑手势辨识202。

图3示出根据各种实施例的用于实现能够被应用于各种应用的、基于手势的编辑模式的方法的流程图。虽然为方便起见顺序地描绘，但是所示动作的至少某些动作能够被以不同的顺序执行和/或被并行地执行。另外地，某些实施例可以执行所示动作中的仅仅某些动作。

在方框302中，触摸/手势输入设备104探测用户接触或者手势。接触或者手势被转换成电信号208，并且电信号被提供给处理器106。处理器106执行编辑手势辨识程序202的指令以确定信号208是否代表指示用户期望执行文档编辑模式的手势。在某些实施例中，用户能够同时用两个手指轻叩输入设备104（即，在彼此处于预定接近范围内的两个点处与输入设备形成接触）以指示期望进入编辑模式。然而，实施例不限于任何特定的和弦或者手势来指示文档编辑模式的选择。

如果在方框304中执行手势辨识程序202的处理器106确定已经执行了编辑模式选择手势，则在方框306中启动文档编辑模式，否则在方框302中，手势处理继续进行。

在至少某些实施例中，在方框308中系统100处于文档编辑模式中并且处理器106正在接收和处理信号208以识别表示用户期望实施的编辑功能的手势。本公开的实施例包括对应于剪切、粘贴、拷贝、撤消和/或选择操作的手势的辨识。在启动编辑模式之后，用户实施对应于这些操作之一的手势，并且在方框310中，处理器106执行编辑操作软件204，以实施所请求的编辑操作。在某些实施例中，由在处理器106上执行的手势辨识程序202辨识的编辑操作手势对应于在图4-8中描述的剪切、粘贴、拷贝、撤消和/或选择手势。

剪切、粘贴、拷贝、选择和撤消操作在本技术领域中是众所周知的。通常，选择操作允许用户例如选择将在其上执行后续编辑操作的文本串或者对象。剪切操作能够例如从文档移除选定的文本串或者对象。拷贝操作能够例如复制选定的文本串或者对象以便稍后包括在文档中。粘贴操作能够例如将先前存储的文本串或者对象的副本插入文档中。撤消操作能够例如取消先前执行的编辑操作的效果。

在方框312中，退出编辑模式。在至少某些实施例中，在执行任何单一编辑操作之后退出编辑模式。因此，在某些实施例中，系统在方框306中进入编辑模式，在方框310中执行单一的选定编辑操作，并且在方框312中退出编辑模式。

某些实施例不要求辨识指定的手势（例如同时用两个手指轻叩）来进入编辑模式，相反，这些实施例在辨识到编辑功能手势（即，选择手势、拷贝手势、剪切手势、粘贴手势或者撤消手势）时进入编辑模式。

图4示出能够在系统100的各种实施例中使用的示例性选择手势。在图4中，用户期望选择所显示的文本406。为了选择文本406，用户优选地在点402处接触输入设备104并且维持在点402处的接触达预定的时间间隔（例如，1-1.5秒）。输入设备104探测到该接触并且向处理器106提供代表该接触的信号208。基于信号208，执行编辑手势辨识程序202的处理器106确定用户期望选择当前显示的文本串或者对象。用户维持与输入设备104的接触，并且将他的手指刷过文本406以选择文本406。当用户中断与输入设备104接触时，选择完成。输入设备向处理器106提供信号208，信号208代表用户在输入设备104上的接触点在文本406之上的移动，和用户与输入设备104的接触的停止。处理器106处理信号208以确定所选定的文本或者对象。在某些实施例中，处理器和相关联的软件可以通过例如在显示器110上突出显示选定的文本406而向用户提供反馈。

图5示出在系统100的各种实施例中使用的示例性拷贝手势。在某些实施例中，在执行拷贝手势之前，用户已经执行了先前的手势（例如利用两个手指轻叩输入设备104）以进入编辑模式。在图5中，用户期望对于先前选定的文本506进行拷贝。为了拷贝文本506，用户优选地在点502（其可以是在输入设备104上的任何点）处利用两个手指接触输入设备104。该两个手指可以例如是用户的拇指和食指。该两个手指优选地彼此在预定的接近范围内，例如接触或者分开小于一厘米。在维持两个手指与输入设备104接触时，第一手指（例如，拇指）以半圆弧移动到输入设备104上、另一手指下面的位置504。输入设备104探测到手指的接触和第一手指的移动并且向处理器106提供代表接触和移动的信号208。基于信号208，执行编辑手势辨识程序202的处理器106确定用户期望拷贝预先选定的对象或者文本串。在某些实施例中，处理器和相关联的软件（例如，编辑操作程序204）在储存器112中存储选定文本的副本。

图6示出在系统100的各种实施例中使用的示例性粘贴手势。在某些实施例中，在执行粘贴手势之前，用户已经执行了先前的手势（例如利用两个手指轻叩输入设备104）以进入编辑模式。在图6中，用户期望将先前拷贝的文本串606粘贴到（即，插入）当前在显示器110上呈现的文档中。为了粘贴文本606，用户优选地在点604处利用两个手指接触输入设备104。该两个手指可以例如是用户的拇指和食指。该两个手指优选地彼此在预定的接近范围内，例如接触或者分开小于一厘米。在维持两个手指与输入设备104接触时，第一手指（例如，食指）以半圆弧移动到输入设备104上、在另一手指上方的位置602。输入设备104探测到手指的接触和第一手指的移动并且向处理器106提供代表该接触和移动的信号208。基于信号208，执行编辑手势辨识程序202的处理器106确定用户期望将先前存储的对象或者文本串粘贴到当前在显示器110上呈现的文档中。在某些实施例中，处理器和相关联的软件（例如，编辑操作程序204）使得文本在点602处被插入当前显示的文档中，其它实施例使得文本在点604或者另一点处被插入。

图7示出在系统100的各种实施例中使用的示例性剪切手势。在某些实施例中，在执行粘贴手势之前，用户已经执行了先前的手势（例如利用两个手指轻叩输入设备104）以进入编辑模式。在图7中，用户期望从当前在显示器110上呈现的文档中剪切（即，移除）先前选定的文本串706。为了剪切文本706，用户优选地在点702（点702能够是输入设备104上的任何点）处利用一个手指接触输入设备104。在维持与输入设备104接触时，该手指以顺时针环路移动到点704，从而形成带有泪珠形底部的X（                                               

）。输入设备104探测到手指的接触和移动并且向处理器106提供代表该接触和移动的信号208。基于信号208，执行编辑手势辨识程序202的处理器106确定用户期望剪切预先选定的文本706。在某些实施例中，处理器和相关联的软件（例如，编辑操作程序204）在储存器112中存储所移除的文本的副本。

图8示出在系统100的各种实施例中使用的示例性撤消手势。在某些实施例中，在执行粘贴手势之前，用户已经执行了先前的手势（例如利用两个手指轻叩输入设备104）以进入编辑模式。在图8中，用户期望在当前呈现在显示器110上的文档上撤消（即，取消）先前执行的编辑操作的效果（例如，恢复先前删除的文本）。为了撤消先前的操作，用户优选地在点802（点802能够是输入设备104上的任何点）处利用一个手指接触输入设备104。在维持与输入设备104接触时，该手指移动到点804，从而形成字母“U”。输入设备104探测到手指的接触和移动并且向处理器106提供代表该接触和移动的信号208。基于信号208，执行编辑手势辨识程序202的处理器106确定用户期望撤消先前的编辑操作，并且调用编辑操作程序204来执行该撤消操作。

以上讨论旨在说明本发明的原理和各种实施例。一旦以上公开得到充分理解，本领域技术人员便将清楚许多变化和修改。以下权利要求意欲被解释成涵盖所有的这种变化和修改。

Claims (15)

1. 一种系统，包括：

探测手势和多个同时的触摸点的操作员输入设备；

耦合到所述操作员输入设备的处理器，所述处理器执行处理来自所述输入设备的输入的手势辨识软件程序；

其中所述手势辨识程序辨识预定编辑模式手势并且基于所述手势，所述处理器执行编辑模式软件程序，所述编辑模式软件程序提供用于修改当前显示的文档的多个文档编辑功能。

2. 根据权利要求1的系统，其中当由所述处理器执行时，所述编辑模式程序提供剪切功能、粘贴功能、拷贝功能和撤消功能。

3. 根据权利要求1的系统，其中当所述多个编辑功能中的任何一个的执行结束时，所述处理器中断所述编辑模式程序的执行。

4. 根据权利要求1的系统，其中当所述手势辨识程序在由所述处理器执行时使得所述处理器探测到彼此处于预定接近范围内的两个用户接触点时，所述手势辨识程序使得所述处理器执行编辑模式软件程序。

5. 根据权利要求1的系统，其中当所述手势辨识程序使得所述处理器探测到彼此处于预定接近范围内的在所述输入设备上的两个用户接触点并且所述用户接触点之一随后以半圆弧移动到所述输入设备上的较低位置而同时另一用户接触点静止时，所述编辑模式程序使得所述处理器执行拷贝功能。

6. 根据权利要求1的系统，其中当所述手势辨识程序使得所述处理器探测到彼此处于预定接近范围内的在所述输入设备上的两个用户接触点并且所述用户接触点之一随后以半圆弧移动到所述输入设备上的较高位置而同时另一用户接触点静止时，所述编辑模式程序使得所述处理器执行粘贴功能。

7. 根据权利要求1的系统，其中当所述手势辨识程序使得所述处理器探测到在所述输入设备上的用户接触点并且所述点随后以顺时针环路移动从而形成具有泪珠底部的字母“X”（                                               

）时，所述编辑模式程序使得所述处理器执行剪切功能。

8. 根据权利要求1的系统，其中当所述手势辨识程序使得所述处理器探测到在所述输入设备上的用户接触点并且所述点随后逆时针移动以形成大写字母“U”时，所述编辑模式程序使得所述处理器执行撤消功能。

9. 一种方法，包括：

从手势输入设备接收第一信号，所述第一信号指示将要执行文档编辑模式程序；

执行所述文档编辑模式程序，所述程序允许在文档上执行多个可用编辑操作中的单一选定的编辑操作；

从所述手势输入设备接收第二信号，所述第二信号选择将被执行的单一编辑操作；

执行所述单一选定的文档编辑操作；

在所述单一选定的文档编辑操作结束时退出所述文档编辑模式程序。

10. 根据权利要求9的方法，进一步包括从由以下项组成的组中选择单一文档编辑操作：剪切操作、粘贴操作、拷贝操作和撤消操作。

11. 根据权利要求10的方法，进一步包括确定所述第二信号指示选自由以下项组成的组中的手势：

剪切手势，通过按压在所述手势输入设备上的点并且随后以顺时针环路移动所述点从而形成具有泪珠底部的字母“X”（

）而形成所述剪切手势；

粘贴手势，通过按压彼此处于预定接近范围内的在所述手势输入设备上的两个点并且随后将所述点之一以顺时针半圆弧移动到所述手势输入设备上的较高位置而同时另一个点保持静止，来形成所述粘贴手势；

拷贝手势，通过按压彼此处于预定接近范围内的在所述手势输入设备上的两个点并且随后将所述点之一以逆时针半圆弧移动到所述手势输入设备上的较低位置而同时另一个点保持静止来形成所述拷贝手势；和

撤消手势，通过按压在所述手势输入设备上的点并且随后逆时针移动所述点以形成大写字母“U”来形成所述撤消手势。

12. 一种编码有计算机程序的计算机可读介质，所述计算机程序包括使得处理器执行根据权利要求10的操作的指令。

13. 根据权利要求12的计算机可读介质，进一步包括使得处理器执行根据权利要求11的操作的指令。

14. 一种编码有计算机程序的计算机可读介质，包括：

当被执行时使得处理器实施编辑功能的指令，所述编辑功能选自包括拷贝功能、剪切功能、粘贴功能和撤消功能的编辑功能的组；和

当被执行时使得处理器识别对应于实施编辑功能的请求的手势的指令；

其中当被执行时使得所述处理器识别编辑手势的所述指令使得所述处理器识别拷贝手势，通过按压彼此处于预定接近范围内的、在手势输入设备上的两个点并且随后将所述点之一以逆时针半圆弧移动到所述手势输入设备上的较低位置而同时另一个点保持静止来形成所述拷贝手势。

15. 根据权利要求14的计算机可读介质，其中当被执行时使得所述处理器识别手势的所述指令使得所述处理器识别选自由以下项组成的编辑功能手势组中的编辑功能手势：

剪切手势，通过按压在所述手势输入设备上的点并且随后以顺时针环路移动所述点从而形成具有泪珠底部的字母“X”（

）而形成所述剪切手势；

粘贴手势，通过按压彼此处于预定接近范围内的、在所述手势输入设备上的两个点并且随后将所述点之一以顺时针半圆弧移动到所述手势输入设备上的较高位置而同时另一个点保持静止来形成所述粘贴手势；以及

撤消手势，通过按压在所述手势输入设备上的点并且随后逆时针移动所述点以形成大写字母“U”而形成所述撤消手势。

Images