CN101667074B

CN101667074B - 一种通过图形输入完成操作的装置及其方法

Info

Publication number: CN101667074B
Application number: CN2008101195779A
Authority: CN
Inventors: 叶颖华; 王雯; 李艳
Original assignee: Lenovo Beijing Ltd
Current assignee: Lenovo Beijing Ltd
Priority date: 2008-09-03
Filing date: 2008-09-03
Publication date: 2011-12-07
Anticipated expiration: 2028-09-03
Also published as: CN101667074A

Abstract

本发明是一种通过图形输入完成操作的装置及其方法。通过图形输入完成操作的装置，包括存储模块，用于存储文字和输入图形；图形分析模块，用于分析输入图形的特征；操作选择模块，用于根据所述输入图形特征的分析结果选择对应的操作；操作执行模块，用于执行对应的操作。通过图形输入完成操作的方法，包括在段落或文字中输入用于完成操作的图形；分析所述输入图形的特征；根据所述输入图形特征的分析结果选择对应的操作；执行所述对应的操作。本发明从操作体验上使文本编辑交互更加趋同于传统的纸笔，并且具有更快速的操作和更少的学习代偿的优点。

Description

一种通过图形输入完成操作的装置及其方法

技术领域

本发明涉及通过触摸技术实现输入操作的领域，具体涉及一种通过图形输入完成操作的装置及其方法。

背景技术

从最初的语音通讯、手机短信，到当前的PUSH MAIL、移动办公、视频娱乐、互联网浏览，人们的随身应用已变得越来越丰富。这种变化一方面使得手持设备的交互变得越来越复杂。以手机为例，原有的短信编辑可以通过五项键和数字键盘配合完成，但现在的WORD文档编辑因为存在大量的格式调整需求则可能需要一些更为自由的导航交互，例如：轨迹球、手触摸或触摸笔。

这种变化另一方面引发了手持设备的大屏幕化发展趋势。大屏幕化为手持设备的触摸交互发展提供了空间。触摸交互是一种所见即所得的交互，相比于五项键、鼠标、轨迹球等传统的操作显示相分离的交互，它是一种更为自然的交互。而目前已有的两种触摸交互(手触摸和触摸笔)中，手触摸对操作对象和操作设备大小有更为严苛的要求，过小的锚点设计和过小的界面尺寸都会影响手交互最终的效果和体验。因此，这种变化所带来的交互复杂化及手持大屏化为笔交互的发展与创新提供了机会。

使用一些图形去传达自己的意思是传统笔较之触摸笔的一个优势所在。传统意义上的笔不但是一个书写文字的工具，同时也是一个绘图的工具，大多数人都习惯于通过一些特定的图形去传达自己的意思。以文字编辑为例，传统的纸笔交互时，人们会使用很多的文本编辑的图形，用涂抹表示对文本的删除，用交换线

表示对前后文字顺序的调换。一般来说，通常用户所做的操作是先选中所要操作的文本，然后找到并点击相应操作的菜单项。所以，这种方法交互其实是一种鼠标交互的延伸，它更像是一个可以直接在屏幕上点击的带书写功能的鼠标，而没有充分体现出人们日常纸笔交互的特性。

当然，使用触摸笔也可以书写与传统笔类似的图形。但是，由于人们书写的随意性，真正使用的图形并不是一成不变的，例如用户对文本删除所做的涂抹就很难用固定的图形去描述。现有的一些技术试图通过图形匹配的方式去识别用户输入的图形。例如，美国专利(US20030368635)公开了一个手写控制符从输入识别、相关命令调用到反馈显示的流程。首先，通过一个能够记录输入点位置信息和时间信息的设备(例如：电子笔或者手写板等)，在计算设备内重构出用户所输入图形的结构。其次，通过和控制符数据库匹配的方法，自动识别出控制符，并自动调用相关的操作，例如：添加、删除等。最后，在显示设备上显示该操作执行后的效果。但是，由于此技术通过举例的方式，罗列了一些可能的图形与输入的图形相匹配，所以严格限制了图形使用的规范性，将会导致用户学习代价的增高和使用随意性的下降，从而影响图形的使用绩效和体验。另外，它是通过图形直接调用某个命令，其实只相当于取代了“寻找并点击菜单项”这一个步骤，在使用之前用户还需要选定所要进行操作的对象，因此，从根本上只是对现有交互的改良而不是变革。

另外的一种现有技术方案中，通过一组算法去定义了一组类

的删除图形，但并没有根据删除图形的本质是一种对文字的涂抹，而是依然没有摆脱图形匹配的思想。仍然是一个有限集合匹配的方法。如果用户没有使用该类图形，而是使用了

则系统就不能识别。而且，该方案只定义了文本编辑的一个图形，而人们真正日常生活中还有很多常用的文本编辑图形，例如：

用于交换前后两个文本的位置，因此，如果真正要让用户就像使用传统的笔一样对电子文档进行编辑还会需要更大的一个图形集。

发明内容

针对现有技术的缺陷，本发明提出一种通过图形输入完成操作的装置及其方法。

本发明在现有的触摸笔交互中加入传统笔的图形传达特性，使触摸笔交互成为一种更为自然的交互。与现有技术相比，本发明不是通过固定图形样式的方法来定义图形，也不是通过图形匹配的方式来识别图形，而是通过这些图形的关键特征来定义的。

根据本发明的一个方面，提出一种通过图形输入完成操作的装置，包括：

存储模块，用于存储文字和输入图形；

图形分析模块，用于分析输入图形的关键特征；

操作选择模块，用于根据所述输入图形关键特征的分析结果选择对应的操作；

操作执行模块，用于执行对应的操作。

根据本发明的另一方面，提出一种通过图形输入完成操作的方法，包括：

在段落或文字中输入用于完成操作的图形；

分析所述输入图形的关键特征；

根据所述输入图形关键特征的分析结果选择对应的操作；

执行所述对应的操作。

进一步，所述分析输入图形的关键特征包括将图形分类为直线，或曲线，或折线，或三角形，或五角星，或多边形。

进一步，所述分析输入图形的关键特征包括确定图形位于段落的起始处或结束处。

进一步，所述分析输入图形的关键特征包括将图形分解为多个部分，每个部分是线段，或曲线，或折线，或箭头。

进一步，所述分析输入图形的关键特征进一步包括确定所述每一部分位于文字的上方，或下方或覆盖文字。

进一步，所述分析输入图形的关键特征包括确定曲线的连续或不连续。

进一步，所述分析输入图形的关键特征包括确定曲线的闭合或不闭合。

进一步，所述分析输入图形的关键特征包括确定闭合曲线内是否包含连续文字。

进一步，所述分析输入图形的关键特征包括确定箭头在文字中的位置。

进一步，所述分析输入图形的关键特征包括确定曲线或折线覆盖文字的面积与被覆盖文字的总面积的比例。

进一步，所述分析输入图形的关键特征包括确定线段之间是否交叉。

进一步，所述分析输入图形的关键特征包括确定到两条线段距离相等的点组成的线段是否切割文字。

进一步，所述分析输入图形关键特征包括当线段交叉时，确定线段交叉形成的夹角的角度，两个线段的交点位置距离最近的线段端点的距离，以及所述距离与线段总长的比例。

进一步，所述分析输入图形的关键特征包括确定折线的拐点的个数，拐点与文字的位置关系，和以拐点为界的两段线段构成的夹角的角平分线与该文档竖直线间的夹角。

进一步，所述分析输入图形的关键特征包括确定三角形中的至少一个角的角平分线与该文档竖直线间的夹角，以及所述角对应的拐点与两段连续的文字之间的位置关系。

进一步，所述分析输入图形的关键特征包括确定折线的拐点的个数，拐点与自然段的起始行和结束行的位置关系，和以拐点为界的两段线段构成的夹角的角平分线与该文档竖直线间的夹角。

进一步，所述对应的操作包括交换文字、或移动文字、或删除文字、或删除段落、或插入文字、或插入空格、或插入段落、或着重文字、或着重段落，或切分段落。

本发明将传统纸笔交互中人们常用的手写编辑图形引入到了手写笔交互中，具有以下优点：

从操作体验上使文本编辑交互更加趋同于传统的纸笔。本发明采用了灵活的图形定义，即识别时图形不局限于一个固定的形状而是强调了图形的结构特征以及它和环境(例如文字)的相对关系，例如，其中一个文字删除图形它的识别标准是“一条覆盖了若干文字的连续的折线”而不是某个固定的形状。这符合了人们传统纸笔交互时书写的任意性，是一种具有很大自由度的自然交互。

更快速的操作。原有的文档编辑时，人们只能通过找到相应的菜单项，才能对文字进行编辑，而且一次修正往往会包含选中文字及选中命令两个步骤。而本发明通过将手写编辑图形引入到手写笔的交互中，使得人们可以很自然的通过已经学会的编辑图形来快速地对文档进行编辑，既减少了寻找菜单项的时间，也缩减了编辑的步骤(不再需要选中文字及选中命令两个步骤，而只需要在需要编辑的文字上画出编辑的图形)。

更少的学习代偿。因为本发明是将人们日常纸笔交互中常用的编辑图形引入到电子文档的编辑中，这些图形不但简单、形象、易学，而且使用中也很少会产生歧义，因此人们只需要很少的学习代偿就可以掌握和使用。

附图说明

图1为本发明的装置模块图；

图2为本发明的方法流程图；

图3为本发明的一个具体实施例的示意图；

图4为本发明的另一个具体实施例的示意图；

图5为本发明的再一个具体实施例的示意图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚明白，以下结合具体实施例，并参照附图，对本发明进一步详细说明。

图1为本发明的装置模块图。其中包括：图形分析模块，用于分析输入图形的特征；操作选择模块，根据图形分析模块提取的图形特征，判断对应的操作；操作执行模块，根据操作选择模块的判断结果执行对应的操作。

表一为常用的文字编辑图形举例。当在本发明提出的装置中使用这些图形时，其中对应的模块会分析这些图形所要表达的真正意思。例如：从分析出需要交换的是哪两段文字，然后将它们的位置交换，或者从

分析出需要删除的是哪些文字，然后将其删除。

表一常用的文字编辑图形举例

以下以具体实施例进一步描述本发明的提出的方法。

实施例一：参见图3，用

交换前后两端文字的位置。对待同志要像

；对待工作要像夏天一样的火热；对待个人主文要像秋

风扫落叶一样；对待敌人要像冬天一样冷酷无情。

步骤

1)图形分析步骤：分析用户使用了一个文字交换图形，即一条连续的曲线，它可以分为三个部分，一部分处于某行中若干连续文字的上方(或下方)，第二部分将该行文字进行了切割，第三部分处于同一行中其它若干连续文字的下方(或上方)，即

2)操作选择步骤：根据对该图形的分析，选择文字交换操作，以及需要交换的两段文字，即该图形中第一条横线下的文字“温暖”与第二条横线下的文字“春天一样的”；

3)操作执行步骤：交换两端文字的位置。

实施例二：参见图4，用

删除一段文字。

春天一样的对待同志要像春天一样的温暖；对待工作要像夏天一样

的火热；对待个人主文要像秋风扫落叶一样；对待敌人要像冬天一样冷酷无情。

步骤

1)图形分析步骤：分析用户使用了一个文字删除图形，即一条或若干条覆盖了若干连续文字的折线(或曲线)，且其对文字的平均覆盖面积占这些文字面积的20％以上，即

2)操作选择步骤：根据对该图形的分析，选择删除文字操作，以及需要删除的文字，即该折线所覆盖的文字“像夏天一样”；

3)操作执行步骤：删除该段文字。

实施例三：参见图5，用

将一段文字移动到另一个位置。

步骤

1)图形分析步骤：分析用户使用了一个文字移动图形，即由一段闭合的曲线(曲线1)，和一段带箭头的曲线(曲线2)组成，且曲线1包含了若干连续的文字，曲线2的起点端与曲线1相交，曲线2的箭头端指向另外一段文字之间，即

2)操作选择步骤：根据对该图形的分析，选择文字移动操作，以及需要移动的文字，即图形中圆圈所圈定的文字“对待个人主义要像秋风扫落叶一样”，判断出该文字所要移往的目标位置，即图形中箭头所处的位置“火热”与“；”之间；

3)操作执行步骤：移动该段文字。

虽然参照上述实施例详细地描述了本发明，但是应该理解本发明并不限于所公开的实施例，对于本专业领域的技术人员来说，可对其形式和细节进行各种改变。本发明意欲涵盖所附权利要求书的精神和范围内的各种变形。

Claims

1.一种通过图形输入完成操作的装置，其特征在于，包括：

存储模块，用于存储文字和输入图形；

图形分析模块，用于分析输入图形的关键特征，所述分析是基于图形的结构特征以及图形和文字之间的相对关系而进行的；

操作执行模块，用于执行对应的操作。

2.一种通过图形输入完成操作的方法，其特征在于，包括：

在段落或文字中输入用于完成操作的图形；

分析所述输入图形的关键特征，所述分析是基于图形的结构特征以及图形和文字之间的相对关系而进行的；

根据所述输入图形关键特征的分析结果选择对应的操作；

执行所述对应的操作。

3.根据权利要求2所述的方法，其特征在于，所述分析输入图形的关键特征包括将图形分类为直线，或曲线，或折线，或三角形，或五角星，或多边形。

4.根据权利要求2所述的方法，其特征在于，所述分析输入图形的关键特征包括确定图形位于段落的起始处或结束处。

5.根据权利要求2所述的方法，其特征在于，所述分析输入图形的关键特征包括将图形分解为多个部分，每个部分是线段，或曲线，或折线，或箭头。

6.根据权利要求2所述的方法，其特征在于，所述分析输入图形的关键特征进一步包括确定所述每一部分位于文字的上方，或下方或覆盖文字。

7.根据权利要求2所述的方法，其特征在于，所述分析输入图形的关键特征包括确定曲线的连续或不连续。

8.根据权利要求2所述的方法，其特征在于，所述分析输入图形的关键特征包括确定曲线的闭合或不闭合。

9.根据权利要求8所述的方法，其特征在于，所述分析输入图形的关键特征包括确定闭合曲线内是否包含连续文字。

10.根据权利要求5所述的方法，其特征在于，所述分析输入图形的关键特征包括确定箭头在文字中的位置。

11.根据权利要求5所述的方法，其特征在于，所述分析输入图形的关键特征包括确定曲线或折线覆盖文字的面积与被覆盖文字的总面积的比例。

12.根据权利要求5所述的方法，其特征在于，所述分析输入图形的关键特征包括确定线段之间是否交叉。

13.根据权利要求5所述的方法，其特征在于，所述分析输入图形的关键特征包括确定到两条线段距离相等的点组成的线段是否切割文字。

14.根据权利要求12所述的方法，其特征在于，所述分析输入图形关键特征包括当线段交叉时，确定线段交叉形成的夹角的角度，两个线段的交点位置距离最近的线段端点的距离，以及所述距离与线段总长的比例。

15.根据权利要求5所述的方法，其特征在于，所述分析输入图形的关键特征包括确定折线的拐点的个数，拐点与文字的位置关系，和以拐点为界的两段线段构成的夹角的角平分线与该文档竖直线间的夹角。

16.根据权利要求5所述的方法，其特征在于，所述分析输入图形的关键特征包括确定三角形中的至少一个角的角平分线与该文档竖直线间的夹角，以及所述角对应的拐点与两段连续的文字之间的位置关系。

17.根据权利要求5所述的方法，其特征在于，所述分析输入图形的关键特征包括确定折线的拐点的个数，拐点与自然段的起始行和结束行的位置关系，和以拐点为界的两段线段构成的夹角的角平分线与该文档竖直线间的夹角。

18.根据权利要求2所述的方法，其特征在于，所述对应的操作包括交换文字、或移动文字、或删除文字、或删除段落、或插入文字、或插入空格、或插入段落、或着重文字、或着重段落，或切分段落。