CN103270483B - 具有手势识别单元的系统 - Google Patents

具有手势识别单元的系统 Download PDF

Info

Publication number
CN103270483B
CN103270483B CN201180060802.6A CN201180060802A CN103270483B CN 103270483 B CN103270483 B CN 103270483B CN 201180060802 A CN201180060802 A CN 201180060802A CN 103270483 B CN103270483 B CN 103270483B
Authority
CN
China
Prior art keywords
gesture
touch screen
application program
instruction
described touch
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201180060802.6A
Other languages
English (en)
Other versions
CN103270483A (zh
Inventor
卡尔-路德维格·海因里希
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Rohde and Schwarz GmbH and Co KG
Original Assignee
Rohde and Schwarz GmbH and Co KG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Rohde and Schwarz GmbH and Co KG filed Critical Rohde and Schwarz GmbH and Co KG
Publication of CN103270483A publication Critical patent/CN103270483A/zh
Application granted granted Critical
Publication of CN103270483B publication Critical patent/CN103270483B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04101—2.5D-digitiser, i.e. digitiser detecting the X/Y position of the input means, finger or stylus, also when it does not touch, but is proximate to the digitiser's interaction surface and also measures the distance of the input means within a short range in the Z direction, possibly with a separate measurement setup
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

一种用于操作系统（1）的方法，该系统具有触摸屏（2）、用于所述触摸屏（2）的控制单元（8）、中央处理单元（9）和手势识别单元（10）。在第一方法步骤中，通过所述控制单元（8）识别一个或多个物理对象在所述触摸屏（2）上和/或在所述触摸屏（2）附近的位置，和/或通过所述控制单元（8）识别一个或多个物理对象在所述触摸屏（2）上和/或在所述触摸屏（2）附近的移动。在另一方法步骤中，通过在手势识别单元（10）中的第一关联单元（11）将一个或多个物理对象的位置和/或移动与手势集中的手势关联。此后，键组合通过第二关联单元（12）被发送到应用程序（141，142，143），和/或通过所述第二关联单元（12）启动应用程序（141，142，143）内的用于所述手势的功能，和/或所述手势通过所述第二关联单元（12）被发送到应用程序（141，142，143）。

Description

具有手势识别单元的系统
技术领域
本发明涉及一种具有触摸屏的系统，尤其是具有触摸屏的测量系统，以及涉及一种用于操作具有触摸屏的系统的方法，尤其是操作具有触摸屏的测量系统的方法。
背景技术
处理系统，尤其是测量系统，随各代产品发展而实现功能上的明显提高。因此，已经产生了可以测量具有不同标准的被测对象的多功能装置。根据功能提高，必要的操作软件也变得更加丰富。各种键和旋钮安装在该装置本身上以便避免用户菜单深度嵌套并且以便通过直接调用功能而实现有效的操作。然而，操作面上的空间是有限的，并且键和旋钮过多和/或键和旋钮布置得距离屏幕太远大大损害了用户的操作便利性。因此，在触摸屏的辅助下，已经朝向实现多个用户输入发展。
从专利EP2059868B1得知其中常规的用户接口（诸如按钮）已被触敏屏幕替代的便携式电子装置，诸如移动电话。待实现的应用使控制按钮可视化，该控制按钮由用户通过触敏屏幕激活。专利EP2059868B1具有的缺点是仅可以激活所示的元件，或者仅仅简单的指令（例如，滚动屏幕）可以通过触敏屏幕传输到便携式电子装置。
发明内容
根据本发明的系统和用于操作该系统的根据本发明的方法的目的在于提供一种用户接口，该用户接口允许通过触摸屏以比目前更直观的方式或以简单且一致的方式输入复杂的指令，使得菜单结构因此可以流水线化，或者对于系统的操作仅需要保留最少数量的旋钮或键。
关于系统而言，该目的通过权利要求33的特征实现，关于操作该系统的方法而言，该目的通过权利要求1的特征来实现。权利要求31限定一种具有程序码部件的计算机程序，当所述程序在计算机或数字信号处理器上执行时，所述程序码部件用于执行所有方法步骤。权利要求32限定一种具有程序码部件的计算机程序产品，所述程序码部件尤其存储在机器可读载体上，当所述程序在计算机或数字信号处理器上执行时，所述程序码部件用于执行所有方法步骤。根据本发明的系统以及用于操作具有触摸屏的系统的根据本发明的方法的优点和发展在相应从属权利要求中进行了说明。
根据本发明的系统包括触摸屏、用于该触摸屏的控制单元、中央处理单元和手势识别单元。在该上下文中，该控制单元识别一个或多个物理对象在所述触摸屏上和/或在所述触摸屏附近的位置。此外或可选地，控制单元识别一个或多个物理对象在所述触摸屏上和/或在所述触摸屏附近的移动。在手势识别单元中的第一关联单元将一个或多个物理对象的位置和/或移动与手势集中的手势关联。第二关联单元将用于该手势的键组合发送到应用程序，和/或第二关联单元执行在应用程序内用于所述手势的功能和/或第二关联单元将所述手势传递到应用程序。
特别有利地是，第二关联单元将用于手势的所存储的键组合发送到应用程序。这意味着，应用程序的功能可以被启动而无需通过不同的弹出式菜单来全面导航。同样，有利地是，第二关联单元执行应用程序中的与手势对应的功能。这意味着，即使不能通过键组合执行的功能可以在非常短的时间内启动而无需通过很多弹出式菜单来导航。此外，有利地是，第二关联单元识别手势并且将手势发送到应用程序。在该上下文中，明显增大了灵活性，这是因为应用程序本身决定了哪些功能应该在接收到给定的手势后执行。
用于操作系统的根据本发明的方法具有多个方法步骤，该系统包括触摸屏、用于该触摸屏的控制单元、中央处理单元和手势识别单元。在第一方法步骤中，一个或多个物理对象在所述触摸屏上和/或在所述触摸屏附近的位置通过控制单元被识别，和/或一个或多个物理对象在所述触摸屏上和/或在所述触摸屏附近的移动通过控制单元被识别。在另一方法步骤中，通过在手势识别单元中的第一关联单元将一个或多个物理对象的位置和/或移动与手势集中的手势关联。此后，通过第二关联单元将键组合发送到应用程序，和/或通过第二关联单元启动应用程序中的用于手势的功能，和/或所述手势通过第二关联单元被传送到应用程序。
用于操作具有触摸屏的系统的方法的一个具体优点是，用于手势的键组合被发送到应用程序，和/或执行应用程序内的功能，和/或手势本身被发送到应用程序。由于键组合的通信，还没有通过触摸屏建立控制的较老的应用程序也可以通过该触摸屏方便地控制。较老的、已知的应用程序也可以通过执行应用程序内的功能来方便地控制。在将手势例如作为对象发送到应用程序的情况中，相应的应用程序可以方便地受控，然而抽象的程度没有明显地增大。
如果因为一个或多个物理对象在所述触摸屏上和/或在所述触摸屏附近的位置和/或移动能够通过控制单元识别，手势识别单元可以将手势添加到手势集，则实现了根据本发明的系统的另一优点。这意味着，新的手势可以以简单的方式被存储，使得即使较老的应用程序的操作便利性可以明显增大。
此外，如果待通过第二关联单元来执行的功能在应用程序内被设定并且可以变化，和/或如果待通过第二关联单元发送到应用程序的键组合或键组合序列可以被设定并且可以变化，使得因此应用程序可以更容易地被操作和/或自动化，则利用用于操作具有触摸屏的系统的根据本发明的方法实现了另一优点。这意味着可用的手势的功能性可以匹配于相应的应用程序。如果应用程序没有提供功能，例如，用于旋转对象的功能，则例如可以使用规定旋转移动的手势以便在各个测量通道之间来回切换。
如果通过一个或多个物理对象在触摸屏上的移动可以输入图形字符以及如果通过多倍体图形字符可以输入控制字符和随后的图形字符，则实现了用于操作具有触摸屏的系统的根据本发明的方法的另一优点。尤其地，多倍体图形字符可以使用不同的手指非常简单地输入。因此，克服了迄今为止不可以以简单的方式输入控制字符和图形字符这一缺点。
如果通过二倍体图形字符可以输入Ctrl字符和随后的图形字符，和/或如果通过三倍体图形字符可以输入Alt字符和随后的图形字符，和/或如果通过四倍体图形字符可以输入指令字符（指令键）和随后的在图形字符，和/或如果通过竖向二倍体图形字符可以输入Shift字符和随后的图形字符，和/或如果通过叠置的三倍体图形字符可以输入Ctrl-Alt字符和随后的图形字符，则实现用于操作具有触摸屏的系统的根据本发明的方法的另一优点。仅通过用两个手指或者相应地用三个手指画所需的图形字符，尤其是频繁所需的控制字符（诸如Ctrl字符和Alt-字符）可以以特别简单的方式输入。需求不太频繁的控制字符也可以容易地输入。因此，特别有利地，不需要彼此间隔一段时间来输入各种字符序列，而可以通过单独的多倍体图形字符来实现。
附图说明
参考附图通过示例描述了本发明的各个示例性实施方式。同样的主题用同样的附图标记示出。具体而言，相应的附图示出：
图1是实现根据本发明的方法的测量系统的示例性实施方式；
图2是根据本发明的系统的电路框图的示例性实施方式；
图3A是用于操作具有触摸屏的系统的根据本发明的方法的流程图的示例性实施方式；
图3B是用于操作具有触摸屏的系统的根据本发明的方法的流程图的另一示例性实施方式；
图4A示出具有手指的手，其用来说明手势的表示法；
图4B是用来说明手势表示法的示例性实施方式；
图4C是用来说明手势表示法的另一示例性实施方式；
图4D是用来说明手势表示法的另一示例性实施方式；
图4E是用来说明手势表示法的另一示例性实施方式；
图4F是用来说明手势表示法的另一示例性实施方式；
图4G是用来说明手势表示法的另一示例性实施方式；
图4H是用来说明手势表示法的另一示例性实施方式；
图4I是用来说明手势表示法的另一示例性实施方式；
图4J是用来说明手势表示法的另一示例性实施方式；
图5是根据本发明的手势的示例性实施方式；
图6A是根据本发明的手势的另一示例性实施方式；
图6B是根据本发明的手势的另一示例性实施方式；
图6C是根据本发明的手势的另一示例性实施方式；
图7是根据本发明的手势的另一示例性实施方式；
图8是包含二倍体移动的根据本发明的手势的另一示例性实施方式；
图9是包含三倍体移动的根据本发明的手势的另一示例性实施方式；
图10A是包含两个三倍体移动的根据本发明的手势的另一示例性实施方式；
图10B是包含二倍体移动的根据本发明的手势的另一示例性实施方式；
图11A是根据本发明的手势的另一示例性实施方式；
图11B是包含点击的根据本发明的手势的另一示例性实施方式；
图12是根据本发明的手势的另一示例性实施方式；
图13是根据本发明的手势的另一示例性实施方式；
图14是包含二倍体移动的根据本发明的手势的另一示例性实施方式；
图15是根据本发明的手势的另一示例性实施方式；
图16是根据本发明的手势的另一示例性实施方式；
图17是根据本发明的手势的另一示例性实施方式；
图18A是包含两个移动的根据本发明的手势的另一示例性实施方式；
图18B是包含多次水平来回移动的根据本发明的手势的另一示例性实施方式；
图19A是根据本发明的手势的另一示例性实施方式；
图19B是根据本发明的手势的另一示例性实施方式；
图20是包含两个移动的根据本发明的手势的另一示例性实施方式；
图21A是包含两个移动的根据本发明的手势的另一示例性实施方式；
图21B是根据本发明的手势的另一示例性实施方式；
图21C是根据本发明的手势的另一示例性实施方式；
图22A是根据本发明的手势的另一示例性实施方式；
图22B是根据本发明的手势的另一示例性实施方式；
图22C是包含点击的根据本发明的手势的另一示例性实施方式；
图22D是根据本发明的手势的另一示例性实施方式；
图23A是根据本发明的手势的另一示例性实施方式；
图23B是包含点击的根据本发明的手势的另一示例性实施方式；
图24是根据本发明的手势的另一示例性实施方式；
图25是根据本发明的手势的另一示例性实施方式；
图26是根据本发明的手势的另一示例性实施方式；
图27是包含二倍体移动的根据本发明的手势的另一示例性实施方式；
图28A是包含两个二倍体移动的根据本发明的手势的另一示例性实施方式；
图28B是根据本发明的手势的另一示例性实施方式；
图29A是根据本发明的手势的另一示例性实施方式；
图29B是根据本发明的手势的另一示例性实施方式；
图29C是根据本发明的手势的另一示例性实施方式；
图30是根据本发明的手势的另一示例性实施方式；
图31A是根据本发明的手势的另一示例性实施方式；
图31B是根据本发明的手势的另一示例性实施方式；
图32A是根据本发明的手势的另一示例性实施方式；
图32B是包含二倍体移动的根据本发明的手势的另一示例性实施方式；
图32C是包含三倍体移动的根据本发明的手势的另一示例性实施方式；；
图32D是包含四倍体移动的根据本发明的手势的另一示例性实施方式；
图32E是包含竖向二倍体移动的根据本发明的手势的另一示例性实施方式；以及
图32F是包含叠置的三倍体移动的根据本发明的手势的另一示例性实施方式。
具体实施方式
图1示出根据本发明的系统1的示例性实施方式，该系统1尤其是测量系统1。测量系统1包括触摸屏2，触摸屏2例如可以具有电阻式结构和/或电容式结构和/或电感式结构，而其他类型的触摸屏2也可以用于测量系统1。所示出的测量系统1还提供了一些键3和一些旋钮4。例如，这些键和旋钮可以用不同的颜色来照亮和提供，使得用户可以尽可能迅速且直接地实现测量系统1的基本设置。此外，测量系统1提供了输入端口51、52，这些输入端口用来提供电子测量电路12（未示出）的一个或多个测量信号。此外，测量系统1提供了用于连接附加的外围设备的端口。例如，这些端口可以是USB端口6（通用串行总线）。
被提供用于许多不同的测量方法的测量系统1通常提供复合的用户菜单结构，该用户菜单结构包括许多级别并且可以深度嵌套。为了确保用户可以尽可能简单地实施这些设置，多个键3和多个旋钮4被安装在该装置上。在一些情况下，因为这样的测量系统通常预先确定尺寸，故在壳体的正面仅留下有限的空间用于显示测量结果。相对大的触摸屏2提供了极大的优势，这是因为它们可以具有较高的分辨率，使得例如可以显示信号的多个周期。由于可以或者必须限制键3和旋钮4的数量，而同时，操作必须保持尽可能地简单，对于用户应该可以直接实施多个功能而无需操作复杂的弹出菜单本身。在该上下文中，另外的键3和旋钮4可以在触摸屏2上可视。在图1中示出了这样的测量系统1。实现了目标是因为触摸屏2是可以同时记录多次触摸的触摸屏2。在根据本发明的测量系统1中，通过不同的手势调用不同的功能，这些不同的功能在以前测量系统中通过激活各个独立的键3和旋钮4而启动。
在该上下文中，手势应该理解成在触摸屏2上和/或在触摸屏的附近的一个或多个物理对象的触摸和/或移动。物理对象例如是手的手指201、手指202、手指203、手指204、手指205或输入笔。因此，各个手势应该彼此不同，以使得它们能够被安全地识别，而无需用户“训练”测量系统1。手势还应该彼此一致并且应当被以直觉方式限定为一个整体。例如，用户将画出的十字交叉线与取消当前操作或删除文件相关联。在测量系统1中所用的手势还应该能够同样地由右手用户以及左手用户使用。
图2示出根据本发明的系统1或测量系统1的电路框图的示例性实施方式。测量系统1提供了触摸屏2、控制单元8、中央处理单元9和手势识别单元10。中央处理单元可以包括处理器和/或FPGA（现场可编程门阵列）。触摸屏2借助已知的接口（诸如，串行端口）连接到控制单元8。中央处理单元9也借助已知的接口连接到控制单元8。此外，控制单元8借助接口连接到手势识别单元10。此外，键3和/或旋钮4、USB端口6、网络端口11和电子测量电路12借助已知的接口连接到控制单元8。在该上下文中，例如，已知的接口包括USB端口、PCI（外围设备互连）端口、PCIe（PCI-Express）端口、串行端口、或者通常允许数据传输的接口。
控制单元8识别在触摸屏2上和/或在触摸屏2附近的一个或多个物理对象的位置。这应该被理解成意为，控制单元识别例如置于触摸屏2上的各个手指201、202、203、204、205的位置。控制单元8还识别在触摸屏2上和/或在触摸屏2附近的一个或多个物理对象的移动。因此，例如，在触摸屏2上移动的各个手指201、202、203、204、205的移动可以被记录。根据触摸屏2的类型，物理对象不需要直接触摸触摸屏2。将物理对象设置在触摸屏2附近可以足够，然而，在该情况下，物理对象到触摸屏2的距离必须不大于几毫米。
因此，控制单元8记录触摸屏2上的由一个或多个物理对象触摸的各个区域或者相应地触摸屏2上的一个或多个物理对象在其上移动的各个区域。这些区域可以与相应的下面的像素相关联。控制单元8还根据该信息计算所触摸的像素相对于彼此的位置。例如，为了成功地激活触摸屏2上示出的按钮，需要记录所触摸的像素的绝对位置，以便检查在由一个或多个物理对象触摸的相同区域上示出了哪些按钮。相反地，为了识别手势，各个触摸或移动是在触摸屏2上的哪个区域中进行画出的并不绝对重要，而反之，重要的是各个触摸或移动是如何相对于彼此做出的。通过控制单元8或通过中央处理单元9可以计算该信息。中央处理单元9通常是处理器。在此之后，所识别的位置或所识别的移动通过控制单元8被发送到手势识别单元10，该手势识别单元评估该识别的位置或该识别的移动。
为了该目的，手势识别单元10提供第一关联单元11和第二关联单元12。第一关联单元11接收来自控制单元8的在触摸屏2上和/或在触摸屏2附近的一个或多个物理对象的位置和/或移动。因此，与相关像素相关并且还彼此关联的位置和/或移动被传送到第一关联单元11。第一关联单元11将一个或多个物理对象的位置和/或移动与手势集中的手势相关联。在该上下文中，手势集包含多个手势。如果手势集的各个手势明显不同于彼此，使得即使由无经验的用户画出的手势也可以明确地关联于手势集中所存储的手势，则这是特别有利的。手势本身可以包括多个子手势，而子手势由相同或不同的物理对象画出，或者相应地，各个子手势可以相对于彼此有时间间隔地画出。子手势通常由确切地一个物理对象的精确移动画出。
一旦第一关联单元11已经识别手势，则其将该手势传送到也包含在手势识别单元10中的第二关联单元12。第二关联单元12将用于所识别的手势的存储的键组合或一系列键组合传送到应用程序141、142、143。此外，第二关联单元12也可根据所识别的手势执行应用程序141、142、143内的给定的功能。第二关联单元12还可以将所识别的手势传送到应用程序141、142、143。
如果给定的键组合或一系列键组合被存储用于手势集中的各个手势，则通过根据本发明的测量系统1实施的较老的应用程序141、142、143可以由用户明显容易地使用。此外，这意味着，通过将给定系列的键组合传送到这样的应用程序，这样的应用程序可被自动化。键组合例如可以是Ctrl键和S键，这两个键同时按下以便保存给定的内容。为了该目的，第二关联单元12包含表格，表格中存储有各个手势并且存储有用于各个手势的键组合或一系列键组合。
应用程序141、142、143也存储在表格中（未示出），其中，应当将用于所识别的手势的相应的键组合或键组合系列传送到该应用程序中。在一系列键组合的情况下，各个键组合连续地被传送到相应的应用程序141、142、143，使得尤其是对于较老的应用程序141、142、143，由于弹出菜单复杂而令人讨厌的导航可以被大大简化。在该上下文中，各个键组合的传送之间的时间段可以自由地调整。除了键组合之外，在触摸屏2的给定位置上的点击也可以存储在表格中。例如，这允许全自动确认对话框，由此减少测量时间。基于根据本发明的通过手势的这种控制，所有的应用程序借助触摸屏2可以高度自动化。
此外，特别有利的是，一旦识别给定的手势，则第二关联单元12执行或启动应用程序141、142、143内的给定功能。因此，对于应用程序141、142、143（其功能调用是已知的），操作便利性可以以特别简单的方式提高。对于手势集中的各个手势，在表（未示出）中规定了功能调用，当识别相应的手势时，第二关联单元12执行该功能调用。当调用相应功能时转移到该相应功能的其它参数也可以存储在表格本身中。用于如何响应于手势的识别的各个选项确保，通过在根据本发明的新型测量系统1中去掉键3或旋钮4，较老的应用程序141、142、143仍然可以执行而无需限制它们的功能性。
最后，如果第二关联单元12将所识别的手势直接传送到应用程序141、142、143，则是特别有利的。在该情况下，所识别的手势可以直接在应用程序141、142、143内被进一步处理由此进一步增大抽象化。尤其在新开发的应用程序141、142、143的情况下，这是重要的。因此，对于所识别的手势，可以产生具有以下属性的对象：例如，存储有所识别的图形符号或手势的名称的属性，关于该图形符号是否已经以多倍体方式画出的依据，或者图形符号已经被正确识别的概率，或者画图形符号的持续时间等。这样的具有多个属性的对象随后可以被传送到相应的应用程序141、142、143内的功能，该应用程序进一步处理该对象。还可以对所有的手势定义枚举，并且仅用于所识别的手势的相应的枚举值被传送到应用程序141、142、143。
第二关联单元12还可以根据所识别的手势控制不同的应用程序141、142、143。如果第一手势被识别，则所存储的键组合或一系列键组合可以被传送到第一应用程序141、142、143，然而，如果第二手势被识别，则在一不同的应用程序141、142、143情况中，通过第二关联单元12直接执行在该不同应用程序中的功能，然而，如果第一手势被识别，则该第一手势通过第二关联单元12传送到另外的应用程序141、142、143。在两个或更多个应用程序141、142、143中，还可以将对于各个手势所存储的键组合或一系列键组合传送到应用程序141、142、143。这还适用于通过第二关联单元12调用应用程序141、142、143内的功能或者适用于通过第二关联单元12将相应的手势传送到相应的应用程序141、142、143。
根据本发明的测量系统1还包括存储单元13。例如，该存储单元13可以是主存储器和/或硬盘存储器。存储单元13连接到中央处理单元9。因此，中央处理单元9管理存储单元13。存储单元13的不同部分被不同的应用程序141、142、143使用，这些应用程序通过中央处理单元9一起实现。应用程序141、142、143例如，用于根据本发明的测量系统1的操作系统141和/或应用程序软件142，也可被称为用于根据本发明的测量系统1的测量软件142和/或用于根据本发明的测量系统1的评估软件143。手势识别单元10也连接到存储单元13，使得在手势识别单元10内的第二关联单元12可以以上文所述的方式访问在存储单元13中存储的应用程序141、142、143。所述的应用程序141、142、143仅表示通过例子选择的应用程序141、142、143。在这些应用程序141、142、143的旁边，还可以执行从图2的示例性实施方式中没有示出的另外的应用程序。
因为在触摸屏2上和/或在触摸屏2附近的一个或多个物理对象的位置和/或移动由控制单元8识别，还可以将另外的手势添加到手势识别单元10中的手势集。例如，使用一个或多个输入笔或手指201、202、203、204、205，用户可以在触摸屏2上画出包括触摸和/或移动的手势，而手势被存储在第一关联单元11中。当识别出该手势时，可以确定应当开始哪些动作。如上文所述，这些动作可以是键组合或一系列键组合，键组合或一系列键组合被发送到应用程序141、142、143，和/或可以确定应用程序141、142、143内的哪一功能应当由第二关联单元12来执行和/或可以确定新的手势应该通过第二关联单元12发送到应用程序141、142、143。
图3A示出用于操作具有触摸屏2的系统1的根据本发明的方法的示例性实施方式。用于操作具有触摸屏2、用于触摸屏2的控制单元8、中央处理单元9和手势识别单元10的系统1、尤其是测量系统1的方法提供了几个方法步骤。和手势识别单元10和触摸屏2一样，中央处理单元9也通过已知的接口连接到控制单元8。
在第一方法步骤S1中，在触摸屏2上和/或在触摸屏2附近的一个或多个物理对象的位置通过控制单元8来识别和/或在触摸屏2上和/或在触摸屏2附近的一个或多个物理对象的移动通过控制单元8来识别。术语“位置”广泛地用于一个或多个物理对象对屏幕单元2的触摸。术语“移动”应该被理解为含义是：在触摸屏2上和/或在触摸屏2附近的一个或多个物理对象在触摸屏上移动，换句话说，其涉及移动性触摸。点击或按压触摸屏2也可归在“触摸”名下。
在第二方法步骤S2中，手势识别单元10中的第一关联单元11将控制单元8所识别的源于一个或多个物理对象的在触摸屏2上和/或在触摸屏2附近的位置和/或移动与手势集中的手势相关联。此外，用于相应的手势的键组合或一系列键组合通过第二关联单元12传送到应用程序141、142、143，和/或在应用程序141、142、143内的用于相应手势的功能通过第二关联单元12启动，和/或相应的手势通过第二关联单元12传送到应用程序141、142、143。在该上下文中，通过第一关联单元11所识别的手势被传送到第二关联单元12。除了键组合或一系列键组合之外，在触摸屏2上的给定位置处的点击也可以被传送到相应的应用程序141、142、143。
可选地，如图3B中所示，在方法步骤S1或方法步骤S2之后可以执行方法步骤S3。在根据本发明的方法步骤S3中，由于一个或多个物理对象在触摸屏2上和/或在触摸屏2附近的位置和/或移动由控制单元8识别，手势识别单元10可以将手势添加到手势集中。用户可以画手势并将该手势与给定功能性相关联，该手势包括一个或多个输入笔或手指201、202、203、204、205在触摸屏2上的触摸和/或移动。该功能性尤其可以是：键组合或者一系列键组合，键组合或者一系列键组合通过第二关联单元12传送到应用程序141、142、143；或者，在应用程序141、142、143内的通过第二关联单元12启动的功能；或者可以是，整个手势通过第二关联单元12传送到应用程序141、142、143。
在以下附图中，更详细地描述手势集中的各个手势的功能。图4A到图4J用来说明根据本发明的手势的符号，这些手势在图5到图32F中进行了更详细的说明。原则上，可以用手指201、202、203、204、205中的任一手指以及其他物体（例如，输入笔）画出手势。在下文中，通过简化，假定手势总是用手指201、202、203、204、205画出。同时用两个手指201、202、203、204、205画出的手势被称为“二倍体”。通过类推，还存在使用三个手指的“三倍体”手势，使用四个手指的“四倍体”手势和使用五个手指的“五倍体”手势。本文也提及多倍体手势。除非另外说明，倍数性是水平的。因此，手指的指尖近似水平地并排放置。
以下附图包含理想化的手势。在它们的实施中，还必须考虑关于位置、尺寸、角度、相互关系和速度的容差。关于免受限制，对于根据本发明的所有的手势，已考虑这些手势既可以用左手画出也可以用右手画出这一需求。出于全球化原因，在根据本发明的所有的手势中，也已关注到这些手势尽可能地在国际上可以理解这一需求。涉及用户界面的特定区域的或者涉及在用户界面上显示的特定元件的很多手势也可以具有所谓的“热点”，也就是说，规定应该做出手势的位置的限定点。该情况将具体参考相应的手势再次说明。提到的“基本姿势”是指手以最小张力放在平坦表面上时的自然姿势。所有的手指201、202、203、204、205略微弯曲并且彼此分开、略微展开。
图4A示出左手，其具有以手指201、202、203、204、205的形式的几个物理对象。明显地，带圆圈的附图标记关联于手指201、202、203、204、205。拇指201具有附图标记1，食指202具有附图标记2，中指203具有附图标记3，无名指204具有附图标记4以及小指205具有附图标记5。附图标记1到附图标记5也可以在根据本发明的手势中实施，其表示不具有约束性的建议，该建议关于哪个手指201、202、203、204、205应该最佳地用来画出相应的子手势。与图4A到图32F关联的附图标记与图1到图3B的附图标记无关。
图4B示出水平划出的手势的示例。在该上下文中，沿箭头方向朝右画直线。
图4C示出水平划出的手势，而画直线的方向是无关的。
图4D示出表示触摸屏2被“按压”的手势。这可以通过手指201、202、203、204、205在触摸屏2上保持就位并且不移动来实现。在该情况下，控制单元8识别手指201、202、203、204、205的位置并且将其传送到在手势识别单元10中的第一关联单元11。
图4E示出指示触摸屏2的一位置已经被“点击”、“敲击”的手势，“点击”、“敲击”也就是说，由手指201、202、203、204、205触摸，但在非常短的时间之后手指201、202、203、204、205再次移开。点击时间优选地小于100ms。然而，也可以调整点击时间。
图4F示出一个手势，其中，点击线的起始点，而线随后朝右水平持续。
图4G示出含有各种移动的一个手势，所述的各种移动相对于彼此以一定的时间间隔执行。在该上下文中，首先执行用“a”标记的子手势，随后执行用“b”标记的子手势。相应地，未标记有字母或者标记有相同字母的子手势应该同时画出。例如，多倍体图形就是这种情况，多倍体图形是通过使两个指尖彼此同步移动而画出的。在该上下文中，子手势不一定在下一个子手势开始之前完成。尤其是在按压的情况下，手指201、202、203、204、205在下一个子手势被画出时仍然可以保持原位。如果手势不包含这样的后继标记，或者如果子手势不提供后继标记，则这些子手势事实上必须同时画出，但是可以在画出该手势期间的任何时间画出。因此，手势可以包括一个或多个子手势，这些子手势用不同的手指201、202、203、204、205同时和/或按照时间次序画出。
图4H示出包括二倍体线的手势，该手势竖向向下或者竖向向上画出。
图4I示出包括两个应当相继画出的子手势的一个手势，而画出子手势所应当的次序是无关的。关于相应的子手势，这通过标记“a或b”、“b或a”来指明。
图4J示出一个手势，该手势包括应该同时画出的两个子手势，而一个手势应该优选地通过拇指201画出。
以下图5到图32F包含根据本发明的手势集的一些示例性实施方式，手势集包括多个手势。为了确保清楚地观察，将不示出附图标记，尤其当各个附图以逻辑方式布置时。所有的手势可以在图1中示出的触摸屏2上画出。
图5示出一个手势，该手势定义如下：近似水平地并排布置的两个手指201、202、203、204、205触摸触摸屏2，并且在两个手指201、202、203、204、205之间近似竖向地向上画线。该手势可以表示例如上升的太阳或者萌芽，且当第二关联单元12与相应的应用程序141、142、143通信时，可以用来生成“新文件”和/或“新对象”。
图6A示出另一手势，该手势定义如下：三个或四个或五个手指201、202、203、204、205布置到一起并且触摸触摸屏2，随后以伸展的方式远离彼此移动。图6A示出可以通过右手执行的一个手势。例如，该手势可以用于产生“打开”例如文件的指令，通过第二关联单元12将该指令发送到应用程序141、142、143。图6B示出根据本发明的另一手势，该手势也定义如下：三个或四个或五个手指被布置到一起并且触摸触摸屏2，随后以伸展的方式远离彼此移动。该手势对应于图6A的手势，而图6B的手势通过左手画出。图6C示出了也在图6A中示出的相同的手势，只不过代替五个手指201、202、203、204、205，仅三个手指201、202、203、204、205用来画出该手势。
图7示出根据本发明的手势的另一示例性实施方式，该手势被定义为：相对于彼此近似水平地布置的两个手指201、202、203、204、205触摸触摸屏2，以及在两个手指201、202、203、204、205之间近似竖向地向下画线。例如，该手势可以用来生成“保存”的指令，该指令通过第二关联单元12发送到相应的应用程序141、142、143。在该上下文中，最初，以一水平间距放置的手指201、202、203、204、205并排布置，，仅在第二步骤中向下画竖线，如通过字母“a”和“b”指出的。
图8示出根据本发明的手势的另一示例性实施方式，该手势被定义为：近似水平地并排布置的两个手指201、202、203、204、205触摸触摸屏2，以及随后在两个手指201、202、203、204、205之间近似竖向地向下画二倍体线。该手势类似于图7的手势，因此，例如，图8的手势可以用来生成“另存为”的指令，该指令通过第二关联单元12被发送到相应的应用程序141、142、143。
图9示出根据本发明的手势的另一示例性实施方式，该手势被定义为：近似水平地并排布置的两个手指201、202、203、204、205触摸触摸屏2，以及随后在两个手指201、202、203、204、205之间竖向向下画三倍体线。该手势也类似于图7和图8的手势，因此例如，其可以用来生成“保存全部”的指令，并且通过第二关联单元12将该指令发送到相应的应用程序141、142、143。
图10A示出根据本发明的手势的另一示例性实施方式，该手势被定义为在触摸屏2上画三倍体对角交叉线。图10B示出根据本发明的手势的另一示例性实施方式，该手势被定义为：用一个手指201、202、203、204、205、尤其是拇指201按压触摸屏2，随后用两个手指201、202、203、204、205在距按压部位近似水平的间距处近似竖向地向下画二倍体线。如果用左手画出该手势，则也可以在由手指201、202、203、204、205按压的位置附近，在左侧近似竖向地向下画二倍体线。然而，该事实在图10B中未示出。除了二倍体线之外，还可以竖向画三倍体线。例如可使用来自图10A和图10B的手势使得相应的应用程序141、142、143执行指令“退出”。
图11A示出根据本发明的手势的另一示例性实施方式，该手势被定义为：一个手指201、202、203、204、205、尤其是拇指201被置于触摸屏2上，在距此有一定时间间隔后，两个另外的或者三个另外的或者四个另外的手指201、202、203、204、205以基本的姿势置于触摸屏2上。另外的手指201、202、203、204、205优选地同时被置于触摸屏2上。图11B示出根据本发明的手势的另一示例性实施方式，该手势被定义为：手指201、202、203、204、205尤其拇指201被置于触摸屏2上，在距此一定时间间隔后，两个另外的或者三个另外的或者四个另外的手指201、202、203、204、205以基本的姿势点击触摸屏2。另外的手指201、202、203、204、205优选地同时点击触摸屏2。来自图11A和图11B的手势可以用来生成“打印预览”的指令，该指令通过第二关联单元12被传送到相应的应用程序141、142、143。
图12示出根据本发明的手势的另一示例性实施方式，该手势被定义为：一个手指201、202、203、204、205尤其拇指201以及两个另外的或者三个另外的或者四个另外的手指201、202、203、204、205以基本的姿势置于触摸屏2上。例如，该手势用来生成指令“打印”，该指令通过第二关联单元12被传送到相应的应用程序141、142、143。在该上下文中，手指201、202、203、204、205放置固定的时间，例如，最大是1秒。该手势可以用右手也可以左手画出。
图13示出根据本发明的手势的另一示例性实施方式，该手势被定义为：在触摸屏2上画出底部闭合且其交叉点清楚地在其端部下方的环。例如，该手势用来生成指令“剪切”，使得该指令通过第二关联单元12被发送到相应的应用程序141、142、143。这样的在底部闭合的环也可以关联于一把程式化的剪刀。
图14示出根据本发明的手势的另一示例性实施方式，该手势的特征在于，在触摸屏2上画出在底部闭合且其交叉点清楚地在其端部下方的二倍体环。例如，该手势可以用来生成指令“复制”，该指令通过第二关联单元12被发送到相应的应用程序141、142、143。在此之前，待复制的对象必须被选定或者相应地被标记。
图15示出根据本发明的手势的另一示例性实施方式，该手势被定义为：在触摸屏2上画出近似液滴形状的结构。例如，该手势可以用来通过第二关联单元12将指令“插入”发送到相应的应用程序141、142、143。液滴形状的结构的尖端表示所谓的“热点”。在尖端所处的位置处插入待插入的对象。该液滴形状的结构例如可以表示进入缓冲区。
图16示出根据本发明的手势的另一示例性实施方式，该手势被定义为：在触摸屏2上从下向上画朝右弯曲的箭头。例如，该手势可以用来生成指令“撤销”，通过第二关联单元12将该指令发送到相应的应用程序141、142、143。因此该手势可以表示时钟时间应当回绕。
图17示出根据本发明的手势的另一示例性实施方式，该手势被定义为：在触摸屏2上从上向下画朝右弯曲的箭头。该手势可以用来生成指令“恢复”，通过第二关联单元12将该指令发送到相应的应用程序141、142、143。通过与图16的手势对比，图17的手势因此可以表示时间应当前进。
图18A示出根据本发明的手势的另一示例性实施方式，该手势被定义为在触摸屏2上画对角交叉线。图18B示出根据本发明的手势的另一示例性实施方式，该手势被定义为在触摸屏2上多次画近似水平的线。在该上下文中，水平线来回画至少一次，优选地1.5次。来自图18B的手势以及来自图18A的手势可以用来生成指令“删除”，通过第二关联单元12将该指令发送到相应的应用程序141、142、143。
图19A示出根据本发明的手势的另一示例性实施方式，该手势被定义为：在触摸屏2上画波形线。图19B示出根据本发明的手势的另一示例性实施方式，该手势被定义为在触摸屏2上画一周期的正弦波形。该手势类似于来自图19A的手势并且，二者都可以用来生成指令“处理”，通过第二关联单元12将该指令发送到相应的应用程序141、142、143。
图20示出根据本发明的手势的另一示例性实施方式，该手势被定义为：在触摸屏2上从上向下画向右弯曲的二倍体箭头。例如，该手势可以用来生成指令“更新”，通过第二关联单元12将该指令发送到相应的应用程序141、142、143。
图21A示出根据本发明的手势的另一示例性实施方式，该手势被定义为在触摸屏2上画十字。在该上下文中，在触摸屏2上画水平线和竖直线的时间次序是不重要的。水平线或横线和竖线或垂直线近似在中间处相互拦截。图21B示出根据本发明的手势的另一示例性实施方式，该手势被定义为在触摸屏2画半月形。图21C示出根据本发明的手势的另一示例性实施方式，该手势被定义为在触摸屏2上画问号，然而句号或反“S”的时间次序是不重要的。来自图21A、图21B和图21C的手势可以用来生成指令“帮助”，通过第二关联单元12将该指令发送到相应的应用程序141、142、143。
图22A示出根据本发明的手势的示例性实施方式，该手势被定义为两个手指201、202、203、204、205以彼此近似水平的间距、依次置于触摸屏2上。图22B示出根据本发明的手势的另一示例性实施方式，该手势被定义为三个手指201、202、203、204、205以彼此近似水平的间距、依次置于触摸屏2上。图22C示出根据本发明的手势的示例性实施方式，该手势被定义为：三个手指201、202、203、204、205以彼此近似水平的间距、依次置于触摸屏2上并且点击触摸屏2。图22D示出包含根据本发明的手势的示例性实施方式，该手势被定义为：三个手指201、202、203、204、205以与图22B的手势相反的顺序、以彼此近似水平的间距置于触摸屏2上。总之，该手势也可以用五个手指201、202、203、204、205来执行，这五个手指依次触摸或点击触摸屏2。例如，来自图22A、图22B、图22C和图22D的手势可以用来生成指令“查找”，第二关联单元12将该指令发送到相应的应用程序141、142、143。
图23A示出根据本发明的手势的另一示例性实施方式，该手势被定义为：两个手指201、202、203、204、205以近似水平的间距点击触摸屏2，此后，两个手指201、202、203、204、205水平偏离点击部位且以彼此近似水平的间距触摸触摸屏2。图23B示出根据本发明的手势的另一示例性实施方式，该手势被定义为：两个手指201、202、203、204、205以近似水平的间距点击触摸屏2，此后，相对于点击部位偏移的两个手指201、202、203、204、205以近似水平的间距点击触摸屏2。该手势还可以用五个手指201、202、203、204、205来执行，这五个手指点击触摸屏2，并且随后偏离该点击部位来触摸或点击触摸屏2。来自图23A的手势以及来自图23B的手势可以用来生成指令“查找下一个”，通过第二关联单元12将该指令发送到相应的应用程序141、142、143。
图24示出具有根据本发明的手势的示例性实施方式，该手势被定义为：第一手指201、202、203、204、205、尤其拇指201触摸触摸屏2，并且三个手指201、202、203、204、205随后以彼此近似水平的间距在第一手指201、202、203、204、205的上方依次置于触摸屏2上。彼此水平间距的三个手指201、202、203、204、205优选地布置成高出第一手指201、202、203、204、205一定间距。该手势还可以用五个手指201、202、203、204、205来执行。例如，该手势可以用来生成指令“替换”，通过第二关联单元12将该指令发送到相应的应用程序141、142、143。
图25示出根据本发明的手势的另一示例性实施方式，该手势被定义为：第一手指201、202、203、204、205、尤其拇指201触摸触摸屏2，然后，具有近似水平的间距的两个手指201、202、203、204、205在第一手指201、202、203、204、205的上方点击触摸屏2，接着，具有水平间距的两个手指201、202、203、204、205在第一手指201、202、203、204、205的上方且自点击部位水平偏移到右边来触摸触摸屏2。优选地，首先用拇指201触摸触摸屏2，随后用食指202和中指203在拇指201上方点击触摸屏，然后，将食指202和中指203与点击部位水平间隔开地置于触摸屏2上。例如，该手势可以用来生成指令“替换并查找下一个”，随后通过第二关联单元12将该指令发送到相应的应用程序141、142、143。
图26示出含有根据本发明的手势的另一示例性实施方式，该手势被定义为在触摸屏2上从左到右画对勾。例如，该手势可以用来生成指令“OK”，该指令通过第二关联单元12发送到相应的应用程序141、142、143。例如，指令“OK”可以用来确认对话框。
图27示出含有根据本发明的手势的另一示例性实施方式，该手势被定义为在触摸屏2上从左到右画二倍体对勾。例如，该手势可以用来生成指令“接受”，通过第二关联单元12将该指令发送到相应的应用程序141、142、143。
图28A示出根据本发明的手势的另一示例性实施方式，该手势被定义为在触摸屏2上画二倍体对角交叉线。图28B示出根据本发明的手势的另一示例性实施方式，该手势被定义为：用一个手指201、202、203、204、205按压触摸屏2，随后，与该按压部近似水平隔开，用一个手指201、202、203、204、205向下画近似竖向的线。例如，来自图28A和图28B的手势可以用来生成指令“取消”，该指令通过关联单元12发送到相应的应用程序141、142、143。
图29A示出根据本发明的手势的另一示例性实施方式，该手势被定义为：远离彼此布置的且触摸触摸屏2的五个手指201、202、203、204、205接着移动到一起。图29B示出与图29A同样的手势，只是图29B的手势用左手画出。图29C示出根据本发明的手势的另一示例性实施方式，该手势被定义为：三个手指201、202、203、204、205远离彼此布置且触摸触摸屏2，随后移动到一起。还可以使用四个手指201、202、203、204、205，该四个手指最初分开布置且触摸触摸屏2，随后移动到一起。来自图29A、图29B和图29C的手势可以用来生成指令“关闭”，通过第二关联单元12将该指令发送到相应的应用程序141、142、143。
图30示出根据本发明的手势的另一示例性实施方式，该手势被定义为：一个手指201、202、203、204、205置于触摸屏2上，随后在该位置的上方从左到右画近似水平的线。该水平的线也可以从右向左画出，以及该水平线还可以在通过手指201、202、203、204、205首先触摸的点的下方画出。例如，该手势生成指令“设置/选项”，通过第二关联单元12将该指令发送到相应的应用程序141、142、143。
图31A示出手势的另一示例性实施方式，该手势被定义为：两个到五个手指201、202、203、204、205彼此分开布置并且触摸触摸屏2，在顺时针方向上执行旋转移动。图31B示出根据本发明的手势的另一示例性实施方式，该手势被定义为：两个或三个或四个或五个手指201、202、203、204、205彼此分开布置并且触摸触摸屏2，随后在逆时针方向上执行旋转移动。来自图31A和图31B的手势可以用来生成指令“旋转”，该指令通过关联单元12被发送到相应的应用程序141、142、143。然而，尽管在图31A和图31B的示例性实施方式中没有说明，但也完全可以仅用两个或三个或四个手指201、202、203、204、205执行旋转移动。
对比来说，可通过用手指201、202、203、204、205或相应的输入笔画图形字符来输入图形字符。在该上下文中，可以可靠地进行区分大写字母和小写字母。迄今借助触摸屏2仅可以以非常笨拙的方式输入控制字符，例如，Alt-字符。在本发明的范围内，可以非常容易地输入控制字符和随后的图形字符。这通过输入多倍体图形字符来实现。
图32A示出用于输入大写字母“M”的示例性实施方式。在该上下文中，移动的方向是无关的。
图32B示出根据本发明的手势的示例性实施方式，通过该手势，可以输入控制字符和随后的图形字符。示出了二倍体图形字符“M”。包含二倍体图形字符的手势可以被进一步处理，以便将控制字符（控制键或Ctrl键）和随后的图形字符发送到第二关联单元12。如果画出具有字母“S”的二倍体图形字符，则尚未保存的数据可以以特别简单的方式被保存。
图32C示出根据本发明的手势的示例性实施方式。根据本发明的手势包含三倍体图形字符。例如，三倍体图形字符可以被理解成意思是：Alt字符和随后的相应的图形字符被发送到第二关联单元。
图32D示出根据本发明的手势的另一示例性实施方式。根据本发明的手势包含四倍体图形字符。如果识别出四倍体图形字符，则指令字符（指令键）（例如，以Windows键的形式或者相应地苹果命令键的形式）和随后的相应的图形字符被发送到第二关联单元12，该第二关联单元将相应的输入重新路由到相应的应用程序141、142、143。
图32E示出根据本发明的手势的另一示例性实施方式。根据本发明的手势包含竖向二倍体图形字符。在该示例性实施方式中，示出了在竖向上叠置的两个字母“M”。例如，当两个手指201、202、203、204、205叠置地描绘相应图形字符的轮廓时，可以输入这样的竖向二倍体图形字符。例如，这样的竖向二倍体图形字符可以用来通过第二关联单元12将shift字符（shift键）和随后的图形字符发送到相应的应用程序141、142、143。
图32F示出根据本发明的手势的另一示例性实施方式。根据本发明的手势包含叠置的三倍体图形字符。当布置成彼此水平间距的三个手指201、202、203、204、205置于触摸屏2上时，而一个手指201、202、203、204、205布置在中间且高于其他两个手指201、202、203、204、205，三个手指201、202、203、204、205都描绘相应的图形字符时，可以画出这种类型的叠置的三倍体图形字符。在该上下文中，三个手指201、202、203、204、205相对于彼此以三角形布置。例如，这样的手势可以用来通过第二关联单元12将Ctrl字符和相继的Alt-字符（Alt-键）以及随后的相应图形字符发送到相应的应用程序141、142、143。
用于操作具有触摸屏2的系统1、尤其测量系统1的根据本发明的方法特别适合于以在计算机或数字信号处理器上执行的程序实现。用于操作具有触摸屏2的系统1、尤其测量系统1的方法也特别适合于作为程序码存储在尤其是机器可读载体上，使得该程序随后可以在计算机或数字信号处理器上执行。
代替测量系统1，系统1还可以为另外的计算机系统，例如，在移动电话和/或电子个人记事本中执行的计算机系统。通常，系统1可以是包括至少一个中央数据处理单元（CPU）的系统。
根据本发明的系统1，尤其是测量系统1，还可以包含控制单元8，控制单元8连接到摄像机或立体摄像机，而手势识别单元可以识别所拍摄的图像中的手势，或者该手势识别单元可以识别和评估在所拍摄的立体图像中的三维手势。这意味着，即使用户距测量系统1有空间距离时，用户也可以用多种手势控制测量系统1。
在本发明的范围内，根据需要可以将所描述的和/或所说明的所有特征彼此组合。具体地，涉及该方法的从属权利要求也可以与涉及系统1的装置权利要求组合，反之亦然。

Claims (32)

1.一种用于操作系统(1)的方法，所述系统具有触摸屏(2)、用于所述触摸屏(2)的控制单元(8)、中央处理单元(9)和手势识别单元(10)，所述方法包括：
-通过所述控制单元(8)识别(S1)一个或多个物理对象在所述触摸屏(2)上和/或在所述触摸屏(2)附近的位置，
和/或
通过所述控制单元(8)识别(S1)一个或多个物理对象在所述触摸屏(2)上和/或在所述触摸屏(2)附近的移动；
-通过在所述手势识别单元(10)中的第一关联单元(11)将一个或多个物理对象的位置和/或移动与手势集中的手势相关联(S2)，
其中，用于所述手势的键组合或一系列键组合通过第二关联单元(12)传送到应用程序(141，142，143)和/或
其中，通过所述第二关联单元(12)启动应用程序(141，142，143)内的用于所述手势的功能
和/或
其中，所述手势通过第二关联单元(12)传送到应用程序(141，142，143)，其特征在于，
通过一个或多个物理对象在所述触摸屏(2)上的移动输入图形字符，以及
控制字符和随后的图形字符通过多倍体图形字符来输入，其中，所述多倍体图形字符是用多个手指画出的图形字符。
2.根据权利要求1所述的方法，
其特征在于以下方法步骤：
-由于所述控制单元(8)识别一个或多个物理对象在所述触摸屏(2)上和/或在所述触摸屏(2)附近的位置和/或移动，故通过所述手势识别单元(10)将手势添加(S3)到所述手势集。
3.根据权利要求1或2所述的方法，
其特征在于，
待通过所述第二关联单元(12)所执行的功能设定在所述应用程序(141，142，143)内并且能够变化，和/或
待通过所述第二关联单元(12)传送到所述应用程序(141，142，143)的键组合或键组合系列能够被设定和变化，使得所述应用程序(141，142，143)能够被更简单地操作和/或自动化。
4.根据权利要求1或2所述的方法，
其特征在于，
第一控制字符和随后的图形字符能够通过二倍体图形字符来输入，所述第一控制字符是Ctrl字符，和/或
第二控制字符和随后的图形字符能够通过三倍体图形字符来输入，所述第二控制字符是Alt字符，和/或
第三控制字符和随后的图形字符能够通过四倍体图形字符来输入，所述第三控制字符是指令字符，和/或
第四控制字符和随后的图形字符能够通过竖向二倍体图形字符来输入，所述第四控制字符是Shift字符，和/或
第五控制字符和随后的图形字符能够通过叠置的三倍体字符来输入，所述第五控制字符是Ctrl-Alt字符。
5.根据权利要求1或2所述的方法，
其特征在于，
所述一个或多个物理对象是一个或多个的人手指(201，202，203，204，205)和/或输入笔。
6.根据权利要求5所述的方法，
其特征在于：
一手势被定义成，近似水平地并排布置的两个手指(201，202，203，204，205)触摸所述触摸屏(2)并且在所述两个手指(201，202，203，204，205)之间近似竖向地向上画线，使得将生成“新文件”和/或“新对象”的指令发送到所述应用程序(141，142，143)。
7.根据权利要求6所述的方法，
其特征在于，
另一手势被定义成，三个或四个或五个手指(201，202，203，204，205)布置到一起并且触摸所述触摸屏(2)，随后以伸展的方式远离彼此移动，使得生成“打开”文件的指令并且该指令被发送到所述应用程序(141，142，143)。
8.根据权利要求6所述的方法，
其特征在于，
另一手势被定义成，在所述触摸屏(2)上画三倍体对角交叉线，或者用一个手指(201，202，203，204，205)按压所述触摸屏(2)并且随后用两个或三个手指(201，202，203，204，205)在距按压部位近似水平的距离处向下画近似二倍体线或三倍体线，使得生成“退出”指令并且该指令被发送到所述应用程序(141，142，143)。
9.根据权利要求6所述的方法，
其特征在于，
另一手势被定义成，近似水平地并排布置的两个手指(201，202，203，204，205)触摸所述触摸屏(2)并且在所述两个手指(201，202，203，204，205)之间近似竖向地向下画线，使得指令“保存”生成并且被发送到所述应用程序(141，142，143)。
10.根据权利要求6所述的方法，
其特征在于，
另一手势被定义成，近似水平地并排布置的两个手指(201，202，203，204，205)触摸所述触摸屏(2)并且随后在所述两个手指(201，202，203，204，205)之间近似竖向地向下画二倍体线，使得指令“另存为”生成并且被发送到所述应用程序(141，142，143)。
11.根据权利要求6所述的方法，
其特征在于，
另一手势被定义成，近似水平地并排布置的两个手指(201，202，203，204，205)触摸所述触摸屏(2)并且随后在所述两个手指(201，202，203，204，205)之间近似竖向地向下画三倍体线，使得指令“保存全部”生成并且被发送到所述应用程序(141，142，143)。
12.根据权利要求6所述的方法，
其特征在于，
另一手势被定义成，一个手指(201，202，203，204，205)和两个其他的或者三个其他的或者四个其他的手指(201，202，203，204，205)以基本的姿势置于所述触摸屏(2)上，使得指令“打印”生成并且被发送到所述应用程序(141，142，143)。
13.根据权利要求6所述的方法，
其特征在于，
另一手势被定义成，一个手指(201，202，203，204，205)被置于所述触摸屏(2)上，距此一时间间隔后，两个其它的或者三个其它的或者四个其它的手指(201，202，203，204，205)以基本的姿势置于所述触摸屏(2)上并点击所述触摸屏(2)，使得指令“打印预览”生成并且被发送到所述应用程序(141，142，143)。
14.根据权利要求6所述的方法，
其特征在于，
另一手势被定义成，一个手指(201，202，203，204，205)置于所述触摸屏(2)的一位置上，随后在该位置的上方或该位置的下方画近似水平的线，使得指令“设置/选项”生成并且被发送到所述应用程序(141，142，143)。
15.根据权利要求6所述的方法，
其特征在于，
另一手势被定义成，一个或两个或三个手指(201，202，203，204，205)以彼此近似水平的间距相继置于所述触摸屏(2)上或者以彼此近似水平的间距相继点击所述触摸屏(2)，使得指令“查找”生成并且被发送到所述应用程序(141，142，143)。
16.根据权利要求6所述的方法，
其特征在于，
另一手势被定义成，两个手指(201，202，203，204，205)以彼此近似水平的间距点击所述触摸屏(2)，然后，相对于该点击部位水平偏移布置的两个手指(201，202，203，204，205)以彼此近似水平的间距点击或触摸所述触摸屏(2)，使得指令“查找下一个”生成并且被发送到所述应用程序(141，142，143)。
17.根据权利要求6所述的方法，
其特征在于，
另一手势被定义成，一个手指(201，202，203，204，205)触摸所述触摸屏(2)，并且随后三个手指(201，202，203，204，205)在所述一个手指(201，202，203，204，205)的上方以彼此近似水平的间距相继地放置在所述触摸屏(2)上，使得指令“替换”生成并且被发送到所述应用程序(141，142，143)。
18.根据权利要求6所述的方法，
其特征在于，
另一手势被定义成，一个手指(201，202，203，204，205)触摸所述触摸屏(2)，然后两个手指(201，202，203，204，205)以彼此近似水平的间距在所述一个手指(201，202，203，204，205)的上方点击所述触摸屏(2)，然后，两个手指(201，202，203，204，205)在所述一个手指(201，202，203，204，205)的上方相对于点击部位水平偏移以彼此近似水平的间距点击或触摸所述触摸屏(2)，使得指令“替换并查找下一个”生成并且被发送到所述应用程序(141，142，143)。
19.根据权利要求6所述的方法，
其特征在于，
另一手势被定义成，在所述触摸屏(2)上画二倍体对角交叉线，或者，用一个手指(201，202，203，204，205)按压所述触摸屏(2)，并用一个手指(201，202，203，204，205)在距按压部位近似水平的间距处向下画近似竖向的线，使得指令“取消”生成并且被发送到所述应用程序(141，142，143)。
20.根据权利要求6所述的方法，
其特征在于，
另一手势被定义成，三个或四个或五个手指(201，202，203，204，205)彼此分开布置并且触摸所述触摸屏(2)，随后移动到一起，使得指令“关闭”生成并且被发送到所述应用程序(141，142，143)。
21.根据权利要求6所述的方法，
其特征在于，
另一手势被定义成，两个或三个或四个或五个手指(201，202，203，204，205)彼此分开布置并且触摸所述触摸屏(2)，并执行旋转移动，使得指令“旋转”生成并且被发送到所述应用程序(141，142，143)。
22.根据权利要求6所述的方法，
其特征在于，
另一手势被定义成，在所述触摸屏(2)上画在底部闭合且其交叉点清楚地在其端部下方的环，使得指令“剪切”生成并且被发送到所述应用程序，和/或
在所述触摸屏(2)上画在底部闭合的二倍体环，所述二倍体环清楚地在其端部下方具有交叉点，使得指令“复制”生成并且被发送到所述应用程序(141，142，143)。
23.根据权利要求6所述的方法，
其特征在于，
另一手势被定义成，在所述触摸屏(2)上画近似液滴形状的结构，使得指令“插入”生成并且被发送到所述应用程序(141，142，143)。
24.根据权利要求6所述的方法，
其特征在于，
另一手势被定义成，在所述触摸屏(2)上画波形图或一周期的正弦波，使得指令“处理”生成并且被发送到所述应用程序(141，142，143)。
25.根据权利要求6所述的方法，
其特征在于，
另一手势被定义成，在所述触摸屏(2)上画对勾，使得指令“OK”生成并且被发送到所述应用程序(141，142，143)。
26.根据权利要求6所述的方法，
其特征在于，
另一手势被定义成，在所述触摸屏(2)上画二倍体对勾，使得指令“接受”生成并且被发送到所述应用程序(141，142，143)。
27.根据权利要求6所述的方法，
其特征在于，
另一手势被定义成，在所述触摸屏(2)上从下向上画朝右弯曲的箭头，使得指令“撤销”生成并且被发送到所述应用程序(141，142，143)，和/或
另一手势被定义成，在所述触摸屏(2)上从上向下画朝右弯曲的箭头，使得指令“恢复”生成并且被发送到所述应用程序(141，142，143)，和/或
另一手势被定义成，在所述触摸屏(2)上从上向下画朝右弯曲的二倍体箭头，使得指令“更新”生成并且被发送到所述应用程序(141，142，143)。
28.根据权利要求6所述的方法，
其特征在于，
另一手势被定义成，在所述触摸屏(2)上画对角交叉线，或者在所述触摸屏(2)上画一近似水平的线多次，使得指令“删除”生成并且被发送到所述应用程序(141，142，143)。
29.根据权利要求6所述的方法，
其特征在于，
另一手势被定义成，在所述触摸屏(2)上画包括近似在中间交叉的近似竖直线和近似水平线的十字和/或半月和/或问号，使得指令“帮助”生成并且被发送到所述应用程序(141，142，143)。
30.一种计算机系统(1)，所述计算机系统具有触摸屏(2)、用于所述触摸屏(2)的控制单元(8)、中央处理单元(1)和手势识别单元(10)，
其中，所述控制单元(8)识别一个或多个物理对象在所述触摸屏(2)上和/或在所述触摸屏(2)附近的位置，和/或
其中，所述控制单元(8)识别一个或多个物理对象在所述触摸屏(2)上和/或在所述触摸屏(2)附近的移动，
其中，在所述手势识别单元(10)中的第一关联单元(11)将一个或多个物理对象的位置和/或移动与手势集中的手势关联，
其中，第二关联单元(12)将用于所述手势的键组合或键组合系列发送到应用程序(141，142，143)，和/或
其中，通过所述第二关联单元(12)启动应用程序(141，142，143)内的用于所述手势的功能，和/或
其中，第二关联单元(12)将所述手势传送到应用程序(141，142，143)，其特征在于，
通过一个或多个物理对象在所述触摸屏(2)上的移动输入图形字符，以及
控制字符和随后的图形字符通过多倍体图形字符来输入，其中，所述多倍体图形字符是用多个手指画出的图形字符。
31.根据权利要求30所述的计算机系统，
其特征在于，
由于一个或多个物理对象在所述触摸屏(2)上和/或在所述触摸屏(2)附近的位置和/或移动能够通过所述控制单元(8)识别，故所述手势识别单元(10)能够将手势添加到所述手势集。
32.根据权利要求30或31所述的计算机系统，
其特征在于，
所述手势集中的一个或多个手势具有限定点，所述限定点指示应当做出手势的位置。
CN201180060802.6A 2010-12-17 2011-12-06 具有手势识别单元的系统 Expired - Fee Related CN103270483B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE102010054859.6 2010-12-17
DE102010054859A DE102010054859A1 (de) 2010-12-17 2010-12-17 System mit Gestenerkennungseinheit
PCT/EP2011/071850 WO2012080029A1 (de) 2010-12-17 2011-12-06 System mit gestenerkennungseinheit

Publications (2)

Publication Number Publication Date
CN103270483A CN103270483A (zh) 2013-08-28
CN103270483B true CN103270483B (zh) 2016-07-06

Family

ID=45463541

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201180060802.6A Expired - Fee Related CN103270483B (zh) 2010-12-17 2011-12-06 具有手势识别单元的系统

Country Status (5)

Country Link
US (1) US9030433B2 (zh)
EP (1) EP2652584B1 (zh)
CN (1) CN103270483B (zh)
DE (1) DE102010054859A1 (zh)
WO (1) WO2012080029A1 (zh)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2812784A4 (en) * 2012-02-07 2015-11-11 Blackberry Ltd METHODS AND DEVICES FOR MERGING CONTACT RECORDINGS
US9348508B2 (en) 2012-02-15 2016-05-24 International Business Machines Corporation Automatic detection of user preferences for alternate user interface model
US9575652B2 (en) * 2012-03-31 2017-02-21 Microsoft Technology Licensing, Llc Instantiable gesture objects
US8640046B1 (en) * 2012-10-23 2014-01-28 Google Inc. Jump scrolling
CN103902080A (zh) * 2012-12-27 2014-07-02 华硕电脑股份有限公司 触控装置以及触控处理方法
CN103970456A (zh) * 2013-01-28 2014-08-06 财付通支付科技有限公司 一种智能终端的交互方法和装置
EP2984550A1 (en) 2013-04-08 2016-02-17 Rohde & Schwarz GmbH & Co. KG Multitouch gestures for a measurement system
DE102013216740A1 (de) * 2013-08-23 2015-02-26 Robert Bosch Gmbh Bedienvorrichtung, Steuervorrichtung und Anlage der Automationstechnik
CN103616994A (zh) * 2013-12-09 2014-03-05 珠海金山办公软件有限公司 电子设备控制方法及装置
CN103905026B (zh) * 2014-04-14 2016-08-17 上海电器科学研究院 一种基于电容式单点触摸按键的双键手势识别方法
CN104239606B (zh) * 2014-08-06 2018-04-27 北京大学 Web环境下支持触屏的UML建模方法与装置
US9710076B2 (en) * 2014-11-12 2017-07-18 Successfactors, Inc. Precise selection behavior for sliders by interpreting a second finger touch
CN105843672A (zh) * 2015-01-16 2016-08-10 阿里巴巴集团控股有限公司 一种应用程序控制方法、装置及系统
CN104636068B (zh) * 2015-02-02 2017-12-12 惠州Tcl移动通信有限公司 应用图标的操作方法和触控终端
CN104898975B (zh) * 2015-05-29 2018-12-07 努比亚技术有限公司 移动终端控制方法及移动终端
US20180018086A1 (en) * 2016-07-14 2018-01-18 Google Inc. Pressure-based gesture typing for a graphical keyboard
US10739990B1 (en) * 2016-12-18 2020-08-11 Leonid Despotuli Gesture-based mobile device user interface
CN106598468B (zh) * 2016-12-23 2020-03-31 广东小天才科技有限公司 拍照搜索应用的启动方法及装置
DE102020113863A1 (de) * 2020-05-23 2021-11-25 Andreas Fischer Elektronisches Labor- und Prüfgerät und Verfahren zum Betreiben eines solchen

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101047913A (zh) * 2006-03-30 2007-10-03 三星电子株式会社 便携式终端的显示数据大小调整设备及方法
EP1914623A1 (en) * 2006-10-20 2008-04-23 Samsung Electronics Co., Ltd. Text input method and mobile terminal therefor
CN101410781A (zh) * 2006-01-30 2009-04-15 苹果公司 利用多点感测设备进行的手势操作

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7840912B2 (en) 2006-01-30 2010-11-23 Apple Inc. Multi-touch gesture dictionary
US7030861B1 (en) * 2001-02-10 2006-04-18 Wayne Carl Westerman System and method for packing multi-touch gestures onto a hand
US20060267966A1 (en) * 2005-05-24 2006-11-30 Microsoft Corporation Hover widgets: using the tracking state to extend capabilities of pen-operated devices
US8106856B2 (en) 2006-09-06 2012-01-31 Apple Inc. Portable electronic device for photo management
US8564544B2 (en) * 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
DE102007016408A1 (de) * 2007-03-26 2008-10-02 Ident Technology Ag Mobiles Kommunikationsgerät und Eingabeeinrichtung hierfür

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101410781A (zh) * 2006-01-30 2009-04-15 苹果公司 利用多点感测设备进行的手势操作
CN101047913A (zh) * 2006-03-30 2007-10-03 三星电子株式会社 便携式终端的显示数据大小调整设备及方法
EP1914623A1 (en) * 2006-10-20 2008-04-23 Samsung Electronics Co., Ltd. Text input method and mobile terminal therefor

Also Published As

Publication number Publication date
EP2652584B1 (de) 2015-02-18
US9030433B2 (en) 2015-05-12
WO2012080029A1 (de) 2012-06-21
CN103270483A (zh) 2013-08-28
DE102010054859A1 (de) 2012-06-21
EP2652584A1 (de) 2013-10-23
US20130293504A1 (en) 2013-11-07

Similar Documents

Publication Publication Date Title
CN103270483B (zh) 具有手势识别单元的系统
US10444989B2 (en) Information processing apparatus, and input control method and program of information processing apparatus
US10909308B2 (en) Information processing apparatus, information processing method, and program
CN105117056B (zh) 一种操作触摸屏的方法和设备
JP5813780B2 (ja) 電子機器、方法及びプログラム
JP6180888B2 (ja) 電子機器、方法およびプログラム
WO2014147716A1 (ja) 電子機器および手書き文書処理方法
JP6092418B2 (ja) 電子機器、方法及びプログラム
KR101394874B1 (ko) 필기 기반으로 특정 기능을 실행하는 방법 및 그에 따른 디바이스
US8436829B1 (en) Touchscreen keyboard simulation for performance evaluation
US9489086B1 (en) Finger hover detection for improved typing
CN108885615A (zh) 针对浏览器导航的墨水输入
JP6092462B2 (ja) 電子機器、方法及びプログラム
CN106164893A (zh) 用于输入与多输入目标相关联的一个或多个输入的系统和方法
JP2015518993A (ja) タッチセンシティブ・スクリーンからシンボルを入力する方法および装置
JP6430198B2 (ja) 電子機器、方法及びプログラム
JPWO2014045414A1 (ja) 文字入力装置、文字入力方法、文字入力制御プログラム
US20140210732A1 (en) Control Method of Touch Control Device
CN105653188B (zh) 一种终端的操作方法和终端
US20130187893A1 (en) Entering a command
CN107193394A (zh) 一种文本输入的方法及移动终端
US20200327303A1 (en) Method for system control through fingerprint input
KR101454896B1 (ko) 터치 패널을 이용한 한글 입력 장치 및 그의 한글 입력 방법
JP6251408B2 (ja) 電子機器、方法及びプログラム
JP5810180B2 (ja) 入力装置及び文字入力方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20160706

Termination date: 20171206

CF01 Termination of patent right due to non-payment of annual fee