CN104040476A - 用于运行能多点触控的显示器的方法和具有能多点触控的显示器的设备 - Google Patents

用于运行能多点触控的显示器的方法和具有能多点触控的显示器的设备 Download PDF

Info

Publication number
CN104040476A
CN104040476A CN201280063988.5A CN201280063988A CN104040476A CN 104040476 A CN104040476 A CN 104040476A CN 201280063988 A CN201280063988 A CN 201280063988A CN 104040476 A CN104040476 A CN 104040476A
Authority
CN
China
Prior art keywords
touch
control
information
interactive object
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201280063988.5A
Other languages
English (en)
Other versions
CN104040476B (zh
Inventor
亚历山大·库利克
贝恩德·弗勒利希
扬·迪特里希
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Weimar Bao Haosi University
Original Assignee
Weimar Bao Haosi University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Weimar Bao Haosi University filed Critical Weimar Bao Haosi University
Publication of CN104040476A publication Critical patent/CN104040476A/zh
Application granted granted Critical
Publication of CN104040476B publication Critical patent/CN104040476B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412—Digitisers structurally integrated in a display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04106—Multi-sensing digitiser, i.e. digitiser using at least two different sensing technologies simultaneously or alternatively, e.g. for detecting pen and finger, for saving power or for improving position detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

本发明涉及用于运行能多点触控的显示器(01)的方法和具有电脑功能的设备。在方法的一个步骤中，可操纵的内容在显示器(01)上示出。内容包括两个层级平面的分级地结构化的交互对象(04、06)。在其它步骤中，对显示器(01)的第一和第二触控被探测到，这导致得到关于这些触控的信息。关于第一触控的信息用于操纵第一层级平面的交互对象(06)。根据本发明，如果第二触控在第一触控后的预先确定的持续时间之后被探测到并且此外第一触控也被探测到，那么关于第二触控的信息用于操纵第二层级平面的交互对象(04)。相反地，如果第二触控并非在第一触控后的预先确定的持续时间之后被探测到，那么关于第二触控的信息用于操纵第一层级平面的交互对象(06)。

Description

用于运行能多点触控的显示器的方法和具有能多点触控的显示器的设备
技术领域
本发明涉及用于运行能多点触控的显示器(例如能多点触控的、可利用用户的两个手指来操作的触控屏)的方法。此外，本发明涉及具有电脑功能的、包括能多点触控的显示器的设备。
背景技术
US 2010/0328227 A1示出多指-鼠标-仿真系统，在触控屏幕上通过该仿真系统来模拟具有多个鼠标按键的电脑鼠标。
DE 20 2006 020 369 U1示出多功能的、手持式的设备，其中，在输入的手势方面区别轻触控和重触控。
US 2011/0041096 A1示出通过手势来操纵图形元素。通过双手操作能够实现具有多个等级的菜单中的选择。
由US 2011/0216095 A1公知用于操作触控敏感的表面的方法，其中不同之处是，是否在预定的时间范围内进行对触控敏感的表面的一个或两个触控。
US 2011/0227947 A1示出多点触控用户界面，包括能多点触控的鼠标。
在US 6,958,749 B1中描述了用于操作触板的方法，其中，借助手指来移动示出的对象。如果利用两个手指来触控该触板，那么该对象会被转动。
US 8,004,498 B1示出用于将一部分图形临时定位在触板上的方法。在此，根据触控的持续时间，用户的手产生针对图形元素的一部分的抓握信号，而另一手可利用笔来处理图形元素的第二部分。
WO 2009/088561 A1示出针对具有手势识别的双手用户界面的方法。手势识别利用照相机来进行。
WO 2005/114369 A2示出可利用多个手指来操作的触控屏。
由WO 2006/020305 A2公知了用于在触控敏感的输入设备上识别手势的方法。在该方法的实施形式中，示出的对象可借助两个手指来缩放。在另一实施形式中，可以借助拇指来进行模式转换，而同时可利用另一手指移动对象。
DE 21 2008 000 001 U1示出用于在触控屏显示器上进行列表的滚动以及文件的移动、缩放和旋转的设备。对于所示内容的旋转和缩放来说，触控屏显示器可利用两个手指来操作。
DE 20 2008 001 338 U1示出多点扫描设备，利用该多点扫描设备可识别多个手势。
DE 20 2005 021 492 U1示出具有输入装置的电子设备，在该触控敏感的输入装置中识别手势，以便示出媒介对象。
WO 2009/100421 A2示出用于操纵触控屏上的对象的方法。在该方法中评估第一触控与第二触控之间的相对位置。
WO 2011/107839 A1示出用于在多点触控敏感的显示器上执行“拖放”输入的方法。在WO 2011/107839 A1的图3A至图3G中形象地说明了对碰触列表的操作。各个触控用于移动列表或者用于选择各条目。利用两个手指的触控用于拖放，其中，在两个层级平面中同时操纵对象。时间上重叠地进行两个触控被视为用于探测两个触控的标准。因此，确定的持续时间的流程不是标准。例如，利用两个手指的短时间内依次的双触控导致拖放。利用两个手指的双触控总是引导至拖放模式，从而通过两个同时的触控来操纵单个的交互对象(例如放大/缩小)或同一层级平面的两个交互对象是不可能的。
发明内容
从现有技术出发，本发明的任务是在能多点触控的显示器中使输入信息变得容易，并且与来自物理实现方面的体验相一致。
所提到的任务通过根据附属的权利要求1和9的、用于运行能多点触控的显示器的方法来解决，以及通过根据附属的权利要求10的、具有电脑功能的设备来解决。
本发明的第一主题为用于运行由数据处理单元操控的能多点触控的显示器的方法，例如能多点触控的、平板电脑的触控屏幕形式的触控屏。替选地，能多点触控的显示器也可以由具有数据输入设备(例如数据手套或3D鼠标)的二维或三维投影装置形成，其中，直接触控数据输入设备导致对所示的内容的虚拟触控。根据本发明的方法尤其是用于在操作能多点触控的显示器的情况下评估手势，并且相应调整能多点触控的显示器的显示。
在根据本发明的第一主题的方法的一个步骤中，可操纵的内容在显示器上或在显示器内可视地示出。内容包括分级结构化的交互对象。交互对象的特征在于，可直接或间接地在能多点触控的显示器上或其内触控交互对象的可视的图标，以便由此改变交互对象。例如，在触控屏上直接触控可视的图标。相反，如果能多点触控的显示器由具有数据手套的投影装置形成，那么就在数据手套内进行触控，由此虚拟地触控所示的交互对象。交互对象分级地结构化，从而存在下级的交互对象和上级的交互对象。至少存在第一层级平面和第二层级平面的交互对象。
在根据本发明的方法的另一步骤中，探测由操作者执行的对能多点触控的显示器的第一触控，这导致关于第一触控的信息能由数据处理单元处理。这些信息用于操纵第一层级平面的交互对象。在另一步骤中，探测对能多点触控的显示器的第二触控，这导致关于第二触控的信息能由数据处理单元处理。第二触控的特征在于，其与第一触控在位置上有所不同，从而可推断出：第二触控通过第二对象，例如通过操作者的第二手指来执行。根据本发明，如果第二触控在第一触控之后的预先确定的持续时间之后被探测到并且此外第一触控也被探测到，那么关于第二触控的信息被数据处理单元用来操纵第二层级平面的交互对象。预先确定的持续时间的等待用于识别出用户的目的，第二触控应该涉及第二层级平面的交互对象，例如在第一层级平面的待操纵的交互对象的下级的交互对象。相反，根据本发明，如果第二触控并非在第一触控之后的预先确定的持续时间之后被探测到，那么关于第二触控的信息被数据处理单元用来操纵第一层级平面的交互对象。因此，用户在同一时间或在很小的时间间距中进行的两个触控相反地理解为：所述触控应该涉及相同的层级平面(即，第一层级平面)的交互对象，并且优选应该涉及第一层级平面的同一交互对象。
根据本发明的方法的特别的优点在于，不同的层级平面的交互对象可通过用户来操纵，而不用为此需要其它传感技术。尽可能阻止无意地切换层级平面。在切换层级平面的情况中，操作流程不中断。切换层级平面不需要可觉察到的延迟时间。根据本发明的方法的另一优点在于，在能多点触控的显示器上或在其内不必示出额外的操作元件，从而其针对其它应用的内容而准备。在根据本发明的方法中，尤其是在触控屏的情况下尽可能阻止由于振动而导致的错误输入。根据本发明的方法不与用于操作能多点触控的显示器的方法相冲突，从而此外例如可执行在相同的层级平面中的同步输入。根据本发明的方法优选不依赖于在能多点触控的显示器上的或在其内的改变位置的触控的速度，并且优选也不依赖于在能多点触控的显示器上的或在其内的触控位置。
本发明的构思恰好在于，从用于处理第一层级平面的一个或多个交互对象的任意模式(例如各交互对象的激活或运动、交互对象的放大/缩小)切换至用于处理两个层级平面上的交互对象的模式中。为此等待两个触控之间的预先确定的持续时间。如果直至第二触控小于预先确定的持续时间，那么这导致保持在用于处理第一平面中的各交互对象的模式中。在此，是否还存在第一触控是不重要的。即，存在需要两个同时的触控的模式(例如交互对象的放大/缩小)。也存在仅需要单独触控的模式(例如交互对象的激活或运动)。因此可想到的是：还存在第一触控，或者如果在第一触控之后的预先确定的持续时间之内开始第二触控，那么也就不再存在第一触控。在两种情况下，进入用于通过两个同时的触控来操纵两个层级平面上的交互对象的模式(例如“保持和移动(Hold-and-Move)”，见下文)。
在根据本发明的方法的优选的实施形式中，如果关于第二触控的信息用于操纵第二层级平面的交互对象，那么关于第一触控的信息和关于第二触控的信息分别根据第一操纵模式来处理。操作者可由此以相同方式同时操纵上级的交互对象和下级的交互对象。例如，操作者可相对于上级的交互对象以如下方式来移动下级的交互对象，即，操作者在能多点触控的显示器上或在其内使上级的交互对象和下级的交互对象运动。
在根据本发明的方法的其它优选的实施形式中，如果关于第二触控的信息用于操纵第一层级平面的交互对象，那么关于第一触控的信息和关于第二触控的信息共同地根据第二操纵模式来处理。在此优选操纵同一交互对象。因此，如果用户不想使用第二手指来操纵第二层级平面的交互对象，那么用户例如可使用其第二手指根据第二操纵模式来操纵第一层级平面的交互对象。
在根据本发明的方法的其它优选的实施形式中，如果第一触控不再被探测到，那么关于第二触控的信息根据第一操纵模式来处理。由此，在用户根据第二操纵模式通过对能多点触控的显示器的两个触控来操纵交互对象之后，用户可不中断地回到第一操纵模式。
交互对象的第一层级平面优选直接高于交互对象的第二层级平面。因此，第一层级平面的交互对象相应包括第二层级平面的交互对象。
第二层级平面的交互对象优选是基本的(elementar)，从而第二层级平面是最下面的层级平面。
第一层级平面的交互对象优选由可相应包括第二层级平面的基本的交互对象的分组形成。
第二层级平面的交互对象优选由符号(Icons)、象形图、图片和/或窗口(Windows)形成。第一层级平面的交互对象优选由形象化的文件夹和/或窗口形成。
在根据本发明的方法的优选的实施形式中，所示内容包括在多于两个的层级平面上分级地结构化的交互对象。也就是说，根据本发明的方法适用于能够使操作者实现多个层级平面上的直观且快速的交互。
第一操纵模式和第二操纵模式优选分别规定：从关于相应的触控的信息出发如何改变所示的交互对象。在此优选地相应操纵交互对象中的在能多点触控的显示器上或在其内的相应的触控位置可视地示出的那个交互对象。
根据第一操纵模式来操纵第二层级平面的基本的交互对象例如能够实现将待操纵的交互对象配属于第一层级平面的另一分组。
优选地相应操纵第一层级平面的在能多点触控的显示器上或在其内的第一触控位置示出的分组。
交互对象优选直接在探测到第一触控之后或者直接在探测到第二触控之后改变。在此，交互对象优选与探测到的第一触控或第二触控在位置上的改变在时间上同步地改变。
在根据本发明的方法的优选的实施形式中，通过第一操纵模式为操作者提供如下功能：其能够使操作者在通过显示器示出的内容中实现导航。因此，第一操纵模式优选导致激活第一层级平面的在能多点触控的显示器上或在其内示出的交互对象，该交互对象在能多点触控的显示器上或在其内的第一次探测到第一触控的位置或者在第一次探测时第一触控指向的位置示出。同时优选钝化(passivieren)第一层级平面的通过显示器示出的交互对象的所有剩余的交互对象。以相同的方式，第一操纵模式优选导致激活第二层级平面的通过显示器示出的交互对象，如果关于第二触控的信息用于操纵第二层级平面的交互对象，那么该交互对象在能多点触控的显示器上或在其内的第一次探测到第二触控的位置或者在第一次探测时第二触控指向的位置示出。此外，第一操纵模式优选根据能多点触控的显示器上的或其内的相应触控的运动导致所激活的交互对象的运动。如果第二触控的信息用于操纵第二层级平面的交互对象，即，如果操作者在第一触控后的预先确定的持续时间之后进行第二触控，那么操作者可同时使上级的交互对象和下级的交互对象运动，以便例如在能多点触控的显示器上或在其内彼此相对地移动交互对象。在用户使第二层级平面的交互对象运动期间，操作者也可位置固定地保持第一触控，从而不改变第一层级平面的交互对象的位置。因此，根据本发明的方法能够让操作者实现将“保持和移动”的示范(Hold and Move)应用于数据输入。
第二操纵模式优选根据能多点触控的显示器上的或其内的相应的触控的运动导致在能多点触控的显示器上或其内的相应的触控位置示出的交互对象的改变。特别优选地，第二操纵模式导致相应真实的或虚拟的触控位置所示出的交互对象的缩放或转动。
在第一操纵模式中，单独的触控信息优选被应用到待操纵的交互对象上。而在第二操纵模式中，两个触控的信息优选被应用到同一单个的交互对象上。在此，两个触控的信息优选被彼此相关地处理。
优选通过操作者的单个手指进行触控；替选地，触控也可通过手或者通过由用户使用的笔进行。只要显示器由触控屏形成，那么就在该触控屏的表面上进行触控。只要显示器由具有数据输入设备(例如数据手套或3D鼠标)的投影装置形成，那么就直接在数据输入设备上或在其内进行触控，其中，数据输入设备相对于所示内容的位置和/或取向确定被虚拟触控的交互对象。
在探测触控时获知的信息优选描述在由触控屏形成的显示器上的触控位置，并且此外也优选描述触控屏上的触控位置的时间上的改变。
预先确定的持续时间优选是在10ms与3s之间，此外优选在20ms与1s之间，特别优选在50ms与200ms之间。此外，预先确定的持续时间特别优选地是100ms±20ms。
能多点触控的显示器优选由能多点触控的显示屏形成，例如由平板电脑的触控屏幕形成。
本发明的第二主题也为用于运行由数据处理单元操控的能多点触控的显示器的方法。该方法具有和根据本发明的第一主题的方法相同的应用范围。
在根据本发明的第二主题的方法的一个步骤中，在能多点触控的显示器上或在其内可视地示出内容。这些内容可以由数据处理单元根据第一操纵模式并且替选地根据第二操纵模式来操纵。第一操纵模式不同于第二操纵模式。在另一步骤中探测由操作者执行的对能多点触控的显示器的第一触控，这导致关于第一触控的信息能由数据处理单元处理。在另一步骤中探测对能多点触控的显示器的第二触控，这导致关于第二触控的信息能由数据处理单元处理。
根据本发明，如果第二触控在第一触控后的预先确定的持续时间之后被探测到并且此外第一触控也被探测到，那么关于第一触控的信息和关于第二触控的信息分别根据第一操纵模式来处理，用以操纵待操纵的内容。相反地，如果第二触控并非在第一触控后的预先确定的持续时间之后被探测到并且优选第一触控也被探测到，那么关于第一触控的信息和关于第二触控的信息根据第二操纵模式来处理，用以操纵待操纵的内容。
根据本发明的第二主题的方法能够实现两个操纵模式之间的直观且快速的切换。本发明的构思恰好在于，从第一操纵模式(例如Hold-and-Move)切换至第二操纵模式(例如各交互对象的激活或运动、交互对象的放大/缩小)中并且反之亦然。为此，等待两个触控之间的预先确定的持续时间。如果小于直至第二触控小于预先确定的持续时间，那么这导致切换至第二操纵模式中。在此，是否还存在第一触控是不重要的。针对第二操纵模式存在需要两个同时的触控的示例(例如交互对象的放大/缩小)。针对第二操纵模式也存在仅需要单独触控的示例(例如交互对象的激活或运动)。因此可想到的是，还存在第一触控，或者如果在第一触控后的预先确定的持续时间之内开始第二触控，那么就不再存在第一触控。在两种情况下，不进入原则上需要两个同时的触控的第一操纵模式。
所示内容优选包括交互对象。交互对象优选分级地结构化。
关于第一触控的信息优选用于操纵层级平面中的第一层级平面上的交互对象。
如果关于第二触控的信息根据第一操纵模式来处理，那么关于第二触控的信息优选用于操纵层级平面中的第二层级平面上的交互对象。
如果关于第二触控的信息根据第二操纵模式来处理，那么关于第二触控的信息优选用于操纵第一层级平面上的交互对象。
此外，根据本发明的第二主题的根据本发明的方法优选也具有如下特征，即，对于根据本发明的第一主题的方法来说，这些特征被优选地说明。
根据本发明的设备具有电脑功能，并且例如由智能手机或电脑(例如平板电脑)形成。设备包括能多点触控的显示器，用以可视地示出内容并且用以探测由操作者执行的触控。能多点触控的显示器优选由能多点触控的屏形成。这种触控屏也被称为多点触控屏幕或者触屏。替选地，显示器也可以由具有数据输入设备(例如数据手套或3D鼠标)的二维或三维投影装置形成。此外，根据本发明的设备包括数据处理单元，该数据处理单元为了实施根据本发明的方法而按照本发明的第一或第二主题进行配置。优选地，该数据处理单元为了实施根据本发明的方法的优选实施形式而配置。
附图说明
本发明其它的优点、细节和改进方案在参考附图的情况下，由随后对根据本发明的方法的不同流程的描述得出。其中：
图1示出按照根据本发明的方法的优选的实施形式的第一流程图；
图2示出图1所示的实施形式的第二流程图；
图3示出图1所示的实施形式的第三流程图；和
图4示出根据本发明的方法的优选的实施形式的状态转换图。
具体实施方式
图1示出根据本发明的方法的优选的实施形式的第一流程图。在通过操作者的左手02和右手03来操作能多点触控的触控屏01时的四个时间点T1、T2、T3、T4被示出。能多点触控的触控屏01可以例如是平板电脑的触控屏。
在触控屏01上可视地示出各符号04，这些符号在窗口06内分组。符号04和窗口06可以通过触控该触控屏01在表面上被直接操纵，并且因此是交互对象。因为符号04在窗口06内分组，所以符号04和窗口06形成层级结构，在该层级结构中，符号04形成下级的层级平面，而窗口06形成上级的层级平面。
在时间点T1，操作者用其左手02的第一手指07触控该触控屏01的窗口06所示的区域。该单点触控导致窗口06以其特性激活为上级的层级平面的交互对象。在此，在通过第一手指07触控的位置示出下级的层级平面的哪一个符号04(即，哪一个交互对象)是不重要的。
直到时间点T2，操作者将其左手02的第一手指07在多点触控屏01上向下移动至所示位置。以相同的方式，具有在其中示出的符号04的窗口06随着第一手指07的探测到的移动而向下移动。激活窗口06和移动窗口06是根据第一操纵模式的操纵。第一操纵模式尤其包括能够在所示内容中实现导航的功能。
直到时间点T3，操作者结束利用其左手02的第一手指07对多点触控屏01的触控，并且替代地，在所示位置利用其右手03的第二手指08触控该触控屏01。又在示出窗口06的区域中触控该触控屏01。在触控位置示出哪一个符号04也是不重要的。因为触控屏01又通过单点触控来操作，所以关于触控的信息同样根据第一操纵模式来处理。因此，通过该触控又激活窗口06，并且通过第二手指08在触控屏01上的运动来将窗口移动至对于时间点T4所示的位置。
图2示出根据本发明的方法的优选的实施形式的第二流程图。在示出的时间点T1，操作者利用其左手02的第一手指07和其右手03的第二手指08几乎同时触控该触控屏01。通过第一手指07的触控和通过第二手指08的触控总是存在小于预先确定的持续时间(例如100ms)的时间间距。由操作者施加的同时性导致根据第二操纵模式来评估通过第一手指07的触控和通过第二手指08的触控。在该实施形式中，第二操纵模式设置了将两个触控应用到窗口06上。因此，两个触控被应用到上级的层级平面的同一交互对象上。
直到时间点T2，操作者将其左手02的第一手指07和其右手03的第二手指08在触控屏01上移动，从而使两个触控的位置具有比在时间点T1时相互间更大的间距。根据第二操纵模式，窗口06缩放，从而在时间点T2中被更大地示出。
图3示出根据本发明的方法的优选的实施形式的另一流程图。在示出的时间点T1，操作者利用其左手02的第一手指07触控该触控屏01的窗口06的区域。在时间点T2，操作者额外地利用其右手03的第二手指08触控该触控屏01。因为两个时间点T1和T2彼此间隔大于预先确定的持续时间(例如100ms)，所以与图2所示的流程不同，两个触控没有根据第二操纵模式，而是分别根据第一操纵模式来评估。在此，与图2所示的流程不同，通过右手03的第二手指08的触控并不涉及窗口06，而是涉及下级的层级平面的其中一个交互对象，即，涉及其中一个符号04，更确切地说，涉及在通过第二手指08的触控位置所示出的符号04。因此，通过手指07、08的两个触控涉及不同的层级平面的交互对象04、06。通过手指07、08的两个触控根据第一操作模式来处理，从而进行交互对象04、06的激活和随后必要时的运动。
在时间点T3，操作者将其右手03的第二手指08在触控屏01上移动，即，向下移动，而操作者使其左手02的第一手指07保持位置不变。第二手指08的运动导致被激活的符号04随第二手指08向下移动，其中，这导致符号04从窗口06中移出。因为通过第一手指07的触控涉及窗口06，所以将第一手指07保持在所选择的位置导致窗口06保持其位置。所示的流程图示出“保持和移动”的示范(Hold andMove)。
直到时间点T4，操作者也移动其左手02的第一手指07，即，向上移动，从而窗口06也在其于触控屏01上的显示中向上移动。操作者也可以以相反的顺序或者同时执行第一手指07和第二手指08的运动来获得对于时间点T4所示的状态。
图4示出根据本发明的方法的优选的实施形式的状态转换图。在状态转换图的上部分中示出从状态“无触控”转换至状态“单点触控”和相反的转换。对能多点触控的触控屏01的单点触控(在图1中示出)导致根据第一操纵模式来操纵上级的层级平面的在触控位置上示出的交互对象。由此，窗口06的在图1中所示的激活和运动是可能的。
状态转换图的下部分示出从状态“单点触控”转换至状态“通过两个手指的触控”和相反的转换，其中不同之处是：该状态转换是否在小于或大于例如100ms的情况下进行。如果该转换在小于100ms的情况下进行，那么两个触控共同地应用到第一层级平面的交互对象上。通过两个触控的运动来进行窗口06的在图2中所示的缩放。
如果该状态转换在大于100ms的情况下进行，那么第二触控导致对第二层级平面的其中一个交互对象的操纵，例如对符号04的操纵(在图3中示出)。由此可根据图3所示的“保持和移动”示范来操纵两个交互对象。
附图标记列表
01-能多点触控的触控屏
02-左手
03-右手
04-符号
05--
06-窗口
07-第一手指
08-第二手指

Claims (10)

1.用于运行由数据处理单元操控的能多点触控的显示器(01)的方法，所述方法包括如下步骤：
-在所述能多点触控的显示器(01)上或在其内可视地示出能操纵的内容，其中，所述内容包括至少一个第一层级平面的和至少一个第二层级平面的分级地结构化的交互对象(04、06)；
-探测对所述能多点触控的显示器(01)的第一触控，其中，对所述第一触控的探测导致得到能由所述数据处理单元处理的、关于第一触控的信息，所述信息被所述数据处理单元用来操纵所述第一层级平面的交互对象(04)；和
-探测对所述能多点触控的显示器(01)的第二触控，其中，对所述第二触控的探测导致得到能由所述数据处理单元处理的、关于第二触控的信息；
其特征在于，如果所述第二触控在所述第一触控后的预先确定的持续时间之后被探测到并且此外所述第一触控也被探测到，那么所述关于第二触控的信息被所述数据处理单元用来操纵所述第二层级平面的交互对象(04)；如果所述第二触控并非在所述第一触控后的所述预先确定的持续时间之后被探测到，那么所述关于第二触控的信息被所述数据处理单元用来操纵所述第一层级平面的交互对象(06)。
2.根据权利要求1所述的方法，其特征在于，如果所述关于第二触控的信息被用于操纵所述第二层级平面的交互对象(04)，那么所述关于第一触控的信息和所述关于第二触控的信息分别根据第一操纵模式来处理。
3.根据权利要求1或2所述的方法，其特征在于，如果所述关于第二触控的信息被用于操纵所述第一层级平面的交互对象(06)，那么所述关于第一触控的信息和所述关于第二触控的信息被所述数据处理单元共同地根据第二操纵模式来处理。
4.根据权利要求1至3中任一项所述的方法，其特征在于，所述第二层级平面的交互对象(04)是基本的。
5.根据权利要求4所述的方法，其特征在于，所述第一层级平面的交互对象由所述第二层级平面的基本的交互对象(04)的分组(06)形成。
6.根据权利要求1至5中任一项所述的方法，其特征在于，所述交互对象由符号(04)、象形图、图片、窗口(06)和/或各符号的形象化的文件夹形成。
7.根据权利要求1至6中任一项所述的方法，其特征在于，所述第一操纵模式和所述第二操纵模式分别规定：从关于相应的触控的信息出发如何改变所示的交互对象(04、06)。
8.根据权利要求1至7中任一项所述的方法，其特征在于，所述预先确定的持续时间在20ms与1s之间。
9.用于运行由数据处理单元操控的能多点触控的显示器(01)的方法，所述方法包括如下步骤：
-在所述能多点触控的显示器(01)上或在其内可视地示出内容(04、06)，其中，所述内容能被所述数据处理单元根据第一操纵模式及根据第二操纵模式来操纵；
-探测对所述能多点触控的显示器(01)的第一触控，其中，对所述第一触控的探测导致得到能由所述数据处理单元处理的、关于第一触控的信息；和
-探测对所述能多点触控的显示器(01)的第二触控，其中，对所述第二触控的探测导致得到能由所述数据处理单元处理的、关于第二触控的信息；
其特征在于，如果所述第二触控在所述第一触控后的预先确定的持续时间之后被探测到并且此外所述第一触控也被探测到，那么所述关于第一触控的信息和所述关于第二触控的信息分别根据所述第一操纵模式来处理；如果所述第二触控并非在所述第一触控后的预先确定的持续时间之后被探测到，那么所述关于第一触控的信息和所述关于第二触控的信息根据所述第二操纵模式来处理。
10.具有电脑功能的设备，所述设备包括：
-能多点触控的显示器(01)，用以可视地示出内容(04、06)并且用以探测对所述能多点触控的显示器(01)的触控；和
-数据处理单元，所述数据处理单元为了实施根据权利要求1至9中任一项所述的方法而配置。
CN201280063988.5A 2011-12-22 2012-12-11 用于运行能多点触控的显示器的方法和具有能多点触控的显示器的设备 Expired - Fee Related CN104040476B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE102011056940A DE102011056940A1 (de) 2011-12-22 2011-12-22 Verfahren zum Betrieb einer mehrfachberührungsfähigen Anzeige und Vorrichtung mit einer mehrfachberührungsfähigen Anzeige
DE102011056940.5 2011-12-22
PCT/EP2012/075034 WO2013092288A1 (de) 2011-12-22 2012-12-11 Verfahren zum betrieb einer mehrfachberührungsfähigen anzeige und vorrichtung mit einer mehrfachberührungsfähigen anzeige

Publications (2)

Publication Number Publication Date
CN104040476A true CN104040476A (zh) 2014-09-10
CN104040476B CN104040476B (zh) 2017-05-31

Family

ID=47552957

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280063988.5A Expired - Fee Related CN104040476B (zh) 2011-12-22 2012-12-11 用于运行能多点触控的显示器的方法和具有能多点触控的显示器的设备

Country Status (7)

Country Link
US (1) US20150169122A1 (zh)
EP (1) EP2795451B1 (zh)
KR (1) KR20140116080A (zh)
CN (1) CN104040476B (zh)
BR (1) BR112014015490A8 (zh)
DE (1) DE102011056940A1 (zh)
WO (1) WO2013092288A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105573583A (zh) * 2014-10-08 2016-05-11 大众汽车有限公司 用户界面和用于在用户界面上适配菜单栏的方法
JP2018505497A (ja) * 2015-02-16 2018-02-22 ホアウェイ・テクノロジーズ・カンパニー・リミテッド マルチタッチジェスチャのためのシステムおよび方法

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114461062A (zh) 2014-11-07 2022-05-10 索尼公司 信息处理系统、控制方法和计算机可读存储介质
US9779585B2 (en) * 2015-03-31 2017-10-03 Igt Canada Solutions Ulc Multi-touch user interface for scaling reward value with random failure threshold for gaming system
US9933891B2 (en) * 2015-11-03 2018-04-03 Microsoft Technology Licensing, Llc User input comprising an event and detected motion
US10955977B2 (en) 2015-11-03 2021-03-23 Microsoft Technology Licensing, Llc Extender object for multi-modal sensing
US10649572B2 (en) 2015-11-03 2020-05-12 Microsoft Technology Licensing, Llc Multi-modal sensing surface
US10338753B2 (en) 2015-11-03 2019-07-02 Microsoft Technology Licensing, Llc Flexible multi-layer sensing surface
JP6995605B2 (ja) * 2017-12-18 2022-01-14 キヤノン株式会社 電子機器、電子機器の制御方法、プログラム及び記憶媒体

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9292111B2 (en) 1998-01-26 2016-03-22 Apple Inc. Gesturing with a multipoint sensing device
US7663607B2 (en) 2004-05-06 2010-02-16 Apple Inc. Multipoint touchscreen
US7469381B2 (en) 2007-01-07 2008-12-23 Apple Inc. List scrolling and document translation, scaling, and rotation on a touch-screen display
JP2001134382A (ja) 1999-11-04 2001-05-18 Sony Corp 図形処理装置
WO2006020305A2 (en) 2004-07-30 2006-02-23 Apple Computer, Inc. Gestures for touch sensitive input devices
US20070046643A1 (en) * 2004-08-06 2007-03-01 Hillis W Daniel State-Based Approach to Gesture Identification
KR101690164B1 (ko) 2005-03-04 2016-12-27 애플 인크. 다기능 휴대용 장치
US8004498B1 (en) 2007-10-22 2011-08-23 Adobe Systems Incorporated Systems and methods for multipoint temporary anchoring
US20090172606A1 (en) 2007-12-31 2009-07-02 Motorola, Inc. Method and apparatus for two-handed computer user interface with gesture recognition
US8446373B2 (en) 2008-02-08 2013-05-21 Synaptics Incorporated Method and apparatus for extended adjustment based on relative positioning of multiple objects contemporaneously in a sensing region
WO2009121227A1 (en) * 2008-04-03 2009-10-08 Dong Li Method and apparatus for operating multi-object touch handheld device with touch sensitive display
KR101586627B1 (ko) * 2008-10-06 2016-01-19 삼성전자주식회사 멀티 터치를 이용한 리스트 관리 방법 및 장치
US20110193812A1 (en) * 2008-10-30 2011-08-11 Kaoru Uchida Portable terminal device, data manipulation processing method and data manipulation processing program
US8462134B2 (en) 2009-06-29 2013-06-11 Autodesk, Inc. Multi-finger mouse emulation
US9152317B2 (en) 2009-08-14 2015-10-06 Microsoft Technology Licensing, Llc Manipulation of graphical elements via gestures
US8773366B2 (en) * 2009-11-16 2014-07-08 3M Innovative Properties Company Touch sensitive device using threshold voltage signal
US20110216095A1 (en) * 2010-03-04 2011-09-08 Tobias Rydenhag Methods, Devices, and Computer Program Products Providing Multi-Touch Drag and Drop Operations for Touch-Sensitive User Interfaces
US20110227947A1 (en) 2010-03-16 2011-09-22 Microsoft Corporation Multi-Touch User Interface Interaction
TWI400645B (zh) * 2010-04-01 2013-07-01 Mstar Semiconductor Inc 觸碰判斷方法及相關之觸控手勢判斷方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105573583A (zh) * 2014-10-08 2016-05-11 大众汽车有限公司 用户界面和用于在用户界面上适配菜单栏的方法
JP2018505497A (ja) * 2015-02-16 2018-02-22 ホアウェイ・テクノロジーズ・カンパニー・リミテッド マルチタッチジェスチャのためのシステムおよび方法

Also Published As

Publication number Publication date
DE102011056940A1 (de) 2013-06-27
WO2013092288A1 (de) 2013-06-27
EP2795451B1 (de) 2015-06-03
US20150169122A1 (en) 2015-06-18
KR20140116080A (ko) 2014-10-01
BR112014015490A8 (pt) 2017-07-04
BR112014015490A2 (pt) 2017-06-13
EP2795451A1 (de) 2014-10-29
CN104040476B (zh) 2017-05-31

Similar Documents

Publication Publication Date Title
CN104040476A (zh) 用于运行能多点触控的显示器的方法和具有能多点触控的显示器的设备
US11048333B2 (en) System and method for close-range movement tracking
KR101979317B1 (ko) 근접 범위 움직임 추적 시스템 및 방법
Seo et al. Direct hand touchable interactions in augmented reality environments for natural and intuitive user experiences
US20120105367A1 (en) Methods of using tactile force sensing for intuitive user interface
KR101194883B1 (ko) 비접촉식 스크린 제어 시스템 및 그 시스템에서의 비접촉식 스크린 제어 방법
KR20150014083A (ko) 전자 장치 및 전자 장치의 입력 인식 방법
US20130283214A1 (en) Apparatus and method for providing user interface for recognizing gesture
JP5640486B2 (ja) 情報表示装置
CN103324420B (zh) 一种多点触控板输入操作识别方法及电子设备
TR201810307T4 (tr) Dokunmaya duyarlı kaydırma yöntemi ve sistemi.
KR101981158B1 (ko) 사용자 인터페이스를 위한 인터랙션 방법
US20140282279A1 (en) Input interaction on a touch sensor combining touch and hover actions
CN105934739A (zh) 用于触摸屏设备的虚拟鼠标
WO2015069259A1 (en) Controlling primary and secondary displays from a single touchscreen
JP2017033528A (ja) 情報表示装置、情報表示方法、及びプログラム
KR102016650B1 (ko) 장치를 조작하기 위한 방법 및 조작 장치
KR20160097410A (ko) 동작 인식을 통한 비접촉식 입력 인터페이스 제공 방법 및 그 장치
JP2016110518A (ja) 情報処理装置、その制御方法、プログラム、及び記憶媒体
US20140298275A1 (en) Method for recognizing input gestures
JP2012022458A (ja) 情報処理装置およびその制御方法
JPWO2012111227A1 (ja) タッチ式入力装置、電子機器および入力方法
KR20160037901A (ko) 객체들을 디스플레이하기 위한 방법 및 디바이스
JP5993072B1 (ja) 電子機器のユーザ・インターフェース、入力の処理方法および電子機器
CN105468273A (zh) 一种用于在设备的触摸屏进行控制操作的方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20170531

Termination date: 20181211