CN103543943A - 基于触摸和手势输入的控制方法及其终端 - Google Patents

基于触摸和手势输入的控制方法及其终端 Download PDF

Info

Publication number
CN103543943A
CN103543943A CN201310297975.0A CN201310297975A CN103543943A CN 103543943 A CN103543943 A CN 103543943A CN 201310297975 A CN201310297975 A CN 201310297975A CN 103543943 A CN103543943 A CN 103543943A
Authority
CN
China
Prior art keywords
input
touch
terminal
gesture
screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201310297975.0A
Other languages
English (en)
Other versions
CN103543943B (zh
Inventor
金镇龙
全轸泳
姜志营
金大成
李宝嬴
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN103543943A publication Critical patent/CN103543943A/zh
Application granted granted Critical
Publication of CN103543943B publication Critical patent/CN103543943B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486—Drag-and-drop
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0483—Interaction with page-structured environments, e.g. book metaphor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units

Abstract

提供一种基于触摸和手势输入的控制方法及其终端，以用于促进响应于在触摸输入之后的手势输入的对象间的切换操作。该方法包括：检测触摸输入；选择对应于触摸输入的至少一个对象；检测手势输入；以及在所述对象被保持在触摸输入的位置处的状态下，执行对应于手势输入的切换。本发明允许在所保持的对象仍然显示在触摸屏上的同时，对文档或图标等的列表进行翻页。

Description

基于触摸和手势输入的控制方法及其终端
技术领域
本发明涉及基于一种触摸和手势输入的控制方法以及配置用于执行该控制方法的便携式终端。更具体地说，本发明涉及基于触摸和手势输入的控制方法，其用于利用触摸输入后的手势输入来执行切换操作。
背景技术
随着通信技术和交互式显示技术的发展，智能电子装置（诸如，智能电话以及诸如平板电脑的便携式终端等）采用各种输入手段（诸如，触摸屏）来控制智能电话，以便使用户更方便地控制该装置。因此，正在进行研究以在传感器的帮助下识别触摸、运动和手势输入，这些传感器可以减少在相对较小的显示器屏幕上键入命令的需要，并且可以快速地通过手势输入来使得一般请求的命令被执行。
技术进步已经使得便携式终端可以被配置用来识别各种类型的输入，用户对简化终端操作的需求也在增长。
但是，不论检测各种类型的输入的能力如何，对于当前传统的终端，利用它们的输入检测能力来控制终端的能力有限，最终导致不能满足用户的需求。
发明内容
本发明的一部分是为了解决本领域中的某些缺点而作出的，并且，本发明的一个目的在于提供一种基于触摸和手势输入的控制方法以及响应于一系列触摸和手势输入来执行操作的终端。
本发明的另一个目的在于提供基于触摸和手势输入的控制方法以及响应于正在进行的触摸输入之后的手势输入在对象间切换的终端。
根据本发明的示例性方面，用于控制终端的方法优选地包括：检测触摸输入；选择对应于该触摸输入的至少一个对象；检测手势输入；以及，在对象被保持在触摸输入的位置处的状态下，执行对应于该手势输入的切换。
优选地，被保持在触摸输入的位置处的对象包括下面的至少一个：图标、文字、图像、文件、文件夹、网络浏览器的内容、网址和网络链接。
优选地，选择对应于触摸输入的至少一个对象包括以激活、放大、缩小、有阴影状态下的一个来呈现该对象。
优选地，检测手势输入包括在维持有触摸输入的状态下感测手势输入。
优选地，对应于手势输入的切换包括下面的其中之一：页面切换、文件夹切换、标签切换、应用切换和任务切换。
优选地，执行包括：保持对应于触摸输入的所选对象；以及，在所选对象被保持在屏幕上的状态下在具有至少一个对象的多个页面中切换。
优选地，执行还可以包括：保持对应于触摸输入的所选对象；以及，沿着文件路径在更上层和更下层的文件夹之中切换或者在文件夹列表中的文件夹之间切换。
优选地，执行还可以包括：保持对应于触摸输入的所选对象；以及，在由网络浏览器提供的多个标签之中切换。
优选地，执行还可以包括：保持对应于触摸输入的所选对象；以及，在预定列表或当前正在运行的应用或任务的列表中列出的应用或任务中切换。
优选地，在应用或任务中切换包括：以将所述应用或任务最优地布置的格式来显示所选的对象。
优选地，根据本发明的方法还包括：检测触摸输入的释放；以及，对所选对象执行对应于触摸输入的释放的操作。
优选地，根据本发明，对应于触摸输入的释放的操作是下面的其中之一：将对象布置在触摸输入所指向的位置、执行在网络浏览器的标签中的所选对象的链接以及将该对象粘贴到应用或任务的执行屏幕上。
根据本发明的另一个方面，终端包括：输入单元，检测触摸和手势输入；控制单元，其被配置用来检测与触摸屏显示器上的触摸输入对应的对至少一个对象的选择，并且，在对象被保持在触摸输入的位置处的状态下，对应于手势输入执行在显示器上示出的图像的切换；以及显示单元，在控制单元的控制下显示画面。
优选地，切换是下面的其中之一：页面切换、文件夹切换、标签切换、应用切换和任务切换。
优选地，控制单元被配置为“保持”对应于触摸输入的所选对象，以及，在所选对象被保持在屏幕上的状态下在具有至少一个对象的多个页面中切换。
优选地，控制单元被配置为“保持”对应于触摸输入的所选对象，以及，沿着文件路径在更上层和更下层的文件夹之中切换或者在文件夹列表中的文件夹之间切换。
优选地，控制单元被配置为“保持”对应于触摸输入的所选对象，以及，在由网络浏览器提供的多个标签之中切换。
优选地，控制单元被配置为“保持”对应于触摸输入的所选对象，以及，在预定列表或当前正在运行的应用或任务的列表中列出的应用或任务中切换。
优选地，控制单元被配置为控制显示单元，以通过将针对所述应用或任务最优地布置的格式来显示所选的对象。
优选地，输入单元检测触摸输入的释放，并且，控制单元执行下面的其中之一：将对象布置在触摸输入所指向的位置、执行在网络浏览器的标签中的所选对象的链接以及将该对象粘贴到应用或任务的执行屏幕上。
另外，用于控制终端的方法优选地包括：通过触摸屏显示器（140）上的传感器（111-116）来检测触摸输入；通过终端的控制单元（120）来检测对对应于在触摸屏显示器上的触摸输入的多个对象中的至少一个对象的选择；检测在某个状态下的手势输入，在该状态下，触摸输入被保留到与手势的检测至少有部分的时间重叠；以及在至少一个对象（141）在检测触摸屏显示器（140）上的手势输入期间被保持在触摸输入的位置处的状态下，执行除了在触摸屏显示器（140）上的相同位置处保持的至少一个对象（141）以外的多个对象中的一个或多个的显示的切换，并且该切换对应于与手势输入相关联的方向。
附图说明
图1是示出根据本发明示例性实施例的终端的配置的框图；
图2是配备有照相机传感器和红外传感器的终端的前视图；
图3是示出用于控制根据本发明示例性实施例的终端的方法的流程图；
图4是示出用于在本发明示例性实施例中使用的示例性触摸输入动作的示图；
图5是示出用于在本发明示例性实施例中使用的触摸和手势输入的组合的示图；
图6是示出根据本发明示例性实施例的基于触摸和手势输入的组合的示例性页面切换操作的示图；
图7是示出根据本发明示例性实施例的基于触摸和手势输入的组合的示例性文件夹切换操作的示图；
图8是示出根据本发明示例性实施例的基于触摸和手势输入的组合的示例性标签切换操作的示图；以及
图9是示出根据本发明示例性实施例的基于触摸和手势输入的组合的示例性应用或任务切换操作的示图。
具体实施方式
本发明适合于许多用途，其中之一包括控制能够进行触摸和手势输入的终端。
本发明可以应用于所有类型的能够进行触摸和手势输入的终端，包括：智能电话、便携式终端、移动终端、个人数字助理（PDA）、便携式多媒体播放器（PMP）、膝上型电脑、Note Pad、Wibro终端、平板PC、智能TV、智能冰箱及其等同物，以上仅列出一些非限制性例子。
本文中所使用的术语的目的仅仅在于将特定示例性实施例向本领域普通技术人员进行示例，其并不对所要求的发明有任何限制。除非另有定义，本文中所使用的所有术语都具有与本发明所属的技术领域中的一名普通技术人员的一般理解相同的含义，并且，不应当被解释为具有过于全面的含义，并且也不应当被解释为具有过于狭窄的含义。来自通用主题字典的字典定义也不应当与普通技术人员对本领域已知的任何术语的理解产生抵触。
如本文中所使用的，如果上下文没有另外进行清楚地指示，也希望单数形式包括复数形式。还应当理解，当在本文中使用时，术语“包括”、“包括有”、“包含”和/或“包含有”指定描述的特征、整体、步骤、操作、元件和/或成分的出现，但是也不排除一个或多个其它特征、步骤、操作、元件、成分和/或它们的组的出现或添加。
此外，本文中所使用的术语“触摸”包括用户身体的部位（例如，手、手指）和/或诸如手写笔的实体物体在不作出物理接触的情况下进入触摸屏的预定距离内。
另外，术语“保持住”和“保持”应当被宽泛地解释，并且，在手势被执行以引起页面、应用、标签等的切换的同时，不要求用户的身体部位（诸如一根手指或手指）或笔保持与屏幕上的对象接触或几乎接触。例如，对一个对象的单击或双击可以将该对象指定为被“保持住”，然后，在该对象仍然在指定位置被“保持住”的同时，手势运动或多个运动可以改变页面或应用。在所选对象未被手指或笔保持的情况中，那么“释放”可以包括指示该对象被释放的运动或后续的触摸。
现在将参照附图详细地描述本发明的示例性实施例。
图1是示出根据本发明示例性实施例的终端的配置的框图。
如图1所示，终端100优选地包括：输入单元110、控制单元120、存储单元130和显示单元140。
输入单元110可以响应于用户输入生成操纵。输入单元110可以优选地包括触摸传感器111、接近传感器、电磁传感器113、照相机传感器114和红外传感器中的一个或多个。
触摸传感器111检测由用户作出的触摸输入。触摸传感器111可以使用触摸膜、触摸片和触摸板的其中之一来实现。触摸传感器111可以检测触摸输入，并生成被输出到控制单元120的对应的触摸信号。控制单元120可以分析触摸信号，以执行与其对应的功能。触摸传感器111可以被实现为检测由用户通过使用各种输入手段来作出的触摸输入。例如，触摸输入可以包括检测用户身体的部位（例如，手）和/或诸如手写笔的实体物体以及等同的操纵按钮。根据该实现，触摸传感器111可以优选地检测在预定范围内物体的接近以及直接触摸。
继续参考图1，接近传感器113被配置为在没有物理接触的情况下使用电磁场的强度来检测物体的出现/消失、接近、移动、移动方向、运动速度和形状。接近传感器113优选地使用下面的至少一个来实现：透射型光电传感器、直接反射型光电传感器、镜面反射型光电传感器、高频振荡型接近传感器、电容式接近传感器、磁型接近传感器以及红外接近传感器。
电磁传感器114基于电磁场的强度的变化来检测物体的触摸或接近，并且可以以电磁共振（EMR）或电磁干扰（EMI）的输入板的形式来实现。电磁传感器114优选地使用线圈感应磁场来实现，并且检测具有共振电路的物体的接近，该共振电路使得由电磁传感器114产生的磁场的能量发生变化。电磁传感器114可以检测通过例如作为具有共振电路的物体的手写笔的手段进行的输入。电磁传感器114还可以检测靠近终端100的周围作出的接近输入或悬浮（hover）。
照相机传感器115通过CCD（电荷耦合器件）传感器或CMOS（互补金属氧化物半导体）的手段将通过透镜输入的图像（光）转换为数字信号。照相机传感器115能够将该数字信号临时地或永久地存储在存储单元130中。照相机传感器115能够定位和跟踪在识别的图像中的特定的点，以检测手势输入。
现在参考图2，照相机传感器115可以包括面向其前表面和/或后表面的组合透镜，以捕获并转换通过透镜的图像。
也被称为IR传感器或LED传感器的红外传感器116可以包括：用于将红外光发射到物体的光源，以及用于接收由接近终端100的物体（例如，手）反射的光的光接收器。红外传感器116可以检测由光接收器接收到的光的变化量，从而检测该物体的移动以及与该物体的距离。再次参考图2，红外传感器116被布置在终端100的前侧和/或后侧，从而接收从终端100的外部发射和/或由用户身体的部位（例如，手）反射的红外光。
根据本发明的示例性实施例，输入单元110可以通过传感器来检测触摸和手势输入。输入单元110可以检测同时或连续作出的触摸和手势输入以及在正在进行的触摸输入之后的手势输入。
包含诸如处理器或微处理器的硬件的控制单元120被配置用于使用这些部件来控制终端的整体操作中的某些或全部。例如，控制单元120根据通过输入单元110作出的输入来优选地控制终端100的操作和功能。
根据本发明的示例性实施例，控制单元120被配置为基于一个或多个传感器检测到的触摸和手势输入来控制切换。例如，切换可以包括下面的任意一个：页面切换、文件夹切换、标签切换、应用切换和任务切换。
现在，将参考附图在下文中更详细地描述控制单元120的详细操作。
存储单元130优选地被用于存储用于终端100的程序和命令。控制单元120被配置为执行可以被存储在存储单元130中的程序和命令。
存储单元130可以包括下面的至少一种：闪存、硬盘、微多媒体卡、卡片型存储器（例如，SD或XD存储器）、随机存取存储器（RAM）、静态RAM（SRAM）、只读存储器（ROM）、电可擦除可编程ROM（EEPROM）、可编程ROM（PROM）、磁存储器、磁盘和光盘。
根据本发明的示例性实施例，存储单元130可以被用来存储下面的至少一种：图标、文字、图像、文件、文件夹以及包括对象、应用和服务功能的各种形式的内容。
根据本发明的示例性实施例，存储单元可以存储与对应于通过输入单元110作出的输入的操作有关的信息。例如，存储单元130可以被用于存储与对应于触摸和手势输入的切换操作有关的信息。
继续参考图1，显示单元140显示（输出）在终端100中处理的特定信息。例如，显示单元150可以显示与声音检测、状态识别和功能控制相关的用户界面（UI）或图形化用户界面（GUI）。
显示单元可以使用下面的至少一种来自实现：液晶显示器（LCD）、薄膜晶体管LCD（TFT LCD）、有机发光二极管（OLED）、柔性显示器和3维（3D）显示器。
显示单元140使用作为输入单元110的一部分的触摸传感器来形成触摸屏。能够实现触摸屏的显示单元140可以既作为输入装置又作为输出装置来操作。
根据本发明的示例性实施例，显示单元140可以优选地显示任意的图标、文字、图像、文件列表和文件夹列表。显示单元140可以显示网络浏览器和内容、网址和网络链接中的至少一个。
根据本发明的示例性实施例，根据在控制单元120的控制下的切换操作，显示单元140可以动态地显示至少一个对象。例如，根据页面切换操作，显示单元140可以在屏幕上显示在某个方向上移动的至少一个对象。
尽管本描述涉及在图1中描绘的终端，但是该终端还可以包括示出部件以外的其它部件，并且/或者，构成该终端的某些部件可以被去除。
图3是示出用于控制根据本发明示例性实施例的终端的方法的流程图。
现在参考图3，将在下面讨论用于控制根据当前要求的发明的终端的示例性方法。
在步骤210，终端100确定是否检测到触摸输入。
终端100可以检测连续或同时作出的多于一个的触摸输入。根据该实现，终端100可以被配置为检测不同类型的触摸，诸如，基于接近的输入或基于压力的输入，以及基于触摸的输入。由于检测可以被接近传感器检测到的手指或可检测笔的相对近的接触可以被认为构成触摸，因此术语触摸的定义被放宽。
如果在步骤210检测到触摸，那么，在步骤220，终端100选择一个对象。
终端100可以被配置为确定该触摸在显示器上的什么位置被作出。例如，终端100可以确定在屏幕上作出触摸的位置的2维或3维坐标。此外，终端100可以被配置为检查触摸的压力、持续时间和移动（例如，拖拽、多个触摸点之间的距离的变化以及触摸的移动模式）。
另外，终端100可以选择对应于触摸输入的至少一个对象。终端100可以被配置为检测位于作出触摸输入的位置处的至少一个对象（141）。该对象可以是下面的任意一个：图标、文字、图像、文件、文件夹、网络内容、网址和网络链接。终端100可以以激活、放大、紧凑或有阴影的形式来显示所选对象。终端100可以根据触摸输入已经被保持的持续时间来将所选对象显示为激活的、放大的、缩小的或有阴影的。
现在参考图4的示例性情况，UE100被操作以根据在空闲模式屏幕上检测到的触摸输入来选择图标。终端100可以以有阴影的方式来显示所选图标（141）。
在进行触摸然后移动的情况中，终端100根据该移动来显示所选对象（141）的移动。例如，如果检测被检测到并且其在某个方向上移动，那么终端100可以在相同的方向上显示所选对象的移动。终端100可以表现/显示所选对象的运动状态。例如，终端100可以使用表现该对象处于可移动状态的另外的指示器或视觉效果（诸如，振动、放大、缩小或添加阴影）来显示所选对象。
接下来，返回去参考图3的流程图，在步骤230，终端100确定是否检测到手势输入。
终端100可以检测在某个方向上的扫过手势、某种形状的画图手势以及形成某个形状的成形手势。终端100可以检测手势输入方向、速度、形状以及与终端100的距离。根据一个特定实施例，终端100可以检测接近输入或压力输入，而不是手势输入。
终端100在触摸输入被保持的状态下检测手势输入。参考图5的示例性情况，终端100检测触摸输入和在该触摸输入被保持的状态下作出的后续手势输入。
如果在步骤230手势输入被检测到，则在步骤240终端100执行切换操作。
更具体地说，终端100执行对应于检测到的手势输入的切换操作。终端100搜索与该手势输入匹配的切换操作，并且，如果该切换被检索到，那么执行对应的切换操作。
切换操作可以包括下面的任意一种：页面切换操作、文件夹切换操作、标签切换操作、应用切换操作以及任务切换操作，以上仅列出一些非限制性的可能。
页面切换操作可以被执行，从而使得当前页面被切换到所选对象（141）所期望的另一个页面。页面切换操作可以在显示器的整个屏幕上被执行，在该屏幕上，每一个都具有至少一个对象的多个页面响应于用户的请求一个接一个地转动。例如，页面切换操作可以在空闲模式屏幕、文件或文件夹列表屏幕、可选菜单列表屏幕、文档屏幕、电子书屏幕、电话簿屏幕等上被执行，以上仅列出一些非限制性的可能。
终端100可以这样执行页面切换，使得在当前页面具有多个对象时，除了所选对象之外，显示器在所选对象被触摸输入固定的状态下切换到另一个页面。换句话说，在触摸输入所选择的对象仍然在显示器上的固定位置处的同时，终端100在屏幕上将具有未选择对象（其可以包括背景图像）的当前页面在屏幕上的水平或垂直方向上转变到下一个页面。此时，页面转变方向和页面转变的数量可以根据手势的方向（例如，水平或垂直）或手势的形状（例如，表示某个数字的手的形状）来确定。根据页面切换操作，除了被保持的对象以外，先前显示的页面的其它对象消失，并且，新的页面的对象显示在屏幕上。在不存在对应于手势输入的其它页面的情况下，终端100可以跳过对页面的转变，或者显示通知不存在其它页面的消息、图标或图像。
参考图6的示例性情况，响应于触摸输入，终端100选择在空闲模式屏幕上的图标。此时，终端100以有阴影的形式显示所选图标。终端100可以检测后续的手势输入。手势输入可以包括任何可检测运动，但是，在本例子中，其包括从右向左的方向上的扫过。终端100可以在固定响应于触摸输入而选择的图标的同时执行页面切换操作。换句话说，终端100在对应于手势的方向上转变页面。随着终端100将除了所选对象以外的其它对象向左移动，使得另一个页面从右侧出现。
如图6所示，在手势输入的检测期间，至少一个对象141正被保持在触摸输入的位置处。一名技术人员应当理解并认识到，术语“在……期间”可以构成对对象的触摸与手势输入的检测之间的时间重叠（即，重叠的时间段），并且，在某些实施例中，并不是绝对要求在作出被识别手势以例如扫过页面的同时保持该对象。
文件夹切换操作包括基于所选对象的文件路径来在文件夹之间进行导航。文件夹切换操作可以在文件或文件夹中执行。例如，文件夹切换可以在文件夹之间执行，这些文件夹包括：文档、图像、图片、电子书、音乐文件、应用执行文件或快捷方式图标、程序执行文件或快捷方式图标、服务执行文件或快捷方式图标。
例如，可以保持或指定照片，然后使用识别的手势在应用中进行切换，从而使得该照片可以被插入到电子邮件、文字、Facebook、实际上允许发送图像的任何类型的通信应用中。
终端确定对应于触摸输入保持的所选对象的文件路径。终端100可以沿着文件路径将文件夹移动到更上层级别或更下层级别的文件夹，或者移动到文件夹列表中的前一个或下一个文件夹。此时，根据手势的方向（水平或垂直）或者手势的形状（例如，指示某个数字的手的形状）来决定关于是否移动到更上层或更下层文件夹级别的文件夹或者是否移动到相同级别的前一个或下一个文件夹。根据文件夹切换，旧的文件夹的对象消失，新的文件夹的对象出现在屏幕上。在不存在对应于手势输入的其它文件夹的情况下，终端100可以跳过文件夹切换操作，或者显示通知不存在其它文件夹的消息、图标或图像。
现在参考图7的示例性情况，对应于触摸输入，终端100选择对应于触摸输入的在相册1文件夹中的照片。此时，终端100以有阴影的形式显示所选照片。终端100可以检测后续的手势输入。终端100还可以检测在触摸输入被保持时的后续的手势输入。手势输入可以是例如在从右向左的方向上作出的扫过手势输入。在将所选照片保持在对应于触摸输入的位置处的同时，终端100可以执行文件夹切换操作。换句话说，终端100可以将文件夹移动到对应于手势输入的方向。终端100控制操作，从而使得除了所选对象以外的包括在相册1文件夹中的其它对象从屏幕上消失，然后，包括在下一个文件夹（即，相册2文件夹）中的相片的列表出现在屏幕上。
标签切换操作包括在表示各个应用或程序的标签之间导航。标签切换操作可以在网络浏览器、菜单窗口、电子书和/或文档查看器应用或程序的标签中执行。
终端100可以保持对应于触摸输入的对象并执行标签切换操作。换句话说，终端100可以在相对于另一个标签的水平或垂直方向上移动当前标签或者包括在当前标签中的至少一个对象，或者移动当前标签或者包括在当前标签中的至少一个对象以被放置在另一个标签中。此时，标签切换方向和切换操作的数量可以根据手势的方向（水平或垂直）或形状来确定。根据标签切换操作，标签的对象消失，另一个标签的其它对象出现在屏幕上。在不存在对应于手势输入的其它标签的情况下，终端100可以跳过标签切换操作，或者显示通知不存在目标标签的消息、图标或图像。
参考图8的示例性情况，终端100可以选择对应于触摸输入的在网络浏览器屏幕的当前标签中出现的至少一个对象。该对象可以包括网页地址或者包括连接到某个网页的链接的文字、图像、图标或flash。此时，终端100呈现颜色、字体、粗体、大小和阴影效果改变了的所选对象。终端可以检测正在进行的触摸输入之后的手势输入。手势输入可以包括在从左向右的方向上作出的扫过手势输入。在所选对象被保持在根据触摸输入的显示器的位置处的同时，终端执行标签切换操作。换句话说，终端在对应于手势输入方向的方向上移动标签。终端100进行控制，从而使得除所选对象以外的旧标签的对象消失，并且，属于另一个标签的对象与所选对象一同出现在网络浏览器屏幕上。
应用或任务切换操作包括用于移动所选对象的应用或任务的执行屏幕之间的切换。应用或任务切换可以在由用户或终端制造商预定的不同的应用或任务中或者在当前运行的应用或任务中执行。终端100接收并存储由用户或终端制造商提供的可以切换的应用或任务的列表。终端100识别当前运行的应用或任务，并基于各个应用或任务的偏好、使用频率和操作时间来执行切换操作。应用或任务可以是下面的任意一种：消息、SMS、电子邮件、备忘录和呼叫应用或任务，以上仅列出一些非限制性的可能。
根据本发明的本方面，在保持触摸输入所选择的对象的同时，终端100对在屏幕上的除了所选对象以外的对象执行应用或任务切换操作。换句话说，终端100在水平或垂直方向上移动这些对象（可以包括背景图像），以在将所选对象保持在对应于触摸输入的位置处的同时，在屏幕上显示另一个应用或任务窗口。此时，切换方向和切换次数的数量可以根据手势输入的方向（水平或垂直）或形状（例如，象征某个数字的手的形状）来确定。根据应用或任务操作，应用或任务以及属于其的对象消失，并且，另一个应用或任务以及属于其的对象出现在屏幕上。在手势输入没有针对的其它应用或任务的情况下，终端100显示消息、图标或图像，以通知没有用于显示的目标应用或任务。
现在参考图9的示例性情况，终端100选择通过触摸输入指定的图像。此时，终端进行处理使得该图像以放大、缩小、添加阴影或振动的形式呈现。终端100检测手势输入。终端100能够在正在进行的触摸输入后进行手势输入。手势输入可以包括在从右向左的方向上作出的扫过手势输入。在将所选图像保持在触摸输入的位置处的同时，终端100执行应用或任务切换操作。终端100在手势输入的方向上执行切换操作。终端100进行控制，从而使得除了所选图像以外的对象向左移动直至消失，然后，属于前一个或后一个任务的对象出现在屏幕上。
终端100以针对目标应用或任务优化的格式来与应用或任务切换相关联地显示所选对象。终端100以优化用于添加、插入、粘贴或附属到目标应用或任务的格式来呈现所选对象的预览图像。终端100将该对象显示为放大、缩小、旋转或者外延或分辨率改变，或者与指示添加、插入、粘贴或附属的文字、图像或图标一同显示。
现在参考图9的示例性情况，如果切换到文字消息应用的应用切换被执行，则终端100在消息输入窗口中以附属格式显示所选图像。此时，终端100显示用于提醒图像被附属到文字消息的图标。如果执行对电子邮件应用的应用切换操作，则终端100在邮件撰写窗口内以附属格式来显示所选图像。终端100以附属于邮件的格式将该图像与诸如html或xml的图像附件的代码进行显示。此时，终端100显示文件名、图标、文件附件菜单中的至少一个，以用于通知该电子邮件的图像文件附件。
接下来，终端100在步骤250确定触摸输入是否被释放。
在切换操作执行后或者如果检测到手势输入，终端100确定触摸操作是否终止。当触摸输入检测到用户从终端100的触摸屏释放了输入装置的接触时，确定触摸输入被终止。
如果触摸输入未终止，则终端重复对应于手势输入检测的切换操作。如果用户释放了来自终端100的输入装置的接触，则终端100的切换操作终止。
如果触摸输入未终止，则终端100根据手势输入的检测来重复切换操作。
否则，如果触摸输入终止，则终端100终止在步骤260的过程。
终止操作可以包括下面的任意一项：在由触摸输入指定的位置处对齐所选对象、在网络浏览器的标签上执行所选对象的链接以及将该对象粘贴到应用或任务执行屏幕上。
在图6的示例性实施例中，如果触摸输入终止，则终端100在触摸已经被释放的位置处布置所选图标。为了将图标放置在由触摸输入指定的位置处，终端可以对准在页面上的图标的移动或重新布置。终端100还可以存储关于重新布置的页面的信息。在图标或其它项目是通过单击或非接触式点击来指定，例如，在诸如扫过动作从应用、屏幕等移动过去的同时，由触摸屏识别为将特定的图标或其它项目指定为保持静止的情况中，由于在本例中的这样的图标或项目未被保持，因此，诸如双击或另一次单击的识别行为或动作可以发出该图标或其它项目不再被指定的信号。
在图7的示例性实施例中，如果触摸输入终止，则终端100通过在触摸已经被释放的位置处放置所选图像来布置页面。终端100在被导航以插入该图像的文件夹中重新布置图像的列表。终端100在对应的文件夹或地址中移动或存储所选图像，并更新关于文件夹或图像的信息。
在图8的示例性实施例中，如果触摸输入终止，那么终端100将所选对象添加、粘贴或附属到触摸输入已经终止处的应用或任务的执行屏幕上。终端100使所选图像附属到文字消息，并将所选图像插入到消息撰写窗口。终端100还执行文字撰写模式并将所选图像附属到文字撰写窗口，以将所选图像提交到SNS站点上。
终端100的配置并不限于上面描述的示例性实施例，而是可以被修改，以在不脱离本发明的范围的情况下，响应于检测到的触摸输入的终止来执行各种操作。
因此，结合在改进的输入界面上作出的直观的触摸和手势输入，根据本发明的基于触摸和手势输入的控制方法和终端促进了对终端的操作的控制。
根据本发明的上述方法可以以硬件、固件来实现，或者被实现为软件或载入诸如处理器或微处理器的硬件并执行的计算机代码、被存储在诸如CDROM、RAM、软盘、硬盘或磁光盘的记录介质上的机器可执行代码、或者最初存储在远程记录介质或非暂态机器可读介质上并通过网络下载存储在本地记录非暂态介质上的计算机代码，从而使得本文中描述的方法可以使用通用计算机或专用处理器或诸如ASIC或FPGA的可编程或专用硬件在存储在记录介质上的这样的软件中被实施。正如本领域中所理解的，计算机、处理器、微处理器控制器或可编程硬件包括可以存储或接收软件或计算机代码的存储器部件，例如，RAM、ROM、闪存、缩略图等，当由计算机、处理器或硬件访问和执行时，该软件或计算机代码实现本文中描述的处理方法。另外，应当认识到，当通用计算机访问用于实现本文中示出的处理时，代码的执行将通用计算机转换为用于执行本文中示出的处理的专用计算机。
尽管已经在上文中使用特定术语详细描述了本发明的示例性实施例，但是其仅仅是出于描述特定的示例性实施例的目的，并不希望对本发明有所限制。虽然已经图示并描述了本发明的特定的示例性实施例，但是，对本领域技术人员显而易见的是，在不脱离本发明的精神和范围的情况下，可以作出各种其它的改变和修改。

Claims (15)

1.一种用于控制终端的方法，包括：
检测在触摸屏显示器上的触摸输入；
检测与触摸屏显示器上的触摸输入对应的对多个对象中的至少一个对象的选择；
在所述至少一个对象的触摸输入在触摸屏上被保持与手势输入的检测有至少部分时间段重叠的情况下，由传感器检测所述手势输入；以及
在所述至少一个对象被保持在触摸输入的位置处的状态下，执行除了被保持在触摸屏显示器上的所述至少一个对象以外的多个对象中的一个或多个对象的显示的切换，并且，所述切换对应于所述手势输入。
2.如权利要求1所述的方法，其中，保持在触摸屏显示器上的所述至少一个对象包括下面的至少一个：图标、文字、图像、文件、文件夹、网络浏览器的内容、网址和网络链接。
3.如权利要求1所述的方法，其中，在所述至少一个对象被保持的同时被显示所述一个或多个对象的切换包括下面的至少一种：页面切换、文件夹切换、标签切换、应用切换和任务切换。
4.如权利要求1所述的方法，其中，执行切换的步骤包括：
检测对应于触摸输入的所述至少一个对象；以及
在所述至少一个对象被保持在触摸屏显示器上的状态下在多个页面的显示中进行切换。
5.如权利要求1所述的方法，还包括：
通过传感器来检测被保持在触摸屏显示器上的选择的所述至少一个对象的触摸输入的释放；以及
通过控制单元来执行与选择的所述至少一个对象的触摸输入的释放对应的操作。
6.如权利要求5所述的方法，其中，与触摸输入的释放对应的操作包括下面的至少一项：将选择的所述至少一个对象布置在与触摸输入的释放对应的位置处、执行网络浏览器的标签中的选择的所述至少一个对象的链接以及将选择的所述至少一个对象粘贴到应用或任务的执行屏幕上。
7.如权利要求5所述的方法，其中，选择的所述至少一个对象包括被粘贴到或附属到文字消息或电子邮件消息的至少一个图像。
8.如权利要求5所述的方法，其中，选择的所述至少一个对象包括被粘贴到或附属到社交网络应用的至少一个图像。
9.如权利要求1所述的方法，其中，所述手势包括手的形状。
10.一种终端，包括：
输入单元，检测触摸和手势输入；
控制单元，检测对应于触摸输入的多个对象中的至少一个的选择，并且，在选择的所述至少一个对象被保持在所述输入单元的触摸输入的位置处的状态下，执行除了选择的所述至少一个对象以外的多个对象中的一个或多个对象的显示的切换，并且，切换对应于手势输入；以及
显示单元，在控制单元的控制下显示屏幕。
11.如权利要求10所述的终端，其中，执行的切换是下面的其中之一：页面切换、文件夹切换、标签切换、应用切换和任务切换。
12.如权利要求10所述的终端，其中，输入单元检测触摸输入的释放，并且，控制单元执行下面的至少一项：将选择的所述至少一个对象布置在触摸输入的释放所对应的位置处、执行在网络浏览器的标签中的选择的所述至少一个对象的链接以及将选择的所述至少一个对象粘贴到应用或任务的执行屏幕上。
13.如权利要求12所述的终端，其中，所述选择的所述至少一个对象包括被粘贴到或附属到文字消息或电子邮件消息的至少一个图像。
14.如权利要求12所述的终端，其中，选择的所述至少一个对象包括被粘贴到或附属到社交网络应用的至少一个图像。
15.如权利要求10所述的终端，其中，所述手势输入包括手的形状。
CN201310297975.0A 2012-07-16 2013-07-16 基于触摸和手势输入的控制方法及其终端 Active CN103543943B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2012-0077021 2012-07-16
KR1020120077021A KR101984154B1 (ko) 2012-07-16 2012-07-16 터치 및 제스처 입력을 이용한 단말의 제어 방법 및 그 단말

Publications (2)

Publication Number Publication Date
CN103543943A true CN103543943A (zh) 2014-01-29
CN103543943B CN103543943B (zh) 2018-11-23

Family

ID=48832759

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310297975.0A Active CN103543943B (zh) 2012-07-16 2013-07-16 基于触摸和手势输入的控制方法及其终端

Country Status (10)

Country Link
US (2) US20140019910A1 (zh)
EP (1) EP2687971A3 (zh)
JP (1) JP6230836B2 (zh)
KR (1) KR101984154B1 (zh)
CN (1) CN103543943B (zh)
AU (1) AU2013206192B2 (zh)
BR (1) BR102013016792B1 (zh)
CA (1) CA2818248A1 (zh)
RU (1) RU2013129862A (zh)
TW (1) TWI594178B (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104598113A (zh) * 2015-01-23 2015-05-06 联想(北京)有限公司 一种信息处理的方法及电子设备
CN104715026A (zh) * 2015-03-03 2015-06-17 青岛海信移动通信技术股份有限公司 一种文件夹管理方法和智能终端
CN105335043A (zh) * 2014-08-08 2016-02-17 宏碁股份有限公司 窗口切换方法及执行该方法的电子装置
CN106062699A (zh) * 2014-03-22 2016-10-26 奥迪股份公司 用于在创建显示内容期间提供选择可能性的方法和装置
CN106066537A (zh) * 2015-04-24 2016-11-02 松下电器（美国）知识产权公司 头戴式显示器和头戴式显示器的控制方法
CN108255300A (zh) * 2014-03-12 2018-07-06 联想(北京)有限公司 一种电子设备的控制方法和装置
CN108446062A (zh) * 2018-02-13 2018-08-24 广州视源电子科技股份有限公司 一种对象固定方法、装置、终端设备及存储介质
CN108491139A (zh) * 2018-02-13 2018-09-04 广州视源电子科技股份有限公司 一种对象固定方法、装置、终端设备及存储介质

Families Citing this family (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7877707B2 (en) * 2007-01-06 2011-01-25 Apple Inc. Detecting and interpreting real-world and security gestures on touch and hover sensitive devices
US9417754B2 (en) 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
CN105373313A (zh) * 2012-07-18 2016-03-02 华为终端有限公司 一种用户界面的图标管理方法及触控设备
KR102117450B1 (ko) * 2013-03-26 2020-06-01 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
US10043172B2 (en) * 2013-05-29 2018-08-07 Ebay Inc. Tap and hold
USD731553S1 (en) * 2013-07-31 2015-06-09 Sears Brands, L.L.C. Display screen or portion thereof with an icon
USD731551S1 (en) * 2013-08-01 2015-06-09 Sears Brands, L.L.C. Display screen or portion thereof with an icon
USD734345S1 (en) * 2013-08-01 2015-07-14 Sears Brands, L.L.C. Display screen or portion thereof with an icon
WO2015022498A1 (en) * 2013-08-15 2015-02-19 Elliptic Laboratories As Touchless user interfaces
CN104423789B (zh) * 2013-09-09 2018-07-06 联想(北京)有限公司 一种信息处理方法及电子设备
US9531722B1 (en) 2013-10-31 2016-12-27 Google Inc. Methods for generating an activity stream
US9542457B1 (en) 2013-11-07 2017-01-10 Google Inc. Methods for displaying object history information
US9614880B1 (en) 2013-11-12 2017-04-04 Google Inc. Methods for real-time notifications in an activity stream
US10156976B2 (en) * 2014-01-30 2018-12-18 Samsung Display Co., Ltd. System and method in managing low-latency direct control feedback
US9509772B1 (en) 2014-02-13 2016-11-29 Google Inc. Visualization and control of ongoing ingress actions
CN103902156B (zh) * 2014-03-17 2017-09-01 联想(北京)有限公司 一种信息处理方法及电子设备
CN106030463A (zh) * 2014-04-16 2016-10-12 密克罗奇普技术公司 确定触摸及力感测表面上的触摸位置及对其的力
DE102014208502A1 (de) * 2014-05-07 2015-11-12 Volkswagen Aktiengesellschaft Anwenderschnittstelle und Verfahren zum Wechseln zwischen Bildschirmansichten einer Anwenderschnittstelle
US9536199B1 (en) 2014-06-09 2017-01-03 Google Inc. Recommendations based on device usage
US9507791B2 (en) 2014-06-12 2016-11-29 Google Inc. Storage system user interface with floating file collection
US10078781B2 (en) 2014-06-13 2018-09-18 Google Llc Automatically organizing images
US9787812B2 (en) 2014-08-28 2017-10-10 Honda Motor Co., Ltd. Privacy management
JP6388203B2 (ja) * 2014-09-08 2018-09-12 任天堂株式会社 電子機器
TWI511031B (zh) * 2014-10-23 2015-12-01 Qisda Corp 電子裝置運作方法以及電子裝置
US20160139662A1 (en) * 2014-11-14 2016-05-19 Sachin Dabhade Controlling a visual device based on a proximity between a user and the visual device
US9870420B2 (en) 2015-01-19 2018-01-16 Google Llc Classification and storage of documents
KR20160099399A (ko) * 2015-02-12 2016-08-22 엘지전자 주식회사 와치 타입 단말기
USD763898S1 (en) * 2015-07-28 2016-08-16 Microsoft Corporation Display screen with animated graphical user interface
CN105718768B (zh) * 2016-01-12 2019-06-11 Oppo广东移动通信有限公司 一种预防图标误操作的方法和装置
CN107203319A (zh) * 2016-03-17 2017-09-26 南宁富桂精密工业有限公司 界面操作控制方法及应用该方法的系统
TWI609314B (zh) * 2016-03-17 2017-12-21 鴻海精密工業股份有限公司 介面操作控制系統及其方法
US10642484B1 (en) * 2016-03-31 2020-05-05 Kyocera Document Solutions Inc. Display device
KR20180062832A (ko) * 2016-12-01 2018-06-11 주식회사 하이딥 사용자 인터페이스 제공을 위한 터치 입력 방법 및 장치
JP6946857B2 (ja) * 2017-08-24 2021-10-13 富士フイルムビジネスイノベーション株式会社 情報処理装置及びプログラム
KR20190054397A (ko) * 2017-11-13 2019-05-22 삼성전자주식회사 디스플레이장치 및 그 제어방법
CN109539486A (zh) * 2018-07-16 2019-03-29 珠海磐磊智能科技有限公司 调控系统的控制方法及系统
JP2020052681A (ja) * 2018-09-26 2020-04-02 シュナイダーエレクトリックホールディングス株式会社 操作処理装置
CN109743445B (zh) * 2018-12-20 2020-07-17 惠州Tcl移动通信有限公司 一种应用图标的调整方法、装置、存储介质及电子设备

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010086519A (ja) * 2008-09-03 2010-04-15 Canon Inc 情報処理装置、その動作方法及びプログラム
CN101730874A (zh) * 2006-06-28 2010-06-09 诺基亚公司 基于免接触的手势的输入
CN102023784A (zh) * 2009-09-16 2011-04-20 创新科技有限公司 非接触式输入字符的方法和设备
CN102033710A (zh) * 2010-04-07 2011-04-27 苹果公司 用于管理文件夹的方法和相关设备
CN102043583A (zh) * 2010-11-30 2011-05-04 汉王科技股份有限公司 页面跳转方法、页面跳转装置及电子阅读装置
US20110179368A1 (en) * 2010-01-19 2011-07-21 King Nicholas V 3D View Of File Structure
CN102200830A (zh) * 2010-03-25 2011-09-28 夏普株式会社 基于静态手势识别的非接触控制系统和控制方法
US20120176403A1 (en) * 2011-01-10 2012-07-12 Samsung Electronics Co., Ltd. Method and apparatus for editing touch display
CN102770834A (zh) * 2010-02-25 2012-11-07 微软公司 多屏幕保持并翻页手势
US20130067392A1 (en) * 2011-09-12 2013-03-14 Microsoft Corporation Multi-Input Rearrange

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0876926A (ja) * 1994-09-02 1996-03-22 Brother Ind Ltd 画像表示装置
US8139028B2 (en) * 2006-02-01 2012-03-20 Synaptics Incorporated Proximity sensor and method for indicating extended interface results
US7877707B2 (en) * 2007-01-06 2011-01-25 Apple Inc. Detecting and interpreting real-world and security gestures on touch and hover sensitive devices
JP4171770B1 (ja) * 2008-04-24 2008-10-29 任天堂株式会社 オブジェクト表示順変更プログラム及び装置
US8631340B2 (en) * 2008-06-25 2014-01-14 Microsoft Corporation Tab management in a user interface window
US8762879B1 (en) * 2008-09-01 2014-06-24 Google Inc. Tab management in a browser
US8756519B2 (en) * 2008-09-12 2014-06-17 Google Inc. Techniques for sharing content on a web page
JP2010157189A (ja) * 2009-01-05 2010-07-15 Sony Corp 情報処理装置、情報処理方法およびプログラム
TW201101198A (en) * 2009-06-17 2011-01-01 Sonix Technology Co Ltd Command input method
US8471824B2 (en) * 2009-09-02 2013-06-25 Amazon Technologies, Inc. Touch-screen user interface
US8769428B2 (en) * 2009-12-09 2014-07-01 Citrix Systems, Inc. Methods and systems for generating a combined display of taskbar button group entries generated on a local machine and on a remote machine
US8881060B2 (en) * 2010-04-07 2014-11-04 Apple Inc. Device, method, and graphical user interface for managing folders
KR20110127853A (ko) * 2010-05-20 2011-11-28 엘지전자 주식회사 이동 단말기 및 그 제어 방법
JP5556515B2 (ja) * 2010-09-07 2014-07-23 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
TW201216090A (en) * 2010-10-13 2012-04-16 Sunwave Technology Corp Gesture input method of remote control
JP2012108800A (ja) * 2010-11-18 2012-06-07 Ntt Docomo Inc 表示装置、表示装置の制御方法及びプログラム
KR101932688B1 (ko) * 2010-11-29 2018-12-28 삼성전자주식회사 휴대기기 및 이에 적용되는 ｕｉ 모드 제공 방법
TW201224843A (en) * 2010-12-03 2012-06-16 Microlink Comm Inc Paging method for electronic book reading device
US9778747B2 (en) * 2011-01-19 2017-10-03 Hewlett-Packard Development Company, L.P. Method and system for multimodal and gestural control
US20120218203A1 (en) * 2011-02-10 2012-08-30 Kanki Noriyoshi Touch drawing display apparatus and operation method thereof, image display apparatus allowing touch-input, and controller for the display apparatus
US20120304059A1 (en) * 2011-05-24 2012-11-29 Microsoft Corporation Interactive Build Instructions
KR101381484B1 (ko) * 2012-02-29 2014-04-07 주식회사 팬택 그래픽 오브젝트 플로팅 기능을 갖는 모바일 디바이스 및 그 실행 방법
US20130268837A1 (en) * 2012-04-10 2013-10-10 Google Inc. Method and system to manage interactive content display panels
US9740393B2 (en) * 2012-05-18 2017-08-22 Google Inc. Processing a hover event on a touchscreen device

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101730874A (zh) * 2006-06-28 2010-06-09 诺基亚公司 基于免接触的手势的输入
JP2010086519A (ja) * 2008-09-03 2010-04-15 Canon Inc 情報処理装置、その動作方法及びプログラム
CN102023784A (zh) * 2009-09-16 2011-04-20 创新科技有限公司 非接触式输入字符的方法和设备
US20110179368A1 (en) * 2010-01-19 2011-07-21 King Nicholas V 3D View Of File Structure
CN102770834A (zh) * 2010-02-25 2012-11-07 微软公司 多屏幕保持并翻页手势
CN102200830A (zh) * 2010-03-25 2011-09-28 夏普株式会社 基于静态手势识别的非接触控制系统和控制方法
CN102033710A (zh) * 2010-04-07 2011-04-27 苹果公司 用于管理文件夹的方法和相关设备
CN102043583A (zh) * 2010-11-30 2011-05-04 汉王科技股份有限公司 页面跳转方法、页面跳转装置及电子阅读装置
US20120176403A1 (en) * 2011-01-10 2012-07-12 Samsung Electronics Co., Ltd. Method and apparatus for editing touch display
US20130067392A1 (en) * 2011-09-12 2013-03-14 Microsoft Corporation Multi-Input Rearrange

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108255300A (zh) * 2014-03-12 2018-07-06 联想(北京)有限公司 一种电子设备的控制方法和装置
CN106062699A (zh) * 2014-03-22 2016-10-26 奥迪股份公司 用于在创建显示内容期间提供选择可能性的方法和装置
CN105335043A (zh) * 2014-08-08 2016-02-17 宏碁股份有限公司 窗口切换方法及执行该方法的电子装置
CN104598113A (zh) * 2015-01-23 2015-05-06 联想(北京)有限公司 一种信息处理的方法及电子设备
CN104598113B (zh) * 2015-01-23 2018-02-27 联想(北京)有限公司 一种信息处理的方法及电子设备
CN104715026A (zh) * 2015-03-03 2015-06-17 青岛海信移动通信技术股份有限公司 一种文件夹管理方法和智能终端
CN106066537A (zh) * 2015-04-24 2016-11-02 松下电器（美国）知识产权公司 头戴式显示器和头戴式显示器的控制方法
CN106066537B (zh) * 2015-04-24 2020-07-24 松下电器（美国）知识产权公司 头戴式显示器和头戴式显示器的控制方法
US10747488B2 (en) 2015-04-24 2020-08-18 Panasonic Intellectual Property Corporation Of America Head-mounted display apparatus worn on user's head
CN108446062A (zh) * 2018-02-13 2018-08-24 广州视源电子科技股份有限公司 一种对象固定方法、装置、终端设备及存储介质
CN108491139A (zh) * 2018-02-13 2018-09-04 广州视源电子科技股份有限公司 一种对象固定方法、装置、终端设备及存储介质
CN108491139B (zh) * 2018-02-13 2020-12-25 广州视源电子科技股份有限公司 一种对象固定方法、装置、终端设备及存储介质

Also Published As

Publication number Publication date
US20140019910A1 (en) 2014-01-16
US20180136812A1 (en) 2018-05-17
TWI594178B (zh) 2017-08-01
EP2687971A3 (en) 2017-04-19
BR102013016792B1 (pt) 2021-02-23
JP2014021983A (ja) 2014-02-03
RU2013129862A (ru) 2015-01-10
CA2818248A1 (en) 2014-01-16
CN103543943B (zh) 2018-11-23
JP6230836B2 (ja) 2017-11-15
KR20140010596A (ko) 2014-01-27
KR101984154B1 (ko) 2019-05-30
AU2013206192B2 (en) 2018-08-30
BR102013016792A2 (pt) 2015-08-25
TW201411469A (zh) 2014-03-16
EP2687971A2 (en) 2014-01-22
AU2013206192A1 (en) 2014-01-30

Similar Documents

Publication Publication Date Title
CN103543943A (zh) 基于触摸和手势输入的控制方法及其终端
US10788977B2 (en) System and method for displaying information on transparent display device
US9207806B2 (en) Creating a virtual mouse input device
US20210117052A1 (en) Method and system for providing information based on context, and computer-readable recording medium thereof
US8386963B2 (en) Virtual inking using gesture recognition
KR102343783B1 (ko) 모션 또는 그의 부재에 기초한 터치 기반 디바이스 상의 제어 인터페이스의 제시
CN105190520A (zh) 用于使能触摸的设备的悬停手势
US20140267111A1 (en) Method for handling function corresponding to multiple touches and electronic device thereof
CN104246683A (zh) 在包括透明显示器的装置中执行的对象控制方法、装置及其计算机可读记录介质
US9864514B2 (en) Method and electronic device for displaying virtual keypad
KR102057196B1 (ko) 정보 전송 방법 및 시스템과 그 기기
EP2698697A2 (en) Method of searching for playback location of multimedia application and electronic device thereof
US9143641B2 (en) Method for scanning data and electronic device thereof
KR101332661B1 (ko) 인식 대상 영역을 설정할 수 있는 단말기
KR20150099888A (ko) 디스플레이를 제어하는 전자 장치 및 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant