CN103049196A - 用于通过手势来操作电子设备的方法和系统 - Google Patents
用于通过手势来操作电子设备的方法和系统 Download PDFInfo
- Publication number
- CN103049196A CN103049196A CN2011103129148A CN201110312914A CN103049196A CN 103049196 A CN103049196 A CN 103049196A CN 2011103129148 A CN2011103129148 A CN 2011103129148A CN 201110312914 A CN201110312914 A CN 201110312914A CN 103049196 A CN103049196 A CN 103049196A
- Authority
- CN
- China
- Prior art keywords
- project
- electronic equipment
- gesture
- menu
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
本发明的实施方式涉及用于通过手势来操作电子设备的方法和系统。具体地,提供一种通过手势操作电子设备的方法,所述电子设备具有屏幕,配置用于呈现与用户进行交互的用户界面,所述方法包括:响应于所述用户界面上的至少一个项目成为操作对象,获取所述至少一个项目的属性信息;接收所述用户的基于手势的输入;以及响应于所述基于手势的输入,控制所述电子设备基于所述属性信息执行与所述至少一个项目有关的操作。还公开了相应的系统。根据本发明的实施方式,用户通过手势操作电子设备的效率和方便性可以得到改善。
Description
技术领域
本发明的实施方式总体上涉及人机交互领域,更具体地,涉及用于通过手势来操作电子设备的方法和系统。
背景技术
用户与电子设备之间的交互和操作过程通常被称为人机交互(Human-Computer Interaction,HCI)。人机交互对于用户操作电子设备的效率、方便性、自然性以及最终用户体验具有重要的影响。人机交互技术的每次重要进展几乎都会直接推动计算模式的演进。例如,以“所见即所得”方式进行操作的图形用户界面的出现在很大程度上推动了个人计算机(PC)的广泛普及。
然而,在目前占据主导地位的基于图形用户界面的交互范式中,使用鼠标、键盘等工具与电子设备进行交互在一定程度上限制了操作的自然性和方便性。为此,希望将人类日常使用的语音、手势、动作甚至表情等方式结合到人机交互中。这就是本领域中所称的“多模态人机交互”(Multi-Model HCI)。
研究表明,手势是人类在日常交流中最常使用的方式之一。因此,已经存在若干努力将手势引入用户对电子设备的操作中。特别地,随着近年来触摸式屏幕或邻近式屏幕的不断发展,用户已经能够通过触笔或手指直接操作电子设备。这为基于手势的交互提供了良好的平台和基础。
然而,在目前基于手势的操作中,电子设备通常只能对预先确定的一组手势做出预定的响应。更具体地说,目前,相同的手势对于不同的项目(即,操作对象)而言总是实现相同的操作。例如,对于用户的手指在屏幕上向下滑动这一手势输入,设备总是实现“向下翻页”这一操作,而没有考虑所操作的当前对象及其状态。此外,在现有技术基于手势的操作中,所操作项目和/或电子设备的状态和历史操作记录等信息未被纳入考虑。换言之,这种交互过程不是上下文敏感的。
鉴于以上问题,本领域中目前需要一种更为有效地用于通过手势操作电子设备的方法和系统。
发明内容
为了解决现有技术中的问题和缺陷,本发明提供了一种用于通过手势来操作电子设备的新颖的解决方案。根据本发明的实施方式,用户可以基于手势来操作电子设备。特别地,对于不同的项目以及项目和/或电子设备的不同状态,向电子设备输入的相同手势可以自适应地具有不同的语义和作用,并由此导致电子设备的不同操作。以此方式,基于手势的操作可以将所操作对象和/或电子设备本身的当前状态和/或历史操作记录纳入考虑,从而提供上下文敏感(context sensitive)的交互操作。由此,用户操作电子设备的效率和方便性可以得到改善,从而提升用户体验。
在本发明的一个方面,提供一种通过手势操作电子设备的方法。所述电子设备具有屏幕,配置用于呈现与用户进行交互的用户界面。所述方法包括:响应于所述用户界面上的至少一个项目成为操作对象,获取所述至少一个项目的属性信息;接收所述用户的基于手势的输入;以及响应于所述基于手势的输入,控制所述电子设备基于所述属性信息执行与所述至少一个项目有关的操作。
在本发明的另一方面,提供一种通过手势操作电子设备的系统,所述电子设备具有屏幕,配置用于呈现与用户进行交互的用户界面。所述系统包括:获取装置,配置用于响应于所述用户界面上的至少一个项目成为操作对象而获取所述至少一个项目的属性信息;接收装置,配置用于接收所述用户的基于手势的输入;以及控制装置,配置用于响应于所述基于手势的输入而控制所述电子设备基于所述属性信息执行与所述至少一个项目有关的操作。
附图说明
通过参考附图阅读下文的详细描述,本发明实施方式的上述以及其他目的、特征和优点将变得易于理解。在附图中,以示例性而非限制性的方式示出了本发明的若干实施方式,其中:
图1示出了根据本发明的示例性实施方式的通过手势操作电子设备的方法100的流程图;
图2示出了根据本发明的示例性实施方式的通过手势操作电子设备的系统200的框图;以及
图3示出了适合用来实践本发明实施方式的电子设备300的框图。
在各个附图中,相同或对应的标号表示相同或对应的部分。
具体实施方式
下面将参考若干示例性实施方式来描述本发明的原理和精神。应当理解,给出这些实施方式仅仅是为了使本领域技术人员能够更好地理解进而实现本发明,而并非以任何方式限制本发明的范围。
如上文所述,根据本发明的实施方式,用户向电子设备输入的手势将根据操作对象的不同而具有不同的语义,并由此导致电子设备的不同操作。而且,基于手势的操作还可以将所操作对象和/或电子设备本身的当前状态和/或历史操作记录纳入考虑,从而提供上下文敏感的交互操作。
首先参考图1,其示出了根据本发明的示例性实施方式的通过手势操作电子设备的方法100的流程图。
在此提到的“电子设备”是指目前已知或将来开发的支持用户通过手势与其进行交互的任何设备。例如,电子设备可以包括个人数字助理(PDA)、蜂窝电话、智能电话、膝上型计算机等移动终端,也可以是诸如个人计算机(PC)之类的传统的固定计算设备。
特别地,这里所说的电子设备具有至少一个屏幕,其可配置用于呈现与电子设备的用户进行交互的用户界面。该用户界面可以是图形用户界面、基于文本(例如,命令行)的用户界面或者其他任何形式的用户界面。本发明的范围在此方面不受限制。
如图1所示,在方法100开始之后,首先在步骤S102,在此,响应于用户界面上的至少一个项目成为操作对象,获取所述至少一个项目的属性信息。
根据本发明的实施方式,用户界面上可以显示一个或多个项目。在此使用的术语“项目”可以包括任何可操作的界面元素,例如包括但不限于以下一个或多个:图标、快捷方式、菜单、窗口、工具条,等等。
根据本发明的实施方式,可以通过各种方式来确定一个项目是否成为了用户将要操作的操作对象。例如,可以通过确定一个项目是否获得了焦点(focus)来判断其是否成为操作对象。焦点的获得例如可以通过调用相应的应用编程接口(API)来确定;当然,其他方式也是可行的。
备选地或附加地,在某些情况下,用户选择一个项目成为操作对象与实际操作这个项目可能是同时发生的。例如,用户可能通过触笔或手指直接拖拽界面上的某个项目。此时,尽管该项目变为操作对象和实际被操作在逻辑上是两个过程的,但是在物理上二者是同时发生的。相应地,确定哪个项目成为操作对象与检测用户的交互输入也可同时完成(即,步骤S102和S104同时进行)。
应当理解,上面描述的仅仅是几个可行的示例,并非意在限制本发明的范围。实际上,用于确定界面上呈现的特定项目是否成为用户的操作对象的任何适当技术手段均落入本发明的范围之内。
根据本发明的实施方式,在确定至少一个项目成为用户的操作对象之后,获取这个或这些项目的属性信息。在此使用的术语“属性信息”可以包括与项目有关的任何信息。例如,根据本发明的某些实施方式,项目的属性信息可以包括项目的类型,即,该项目是否为图标、快捷方式、菜单或者是工具条等等。特别地,类型信息还可以包括关于该项目的更为详细的信息。例如,当一个项目是快捷方式时,与类型有关的属性信息可以指示该快捷方式所对应的应用是否为文档、网络应用、游戏类应用、图像处理应用,等等。可以理解,这仅仅是几个例子,并非限制本发明的范围。
备选地或附加地,在步骤S102处获取的项目属性信息还可以包括项目的当前状态和/或历史信息。作为示例,项目的当前状态例如该项目目前是否处于打开、关闭、编辑、只读、存档等状态。同样作为示例,项目的历史信息例如包括用户对该项目的操作的历史记录。
此外,根据本发明的某些实施方式,在步骤S102处获取的项目属性信息还可以包括电子设备中与该项目有关的状态信息。此类状态信息一般地可以包括但不限于以下一个或多个:电子设备当前的处理能力(例如,CPU使用率,等等)、存储能力(例如,存储器使用率,等等)以及其他硬件和/或软件的当前使用状况。特别地,设备状态信息还可以包括那些特定于当前项目的信息。例如,如果用户将要操作的当前项目是一个网络应用的快捷方式,则在步骤S102处可以获取与电子设备的当前网络状况有关的信息作为该项目的属性信息。又如,如果用户将要操作的当前项目涉及一个图形应用,则在步骤S102处可以获取电子设备的图形处理能力信息(例如,屏幕支持的最大分辨率)作为该项目的属性信息。
应当理解,上文描述的仅仅是可以在步骤S102获取的项目属性的若干示例,并非以任何方式限制本发明的范围。在步骤S102,可以获取与用户将要操作的项目有关的任何属性信息,均落入本发明的范围之内。
接下来,方法100进行到步骤S104,在此接收电子设备的用户的基于手势的输入。
根据本发明的实施方式,用户可以借助于各种工具和技术向电子设备提供基于手势的输入。例如,在某些传统电子设备上,用户可以借助于鼠标之类的指点工具向电子设备输入其手势。此时,用户的手势是通过鼠标手势来实现的。备选地或附加地,电子设备可能配备有触摸式屏幕或邻近式屏幕,允许用户通过触摸屏幕或接近屏幕而操作电子设备。在这种情况下,用户可以通过直接操作此类屏幕而提供基于手势的输入。例如,用户可以通过普通的笔、专用触笔和/或手指来操作屏幕,以提供基于手势的输入。
注意,根据本发明的实施方式,电子设备可以通过任何适当的技术手段来确定基于手势的输入所代表的手势信息。例如,在用户输入期间,电子设备可以记录用户所输入的轨迹。而后,电子设备可以通过对轨迹的处理来确定该输入所述对应的手势。例如,对于简单的输入(例如,从上向下运动),电子设备可以直接根据用户输入的轨迹来确定其对应的手势。对于较为复杂的用户输入,电子设备可以对用户输入的轨迹进行模式识别,以确定该轨迹所对应的手势。注意,目前已知或将来开发的各种模式识别算法均可与本发明的实施方式结合使用,由此落入本发明的范围之内。
特别地,根据本发明的某些实施方式,电子设备可以预先确定一组手势(例如,直线段运动、曲线运动、折线运动、圆周运动、半圆运动、等等),并将其存储在电子设备的存储器中。当电子设备接收到用户的手势输入并对其进行识别之后,可以将识别结果与预先存储的手势进行匹配,并且将最为匹配的预定手势确定为用户手势。
应当理解,上文描述的识别用户手势的方法都只是示例性的。任何用于识别手势输入的方法均可与本发明的实施方式结合使用。因此,本发明的范围在此方面不受限制。
接下来,方法100进行到步骤S106,在此响应于步骤S104处接收到的基于手势的输入,控制电子设备基于在步骤S102处获取的项目属性信息而执行与该项目有关的操作。
与项目有关的操作可以包括各种操作,例如移动、修改、编辑、删除、恢复该项目,等等。特别地,根据本发明的某些实施方式,与项目有关的操作包括与该项目相关联的菜单的操作。例如,与项目相关联的菜单的操作可以包括以下至少一个操作:菜单的打开、关闭、放大和缩小。例如,当用户在一个项目上划过一个顺时针的弧形时,可以弹出与这个条目相关的上下文菜单。同样,当用户逆时针划过一个弧形时,可以关闭菜单,等等。
此外,如上所述,对项目菜单的手势操作还取决于该项目的属性信息。例如,操作与项目相关联的菜单可以包括:基于项目的属性信息来确定菜单中包含的菜单项。作为示例,根据所操作项目的类型不同,所打开的菜单可以包含用于对项目执行不同操作的菜单项。例如,如果当前操作的项目是一个文档,则“顺时针弧形”这一手势所打开的菜单可以包括与文本编辑有关的菜单项;而如果当前操作的项目是一个音频或视频文件,则“顺时针弧形”可以代表弹出与控制音频/视频播放有关的菜单。这仅仅是一个示例,并非意在限制本发明的实施方式。从所描述的示例可以看到,一个相同的手势对于不同类型的项目而言可以具有完全不同的语义。
此外,即使对于相同的项目,取决于该项目和/或电子设备的所处的不同状态,同样的手势也可具有不同的语义和效果。作为示例,假定当前操作的项目是一个网络应用。此时,如上所述,在步骤S102获得的属性信息可以指示电子设备当前的网络状态。如果网络目前不可用,则响应于用户手势而打开的菜单中可以禁用与网络操作有关的菜单项(例如,将这些菜单项变灰,或者根本不显示这些菜单项)。在一种极端情况下,如果菜单中包含的所有菜单项均涉及网络操作,则在网络不可用的情况下,取代弹出菜单,可以响应于用户的手势而打开一个提示窗口,告知用户网络目前处于不可用的状态。
备选地或附加地,基于手势来操作与项目相关联的菜单还可以包括:基于所述属性信息来排列所述菜单项。例如,如上文所述,属性信息可以包括历史记录。此时,响应于打开菜单的手势,电子设备可以将用户最近经常操作的菜单项排列在菜单靠前的位置,或者将其以较为醒目的方式显示。
而且,应当注意,对于某些项目而言被用于操作菜单的手势,对于另一些项目而言可被用于不同目的。例如,仍然参考上文描述的示例。对于音频或视频文件而言,“顺时针弧形”的手势可以代表打开与控制音频/视频播放有关的菜单。然而,如果用户对“回收站”中的某个项目顺时针划过一个弧形,则这可以表示从回收站删除或恢复该项目。可以看到,在后一种情况下,该手势不再被用于控制菜单。
通过上文的描述可以理解,根据本发明的实施方式,在步骤S106处,对项目的操作不仅将取决于用户的手势,而且还将参考当前所操作项目的属性。换言之,基于手势的操作特定于所操作的项目的属性。对于不同的项目或者相同项目的不同状态,相同的手势可以具有不同的语义和作用。根据本发明的实施方式,手势对于各个不同项目以及项目的不同状态所具有的语义和作用可被预先确定并被保存在电子设备中,也可以由用户定制。
方法100在步骤S106之后结束。
应当理解,方法100中记载的各个步骤可以按照不同的顺序执行,和/或并行执行。例如,获取项目的属性并非必须在接收手势输入之前执行,而是可以与之同时执行或者在其后执行。此外,方法100还可以包括附加的步骤和/或省略执行示出的步骤。本发明的范围在此方面不受限制。
接下来参考图2,其示出了根据本发明的示例性实施方式的通过手势操作电子设备的系统200的框图。根据本发明的实施方式,系统200可以驻留于电子设备中或者以其他方式与电子设备协同操作,以便实现上文描述的方法100的功能。如上所述,与系统200协同操作的电子设备具有屏幕,配置用于呈现与用户进行交互的用户界面。
如图2所示,系统200包括:获取装置202,配置用于响应于所述用户界面上的至少一个项目成为操作对象而获取所述至少一个项目的属性信息;接收装置204,配置用于接收所述用户的基于手势的输入;以及控制装置206,配置用于响应于所述基于手势的输入而控制所述电子设备基于所述属性信息执行与所述至少一个项目有关的操作。
根据本发明的某些实施方式,控制装置206可以包括:菜单控制装置,配置用于控制所述电子设备执行与所述至少一个项目相关联的菜单的操作。根据本发明的某些实施方式,该菜单控制装置配置用于控制所述电子设备执行以下至少一个操作:所述菜单的打开、关闭、放大和缩小。备选地或附加地,所述菜单控制装置配置用于控制所述电子设备执行以下至少一项:基于所述属性信息来确定所述菜单中包含的菜单项;以及基于所述属性信息来排列所述菜单项。
根据本发明的某些实施方式,其中所述屏幕是触摸式屏幕和邻近式屏幕之一,并且其中所述接收装置204包括:配置用于接收所述用户通过直接操作所述屏幕而提供的手势的装置。
根据本发明的某些实施方式,其中所述获取装置202包括以下至少一个:配置用于获取所述项目的类型的装置;配置用于获取所述项目的当前状态的装置;配置用于获取所述项目的历史信息的装置;以及配置用于获取所述电子设备中与所述项目有关的状态信息的装置。
注意,为清晰起见,在图2中没有示出各个装置所包含的子装置。然而,应当理解,系统200中记载的装置202-206分别与参考图1描述的方法100中的步骤S102-S106相对应。由此,上文针对图1中的方法100描述的操作和特征同样适用于系统200及其中包含的装置,在此不再赘述。
还应当理解,系统200可以利用各种方式来实现。例如,在某些实施方式中,系统200可以利用软件和/或固件来实现。此外,系统200也可以利用硬件来实现。例如,系统200可以实现为集成电路(IC)芯片或专用集成电路(ASIC)。系统200也可以实现为片上系统(SOC)。现在已知或者将来开发的其他方式也是可行的,本发明的范围在此方面不受限制。
下面参考图3,其示出了适于用来实践本发明实施方式的电子设备300的示意性框图。在图3所示的示例中,电子设备300是一个具有无线通信能力的移动终端(例如,蜂窝电话)。然而,可以理解,这仅仅是示例性而非限制性的。其他类型的移动终端也可以容易地采用本发明的实施方式,诸如便携式数字助理(PDA)、寻呼机、移动计算机、移动电视、游戏设备、膝上型计算机、照相机、录像机、GPS设备以及其他类型的语音和文本通信系统。固定式电子设备同样可以容易地使用本发明的实施方式。
电子设备300包括一个或天线312,其可操作地与发射机314和接收机316进行通信。电子设备300还包括处理器312或者其他处理元件,其分别提供去往发射机314的信号和接收来自接收机316的信号。信号包括按照适当蜂窝系统的空中接口标准的信令信息,并且还包括用户语音、接收的数据和/或用户生成的数据。在此方面,电子设备300能够利用一个或多个空中接口标准、通信协议、调制类型以及接入类型来进行操作。作为示范,电子设备300能够根据多个第一代、第二代、第三代和/或第四代通信协议等中的任何协议来进行操作。
可以理解,处理器312包括实现电子设备300的功能所需的电路。例如,处理器312可以包括数字信号处理器设备、微处理器设备、各种模数转换器、数模转换器和其他支持电路。电子设备300的控制和信号处理功能按照这些设备各自的能力在其间分配。处理器312由此还可以包括在调制和传输之前对消息和数据进行卷积编码和交织的功能。处理器312还可以另外包括内部语音编码器,并且可以包括内部数据调制解调器。
此外,处理器312可以包括对可以存储在存储器中的一个或多个软件程序进行操作的功能。例如,处理器312可以能够操作连接程序,诸如传统的Web浏览器。连接程序继而可以允许电子设备300例如按照无线应用协议(WAP)、超文本传输协议(HTTP)等来发射和接收Web内容(诸如基于位置的内容和/或其他web页面内容)。
电子设备300还可以包括用户接口,其例如可以包括耳机或者扬声器324、振铃器322、麦克风326、显示屏328以及输入接口331,所有这些设备都耦合至处理器312。电子设备300可以包括小键盘330。小键盘330可以包括传统的数字键(0-9)和相关键(#、*),以及用于操作电子设备300的其他键。备选地,小键盘330可以包括传统的QWERTY小键盘布置。小键盘330还可以包括与功能相关联的各种软键。电子设备300还可以包括相机模块336,用于捕获静态和/或动态图像。
特别地,显示屏328可以包括触摸式屏幕和/或邻近式屏幕,用户可以通过直接操作屏幕而操作电子设备300。此时,显示屏328同时充当输入设备和输出设备二者。在这样的实施方式中,输入接口331可以配置用于接收用户通过例如普通的笔、专用触笔和/或手指在显示屏328上提供的输入,包括指点输入和手势输入。处理器312可配置用于检测此类输入,并且识别出用户的手势。
此外,电子设备300可以包括诸如操纵杆的接口设备或者其他用于输入接口。电子设备300还包括电池334,诸如振动电池组,用于为操作电子设备300所需的各种电路供电,以及可选地提供机械振动作为可检测输出。
电子设备300可以进一步包括用户标识模块(UIM)338。UIM 338通常是具有内置处理器的存储器设备。UIM 338例如可以包括订户标识模块(SIM)、通用集成电路卡(UICC)、通用订户标识模块(USIM)、可移动用户标识模块(R-UIM)等。UIM 338通常存储与移动订户相关的信元。
电子设备300还可以具有存储器。例如,电子设备300可以包括易失性存储器340,例如包括用于数据临时存储的高速缓存区域的易失性随机存取存储器(RAM)。电子设备300还可以包括其他非易失性存储器342,其可以是嵌入式的和/或可移动的。非易失性存储器342可以附加地或者可选地包括例如EEPROM和闪存等。存储器可以存储电子设备300所使用的多个信息片段和数据中的任意项,以实现电子设备300的功能。例如,存储器340和342可以存储用于实现上文结合图1描述的方法100的计算机程序指令。
应当理解,图3所述的结构框图仅仅为了示例的目的而示出的,而不是对本发明范围的限制。在某些情况下,可以根据具体情况而增加或者减少某些设备。
上文已经结合若干具体实施方式阐释了本发明的精神和原理。根据本发明的实施方式,用户可以基于手势来操作电子设备。特别地,对于不同的项目以及项目和/或电子设备的不同状态,向电子设备输入的相同手势可以自适应地具有不同的语义和作用,并由此导致电子设备的不同操作。以此方式,基于手势的操作可以将所操作对象和/或电子设备本身的当前状态和/或历史操作记录纳入考虑,从而提供上下文敏感的交互操作。由此,用户操作电子设备的效率和方便性可以得到改善,从而提升用户体验。
应当注意,本发明的实施方式可以通过硬件、软件或者软件和硬件的结合来实现。硬件部分可以利用专用逻辑来实现;软件部分可以存储在存储器中,由适当的指令执行系统,例如微处理器或者专用设计硬件来执行。本领域的普通技术人员可以理解上述的设备和方法可以使用计算机可执行指令和/或包含在处理器控制代码中来实现,例如在诸如磁盘、CD或DVD-ROM的载体介质、诸如只读存储器(固件)的可编程的存储器或者诸如光学或电子信号载体的数据载体上提供了这样的代码。本发明的设备及其模块可以由诸如超大规模集成电路或门阵列、诸如逻辑芯片、晶体管等的半导体、或者诸如现场可编程门阵列、可编程逻辑设备等的可编程硬件设备的硬件电路实现,也可以用由各种类型的处理器执行的软件实现,也可以由上述硬件电路和软件的结合例如固件来实现。
说明书中提及的通信网络可以包括各类网络,包括但不限于局域网(“LAN”),广域网(“WAN”),根据IP协议的网络(例如,因特网)以及端对端网络(例如,ad hoc对等网络)。
应当注意,尽管在上文详细描述中提及了设备的若干装置或子装置,但是这种划分仅仅并非强制性的。实际上,根据本发明的实施方式,上文描述的两个或更多装置的特征和功能可以在一个装置中具体化。反之,上文描述的一个装置的特征和功能可以进一步划分为由多个装置来具体化。
此外,尽管在附图中以特定顺序描述了本发明方法的操作,但是,这并非要求或者暗示必须按照该特定顺序来执行这些操作,或是必须执行全部所示的操作才能实现期望的结果。相反,流程图中描绘的步骤可以改变执行顺序。附加地或备选地,可以省略某些步骤,将多个步骤合并为一个步骤执行,和/或将一个步骤分解为多个步骤执行。
虽然已经参考若干具体实施方式描述了本发明,但是应该理解,本发明并不限于所公开的具体实施方式。本发明旨在涵盖所附权利要求的精神和范围内所包括的各种修改和等同布置。所附权利要求的范围符合最宽泛的解释,从而包含所有这样的修改及等同结构和功能。
Claims (12)
1.一种通过手势操作电子设备的方法,所述电子设备具有屏幕,配置用于呈现与用户进行交互的用户界面,所述方法包括:
响应于所述用户界面上的至少一个项目成为操作对象,获取所述至少一个项目的属性信息;
接收所述用户的基于手势的输入;以及
响应于所述基于手势的输入,控制所述电子设备基于所述属性信息执行与所述至少一个项目有关的操作。
2.根据权利要求1所述的方法,其中与所述至少一个项目有关的操作包括:与所述至少一个项目相关联的菜单的操作。
3.根据权利要求2所述的方法,其中与所述至少一个项目相关联的菜单的操作包括以下至少一个:所述菜单的打开、关闭、放大和缩小。
4.根据权利要求2所述的方法,其中与所述至少一个项目相关联的菜单的操作包括以下至少一个:
基于所述属性信息来确定所述菜单中包含的菜单项;以及
基于所述属性信息来排列所述菜单项。
5.根据权利要求1所述的方法,其中所述屏幕是触摸式屏幕和邻近式屏幕之一,并且其中接收所述用户的基于手势的输入包括:接收所述用户通过直接操作所述屏幕而提供的基于手势的输入。
6.根据权利要求1所述的方法,其中获取所述至少一个项目的属性信息包括获取以下至少一个:
所述项目的类型;
所述项目的当前状态;
所述项目的历史信息;以及
所述电子设备中与所述项目有关的状态信息。
7.一种通过手势操作电子设备的系统,所述电子设备具有屏幕,配置用于呈现与用户进行交互的用户界面,所述系统包括:
获取装置,配置用于响应于所述用户界面上的至少一个项目成为操作对象而获取所述至少一个项目的属性信息;
接收装置,配置用于接收所述用户的基于手势的输入;以及
控制装置,配置用于响应于所述基于手势的输入而控制所述电子设备基于所述属性信息执行与所述至少一个项目有关的操作。
8.根据权利要求7所述的系统,其中所述控制装置包括:菜单控制装置,配置用于控制所述电子设备执行与所述至少一个项目相关联的菜单的操作。
9.根据权利要求8所述的系统,其中所述菜单控制装置配置用于控制所述电子设备执行以下至少一个操作:所述菜单的打开、关闭、放大和缩小。
10.根据权利要求8所述的系统,其中所述菜单控制装置配置用于控制所述电子设备执行以下至少一项:
基于所述属性信息来确定所述菜单中包含的菜单项;以及
基于所述属性信息来排列所述菜单项。
11.根据权利要求7所述的系统,其中所述屏幕是触摸式屏幕和邻近式屏幕之一,并且其中所述接收装置包括:配置用于接收所述用户通过直接操作所述屏幕而提供的基于手势的输入的装置。
12.根据权利要求7所述的系统,其中所述获取装置包括以下至少一个:
配置用于获取所述项目的类型的装置;
配置用于获取所述项目的当前状态的装置;
配置用于获取所述项目的历史信息的装置;以及
配置用于获取所述电子设备中与所述项目有关的状态信息的装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2011103129148A CN103049196A (zh) | 2011-10-11 | 2011-10-11 | 用于通过手势来操作电子设备的方法和系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2011103129148A CN103049196A (zh) | 2011-10-11 | 2011-10-11 | 用于通过手势来操作电子设备的方法和系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN103049196A true CN103049196A (zh) | 2013-04-17 |
Family
ID=48061849
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2011103129148A Pending CN103049196A (zh) | 2011-10-11 | 2011-10-11 | 用于通过手势来操作电子设备的方法和系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103049196A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103777890A (zh) * | 2014-02-21 | 2014-05-07 | 联想(北京)有限公司 | 一种信息处理方法和装置 |
CN105204351A (zh) * | 2015-08-24 | 2015-12-30 | 珠海格力电器股份有限公司 | 空调机组的控制方法及装置 |
CN105824511B (zh) * | 2015-01-26 | 2020-12-29 | 三星电子株式会社 | 电子设备以及用于在电子设备中显示对象的方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101547253A (zh) * | 2008-03-25 | 2009-09-30 | Lg电子株式会社 | 移动终端及显示其中信息的方法 |
CN101893984A (zh) * | 2009-05-21 | 2010-11-24 | Lg电子株式会社 | 在移动终端中执行菜单的方法和使用该方法的移动终端 |
CN101989176A (zh) * | 2009-08-04 | 2011-03-23 | Lg电子株式会社 | 移动终端及其图标碰撞控制方法 |
CN102122229A (zh) * | 2010-02-19 | 2011-07-13 | 微软公司 | 使用边框作为输入机制 |
-
2011
- 2011-10-11 CN CN2011103129148A patent/CN103049196A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101547253A (zh) * | 2008-03-25 | 2009-09-30 | Lg电子株式会社 | 移动终端及显示其中信息的方法 |
CN101893984A (zh) * | 2009-05-21 | 2010-11-24 | Lg电子株式会社 | 在移动终端中执行菜单的方法和使用该方法的移动终端 |
CN101989176A (zh) * | 2009-08-04 | 2011-03-23 | Lg电子株式会社 | 移动终端及其图标碰撞控制方法 |
CN102122229A (zh) * | 2010-02-19 | 2011-07-13 | 微软公司 | 使用边框作为输入机制 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103777890A (zh) * | 2014-02-21 | 2014-05-07 | 联想(北京)有限公司 | 一种信息处理方法和装置 |
CN103777890B (zh) * | 2014-02-21 | 2017-07-25 | 联想(北京)有限公司 | 一种信息处理方法和装置 |
CN105824511B (zh) * | 2015-01-26 | 2020-12-29 | 三星电子株式会社 | 电子设备以及用于在电子设备中显示对象的方法 |
CN105204351A (zh) * | 2015-08-24 | 2015-12-30 | 珠海格力电器股份有限公司 | 空调机组的控制方法及装置 |
CN105204351B (zh) * | 2015-08-24 | 2018-07-13 | 珠海格力电器股份有限公司 | 空调机组的控制方法及装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105549819B (zh) | 后台应用信息的显示方法及装置 | |
US8893054B2 (en) | Devices, systems, and methods for conveying gesture commands | |
US8005766B2 (en) | Apparatus, method and computer program product providing a hierarchical approach to command-control tasks using a brain-computer interface | |
CN109753326B (zh) | 处理方法、装置、设备和机器可读介质 | |
KR101855147B1 (ko) | 사용자 선호도 분석 방법 및 그를 위한 디바이스 | |
CN108287918B (zh) | 基于应用页面的音乐播放方法、装置、存储介质和电子设备 | |
CN104205047A (zh) | 用于提供远程用户交互的装置和方法 | |
CN103442130A (zh) | 语音操控方法、移动终端装置及语音操控系统 | |
US20170249934A1 (en) | Electronic device and method for operating the same | |
CN103929712A (zh) | 用于基于情境感知来提供推荐项的方法和移动装置 | |
CN103870133A (zh) | 用于滚动显示装置的屏幕的方法和设备 | |
US20140040735A1 (en) | Method for providing voice guidance function and an electronic device thereof | |
CN104809221A (zh) | 音乐信息的推荐方法及装置 | |
CN104216646A (zh) | 基于手势创建应用程序的方法及装置 | |
KR20140100315A (ko) | 이동 단말기 및 그것의 제어 방법 | |
CN103489025A (zh) | 发送联系信息的方法和设备 | |
CN109683760B (zh) | 最近内容的显示方法、装置、终端及存储介质 | |
CN103049196A (zh) | 用于通过手势来操作电子设备的方法和系统 | |
KR101984094B1 (ko) | 이동 단말기 및 그것의 제어방법 | |
US10630619B2 (en) | Electronic device and method for extracting and using semantic entity in text message of electronic device | |
CN105094938A (zh) | 生成级联样式表代码的方法及装置 | |
CN114121013A (zh) | 语音控制方法、装置、电子设备及存储介质 | |
KR101718024B1 (ko) | 모바일 환경에서 데이터 압축 방법 및 이를 이용하는 이동 단말기 | |
CN109388328B (zh) | 一种输入方法、装置和介质 | |
CN112286613A (zh) | 界面显示方法及界面显示装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20130417 |