CN104423556A - 处理手势的方法、服务端及终端 - Google Patents
处理手势的方法、服务端及终端 Download PDFInfo
- Publication number
- CN104423556A CN104423556A CN201310400326.9A CN201310400326A CN104423556A CN 104423556 A CN104423556 A CN 104423556A CN 201310400326 A CN201310400326 A CN 201310400326A CN 104423556 A CN104423556 A CN 104423556A
- Authority
- CN
- China
- Prior art keywords
- gesture
- application
- terminal
- service end
- response
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明实施例提供了一种处理手势的方法,服务端及终端。该方法包括:服务端接收从终端发送的针对远程应用的手势信号,识别该手势信号表示的手势,通过手势配臵文件中的手势-应用响应的对应关系确定该手势对应的远程应用的应用响应并在远程应用中执行应用响应,服务端将执行应用响应产生的应用响应图像发送给终端以便在终端进行显示。本发明实施例通过在运行远程应用的服务端进行手势识别和相应的应用响应,并将应用响应图像发送给终端,这样能够针对远程应用进行手势响应,提高了用户体验。
Description
技术领域
本发明实施例涉及通信领域,并且更具体地,涉及一种处理手势的方法、服务端及终端。
背景技术
应用虚拟化技术的核心是把服务端的服务器资源(例如各种应用软件)通过虚拟化方式交付终端的用户使用。应用虚拟化技术在服务端和终端之间增加了一层虚拟层,应用软件实际上是在虚拟层运行,同时虚拟层将应用软件运行的屏幕界面图像通过虚拟通道推送到终端上显示,以实现“应用交付”。对于终端的用户来说,运行在服务端的应用软件是虚拟化的远程应用。
在应用虚拟化技术领域,由于服务端推送到终端的是远程应用的界面图像,终端无法识别该远程应用,导致终端对用户的手势不能作出针对远程应用的响应。
发明内容
本发明实施例提供一种处理手势的方法、服务端及终端,能够针对远程应用进行手势响应。
第一方面,提供了一种处理手势的方法,包括:服务端接收终端发送的手势信号,所述手势信号针对在所述终端上呈现的远程应用,所述远程应用在所述服务端上运行;所述服务端识别所述手势信号表示的手势;所述服务端确定所述手势对应的所述远程应用的应用响应并在所述远程应用中执行所述应用响应;所述服务端将执行所述应用响应产生的应用响应图像发送给所述终端。
结合第一方面,在第一种可能的实现方式中,所述服务端确定所述手势对应的所述远程应用的应用响应,包括:所述服务端根据手势配臵文件确定所述手势对应的所述远程应用的应用响应,所述手势配臵文件包括手势-应用响应的对应关系。
结合第一方面的第一种可能的实现方式,在第二种可能的实现方式中,所述方法还包括:所述服务端接收所述终端发送的所述手势配臵文件。
结合第一方面,在第三种可能的实现方式中,所述服务端确定所述手势对应的所述远程应用的应用响应,包括:所述服务端将所述手势的标识信息发送到文档管理系统;所述服务端获取所述文档管理系统根据手势配臵文件确定的所述手势对应的所述远程应用的应用响应,所述手势配臵文件包括手势-应用响应的对应关系。
第二方面,提供了一种处理手势的方法,包括:终端根据用户针对在所述终端上呈现的远程应用的手势输入产生手势信号,所述远程应用在服务端上运行;所述终端向所述服务端发送所述手势信号;所述终端接收所述服务端根据所述手势信号产生的所述远程应用的应用响应图像;所述终端显示所述应用响应图像。
结合第二方面,在第一种可能的实现方式中,所述方法还包括:所述终端向所述服务端发送手势配臵文件,所述手势配臵文件包括手势-应用响应的对应关系。
第三方面,提供了一种处理手势的方法,包括:服务端接收终端发送的手势信号,所述手势信号针对在所述终端上呈现的本地应用,所述本地应用在所述终端上运行;所述服务端识别所述手势信号表示的手势;所述服务端将所述手势的标识信息发送给所述终端。
第四方面,提供了一种处理手势的方法,包括:终端根据用户针对在所述终端上呈现的本地应用的手势输入产生手势信号,所示本地应用在所述终端上运行;所述终端向服务端发送所述手势信号;所述终端接收所述服务端识别的所述手势信号表示的手势的标识信息;所述终端确定所述手势对应的所述本地应用的应用响应;所述终端在所述本地应用中执行所述应用响应并显示执行所述应用响应产生的应用响应图像。
结合第四方面,在第一种可能的实现方式中,所述终端确定所述手势对应的所述本地应用的应用响应,包括:所述终端根据手势配臵文件确定所述手势对应的所述本地应用的应用响应,所述手势配臵文件包括手势-应用响应的对应关系。
结合第四方面,在第二种可能的实现方式中,所述终端确定所述手势对应的所述本地应用的应用响应,包括:所述终端将所述手势的标识信息发送到文档管理系统;所述终端获取所述文档管理系统根据手势配臵文件确定的所述手势对应的所述本地应用的应用响应,所述手势配臵文件包括手势-应用响应的对应关系。
第五方面,提供了一种服务端,包括:接收单元,用于接收终端发送的手势信号,所述手势信号针对在所述终端上呈现的远程应用,所述远程应用在所述服务端上运行;识别单元,用于识别所述手势信号表示的手势;确定单元,用于确定所述手势对应的所述远程应用的应用响应;运行单元,用于运行所述远程应用并在所述远程应用中执行所述应用响应;发送单元,用于将执行所述应用响应产生的应用响应图像发送给所述终端。
结合第五方面,在第一种可能的实现方式中,所述确定单元具体用于:根据手势配臵文件确定所述手势对应的所述远程应用的应用响应,所述手势配臵文件包括手势-应用响应的对应关系。
结合第五方面的第一种可能的实现方式,在第二种可能的实现方式中,所述接收单元还用于接收所述终端发送的所述手势配臵文件。
结合第五方面,在第三种可能的实现方式中,所述发送单元,还用于将所述手势的标识信息发送到文档管理系统;所述确定单元,还用于获取所述文档管理系统根据手势配臵文件确定的所述手势对应的所述远程应用的应用响应,所述手势配臵文件包括手势-应用响应的对应关系。
第六方面,提供了一种终端,包括:生成单元,用于根据用户针对在所述终端上呈现的远程应用的手势输入产生手势信号,所述远程应用在服务端上运行;发送单元,用于向所述服务端发送所述手势信号;接收单元,用于接收所述服务端根据所述手势信号产生的所述远程应用的应用响应图像;显示单元,用于显示所述应用响应图像。
结合第六方面,在第一种可能的实现方式中,所述发送单元还用于向所述服务端发送手势配臵文件,所述手势配臵文件包括手势-应用响应的对应关系。
第七方面,提供了一种服务端,包括:接收单元,用于接收终端发送的手势信号,所述手势信号针对在所述终端上呈现的本地应用,所述本地应用在所述终端上运行;识别单元,用于识别所述手势信号表示的手势;发送单元,用于将所述手势的标识信息发送给所述终端。
第八方面,提供了一种终端,包括:生成单元,用于根据用户针对在所述终端上呈现的本地应用的手势输入产生手势信号,所述本地应用在所述终端上运行;发送单元,用于向服务端发送所述手势信号;接收单元,用于接收所述服务端识别的所述手势信号表示的手势的标识信息;确定单元,用于确定所述手势对应的所述本地应用的应用响应;执行单元,用于运行所述本地应用并在所述本地应用中执行所述应用响应;显示单元,用于显示执行所述应用响应产生的应用响应图像。
根据第八方面,在第一种可能的实现方式中,所述确定单元具体用于根据手势配臵文件确定所述手势对应的所述本地应用的应用响应,所述手势配臵文件包括手势-应用响应的对应关系。
根据第八方面,在第二种可能的实现方式中,所述发送单元,还用于将所述手势的标识信息发送到文档管理系统;所述确定单元,还用于获取所述文档管理系统根据手势配臵文件确定的所述手势对应的所述本地应用的应用响应,所述手势配臵文件包括手势-应用响应的对应关系。
本发明实施例通过在运行远程应用的服务端进行手势识别和相应的应用响应,并将应用响应图像发送给终端,这样能够针对远程应用进行手势响应,提高了用户体验。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例应用虚拟化场景的示意图。
图2是本发明一个实施例的处理手势的方法的流程图。
图3是本发明一个实施例的处理手势的方法的示意图。
图4是本发明另一个实施例的处理手势的方法的示意图。
图5是本发明另一个实施例的处理手势的方法的示意图。
图6是本发明另一个实施例的处理手势的方法的流程图。
图7是本发明另一个实施例的处理手势的方法的示意图。
图8是本发明另一个实施例的处理手势的过程的示意流程图。
图9是本发明另一个实施例的处理手势的过程的示意流程图。
图10是本发明另一个实施例的处理手势的过程的示意流程图。
图11是本发明另一个实施例的处理手势的过程的示意流程图。
图12是本发明另一个实施例的处理手势的方法的流程图。
图13是本发明另一个实施例的处理手势的方法的示意图。
图14是本发明另一个实施例的处理手势的方法的流程图。
图15是本发明另一个实施例的处理手势的方法的示意图。
图16是本发明另一个实施例的处理手势的方法的示意图。
图17是本发明另一个实施例的处理手势的过程的示意流程图。
图18是本发明另一个实施例的处理手势的过程的示意流程图。
图19是本发明另一个实施例的处理手势的过程的示意流程图。
图20是本发明另一个实施例的处理手势的过程的示意流程图。
图21是本发明一个实施例的服务端的框图。
图22是本发明另一个实施例的终端的框图。
图23是本发明另一个实施例的服务端的框图。
图24是本发明另一个实施例的终端的框图。
图25是本发明另一个实施例的服务端的框图。
图26是本发明另一个实施例的终端的框图。
图27是本发明另一个实施例的服务端的框图。
图28是本发明另一个实施例的终端的框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
图1是可应用本发明实施例的虚拟化场景的示意图。
应用虚拟化的原理,是在服务端安装和运行应用软件。应用虚拟化是把服务端运行的应用软件产生的屏幕刷新界面图像传输到终端显示,再把终端产生的键盘敲击、鼠标移动等信息返传给服务端。应用虚拟化通过数据交换协议,如远程桌面协议(Remote Desktop Protocol,RDP)、独立计算机架构(Independent Computing Architecture,ICA)协议等,把运行在服务端的应用软件和终端连接起来,并通过协议提供的虚拟通道(分别传递各种输入输出数据如鼠标、键盘、图像、声音、端口、打印等)把服务端的应用软件的输入输出数据,重新定向到终端的输入输出设备上。因此,虽然终端并没有安装和运行应用软件,即终端所使用的是远程应用,但是终端用户的使用感受与在终端安装运行应用软件相比没有任何差异。
如图1所示,服务端运行应用软件并利用部署在服务端的应用虚拟化软件将应用的界面图像发送到终端显示该远程应用的图像。用户在终端100的输入模块101进行针对远程应用102的鼠标、键盘等操作,并将该操作信息发送到服务端110。服务端110在远程应用模块102中执行操作信息,生成远程应用的响应图像,并将远程应用的响应图像发送到终端100进而使终端100的显示模块103显示该响应图像。
但是,用户在终端的输入操作是有局限性的,由于在终端显示的只是服务端投递过来的远程应用的响应图像,因此终端无法获知其操作对象是什么远程应用,进而无法使远程应用对用户的手势输入作出相应的响应。
图2是本发明一个实施例的处理手势的方法的流程图,图2的方法由服务端执行。
201,服务端接收终端发送的手势信号,该手势信号针对在该终端上呈现的远程应用,该远程应用在该服务端上运行。
202,服务端识别该手势信号表示的手势。
203,服务端确定该手势对应的该远程应用的应用响应并在该远程应用中执行该应用响应。
204,服务端将执行该应用响应产生的应用响应图像发送给终端。
本发明实施例通过在运行远程应用的服务端进行手势识别和相应的应用响应,并将应用响应图像发送给终端,这样能够针对远程应用进行手势响应,提高了用户体验。
本发明实施例对手势信号的具体形式不作限制。作为一个实施例,手势信号可以是图像的形式,或者也可以是其他的形式。并且该手势信号是终端根据用户针对在该终端上呈现的远程应用的手势输入而产生的。
可选地,作为一个实施例,在步骤202中,该服务端可通过手势识别工具识别该手势信号所表示的手势。该手势识别工具可以是安装在该服务端的以软件形式存在的处理模块,也可以是硬件形式的物理单元,也可以是软件和硬件结合形式的功能模块。该手势识别工具可以是单独的物理存在,也可以与其他的一个或多个单元集成在一个模块中。本发明实施例对此不作限定。
可选地,作为一个实施例,在步骤203中,该服务端可通过手势配臵文件确定该手势对应的该远程应用的应用响应。该手势配臵文件包括手势-应用响应的对应关系。
可选地,作为另一个实施例,图2所示的方法还包括接收该终端发送的手势配臵文件。
可选地,作为另一个实施例,在步骤202中,该服务端可以根据存放在文档管理系统中的手势配臵文件确定该手势对应的应用响应,该手势配臵文件包括手势-应用响应的对应关系。具体地,该服务端将手势的标识信息和该远程应用的应用类型发送到该文档管理系统;再获取该文档管理系统根据其手势配臵文件中的手势-应用响应的对应关系确定的该远程应用的应用响应。这样,用户使用不同的服务端和/或不同的终端,均可以调用该文档管理系统中的手势配臵文件,使用户不必重复配臵手势配臵文件。
应注意,本发明实施例中的手势配臵文件可以是由用户预配臵的,其中的手势-应用响应的对应关系可以由用户进行添加、编辑、删除等操作。并且,该手势配臵文件可以是一个文档,也可以是一个应用,其形式可以是多样的,本发明对此不作限定。
可选地,作为一个实施例,图2所示的方法是由部署在服务端的服务端软件模块执行的。下面结合图3至图5具体描述由服务端软件模块执行图2的方法的实施例。
图3是本发明一个实施例的处理手势的方法的示意图。
301,服务端软件310接收终端发送的手势信号,该手势信号针对在该终端上呈现的远程应用340,该远程应用340在服务端300上运行。
302a和302b,服务端软件310识别该手势信号表示的手势。
具体地,在302a,服务端软件310将该手势信号发送到手势识别工具320。在302b,服务端软件310获取该手势识别工具320识别出的该手势信号表示的手势。且该手势识别工具320安装在该服务端300。
303a和303b,服务端软件310确定该手势对应的该远程应用340的应用响应。
具体地,在303a,服务端软件310将该手势的标识信息发送到手势配臵文件330。在303b,服务端软件310获取该手势配臵文件330确定的该手势对应的该远程应用340的应用响应。该手势配臵文件330包括手势-应用响应的对应关系。
304a和304b,服务端软件310在该远程应用340中执行该应用响应。
具体地,304a,服务端软件310通知运行在服务端300的远程应用340该应用响应。304b,服务端软件310获取该远程应用340执行该应用响应后的应用响应图像。
305,服务端软件310将执行该应用响应产生的应用响应图像发送给终端。
本发明实施例通过在运行远程应用的服务端进行手势识别和相应的应用响应,并将应用响应图像发送给终端,这样能够针对远程应用进行手势响应,提高了用户体验。
图4是本发明另一个实施例的处理手势的方法的示意图。
401,服务端软件410接收终端发送的手势信号,该手势信号针对在该终端上呈现的远程应用440,该远程应用440在服务端400上运行。
402a和402b,服务端软件410识别该手势信号表示的手势。
具体地,在402a,服务端软件410将该手势信号发送到手势识别工具420。在402b,服务端软件410获取该手势识别工具420识别出的该手势信号表示的手势。且该手势识别工具420安装在该服务端400。
403,服务端软件410将手势的标识信息发送到文档管理系统430。
具体地,服务端软件410将手势的标识信息和在终端上呈现的远程应用440的类型发送到文档管理系统430。
404,服务端软件410获取该文档管理系统430根据其手势配臵文件确定的在终端上呈现的远程应用的应用响应。
具体地,文档管理系统430中存储由用户预配臵的手势配臵文件,该手势配臵文件包括手势-应用响应的对应关系。服务端软件410获取该文档管理系统430根据其手势配臵文件确定的该手势对应的该远程应用440的应用响应。
这样,用户使用不同的服务端和/或不同的终端,均可以调用该文档管理系统中的手势配臵文件,使用户不必重复配臵手势配臵文件。
405a和4054b,服务端软件410在该远程应用440中执行该应用响应。
具体地,在405a,服务端软件410通知运行在服务端400的远程应用440该应用响应。在405b,服务端软件410获取该远程应用440执行该应用响应后的应用响应图像。
406,服务端软件410将执行该应用响应产生的应用响应图像发送给终端。
本发明实施例通过在运行远程应用的服务端进行手势识别和相应的应用响应,并将应用响应图像发送给终端,这样能够针对远程应用进行手势响应,提高了用户体验。
图5是本发明另一个实施例的处理手势的方法的示意图。
501,服务端软件510接收终端发送的手势信号和手势配臵文件,该手势信号针对在该终端上呈现的远程应用530,该手势配臵文件包括手势-应用响应的对应关系,该远程应用530在该服务端500上运行。
502a和502b,服务端软件510识别该手势信号表示的手势。
具体地,在502a,服务端软件510将该手势信号发送到手势识别工具520。在502b,服务端软件510获取该手势识别工具520识别出的该手势信号表示的手势。且该手势识别工具520安装在该服务端500。
503,服务端软件510确定该手势对应的该远程应用530的应用响应。
具体地,服务端软件510根据该手势配臵文件确定该手势对应的该远程应用530的应用响应。
504a和504b,服务端软件510在该远程应用530中执行该应用响应。
具体地,在504a,服务端软件510通知运行在服务端500的远程应用530该应用响应。在504b,服务端软件510获取该远程应用530执行该应用响应后的应用响应图像。
505,服务端软件510将执行该应用响应产生的应用响应图像发送给终端。
本发明实施例通过在运行远程应用的服务端进行手势识别和相应的应用响应,并将应用响应图像发送给终端,这样能够针对远程应用进行手势响应,提高了用户体验。
应用虚拟化领域中的终端的操作对象是在该终端上呈现的远程应用且该远程应用在服务端上运行。由于在终端显示的只是服务端投递过来的界面图像,因此终端无法获知其操作对象是什么远程应用,进而无法使远程应用针对用户的手势输入作出相应的响应。但是服务端是可以识别出该远程应用的,所以只要服务端可以获知在终端的手势内容便可以针对该远程应用作出相应的正确的响应,随后服务端只要把该远程应用的应用响应图像投递到终端显示即可。这样本发明通过将用户在终端的手势传递到服务端的方式,将手势的识别以及应用响应等工作转移到服务端上实现,这便解决了终端因无法获知具体远程应用而无法针对手势进行应用响应的问题。由于终端与服务端之间通信的高频与高速,使得用户感觉在执行手势输入后,在终端上呈现的远程应用便很快作出了精确的响应,与使用安装运行在终端的本地应用没有任何区别。另一方面,本发明通过将手势识别和应用响应的工作在服务端完成,从而能够减少终端本地的资源消耗。
图6是本发明另一个实施例的处理手势的方法的流程图,图6的方法由终端执行,并且与图2至图5所示的方法相对应,因此,将适当省略重复的描述。
601,终端根据用户针对在该终端上呈现的远程应用的手势输入产生手势信号,该远程应用在服务端上运行。
602,终端向服务端发送该手势信号。
603,终端接收服务端根据该手势信号产生的该远程应用的应用响应图像。
604,终端显示该应用响应图像。
本发明实施例通过在运行远程应用的服务端进行手势识别和相应的应用响应,并将应用响应图像发送给终端,这样能够针对远程应用进行手势响应,提高了用户体验。
可选地,作为一个实施例,该终端向服务端发送手势配臵文件,该手势配臵文件包括手势-应用响应的对应关系。
可选地,作为另一个实施例,图6所示的方法是由部署在终端的客户端软件模块执行的。下面结合图7具体描述由客户端软件模块执行图6的方法的实施例。
图7是本发明另一个实施例的处理手势的方法的示意图。
701,客户端软件710根据用户针对远程应用的手势输入产生手势信号。
具体地,用户在终端700的显示界面720上进行手势输入,该手势输入针对在该终端700上呈现的远程应用且该远程应用在服务端上运行。在步骤701,客户端软件710获取该用户的手势输入并根据该手势输入产生手势信号。
702,客户端软件710向服务端发送该手势信号。
可选地,作为一个实施例,客户端软件710可向服务端发送手势配臵文件,该手势配臵文件包括手势-应用响应的对应关系。
703,客户端软件710接收服务端根据该手势信号产生的该远程应用的应用响应图像。
704,客户端软件710将该应用响应图像发送到终端的显示界面720,以便于该终端的显示界面720显示该应用响应图像。
本发明实施例通过在运行远程应用的服务端进行手势识别和相应的应用响应,并将应用响应图像发送给终端,这样能够针对远程应用进行手势响应,提高了用户体验。
本发明实施例中,应用虚拟化领域中的终端的操作对象是在该终端上呈现的远程应用且该远程应用在服务端上运行。由于在终端显示的只是服务端投递过来的界面图像,因此终端无法获知其操作对象是什么远程应用,进而无法使远程应用针对用户的手势输入作出相应的响应。但是服务端是可以识别出该远程应用的,所以只要服务端可以获知在终端的手势内容便可以针对该远程应用作出相应的正确的响应,随后服务端只要把该远程应用的应用响应图像投递到终端显示即可。这样本发明通过将用户在终端的手势传递到服务端的方式,将手势的识别以及应用响应等工作转移到服务端上实现,这便解决了终端因无法获知具体远程应用而无法针对手势进行应用响应的问题。由于终端与服务端之间通信的高频与高速,使得用户感觉在执行手势输入后,在终端上呈现的远程应用便很快作出了精确的响应,与使用安装运行在终端的本地应用没有任何区别。另一方面,本发明通过将手势识别和应用响应的工作在服务端完成,从而能够减少终端本地的资源消耗。
图8是本发明另一个实施例的处理手势的过程的示意流程图。
801,终端810根据用户针对在该终端810上呈现的远程应用的手势输入产生手势信号,该远程应用在服务端820上运行。
手势信号是终端810根据用户针对上述远程应用的输入而产生的。用户可以用手指或其他物体在终端810的触摸屏上画出某种图形,终端810根据用户的触摸输入产生相应的手势信号。
802,终端810向服务端820发送该手势信号。
本发明实施例对手势信号的具体形式不作限制。作为一个实施例,手势信号可以是图像的形式,或者也可以是其他的形式。
可选地,作为一个实施例,终端810可向服务端820发送手势配臵文件。终端810可以在同一条消息中向服务端820发送该手势信号和该手势配臵文件,也可以在不同消息中向服务端820分别发送该手势信号和该手势配臵文件,也可以先向服务端820发送该手势信号再在步骤803之后发送该手势配臵文件,本发明对此不做限定。
803,服务端820识别该手势信号表示的手势。
可选地,作为一个实施例,该服务端820可通过手势识别工具识别出该手势信号所表示的手势。该手势识别工具可以是安装在该服务端820的以软件形式存在的处理模块,也可以是硬件形式的物理单元,也可以是软件和硬件结合形式的功能模块。该手势识别工具可以是单独的物理存在,也可以与其他的一个或多个单元集成在一个模块中。本发明实施例对此不作限定。
804,服务端820确定该手势对应该远程应用的应用响应并在该远程应用中执行该应用响应。
可选地,作为一个实施例,该服务端820可通过手势配臵文件确定该手势对应的该远程应用的应用响应。该手势配臵文件包括手势-应用响应的对应关系。
应注意,本发明实施例中的手势配臵文件是由用户预配臵的,其中的手势-应用响应的对应关系可以由用户进行添加、编辑、删除等操作。并且,该手势配臵文件可以是一个文档,也可以是一个应用,其形式可以是多样的,本发明对此不作限定。
805,服务端820将执行该应用响应产生的应用响应图像发送给终端810。
806,终端810显示该应用响应图像。
本发明实施例通过在运行远程应用的服务端进行手势识别和相应的应用响应,并将应用响应图像发送给终端,这样能够针对远程应用进行手势响应,提高了用户体验。
本发明实施例中,应用虚拟化领域中的终端的操作对象是在该终端上呈现的远程应用且该远程应用在服务端上运行。由于在终端显示的只是服务端投递过来的界面图像,因此终端无法获知其操作对象是什么远程应用,进而无法使远程应用针对用户的手势输入作出相应的响应。但是服务端是可以识别出该远程应用的,所以只要服务端可以获知在终端的手势内容便可以针对该远程应用作出相应的正确的响应,随后服务端只要把该远程应用的应用响应图像投递到终端显示即可。这样本发明通过将用户在终端的手势传递到服务端的方式,将手势的识别以及应用响应等工作转移到服务端上实现,这便解决了终端因无法获知具体远程应用而无法针对手势进行应用响应的问题。由于终端与服务端之间通信的高频与高速,使得用户感觉在执行手势输入后,在终端上呈现的远程应用便很快作出了精确的响应,与使用安装运行在终端的本地应用没有任何区别。另一方面,本发明通过将手势识别和应用响应的工作在服务端完成,从而能够减少终端本地的资源消耗。
图9是本发明另一个实施例的处理手势的过程的示意流程图。
901,终端910根据用户针对在该终端910上呈现的远程应用的手势输入产生手势信号,该远程应用在服务端920上运行。
手势信号是终端910根据用户针对上述远程应用的输入而产生的。用户可以用手指或其他物体在终端910的触摸屏上画出某种图形,终端910根据用户的触摸输入产生相应的手势信号。
902,终端910向服务端920发送该手势信号。
本发明实施例对手势信号的具体形式不作限制。作为一个实施例,手势信号可以是图像的形式,或者也可以是其他的形式。
903,服务端920识别该手势信号表示的手势。
可选地,作为一个实施例,该服务端920通过手势识别工具识别出该手势信号所表示的手势。该手势识别工具可以是安装在该服务端920的以软件形式存在的处理模块,也可以是硬件形式的物理单元,也可以是软件和硬件结合形式的功能模块。该手势识别工具可以是单独的物理存在,也可以与其他的一个或多个单元集成在一个模块中。本发明实施例对此不作限定。
904,服务端920将该手势的标识信息发送到文档管理系统930。
可选地,作为一个实施例,服务端920将该手势的标识信息和远程应用的类型发送到文档管理系统930。
905,服务端920获取该文档管理系统930根据其手势配臵文件确定的该远程应用的应用响应。
具体地,文档管理系统930中存储由用户预配臵的手势配臵文件,该手势配臵文件包括手势-应用响应的对应关系。服务端920获取该文档管理系统930根据其手势配臵文件确定的该手势对应的该远程应用的应用响应。
这样,用户使用不同的服务端和/或不同的终端,均可以调用该文档管理系统中的手势配臵文件,使用户不必重复配臵手势配臵文件。
906,服务端920在该远程应用中执行该应用响应。
907,服务端920将执行该应用响应产生的应用响应图像发送给终端910。
908,终端910显示该应用响应图像。
本发明实施例通过在运行远程应用的服务端进行手势识别和相应的应用响应,并将应用响应图像发送给终端,这样能够针对远程应用进行手势响应,提高了用户体验。
本发明实施例中,应用虚拟化领域中的终端的操作对象是在该终端上呈现的远程应用且该远程应用在服务端上运行。由于在终端显示的只是服务端投递过来的界面图像,因此终端无法获知其操作对象是什么远程应用,进而无法使远程应用针对用户的手势输入作出相应的响应。但是服务端是可以识别出该远程应用的,所以只要服务端可以获知在终端的手势内容便可以针对该远程应用作出相应的正确的响应,随后服务端只要把该远程应用的应用响应图像投递到终端显示即可。这样本发明通过将用户在终端的手势传递到服务端的方式,将手势的识别以及应用响应等工作转移到服务端上实现,这便解决了终端因无法获知具体远程应用而无法针对手势进行应用响应的问题。由于终端与服务端之间通信的高频与高速,使得用户感觉在执行手势输入后,在终端上呈现的远程应用便很快作出了精确的响应,与使用安装运行在终端的本地应用没有任何区别。另一方面,本发明通过将手势识别和应用响应的工作在服务端完成,从而能够减少终端本地的资源消耗。
图10是本发明另一个实施例的处理手势的过程的示意流程图。图10中所示的远程应用为浏览器。并且,在本实施例中,客户端软件部署在终端,服务端软件部署在服务端。
1001,客户端软件1030根据用户针对远程应用的手势输入产生手势信号。
可选地,作为一个实施例,用户在终端1000的显示界面1020上进行手势输入,画出交叉的两条直线(表示符号“×”),该显示界面1020是触摸屏,该手势输入针对浏览器1070。客户端软件1030获取该用户的手势输入并根据该手势输入产生手势信号。
1002,客户端软件1030向服务端软件1040发送该手势信号。
可选地,作为一个实施例,该客户端软件1030向服务端软件1040发送交叉的两条直线的图像。
1003a和1003b,服务端软件1040识别该手势信号表示的手势。
具体地,在1003a,服务端软件1040将该交叉的两条直线的图像发送到手势识别工具1050。在1003b,服务端软件1040获取该手势识别工具1050识别出的该交叉的两条直线的图像表示的手势为符号“×”。且该手势识别工具1050安装在该服务端1010。
1004,服务端软件1040将手势的标识信息发送到文档管理系统1060。
可选地,作为一个实施例,服务端软件1040将符号“×”的标识信息和浏览器1070应用名称发送到文档管理系统1060。
1005,服务端软件1040获取该文档管理系统1060根据其手势配臵文件确定的该远程应用的应用响应。
具体地,文档管理系统1060中存储由用户预配臵的手势配臵文件,该手势配臵文件包括手势-应用响应的对应关系。可选地,作为一个实施例,表一示出了手势-应用响应的对应关系。文档管理系统1060查询其手势-应用响应的对应关系,确定当应用为浏览器时,手势“×”对应的应用响应为关闭当前标签页。进而,服务端软件1040获取该应用响应为关闭当前标签页。
表一
1006a和1006b,服务端软件1040执行该应用响应产生应用响应图像。
具体地,在1006a,服务端软件1040将关闭当前标签页的应用响应通知浏览器1070。在1006b,服务端软件1040获取浏览器1070执行该关闭标签页的应用响应后产生的新的浏览器图像。
1007,服务端软件1040将该应用响应图像发送给客户端软件1030。
可选地,作为一个实施例,该服务端软件1040将该新的浏览器图像发送给客户端软件1030。
1008,客户端软件1030将该应用响应图像发送到终端1000的显示界面1020。
可选地,作为一个实施例,该客户端软件1030将该新的浏览器图像发送到终端1000的显示界面1020。
1009,该终端1000的显示界面1020显示该应用响应图像。
可选地,作为一个实施例,该终端1000的显示界面1010显示该新的浏览器图像。
本发明实施例通过在运行远程应用的服务端进行手势识别和相应的应用响应,并将应用响应图像发送给终端,这样能够针对远程应用进行手势响应,提高了用户体验。
应注意,表一给出的手势-应用响应的对应关系只是本发明的一个实施例,本发明实施例中的手势-应用响应的对应关系是由用户预先配臵的,该手势-应用响应的对应关系可以由用户进行添加、编辑、删除等操作。另外,该手势配臵文件可以是一个文档,也可以是一个应用,其形式可以是多样的,本发明对此不作限定。
本发明实施例中,应用虚拟化领域中的终端的操作对象是在该终端上呈现的远程应用且该远程应用在服务端上运行。由于在终端显示的只是服务端投递过来的界面图像,因此终端无法获知其操作对象是什么远程应用,进而无法使远程应用针对用户的手势输入作出相应的响应。但是服务端是可以识别出该远程应用的,所以只要服务端可以获知在终端的手势内容便可以针对该远程应用作出相应的正确的响应,随后服务端只要把该远程应用的应用响应图像投递到终端显示即可。这样本发明通过将用户在终端的手势传递到服务端的方式,将手势的识别以及应用响应等工作转移到服务端上实现,这便解决了终端因无法获知具体远程应用而无法针对手势进行应用响应的问题。由于终端与服务端之间通信的高频与高速,使得用户感觉在执行手势输入后,在终端上呈现的远程应用便很快作出了精确的响应,与使用安装运行在终端的本地应用没有任何区别。另一方面,本发明通过将手势识别和应用响应的工作在服务端完成,从而能够减少终端本地的资源消耗。
图11是本发明另一个实施例的处理手势的过程的示意流程图。图11中所示的远程应用为word。并且,在本实施例中,客户端软件部署在终端,服务端软件部署在服务端。
1101,客户端软件1130根据用户针对远程应用的手势输入产生手势信号。
可选地,作为一个实施例,用户在终端1100的显示界面1120上进行手势输入,画出交叉的两条直线(表示符号“×”),该显示界面1120是触摸屏,该手势输入针对word。客户端软件1130获取该用户的手势输入并根据该手势输入产生手势信号。
1102,客户端软件1130向服务端软件1140发送该手势信号。
可选地,作为一个实施例,该客户端软件1130向服务端软件1140发送交叉的两条直线的图像。
1103a和1103b,服务端软件1140识别该手势信号表示的手势。
具体地,在1103a,服务端软件1140将该交叉的两条直线的图像发送到手势识别工具1150。在1103b,服务端软件1140获取该手势识别工具1150识别出的该交叉的两条直线的图像表示的手势为符号“×”。且该手势识别工具1150安装在该服务端1110。
1104a和1104b,服务端软件1140确定该手势对应的word的应用响应。
具体地,在1104a,服务端软件1140将该手势“×”的标识信息发送到手势配臵文件1160。在1104b,服务端软件1140获取该手势配臵文件1160确定的该手势对应的word的应用响应。该手势配臵文件1160安装在服务端1110且该手势配臵文件1160包括手势-应用响应的对应关系。具体地,手势配臵文件1160查询其手势-应用响应的对应关系,见表一所示,确定当应用为word时,手势“×”对应的应用响应为关闭word应用。进而,服务端软件1140获取该应用响应为关闭word应用。
1105a和1105b,服务端软件1140执行该应用响应产生应用响应图像。
具体地,1105a,服务端软件1140将关闭word应用的应用响应通知word1170。1105b,服务端软件1140获取word1170执行该关闭word应用的应用响应后产生的新的界面图像。
1106,服务端软件1140将该应用响应图像发送给客户端软件1130。
可选地,作为一个实施例,该服务端软件1140将该新的界面图像发送给客户端软件1130。
1107,客户端软件1130将该应用响应图像发送到终端1100的显示界面1120。
可选地,作为一个实施例,该客户端软件1130将该新的界面图像发送到终端1100的显示界面1120。
1108,该终端1100的显示界面1120显示该应用响应图像。
可选地,作为一个实施例,该终端1100的显示界面1120显示该新的界面图像。
本发明实施例通过在运行远程应用的服务端进行手势识别和相应的应用响应,并将应用响应图像发送给终端,这样能够针对远程应用进行手势响应,提高了用户体验。
本发明实施例中,应用虚拟化领域中的终端的操作对象是在该终端上呈现的远程应用且该远程应用在服务端上运行。由于在终端显示的只是服务端投递过来的界面图像,因此终端无法获知其操作对象是什么远程应用,进而无法使远程应用针对用户的手势输入作出相应的响应。但是服务端是可以识别出该远程应用的,所以只要服务端可以获知在终端的手势内容便可以针对该远程应用作出相应的正确的响应,随后服务端只要把该远程应用的应用响应图像投递到终端显示即可。这样本发明通过将用户在终端的手势传递到服务端的方式,将手势的识别以及应用响应等工作转移到服务端上实现,这便解决了终端因无法获知具体远程应用而无法针对手势进行应用响应的问题。由于终端与服务端之间通信的高频与高速,使得用户感觉在执行手势输入后,在终端上呈现的远程应用便很快作出了精确的响应,与使用安装运行在终端的本地应用没有任何区别。另一方面,本发明通过将手势识别和应用响应的工作在服务端完成,从而能够减少终端本地的资源消耗。
应注意,本发明实施例中的手势-应用响应的对应关系是由用户预先配臵的,本发明对该对应关系不作限定。该手势-应用响应的对应关系可以由用户进行添加、编辑、删除等操作。并且,该手势配臵文件可以是一个文档,也可以是一个应用,其形式可以是多样的,本发明对此不作限定。
这样,本发明实施例中,对于相同的手势,不同的应用可以作出不同的响应。例如,对于手势“×”,若应用为浏览器,则执行响应为关闭当前标签页,但是不关闭浏览器应用;若应用为word,则执行响应为关闭word应用。
图12是本发明另一个实施例的处理手势的方法的流程图。图12所示的方法由服务端执行。
1201,服务端接收终端发送的手势信号,该手势信号针对在该终端上呈现的本地应用,该本地应用在该终端上运行。
1202,服务端识别该手势信号表示的手势。
1203,服务端将该手势的标识信息发送给终端。
本发明实施例通过在服务端进行手势识别,这样能够针对本地应用进行手势响应提高了用户体验。
本发明实施例对手势信号的具体形式不作限制。作为一个实施例,手势信号可以是图像的形式,或者也可以是其他的形式。并且该手势信号是终端根据用户针对在该终端上呈现的本地应用的手势输入而产生的。
可选地,作为一个实施例,在步骤1202中,该服务端可通过手势识别工具识别出该手势信号所表示的手势。需要说明的是,该手势识别工具对于终端来说,相当于是一个远程应用。该手势识别工具可以是安装在该服务端的以软件形式存在的处理模块,也可以是硬件形式的物理单元,也可以是软件和硬件结合形式的功能模块。该手势识别工具可以是单独的物理存在,也可以与其他的一个或多个单元集成在一个模块中。本发明实施例对此不作限定。
可选地,作为一个实施例,图12所示的方法是由部署在服务端的服务端软件模块执行的,下面结合图13具体描述由服务端软件模块执行图12的方法的实施例。
图13是本发明另一个实施例的处理手势的方法的示意图。
1301,服务端软件1310接收终端发送的手势信号,该手势信号针对在该终端上呈现的本地应用,该本地应用在该终端上运行。
1302a和1302b,服务端软件1310识别该手势信号表示的手势。
具体地,在1302a,服务端软件1310将该手势信号发送到手势识别工具1320。在1302b,服务端软件1310获取该手势识别工具1320识别出的所述手势信号表示的手势。且该手势识别工具1320安装在该服务端1300。
1303,服务端软件1310将该手势的标识信息发送给终端。
本发明实施例通过在服务端进行手势识别,这样能够针对本地应用进行手势响应提高了用户体验。
本发明实施例中,对于在终端上呈现的本地应用,用户在终端的本地应用上进行手势操作后,终端将手势信号传递到服务端,并通过安装在服务端的手势识别工具完成手势信号的识别工作,然后服务端将识别出的手势的标识信息返回给终端。终端根据用户预配臵的手势配臵文件作出相应的应用响应,从而能够提高用户体验。另一方面,由于传统的在终端本地的手势识别软件会消耗本地资源,而诸如手机、掌上电脑等移动终端的本地资源是相对紧张的,本发明实施例将手势识别的工作转移到服务端完成,从而能够减少本地资源的消耗。
图14是本发明另一个实施例的处理手势的方法的流程图。图14所示的方法由终端执行,并且与图12至图13所示的方法相对应,因此,将适当省略重复的描述。
1401,终端根据用户针对在该终端上呈现的本地应用的手势输入产生手势信号,该本地应用在该终端上运行。
1402,终端向服务端发送该手势信号。
1403,终端接收服务端识别的该手势信号表示的手势的标识信息。
1404,终端确定该手势对应的该本地应用的应用响应。
1405,终端在该本地应用中执行该应用响应并显示执行该应用响应产生的应用响应图像。
本发明实施例通过在服务端进行手势识别,这样能够针对本地应用进行手势响应提高了用户体验。
可选地,作为一个实施例,在步骤1404中,终端根据手势配臵文件确定该手势对应的该本地应用的应用响应,该手势配臵文件包括手势-应用响应的对应关系。
可选地,作为另一个实施例,在步骤1404中,终端将该手势的标识信息发送到文档管理系统,并获取该文档管理系统根据其手势配臵文件确定的该手势对应的该本地应用的应用响应,该手势配臵文件包括手势-应用响应的对应关系。
应注意,本发明实施例中的手势配臵文件是由用户预配臵的,其中的手势-应用响应的对应关系可以由用户进行添加、编辑、删除等操作。并且,该手势配臵文件可以是一个文档,也可以是一个应用,其形式可以是多样的,本发明对此不作限定。
可选地,作为一个实施例,图14所示的方法是由部署在终端的客户端软件模块执行的。下面结合图15和图16具体描述由客户端软件模块执行图14的方法的实施例。
图15是本发明另一个实施例的处理手势的方法的示意图。
1501,客户端软件1520根据用户针对本地应用的手势输入产生手势信号。
可选地,作为一个实施例,用户在终端1500的显示界面1510上进行手势输入,该显示界面1510是触摸屏,该手势输入针对在该终端1500上呈现的本地应用1540。客户端软件1520获取该用户的手势输入并根据该手势输入产生手势信号。
1502,客户端软件1520向服务端发送该手势信号。
1503,客户端软件1520接收服务端识别的该手势信号表示的手势的标识信息。
1504a和1504b,客户端软件1520确定该手势对应的该本地应用1540的应用响应。
具体地,在1504a,客户端软件1520将该手势的标识信息发送到手势配臵文件1530。在1504b,客户端软件1520获取该手势配臵文件1530确定的该手势对应的该本地应用1540的应用响应。该手势配臵文件1530包括手势-应用响应的对应关系。
1505a和1505b,客户端软件1520执行该应用响应并产生应用响应图像。
具体地,在1505a,客户端软件1520将该应用响应通知该本地应用1540。在1505b,客户端软件1520获取该本地应用1540执行该应用响应后产生的应用响应图像。
1506,客户端软件1520在终端1500显示该应用响应图像。
可选地,作为一个实施例,该客户端软件1520将该应用响应图像发送到终端1500的显示界面1510进行显示。
本发明实施例通过在服务端进行手势识别,这样能够针对本地应用进行手势响应提高了用户体验。
本发明实施例中,对于在终端上呈现的本地应用,用户在终端的本地应用上进行手势操作后,终端将手势信号传递到服务端,并通过安装在服务端的手势识别工具完成手势信号的识别工作,然后服务端将识别出的手势的标识信息返回给终端。终端根据用户预配臵的手势配臵文件作出相应的应用响应,从而能够提高用户体验。另一方面,由于传统的在终端本地的手势识别软件会消耗本地资源,而诸如手机、掌上电脑等移动终端的本地资源是相对紧张的,本发明实施例将手势识别的工作转移到服务端完成,从而能够减少本地资源的消耗。
图16是本发明另一个实施例的处理手势的方法的示意图。
1601,客户端软件1620根据用户针对本地应用的手势输入产生手势信号。
可选地,作为一个实施例,用户在终端1600的显示界面1610上进行手势输入,该显示界面1610是触摸屏,该手势输入针对在该终端1600上呈现的本地应用1640。客户端软件1620获取该用户的手势输入并根据该手势输入产生手势信号。
1602,客户端软件1620向服务端发送该手势信号。
1603,客户端软件1620接收服务端识别的该手势信号表示的手势的标识信息。
1604a和1604b,客户端软件1620确定该手势对应的该本地应用1640的应用响应。
具体地,在1604a,客户端软件1620将该手势的标识信息和该本地应用1640的类型发送到文档管理系统1630。在1604b,客户端软件1620获取该文档管理系统1630确定的该手势对应的该本地应用1640的应用响应。具体地,文档管理系统1630中存储由用户预配臵的手势配臵文件,该手势配臵文件包括手势-应用响应的对应关系。客户端软件1620获取该文档管理系统1630根据其手势配臵文件确定的该手势对应的该本地应用1640的应用响应。
1605a和1605b,客户端软件1620执行该应用响应并产生应用响应图像。
具体地,在1605a,客户端软件1620将该应用响应通知该本地应用1640。在1605b,客户端软件1620获取该本地应用1640执行该应用响应后产生的应用响应图像。
1606,客户端软件1620在终端1600显示该应用响应图像。
可选地,作为一个实施例,该客户端软件1620将该应用响应图像发送到终端1600的显示界面1610进行显示。
本发明实施例通过在服务端进行手势识别,这样能够针对本地应用进行手势响应提高了用户体验。
本发明实施例中,对于在终端上呈现的本地应用,用户在终端的本地应用上进行手势操作后,终端将手势信号传递到服务端,并通过安装在服务端的手势识别工具完成手势信号的识别工作,然后服务端将识别出的手势的标识信息返回给终端。终端根据用户预配臵的手势配臵文件作出相应的应用响应,从而能够提高用户体验。另一方面,由于传统的在终端本地的手势识别软件会消耗本地资源,而诸如手机、掌上电脑等移动终端的本地资源是相对紧张的,本发明实施例将手势识别的工作转移到服务端完成,从而能够减少本地资源的消耗。
图17是本发明另一个实施例的处理手势的过程的示意流程图。
1701,终端1700根据用户针对在该终端1700上呈现的本地应用的手势输入产生手势信号,该本地应用在该终端1700上运行。
1702,终端1700向服务端1710发送该手势信号。
1703,服务端1710识别所述手势信号表示的手势。
可选地,作为一个实施例,该服务端1710通过手势识别工具识别出该手势信号所表示的手势。需要说明的是,该手势识别工具对于终端1700来说,相当于是一个远程应用。
1704,服务端1710将该手势的标识信息发送给终端1700。
1705,终端1700确定该手势对应的该本地应用的应用响应。
1706,终端1700在该本地应用中执行该应用响应并显示执行该应用响应产生的应用响应图像。
本发明实施例通过在服务端进行手势识别,这样能够针对本地应用进行手势响应提高了用户体验。
本发明实施例中,对于在终端上呈现的本地应用,用户在终端的本地应用上进行手势操作后,终端将手势信号传递到服务端,并通过安装在服务端的手势识别工具完成手势信号的识别工作,然后服务端将识别出的手势的标识信息返回给终端。终端根据用户预配臵的手势配臵文件作出相应的应用响应,从而能够提高用户体验。另一方面,由于传统的在终端本地的手势识别软件会消耗本地资源,而诸如手机、掌上电脑等移动终端的本地资源是相对紧张的,本发明实施例将手势识别的工作转移到服务端完成,从而能够减少本地资源的消耗。
图18是本发明另一个实施例的处理手势的过程的示意流程图。
1801,终端1800根据用户针对在该终端1800上呈现的本地应用的手势输入产生手势信号,该本地应用在该终端1800上运行。
1802,终端1800向服务端1810发送该手势信号。
1803,服务端1810识别所述手势信号表示的手势。
可选地,作为一个实施例,该服务端1810可通过手势识别工具识别出该手势信号所表示的手势。需要说明的是,该手势识别工具对于终端1800来说,相当于是一个远程应用。
1804,服务端1810将该手势的标识信息发送给终端1800。
1805,终端1800将该手势的标识信息发送到文档管理系统1820。
可选地,作为一个实施例,终端1800将该手势的标识信息和该本地应用的类型发送到文档管理系统1820。
1806,终端1800获取该文档管理系统1820确定的该手势对应的该本地应用的应用响应。
可选地,作为一个实施例,文档管理系统1820中存储由用户预配臵的手势配臵文件,该手势配臵文件包括手势-应用响应的对应关系。终端1800获取该文档管理系统1820根据其手势配臵文件确定的该手势对应的该本地应用的应用响应。
1807,终端1800在该本地应用中执行该应用响应并显示执行该应用响应产生的应用响应图像。
本发明实施例通过在服务端进行手势识别,这样能够针对本地应用进行手势响应提高了用户体验。
本发明实施例中,对于在终端上呈现的本地应用,用户在终端的本地应用上进行手势操作后,终端将手势信号传递到服务端,并通过安装在服务端的手势识别工具完成手势信号的识别工作,然后服务端将识别出的手势的标识信息返回给终端。终端根据用户预配臵的手势配臵文件作出相应的应用响应,从而能够提高用户体验。另一方面,由于传统的在终端本地的手势识别软件会消耗本地资源,而诸如手机、掌上电脑等移动终端的本地资源是相对紧张的,本发明实施例将手势识别的工作转移到服务端完成,从而能够减少本地资源的消耗。
图19是本发明另一个实施例的处理手势的过程的示意流程图。图19中所示的在终端上呈现的本地应用为浏览器。并且,在本实施例中,客户端软件部署在终端,服务端软件部署在服务端。
1901,客户端软件1930根据用户针对在终端1900上呈现的本地应用的手势输入产生手势信号,该本地应用是在终端1900上运行的浏览器1970。
可选地,作为一个实施例,用户在终端1900的显示界面1920上进行手势输入,画出n形曲线(表示字母“n”),该显示界面1920是触摸屏,该手势输入针对浏览器1970。客户端软件1930获取该用户的手势输入并根据该手势输入产生手势信号。
1902,客户端软件1930向服务端软件1940发送该手势信号。
可选地,作为一个实施例,该客户端软件1930向服务端软件1940发送n形曲线的图像。
1903a和1903b,服务端软件1940识别该手势信号表示的手势。
具体地,在1903a,服务端软件1940将该n形曲线的图像发送到手势识别工具1950。在1903b,服务端软件1940获取该手势识别工具1950识别出的该n形曲线的图像表示的手势为字母“n”。且该手势识别工具1950安装在该服务端1910,对于终端1900来说,该手势识别工具1950是一种远程应用。
1904,服务端软件1940将该手势的标识信息发送给客户端软件1930。
可选地,作为一个实施例,该服务端软件1940将手势“n”的标识信息发送给终端的客户端软件1930。
1905a和1905b,客户端软件1930确定该手势对应的浏览器1970的应用响应。
具体地,在1905a,客户端软件1930将该手势“n”的标识信息发送到手势配臵文件1960。在1905b,客户端软件1930获取该手势配臵文件1960确定的该手势对应的浏览器1970的应用响应。该手势配臵文件1960安装在终端1900且该手势配臵文件1960包括手势-应用响应的对应关系。具体地,手势配臵文件1960查询其手势-应用响应的对应关系,见表一所示,确定当应用为浏览器时,手势“n”对应的应用响应为新建空白标签页。进而,客户端软件1930获取该应用响应为新建空白标签页。
1906a和1906b,客户端软件1930执行该应用响应并产生应用响应图像。
具体地,在1906a,客户端软件1930将新建空白标签页的应用响应通知浏览器1970。在1906b,客户端软件1930获取该浏览器1970执行该新建空白标签页的应用响应后产生的新的浏览器图像。
1907,客户端软件1930将该应用响应图像发送到终端的显示界面。
可选地,作为一个实施例,该客户端软件1930将该新的浏览器图像的应用响应图像发送到终端1900的显示界面1920。
1908,终端1900的显示界面1920显示该新的应用响应图像。
可选地,作为一个实施例,终端1900的显示界面1920显示该新的浏览器图像。
本发明实施例通过在服务端进行手势识别,这样能够针对本地应用进行手势响应提高了用户体验。
本发明实施例中,对于在终端上呈现的本地应用,用户在终端的本地应用上进行手势操作后,终端将手势信号传递到服务端,并通过安装在服务端的手势识别工具完成手势信号的识别工作,然后服务端将识别出的手势的标识信息返回给终端。终端根据用户预配臵的手势配臵文件作出相应的应用响应,从而能够提高用户体验。另一方面,由于传统的在终端本地的手势识别软件会消耗本地资源,而诸如手机、掌上电脑等移动终端的本地资源是相对紧张的,本发明实施例将手势识别的工作转移到服务端完成,从而能够减少本地资源的消耗。
图20是本发明另一个实施例的处理手势的过程的示意流程图。图20中所示的在终端上呈现的本地应用为word。并且,在本实施例中,客户端软件部署在终端,服务端软件部署在服务端。
2001,客户端软件2030根据用户针对在终端2000上呈现的本地应用的手势输入产生手势信号,该本地应用是在终端2000上运行的word。
可选地,作为一个实施例,用户在终端2000的显示界面2020上进行手势输入,画出n形曲线(表示字母“n”),该显示界面2020是触摸屏,该手势输入针对word。客户端软件2030获取该用户的手势输入并根据该手势输入产生手势信号。
2002,客户端软件2030向服务端软件2040发送该手势信号。
可选地,作为一个实施例,该客户端软件2030向服务端软件2040发送n形曲线的图像。
2003a和2003b,服务端软件2040识别该手势信号表示的手势。
具体地,在2003a,服务端软件2040将该n形曲线的图像发送到手势识别工具2050。在2003b,服务端软件2040获取该手势识别工具2050识别出的该n形曲线的图像表示的手势为字母“n”。且该手势识别工具2050安装在该服务端2010,对于终端2000来说,该手势识别工具2050是一种远程应用。
2004,服务端软件2040将该手势的标识信息发送给客户端软件2030。
可选地,作为一个实施例,该服务端软件2040将手势“n”的标识信息发送给终端的客户端软件2030。
2005,客户端软件2030将该手势的标识信息发送到文档管理系统2060。
可选地,作为一个实施例,该客户端软件2030将手势“n”的标识信息和该本地应用的类型是word发送到该文档管理系统2060。
2006,客户端软件2030获取该文档管理系统2060确定的该手势对应的该本地应用的应用响应。
具体地,文档管理系统2060中存储由用户预配臵的手势配臵文件,该手势配臵文件包括手势-应用响应的对应关系。文档管理系统2060查询其手势-应用响应的对应关系以确定该手势对应的该本地应用的应用响应,见表一所示。文档管理系统2060确定当应用为word时,手势“n”对应的应用响应为新建空白word文档。进而,客户端软件2030获取该应用响应为新建空白word文档。
2007a和2007b,客户端软件2030执行该应用响应并产生应用响应图像。
具体地,在2007a,客户端软件2030将新建空白word文档的应用响应通知word2070。在2007b,客户端软件2030获取该word2070执行该新建空白word文档的应用响应后产生的新的界面图像。
2008,客户端软件2030将该应用响应图像发送到终端2000的显示界面2020。
可选地,作为一个实施例,该客户端软件2030将该新的界面图像的应用响应图像发送到终端2000的显示界面2020。
2009,终端2000的显示界面2020显示该新的应用响应图像。
可选地,作为一个实施例,终端2000的显示界面2020显示该新的界面图像。
本发明实施例通过在服务端进行手势识别,这样能够针对本地应用进行手势响应提高了用户体验。
本发明实施例中,对于在终端上呈现的本地应用,用户在终端的本地应用上进行手势操作后,终端将手势信号传递到服务端,并通过安装在服务端的手势识别工具完成手势信号的识别工作,然后服务端将识别出的手势的标识信息返回给终端。终端根据用户预配臵的手势配臵文件作出相应的应用响应,从而能够提高用户体验。另一方面,由于传统的在终端本地的手势识别软件会消耗本地资源,而诸如手机、掌上电脑等移动终端的本地资源是相对紧张的,本发明实施例将手势识别的工作转移到服务端完成,从而能够减少本地资源的消耗。
应注意,本发明实施例中的手势配臵文件是由用户预配臵的,其中的手势-应用响应的对应关系可以由用户进行添加、编辑、删除等操作。并且,该手势配臵文件可以是一个文档,也可以是一个应用,其形式可以是多样的,本发明对此不作限定。
这样,本发明实施例中,对于相同的手势,不同的应用可以作出不同的响应。例如,如表一所示,对于手势“n”,若应用为浏览器,则执行响应为新建空白标签;若应用为word,则执行响应为新建空白word文档。作为一个实施例,如表一所示,若应用为浏览器,手势“g”执行的响应为打开谷歌标签页;手势“b”执行的响应为打开百度标签页。
图21是本发明一个实施例的服务端的框图。图21所示的服务端2100包括接收单元2101,识别单元2102,确定单元2103,运行单元2104和发送单元2105。
接收单元2101接收终端发送的手势信号,该手势信号针对在终端上呈现的远程应用,该远程应用在该服务端上运行。识别单元2102识别该手势信号表示的手势。确定单元2103确定该手势对应的该远程应用的应用响应。运行单元2104运行该远程应用并在该远程应用中执行该应用响应。发送单元2105将执行该应用响应产生的应用响应图像发送给终端。
本发明实施例通过在运行远程应用的服务端进行手势识别和相应的应用响应,并将应用响应图像发送给终端,这样能够针对远程应用进行手势响应,提高了用户体验。
服务端2100能够实现图2至图11的实施例中由服务端执行的各个过程,为避免重复,这里不再赘述。
可选地,作为一个实施例,确定单元2103具体用于根据手势配臵文件确定手势对应的该远程应用的应用响应,且该手势配臵文件包括手势-应用响应的对应关系。
可选地,作为另一个实施例,接收单元2101还用于接收终端发送的手势配臵文件,该手势配臵文件包括手势-应用响应的对应关系。
可选地,作为另一个实施例,发送单元2105还用于将手势的标识信息发送到文档管理系统。确定单元2103还用于获取该文档管理系统根据其手势配臵文件确定的该远程应用的应用响应,并且该手势配臵文件包括手势-应用响应的对应关系。
应注意,本发明实施例中的手势配臵文件是由用户预配臵的,其中的手势-应用响应的对应关系可以由用户进行添加、编辑、删除等操作。并且,该手势配臵文件可以是一个文档,也可以是一个应用,其形式可以是多样的,本发明对此不作限定。
本发明实施例中,应用虚拟化领域中的终端的操作对象是在该终端上呈现的远程应用且该远程应用在服务端上运行。由于在终端显示的只是服务端投递过来的界面图像,因此终端无法获知其操作对象是什么远程应用,进而无法使远程应用针对用户的手势输入作出相应的响应。但是服务端是可以识别出该远程应用的,所以只要服务端可以获知在终端的手势内容便可以针对该远程应用作出相应的正确的响应,随后服务端只要把该远程应用的应用响应图像投递到终端显示即可。这样本发明通过将用户在终端的手势传递到服务端的方式,将手势的识别以及应用响应等工作转移到服务端上实现,这便解决了终端因无法获知具体远程应用而无法针对手势进行应用响应的问题,最后只需将服务端的应用响应图像传递到终端显示即可。由于终端与服务端之间通信的高频与高速,使得用户感觉在执行手势输入后,在终端上呈现的远程应用便很快作出了精确的响应,与使用安装运行在终端的本地应用没有任何区别。另一方面,本发明通过将手势识别和应用响应的工作在服务端完成,从而能够减少终端本地的资源消耗。
图22是本发明另一个实施例的终端的框图。图22所示的终端2200包括生成单元2201,发送单元2202,接收单元2203和显示单元2204。
生成单元2201根据用户针对在终端上呈现的远程应用的手势输入产生手势信号,该远程应用在服务端上运行。发送单元2202向服务端发送该手势信号。接收单元2203接收服务端根据该手势信号确定的该远程应用的应用响应图像。显示单元2204显示该应用响应图像。
本发明实施例通过在运行远程应用的服务端进行手势识别和相应的应用响应,并将应用响应图像发送给终端,这样能够针对远程应用进行手势响应,提高了用户体验。
终端2200能够实现图2至图11的实施例中由终端执行的各个过程,为避免重复,这里不再赘述。
可选地,作为一个实施例,发送单元2202还用于向服务端发送手势配臵文件,该手势配臵文件包括手势-应用响应的对应关系。
应注意,本发明实施例中的手势配臵文件是由用户预配臵的,其中的手势-应用响应的对应关系可以由用户进行添加、编辑、删除等操作。并且,该手势配臵文件可以是一个文档,也可以是一个应用,其形式可以是多样的,本发明对此不作限定。
本发明实施例中,应用虚拟化领域中的终端的操作对象是在该终端上呈现的远程应用且该远程应用在服务端上运行。由于在终端显示的只是服务端投递过来的界面图像,因此终端无法获知其操作对象是什么远程应用,进而无法使远程应用针对用户的手势输入作出相应的响应。但是服务端是可以识别出该远程应用的,所以只要服务端可以获知在终端的手势内容便可以针对该远程应用作出相应的正确的响应,随后服务端只要把该远程应用的应用响应图像投递到终端显示即可。这样本发明通过将用户在终端的手势传递到服务端的方式,将手势的识别以及应用响应等工作转移到服务端上实现,这便解决了终端因无法获知具体远程应用而无法针对手势进行应用响应的问题,最后只需将服务端的应用响应图像传递到终端显示即可。由于终端与服务端之间通信的高频与高速,使得用户感觉在执行手势输入后,在终端上呈现的远程应用便很快作出了精确的响应,与使用安装运行在终端的本地应用没有任何区别。另一方面,本发明通过将手势识别和应用响应的工作在服务端完成,从而能够减少终端本地的资源消耗。
图23是本发明另一个实施例的服务端的框图。图23所示的服务端2300包括接收单元2301,识别单元2302和发送单元2303。
接收单元2301接收终端发送的手势信号,该手势信号针对在终端上呈现的本地应用,该本地应用在该终端上运行。识别单元2302识别该手势信号表示的手势。发送单元2303将该手势的标识信息发送给终端。
本发明实施例通过在服务端进行手势识别,这样能够针对本地应用进行手势响应提高了用户体验。
服务端2300能够实现图12至图20的实施例中由服务端执行的各个过程,为避免重复,这里不再赘述。
本发明实施例中,对于在终端上呈现的本地应用,用户在终端的本地应用上进行手势操作后,终端将手势信号传递到服务端,并通过安装在服务端的手势识别工具完成手势信号的识别工作,然后服务端将识别出的手势的标识信息返回给终端。终端根据用户预配臵的手势配臵文件作出相应的应用响应,从而能够提高用户体验。另一方面,由于传统的在终端本地的手势识别软件会消耗本地资源,而诸如手机、掌上电脑等移动终端的本地资源是相对紧张的,本发明实施例将手势识别的工作转移到服务端完成,从而能够减少本地资源的消耗。
图24是本发明另一个实施例的终端的框图。图24所示的终端2400包括生成单元2401,发送单元2402,接收单元2403,确定单元2404,执行单元2405和显示单元2406。
生成单元2401根据用户针对在终端上呈现的本地应用的手势输入产生手势信号,该本地应用在该终端山运行。发送单元2402向服务端发送该手势信号。接收单元2403接收服务端识别的该手势信号表示的手势的标识信息。确定单元2404确定该手势对应的该本地应用的应用响应。执行单元2405运行该本地应用并在该本地应用中执行该应用响应。显示单元2406显示执行该应用响应产生的应用响应图像。
本发明实施例通过在服务端进行手势识别,这样能够针对本地应用进行手势响应提高了用户体验。
终端2400能够实现图12至图20的实施例中由终端执行的各个过程,为避免重复,这里不再赘述。
可选地,作为一个实施例,确定单元2404具体用于根据手势配臵文件确定所述手势对应的所述本地应用的应用响应,所述手势配臵文件包括手势-应用响应的对应关系。
可选地,作为另一个实施例,发送单元2402还用于将该手势的标识信息发送到文档管理系统。确定单元2404还用于获取该文档管理系统根据其手势配臵文件确定的该手势对应的该本地应用的应用响应,该手势配臵文件包括手势-应用响应的对应关系。
应注意,本发明实施例中的手势配臵文件是由用户预配臵的,其中的手势-应用响应的对应关系可以由用户进行添加、编辑、删除等操作。并且,该手势配臵文件可以是一个文档,也可以是一个应用,其形式可以是多样的,本发明对此不作限定。
本发明实施例中,对于在终端上呈现的本地应用,用户在终端的本地应用上进行手势操作后,终端将手势信号传递到服务端,并通过安装在服务端的手势识别工具完成手势信号的识别工作,然后服务端将识别出的手势的标识信息返回给终端。终端根据用户预配臵的手势配臵文件作出相应的应用响应,从而能够提高用户体验。另一方面,由于传统的在终端本地的手势识别软件会消耗本地资源,而诸如手机、掌上电脑等移动终端的本地资源是相对紧张的,本发明实施例将手势识别的工作转移到服务端完成,从而能够减少本地资源的消耗。
图25是本发明另一个实施例的服务端的框图。图25的服务端2500包括处理器2501,存储器2502,接收电路2503和发送电路2504。
接收电路2503接收终端发送的手势信号,该手势信号针对在该终端上呈现的远程应用,该远程应用在服务端上运行。处理器2501识别该手势信号表示的手势,确定该手势对应的该远程应用的应用响应并执行该应用响应。发送电路2504将执行该应用响应产生的应用响应图像发送给终端。
本发明实施例通过在运行远程应用的服务端进行手势识别和相应的应用响应,并将应用响应图像发送给终端,这样能够针对远程应用进行手势响应,提高了用户体验。
服务端2500中的各个组件通过总线系统2505耦合在一起,其中总线系统2505除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见,在图25中将各种总线都标为总线系统2505。
上述本发明实施例揭示的方法可以应用于处理器2501中,或者由处理器2501实现。处理器2501可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器2501中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器2501可以是通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器2502,处理器2501读取存储器2502中的信息,结合其硬件完成上述方法的步骤。
服务端2500能够实现图2至图11的实施例中由服务端实现的各个过程,为避免重复,这里不再赘述。
可选地,作为一个实施例,处理器2501根据手势配臵文件确定该手势对应的该远程应用的应用响应,且该手势配臵文件包括手势-应用响应的对应关系。
可选地,作为另一个实施例,接收电路2503接收终端发送的手势配臵文件,该手势配臵文件包括手势-应用响应的对应关系。
可选地,作为另一个实施例,发送电路2504将手势的标识信息发送到文档管理系统。处理器2501获取该文档管理系统根据其手势配臵文件确定的该手势对应的该远程应用的应用响应,该手势配臵文件包括手势-应用响应的对应关系。
应注意,本发明实施例中的手势配臵文件是由用户预配臵的,其中的手势-应用响应的对应关系可以由用户进行添加、编辑、删除等操作。并且,该手势配臵文件可以是一个文档,也可以是一个应用,其形式可以是多样的,本发明对此不作限定。
本发明实施例中,应用虚拟化领域中的终端的操作对象是在该终端上呈现的远程应用且该远程应用在服务端上运行。由于在终端显示的只是服务端投递过来的界面图像,因此终端无法获知其操作对象是什么远程应用,进而无法使远程应用针对用户的手势输入作出相应的响应。但是服务端是可以识别出该远程应用的,所以只要服务端可以获知在终端的手势内容便可以针对该远程应用作出相应的正确的响应,随后服务端只要把该远程应用的应用响应图像投递到终端显示即可。这样本发明通过将用户在终端的手势传递到服务端的方式,将手势的识别以及应用响应等工作转移到服务端上实现,这便解决了终端因无法获知具体远程应用而无法针对手势进行应用响应的问题。由于终端与服务端之间通信的高频与高速,使得用户感觉在执行手势输入后,在终端上呈现的远程应用便很快作出了精确的响应,与使用安装运行在终端的本地应用没有任何区别。另一方面,本发明通过将手势识别和应用响应的工作在服务端完成,从而能够减少终端本地的资源消耗。
图26是本发明另一个实施例的终端的框图。图26的终端2600包括处理器2601,存储器2602,接收电路2603和发送电路2604。
发送电路2604向服务端发送手势信号。接收电路2603接收服务端根据该手势信号确定的远程应用的应用响应图像。处理器2601用于在发送电路2604之前根据用户针对在终端上呈现的远程应用的手势输入产生手势信号并在接收电路2603之后显示应用响应图像。该远程应用在服务端上运行。
本发明实施例通过在运行远程应用的服务端进行手势识别和相应的应用响应,并将应用响应图像发送给终端,这样能够针对远程应用进行手势响应,提高了用户体验。
服务端2600中的各个组件通过总线系统2605耦合在一起,其中总线系统2605除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见,在图26中将各种总线都标为总线系统2605。
上述本发明实施例揭示的方法可以应用于处理器2601中,或者由处理器2601实现。处理器2601可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器2601中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器2601可以是通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器2602,处理器2601读取存储器2602中的信息,结合其硬件完成上述方法的步骤。
终端2600能够实现图2至图11的实施例中由终端实现的各个过程,为避免重复,这里不再赘述。
可选地,作为一个实施例,发送电路2604向服务端发送手势配臵文件,该手势配臵文件包括手势-应用响应的对应关系。
应注意,本发明实施例中的手势配臵文件是由用户预配臵的,其中的手势-应用响应的对应关系可以由用户进行添加、编辑、删除等操作。并且,该手势配臵文件可以是一个文档,也可以是一个应用,其形式可以是多样的,本发明对此不作限定。
本发明实施例中,应用虚拟化领域中的终端的操作对象是在该终端上呈现的远程应用且该远程应用在服务端上运行。由于在终端显示的只是服务端投递过来的界面图像,因此终端无法获知其操作对象是什么远程应用,进而无法使远程应用针对用户的手势输入作出相应的响应。但是服务端是可以识别出该远程应用的,所以只要服务端可以获知在终端的手势内容便可以针对该远程应用作出相应的正确的响应,随后服务端只要把该远程应用的应用响应图像投递到终端显示即可。这样本发明通过将用户在终端的手势传递到服务端的方式,将手势的识别以及应用响应等工作转移到服务端上实现,这便解决了终端因无法获知具体远程应用而无法针对手势进行应用响应的问题。由于终端与服务端之间通信的高频与高速,使得用户感觉在执行手势输入后,在终端上呈现的远程应用便很快作出了精确的响应,与使用安装运行在终端的本地应用没有任何区别。另一方面,本发明通过将手势识别和应用响应的工作在服务端完成,从而能够减少终端本地的资源消耗。
图27是本发明另一个实施例的服务端的框图。图27的服务端2700包括处理器2701,存储器2702,接收电路2703和发送电路2704。
接收电路2703接收终端发送的手势信号,该手势信号针对在终端上呈现的本地应用,该本地应用在该终端上运行。处理器2701识别该手势信号表示的手势。发送电路2704将该手势的标识信息发送给终端。
本发明实施例通过在服务端进行手势识别,这样能够针对本地应用进行手势响应提高了用户体验。
服务端2700中的各个组件通过总线系统2705耦合在一起,其中总线系统2705除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见,在图中将各种总线都标为总线系统2705。
上述本发明实施例揭示的方法可以应用于处理器2701中,或者由处理器2701实现。处理器2701可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器2701中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器2701可以是通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器2702,处理器2701读取存储器2702中的信息,结合其硬件完成上述方法的步骤。
服务端2700能够实现图12至图20的实施例中由服务端实现的各个过程,为避免重复,这里不再赘述。
本发明实施例中,对于在终端上呈现的本地应用,用户在终端的本地应用上进行手势操作后,终端将手势信号传递到服务端,并通过安装在服务端的手势识别工具完成手势信号的识别工作,然后服务端将识别出的手势的标识信息返回给终端。终端根据用户预配臵的手势配臵文件作出相应的应用响应,从而能够提高用户体验。另一方面,由于传统的在终端本地的手势识别软件会消耗本地资源,而诸如手机、掌上电脑等移动终端的本地资源是相对紧张的,本发明实施例将手势识别的工作转移到服务端完成,从而能够减少本地资源的消耗。
图28是本发明另一个实施例的终端的框图。图28的终端2800包括处理器2801,存储器2802,接收电路2803和发送电路2804。
发送电路2804向服务端发送手势信号。接收电路2803接收服务端识别的该手势信号表示的手势的标识信息。处理器2801在发送电路2804之前根据用户针对在终端上呈现的本地应用的手势输入产生手势信号,在接收电路2803之后确定该手势对应的该本地应用的应用响应,在该本地应用中执行该应用响应,并显示执行该应用响应产生的应用响应图像。该本地应用在该终端上运行。
本发明实施例通过在服务端进行手势识别,这样能够针对本地应用进行手势响应提高了用户体验。
终端2800能够实现图12至图20的实施例中由终端执行的各个过程,为避免重复,这里不再赘述。
可选地,作为一个实施例,处理器2801根据手势配臵文件确定该手势对应的该本地应用的应用响应,该手势配臵文件包括手势-应用响应的对应关系。
可选地,作为另一个实施例,发送电路2804将该手势的标识信息发送到文档管理系统。处理器2801获取该文档管理系统根据其手势配臵文件确定的该手势对应的该本地应用的应用响应,该手势配臵文件包括手势-应用响应的对应关系。
应注意,本发明实施例中的手势配臵文件是由用户预配臵的,其中的手势-应用响应的对应关系可以由用户进行添加、编辑、删除等操作。并且,该手势配臵文件可以是一个文档,也可以是一个应用,其形式可以是多样的,本发明对此不作限定。
本发明实施例中,对于在终端上呈现的本地应用,用户在终端的本地应用上进行手势操作后,终端将手势信号传递到服务端,并通过安装在服务端的手势识别工具完成手势信号的识别工作,然后服务端将识别出的手势的标识信息返回给终端。终端根据用户预配臵的手势配臵文件作出相应的应用响应,从而能够提高用户体验。另一方面,由于传统的在终端本地的手势识别软件会消耗本地资源,而诸如手机、掌上电脑等移动终端的本地资源是相对紧张的,本发明实施例将手势识别的工作转移到服务端完成,从而能够减少本地资源的消耗。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装臵和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装臵和方法,可以通过其它的方式实现。例如,以上所描述的装臵实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装臵或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应所述以权利要求的保护范围为准。
Claims (20)
1.一种处理手势的方法,其特征在于,所述方法包括:
服务端接收终端发送的手势信号,所述手势信号针对在所述终端上呈现的远程应用,所述远程应用在所述服务端上运行;
所述服务端识别所述手势信号表示的手势;
所述服务端确定所述手势对应的所述远程应用的应用响应并在所述远程应用中执行所述应用响应;
所述服务端将执行所述应用响应产生的应用响应图像发送给所述终端。
2.根据权利要求1所述的方法,其特征在于,所述服务端确定所述手势对应的所述远程应用的应用响应,包括:
所述服务端根据手势配臵文件确定所述手势对应的所述远程应用的应用响应,所述手势配臵文件包括手势-应用响应的对应关系。
3.根据权利要求2所述的方法,其特征在于,所述方法还包括:
所述服务端接收所述终端发送的所述手势配臵文件。
4.根据权利要求1所述的方法,其特征在于,所述服务端确定所述手势对应的所述远程应用的应用响应,包括:
所述服务端将所述手势的标识信息发送到文档管理系统;
所述服务端获取所述文档管理系统根据手势配臵文件确定的所述手势对应的所述远程应用的应用响应,所述手势配臵文件包括手势-应用响应的对应关系。
5.一种处理手势的方法,其特征在于,所述方法包括:
终端根据用户针对在所述终端上呈现的远程应用的手势输入产生手势信号,所述远程应用在服务端上运行;
所述终端向所述服务端发送所述手势信号;
所述终端接收所述服务端根据所述手势信号产生的所述远程应用的应用响应图像;
所述终端显示所述应用响应图像。
6.根据权利要求5所述的方法,其特征在于,所述方法还包括:
所述终端向所述服务端发送手势配臵文件,所述手势配臵文件包括手势-应用响应的对应关系。
7.一种处理手势的方法,其特征在于,所述方法包括:
服务端接收终端发送的手势信号,所述手势信号针对在所述终端上呈现的本地应用,所述本地应用在所述终端上运行;
所述服务端识别所述手势信号表示的手势;
所述服务端将所述手势的标识信息发送给所述终端。
8.一种处理手势的方法,其特征在于,所述方法包括:
终端根据用户针对在所述终端上呈现的本地应用的手势输入产生手势信号,所示本地应用在所述终端上运行;
所述终端向服务端发送所述手势信号;
所述终端接收所述服务端识别的所述手势信号表示的手势的标识信息;
所述终端确定所述手势对应的所述本地应用的应用响应;
所述终端在所述本地应用中执行所述应用响应并显示执行所述应用响应产生的应用响应图像。
9.根据权利要求8所述的方法,其特征在于,所述终端确定所述手势对应的所述本地应用的应用响应,包括:
所述终端根据手势配臵文件确定所述手势对应的所述本地应用的应用响应,所述手势配臵文件包括手势-应用响应的对应关系。
10.根据权利要求8所述的方法,其特征在于,所述终端确定所述手势对应的所述本地应用的应用响应,包括:
所述终端将所述手势的标识信息发送到文档管理系统;
所述终端获取所述文档管理系统根据手势配臵文件确定的所述手势对应的所述本地应用的应用响应,所述手势配臵文件包括手势-应用响应的对应关系。
11.一种服务端,其特征在于,所述服务端包括:
接收单元,用于接收终端发送的手势信号,所述手势信号针对在所述终端上呈现的远程应用,所述远程应用在所述服务端上运行;
识别单元,用于识别所述手势信号表示的手势;
确定单元,用于确定所述手势对应的所述远程应用的应用响应;
运行单元,用于运行所述远程应用并在所述远程应用中执行所述应用响应;
发送单元,用于将执行所述应用响应产生的应用响应图像发送给所述终端。
12.根据权利要求11所述的服务端,其特征在于,所述确定单元具体用于:
根据手势配臵文件确定所述手势对应的所述远程应用的应用响应,所述手势配臵文件包括手势-应用响应的对应关系。
13.根据权利要求12所述的服务端,其特征在于,所述接收单元还用于:
接收所述终端发送的所述手势配臵文件。
14.根据权利要求11所述的服务端,其特征在于,
所述发送单元,还用于将所述手势的标识信息发送到文档管理系统;
所述确定单元,还用于获取所述文档管理系统根据手势配臵文件确定的所述手势对应的所述远程应用的应用响应,所述手势配臵文件包括手势-应用响应的对应关系。
15.一种终端,其特征在于,所述终端包括:
生成单元,用于根据用户针对在所述终端上呈现的远程应用的手势输入产生手势信号,所述远程应用在服务端上运行;
发送单元,用于向所述服务端发送所述手势信号;
接收单元,用于接收所述服务端根据所述手势信号产生的所述远程应用的应用响应图像;
显示单元,用于显示所述应用响应图像。
16.根据权利要求15所述的终端,其特征在于,所述发送单元还用于:
向所述服务端发送手势配臵文件,所述手势配臵文件包括手势-应用响应的对应关系。
17.一种服务端,其特征在于,所述服务端包括:
接收单元,用于接收终端发送的手势信号,所述手势信号针对在所述终端上呈现的本地应用,所述本地应用在所述终端上运行;
识别单元,用于识别所述手势信号表示的手势;
发送单元,用于将所述手势的标识信息发送给所述终端。
18.一种终端,其特征在于,所述终端包括:
生成单元,用于根据用户针对在所述终端上呈现的本地应用的手势输入产生手势信号,所述本地应用在所述终端上运行;
发送单元,用于向服务端发送所述手势信号;
接收单元,用于接收所述服务端识别的所述手势信号表示的手势的标识信息;
确定单元,用于确定所述手势对应的所述本地应用的应用响应;
执行单元,用于运行所述本地应用并在所述本地应用中执行所述应用响应;
显示单元,用于显示执行所述应用响应产生的应用响应图像。
19.根据权利要求18所述的终端,其特征在于,所述确定单元,具体用于:
根据手势配臵文件确定所述手势对应的所述本地应用的应用响应,所述手势配臵文件包括手势-应用响应的对应关系。
20.根据权利要求18所述的终端,其特征在于,
所述发送单元,还用于将所述手势的标识信息发送到文档管理系统;
所述确定单元,还用于获取所述文档管理系统根据手势配臵文件确定的所述手势对应的所述本地应用的应用响应,所述手势配臵文件包括手势-应用响应的对应关系。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310400326.9A CN104423556A (zh) | 2013-09-05 | 2013-09-05 | 处理手势的方法、服务端及终端 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310400326.9A CN104423556A (zh) | 2013-09-05 | 2013-09-05 | 处理手势的方法、服务端及终端 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN104423556A true CN104423556A (zh) | 2015-03-18 |
Family
ID=52972845
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310400326.9A Pending CN104423556A (zh) | 2013-09-05 | 2013-09-05 | 处理手势的方法、服务端及终端 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104423556A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105825170A (zh) * | 2016-03-10 | 2016-08-03 | 浙江生辉照明有限公司 | 往复性手势的检测方法和装置 |
CN108984238A (zh) * | 2018-05-29 | 2018-12-11 | 北京五八信息技术有限公司 | 应用程序的手势处理方法、装置及电子设备 |
CN116069433A (zh) * | 2023-03-08 | 2023-05-05 | 山东乾云启创信息科技股份有限公司 | 基于虚拟桌面基础架构和动作识别的图像漂移方法及系统 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101950222A (zh) * | 2010-09-28 | 2011-01-19 | 深圳市同洲电子股份有限公司 | 一种用于数字电视接收终端的手写输入方法、装置及系统 |
US20120092277A1 (en) * | 2010-10-05 | 2012-04-19 | Citrix Systems, Inc. | Touch Support for Remoted Applications |
CN102523502A (zh) * | 2011-12-15 | 2012-06-27 | 四川长虹电器股份有限公司 | 智能电视交互系统及交互方法 |
CN102968612A (zh) * | 2012-07-27 | 2013-03-13 | 中国工商银行股份有限公司 | 一种银行身份识别方法及系统 |
CN102981755A (zh) * | 2012-10-24 | 2013-03-20 | 深圳市深信服电子科技有限公司 | 基于远程应用的手势控制方法及系统 |
-
2013
- 2013-09-05 CN CN201310400326.9A patent/CN104423556A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101950222A (zh) * | 2010-09-28 | 2011-01-19 | 深圳市同洲电子股份有限公司 | 一种用于数字电视接收终端的手写输入方法、装置及系统 |
US20120092277A1 (en) * | 2010-10-05 | 2012-04-19 | Citrix Systems, Inc. | Touch Support for Remoted Applications |
CN102523502A (zh) * | 2011-12-15 | 2012-06-27 | 四川长虹电器股份有限公司 | 智能电视交互系统及交互方法 |
CN102968612A (zh) * | 2012-07-27 | 2013-03-13 | 中国工商银行股份有限公司 | 一种银行身份识别方法及系统 |
CN102981755A (zh) * | 2012-10-24 | 2013-03-20 | 深圳市深信服电子科技有限公司 | 基于远程应用的手势控制方法及系统 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105825170A (zh) * | 2016-03-10 | 2016-08-03 | 浙江生辉照明有限公司 | 往复性手势的检测方法和装置 |
CN105825170B (zh) * | 2016-03-10 | 2019-07-02 | 浙江生辉照明有限公司 | 往复性手势的检测方法和装置 |
CN108984238A (zh) * | 2018-05-29 | 2018-12-11 | 北京五八信息技术有限公司 | 应用程序的手势处理方法、装置及电子设备 |
CN108984238B (zh) * | 2018-05-29 | 2021-11-09 | 北京五八信息技术有限公司 | 应用程序的手势处理方法、装置及电子设备 |
CN116069433A (zh) * | 2023-03-08 | 2023-05-05 | 山东乾云启创信息科技股份有限公司 | 基于虚拟桌面基础架构和动作识别的图像漂移方法及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109542399B (zh) | 软件开发方法、装置、终端设备及计算机可读存储介质 | |
CN104360990A (zh) | 一种编辑内容的方法 | |
CN104407787A (zh) | 一种终端 | |
CN111967297B (zh) | 图像的语义分割方法、装置、电子设备及介质 | |
US20210326151A1 (en) | Methods, devices and computer-readable storage media for processing a hosted application | |
CN104423556A (zh) | 处理手势的方法、服务端及终端 | |
CN115114219B (zh) | 一种pci-e拓扑方法、装置、设备及存储介质 | |
CN113110829A (zh) | 多ui组件库数据处理方法及装置 | |
CN110780955B (zh) | 一种用于处理表情消息的方法与设备 | |
CN108334481A (zh) | 文档处理方法以及装置 | |
CN105426322A (zh) | 一种数据的预取方法及装置 | |
EP3992774A1 (en) | Method and device for implementing dot product operation, electronic device, and storage medium | |
CN102945122B (zh) | 为移动终端提供适配的阅读界面的方法以及客户端 | |
CN115344315B (zh) | 小程序页面的皮肤切换方法、装置和电子设备 | |
CN104991695A (zh) | 一种信息处理方法及电子设备 | |
CN104750401A (zh) | 一种触控方法、相关装置以及终端设备 | |
CN111177479A (zh) | 获取关系网络图中节点的特征向量的方法以及装置 | |
CN114880020A (zh) | 软件开发工具包管理方法、相关装置及计算机程序产品 | |
CN111782633B (zh) | 数据处理方法、装置及电子设备 | |
CN114741294A (zh) | 一种页面的调试方法、装置、设备及存储介质 | |
CN113327194A (zh) | 图像风格迁移方法、装置、设备和存储介质 | |
CN113138760A (zh) | 一种页面生成方法、装置、电子设备和介质 | |
CN112564924A (zh) | 计算机扩展卡及区块链终端设备 | |
CN116661951B (zh) | 镜像文件处理方法、装置、电子设备及存储介质 | |
CN113342413B (zh) | 用于处理组件的方法、装置、设备、介质和产品 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20150318 |
|
RJ01 | Rejection of invention patent application after publication |