手势操作物件与视窗的方法及系统
技术领域
本发明涉及一种显示装置的信息处理方法,尤其涉及一种手势操作物件与视窗的方法及系统。
背景技术
目前市面上各种手势操作显示屏的电子装置越来越多,人们也越来越接受通过手势来与电子装置进行交互输入。以常见的便携式电子装置为例,应用程序或是资料文档是以一个图标的方式显示于画面上,使用者透过单击达成选取,双击达成启动程序或是开启资料。
但这样的操作方式不够直观,用户在点击或双击用以启动程序或开启资料时,甚至需要花费时间等待程序的启动或资料的加载。现有的显示装置已经可以提供利用两个手指缩放图片的效果。而且目前在使用者界面中一般将程序、资料或资料夹通过功能图标的显示。因此为增加用户体验,提高显示装置的操作更加直观。需要通过控制使用者界面上的功能图标进而直观的控制功能图标对应程序或资料的开启或关闭。另外,手势操作的显示技术也越来越多的应用于大型显示装置中,进而需要更多的方式来控制不同大小荧屏上的物件和视窗。例如允许用手掌或其他任何标记物来操作。
发明内容
本发明提供了一种手势操作物件与视窗的方法及系统,可允许用户利用较直观的手势操作物件与视窗,增加了用户体验。
为了实现上述目的,本发明提供了一种手势操作物件与视窗的方法,其步骤为:
步骤一,在显示屏上确定被选物件的操作范围;
步骤二,检测用户的开合手势;
步骤三,根据所述开合手势,在所述操作范围上设定第一标记点和第二标记点;
步骤四,判断所述第一标记点和第二标记点之间的距离变化,同时在所述第一标记点和第二标记点之间生成视窗;
步骤五,所述第一标记点和第二标记点远离或靠近,操作所述被选物件到所述视窗中,其中,操作所述被选物件到所述视窗中包括在所述视窗中打开被选物件、转移所述被选物件到所述视窗、打包压缩所述被选物件到所述视窗或转移并打包压缩所述被选物件到所述视窗。
较佳的,在所述的手势操作物件与视窗的方法中,所述开合手势通过两手指或两手掌完成,所述被选物件包括文件、应用程序或文件夹。
较佳的,在所述的手势操作物件与视窗的方法中,所述步骤一还包括:
在显示屏上显示多个物件;
检测用户的圈画手势;
根据所述圈画手势,在显示屏上确定一轨迹曲线;
根据该轨迹曲线包围的每个物件的面积来标识出被选物件,其中,被包围面积等于或大于一半的物件被标识为被选物件。
较佳的,在所述的手势操作物件与视窗的方法中,所述步骤一还包括:
在显示屏上显示多个物件;
检测用户的点击手势;
根据所述点击手势,在显示屏上设定第三标记点和第四标记点;
以所述第三标记点和第四标记点为对角线端点选取一矩形区域,根据矩形区域覆盖的每个物件的面积来标识出被选物件,其中,被覆盖面积等于或大于一半的物件被标识为被选物件。
较佳的,在所述的手势操作物件与视窗的方法中,在显示屏上显示第一标记点和第二标记点,在所述步骤三中,分别在所述操作范围的对角区域显示第一标记点和第二标记点。
较佳的,在所述的手势操作物件与视窗的方法中,所述视窗生成之后,所述视窗可随第一标记点和第二标记点的靠近或远离而缩放。
较佳的,在所述的手势操作物件与视窗的方法中,在所述步骤五中,当所述第一标记点和第二标记点远离,在所述视窗中打开被选物件,若所述被选物件为文件,在所述视窗中开启该文件对应程序并加载该文件内容;
若所述被选物件为应用程序,在所述视窗中开启该应用程序;
若所述被选物件为资料夹,在所述视窗中显示该资料夹内的所有档案。
较佳的,在所述的手势操作物件与视窗的方法中,在所述步骤五中,所述第一标记点和第二标记点远离,在所述视窗中打开被选物件步骤之后,该方法还包括,当所述第一标记点和第二标记点靠近到第一距离后,关闭所述视窗,同时关闭所述被选物件,其中所述第一距离根据显示屏的尺寸而定。
较佳的,在所述的手势操作物件与视窗的方法中,在所述步骤五中,当所述第一标记点和第二标记点靠近,转移所述被选物件到所述视窗,所述视窗显示为一文件夹图标;或打包压缩所述被选物件到所述视窗,所述视窗显示为一压缩档图标;或转移并打包压缩所述被选物件到所述视窗,所述视窗在转移过程中显示为一文件夹图标,在打包压缩过程中显示为一压缩档图标。
本发明还提供了一种手势操作物件与视窗的系统,包含以下模块:
选取模块,用于在显示屏上确定被选物件的操作范围;
侦测模块,用于检测用户的开合手势;
跟踪模块,用于根据所述开合手势,在所述操作范围上设定第一标记点和第二标记点;
处理模块,用于判断所述第一标记点和第二标记点之间的距离变化,同时在所述第一标记点和第二标记点之间生成视窗;
执行模块,用于所述第一标记点和第二标记点远离或靠近,操作所述被选物件到所述视窗中,其中,操作所述被选物件到所述视窗中包括在所述视窗中打开被选物件、转移所述被选物件到所述视窗、打包压缩所述被选物件到所述视窗或转移并打包压缩所述被选物件到所述视窗。
与现有技术相比,通过检测用户的开合手势,根据用户的开合手势在显示屏上对应设定第一标记点和第二标记点。并通过第一标记点和第二标记点的远离和靠近,对所选物件和视窗进行操作,进而实现了对所选物件与视窗的直观控制,提高了用户体验度。
附图说明
图1为本发明一较佳实施例手势操作物件与视窗的方法流程示意图;
图2a、2b和2c为本发明一较佳实施例打开和关闭文件示意图;
图3a和3b为本发明一较佳实施例打开文件夹示意图;
图4a、4b、4c、4d和4e为本发明一较佳实施例对多个资料操作示意图。
具体实施方式
为使对本发明的目的、构造、特征、及其功能有进一步的了解,兹配合实施例详细说明如下。
如图1所示,为本发明一较佳实施例手势操作物件与视窗的方法流程图,其步骤为:
步骤S1,在显示屏上确定被选物件的操作范围。所述被选物件包括文件、应用程序或文件夹。所述被选物件在显示屏上显示为功能图标。即此步骤S1为使用者在显示屏上选取其预操作的功能图标,并且使用者可以根据个人需要而选取多个功能图标。根据使用者的选择,在显示屏上标识出使用者选取的图标,其中,在显示屏上标识的被选图标的操作范围一般大于被选图标本身的面积,即在显示屏上标识出了被选物件的操作范围,从而便于使用者后续对被选图标的操控。进一步的,使用者在显示屏上选取物件通过手势完成。使用者只需做出相应手势即可,此物件的选取过程通过手势侦测技术(Gesture detection)来实现。即在显示装置内预存不同手势对应的不同操作指令,当侦测到使用者相应的手势后,在显示屏上确定与该手势对应的操作。上述方式适用于大型显示屏幕的装置中。另外,使用者也可以通过触控技术实现物件的选取。使用者通过手指或手掌直接与显示屏接触,并通过在显示屏上滑动或点击完成物件的选取。优选的,在本实施例中,在显示屏上确定被选物件的操作范围还包括:首先,在显示屏上显示多个物件,所述物件在显示屏上显示为功能图标,所述物件为文件、应用程序或文件夹。目前的显示装置一般都可将应用程序、资料或资料夹通过功能图标的形式显示在显示屏上。使用者通过操作显示屏上的功能图标来启动应用程序或加载资料或资料夹内容。其次,检测用户的圈画手势;根据所述圈画手势,在显示屏上确定一轨迹曲线。实时检测用户的运动手势,当检测到使用者的圈画手势后,根据圈画手势,在显示屏上确定一轨迹曲线。其中所述圈画手势可以通过手指或手掌完成。在显示装置中预存储圈画手势判断条件,当侦测到使用者的运动手势符合存储的圈画手势的判断条件,则根据使用者的圈画手势在显示屏上对应生成轨迹点,将所述轨迹点连接为一条轨迹曲线。从而实现了将使用者的圈画手势映射到显示屏上的过程,增加了用户体验度。例如所述圈画手势通过一手指完成,当手指在显示屏前划过后,在显示屏上记录下与该手指划过动作相匹配的轨迹曲线。最后,根据该轨迹曲线包围的每个物件的面积来标识出被选物件,其中,被包围面积等于或大于一半的物件被标识为被选物件。即在显示屏上显示为轨迹曲线圈画出的功能图标作为被选图标,当轨迹曲线包围面积大于或等于一半的功能图标作为被选图标。与现有技术中点击选取功能图标相比,通过该方法还可以实现在显示屏上选取多个功能图标,并且该方法可以使用户在操作中更加直观生动,例如,使用者仅需要通过手指在显示屏前进行圈画即可选取图标,有效的提高了用户体验度。
在本发明另一较佳实施例中,还可以根据与显示屏的两个标记点进行选取功能图标。该实施例仅以触控显示屏为例,但并不局限于此,当所述显示屏能够侦测识别出使用者不接触显示屏的点击手势时,也可以采用本实施例的选取方法。首先,在显示屏上显示多个物件,即在触控显示屏上显示多个功能图标,所述功能图标为文件、应用程序或文件夹。其次,检测用户的点击手势;根据所述点击手势,在显示屏上设定第三标记点和第四标记点。例如,在触控显示屏上通过两个手指同时点击,在显示屏对应设定两个标记点。最后,以所述第三标记点和第四标记点为对角线端点选取一矩形区域,根据矩形区域覆盖的每个物件的面积来标识出被选物件,其中,被覆盖面积等于或大于一半的物件被标识为被选物件。当确定第三标记点和第四标记点之后,以第三标记点和第四标记点为对角线端点,以平行于显示屏的边框为周长形成一矩形区域。该矩形区域覆盖到的每个物件的面积来标识出被选物件,即在显示屏上覆盖到的功能图标作为被选图标,以该矩形区域覆盖面积等于或大于一半的功能图标作为被选图标。若第三标记点和第四标记点同时落在同一个功能图标上,则仅选中该功能图标。需要说明的,所述的点击手势可以通过手指完成,也可为通过用于触控显示屏的触控笔点击完成,或者也可以通过用户的手掌完成,只要能够在触控显示屏上实现触控即可。
步骤S2,检测用户的开合手势。所述开合手势通过两手指或两手掌完成,例如,用户两手指的拉伸、捏合动作或用户两手掌靠近和远离动作。经过步骤S1在显示屏上确定被选物件的操作范围,即在显示屏上确定被选图标可允许操作范围后,实时检测用户的运动手势。在显示装置预存储开合手势的判断条件,当检测到用户的运动手势符合条件,即确定为开合手势,并将此手势作为后续的操作指令。若检测到的用户运动手势不符合判断条件,则不执行后续操作。例如,所述开合手势为两手指的拉伸或捏合动作。当只检测到一个手指的点击手势,则不执行后续步骤,同时取消上述步骤S1被选图标的标记,进行被选图标的重新选取。当且仅当检测到得用户运动手势为两手指拉伸或捏合动作时,才执行步骤S3。
步骤S3,根据所述开合手势,在所述操作范围上设定第一标记点和第二标记点。在上述步骤S2检测到用户的开合手势之后,在显示屏上已经确定的被选物件的操作范围上设定第一标记点和第二标记点。所述第一标记点和第二标记点可在显示屏上显示,需要说明的,所述第一标记点和第二标记点的设定,可通过提前预定义完成,只有在接收到开合手势这个操作指令后才在显示屏上作出第一标记点和第二标记点的设定响应。另外,所述第一标记点和和第二标记点的设定也可直接模拟用户的开合手势,通过手势侦测方式记录下用户开合手势,并通过解析在显示屏上再现用户的开合手势。另外还可以通过触控显示技术实现在显示屏上即时显示用户开合手势,所述第一标记点和第二标记点分别对应于触控显示屏上的两个触控点。通过该两个触控点来再现用户开合手势。较佳的,分别在所述被选图标的操作范围的对角区域显示第一标记点和第二标记点。并且为了进一步增加生动感,可将第一标记点和第二标记点做成手掌的图形。所述第一标记点和第二标记点在所述被选图标的操作范围上的设定与用户的开合手势相对应,即所述第一标记点和第二标记点随开合手势滑动,并且能够动态的反应出用户的开合手势。例如,所述开合手势为用户两手掌拉伸,则显示屏上的被选图标的对角区域设定第一标记点和第二标记点,同时根据用户的手掌拉伸手势,第一标记点和第二标记点沿被选图标对角线反方向进行滑动。或所述开合手势为两只手指捏合,第一标记点和第二标记点沿被选图标对角线向中心滑动。
步骤S4,判断所述第一标记点和第二标记点之间的距离变化,同时在所述第一标记点和第二标记点之间生成视窗。在上述步骤S3中,所述第一标记点和第二标记点随用户开合手势进行滑动之后,此步骤进一步跟踪监测所述第一标记点和第二标记点之间的距离变化,当第一标记点和第二标记点之间距离发生变化后,同时在所述第一标记点和第二标记点之间生成视窗。结合步骤S3和S4,从而实现了根据用户的开合手势,在显示屏中第一标记点和第二标记点之间动态生成视窗。从而让使用者错觉的认为所述视窗的生成是通过其开合手势完成。增加了用户即时体验感。较佳的,所述视窗生成之后,所述视窗可随第一标记点和第二标记点的靠近或远离而缩放。即所述第一标记点和第二标记点之间的间距缩小,或所述第一标记点和第二标记点之间的间距扩大,所述视窗相应的进行缩小或扩大。例如,所述第一标记点和第二标记点分别对应于使用者的拇指和食指,当使用者拇指和食指拉伸时,在两手指之间打开视窗;当使用者拇指和食指靠近捏合时,在使用者拇指和食指之间的显示屏上生成视窗。
步骤S5,所述第一标记点和第二标记点远离或靠近,操作所述被选物件到所述视窗中,其中,操作所述被选物件到所述视窗中包括在所述视窗中打开被选物件、转移所述被选物件到所述视窗、打包压缩所述被选物件到所述视窗或转移并打包压缩所述被选物件到所述视窗。在本发明一具体实施例中,所述第一标记点和第二标记点远离,在所述视窗中打开被选物件。例如,若所述被选物件为文件,即所述被选图标对应于文件,以所述第一标记点和第二标记点为对角线端点生成视窗,在所述视窗中开启该文件对应程序并加载该文件内容。若所述被选物件为应用程序,在所述视窗中开启该应用程序;若所述被选物件为资料夹,在所述视窗中显示该资料夹内的所有档案。进一步的,在所述第一标记点和第二标记点远离,在所述视窗中打开被选物件步骤之后,当所述第一标记点和第二标记点靠近到第一距离后,关闭所述视窗,同时关闭所述被选物件,即当第一标记点和第二标记点之间的距离小于第一距离这一下限阀值后,关闭所述视窗,同时关闭所述被选的功能图标,其中所述第一距离根据显示屏的尺寸而定。在本发明另一具体实施例中,所述第一标记点和第二标记点靠近,转移所述被选物件到所述视窗,所述视窗显示为一文件夹图标;或打包压缩所述被选物件到所述视窗,所述视窗显示为一压缩档图标;或转移并打包压缩所述被选物件到所述视窗,所述视窗在转移过程中显示为一文件夹图标,在打包压缩过程中显示为一压缩档图标。
为了更清楚的描述步骤S4和步骤S5,结合本发明一较佳实施例及其附图进行详细解释。如图2a和2b所示,图中圆形分别为第一标记点201和第二标记点203。其中,第一标记点201和第二标记点203是根据使用者的开合手势对应设定而成。本实施例中所述使用者的开合手势通过两手指来完成。若所述被选物件对应于第一文件202,所述第一标记点201和第二标记点203都设定于第一文件202的范围上。所述第一文件202的范围为所述第一文件202被标识出的操作范围。其中,所述操作范围大于或等于所述第一文件202的图标面积,从而便于使用者的后续操作。所述第一标记点201和第二标记点203之间展开,即第一标记点201和第二标记点203之间的间距增大,第一标记点201和第二标记点203都向显示屏的边框移动。进一步更具体的,例如,所述第一标记点201和第二标记点203分别设定于第一文件202的两个对角区域,第一标记点201和第二标记点203分别朝相反方向拉开,即第一标记点201和第二标记点203都朝远离第一文件202中心的方向移动,第一标记点201和第二标记点203之间的距离增大。当所述第一标记点201和第二标记点203之间拉开一定距离后,分别以所述第一标记点201和第二标记点203的当前位置作为对角端点,生成第一视窗209,第一视窗209是以第一标记点201和第二标记点203的当前位置的连线作为对角线的矩形界面,同时在第一视窗209中启动第一文件202对应程序并加载第一文件202的内容。开启的第一视窗209的大小等于第一标记点201和第二标记点203拉开的范围,并且第一视窗209的大小还随着第一标记点201和第二标记点203的继续移动而扩大,直至调整到使用者满意的尺寸后,使用者的手指离开显示屏,第一标记点201和第二标记点203消失,第一视窗209保持不变。如图2c所示,若使用者欲关闭第一文件202,则将第一标记点201和第二标记点203分别设定于第一视窗209的对角区域,使用者通过第一标记点201和第二标记点203收缩即可关闭,即第一标记点201和第二标记点203都向第一视窗209中心滑动,当所述第一标记点201和第二标记点203之间的间距小于一定数值之后,则关闭第一文件202同时关闭第一视窗209。若所述被选图标对应于第一应用程序206,所述第一标记点201和第二标记点203分别设定于第一应用程序206的两个对角区域,所述第一标记点201和第二标记点203分别朝相反方向拉开,所述第一标记点201和第二标记点203之间的间距增大,当所述第一标记点201和第二标记点203之间的间距增大到一定数值后,所述间距增大到的数值根据所述显示屏的尺寸而定,不同的显示屏对应不同的阀值。则生成新视窗,并该新视窗中开启第一应用程序206。当使用者预关闭第一应用程序206时,使用者将第一标记点201和第二标记点203分别设定于已开启的视窗的对角区域,同时将第一标记点201和第二标记点203朝已开启视窗的中心移动,即所述第一标记点201和第二标记点203之间收缩,当所述第一标记点201和第二标记点203之间的间距缩小到一定值后,则关闭已开启视窗,同时关闭所述已启动的第一应用程序206。
如图3a和3b所示,图中圆形仍为第一标记点201和第二标记点203。第一标记点201和第二标记点203仍以使用者的开合手势为指令而设定,其中,所述使用者的开合手势通过两手指而完成。若所述被选图标对应于第一资料夹204,所述第一标记点201和第二标记点203分别设定于第一文件夹204的两个对角区域上,第一标记点201和第二标记点203分别朝相反方向拉开,即第一标记点201和第二标记点203都朝远离第一文件夹204中心的方向移动,第一标记点201和第二标记点203之间的距离增大。当所述第一标记点201和第二标记点203之间拉开一定距离后,分别以所述第一标记点201和第二标记点203的当前位置作为对角端点,生成第二视窗211,第二视窗211是以第一标记点201和第二标记点203的当前位置的连线作为对角线的矩形界面,在所述第二视窗211中显示第一资料夹204内的第三文件212和第四文件210,第二视窗211的大小等于第一标记点201和第二标记点203拉开的范围。同理,当使用者预关闭第一文件夹211时,使用者将第一标记点201和第二标记点203分别设定于已开启的视窗的对角区域,同时将第一标记点201和第二标记点203朝已开启视窗的中心移动,即所述第一标记点201和第二标记点203之间收缩,当所述第一标记点201和第二标记点203之间的间距缩小到一定值后,所述间距缩小到的数值根据所述显示屏的尺寸而定,不同的显示屏对应不同的阀值,则关闭已开启的第二视窗211,同时关闭所述已启动的第一文件夹204。
如图4a和4b所示,所述被选图标213包括多个功能图标,所述被选图标213对应于第一文件202、第一文件夹204和第一应用程序206,图中圆形仍为第一标记点201和第二标记点203。所述第一标记点201和第二标记点203分别设定于所选图标213的范围的两个对角区域上,所述第一标记点201和第二标记点203都向所选图标213中心滑动,当所述第一标记点201和第二标记点203之间的间距小于第一数值之后,其中所述第一数值根据具体显示屏而定,不同尺寸的显示屏对应不同的第一数值,在所述显示屏上生成并弹出第三文件夹214。如图4c所示,使用者的开合手势结束后,第一标记点201和第二标记点203消失,同时将所述被选图标213中所有功能图标放入到第三文件夹214中。即所述第三文件夹214收纳所选取的第一文件202、第一文件夹204和第一应用程序206;如图4d和4e所示,当在显示屏上生成第三文件夹214后,第一标记点201和第二标记点203之间的距离进一步缩小,当第一标记点201和第二标记点203之间的距离小于第二数值后,其中所述第二数值小于所述的第一数值,所述第三文件夹214在显示屏上显示为一圆形图标215,同时将第三文件夹214压缩为压缩文档216。当第一标记点201和第二标记点203消失,同时在显示屏上显示压缩文档216。
在本发明的另一较佳实施例中,结合图4a、4d和4e所示,若被选图标为单个功能图标,第一标记点201和第二标记点203靠近时,在上述操作过程中,当所述第一标记点201和第二标记点203靠近到一第三数值后,也可以无需生成第三文件夹214,而直接将所选取的功能图标直接压缩为一压缩文档。当第一标记点201和第二标记点203消失,同时在显示屏上显示该压缩文档。
本发明还提供了一种手势操作物件与视窗的系统,包含以下模块:选取模块、侦测模块、跟踪模块、处理模块和执行模块。其中,所述选取模块,用于在显示屏上确定被选物件的操作范围;所述侦测模块,用于检测用户的开合手势;所述跟踪模块,用于根据所述开合手势,在所述操作范围上设定第一标记点和第二标记点;所述处理模块,用于判断所述第一标记点和第二标记点之间的距离变化,同时在所述第一标记点和第二标记点之间生成视窗;所述执行模块,用于所述第一标记点和第二标记点远离或靠近,操作所述被选物件到所述视窗中,其中,操作所述被选物件到所述视窗中包括在所述视窗中打开被选物件、转移所述被选物件到所述视窗、打包压缩所述被选物件到所述视窗或转移并打包压缩所述被选物件到所述视窗。所述显示屏可显示多个功能图标。所述选取模块可允许用户在显示屏上选取至少一个功能图标;所述侦测模块可检测用户开合手势,例如,所述开合手势为两手掌的拉伸或靠近。所述跟踪模块允许用户通过开合手势,并将该开合手势作为操作指令,将设定于显示屏上的第一标记点和第二标记点进行拉开和拉近。所述处理模块根据第一标记点和第二标记点的靠近和远离,同时在第一标记点和第二标记点之间生成视窗。所述执行模块在上述处理模块生成的视窗中执行对所选物件进行操作,相对于现有技术中通过点击或双击功能图标来开启程序或加载资料的方法,该系统实现了对所选图标对应的程序或资料的直观控制操作。增加了用户体验。并且当被选图标为多个功能图标时,在显示屏上开启或加载与所选功能图标对应数量的操作视窗。从而实现了同时打开多个功能图标的功能。与现有技术相比,通过检测用户的开合手势,根据用户的开合手势在显示屏上对应设定第一标记点和第二标记点。并通过第一标记点和第二标记点的远离和靠近,对所选物件和视窗进行操作,进而实现了对所选物件与视窗的直观控制,提高了用户体验度。
本发明已由上述相关实施例加以描述,然而上述实施例仅为实施本发明的范例。必需指出的是,已揭露的实施例并未限制本发明的范围。相反地,在不脱离本发明的精神和范围内所作的更动与润饰,均属本发明的专利保护范围。