CN103294197A - 基于手势操作实现终端遥控的方法、终端 - Google Patents

基于手势操作实现终端遥控的方法、终端 Download PDF

Info

Publication number
CN103294197A
CN103294197A CN2013101949828A CN201310194982A CN103294197A CN 103294197 A CN103294197 A CN 103294197A CN 2013101949828 A CN2013101949828 A CN 2013101949828A CN 201310194982 A CN201310194982 A CN 201310194982A CN 103294197 A CN103294197 A CN 103294197A
Authority
CN
China
Prior art keywords
trace image
gesture
contrast
function items
instruction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2013101949828A
Other languages
English (en)
Other versions
CN103294197B (zh
Inventor
王云华
王凌晨
王阳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen TCL New Technology Co Ltd
Original Assignee
Shenzhen TCL New Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen TCL New Technology Co Ltd filed Critical Shenzhen TCL New Technology Co Ltd
Priority to CN201310194982.8A priority Critical patent/CN103294197B/zh
Publication of CN103294197A publication Critical patent/CN103294197A/zh
Application granted granted Critical
Publication of CN103294197B publication Critical patent/CN103294197B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种基于手势操作实现终端遥控的方法、终端,方法:获取设定区域当前的轨迹图像;根据所述快捷菜单手势策略确定所述轨迹图像是否为快捷菜单进入指令;若是,获取设定区域中所述轨迹图像之后的第一轨迹图像,并根据所述功能项手势策略确定所述第一轨迹图像是否为一功能项手势指令;若是,则根据所述功能项手势指令执行相应的功能项操作;所述轨迹图像和第一轨迹图像均由用户的至少两个部位同时动作产生。本发明所提供的一种基于手势操作实现终端遥控的方法、终端,用户仅需两次手势操作即可完成功能项的快捷遥控操作,手势遥控操作更为方便简单,提升了用户通过手势实现遥控操作的体验效果。

Description

基于手势操作实现终端遥控的方法、终端
技术领域
本发明涉及手势系统技术领域,尤其是涉及一种基于手势操作实现终端遥控的方法、终端。
背景技术
随着全球电视数字化的日益推进,越来越多的消费类电子设备不知不觉进入大家的生活,例如Pad,DVD,数字终端,音响,空调等。
在智能电视时代,各种各样智能遥控设备层出不穷,如电视的智能遥控器,空调的遥控器,手机作为遥控器、IPAD等等作为遥控设备,各种遥控设备的出现种类繁多。
随着电子技术的发展,遥控设备越来越智能化,目前市面上用于对电视进行遥控的方式主要:采用红外遥控、类似鼠标输入式遥控,采用手写板手写输入式遥控。其中,以上多种遥控方式都需要操作遥控设备,因此要对电视等电子设备进行遥控,首先必须找到遥控设备(因部分用户随手摆放物品习惯,并不能立马找到),因而给用户带来不便。
随着手势控制技术的出现,为了解决因找不到遥控设备而无法对电视等电子设备进行遥控的问题,现有技术中已有通过手势动作实现遥控的电视等电子设备。如通过手势切换电视频道,调节音量等。
现有的这种通过手势动作实现遥控的电子设备,一般地用户需要一个又一个的手势一步步进入目标菜单,这种遥控方式用户为了调整某一参数需要多个手势动作才能实现,使用户感觉很疲惫,体验效果差。
发明内容
本发明的主要目的在于提供一种基于手势操作实现终端遥控的方法、终端,减少手势遥控操作的步骤,提升用户的基于手势操作实现遥控的体验效果。
本发明提出一种基于手势操作实现终端遥控的方法,所述终端预先设定一快捷菜单,所述快捷菜单包括至少一功能项,所述终端还预设有快捷菜单手势策略和功能项手势策略;所述方法包括:
获取设定区域当前的轨迹图像;
根据所述快捷菜单手势策略确定所述轨迹图像是否为快捷菜单进入指令;
若是,获取设定区域中所述轨迹图像之后的第一轨迹图像,并根据所述功能项手势策略确定所述第一轨迹图像是否为一功能项手势指令;
若是,则根据所述功能项手势指令执行相应的功能项操作;
所述轨迹图像和第一轨迹图像均由用户的至少两个部位同时动作产生。
优选地,所述快捷菜单手势策略包括:多个对比轨迹图像、所述对比轨迹图像与手势指令的映射关系;所述映射关系包括:快捷菜单进入指令与部分所述对比轨迹图像映射;
所述根据所述快捷菜单手势策略确定所述轨迹图像是否为快捷菜单进入指令包括:
将轨迹图像与每一对比轨迹图像进行比较,确定所述轨迹图像与所述对比轨迹图像之一匹配;
根据所述映射关系,确定与所匹配到的对比轨迹图像映射的手势指令是否为快捷菜单进入指令,以确定所述轨迹图像是否为快捷菜单进入指令;
所述对比轨迹图像由用户的至少两个部位同时动作产生。
优选地,所述功能项手势策略包括:第一对比轨迹图像、以及第一对比轨迹图像与功能项手势指令的第一映射关系;
所述根据功能项手势策略确定所述第一轨迹图像是否为一功能项手势指令具体为:
将第一轨迹图像与每一第一对比轨迹图像进行比较,确定所述第一轨迹图像是否与所述第一对比轨迹图像之一匹配;
若是,则根据所述第一映射关系,确定与所述匹配的第一对比轨迹图像映射的功能项手势指令,以确定所述第一轨迹图像为所述功能项手势指令;
所述第一对比轨迹图像由用户的至少两个部位同时动作产生。
优选地,所述轨迹图像和第一轨迹图像均由用户的双手和头部同时动作产生;
所述对比轨迹图像和第一对比轨迹图像均由用户的双手以及头部同时动作产生。
优选地,根据所述功能项手势指令执行相应的功能项操作之后还包括:
显示所述功能项变化前后的状态。
本发明另提出一种终端,所述终端预先设定一包括至少一功能项的快捷菜单、快捷菜单手势策略和功能项手势策略,所述终端包括:
获取模块,用于获取设定区域的轨迹图像和后续的第一轨迹图像,所述轨迹图像和第一轨迹图像均由用户的至少两个部分产生;
确定模块,用于根据所述快捷菜单手势策略确定所述轨迹图像是否为快捷菜单进入指令;
第一确定模块,用于当所述轨迹图像为快捷菜单进入指令,则根据所述功能项手势策略确定所述第一轨迹图像是否为一功能项手势指令;
执行模块,当所述第一轨迹图像为一功能项手势指令时,则根据所述功能项手势指令执行相应的功能项操作。
优选地,所述快捷菜单手势策略包括:多个对比轨迹图像、所述对比轨迹图像与手势指令的映射关系;所述映射关系包括:快捷菜单进入指令与部分所述对比轨迹图像映射;
确定子模块,用于将轨迹图像与每一对比轨迹图像进行比较,确定所述轨迹图像与所述对比轨迹图像之一匹配;
第一确定子模块,用于根据所述映射关系,确定与所匹配到的对比轨迹图像映射的手势指令是否为快捷菜单进入指令,以确定所述轨迹图像是否为快捷菜单进入指令;
所述对比轨迹图像由用户的至少两个部位同时动作产生。
优选地,所述功能项手势策略包括:第一对比轨迹图像、以及第一对比轨迹图像与功能项手势指令的第一映射关系;
所述第一确定模块,包括:
第二确定子模块,用于将第一轨迹图像与每一第一对比轨迹图像进行比较,确定所述第一轨迹图像是否与所述第一对比轨迹图像之一匹配;
第三确定子模块,用于当所述第一轨迹图像与所述第一对比轨迹图像之一匹配,则根据所述第一映射关系,确定与所述匹配的第一对比轨迹图像映射的功能项手势指令,以确定所述第一轨迹图像为所述功能项项手势指令;
所述第一对比轨迹图像由用户的至少两个部位同时动作产生。
优选地,所述轨迹图像和第一轨迹图像均由用户的双手和头部同时动作产生;
所述对比轨迹图像和第一对比轨迹图像均由用户的双手以及头部同时动作产生。
优选地,所述的终端还包括:
显示模块,用于显示所述功能项变化前后的状态。
本发明所提供的一种基于手势操作实现终端遥控的方法、终端,采用获取设定区域当前的轨迹图像和后续的第一轨迹图像;根据预设的快捷菜单手势策略确定所述轨迹图像是否为快捷菜单进入指令;若是,则根据预设的功能项手势策略确定所述第一轨迹图像是否为一功能项手势指令;若是,则根据所述功能项手势指令执行相应的功能项操作的方式,用户仅需两次手势操作即可完成功能项的快捷遥控操作,手势遥控操作更为方便简单,提升了用户通过手势实现遥控操作的体验效果。
附图说明
图1是本发明的基于手势操作实现终端遥控的方法一实施例的流程图;
图2是本发明的基于手势操作实现终端遥控的方法实施例另一流程图;结构示意图;
图3是本发明的基于手势操作实现终端遥控的方法实施例又一流程图;
图4是本发明的终端一实施例的结构示意图;
图5是本发明的终端实施例的另一结构示意图;
图6是本发明的终端实施例的又一结构示意图;
图7是本发明的终端实施例的又一结构示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
参见图1,提出本发明的基于手势操作实现终端遥控的方法一实施例,其中,所述终端预先设定一快捷菜单,所述快捷菜单包括至少一功能项,如所述快捷菜单可以包括常用如下几个功能项:频道调节功能项、对比度调节功能项、音量调节功能项、屏幕亮度调节功能项等,所述终端预设有快捷菜单手势策略和功能项手势策略。所述方法实施例包括:
步骤S101、获取设定区域当前的轨迹图像。
本步骤中,首先通过安装在终端上的摄像装置实时拍摄获取的该设定区域的视频图像。然后采用多目标跟踪以及动态多位分配算法计算出该视频图像中用户手势操作的轨迹图像。所述轨迹图像由用户的至少两个部位同时动作产生。
另外,终端获取所述轨迹图像后需对所述轨迹图像进行去噪声处理。其中去噪声处理的方式有多种,如可以采用低通滤波的方式。同时终端还需设定轨迹图像大小以便于计算(将所述轨迹图像设定在用户的头部和肩部范围内),并对轨迹图像进行色彩转化(如将RGB24bit处理为8bit灰阶),以便于后续确定该轨迹图像与预设的对比轨迹图像是否匹配。
步骤S102、根据所述快捷菜单手势策略确定所述轨迹图像是否为快捷菜单进入指令;若是,则转入步骤S103。
本实施例中,用户开始操作时的手势指令包括:普通手势操作指令和快捷菜单进入指令。只有当所述轨迹图像为快捷菜单进入指令,终端才会显示所述预设的快捷菜单,并进一步的确定后续获取到的轨迹图像是否为预设的快捷菜单下的某一功能项手势指令,具体参见步骤S103。若所述轨迹图像为用户的误操作对应的轨迹图像(非手势指令),终端则不作任何响应。若所述轨迹图像为普通手势操作指令,终端则执行相应的操作;并且当终端确认误操作后又获取到另一轨迹图像,则返回执行上述步骤102(确定该另一轨迹图像是否为快捷菜单进入指令)。
本实施例中,所述快捷菜单手势策略包括:多个对比轨迹图像、所述对比轨迹图像与手势指令的映射关系。其中,所述手势指令包括:快捷菜单进入指令和普通手势操作指令;所述多个对比轨迹图像中一部分为快捷菜单进入指令对应的对比轨迹图像,而另一部分为普通手势操作指令对应的对比轨迹图像;即所述映射关系包括:快捷菜单进入指令与部分所述对比轨迹图像映射、普通手势操作指令与剩余部分所述对比轨迹图像映射。所述对比轨迹图像由用户的至少两个部分同时动作产生。
终端获取所述轨迹图像之后首先需要判定上述轨迹图像是否为手势指令。即首先将所获取的轨迹图像与每一对比轨迹图像进行比较,确定所述轨迹图像是否与所述对比轨迹图像之一匹配;若不匹配,则表明所述轨迹图像非手势指令,而属于用户的误操作所对应的轨迹图像,此时终端不作任何响应。若匹配,则表明所述轨迹图像为用户输入的手势指令。参见图2,所述步骤S102具体包括:
步骤S201、将轨迹图像与每一对比轨迹图像进行比较,确定所述轨迹图像与所述对比轨迹图像之一匹配。
本步骤中,当确定所述轨迹图像与所述对比轨迹图像之一匹配,表明所述轨迹图像为用户输入的手势指令。
步骤S202、根据所述映射关系,确定与所匹配到的对比轨迹图像映射的手势指令是否为快捷菜单进入指令,以确定所述轨迹图像是否为快捷菜单进入指令。
本实施例中,由于所述映射关系包括:快捷菜单进入指令与部分所述对比轨迹图像映射、普通手势操作指令与剩余部分所述对比轨迹图像映射。因此与所匹配到的对比轨迹图像映射的手势指令为快捷菜单进入指令或者为普通手势操作指令。若所述手势指令为普通手势操作指令,则终端根据所述普通手势操作指令执行相应的功能操作,其原理为现有技术,在此不再赘述。若所述手势指令为快捷菜单进入指令,则转入步骤S103。
步骤S103、获取设定区域中所述轨迹图像之后的第一轨迹图像,并根据所述功能项手势策略确定所述第一轨迹图像是否为一功能项手势指令;若是,则转入步骤S104;若否,则结束流程。
本步骤中,所述第一轨迹图像的获取途径和获取后的处理方式与步骤S101中的轨迹图像相同。
本实施例中,所述功能项手势策略包括:第一对比轨迹图像、以及第一对比轨迹图像与功能项手势指令的第一映射关系。其中,所述第一轨迹图像和第一对比轨迹图像均由用户的至少两个部位同时动作产生。参见图3,本步骤中终端确定所述第一轨迹图像是否为一功能项手势指令具体过程如下:
步骤S301、将第一轨迹图像与每一第一对比轨迹图像进行比较,确定所述第一轨迹图像是否与所述第一对比轨迹图像之一匹配;若是,则转入步骤S302;若否,则结束流程。
本步骤中,当所述第一轨迹图像与所述第一对比轨迹图像之一匹配,这表明所述第一轨迹图像为一功能项手势指令。但所述第一轨迹图像为哪一项具体的功能项手势指令还需通过以下步骤S302进一步确定。
步骤S302、根据所述第一映射关系,确定与所述匹配的第一对比轨迹图像映射的功能项手势指令,以确定所述第一轨迹图像为所述功能项手势指令。
本步骤中确定所述第一轨迹图像具体为哪一项功能项手势指令的原理为:当与所述匹配的第一对比轨迹图像映射的是某一功能项手势指令,则表明所述第一轨迹图像为用户输入的该某一功能项手势指令。例如:若与所述匹配的第一对比轨迹图像映射的是调节音量的功能项手势指令,则表明所述第一轨迹图像为用户输入的调节音量的功能项手势指令。
步骤S104、根据所述功能项手势指令执行相应的功能项操作。例如,若所述功能项手势指令为增加10个单位音量的指令,终端则进行相应的音量调节,即在原有的音量上增加10个单位音量。
由上述实施例可知:本发明所提供的基于手势操作实现终端遥控的方法,用户仅需两次手势操作即可完成功能项的快捷遥控操作,手势遥控操作更为方便简单,提升了用户通过手势实现遥控操作的体验效果。
上述实施例中所涉及的轨迹图像、第一轨迹图像、对比轨迹图像、以及第一对比轨迹图像均由用户的至少两个部位同时动作产生。现有的手势操作实现电视遥控的技术中,用户一般是通过单个身体部位动作实现电视的遥控,本发明所提供的方法,用户通过身体的至少两个部位同时动作实现终端快捷遥控,在不对原有的手势操作遥控系统调整的前提下,系统根据用户的动作能够快速准确识别出手势操作类型,杜绝了快捷菜单进入指令和功能项手势指令所对应的手势被误识别现象的发生。
其中,所述至少两个部位可以是单手与头部;双手与头部;单手与腰部;双手与腰部;单脚、单手以及头部等等。较佳地所述轨迹图像、对比轨迹图像、第一轨迹图像、第一对比轨迹图像均由用户的双手和头部同时动作产生。
进一步地,上述基于手势操作实现终端遥控的方法实施例中,所述步骤S104之后还包括如下步骤:显示所述功能项变化前后的状态。
为了让用户能够知晓终端是否响应用户的手势遥控操作,以及相应的功能项变化前后的状态,上述基于手势操作实现终端遥控的方法实施例的所述步骤S104之后还包括如下处理:显示所述功能项变化前后的状态。例如:若在步骤S104之前终端的音量为40单位音量。本步骤S104中的所述功能项手势指令为增加10个单位音量,终端则进行相应的音量调节,在原有的40单位音量上增加10个单位音量。此时终端在显示屏上按照预设的规则显示调节前的音量值40单位音量,以及调节后的音量值50单位音量。
以上实施例中,数据库中维护的对比轨迹图像、第一对比轨迹图像二者的获取途径和获取后的处理方式与步骤S101中的轨迹图像相同,在此不再赘述。
由于目标用户可能是一个或两个以上。每个目标用户执行手势遥控操作时手势操作的轨迹、连续性特点、以及表现形式(如手势操作表现出运动的跨度)都不一样。本实施例中所述终端数据库中预设的快捷菜单手势策略可维护每个目标用户对应的对比轨迹图像。每个目标用户对应的对比轨迹图像包括:与普通手势操作指令映射的对比轨迹图像、与快捷菜单进入指令映射的对比轨迹图像。
上述这种数据库维护每个目标用户各自对应的对比轨迹图像方式中,不同目标用户的对比轨迹图像中对应的手势轨迹可以相同也可以不同。如目标客户A对应的与快捷菜单进入指令映射的对比轨迹图像为:目标客户A右手顺时针旋转3圈。目标客户B对应的与快捷菜单进入指令映射的对比轨迹图像为:目标客户B右手顺时针旋转3圈。目标客户C对应的与快捷菜单进入指令映射的对比轨迹图像为是:目标客户C左手逆时针旋转2圈。当目标用户A希望通过快捷方式遥控终端,目标用户A需在所述设定区域内将右手顺时针旋转3圈,终端获取到目标客户A右手顺时针旋转3圈的轨迹图像后,将该轨迹图像与快捷菜单手势策略中维护的对比轨迹图像进行比较,查找出与之匹配的目标用户A对应的对比轨迹图像,查找到与该对比轨迹图像映射的手势指令,该手势指令即为快捷菜单进入指令。
上述这种数据库维护每个目标用户各自对应的对比轨迹图像方式中,终端将获取的轨迹图像与对比轨迹图像进行匹配比较时,除了二者对应的手势轨迹匹配之外,还需二者对应的图像(头部和肩部)轮廓匹配,即二者对应的目标用户一致。
另外,所述数据库中预设的快捷菜单手势策略也可以为所有用户只维护一套公共的对比轨迹图像,即每个普通手势指令对应一个对比轨迹图像,快捷菜单进入指令对应一个对比轨迹图像。终端获取的轨迹图像之后,将该轨迹图像与对比轨迹图像进行匹配比较时,只需判断二者对应的手势轨迹是否匹配即可。如若快捷菜单进入指令映射的对比轨迹图像是:用户甲左手顺时针旋转2圈。任何用户在所述设定区域将左手顺时针旋转2圈,终端获取到对应的轨迹图像后,只将该轨迹图像中对应的手势轨迹与对比轨迹图像中对应的手势轨迹比较即可。
同理,终端数据库中预设的功能项手势策略维护有每个目标用户对应的第一对比轨迹图像,不同目标用户对应的第一对比轨迹图像中的手势轨迹可以相同也可以不同。终端将获取的第一轨迹图像与第一对比轨迹图像进行匹配比较时,除了二者对应的手势轨迹匹配之外,还需二者对应的图像(头部和肩部)轮廓匹配,即二者对应的目标用户一致。
同理,所述数据库中预设的功能项手势策略也可以为所有用户只维护一套公共的第一对比轨迹图像,即每个功能项手势指令对应一个第一对比轨迹图像。终端获取的第一轨迹图像之后,将该第一轨迹图像与第一对比轨迹图像进行匹配比较时,只需判断二者对应的手势轨迹是否匹配即可。另外,不同功能项手势指令对应的第一对比轨迹图像中的手势轨迹可以相同,也可以不同。
当不同功能项手势指令对应的第一对比轨迹图像中的手势轨迹相同时,也可以采用如下方式代替:数据库中预设的功能项手势策略可以只维护一第一对比轨迹图像,该第一对比轨迹图像分别与多个不同的功能项手势指令映射。此时用户需要勾选快捷菜单内其中一项功能项。如预设的快捷菜单中包括:频道调节功能、对比度调节功能项、音量调节功能项、屏幕亮度调节功能项等。其中频道加,增加对比度、音量以及屏幕亮度的功能项手势指令对应的第一对比轨迹图像中的手势轨迹相同(或对应同一第一对比轨迹图像)。例如:当第一对比轨迹图像中的手势轨迹为右手从右向左转动。当快捷菜单中勾选的功能项为音量调节功能项。用户在所述设定区域将右手从右向左转动,终端则根据快捷菜单中勾选的音量调节功能项,查找到与音量调节的功能项手势指令映射的第一对比轨迹图像,然后将获取的第一轨迹图像与该第一对比轨迹图像比较,若匹配,则表明该第一轨迹图像为增加音量的功能项手势指令。
同理,当快捷菜单中勾选的功能项为亮度调节功能项。用户在所述设定区域将右手从右向左转动,终端则根据快捷菜单中勾选的亮度调节功能项,查找到与亮度调节的功能项手势指令映射的第一对比轨迹图像,然后将获取的第一轨迹图像与该第一对比轨迹图像比较,若匹配,则表明该第一轨迹图像为增加亮度的功能项手势指令。
另外,所述快捷菜单中的功能项可以根据实际需要进行增减设置,同理所述功能项手势策略中维护的第一对比轨迹图像,以及该第一对比轨迹图像与功能项手势指令的映射关系也可以根据实际需要进行增减设置。
参见图4,提出本发明的一种终端100一实施例中,所述终端100预先设定一快捷菜单,所述快捷菜单包括至少一功能项,以及预先设置有快捷菜单手势策略和功能项手势策略。所述终端100包括:获取模块110、确定模块120、第一确定模块130、以及执行模块140。
所述获取模块110,用于获取设定区域的轨迹图像和后续的第一轨迹图像。所述轨迹图像和第一轨迹图像均由用户的至少两个部位同时动作产生。
本实施例中,所述获取模块110可以是安装在终端100上的摄像装置。所述获取模块110实时拍摄获取的该设定区域的视频图像,然后采用多目标跟踪以及动态多位分配算法计算出该视频图像中用户手势操作的轨迹图像和第一轨迹图像。
另外,终端100中通过上述获取模块110获取所述轨迹图像和第一轨迹图像后,需对所述轨迹图像和第一轨迹图像进行去噪声处理。其中去噪声处理的方式有多种,如可以采用低通滤波的方式。同时终端100还需设定轨迹图像大小以便于计算(将所述轨迹图像设定在用户的头部和肩部范围内),并对轨迹图像进行色彩转化(如将RGB24bit处理为8bit灰阶),以便于后续确定该轨迹图像与预设的对比轨迹图像是否匹配,以及第一轨迹图像与预设的第一对比轨迹图像是否匹配。
所述确定模块120,用于根据所述快捷菜单手势策略确定所述轨迹图像是否为快捷菜单进入指令。
本实施例中,用户开始操作时的手势指令包括:普通手势操作指令和快捷菜单进入指令。只有当所述轨迹图像为快捷菜单进入指令,终端100才会显示所述预设的快捷菜单,并通过第一确定模块130根据所述功能项手势策略确定后续获取到的第一轨迹图像是否为一功能项手势指令。若所述轨迹图像为用户的误操作对应的轨迹图像(非手势指令),终端100则不作任何响应。若所述轨迹图像为普通手势操作指令,终端100则执行相应的操作;并且当终端100确认误操作后通过获取模块110又获取到所述轨迹图像之后的另一轨迹图像,则返回确定该另一轨迹图像是否为快捷菜单进入指令。
本实施例中,所述快捷菜单手势策略包括:多个对比轨迹图像、所述对比轨迹图像与手势指令的映射关系。其中,所述手势指令包括:快捷菜单进入指令和普通手势操作指令;所述多个对比轨迹图像中一部分为快捷菜单进入指令对应的对比轨迹图像,而另一部分为普通手势操作指令对应的对比轨迹图像;即所述映射关系包括:快捷菜单进入指令与部分所述对比轨迹图像映射、普通手势操作指令与剩余部分所述对比轨迹图像映射;所述对比轨迹图像由用户的至少两个部分同时动作产生。
终端100通过上述获取模块110获取所述轨迹图像之后首先需要通过上述确定模块120确定上述轨迹图像是否为手势指令。即首先将所获取的轨迹图像与每一对比轨迹图像进行比较,确定所述轨迹图像是否与所述对比轨迹图像之一匹配;若不匹配,则表明所述轨迹图像非手势指令,而属于用户的误操作所对应的轨迹图像,此时终端100不作任何响应。若匹配,则表明所述轨迹图像为用户输入的手势指令。
参见图5,本实施例中,所述确定模块120具体包括:确定子模块121、第一确定子模块122。所述确定子模块121,用于将轨迹图像与每一对比轨迹图像进行比较,确定所述轨迹图像与所述对比轨迹图像之一匹配。所述第一确定子模块122,用于根据所述映射关系,确定与所匹配到的对比轨迹图像映射的手势指令是否为快捷菜单进入指令,以确定所述轨迹图像是否为快捷菜单进入指令。
本实施例中,由于所述映射关系包括:快捷菜单进入指令与部分所述对比轨迹图像映射、普通手势操作指令与剩余部分所述对比轨迹图像映射。因此与所匹配到的对比轨迹图像映射的手势指令为快捷菜单进入指令或者为普通手势操作指令。若所述手势指令为普通手势操作指令,则终端100通过所述执行模块140根据所述普通手势操作指令执行相应的功能操作,其原理为现有技术,在此不再赘述。若所述手势指令为快捷菜单进入指令,则由第一确定模块130进一步确定所述手势指令是否为一功能项手势指令。
所述第一确定模块130,用于当所述轨迹图像为快捷菜单进入指令,则根据所述功能项手势策略确定所述第一轨迹图像是否为一功能项手势指令。
本实施例中,所述功能项手势策略包括:第一对比轨迹图像以及第一对比轨迹图像与功能项手势指令的第一映射关系。所述第一对比轨迹图像由用户的至少两个部分同时动作产生。
参见图6,所述第一确定模块130包括:第二确定子模块131和第三确定子模块132。
所述第二确定子模块131,用于将第一轨迹图像与每一第一对比轨迹图像进行比较,确定所述第一轨迹图像是否与所述第一对比轨迹图像之一匹配。
本实施例中,当所述第一轨迹图像与所述第一对比轨迹图像之一匹配,这表明所述第一轨迹图像为一功能项手势指令。但所述第一轨迹图像为哪一项具体的功能项手势指令还需通过第三确定子模块132进一步确定。
所述第三确定子模块132,用于当所述第一轨迹图像与所述第一对比轨迹图像之一匹配,则根据所述第一映射关系,确定与所述匹配的第一对比轨迹图像映射的功能项手势指令,以确定所述第一轨迹图像为所述功能项手势指令。
本步骤中,所述第三确定子模块132确定所述第一轨迹图像具体为哪一项功能项手势指令的原理为:当与所述匹配的第一对比轨迹图像映射的是某一功能项手势指令,则表明所述第一轨迹图像为用户输入的该某一功能项手势指令。例如:若与所述匹配的第一对比轨迹图像映射的是调节音量的功能项手势指令,则表明所述第一轨迹图像为用户输入的调节音量的功能项手势指令。
所述执行模块140,用于当所述第一轨迹图像为一功能项手势指令时,则根据所述功能项手势指令执行相应的功能项操作。例如,若所述功能项手势指令为增加10个单位音量的指令,终端100通过执行模块140则进行相应的音量调节,即在原有的音量上增加10个单位音量。
由上述实施例可知:本发明所提供的终端100,用户仅需两次手势操作即可完成功能项的快捷遥控操作,手势遥控操作更为方便简单,提升了用户通过手势实现遥控操作的体验效果。
上述实施例中所涉及的轨迹图像、第一轨迹图像、对比轨迹图像、以及第一对比轨迹图像均由用户的至少两个部位同时动作产生。现有的手势操作实现电视遥控的技术中,用户一般是通过单个身体部位动作实现电视的遥控,本发明所提供的终端,用户通过身体的至少两个部位同时动作实现终端快捷遥控,在不对原有的手势操作遥控系统调整的前提下,系统根据用户的动作能够快速准确识别出手势操作类型,杜绝了快捷菜单进入指令和功能项手势指令所对应的手势被误识别现象的发生。
其中,所述至少两个部位可以是单手与头部;双手与头部;单手与腰部;双手与腰部;单脚、单手以及头部等等。较佳地所述轨迹图像、对比轨迹图像、第一轨迹图像、第一对比轨迹图像均由用户的双手和头部同时动作产生。
进一步地,参见图7,上述的终端100实施例还包括:显示模块150。所述显示模块150,用于显示所述功能项变化前后的状态。
为了让用户能够知晓终端100是否响应用户的手势遥控操作,以及相应的功能项变化前后的状态,上述终端100实施例中所述显示模块150,在所述执行模块140根据所述功能项手势指令执行相应的功能项操作之后,用于显示所述功能项变化前后的状态。例如:若执行模块140在执行所述相应的功能项操作之前终端100的音量为40单位音量,所述功能项手势指令为增加10个单位音量,则所述执行模块140进行相应的音量调节,即在原有的40单位音量上增加10个单位音量。此时显示模块150则按照预设的规则显示调节前的音量值40单位音量,以及调节后的音量值50单位音量。
以上实施例中,数据库中维护的对比轨迹图像、第一对比轨迹图像二者的获取途径和获取后的处理方式上述轨迹图像、第一轨迹图像相同,在此不再赘述。
由于目标用户可能是一个或两个以上。每个目标用户执行手势遥控操作时手势操作的轨迹、连续性特点、以及表现形式(如手势操作表现出运动的跨度)都不一样。本实施例中终端100的数据库预设的快捷菜单手势策略可维护每个目标用户对应的对比轨迹图像。每个目标用户对应的对比轨迹图像包括:与普通手势操作指令映射的对比轨迹图像、与快捷菜单进入指令映射的对比轨迹图像。
上述这种数据库维护每个目标用户各自对应的对比轨迹图像方式中,不同目标用户的对比轨迹图像中对应的手势轨迹可以相同也可以不同。如目标客户A对应的与快捷菜单进入指令映射的对比轨迹图像为:目标客户A右手顺时针旋转3圈。目标客户B对应的与快捷菜单进入指令映射的对比轨迹图像为:目标客户B右手顺时针旋转3圈。目标客户C对应的与快捷菜单进入指令映射的对比轨迹图像为是:目标客户C左手逆时针旋转2圈。当目标用户A希望通过快捷方式遥控终端100,目标用户A需在所述设定区域内将右手顺时针旋转3圈,终端100获取到目标客户A右手顺时针旋转3圈的轨迹图像后,将该轨迹图像与快捷菜单手势策略中维护的对比轨迹图像进行比较,查找出与之匹配的目标用户A对应的对比轨迹图像,查找到与该对比轨迹图像映射的手势指令,该手势指令即为快捷菜单进入指令。
上述这种数据库维护每个目标用户各自对应的对比轨迹图像方式中,终端100将获取的轨迹图像与对比轨迹图像进行匹配比较时,除了二者对应的手势轨迹匹配之外,还需二者对应的图像(头部和肩部)轮廓匹配,即二者对应的目标用户一致。
另外,所述数据库中预设的快捷菜单手势策略也可以为所有用户只维护一套公共的对比轨迹图像,即每个普通手势指令对应一个对比轨迹图像,快捷菜单进入指令对应一个对比轨迹图像。终端100获取的轨迹图像之后,将该轨迹图像与对比轨迹图像进行匹配比较时,只需判断二者对应的手势轨迹是否匹配即可。如若快捷菜单进入指令映射的对比轨迹图像是:用户甲左手顺时针旋转2圈。任何用户在所述设定区域将左手顺时针旋转2圈,终端100获取到对应的轨迹图像后,只将该轨迹图像中对应的手势轨迹与对比轨迹图像中对应的手势轨迹比较即可。
同理,终端100数据库中预设的功能项手势策略维护有每个目标用户对应的第一对比轨迹图像,不同目标用户对应的第一对比轨迹图像中的手势轨迹可以相同也可以不同。终端100将获取的第一轨迹图像与第一对比轨迹图像进行匹配比较时,除了二者对应的手势轨迹匹配之外,还需二者对应的图像(头部和肩部)轮廓匹配,即二者对应的目标用户一致。
同理,所述数据库中预设的功能项手势策略也可以为所有用户只维护一套公共的第一对比轨迹图像,即每个功能项手势指令对应一个第一对比轨迹图像。终端100获取的第一轨迹图像之后,将该第一轨迹图像与第一对比轨迹图像进行匹配比较时,只需判断二者对应的手势轨迹是否匹配即可。另外,不同功能项手势指令对应的第一对比轨迹图像中的手势轨迹可以相同,也可以不同。
当不同功能项手势指令对应的第一对比轨迹图像中的手势轨迹相同时,也可以采用如下方式代替:数据库中预设的功能项手势策略可以只维护一第一对比轨迹图像,该第一对比轨迹图像分别与多个不同的功能项手势指令映射。此时用户需要勾选快捷菜单内其中一项功能项。如预设的快捷菜单中包括:频道调节功能、对比度调节功能项、音量调节功能项、屏幕亮度调节功能项等。其中频道加,增加对比度、音量以及屏幕亮度的功能项手势指令对应的第一对比轨迹图像中的手势轨迹相同(或对应同一第一对比轨迹图像)。例如:当第一对比轨迹图像中的手势轨迹为右手从右向左转动。当快捷菜单中勾选的功能项为音量调节功能项。用户在所述设定区域将右手从右向左转动,终端100则根据快捷菜单中勾选的音量调节功能项,查找到与音量调节的功能项手势指令映射的第一对比轨迹图像,然后将获取的第一轨迹图像与该第一对比轨迹图像比较,若匹配,则表明该第一轨迹图像为增加音量的功能项手势指令。
同理,当快捷菜单中勾选的功能项为亮度调节功能项。用户在所述设定区域将右手从右向左转动,终端100则根据快捷菜单中勾选的亮度调节功能项,查找到与亮度调节的功能项手势指令映射的第一对比轨迹图像,然后将获取的第一轨迹图像与该第一对比轨迹图像比较,若匹配,则表明该第一轨迹图像为增加亮度的功能项手势指令。
另外,所述快捷菜单中的功能项可以根据实际需要进行增减设置,同理所述功能项手势策略中维护的第一对比轨迹图像,以及该第一对比轨迹图像与功能项手势指令的映射关系也可以根据实际需要进行增减设置。
应当理解的是,以上仅为本发明的优选实施例,不能因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种基于手势操作实现终端遥控的方法,其特征在于,所述终端预先设定一快捷菜单,所述快捷菜单包括至少一功能项,所述终端还预设有快捷菜单手势策略和功能项手势策略;所述方法包括:
获取设定区域当前的轨迹图像;
根据所述快捷菜单手势策略确定所述轨迹图像是否为快捷菜单进入指令;
若是,获取设定区域中所述轨迹图像之后的第一轨迹图像,并根据所述功能项手势策略确定所述第一轨迹图像是否为一功能项手势指令;
若是,则根据所述功能项手势指令执行相应的功能项操作;
所述轨迹图像和第一轨迹图像均由用户的至少两个部位同时动作产生。
2.根据权利要求1所述的基于手势操作实现终端遥控的方法,其特征在于,所述快捷菜单手势策略包括:多个对比轨迹图像、所述对比轨迹图像与手势指令的映射关系;所述映射关系包括:快捷菜单进入指令与部分所述对比轨迹图像映射;
所述根据所述快捷菜单手势策略确定所述轨迹图像是否为快捷菜单进入指令包括:
将轨迹图像与每一对比轨迹图像进行比较,确定所述轨迹图像与所述对比轨迹图像之一匹配;
根据所述映射关系,确定与所匹配到的对比轨迹图像映射的手势指令是否为快捷菜单进入指令,以确定所述轨迹图像是否为快捷菜单进入指令;
所述对比轨迹图像由用户的至少两个部位同时动作产生。
3.根据权利要求1所述的基于手势操作实现终端遥控的方法,其特征在于,所述功能项手势策略包括:第一对比轨迹图像、以及第一对比轨迹图像与功能项手势指令的第一映射关系;
所述根据功能项手势策略确定所述第一轨迹图像是否为一功能项手势指令具体为:
将第一轨迹图像与每一第一对比轨迹图像进行比较,确定所述第一轨迹图像是否与所述第一对比轨迹图像之一匹配;
若是,则根据所述第一映射关系,确定与所述匹配的第一对比轨迹图像映射的功能项手势指令,以确定所述第一轨迹图像为所述功能项手势指令;
所述第一对比轨迹图像由用户的至少两个部位同时动作产生。
4.根据权利要求1至3任一项所述的基于手势操作实现终端遥控的方法,其特征在于,
所述轨迹图像和第一轨迹图像均由用户的双手和头部同时动作产生;
所述对比轨迹图像和第一对比轨迹图像均由用户的双手以及头部同时动作产生。
5.根据权利要求4所述的基于手势操作实现终端遥控的方法,其特征在于,根据所述功能项手势指令执行相应的功能项操作之后还包括:
显示所述功能项变化前后的状态。
6.一种终端,其特征在于,所述终端预先设定一包括至少一功能项的快捷菜单、快捷菜单手势策略和功能项手势策略,所述终端包括:
获取模块,用于获取设定区域的轨迹图像和后续的第一轨迹图像,所述轨迹图像和第一轨迹图像均由用户的至少两个部分产生;
确定模块,用于根据所述快捷菜单手势策略确定所述轨迹图像是否为快捷菜单进入指令;
第一确定模块,用于当所述轨迹图像为快捷菜单进入指令,则根据所述功能项手势策略确定所述第一轨迹图像是否为一功能项手势指令;
执行模块,当所述第一轨迹图像为一功能项手势指令时,则根据所述功能项手势指令执行相应的功能项操作。
7.根据权利要求6所述的终端,其特征在于,所述快捷菜单手势策略包括:多个对比轨迹图像、所述对比轨迹图像与手势指令的映射关系;所述映射关系包括:快捷菜单进入指令与部分所述对比轨迹图像映射;
确定子模块,用于将轨迹图像与每一对比轨迹图像进行比较,确定所述轨迹图像与所述对比轨迹图像之一匹配;
第一确定子模块,用于根据所述映射关系,确定与所匹配到的对比轨迹图像映射的手势指令是否为快捷菜单进入指令,以确定所述轨迹图像是否为快捷菜单进入指令;
所述对比轨迹图像由用户的至少两个部位同时动作产生。
8.根据权利要求6所述的终端,其特征在于,所述功能项手势策略包括:第一对比轨迹图像、以及第一对比轨迹图像与功能项手势指令的第一映射关系;
所述第一确定模块,包括:
第二确定子模块,用于将第一轨迹图像与每一第一对比轨迹图像进行比较,确定所述第一轨迹图像是否与所述第一对比轨迹图像之一匹配;
第三确定子模块,用于当所述第一轨迹图像与所述第一对比轨迹图像之一匹配,则根据所述第一映射关系,确定与所述匹配的第一对比轨迹图像映射的功能项手势指令,以确定所述第一轨迹图像为所述功能项项手势指令;
所述第一对比轨迹图像由用户的至少两个部位同时动作产生。
9.根据权利要求6至8任一项所述的终端,其特征在于,
所述轨迹图像和第一轨迹图像均由用户的双手和头部同时动作产生;
所述对比轨迹图像和第一对比轨迹图像均由用户的双手以及头部同时动作产生。
10.根据权利要求9所述的终端,其特征在于,还包括:
显示模块,用于显示所述功能项变化前后的状态。
CN201310194982.8A 2013-05-22 2013-05-22 基于手势操作实现终端遥控的方法、终端 Active CN103294197B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310194982.8A CN103294197B (zh) 2013-05-22 2013-05-22 基于手势操作实现终端遥控的方法、终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310194982.8A CN103294197B (zh) 2013-05-22 2013-05-22 基于手势操作实现终端遥控的方法、终端

Publications (2)

Publication Number Publication Date
CN103294197A true CN103294197A (zh) 2013-09-11
CN103294197B CN103294197B (zh) 2017-06-16

Family

ID=49095218

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310194982.8A Active CN103294197B (zh) 2013-05-22 2013-05-22 基于手势操作实现终端遥控的方法、终端

Country Status (1)

Country Link
CN (1) CN103294197B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104244049A (zh) * 2014-10-21 2014-12-24 三星电子(中国)研发中心 一种动态调节曲率和方向的曲面电视和方法
CN104765533A (zh) * 2015-04-23 2015-07-08 无锡天脉聚源传媒科技有限公司 操作界面进入方法及装置
CN108140361A (zh) * 2016-09-23 2018-06-08 苹果公司 观影模式
CN109445568A (zh) * 2018-08-30 2019-03-08 丝路视觉科技股份有限公司 投影对象控制方法、装置及主机
US11955100B2 (en) 2017-05-16 2024-04-09 Apple Inc. User interface for a flashlight mode on an electronic device

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109725724B (zh) * 2018-12-29 2022-03-04 百度在线网络技术(北京)有限公司 有屏设备的手势控制方法和装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101174193A (zh) * 2006-10-31 2008-05-07 佛山市顺德区顺达电脑厂有限公司 以图像撷取操作电子设备选项功能的装置及其方法
CN101437124A (zh) * 2008-12-17 2009-05-20 三星电子(中国)研发中心 面向电视控制的动态手势识别信号处理方法
US20110083112A1 (en) * 2009-10-05 2011-04-07 Takashi Matsubara Input apparatus
CN102117117A (zh) * 2010-01-06 2011-07-06 致伸科技股份有限公司 利用图像提取装置辨识使用者姿势进行控制的系统及方法
WO2012011614A1 (en) * 2010-07-23 2012-01-26 Sharp Kabushiki Kaisha Information device, control method thereof and system
CN102890616A (zh) * 2012-09-26 2013-01-23 杨生虎 触摸屏的快捷输入方法及系统
CN102932212A (zh) * 2012-10-12 2013-02-13 华南理工大学 一种基于多通道交互方式的智能家居控制系统

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101174193A (zh) * 2006-10-31 2008-05-07 佛山市顺德区顺达电脑厂有限公司 以图像撷取操作电子设备选项功能的装置及其方法
CN101437124A (zh) * 2008-12-17 2009-05-20 三星电子(中国)研发中心 面向电视控制的动态手势识别信号处理方法
US20110083112A1 (en) * 2009-10-05 2011-04-07 Takashi Matsubara Input apparatus
CN102117117A (zh) * 2010-01-06 2011-07-06 致伸科技股份有限公司 利用图像提取装置辨识使用者姿势进行控制的系统及方法
WO2012011614A1 (en) * 2010-07-23 2012-01-26 Sharp Kabushiki Kaisha Information device, control method thereof and system
CN102890616A (zh) * 2012-09-26 2013-01-23 杨生虎 触摸屏的快捷输入方法及系统
CN102932212A (zh) * 2012-10-12 2013-02-13 华南理工大学 一种基于多通道交互方式的智能家居控制系统

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104244049A (zh) * 2014-10-21 2014-12-24 三星电子(中国)研发中心 一种动态调节曲率和方向的曲面电视和方法
CN104765533A (zh) * 2015-04-23 2015-07-08 无锡天脉聚源传媒科技有限公司 操作界面进入方法及装置
CN108140361A (zh) * 2016-09-23 2018-06-08 苹果公司 观影模式
US11307757B2 (en) 2016-09-23 2022-04-19 Apple Inc. Watch theater mode
US11955100B2 (en) 2017-05-16 2024-04-09 Apple Inc. User interface for a flashlight mode on an electronic device
CN109445568A (zh) * 2018-08-30 2019-03-08 丝路视觉科技股份有限公司 投影对象控制方法、装置及主机

Also Published As

Publication number Publication date
CN103294197B (zh) 2017-06-16

Similar Documents

Publication Publication Date Title
CN103294197A (zh) 基于手势操作实现终端遥控的方法、终端
Heun et al. Reality editor: programming smarter objects
US9823779B2 (en) Method and device for controlling a head-mounted display by a terminal device
CN104349195A (zh) 智能电视的多用途遥控器的控制方法及控制系统
WO2007126286A1 (en) Non-contact selection device
CN103295029A (zh) 手势控制终端的交互方法及装置
US20140340498A1 (en) Using distance between objects in touchless gestural interfaces
US20130249950A1 (en) Hand gestures with the non-dominant hand
CN102111582A (zh) 电视遥控装置、电视机及遥控方法
DE112016000745B4 (de) System und Verfahren zum Steuern einer Endgeräteeinrichtung
CN105094645A (zh) 一种信息处理方法和电子设备
CN103076968A (zh) 一种触控终端的操作控制方法及其触控终端
CN105807989A (zh) 一种手势触控方法和系统
CN104898880A (zh) 一种控制方法及电子设备
CN103019374A (zh) 一种基于对象跟踪的远程控制系统
CN104363345A (zh) 一种显示方法和电子设备
US20180260031A1 (en) Method for controlling distribution of multiple sub-screens and device using the same
CN108376030A (zh) 一种电子设备的控制方法、装置和电子设备
CN104202635A (zh) 根据电视当前使用场景切换遥控器使用模式的方法及系统
GB2590207A (en) Scenario control method and device, and electronic device
CN104914985A (zh) 手势控制方法及系统与视频流处理装置
CN103869965B (zh) 一种控制方法、装置及一种电子设备
CN103686285A (zh) 触控终端及其切换安卓系统与Windows系统的方法
CN104579211B (zh) 一种音量控制方法及装置
WO2020021262A3 (en) Gesture recognition system

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant