CN102591458A - 一种基于人体运动执行视频控制操作的方法、装置和设备 - Google Patents
一种基于人体运动执行视频控制操作的方法、装置和设备 Download PDFInfo
- Publication number
- CN102591458A CN102591458A CN201110445626XA CN201110445626A CN102591458A CN 102591458 A CN102591458 A CN 102591458A CN 201110445626X A CN201110445626X A CN 201110445626XA CN 201110445626 A CN201110445626 A CN 201110445626A CN 102591458 A CN102591458 A CN 102591458A
- Authority
- CN
- China
- Prior art keywords
- check point
- information
- video
- movable information
- check
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
本发明的目的是提供一种基于人体运动执行视频控制操作的方法、装置和设备。根据本发明的方法包括以下步骤：获取多个分别对应于不同人体部位的检测点中至少一个检测点的运动信息；获取与所述至少一个检测点的运动信息对应的操作指令；对当前操作对象执行与所述操作指令对应的视频控制操作。本发明的优点在于，可获得对位于同一设备中的多种操作对象均通用的操作指令，具有更加广泛的应用场景；并且，用户可设定仅获取其习惯使用的身体部位所对应的检测点的运动信息，不再获取对应其他身体部位的其他组检测点的运动信息，从而其他身体部位可自由活动；更进一步的，用户可同时对操作对象执行多个操作命令，有效提高操作效率。
Description
技术领域
本发明涉及计算机技术领域，尤其涉及一种基于人体运动执行视频控制操作的方法、装置和设备。
背景技术
现有的根据人体运动来执行交互操作的方法，通常需要确定某一所识别的人体部位为中心点，并根据中心点划分区域，进而根据各个区域内发生的动作来区分各类操作指令，以实现对操作对象进行操作，该种方式的问题在于，人体所处区域的限制较为严格，当用户不处于预定位置时，则无法继续操作，或者会生成错误的操作信息。并且，通常的操作方案仅能针对在特定对象，如专门软件的用户界面上执行操作，其操作命令不能被位于同一设备中的其他软件所识别，无法在多个软件之间通用。
发明内容
本发明的目的是提供一种基于人体运动执行视频控制操作的方法、装置和设备。
根据本发明的一个方面，提供一种计算机实现的基于人体运动执行视频控制操作的方法，其中，所述方法包括以下步骤：
a获取多个分别对应于不同人体部位的检测点中至少一个检测点的运动信息；
b获取与所述至少一个检测点的运动信息对应的操作指令；
c对当前操作对象执行与所述操作指令对应的视频控制操作。
其中，所述视频控制操作包括但不限于以下至少任一项操作：
-视频选择相关操作；
-视频搜索相关操作；
-视频播放相关操作；
-视频互动相关操作。
根据本发明的一个方面，还提供了一种基于人体运动执行视频控制操作的操作装置，其中，所述操作装置包括：
第一获取装置，用于获取多个分别对应于不同人体部位的检测点中至少一个检测点的运动信息；
第二获取装置，用于获取与所述至少一个检测点的运动信息对应的操作指令；
执行装置，用于对当前操作对象执行与所述操作指令对应的视频控制操作。
其中，所述视频控制操作包括但不限于以下至少任一项操作：
-视频选择相关操作；
-视频搜索相关操作；
-视频播放相关操作；
-视频互动相关操作。
根据本发明的一个方面，还提供了一种计算机设备，所述计算机设备包括所述操作装置。
与现有技术相比，本发明具有以下优点：根据本发明的方法，可获得对位于同一设备中的多种操作对象，例如多个视频播放软件间均通用的操作指令，具有更加广泛的应用场景；并且，用户可设定仅获取其习惯使用的身体部位所对应的检测点的运动信息，不再获取对应其他身体部位的其他组检测点的运动信息，从而其他身体部位可自由活动；更进一步的，用户可同时对操作对象执行多个操作命令，有效提高操作效率。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本发明的其它特征、目的和优点将会变得更明显：
图1示意出了本发明一个方面的一种计算机实现的基于人体运动执行视频控制操作的方法流程图；
图2示意出了本发明一个优选实施例的基于人体运动执行视频控制操作的方法流程图；
图3示意出了本发明一个方面的一种计算机实现的基于人体运动执行视频控制操作的操作装置的结构示意图；
图4示意出了本发明一个优选实施例的基于人体运动执行视频控制操作的操作装置的结构示意图。
附图中相同或相似的附图标记代表相同或相似的部件。
具体实施方式
下面结合附图对本发明作进一步详细描述。
图1示意出了本发明一个方面的一种计算机实现的基于人体运动执行视频控制互操作的方法流程图。根据本发明的方法包括步骤S1、步骤S2以及步骤S3。
本发明中，可基于人体运动捕捉技术来获取对应于不同人体部位的检测点及其运动信息，例如，通过摄像头捕捉人体运动影像，并基于预存储的骨架模型信息对所捕捉的影像进行识别，以确定影像中的人体的各个部位，如头部、手部、腿部等，或者，更加精确的识别出手部的各个关节，如肩关节、肘关节、手掌等，且将所识别出的部位抽象为检测点，并获取各个检测点的运动信息的方式；或者，通过红外线发射器发射红外线，并通过扫描贴在人体各个部位上的反光标记点所反射的光线，来获得各个反光标记点的运动信息的方式等。
其中，所述计算机设备包括一种能够通过执行事先存储的程序，来自动地进行诸如数值计算和/或信息处理等操作的电子设备，其硬件包括但不限于微处理器、FPGA、DSP、嵌入式设备等。其中，所述计算机设备包括用户设备和网络设备。所述用户设备包括但不限于电脑、智能手机、PDA等。所述网络设备包括但不限于单个网络服务器、多个网络服务器组成的服务器组或基于云计算(Cloud Computing)的由大量计算机或网络服务器构成的云，其中，云计算是分布式计算的一种，由一群松散耦合的计算机集组成的一个超级虚拟计算机。其中，所述用户设备或所述网络设备所处的网络包括但不限于互联网、广域网、城域网、局域网、VPN网络等。
需要说明的是，所述用户设备、网络设备以及网络仅为举例，其他现有的或今后可能出现的用户设备、网络设备或网络如可适用于本发明，也应包含在本发明保护范围以内，并以引用方式包含于此。
具体地，如图1所示，在步骤S1中，计算机设备获取多个分别对应于不同人体部位的检测点中至少一个检测点的运动信息。优选地，所述计算机设备还获取所述至少一个检测点的标识信息。
其中，所述运动信息包括但不限于以下至少任一项信息：
1)所对应的检测点的运动方向信息；例如，向上、向下、向右、向左等方向信息；
2)所对应的检测点的运动轨迹信息；例如，直线轨迹、圆形轨迹，左右摆动运动的轨迹等；
3)所对应的检测点的运动速度信息。例如，检测点的直线运动速度信息，又例如，做圆弧运动的检测点的角速度信息等。
其中，所述计算机设备获取多个分别对应于不同人体部位的检测点中至少一个检测点的运动信息的方式包括但不限于：
1)所述计算机设备直接获取基于人体捕捉技术所获得的检测点的运动信息；
例如，计算机设备直接接收对应于头部的检测点的运动轨迹信息包括左右摆动的信息；又例如，计算机设备接收到对应于肩部关节点的运动方向信息包括向右的信息等。
2)所述计算机设备根据所述多个分别对应于不同人体部位的检测点中至少一个检测点的坐标信息，来确定所述至少一个检测点的运动信息。
具体地，所述根据所述多个分别对应于不同人体部位的检测点中至少一个检测点的坐标信息，来确定所述至少一个检测点的运动信息的方式包括但不限于：
a)计算机设备多次获取所述多个检测点中至少一个检测点中各个检测点的坐标信息；并且，根据所获得的所述至少一个检测点中各个检测点的多个坐标信息，来确定所述至少一个检测点中各个检测点的运动信息；
具体地，所述计算机设备对各个检测点获取预定次数的坐标信息，并根据多个检测点各自的多个坐标信息，确定各个检测点的运动信息。
例如，预定对每个检测点均获取3次坐标信息，且计算机设备获得一检测点的三个坐标信息依次为：(50，70)、(50，20)、(50，65)，则计算机设备根据横轴坐标相同，且纵轴坐标中70＞20，且20＜65的情况，确定该检测点的运动轨迹信息包括上下来回运动的信息。
b)当计算机设备检测到所述多个检测点中至少一个检测点的坐标信息发生变化时，获取所述至少一个检测点中各个检测点变化后的坐标信息；接着，所述计算机设备根据所述至少一个检测点中各个检测点变化后的坐标信息及其在变化前的坐标信息，确定所述各个检测点的运动信息。
在根据本发明的第一示例中，共有五个分别对应于人体不同部位的检测点，各个检测点的标识信息及其对应的人体部位如下表1所示：
表1
| 检测点标识信息 | 对应的人体部位 |
| Point1 | 右手手掌 |
| Point2 | 右手肘关节 |
| Point3 | 头部 |
| Point4 | 左手肘关节 |
| Point5 | 左手手掌 |
计算机设备检测到检测点Point1的坐标信息发生变化，并获得Point1的变化后坐标信息为(120，40)，接着，计算机设备结合Point1变化前的坐标信息(120，40)，确定变化前后的坐标信息相同，则确定Point1的运动信息包括圆形运动轨迹的信息。
需要说明的是，上述举例仅为更好地说明本发明的技术方案，而非对本发明的限制，本领域技术人员应该理解，任何获取多个分别对应于不同人体部位的检测点中至少一个检测点的运动信息的实现方式，例如，获得检测点的变化前后的坐标信息分别为(50，65)和(50，70)，并根据该检测点的横轴坐标未变，且变化前纵轴坐标50＞变化后的纵轴坐标20的情况，确定该检测点的运动方向信息包括向下运动的信息的方式等，均应包含在本发明的范围内。
接着，在步骤S2中，计算机设备获取与所述至少一个检测点的运动信息对应的操作指令。
其中，所述操作指令包括但不限于以下至少任一类指令：
1)鼠标操作指令；
所述鼠标操作指令包括对应于鼠标操作的指令，例如，点击右键、双击、拖动等指令；
2)按键操作指令；
所述按键操作指令包括对应于按键操作的指令，例如，电脑键盘的“Page Down”、“Page Up”按键的指令，又例如，机顶盒遥控器的“←”、“→”、“↑”、“↓”按键的指令等；
3)快捷操作指令。
所述快捷操作指令包括未对应于鼠标操作或按键操作，而直接对操作对象进行操作的操作指令。
具体地，所述计算机设备获取与所述至少一个检测点的运动信息对应的操作指令的方式包括但不限于：
1)计算机设备在步骤S1中获得所述至少一个检测点的运动信息后，根据操作指令与一项或多项运动信息的对应关系，获取与所获得的运动信息对应的操作指令；
例如，计算机设备在步骤S1中获得一个检测点的运动信息包括运动速度为0.05m/s，则计算机设备判断该运动速度小于预定的速度阈值0.1m/s，则计算机设备根据预定的与小于预定速度阈值的运动速度信息对应的操作指令，确定该检测点的运动信息对应于根据该检测点的位置来移动光标的鼠标操作指令。
又例如，计算机设备在步骤S1中共获得三个检测点的运动信息，其中，各个检测点的运动信息均包含“向上”的运动方向信息，则计算机设备统计包含“向上”的运动信息的数量为3，并获取与运动信息的内容“向上”以及其数量3对应的快捷操作指令“用户界面抖动”。
2)计算机设备在步骤S1中获得所述至少一个检测点的运动信息后，根据与所述至少一个检测点中各个检测点的标识信息及其运动信息，获取同时与至少一个检测点中各个检测点的标识信息及其运动信息对应的操作指令。
以上述第一示例为例继续说明，计算机设备在步骤S1中获得Point1的运动信息包括圆形运动轨迹，且预存储的与一个或多个检测点的运动信息对应的操作指令如下表2所示：
表2
则计算机设备根据表2确定与Point1的运动信息对应的操作指令包括双击鼠标左键的操作指令。
需要说明的是，上述举例仅为更好地说明本发明的技术方案，而非对本发明的限制，本领域技术人员应该理解，任何获取与所述至少一个检测点的运动信息对应的操作指令的实现方式，均应包含在本发明的范围内。
在步骤S3中，计算机设备对当前操作对象执行与所述操作指令对应的视频控制操作。
其中，所述当前操作对象包括当前能响应所述操作指令的一个或多个视频播放软件。需要说明的是，所述操作对象可经由用户交互界面的形式向用户展现以实现与用户的交互行为，也可不经由其用户交互界面，而以其他信息告知用户该操作对象的当前状态，以供用户进行交互。例如，采用提示信息的方式告知用户当前的操作对象及该操作对象的状态，如向用户提示“当前操作对象为视频播放软件A，且该视频播放软件A正在下载视频文件video1”等方式，以供用户进行后续操作；又例如，采用直接将操作结果向用户展现的方式来告知用户其操作已经生效，如当用户对机顶盒操作系统进行操作以更换当前观看的节目时，可直接向用户展现更换后的节目，而无需向用户展现其操作系统的用户交互界面。
其中，所述视频控制操作包括用于获取或观看视频的相关操作，优选地，所述视频控制操作包括但不限于以下至少任一项操作：
1)视频选择相关操作；
所述视频选择相关操作包括用于选择视频的操作，优选地，所述视频选择相关操作包括但不限于视频分类选择操作、视频分集选择操作、视频推荐选择操作以及视频索引选择操作等。
2)视频搜索相关操作；
所述视频选择相关操作包括用于进行视频搜索的操作，优选地，所述视频搜索相关操作包括但不限于以下方式的搜索操作：
a)根据用户输入信息进行搜索，例如，根据用户输入的视频名称进行搜索等；
b)根据视频的预定标签信息进行搜索，例如，通过选择视频的分类标签“动画”以及视频的出品时间标签“2011”进行搜索等。
3)视频播放相关操作；
所述视频播放相关操作包括用于控制视频播放过程的各项操作，包括但不限于：开始播放、暂停播放、快进、后退、跳集播放以及播放过程中的其他相关控制操作，如音量调节、进入/退出全屏模式等。
4)视频互动相关操作。
所述视频互动相关操作包括但不限于以下任一项操作：a)评分操作；b)投票操作；c)评论操作等。
以上述第一示例为例继续说明，当前用户正在操作的视频播放软件展现的用户交互界面为包含多个待视频文件名称的播放列表，且当前光标位于列表内的一个视频文件上，则计算机设备对该视频文件执行双击鼠标左键的操作指令，以播放该视频文件。
需要说明的是，计算机设备能够通过重复执行所述步骤S1至步骤S3以完成用户所需的多种视频控制操作行为。
以上述第一示例为例继续说明，当前视频播放软件正在播放视频文件video1，其中，用户缓慢移动右手，则计算机设备在步骤S2中获得与右手手腕检测点Point2的运动信息所对应的操作指令包括根据Point2的运动轨迹来移动光标的鼠标操作指令，则计算机设备在步骤S3中将光标按照根据用户右手的运轨迹进行移动，当移动到视频播放软件的播放区域的下方时，视频播动放软件在光标所处位置相应地呈现当前视频的播放进度条，计算机设备继续根据用户右手的运动轨迹，将光标移动至当前所展现的播放进度条的1/4处；接着，用户点头，则计算机设备在步骤S1中获得与头部对应的检测点Point3的运动信息包括上下来回运动，并在步骤S2中确定与该Point3的上下来回运动的信息对应的操作指令为单击鼠标左键的鼠标操作指令，则计算机设备在当前所展现的播放进度条的1/4处执行点击鼠标左键的操作以从1/4处开始播放当前的视频文件。接着，用户继续缓慢移动右手，相似地，计算机设备再次执行根据Point2的运动轨迹来移动光标的操作，根据用户右手的运动轨迹将光标移动至视频播放软件评分栏中“四星”处；接着，用户点头，则计算机设备对评分栏中的“四星”执行点击操作，以对当前正在播放的视频文件进行评分；通过与前述相似的操作，用户可以通过缓慢移动右手将光标移动至视频播放软件的“收藏”按钮上，并通过点头，来点击该“收藏”按钮以收藏当前播放的视频；或者，用户可先通过缓慢移动右手将光标移动至“推荐给朋友”的按钮处，并通过点头，将当前正在播放的视频的相关信息发送给好友；又或者，当光标在移动视频播放软件的搜索框中时，在手写输入模式下，通过缓慢移动右手来利用光标以手写的方式输入待搜索的视频文件名称，并通过点头来点击“搜索”按钮来执行搜索视频文件的操作。
以上述第一示例为例继续说明，在视频播放软件播放视频过程中，用户摇头，在步骤S1中获得与头部对应的检测点Point3的运动信息包括左右来回运动轨迹，并在步骤S2中确定与该Point3的左右来回运动轨迹的信息对应的操作指令为与空格键对应的按键操作指令，则计算机设备在步骤S3中执行空格键的命令以暂停播放当前的视频文件video1。
以上述第一示例为例继续说明，其中，用户左手向下移动，则计算机设备在步骤S1中检测到与左手手腕对应的检测点Point4和与左手肘关节对应的检测点Point5的运动信息均包括向下运动，则计算机设备在步骤S2中确定与所述Point4和Point5对应的操作指令包括“Pagedown”的按键操作指令，则计算机设备在步骤S3中执行与“Pagedown”的操作，以使视频播放软件播放当前的播放列表中正在播放的视频文件的下一视频文件video2；接着，用户以右手肘关节为中心，向上挥动右手，则计算机设备在步骤S1中检测到与右手手掌对应的检测点Point1对应的运动信息包括向上的圆弧运动，则计算机设备在步骤S2中获得与Point的向上的圆弧运动对应的操作指令包括“音量增加”的快捷操作指令，则计算机设备在步骤S3中将视频播放软件的音量增加预定值；接着，用户的右手手掌向右平移，左手手掌向左平移，则计算机设备在步骤S1中检测到Point1的运动信息包括向右运动，Point5的运动信息包括向左运动，并在步骤S2中确定与所述Point1和Point5的运动信息对应的操作指令包括“全屏播放”的快捷操作指令，则计算机设备全屏播放视频文件video2。
以上述第一示例为例继续说明，用户左手画圈，计算机设备在步骤S1中获得与Point5对应的运动信息包括圆形运动轨迹，并在步骤S2中获得与Point5的圆形运动轨迹对应的操作指令包括弹出分类页面的快捷操作，则在步骤S3中，计算机设备对当前正在全屏播放的视频播放软件执行所述视频控制操作，在当前全屏播放的界面上弹出包含多个视频分类的分类页面；接着，计算机设备根据用户缓慢移动右手的操作相应的移动光标至“最近更新”的分类项上，并根据用户的点头的动作对该分类项执行点击操作来选择该分类，以使视频播放软件展现该分类下的视频列表，接着，用户以左手肘关节为中心，向下挥动左手，则计算机设备在步骤S1中获得与Point5对应的运动信息包括向下圆弧形运动轨迹，并在步骤S2中获得相应的操作指令包括“↓”的按键操作，则将当前的视频列表向下滚动预定距离，以呈现该视频列表中的下一部分内容，接着，计算机设备根据用户缓慢移动右手的动作将光标移动至视频列表中的视频文件video3上，并根据用户的点头的动作对该视频文件进行点击来选择该视频文件，接着，当视频播放软件呈现的该视频文件的索引列表时，计算机设备可根据用户所执行的相似的动作，来滚动列表并选择其中的一项索引信息；或者，当视频播放软件呈现包含多个分集的页面时，计算机设备可根据用户缓慢移动右手的动作将光标移动至相应的分集选项上，并根据用户的点头的动作选择该分集进行播放。
需要说明的是，上述举例仅为更好地说明本发明的技术方案，而非对本发明的限制，本领域技术人员应该理解，任何获取对当前操作对象执行与所述操作指令对应的视频控制操作的实现方式，均应包含在本发明的范围内。
作为本发明的优选实施例之一，本发明还包括步骤S4(图未示)，所述步骤S2进一步包括步骤S201(图未示)。
在步骤S4中，计算机设备判断是否存在与所述至少一个检测点的运动信息对应的操作指令。
以上述第一示例为例继续说明，计算机设备在步骤S1中还获得Point4的运动信息包括向下运动，则计算机设备根据表2判断不存在仅与Point4的向下运动的运动信息对应的操作指令。
需要说明的是，上述举例仅为更好地说明本发明的技术方案，而非对本发明的限制，本领域技术人员应该理解，任何判断是否存在与所述至少一个检测点的运动信息对应的操作指令的实现方式，均应包含在本发明的范围内。
在步骤S201中，当计算机设备判断存在与所述至少一个检测点的运动信息对应的操作指令时，获取该操作指令。
其中，所述当计算机设备判断存在与所述至少一个检测点的运动信息对应的操作指令时，获取该操作指令的方式，与前述步骤S2中计算机设备获取与所述至少一个检测点的运动信息对应的操作指令相同或相似，并以引用的方式包含于此，不再赘述。
根据本发明的方法，基于对应于不同人体部位的检测点的运动信息来获得相应的操作指令，可获得对位于同一设备中的多种操作对象均通用的操作指令，例如，鼠标的双击操作、或者“↑”、“↓”等按键操作等，具有更加广泛的应用场景，而不受限于特定的操作对象。更进一步地，在采用坐标信息来确定运动信息的情况下，用户仅需使变换前后到达特定的点，即可实现相应的操作指令，而无需受限于实际的运动方式，如，在当检测点的坐标信息发生变化时，根据坐标点变化前和变化前的坐标信息确定运动信息的情况下，用户只需满足变化前的坐标信息与变化后的坐标信息位于同一直线上，即可包括直线轨迹的运动信息。而与用户身体部位实际运动的轨迹无关。
图2示意出了本发明一个优选实施例的基于人体运动执行视频控制操作的方法流程图。其中，所述多个检测点由多组检测点构成，每组检测点包含至少一个检测点。根据本实施例的方法包括步骤S1、步骤S2和步骤S3，其中，对于每组检测点，所述步骤S1进一步包括步骤S101，所述步骤S2进一步包括步骤S202，其中，所述步骤S3包括步骤S301。
其中，计算机设备可根据所述多组检测点中任一组中的一个或多个检测点的运动信息来执行控制操作，优选地，所述各组检测点分别对应不同类别的操作指令。
在步骤S101中，对每组检测点，计算机设备分别获取各组中一个或多个检测点的运动信息。
其中，所述计算机设备获取各组中一个或多个检测点的运动信息的方式与前述参照图1所示实施例的步骤S1中所述获取多个分别对应于不同人体部位的检测点中至少一个检测点的运动信息的方式相同或相似，并以引用的方式包含于此，不再赘述。
优选地，计算机设备可基于用户预定的需要获取的所述多组检测点中的一组或多组检测点的运动信息，来获取所述一组或多组检测点的运动信息。
在步骤S202中，对于每组检测点，计算机设备分别获取与所述各组中的一个或多个检测点的运动信息对应的操作指令。
其中，所述计算机设备分别获取与所述各组中的一个或多个检测点的运动信息对应的操作指令的方式与前述参照图1所示实施例的步骤S2中计算机设备获取与所述至少一个检测点的运动信息对应的操作指令的方式相同或相似，并以引用的方式包含于此，不再赘述。
在步骤S301中，计算机设备根据所获得的一项或多项操作指令，对当前操作对象执行相应的操作。
根据本发明的第二示例，当前操作对象包括运行于Windows操作系统中的一个视频播放软件，两组检测点如下表3所示：
表3
且计算机设备在步骤S101中获得第一组的Point6的运动信息包括圆形运动轨迹的信息，第二组的运动信息包括Point8的运动信息包括向左运动的信息，且计算机设备在步骤S201中根据第一组的Point6的运动信息获得与按键“Alt”对应的操作指令，根据第二组的Point8的运动信息获得与按键“Tab”对应的操作指令，则计算机设备同时执行与按键“Alt”与“Tab”对应的操作指令，即对当前的操作系统输入Alt+Tab的操作指令，以将当前操作对象切换为另一正在运行的软件。
需要说明的是，上述举例仅为更好地说明本发明的技术方案，而非对本发明的限制，本领域技术人员应该理解，任何根据所获得的与所述多组检测中的至少一组检测点分别对应的至少一个操作指令，对当前操作对象执行相应的操作的实现方式，均应包含在本发明的范围内。
作为本实施例的一个优选方案其中，当获得多个操作指令时，所述步骤S301还包括步骤S3011(图未示)和步骤S3012(图未示)。
在步骤S3011中，计算机设备根据预定的操作指令优先级，确定所述至少一个操作指令的执行顺序。
在步骤S3012中，计算机设备按照所述多个操作指令的执行顺序对当前操作对象执行与所述多个操作指令分别对应的视频控制操作。
以上述第二示例为例继续说明，其中，计算机设备根据预定的操作指令优先级，确定按键“Alt”的操作指令对应的优先级为第二优先级，低于按键“Tab”操作指令所对应的第一优先级，则计算机设备先在当前的视频播放软件界面中执行按键“Tab”的操作指令，以改变当前视频播放软件中所选中的按钮模块，之后再执行按键“Alt”的操作指令，以激活该视频播放软件窗口的菜单栏。需要说明的是，上述举例仅为更好地说明本发明的技术方案，而非对本发明的限制，本领域技术人员应该理解，任何按照所述多个操作指令的执行顺序对当前操作对象执行与所述多个操作指令分别对应的视频控制操作的实现方式，均应包含在本发明的范围内。
作为本实施例的另一优选方案，其中，当获得多个操作指令时，所述实施例在步骤S301之前还包括步骤S5(图未示)，其中，所述步骤S301还包括步骤S3013(图未示)。
在步骤S5中，计算机设备判断所述多个操作指令能否同时执行。
具体地，所述计算机设备根据预定的可同时执行的操作指令列表或者不可同时执行的操作指令列表，判断所获得的多个操作指令能否同时执行。
根据本发明的第三示例，计算机设备在步骤S2中获得左键点击的鼠标操作指令和与“↑”键对应的按键指令，当前光标位于视频播放软件的播放列表的一个视频文件上，则计算机设备判断左键点击和“↑”键的指令属于与播放列表对应的可同时执行的操作指令列表中，则计算机设备判断该两项操作指令可同时执行。
接着，在步骤S3013中，当判断所述多个操作指令能够同时执行时，计算机设备基于所述多个操作指令对当前操作对象进行操作。
以上述第三示例为例继续说明，当判断左键点击的鼠标指令和与“↑”键对应的按键指令可同时执行时，计算机设备同时执行该两项操作指令，即通过左键点击选中当前光标所处的视频文件，并向上移动该视频文件在播放列表中的位置。
其中，所述当判断所述多个操作指令能够同时执行时，计算机设备基于所述多个操作指令对当前操作对象进行操作的方式与前述步骤S301中计算机设备根据所获得的一项或多项操作指令，对当前操作对象执行与该一项或多项操作指令相应的操作的方式相同或相似，不再赘述。
根据本发明的方法，最少仅需一组检测点即可对当前操作对象进行操作，用户可设定仅获取其习惯使用的身体部位所对应的检测点的运动信息，不再获取对应其他身体部位的其他组检测点的运动信息，从而其他身体部位可自由活动，例如，当设定仅获取对应于右手手掌与右手手肘的这一组检测点的运动信息时，用户的左手可自由活动，而不会干扰右手运动所发出的操作指令，优化用户体验；并且，当获取多组检测点的运动信息时，可同时对操作对象执行多个操作命令，如当一组检测点对应按键操作指令，另一组检测点对应鼠标操作指令时，用户可以类似同时使用鼠标和键盘的方式对当前操作对象进行操作，可有效提高操作效率。
图3示意出了本发明一个方面的一种计算机实现的基于人体运动执行视频控制操作的操作装置的结构示意图。根据本发明的操作装置包括第一获取装置1、第二获取装置2以及执行装置3。
具体地，如图3所示，第一获取装置1获取多个分别对应于不同人体部位的检测点中至少一个检测点的运动信息。优选地，所述第一获取装置1还获取所述至少一个检测点的标识信息。
其中，所述运动信息包括但不限于以下至少任一项信息：
1)所对应的检测点的运动方向信息；例如，向上、向下、向右、向左等方向信息；
2)所对应的检测点的运动轨迹信息；例如，直线轨迹、圆形轨迹，左右摆动运动的轨迹等；
3)所对应的检测点的运动速度信息。例如，检测点的直线运动速度信息，又例如，做圆弧运动的检测点的角速度信息等。
其中，所述第一获取装置1获取多个分别对应于不同人体部位的检测点中至少一个检测点的运动信息的方式包括但不限于：
1)所述第一获取装置1直接获取基于人体捕捉技术所获得的检测点的运动信息；
例如，第一获取装置1直接接收对应于头部的检测点的运动轨迹信息包括左右摆动的信息；又例如，第一获取装置1接收到对应于肩部关节点的运动方向信息包括向右的信息等。
2)所述包含于第一获取装置1中的第一子获取装置(图未示)根据所述多个分别对应于不同人体部位的检测点中至少一个检测点的坐标信息，来确定所述至少一个检测点的运动信息。
具体地，所述第一子获取装置根据所述多个分别对应于不同人体部位的检测点中至少一个检测点的坐标信息，来确定所述至少一个检测点的运动信息的方式包括但不限于：
a)包含于所述第一子获取装置中的第二子获取装置(图未示)多次获取所述多个检测点中至少一个检测点中各个检测点的坐标信息；并且，包含于所述第一子获取装置中的第一确定装置(图未示)根据所获得的所述至少一个检测点中各个检测点的多个坐标信息，来确定所述至少一个检测点中各个检测点的运动信息；
具体地，所述第二子获取装置对各个检测点获取预定次数的坐标信息，第一确定装置根据多个检测点各自的多个坐标信息，确定各个检测点的运动信息。
例如，预定对每个检测点均获取3次坐标信息，且第二子获取装置获得一检测点的三个坐标信息依次为：(50，70)、(50，20)、(50，65)，则第一确定装置根据横轴坐标相同，且纵轴坐标中70＞20，且20＜65的情况，确定该检测点的运动轨迹信息包括上下来回运动的信息。
b)当包含于所述第一子获取装置中的第三子获取装置(图未示)检测到所述多个检测点中至少一个检测点的坐标信息发生变化时，获取所述至少一个检测点中各个检测点变化后的坐标信息；接着，包含于所述第一子获取装置中的第二确定装置(图未示)根据所述至少一个检测点中各个检测点变化后的坐标信息及其在变化前的坐标信息，确定所述各个检测点的运动信息。
在根据本发明的第一示例中，共有五个分别对应于人体不同部位的检测点，各个检测点的标识信息及其对应的人体部位如下表4所示：
表4
| 检测点标识信息 | 对应的人体部位 |
| Point1 | 右手手掌 |
| Point2 | 右手肘关节 |
| Point3 | 头部 |
| Point4 | 左手肘关节 |
| Point5 | 左手手掌 |
第三子获取装置检测到检测点Point1的坐标信息发生变化，并获得Point1的变化后坐标信息为(120，40)，接着，第二确定装置结合Point1变化前的坐标信息(120，40)，判断变化前后的坐标信息相同，则第二确定装置确定Point1的运动信息包括圆形运动轨迹的信息。
需要说明的是，上述举例仅为更好地说明本发明的技术方案，而非对本发明的限制，本领域技术人员应该理解，任何获取多个分别对应于不同人体部位的检测点中至少一个检测点的运动信息的实现方式，例如，获得检测点的变化前后的坐标信息分别为(50，65)和(50，70)，并根据该检测点的横轴坐标未变，且变化前纵轴坐标50＞变化后的纵轴坐标20的情况，确定该检测点的运动方向信息包括向下运动的信息的方式等，均应包含在本发明的范围内。
接着，第二获取装置2获取与所述至少一个检测点的运动信息对应的操作指令。
其中，所述操作指令包括但不限于以下至少任一类指令：
1)鼠标操作指令；
所述鼠标操作指令包括对应于鼠标操作的指令，例如，点击右键、双击、拖动等指令；
2)按键操作指令；
所述按键操作指令包括对应于按键操作的指令，例如，电脑键盘的“Page Down”、“Page Up”按键的指令，又例如，机顶盒遥控器的“←”、“→”、“↑”、“↓”按键的指令等；
3)快捷操作指令；
所述快捷操作指令包括未对应于鼠标操作或按键操作，而直接对操作对象进行操作的操作指令。
具体地，所述第二获取装置2获取与所述至少一个检测点的运动信息对应的操作指令的方式包括但不限于：
1)第一获取装置1获得所述至少一个检测点的运动信息后，第二获取装置2根据操作指令与一项或多项运动信息的对应关系，获取与所获得的运动信息对应的操作指令；
例如，第一获取装置1获得一个检测点的运动信息包括运动速度为0.05m/s，第二获取装置2判断该运动速度小于预定的速度阈值0.1m/s，则第二获取装置2根据预定的与小于预定速度阈值的运动速度信息对应的操作指令，确定该检测点的运动信息对应于根据检测点的位置来移动光标的鼠标操作指令。
又例如，第一获取装置1共获得三个检测点的运动信息，其中，各个检测点的运动信息均包含“向上”的运动方向信息，则第二获取装置2统计包含“向上”的运动信息的数量为3，并获取与运动信息的内容“向上”以及其数量3对应的快捷操作指令“用户界面抖动”。
2)第一获取装置1获得所述至少一个检测点的运动信息后，第二获取装置2根据与所述至少一个检测点中各个检测点的标识信息及其运动信息，获取同时与至少一个检测点中各个检测点的标识信息及其运动信息对应的操作指令。
以上述第一示例为例继续说明，且第一获取装置1获得Point1的运动信息包括圆形运动轨迹，且预存储的与一个或多个检测点的运动信息对应的操作指令如下表5所示：
表5
则第二获取装置2根据表5确定与Point1的运动信息对应的操作指令包括双击鼠标左键的操作指令。
需要说明的是，上述举例仅为更好地说明本发明的技术方案，而非对本发明的限制，本领域技术人员应该理解，任何获取与所述至少一个检测点的运动信息对应的操作指令的实现方式，均应包含在本发明的范围内。
执行装置3对当前操作对象执行与所述操作指令对应的视频控制操作。
其中，所述当前操作对象包括当前能响应所述操作指令的一个或多个视频播放软件。需要说明的是，所述操作对象可经由用户交互界面的形式向用户展现以实现与用户的交互行为，也可不经由其用户交互界面，而以其他信息告知用户该操作对象的当前状态，以供用户进行交互。例如，采用提示信息的方式告知用户当前的操作对象及该操作对象的状态，如向用户提示“当前操作对象为视频播放软件A，且该视频播放软件A正在下载视频文件video1”等方式，以供用户进行后续操作；又例如，采用直接将操作结果向用户展现的方式来告知用户其操作已经生效，如当用户对机顶盒操作系统进行操作以更换当前观看的节目时，可直接向用户展现更换后的节目，而无需向用户展现其操作系统的用户交互界面。
其中，所述视频控制操作包括用于获取或观看视频的相关操作，优选地，所述视频控制操作包括但不限于以下至少任一项操作：
1)视频选择相关操作；
所述视频选择相关操作包括用于选择视频的操作，优选地，所述视频选择相关操作包括但不限于视频分类选择操作、视频分集选择操作、视频推荐选择操作以及视频索引选择操作等。
2)视频搜索相关操作；
所述视频选择相关操作包括用于进行视频搜索的操作，优选地，所述视频搜索相关操作包括但不限于以下方式的搜索操作：
a)根据用户输入信息进行搜索，例如，根据用户输入的视频名称进行搜索等；
b)根据视频的预定标签信息进行搜索，例如，通过选择视频的分类标签“动画”以及视频的出品时间标签“2011”进行搜索等。
3)视频播放相关操作；
所述视频播放相关操作包括用于控制视频播放过程的各项操作，包括但不限于：开始播放、暂停播放、快进、后退、跳集播放以及播放过程中的其他相关控制操作，如音量调节、进入/退出全屏模式等。
4)视频互动相关操作。
所述视频互动相关操作包括但不限于以下任一项操作：a)评分操作；b)投票操作；c)评论操作等。
以上述第一示例为例继续说明，用户正在操作的视频播放软件展现的用户交互界面为包含多个待视频文件名称的播放列表，且当前光标位于列表内的一个视频文件上，则执行装置3对该视频文件执行双击鼠标左键的操作指令，以播放该视频文件。
需要说明的是，计算机设备能够通过重复执行第一获取装置1、第二获取装置2以及执行装置3的操作，以完成用户所需的多种视频控制操作行为。
以上述第一示例为例继续说明，当前视频播放软件正在播放视频文件video1，其中，用户缓慢移动右手，则第二获取装置2获得与右手手腕检测点Point2的运动信息所对应的操作指令包括根据Point2的运动轨迹来移动光标的鼠标操作指令，则执行装置3将光标按照根据用户右手的运轨迹进行移动，当移动到视频播放软件的播放区域的下方时，视频播动放软件在光标所处位置相应地呈现当前视频的播放进度条，执行装置3继续根据用户右手的运动轨迹，将光标移动至当前所展现的播放进度条的1/4处；接着，用户点头，则第一获取装置1获得与头部对应的检测点Point3的运动信息包括上下来回运动，第二获取装置2确定与该Point3的上下来回运动的信息对应的操作指令为单击鼠标左键的鼠标操作指令，则执行装置3在当前所展现的播放进度条的1/4处执行点击鼠标左键的操作以从1/4处开始播放当前的视频文件。接着，用户继续缓慢移动右手，相似地，执行装置3再次执行根据Point2的运动轨迹来移动光标的操作，根据用户右手的运动轨迹将光标移动至视频播放软件评分栏中“四星”处；接着，用户点头，则执行装置3对评分栏中的“四星”执行点击操作，以对当前正在播放的视频文件进行评分；通过与前述相似的操作，执行装置3根据用户缓慢移动右手的轨迹将光标移动至视频播放软件的“收藏”按钮上，并当计算机设备获取用户点头的动作时，由执行装置3来点击该“收藏”按钮以收藏当前播放的视频；或者，执行装置3根据用户缓慢移动右手的动作将光标移动至“推荐给朋友”的按钮处，并根据用户的点头动作，执行点击该“推荐给朋友”按钮的操作，以将当前正在播放的视频的相关信息发送给好友；又或者，当光标在移动视频播放软件的搜索框中时，在手写输入模式下，执行装置3根据用户缓慢移动右手的动作来通过光标以手写的方式输入待搜索的视频文件名称，并根据用户的点头动作来点击“搜索”按钮来执行搜索视频文件的操作。
以上述第一示例为例继续说明，在视频播放软件播放视频过程中，用户摇头，第一获取装置1获得与头部对应的检测点Point3的运动信息包括左右来回运动轨迹，第二获取装置2确定与该Point3的左右来回运动轨迹的信息对应的操作指令为与空格键对应的按键操作指令，则执行装置3执行空格键的命令以暂停播放当前的视频文件video1。
以上述第一示例为例继续说明，其中，用户左手向下移动，第一获取装置1检测到与左手手腕对应的检测点Point4和与左手肘关节对应的检测点Point5的运动信息均包括向下运动，第二获取装置2确定与所述Point4和Point5对应的操作指令包括“Pagedown”的按键操作指令，则执行装置3执行与“Pagedown”的操作，以使视频播放软件播放当前的播放列表中正在播放的视频文件的下一视频文件video2；接着，用户以右手肘关节为中心，向上挥动右手，第一获取装置1检测到与右手手掌对应的检测点Point1对应的运动信息包括向上的圆弧运动，第二获取装置2获得与Point的向上的圆弧运动对应的操作指令包括“音量增加”的快捷操作指令，则执行装置3将视频播放软件的音量增加预定值；接着，用户的右手手掌向右平移，左手手掌向左平移，第一获取装置1检测到Point1的运动信息包括向右运动，Point5的运动信息包括向左运动，第二获取装置2确定与所述Point1和Point5的运动信息对应的操作指令包括“全屏播放”的快捷操作指令，则执行装置3全屏播放视频文件video2。
以上述第一示例为例继续说明，用户左手画圈，第一获取装置1获得与Point5对应的运动信息包括圆形运动轨迹，第二获取装置2获得与Point5的圆形运动轨迹对应的操作指令包括弹出分类页面的快捷操作，执行装置3对当前正在全屏播放的视频播放软件执行所述视频控制操作，在当前全屏播放的界面上弹出包含多个视频分类的分类页面；接着，执行装置3根据用户缓慢移动右手的操作相应的移动光标至“最近更新”的分类项上，并根据用户的点头的动作对该分类项执行点击操作来选择该分类，以使视频播放软件展现该分类下的视频列表，接着，用户以左手肘关节为中心，向下挥动左手，第一获取装置1获得与Point5对应的运动信息包括向下圆弧形运动轨迹，第二获取装置2获得相应的操作指令包括“↓”的按键操作，则执行装置3将当前的视频列表向下滚动预定距离，以呈现该视频列表中的下一部分内容，接着，执行装置3根据用户缓慢移动右手的动作将光标移动至视频列表中的视频文件video3上，并根据用户的点头的动作对该视频文件进行点击来选择该视频文件，接着，当视频播放软件呈现的该视频文件的索引列表时，执行装置3可根据用户所执行的相似的动作，来滚动列表并选择其中的一项索引信息；或者，当视频播放软件呈现包含多个分集的页面时，执行装置3可根据用户缓慢移动右手的动作将光标移动至相应的分集选项上，并根据用户的点头的动作选择该分集进行播放。
需要说明的是，上述举例仅为更好地说明本发明的技术方案，而非对本发明的限制，本领域技术人员应该理解，任何获取对当前操作对象执行与所述操作指令对应的视频控制操作的实现方式，均应包含在本发明的范围内。
作为本发明的优选实施例之一，根据本发明的操作装置还包括第一判断装置(图未示)，所述第二获取装置进一步包括第四子获取装置(图未示)。
第一判断装置判断是否存在与所述至少一个检测点的运动信息对应的操作指令。
以上述第一示例为例继续说明，第一获取装置1还获得Point4的运动信息包括向下运动，则第一判断装置根据表5判断不存在仅与Point4的向下运动的运动信息对应的操作指令。
需要说明的是，上述举例仅为更好地说明本发明的技术方案，而非对本发明的限制，本领域技术人员应该理解，任何判断是否存在与所述至少一个检测点的运动信息对应的操作指令的实现方式，均应包含在本发明的范围内。
当计算机设备判断存在与所述至少一个检测点的运动信息对应的操作指令时，第四子获取装置获取该操作指令。
其中，所述当第一判断装置判断存在与所述至少一个检测点的运动信息对应的操作指令时，第四子获取装置获取该操作指令的方式，与前述第二获取装置2获取与所述至少一个检测点的运动信息对应的操作指令相同或相似，并以引用的方式包含于此，不再赘述。
根据本发明的方案，基于对应于不同人体部位的检测点的运动信息来获得相应的操作指令，可获得对位于同一设备中的多种操作对象均通用的操作指令，例如，鼠标的双击操作、或者“↑”、“↓”等按键操作等，具有更加广泛的应用场景，而不受限于特定的操作对象。更进一步地，在采用坐标信息来确定运动信息的情况下，用户仅需使变换前后到达特定的点，即可实现相应的操作指令，而无需受限于实际的运动方式，如，在当检测点的坐标信息发生变化时，根据坐标点变化前和变化前的坐标信息确定运动信息的情况下，用户只需满足变化前的坐标信息与变化后的坐标信息位于同一直线上，即可包括直线轨迹的运动信息。而与用户身体部位实际运动的轨迹无关。
图4示意出了本发明一个优选实施例的基于人体运动执行视频控制操作的操作装置的结构示意图。其中，所述多个检测点由多组检测点构成，每组检测点包含至少一个检测点。根据本实施例的操作装置包括第一获取装置1、第二获取装置2和执行装置3，其中，对于每组检测点，所述第一获取装置1进一步包括第五子获取装置101，所述第二获取装置2进一步包括第六子获取装置202，其中，所述执行装置3包括第一子执行装置301。
其中，计算机设备可根据所述多组检测点中任一组中的一个或多个检测点的运动信息来执行控制操作，优选地，所述各组检测点分别对应不同类别的操作指令。
对每组检测点，第五子获取装置101分别获取各组中一个或多个检测点的运动信息。
其中，所述第五子获取装置101获取各组中一个或多个检测点的运动信息的方式与前述参照图3所示实施例中第一获取装置1获取多个分别对应于不同人体部位的检测点中至少一个检测点的运动信息的方式相同或相似，并以引用的方式包含于此，不再赘述。
优选地，第五子获取装置101可基于用户预定的需要获取的所述多组检测点中的一组或多组检测点的运动信息，来获取所述一组或多组检测点的运动信息。
对于每组检测点，第六子获取装置202分别获取与所述各组中的一个或多个检测点的运动信息对应的操作指令。
其中，所述第六子获取装置202分别获取与所述各组中的一个或多个检测点的运动信息对应的操作指令的方式与前述参照图3所示实施例中第一获取装置1获取与所述至少一个检测点的运动信息对应的操作指令的方式相同或相似，并以引用的方式包含于此，不再赘述。
第一子执行装置301根据所获得的一项或多项操作指令，对当前操作对象执行相应的操作。
根据本发明的第二示例，当前操作对象包括运行于Windows操作系统中的一个视频播放软件，两组检测点如下表6所示：
表6
第五子获取装置S101获得第一组的Point6的运动信息包括圆形运动轨迹的信息，第二组的运动信息包括Point8的运动信息包括向左运动的信息，且第六子获取装置202根据第一组的Point6的运动信息获得与按键“Alt”对应的操作指令，根据第二组的Point8的运动信息获得与按键“Tab”对应的操作指令，则第一子执行装置301同时执行与按键“Alt”与“Tab”对应的操作指令，即对当前的操作系统输入Alt+Tab的操作指令，以将当前操作对象切换为另一正在运行的播放软件。
需要说明的是，上述举例仅为更好地说明本发明的技术方案，而非对本发明的限制，本领域技术人员应该理解，任何根据所获得的一项或多项操作指令，对当前操作对象执行相应的操作的实现方式，均应包含在本发明的范围内。
作为本实施例的一个优选方案其中，当获得多个操作指令时，所述第一子执行装置301还包括第三确定装置(图未示)和第二子执行装置(图未示)。
第三确定装置根据预定的操作指令优先级，确定所述至少一个操作指令的执行顺序。
第二子执行装置按照所述多个操作指令的执行顺序对当前操作对象执行与所述多个操作指令分别对应的视频控制操作。
以上述第二示例为例继续说明，其中，第三确定装置根据预定的操作指令优先级，确定按键“Alt”的操作指令对应的优先级为第二优先级，低于按键“Tab”操作指令所对应的第一优先级，则第二子执行装置先在当前的视频播放软件界面界面中执行按键“Tab”的操作指令，以改变当前视频播放软件中所选中的按钮模块，之后再执行按键“Alt”的操作指令，以激活该视频播放软件窗口的菜单栏。
需要说明的是，上述举例仅为更好地说明本发明的技术方案，而非对本发明的限制，本领域技术人员应该理解，任何按照所述多个操作指令的执行顺序对当前操作对象执行与所述多个操作指令分别对应的视频控制操作的实现方式，均应包含在本发明的范围内。
作为本实施例的另一优选方案，其中，当获得多个操作指令时，所述实施例还包括第二判断装置(图未示)，其中，所述第一子执行装置301还包括第三子执行装置(图未示)。
第二判断装置判断所述多个操作指令能否同时执行。
具体地，所述第二判断装置根据预定的可同时执行的操作指令列表或者不可同时执行的操作指令列表，判断所获得的多个操作指令能否同时执行。
根据本发明的第三示例，第二获取装置2获得左键点击的鼠标指令和与“↑”键对应的按键指令，当前光标位于视频播放软件的播放列表的一个待播放对象上，则第二判断装置判断左键点击和“↑”键的指令属于与播放列表对应的可同时执行的操作指令列表中，则第二判断装置判断该两项操作指令可同时执行。
接着，当第二判断装置判断所述多个操作指令能够同时执行时，第三子执行装置基于所述多个操作指令对当前操作对象进行操作。
以上述第三示例为例继续说明，当第二判断装置判断左键点击的鼠标指令和与“↑”键对应的按键指令可同时执行时，第三子执行装置同时执行该两项操作指令，即通过左键点击选中当前光标所处的待播放对象名称，并向上移动将该待播放对象在待播放列表中的位置。
其中，所述当第二判断装置判断所述多个操作指令能够同时执行时，第三子执行装置基于所述多个操作指令对当前操作对象进行操作的方式与第一子执行装置301根据所获得的一项或多项操作指令，对当前操作对象执行相应的操作的方式相同或相似，不再赘述。
根据本发明的方案，最少仅需一组检测点即可对当前操作对象进行操作，用户可设定仅获取其习惯使用的身体部位所对应的检测点的运动信息，不再获取对应其他身体部位的其他组检测点的运动信息，从而其他身体部位可自由活动，例如，当设定仅获取对应于右手手掌与右手手肘的这一组检测点的运动信息时，用户的左手可自由活动，而不会干扰右手运动所发出的操作指令，优化用户体验；并且，当获取多组检测点的运动信息时，可同时对操作对象执行多个操作命令，如当一组检测点对应按键操作指令，另一组检测点对应鼠标操作指令时，用户可以类似同时使用鼠标和键盘的方式对当前操作对象进行操作，可有效提高操作效率。
对于本领域技术人员而言，显然本发明不限于上述示范性实施例的细节，而且在不背离本发明的精神或基本特征的情况下，能够以其他的具体形式实现本发明。因此，无论从哪一点来看，均应将实施例看作是示范性的，而且是非限制性的，本发明的范围由所附权利要求而不是上述说明限定，因此旨在将落在权利要求的等同要件的含义和范围内的所有变化涵括在本发明内。不应将权利要求中的任何附图标记视为限制所涉及的权利要求。此外，显然“包括”一词不排除其他单元或步骤，单数不排除复数。系统权利要求中陈述的多个单元或装置也可以由一个单元或装置通过软件或者硬件来实现。第一，第二等词语用来表示名称，而并不表示任何特定的顺序。
Claims (23)
1.一种计算机实现的基于人体运动执行视频控制操作的方法，其中，所述方法包括以下步骤：
a获取多个分别对应于不同人体部位的检测点中至少一个检测点的运动信息；
b获取与所述至少一个检测点的运动信息对应的操作指令；
c对当前操作对象执行与所述操作指令对应的视频控制操作。
2.根据权利要求1所述的方法，其中，所述视频控制操作包括但不限于以下至少任一项操作：
-视频选择相关操作；
-视频搜索相关操作；
-视频播放相关操作；
-视频互动相关操作。
3.根据权利要求1或2所述的方法，其中，所述步骤a包括以下步骤：
a1根据所述多个分别对应于不同人体部位的检测点中至少一个检测点的坐标信息，来确定所述至少一个检测点的运动信息。
4.根据权利要求3所述的方法，其中，所述步骤a1包括以下步骤：
a1多次获取所述至少一个检测点中各个检测点的坐标信息；
a2根据所获得的所述至少一个检测点中各个检测点的多个坐标信息，来确定所述至少一个检测点中各个检测点的运动信息。
5.根据权利要求3所述的方法，其中，所述步骤a1包括以下步骤：
-当检测到所述多个检测点中至少一个检测点的坐标信息发生变化时，分别获取所述至少一个检测点中各个检测点变化后的坐标信息；
-根据所获得的所述至少一个检测点中各个检测点变化后的坐标信息及其在变化前的坐标信息，确定所述各个检测点的运动信息。
6.根据权利要求1至5中任一项所述的方法，其中，所述方法还包括以下步骤：
-判断是否存在与所述至少一个检测点的运动信息对应的操作指令；
其中，所述步骤b包括以下步骤：
-当判断存在与所述至少一个检测点的运动信息对应的操作指令时，获取该操作指令。
7.根据权利要求1至6中任一项所述的方法，其中，所述多个检测点由多组检测点构成，每组检测点包含至少一个检测点；其中，对于每组检测点，所述步骤a包括以下步骤：
-对每组检测点，分别获取各组中一个或多个检测点的运动信息；
其中，所述步骤b包括以下步骤：
-对于每组检测点，分别获取与所述各组中的一个或多个检测点的运动信息对应的操作指令；
其中，所述步骤c包括以下步骤：
-根据所获得的一项或多项操作指令，对当前操作对象执行相应的视频控制操作。
8.根据权利要求7所述的方法，其中，所述步骤c包括以下步骤：
-当获得多个操作指令时，根据预定的操作指令优先级，确定所述多个操作指令的执行顺序；
-按照所述多个操作指令的执行顺序对当前操作对象执行与所述多个操作指令分别对应的视频控制操作。
9.根据权利要求7或8所述的方法，其中，所述方法在步骤c之前还包括以下步骤：
-当获得多个操作指令时，判断所述多个操作指令能否同时执行；
其中，所述步骤c还包括以下步骤：
-当判断所述多个操作指令能够同时执行时，基于所述多个操作指令对当前操作对象进行视频控制操作。
10.根据权利要求1至9中任一项所述的方法，其中，所述运动信息包括但不限于以下至少一项信息：
-所对应的检测点的运动方向信息；
-所对应的检测点的运动轨迹信息；
-所对应的检测点的运动速度信息。
11.根据权利要求1至10中任一项所述的方法，其中，所述操作指令包括但不限于以下至少一类指令：
-鼠标操作指令；
-按键操作指令；
-快捷操作指令。
12.一种基于人体运动执行视频控制操作的操作装置，其中，所述操作装置包括：
第一获取装置，用于获取多个分别对应于不同人体部位的检测点中至少一个检测点的运动信息；
第二获取装置，用于获取与所述至少一个检测点的运动信息对应的操作指令；
执行装置，用于对当前操作对象执行与所述操作指令对应的视频控制操作。
13.根据权利要求12所述的操作装置，其中，所述视频控制操作包括但不限于以下至少任一项操作：
-视频选择相关操作；
-视频搜索相关操作；
-视频播放相关操作；
-视频互动相关操作。
14.根据权利要求12或13所述的方法，其中，所述第一获取装置包括以下步骤：
第一子获取装置，用于根据所述多个分别对应于不同人体部位的检测点中至少一个检测点的坐标信息，来确定所述至少一个检测点的运动信息。
15.根据权利要求14所述的操作装置，其中，所述第一子获取装置包括：
第二子获取装置，用于多次获取所述至少一个检测点中各个检测点 的坐标信息；
第一确定装置，用于根据所获得的所述至少一个检测点中各个检测点的多个坐标信息，来确定所述至少一个检测点中各个检测点的运动信息。
16.根据权利要求14所述的操作装置，其中，所述第一子获取装置包括：
第三子获取装置，用于每当检测到所述多个检测点中至少一个检测点的坐标信息发生变化时，即分别获取所述至少一个检测点中各个检测点变化后的坐标信息；
第二确定装置，用于根据所获得的所述至少一个检测点中各个检测点变化后的坐标信息及其在变化前的坐标信息，确定所述各个检测点的运动信息。
17.根据权利要求12至16中任一项所述的操作装置，其中，所述操作装置还包括：
第一判断装置，用于判断是否存在与所述至少一个检测点的运动信息对应的操作指令；
其中，所述第二获取装置包括：
第四子获取装置，用于当判断存在与所述至少一个检测点的运动信息对应的操作指令时，获取该操作指令。
18.根据权利要求12至17中任一项所述的操作装置，其中，所述多个检测点由多组检测点构成，每组检测点包含至少一个检测点；其中，对于每组检测点，所述第一获取装置包括：
第五子获取装置，用于对于每组检测点，获取该组中一个或多个检测点的运动信息；
其中，所述第二获取装置包括：
第六子获取装置，用于对于每组检测点，获取与该组中一个或多个检测点的运动信息分别对应的多个操作指令；
其中，所述执行装置包括：
第一子执行装置，用于根据所获得的一项或多项操作指令，对当前 操作对象执行相应的视频控制操作。
19.根据权利要求18所述的操作装置，其中，所述第一子执行装置包括：
第三确定装置，用于当获得多个操作指令时，根据预定的操作指令优先级，确定所述多个操作指令的执行顺序；
第二子执行装置，用于按照所述多个操作指令的执行顺序对当前操作对象执行与所述多个操作指令分别对应的视频控制操作。
20.根据权利要求18或19所述的操作装置，其中，所述操作装置还包括：
第二判断装置，用于当获得多个操作指令时，判断所述多个操作指令能否同时执行；
其中，所述第一子执行装置还包括：
第三子执行装置，用于当判断所述多个操作指令能够同时执行时，基于所述多个操作指令对当前操作对象进行视频控制操作。
21.根据权利要求12至20中任一项所述的操作装置，其中，所述运动信息包括但不限于以下至少一项信息：
-所对应的检测点的运动方向信息；
-所对应的检测点的运动轨迹信息；
-所对应的检测点的运动速度信息。
22.根据权利要求12至21中任一项所述的操作装置，其中，所述操作指令包括但不限于以下至少一类指令：
-鼠标操作指令；
-按键操作指令；
-快捷操作指令。
23.一种计算机设备，其中，该计算机设备包含如权利要求12至22中至少一项所述的操作装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201110445626XA CN102591458A (zh) | 2011-12-27 | 2011-12-27 | 一种基于人体运动执行视频控制操作的方法、装置和设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201110445626XA CN102591458A (zh) | 2011-12-27 | 2011-12-27 | 一种基于人体运动执行视频控制操作的方法、装置和设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN102591458A true CN102591458A (zh) | 2012-07-18 |
Family
ID=46480255
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201110445626XA Pending CN102591458A (zh) | 2011-12-27 | 2011-12-27 | 一种基于人体运动执行视频控制操作的方法、装置和设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN102591458A (zh) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103677224A (zh) * | 2012-09-03 | 2014-03-26 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
| CN103677232A (zh) * | 2012-09-17 | 2014-03-26 | 联想(北京)有限公司 | 信息处理方法、动作识别装置及电子设备 |
| CN104219587A (zh) * | 2014-08-20 | 2014-12-17 | 深圳智意能电子科技有限公司 | 一种用于对应用进行操控的方法和装置 |
| CN109416576A (zh) * | 2016-06-30 | 2019-03-01 | 微软技术许可有限责任公司 | 基于确定的约束与虚拟对象的交互 |
| CN110148072A (zh) * | 2018-02-12 | 2019-08-20 | 庄龙飞 | 运动课程评分方法与系统 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101482772A (zh) * | 2008-01-07 | 2009-07-15 | 纬创资通股份有限公司 | 电子装置及其操作方法 |
| CN101930282A (zh) * | 2009-06-27 | 2010-12-29 | 英华达(上海)电子有限公司 | 移动终端、基于移动终端的输入方法 |
| CN102027434A (zh) * | 2008-03-17 | 2011-04-20 | 索尼计算机娱乐美国有限责任公司 | 具有集成摄像头的控制器以及和交互式应用相接口的方法 |
-
2011
- 2011-12-27 CN CN201110445626XA patent/CN102591458A/zh active Pending
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101482772A (zh) * | 2008-01-07 | 2009-07-15 | 纬创资通股份有限公司 | 电子装置及其操作方法 |
| CN102027434A (zh) * | 2008-03-17 | 2011-04-20 | 索尼计算机娱乐美国有限责任公司 | 具有集成摄像头的控制器以及和交互式应用相接口的方法 |
| CN101930282A (zh) * | 2009-06-27 | 2010-12-29 | 英华达(上海)电子有限公司 | 移动终端、基于移动终端的输入方法 |
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103677224A (zh) * | 2012-09-03 | 2014-03-26 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
| CN103677224B (zh) * | 2012-09-03 | 2017-04-19 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
| CN103677232A (zh) * | 2012-09-17 | 2014-03-26 | 联想(北京)有限公司 | 信息处理方法、动作识别装置及电子设备 |
| CN103677232B (zh) * | 2012-09-17 | 2017-06-27 | 联想(北京)有限公司 | 信息处理方法、动作识别装置及电子设备 |
| CN104219587A (zh) * | 2014-08-20 | 2014-12-17 | 深圳智意能电子科技有限公司 | 一种用于对应用进行操控的方法和装置 |
| CN109416576A (zh) * | 2016-06-30 | 2019-03-01 | 微软技术许可有限责任公司 | 基于确定的约束与虚拟对象的交互 |
| CN109416576B (zh) * | 2016-06-30 | 2022-04-29 | 微软技术许可有限责任公司 | 基于确定的约束与虚拟对象的交互 |
| CN110148072A (zh) * | 2018-02-12 | 2019-08-20 | 庄龙飞 | 运动课程评分方法与系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20210072889A1 (en) | Systems and methods for representing data, media, and time using spatial levels of detail in 2d and 3d digital applications | |
| US10460176B2 (en) | Methods and systems of spatiotemporal pattern recognition for video content development | |
| AU2015222869B2 (en) | System and method for performing spatio-temporal analysis of sporting events | |
| CN103809733B (zh) | 人机交互系统和方法 | |
| TWI398818B (zh) | 手勢辨識方法與系統 | |
| CN102591458A (zh) | 一种基于人体运动执行视频控制操作的方法、装置和设备 | |
| EP2954692B1 (en) | Telestration system for command processing | |
| CN105378593A (zh) | 利用手上的奇异兴趣点基于手势进行人机同步交互的方法和系统 | |
| CN106462874A (zh) | 用于呈现与视频内容有关的商业信息的方法、系统和介质 | |
| CN103139627A (zh) | 智能电视及其手势控制方法 | |
| CN103380405A (zh) | 用于手势识别的用户界面、装置和方法 | |
| CN110866940A (zh) | 虚拟画面的控制方法、装置、终端设备及存储介质 | |
| CN102541358B (zh) | 滑动点击响应的3d视角变换系统及方法 | |
| CN111103982A (zh) | 基于体感交互的数据处理方法以及装置、系统 | |
| US20130229348A1 (en) | Driving method of virtual mouse | |
| CN110448903A (zh) | 游戏中控制策略的确定方法、装置、处理器及终端 | |
| CN106020712A (zh) | 一种触控手势识别方法及装置 | |
| CN111552418A (zh) | 资源信息的显示方法及装置 | |
| JP5668005B2 (ja) | ジェスチャ認識装置及びそのプログラム | |
| Xue et al. | Learning‐Replay Based Automated Robotic Testing for Mobile App | |
| CN104219587A (zh) | 一种用于对应用进行操控的方法和装置 | |
| CN110308805A (zh) | 适用于移动终端的hover显示方法 | |
| JP2011242889A (ja) | ジェスチャを用いた情報入力装置、方法及びプログラム | |
| CN103076878B (zh) | 显示终端遥控操作方法及装置 | |
| JP5756730B2 (ja) | 情報入力装置及びそのプログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C12 | Rejection of a patent application after its publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20120718 |