CN104281265A - 一种应用程序的控制方法、装置及电子设备 - Google Patents

一种应用程序的控制方法、装置及电子设备 Download PDF

Info

Publication number
CN104281265A
CN104281265A CN201410542224.5A CN201410542224A CN104281265A CN 104281265 A CN104281265 A CN 104281265A CN 201410542224 A CN201410542224 A CN 201410542224A CN 104281265 A CN104281265 A CN 104281265A
Authority
CN
China
Prior art keywords
attitude
attitude data
user
sequence
application program
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410542224.5A
Other languages
English (en)
Other versions
CN104281265B (zh
Inventor
韩芳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BOE Technology Group Co Ltd
Original Assignee
BOE Technology Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BOE Technology Group Co Ltd filed Critical BOE Technology Group Co Ltd
Priority to CN201410542224.5A priority Critical patent/CN104281265B/zh
Publication of CN104281265A publication Critical patent/CN104281265A/zh
Priority to US14/771,079 priority patent/US20160349848A1/en
Priority to PCT/CN2015/072520 priority patent/WO2016058303A1/zh
Priority to KR1020157023540A priority patent/KR101718837B1/ko
Priority to JP2017539485A priority patent/JP6545271B2/ja
Priority to EP15750616.3A priority patent/EP3208686A4/en
Application granted granted Critical
Publication of CN104281265B publication Critical patent/CN104281265B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/44—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment involving timing of operations, e.g. performing an action within a time slot
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002—Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • G06F3/005—Input arrangements through a video camera
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/128—Adjusting depth or disparity
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1087—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/60—Type of objects
    • G06V20/64—Three-dimensional objects

Abstract

本发明实施例的目的在于提供一种应用程序的控制方法、装置及电子设备，提高应用程序的运行速度。本发明实施例的方法包括：获取记录用户运动的深度图像序列；预先根据一数学转换模型将所述深度图像序列转换为第一用户姿态数据序列；从预设的标准姿态数据序列中，获取相匹配的第一目标姿态数据，并基于所述第一目标姿态数据进行应用控制处理；在所述第一目标姿态数据对应的目标姿态需要维持的时间超过预订时间门限时，从第二姿态数据序列中挑选部分用户姿态数据进行后续匹配处理；所述第二姿态数据序列与已处理的用户姿态数据形成的数据序列相邻，且第二姿态数据序列的长度与所述目标姿态需要维持的时间相关。本发明提高了应用程序运行速度。

Description

一种应用程序的控制方法、装置及电子设备
技术领域
本发明涉及应用的人体控制技术领域，特别是一种应用程序的控制方法、装置及电子设备。
背景技术
体感游戏突破了以往单纯以手柄按键输入的操作方式，而是通过肢体动作变化来进行(操作)的新型电子游戏。
体感游戏已经在各大游戏平台，如Wii平台、PS平台以及Xbox平台等，得到了充分的应用。
目前，体感游戏获取用户动作的一种方式为通过摄像头来采集用户的图像，并基于该图像进行处理，得到描述用户动作的数据，进而根据该数据来实现游戏的控制，即：用户的运动被游戏系统解释成可以用于影响游戏的控制。换言之，用户可以使用运动来控制游戏。用户的运动基本上可以被解释成任何类型的游戏控制，如控制游戏中的被控对象的动作、又如保存游戏、退出游戏等菜单相关的操作。
然而，目前的体感游戏存在资源消耗巨大的问题，解释如下。
在通过图像方式感应用户运动的体感游戏中，首先需要采集用户的图像，然后要基于采集到的用户图像进行模型的建立，最后要进行模型的匹配(即进行动作的解释)来确定对应的指令。
而众所周知的是，图像处理是目前计算机系统中非常耗费资源的一类处理，如果对采集到的每幅图像都进行上述的处理的话，将会导致程序运行缓慢问题，降低用户体验。
当然，以上是以体感游戏为例进行的说明，但应当理解的是，只要是通过图像方式感应用户运动来控制应用程序都会存在以上问题，在此不一一举例说明。
发明内容
本发明实施例的目的在于提供一种应用程序的控制方法、装置及电子设备，提高应用程序的运行速度。
为了实现上述目的，本发明实施例提供了一种应用程序的控制方法，包括：
获取记录用户运动的深度图像序列；
预先根据一数学转换模型将所述深度图像序列转换为第一用户姿态数据序列；
从所述应用程序预先设置的标准姿态数据序列中，获取与所述用户姿态数据序列中当前待处理的用户姿态数据相匹配的第一目标姿态数据，并基于所述第一目标姿态数据进行应用控制处理；
在所述第一目标姿态数据对应的目标姿态需要维持的时间超过预订时间门限时，从第二姿态数据序列中挑选部分用户姿态数据进行后续匹配处理；所述第二姿态数据序列与已处理的用户姿态数据形成的数据序列相邻，且第二姿态数据序列的长度与所述目标姿态需要维持的时间相关。
上述的应用程序的控制方法，其中，对应的目标姿态需要维持的时间超过预订时间门限的姿态数据包括：一个目标姿态起始子数据、至少一个目标姿态中间子数据和一个目标姿态结束子数据，所述从第二姿态数据序列中挑选部分用户姿态数据进行后续匹配处理具体包括：对应于至少一个目标姿态中间子数据和一个目标姿态结束子数据，从所述第二姿态数据序列中挑选部分用户姿态数据，用于后续匹配处理。
上述的应用程序的控制方法，其中，转换得到所述第一用户姿态数据序列的操作在所述应用程序需要使用所述用户姿态数据的阶段之前完成。
上述的应用程序的控制方法，其中，所述数学转换模型与多个应用程序相对应，所述控制方法还包括：
在得到第一用户姿态数据序列后，从所述多个应用程序确定目标应用程序；
确定所述目标应用程序对应的标准姿态数据序列用于姿态匹配。
上述的应用程序的控制方法，其中，获取记录用户运动的深度图像序列具体包括：
获取用户的原始图像序列；
对所述原始图像序列中的图像进行降低分辨率、背景移除、去噪和深度值调整中的至少一个，得到所述深度图像序列。
上述的应用程序的控制方法，其中，每一个标准姿态数据对应于一个用于显示到显示屏的屏幕用户形象，所述基于所述目标姿态数据进行应用控制处理具体为：将所述显示屏显示的当前屏幕用户形象改变为所述目标姿态数据对应的第一屏幕用户形象。
上述的应用程序的控制方法，其中，每一个标准姿态对应于一姿态需要维持的时间，所述控制方法还包括：
确定应用运行时间；
根据应用运行时间以及标准姿态数据序列中每一个标准姿态对应的姿态需要维持时间，确定第二目标姿态数据；
在所述第二目标姿态数据与第一目标姿态数据不同时，执行一提醒操作。
上述的应用程序的控制方法，其中，每一个标准姿态对应于一姿态需要维持的时间，所述控制方法还包括：
确定应用运行时间；
根据应用运行时间以及标准姿态数据序列中每一个标准姿态对应的姿态需要维持时间，确定第二目标姿态数据；
确定第二目标姿态数据对应的第二屏幕用户形象；
当所述第二屏幕用户形象与第一屏幕用户形象的差异超过预定差异标准时，执行一提醒操作。
为了更好的实现上述目的，本发明实施例还提供了一种应用程序的控制装置，包括：
获取模块，用于获取记录用户运动的深度图像序列；
转换模块，用于预先根据一数学转换模型将所述深度图像序列转换为第一用户姿态数据序列；
处理模块，用于从所述应用程序预先设置的标准姿态数据序列中，获取与所述用户姿态数据序列中当前待处理的用户姿态数据相匹配的第一目标姿态数据，并基于所述第一目标姿态数据进行应用控制处理；
筛选模块，用于在所述第一目标姿态数据对应的目标姿态需要维持的时间超过预订时间门限时，从第二姿态数据序列中挑选部分用户姿态数据进行后续匹配处理；所述第二姿态数据序列与已处理的用户姿态数据形成的数据序列相邻，且第二姿态数据序列的长度与所述目标姿态需要维持的时间相关。
上述的应用程序的控制装置，其中，对应的目标姿态需要维持的时间超过预订时间门限的姿态数据包括：一个目标姿态起始子数据、至少一个目标姿态中间子数据和一个目标姿态结束子数据，所述筛选模块具体用于：对应于至少一个目标姿态中间子数据和一个目标姿态结束子数据，从所述第二姿态数据序列中挑选部分用户姿态数据，用于后续匹配处理。
上述的应用程序的控制装置，其中，转换得到所述第一用户姿态数据序列的操作在所述应用程序需要使用所述用户姿态数据的阶段之前完成。
上述的应用程序的控制装置，其中，所述数学转换模型与多个应用程序相对应，所述控制装置还包括：
程序确定模块，用于在得到第一用户姿态数据序列后，从所述多个应用程序确定目标应用程序；
标准姿态序列确定模块，确定所述目标应用程序对应的标准姿态数据序列用于姿态匹配。
上述的应用程序的控制装置，其中，获取模块具体包括：
原始图像获取单元，用于获取用户的原始图像序列；
优化单元，用于对所述原始图像序列中的图像进行降低分辨率、背景移除、去噪和深度值调整中的至少一个，得到所述深度图像序列。
上述的应用程序的控制装置，其中，每一个标准姿态数据对应于一个用于显示到显示屏的屏幕用户形象，所述处理模块具体用于将所述显示屏显示的当前屏幕用户形象改变为所述目标姿态数据对应的第一屏幕用户形象，实现所述应用控制处理。
上述的应用程序的控制装置，其中，每一个标准姿态对应于一姿态需要维持的时间，所述控制装置还包括：
时间确定模块，用于确定应用运行时间；
目标姿态数据确定模块，用于根据应用运行时间以及标准姿态数据序列中每一个标准姿态对应的姿态需要维持时间，确定第二目标姿态数据；
第一提醒模块，用于在所述第二目标姿态数据与第一目标姿态数据不同时，执行一提醒操作。
上述的应用程序的控制装置，其中，每一个标准姿态对应于一姿态需要维持的时间，所述控制装置还包括：
时间确定模块，用于确定应用运行时间；
目标姿态数据确定模块，用于根据应用运行时间以及标准姿态数据序列中每一个标准姿态对应的姿态需要维持时间，确定第二目标姿态数据；
屏幕用户形象确定模块，用于确定第二目标姿态数据对应的第二屏幕用户形象；
第二提醒模块，用于在所述第二屏幕用户形象与第一屏幕用户形象的差异超过预定差异标准时，执行一提醒操作。
为了更好的实现上述目的，本发明实施例还提供了一种电子设备，包括上述的控制装置。
本发明实施例具有如下的有益效果。
本发明实施例的应用程序的控制方法、装置及电子设备中，采集用户的运动图像，然后依据图像分析得到用户姿态数据序列，当与某一用户姿态数据匹配的标准姿态数据所对应的目标姿态需要维持的时间较长时，则从后续的用户姿态数据序列中挑选部分用户姿态数据序列进行后续的匹配处理，因此能够提高应用程序的运行速度。
附图说明
图1表示本发明实施例的一种应用程序的控制方法的流程示意图；
图2表示本发明实施例的一种应用程序的控制装置的结构示意图；
图3表示本发明实施例的一种应用程序的控制方法的详细实现过程示意图。
具体实施方式
本发明实施例的应用程序的控制方法、装置及电子设备中，采集用户的运动图像，然后依据图像分析得到用户姿态数据序列，当与某一用户姿态数据匹配的标准姿态数据所对应的目标姿态需要维持的时间较长时，则从后续的用户姿态数据序列中挑选部分用户姿态数据序列进行后续的匹配处理，以提高应用程序的运行速度。
本发明实施例的一种应用程序的控制方法如图1所示，包括：
步骤101，获取记录用户运动的深度图像序列；
步骤102，预先根据一数学转换模型将所述深度图像序列转换为第一用户姿态数据序列；
步骤103，从所述应用程序预先设置的标准姿态数据序列中，获取与所述用户姿态数据序列中当前待处理的用户姿态数据相匹配的第一目标姿态数据，并基于所述第一目标姿态数据进行应用控制处理；
步骤104，在所述第一目标姿态数据对应的目标姿态需要维持的时间超过预订时间门限时，从第二姿态数据序列中挑选部分用户姿态数据进行后续匹配处理；所述第二姿态数据序列与已处理的用户姿态数据形成的数据序列相邻，且第二姿态数据序列的长度与所述目标姿态需要维持的时间相关。
本发明实施例的应用程序的控制方法、装置及电子设备中，采集用户的运动图像，然后依据图像分析得到用户姿态数据序列，当与某一用户姿态数据匹配的标准姿态数据所对应的目标姿态被应用程序预先定义为需要维持较长的时间时，则从后续的用户姿态数据序列中挑选部分用户姿态数据序列进行后续的匹配处理，由于待处理数据量的减小以及数据处理的时间被拉长，因此能够提高应用程序的运行速度。
以下就上述的有益效果进一步详细说明如下。
假定图像采集设备的采集速率为X幅/秒，现有技术中采集持续时间与应用处理(图像的转换及匹配)的时间相同，为Y秒，则采集到的图像数量为X*Y，假定每张图像对应的用户姿态数据进行匹配处理需要消耗的处理器资源(不包括将图像转换为用户姿态数据所消耗的资源)为Z，则现有技术中需要耗费的处理器资源为：X*Y*Z，单位时间内需要消耗的处理器资源为X*Z。
提高应用程序的运行速度一般可以从如下两方面着手：
1、降低整体需要处理的数据量；
2、降低单位时间内处理器资源消耗量。
本发明实施例的方法中，当确定出目标姿态需要维持的时间超过预订时间门限时，则在接下来的处理中，会从数据序列中挑选部分数据来进行后续的匹配处理，因此相对于现有技术减少了需要处理的数据量，因此能够提高应用程序的运行速度。
而从单位时间内的处理器资源消耗量来看，本发明实施例的方法分如下两个阶段：数据转换阶段和数据匹配阶段，而现有技术只有一个阶段，即同时实现数据转换和数据匹配。即使本发明实施例的方法没有减少需要处理的数据量，其处理时间也比现有技术长(增加了游戏运行之前的转换预处理)。因此，本发明实施例的方法中，单位时间内的处理器资源消耗量会小于现有技术的单位时间内的处理器资源消耗量，这也能够提高应用程序的运行速度。
也就是说，本发明实施例的方法在减少需要处理的数据量的同时还延长了对这些数据进行处理的时间，因此本发明实施例的方法能够提高应用程序的运行速度。
同时，应当理解的是，本发明实施例的方法虽然是预先根据深度图像序列得到用户姿态数据序列，但对用户控制应用程序并不会产生不利的后果，对此解释如下。
首先，本发明实施例针对的应用具有如下的特征：
1、应用程序预先设置有标准姿态数据序列，也就是说，用户需要一定的顺序来完成标准姿态数据序列所对应的标准姿态。换而言之，用户在应用程序中需要执行的动作是预先规定好的，也是用户预先能够知道的。
例如，该应用程序为一款体感瑜伽游戏，其规定了用户需要按照一定的顺序来完成一系列的动作以完成挑战。又如该应用程序为一款体感跳舞游戏，其规定了用户需要按照一定的顺序来完成一系列的动作以完成当前关卡。再如，该应用程序为一款体感迷宫游戏，用户需要按照一定的顺序运动，进而以最佳方式走出当前关卡对应的迷宫。
这种类型的应用非常多，在此不一一举例说明。
由于这一类应用对用户控制的实时性要求非常低，因此对于这一类的应用预先采集图像并形成用户姿态数据序列并不会对用户控制游戏造成无法控制的影响。
2、按照应用的设定，用户在完成某些动作时需要维持一定的时间。如瑜伽游戏中，用户需要维持某一个姿态一段时间，又如体感跳舞游戏中，在播放相同音符的时间段中，用户需要维持某一个姿态。
基于以上的描述可以发现，由于这一类应用的特殊性，当存在需要用户维持一段时间(假定为5s)的姿态时，此时，按照10幅图像/秒的速度采集时，5s内采集到的图像为50幅，如果用户按照要求执行动作，则对这50幅图像对应的用户姿态数据进行匹配都会得到同一个标准姿态数据。
本发明实施例中，对上述5s内采集的图像对应的50个用户姿态数据按照一定的间隔取部分姿态数据也可以实现对用户动作完成度以及准确度的考察，对此举例说明如下。
如按照5个用户姿态数据取1个姿态数据，则从上述的50个用户姿态数据中取出10个用户姿态数据，按照这10个用户姿态数据来进行匹配，当10个用户姿态数据匹配到的标准姿态数据都相同时，也可以表明用户完成了规定的动作。
也就是说，由于动作的特殊性，从对应的用户动作数据序列中取部分用户动作数据也可以实现相同的功能(如验证用户动作完成的持续性，又或者基于动作序列确定指令等)，达到相同的效果。
综上所述，本发明实施例的方法针对上述的应用程序，在实现完整的体感控制的同时，能够提高应用程序的运行速度。
从以上的描述可以发现，第二姿态数据序列的确定与目标姿态需要维持的时间相关。
以存在需要用户维持一段时间(假定为5s)的姿态，则在确定姿态起始时间点之后，第二姿态数据序列为从姿态起始时间点后的5s内采集到的图像转换得到的用户姿态数据。而当图像采集速度为10幅图像/秒时，则在确定姿态起始时间点之后，第二姿态数据序列为从姿态起始时间点后的10s内采集到的图像转换得到的用户姿态数据。
本发明具体实施例中，深度图像序列可以通过深度相机、摄像机、立体相机、和/或其他合适的捕捉设备获取。
为了提高判断的准确性，在本发明的具体实施例中，将上述的需要维持一定时间的目标姿态对应的数据分为3个部分：
一个目标姿态起始子数据；
至少一个目标姿态中间子数据；和
一个目标姿态结束子数据。
这种情况下，所述从第二姿态数据序列中挑选部分用户姿态数据进行后续匹配处理具体包括：对应于至少一个目标姿态中间子数据和一个目标姿态结束子数据，从所述第二姿态数据序列中挑选部分用户姿态数据，用于后续匹配处理。
也就是说，设置的目标姿态中间子数据的数量越多，则需要挑选的用户姿态数据越多，但相应的后续的控制处理的结果也更精确。
在本发明的具体实施例中，上述的姿态数据都是一个表达用户身体部位、部位位置以及部位间相对位置关系的数据。
上述的姿态数据可以通过现有技术中能够描述人体的任意模型来描述，如骨骼和关节共同构成的骨架模型，又如通过线框网格模型等，在此不作详细说明。
在本发明的具体实施例中，可以直接对图像采集设备直接采集到的图像进行转换得到用户姿态数据，但综合考虑数据处理量、转换精度等因素，本发明实施例中先对直接采集到的图像进行优化处理，也就是说，所述获取记录用户运动的深度图像序列具体包括：
获取用户的原始图像序列；
对所述原始图像序列中的图像进行降低分辨率、背景移除、去噪和深度值调整中的至少一个，得到所述深度图像序列。
上述的可选的降低分辨率、背景移除的处理，使得后续的转换能够以较小的计算开销完成。
如在图像捕捉过程中，有可能发生各种随机的，或者系统性的误差，图像采集设备本身也会导致采集到的图像中存在一定的缺陷或畸变等，因此通过去噪操作能够更好的去除上述的缺陷，得到更加准确和完整的数据，保证后续转换得到的用户姿态数据的准确度。
当然，应当理解的是，上述的优化仅仅是举例说明，本发明实施例并不具体限定采用的具体优化手段。
应该了解的是，得到一套数学转换模型需要付出巨大的代价，因此为了降低开发成本，本发明实施例中，可以将一套数学转换模型分配给多个应用程序使用。而每个应用程序各自对应的标准姿态数据序列在绝大部分情况下都不相同，在这种情况下，本发明实施例的方法还包括：
在得到第一用户姿态数据序列后，从所述多个应用程序确定目标应用程序；
确定所述目标应用程序对应的标准姿态数据序列用于姿态匹配。
当用户预先完成自己想要处理的应用程序所规定的动作之后，即可确定目标应用程序，进而选择目标应用程序对应的标准姿态数据序列来对上述得到的用户姿态数据序列进行处理。
通过上述的方式，使得一个数学转换模型可以为多应用程序所使用，大大降低了开发成本。如以上举例的瑜伽体感游戏、跳舞体感游戏和迷宫体感游戏由于针对的对象基本相同，因此可以使用一个数学转换模型来对应，以降低开发成本。
本发明实施例的应用程序的控制方法，转换得到所述第一用户姿态数据序列的操作在所述应用程序需要使用所述用户姿态数据的阶段之前完成，因此，将数据转换和数据匹配分为两个阶段，延长了数据处理的时间，降低了单位时间对处理资源的需求，能够提高应用程序的运行速度。
在此对应用程序需要使用所述用户姿态数据的时机举例说明如下。
以体感跳舞游戏为例，当用户启动应用程序时并不需要用户姿态数据，只有当用户选择游戏难度、游戏场景等并选择“开始游戏”后，才进入了应用程序需要使用所述用户姿态数据的阶段。
本发明实施例的方法可以用于多种场景，一种比较典型的场景为身体动作跟踪场景，即每一个标准姿态数据对应于一个用于显示到显示屏的屏幕用户形象，所述基于所述目标姿态数据进行应用控制处理具体为：将所述显示屏显示的当前屏幕用户形象改变为所述目标姿态数据对应的第一屏幕用户形象。
举例说明如下，当用户从站立姿态变成坐下姿态时，则采集到的用户坐下的图像能够转换得到一用户姿态数据，而该用户姿态数据与标准姿态数据中的坐下姿态数据匹配，此时，通过一定的显示处理手段，就能够将屏幕上显示的站立的人改变为坐下的人。
应当了解的是，上述的过程描述仅仅是为了方便理解而作的一个简化描述，实际处理过程可能还需要包括更多的使用户得到更好体验的处理手段，在此不作进一步详细说明。
在本发明具体实施例中，还可以针对用户的动作是否符合要求进行提醒，而这种提醒操作可以通过多种方式进行，下面就两种可能的实现方式详细说明如下。
由于应用程序已经预先规定用户所要执行的动作的顺序以及每个动作的持续时间，因此，在一些时间节点上用户应该处于某一种特定的姿态上，举例如下。
假定应用程序预先规定的标准姿态序列如下：A1姿态B1秒、A2姿态B2秒、A3姿态B3秒、A4姿态B4秒。此时当时间段处于(B1,B1+B2]的区间时，则用户应该处于A2姿态。
由于每一个姿态对应于一个标准姿态数据，结合以上的分析可以发现，当应用运行的时间确定时，即可确定用户当前应该作的动作，也就是可以确定用户当前应该所处的标准姿态所对应的标准姿态数据。
而用户当前实际所处的姿态可以确定，当二者不同时，即可发现用户没有按照要求进行动作，即可进行提示。
因此，上述方式下，本发明实施例的应用程序的控制方法中，每一个标准姿态对应于一姿态需要维持的时间，所述控制方法还包括：
确定应用运行时间；
根据应用运行时间以及标准姿态数据序列中每一个标准姿态对应的姿态需要维持时间，确定第二目标姿态数据；
在所述第二目标姿态数据与第一目标姿态数据不同时，执行一提醒操作。
当然，以上是以姿态数据作为参照对象来确定用户动作是否符合要求，由于姿态数据都对应于屏幕用户形象，因此，也可以使用屏幕用户形象的差异是否超过预定的差异标准进行判断。
这种方式下，所述控制方法还包括：
确定应用运行时间；
根据应用运行时间以及标准姿态数据序列中每一个标准姿态对应的姿态需要维持时间，确定第二目标姿态数据；
确定第二目标姿态数据对应的第二屏幕用户形象；
当所述第二屏幕用户形象与第一屏幕用户形象的差异超过预定差异标准时，执行一提醒操作。
本发明实施例还提供了一种应用程序的控制装置，如图2所示，包括：
获取模块，用于获取记录用户运动的深度图像序列；
转换模块，用于预先根据一数学转换模型将所述深度图像序列转换为第一用户姿态数据序列；
处理模块，用于从所述应用程序预先设置的标准姿态数据序列中，获取与所述用户姿态数据序列中当前待处理的用户姿态数据相匹配的第一目标姿态数据，并基于所述第一目标姿态数据进行应用控制处理；
筛选模块，用于在所述第一目标姿态数据对应的目标姿态需要维持的时间超过预订时间门限时，从第二姿态数据序列中挑选部分用户姿态数据进行后续匹配处理；所述第二姿态数据序列与已处理的用户姿态数据形成的数据序列相邻，且第二姿态数据序列的长度与所述目标姿态需要维持的时间相关。
其中，为方便比较，本发明具体实施例中，对应的目标姿态需要维持的时间超过预订时间门限的姿态数据包括：一个目标姿态起始子数据、至少一个目标姿态中间子数据和一个目标姿态结束子数据，所述筛选模块具体用于：对应于至少一个目标姿态中间子数据和一个目标姿态结束子数据，从所述第二姿态数据序列中挑选部分用户姿态数据，用于后续匹配处理。
上述的控制装置中，转换得到所述第一用户姿态数据序列的操作在所述应用程序需要使用所述用户姿态数据的阶段之前完成，将数据处理分为多段，延长数据的处理时间，因此能够降低单位时间的处理资源需求，能够提高应用程序的运行速度。
为降低开发成本，本发明实施例的所述控制装置中，所述数学转换模型与多个应用程序相对应，所述控制装置还包括：
程序确定模块，用于在得到第一用户姿态数据序列后，从所述多个应用程序确定目标应用程序；
标准姿态序列确定模块，确定所述目标应用程序对应的标准姿态数据序列用于姿态匹配。
为了进一步提高运行效率，或者提高用户数据序列计算的准确性，本发明具体实施例的控制装置中，获取模块具体包括：
原始图像获取单元，用于获取用户的原始图像序列；
优化单元，用于对所述原始图像序列中的图像进行降低分辨率、背景移除、去噪和深度值调整中的至少一个，得到所述深度图像序列。
本发明实施例的应用程序的控制装置可以用于用户动作的跟踪，每一个标准姿态数据对应于一个用于显示到显示屏的屏幕用户形象，所述处理模块具体用于将所述显示屏显示的当前屏幕用户形象改变为所述目标姿态数据对应的第一屏幕用户形象，实现所述应用控制处理。
为了实现对用户不标准动作的提醒，本发明实施例中，每一个标准姿态对应于一姿态需要维持的时间，所述控制装置还包括：
时间确定模块，用于确定应用运行时间；
目标姿态数据确定模块，用于根据应用运行时间以及标准姿态数据序列中每一个标准姿态对应的姿态需要维持时间，确定第二目标姿态数据；
第一提醒模块，用于在所述第二目标姿态数据与第一目标姿态数据不同时，执行一提醒操作。
为了实现对用户不标准动作的提醒，本发明实施例中，每一个标准姿态对应于一姿态需要维持的时间，所述控制装置还包括：
时间确定模块，用于确定应用运行时间；
目标姿态数据确定模块，用于根据应用运行时间以及标准姿态数据序列中每一个标准姿态对应的姿态需要维持时间，确定第二目标姿态数据；
屏幕用户形象确定模块，用于确定第二目标姿态数据对应的第二屏幕用户形象；
第二提醒模块，用于在所述第二屏幕用户形象与第一屏幕用户形象的差异超过预定差异标准时，执行一提醒操作。
本发明实施例还提供了一种电子设备，其特征在于，包括上述的控制装置。
其中，上述的电子设备可以是个人计算机、游戏平台、电视等。
下面就本发明实施例的方法一种具体工作过程详细描述如下。
如图3所示，在应用程序需要使用用户姿态数据之前，执行步骤301，先获取图像采集设备(如深度相机)采集到的图像，得到一个图像序列；
在得到该图像序列之后，可选的可以对该图像序列中的图像进行一系列的优化处理，如去噪、去除背景图案、降低分辨率等。
在步骤302，利用骨骼模型和身体部位模型将捕获的真实人物的深度图像转换为用户姿态数据，即完成了用户动作的建模，得到了一个用户姿态数据序列，并将其存储到存储单元中。
这些用户姿态数据序列定义了用户的身体部位的相关信息(如位置、姿态以及部位之间的相对关系等)，能够进行后续的匹配。
当一个模型可以用于多个应用程序时，则在步骤303中需要确定一个目标应用程序，并获取该目标应用程序预先设定的标准姿态数据序列，以进行后续的匹配操作。
在步骤304中，则可以依据用户姿态数据和标准姿态数据序列进行匹配处理，确定与当前待处理的用户姿态数据匹配的标准姿态数据。
在步骤305中，判断应用程序预先设定该匹配的标准姿态数据对应的姿态需要维持的时间是否超过预定的门限，当判断结果为是时，表示用户会在该姿态上持续较长的时间。
当判断出用户会在该姿态上持续较长的时间时，则表明可以利用较少的数据来完成后续一段时间的准确匹配，因此在步骤306中，选择部分用户姿态数据来进行后续的匹配处理。否则的话按照正常流程处理。
选择部分用户姿态数据来进行后续的匹配处理的过程中，在标准姿态数据序列中预先将该持续一段时间的姿态分为3个部分进行描述，即包括起始节点对应的姿态数据、一个或多个中间节点对应的姿态数据和一个结束节点对应的姿态数据。根据上述划分进而进行用户姿态数据的选择和匹配。
当然，在匹配的过程中，还可以根据姿态数据之间的对比或者显示屏上实际显示的用户图像和预期的用户图像之间的对比来判断用户是否按照要求完成动作，实现提醒功能。
以上所述为本发明较佳实施例，需要指出的是，对于本领域普通技术人员来说，在不脱离本发明所述原理的前提下，还可以作出若干改进和润饰，这些改进和润饰也应视为本发明保护范围。

Claims (17)

1.一种应用程序的控制方法，其特征在于，包括：
获取记录用户运动的深度图像序列；
预先根据一数学转换模型将所述深度图像序列转换为第一用户姿态数据序列；
从所述应用程序预先设置的标准姿态数据序列中，获取与所述用户姿态数据序列中当前待处理的用户姿态数据相匹配的第一目标姿态数据，并基于所述第一目标姿态数据进行应用控制处理；
在所述第一目标姿态数据对应的目标姿态需要维持的时间超过预订时间门限时，从第二姿态数据序列中挑选部分用户姿态数据进行后续匹配处理；所述第二姿态数据序列与已处理的用户姿态数据形成的数据序列相邻，且第二姿态数据序列的长度与所述目标姿态需要维持的时间相关。
2.根据权利要求1所述的应用程序的控制方法，其特征在于，对应的目标姿态需要维持的时间超过预订时间门限的姿态数据包括：一个目标姿态起始子数据、至少一个目标姿态中间子数据和一个目标姿态结束子数据，所述从第二姿态数据序列中挑选部分用户姿态数据进行后续匹配处理具体包括：对应于至少一个目标姿态中间子数据和一个目标姿态结束子数据，从所述第二姿态数据序列中挑选部分用户姿态数据，用于后续匹配处理。
3.根据权利要求1所述的应用程序的控制方法，其特征在于，转换得到所述第一用户姿态数据序列的操作在所述应用程序需要使用所述用户姿态数据的阶段之前完成。
4.根据权利要求1所述的应用程序的控制方法，其特征在于，所述数学转换模型与多个应用程序相对应，所述控制方法还包括：
在得到第一用户姿态数据序列后，从所述多个应用程序确定目标应用程序；
确定所述目标应用程序对应的标准姿态数据序列用于姿态匹配。
5.根据权利要求1所述的应用程序的控制方法，其特征在于，获取记录用户运动的深度图像序列具体包括：
获取用户的原始图像序列；
对所述原始图像序列中的图像进行降低分辨率、背景移除、去噪和深度值调整中的至少一个，得到所述深度图像序列。
6.根据权利要求1所述的应用程序的控制方法，其特征在于，每一个标准姿态数据对应于一个用于显示到显示屏的屏幕用户形象，所述基于所述目标姿态数据进行应用控制处理具体为：将所述显示屏显示的当前屏幕用户形象改变为所述目标姿态数据对应的第一屏幕用户形象。
7.根据权利要求6所述的应用程序的控制方法，其特征在于，每一个标准姿态对应于一姿态需要维持的时间，所述控制方法还包括：
确定应用运行时间；
根据应用运行时间以及标准姿态数据序列中每一个标准姿态对应的姿态需要维持时间，确定第二目标姿态数据；
在所述第二目标姿态数据与第一目标姿态数据不同时，执行一提醒操作。
8.根据权利要求6所述的应用程序的控制方法，其特征在于，每一个标准姿态对应于一姿态需要维持的时间，所述控制方法还包括：
确定应用运行时间；
根据应用运行时间以及标准姿态数据序列中每一个标准姿态对应的姿态需要维持时间，确定第二目标姿态数据；
确定第二目标姿态数据对应的第二屏幕用户形象；
当所述第二屏幕用户形象与第一屏幕用户形象的差异超过预定差异标准时，执行一提醒操作。
9.一种应用程序的控制装置，其特征在于，包括：
获取模块，用于获取记录用户运动的深度图像序列；
转换模块，用于预先根据一数学转换模型将所述深度图像序列转换为第一用户姿态数据序列；
处理模块，用于从所述应用程序预先设置的标准姿态数据序列中，获取与所述用户姿态数据序列中当前待处理的用户姿态数据相匹配的第一目标姿态数据，并基于所述第一目标姿态数据进行应用控制处理；
筛选模块，用于在所述第一目标姿态数据对应的目标姿态需要维持的时间超过预订时间门限时，从第二姿态数据序列中挑选部分用户姿态数据进行后续匹配处理；所述第二姿态数据序列与已处理的用户姿态数据形成的数据序列相邻，且第二姿态数据序列的长度与所述目标姿态需要维持的时间相关。
10.根据权利要求9所述的应用程序的控制装置，其特征在于，对应的目标姿态需要维持的时间超过预订时间门限的姿态数据包括：一个目标姿态起始子数据、至少一个目标姿态中间子数据和一个目标姿态结束子数据，所述筛选模块具体用于：对应于至少一个目标姿态中间子数据和一个目标姿态结束子数据，从所述第二姿态数据序列中挑选部分用户姿态数据，用于后续匹配处理。
11.根据权利要求9所述的应用程序的控制装置，其特征在于，转换得到所述第一用户姿态数据序列的操作在所述应用程序需要使用所述用户姿态数据的阶段之前完成。
12.根据权利要求9所述的应用程序的控制装置，其特征在于，所述数学转换模型与多个应用程序相对应，所述控制装置还包括：
程序确定模块，用于在得到第一用户姿态数据序列后，从所述多个应用程序确定目标应用程序；
标准姿态序列确定模块，确定所述目标应用程序对应的标准姿态数据序列用于姿态匹配。
13.根据权利要求9所述的应用程序的控制装置，其特征在于，获取模块具体包括：
原始图像获取单元，用于获取用户的原始图像序列；
优化单元，用于对所述原始图像序列中的图像进行降低分辨率、背景移除、去噪和深度值调整中的至少一个，得到所述深度图像序列。
14.根据权利要求9所述的应用程序的控制装置，其特征在于，每一个标准姿态数据对应于一个用于显示到显示屏的屏幕用户形象，所述处理模块具体用于将所述显示屏显示的当前屏幕用户形象改变为所述目标姿态数据对应的第一屏幕用户形象，实现所述应用控制处理。
15.根据权利要求14所述的应用程序的控制装置，其特征在于，每一个标准姿态对应于一姿态需要维持的时间，所述控制装置还包括：
时间确定模块，用于确定应用运行时间；
目标姿态数据确定模块，用于根据应用运行时间以及标准姿态数据序列中每一个标准姿态对应的姿态需要维持时间，确定第二目标姿态数据；
第一提醒模块，用于在所述第二目标姿态数据与第一目标姿态数据不同时，执行一提醒操作。
16.根据权利要求14所述的应用程序的控制装置，其特征在于，每一个标准姿态对应于一姿态需要维持的时间，所述控制装置还包括：
时间确定模块，用于确定应用运行时间；
目标姿态数据确定模块，用于根据应用运行时间以及标准姿态数据序列中每一个标准姿态对应的姿态需要维持时间，确定第二目标姿态数据；
屏幕用户形象确定模块，用于确定第二目标姿态数据对应的第二屏幕用户形象；
第二提醒模块，用于在所述第二屏幕用户形象与第一屏幕用户形象的差异超过预定差异标准时，执行一提醒操作。
17.一种电子设备，其特征在于，包括权利要求9-16中任意一项所述的控制装置。
CN201410542224.5A 2014-10-14 2014-10-14 一种应用程序的控制方法、装置及电子设备 Active CN104281265B (zh)

Priority Applications (6)

Application Number Priority Date Filing Date Title
CN201410542224.5A CN104281265B (zh) 2014-10-14 2014-10-14 一种应用程序的控制方法、装置及电子设备
US14/771,079 US20160349848A1 (en) 2014-10-14 2015-02-09 Method and device for controlling application, and electronic device
PCT/CN2015/072520 WO2016058303A1 (zh) 2014-10-14 2015-02-09 一种应用程序的控制方法、装置及电子设备
KR1020157023540A KR101718837B1 (ko) 2014-10-14 2015-02-09 응용프로그램의 제어방법, 장치 및 전자장비
JP2017539485A JP6545271B2 (ja) 2014-10-14 2015-02-09 アプリケーションプログラムの制御方法、装置、及び電子機器
EP15750616.3A EP3208686A4 (en) 2014-10-14 2015-02-09 Application control method and apparatus and electronic device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410542224.5A CN104281265B (zh) 2014-10-14 2014-10-14 一种应用程序的控制方法、装置及电子设备

Publications (2)

Publication Number Publication Date
CN104281265A true CN104281265A (zh) 2015-01-14
CN104281265B CN104281265B (zh) 2017-06-16

Family

ID=52256227

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410542224.5A Active CN104281265B (zh) 2014-10-14 2014-10-14 一种应用程序的控制方法、装置及电子设备

Country Status (6)

Country Link
US (1) US20160349848A1 (zh)
EP (1) EP3208686A4 (zh)
JP (1) JP6545271B2 (zh)
KR (1) KR101718837B1 (zh)
CN (1) CN104281265B (zh)
WO (1) WO2016058303A1 (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105045399A (zh) * 2015-09-07 2015-11-11 哈尔滨市一舍科技有限公司 一种具有3d摄像组件的电子设备
CN105046249A (zh) * 2015-09-07 2015-11-11 哈尔滨市一舍科技有限公司 一种人机交互方法
CN105068662A (zh) * 2015-09-07 2015-11-18 哈尔滨市一舍科技有限公司 一种用于人机交互的电子设备
CN105160323A (zh) * 2015-09-07 2015-12-16 哈尔滨市一舍科技有限公司 一种手势识别方法
WO2016058303A1 (zh) * 2014-10-14 2016-04-21 京东方科技集团股份有限公司 一种应用程序的控制方法、装置及电子设备
CN110170171A (zh) * 2019-06-03 2019-08-27 深圳市腾讯网域计算机网络有限公司 一种目标对象的控制方法及装置
CN112121280A (zh) * 2020-08-31 2020-12-25 浙江大学 一种心音盒的控制方法及控制系统

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106919928A (zh) * 2017-03-08 2017-07-04 京东方科技集团股份有限公司 手势识别系统、方法及显示设备
WO2022021432A1 (zh) 2020-07-31 2022-02-03 Oppo广东移动通信有限公司 手势控制方法及相关装置
CN111880660B (zh) * 2020-07-31 2022-10-21 Oppo广东移动通信有限公司 显示画面的控制方法、装置、计算机设备和存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102200830A (zh) * 2010-03-25 2011-09-28 夏普株式会社 基于静态手势识别的非接触控制系统和控制方法
CN102426480A (zh) * 2011-11-03 2012-04-25 康佳集团股份有限公司 一种人机交互系统及其实时手势跟踪处理方法
US20130329946A1 (en) * 2012-06-08 2013-12-12 Qualcomm Incorporated Fast pose detector
CN103646425A (zh) * 2013-11-20 2014-03-19 深圳先进技术研究院 一种体感交互的方法及系统

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100199231A1 (en) * 2009-01-30 2010-08-05 Microsoft Corporation Predictive determination
US8181123B2 (en) * 2009-05-01 2012-05-15 Microsoft Corporation Managing virtual port associations to users in a gesture-based computing environment
US9245177B2 (en) * 2010-06-02 2016-01-26 Microsoft Technology Licensing, Llc Limiting avatar gesture display
US8657683B2 (en) * 2011-05-31 2014-02-25 Microsoft Corporation Action selection gesturing
JP5325327B2 (ja) * 2011-11-04 2013-10-23 株式会社コナミデジタルエンタテインメント ゲーム装置、詳細提示方法、および、プログラム
US20130211843A1 (en) * 2012-02-13 2013-08-15 Qualcomm Incorporated Engagement-dependent gesture recognition
US9448636B2 (en) * 2012-04-18 2016-09-20 Arb Labs Inc. Identifying gestures using gesture data compressed by PCA, principal joint variable analysis, and compressed feature matrices
JP5759439B2 (ja) * 2012-10-19 2015-08-05 日本電信電話株式会社 映像コミュニケーションシステム及び映像コミュニケーション方法
US20140157209A1 (en) * 2012-12-03 2014-06-05 Google Inc. System and method for detecting gestures
US20150046808A1 (en) * 2013-08-08 2015-02-12 Beamz Interactive, Inc. Apparatus and method for multilayered music playback
CN104281265B (zh) * 2014-10-14 2017-06-16 京东方科技集团股份有限公司 一种应用程序的控制方法、装置及电子设备

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102200830A (zh) * 2010-03-25 2011-09-28 夏普株式会社 基于静态手势识别的非接触控制系统和控制方法
CN102426480A (zh) * 2011-11-03 2012-04-25 康佳集团股份有限公司 一种人机交互系统及其实时手势跟踪处理方法
US20130329946A1 (en) * 2012-06-08 2013-12-12 Qualcomm Incorporated Fast pose detector
CN103646425A (zh) * 2013-11-20 2014-03-19 深圳先进技术研究院 一种体感交互的方法及系统

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016058303A1 (zh) * 2014-10-14 2016-04-21 京东方科技集团股份有限公司 一种应用程序的控制方法、装置及电子设备
KR101718837B1 (ko) 2014-10-14 2017-03-22 보에 테크놀로지 그룹 컴퍼니 리미티드 응용프로그램의 제어방법, 장치 및 전자장비
KR20160060003A (ko) * 2014-10-14 2016-05-27 보에 테크놀로지 그룹 컴퍼니 리미티드 응용프로그램의 제어방법, 장치 및 전자장비
CN105160323A (zh) * 2015-09-07 2015-12-16 哈尔滨市一舍科技有限公司 一种手势识别方法
CN105045399A (zh) * 2015-09-07 2015-11-11 哈尔滨市一舍科技有限公司 一种具有3d摄像组件的电子设备
CN105068662A (zh) * 2015-09-07 2015-11-18 哈尔滨市一舍科技有限公司 一种用于人机交互的电子设备
CN105046249A (zh) * 2015-09-07 2015-11-11 哈尔滨市一舍科技有限公司 一种人机交互方法
CN105068662B (zh) * 2015-09-07 2018-03-06 哈尔滨市一舍科技有限公司 一种用于人机交互的电子设备
CN105045399B (zh) * 2015-09-07 2018-08-14 哈尔滨市一舍科技有限公司 一种具有3d摄像组件的电子设备
CN105046249B (zh) * 2015-09-07 2018-09-11 哈尔滨市一舍科技有限公司 一种人机交互方法
CN105160323B (zh) * 2015-09-07 2018-11-27 哈尔滨市一舍科技有限公司 一种手势识别方法
CN110170171A (zh) * 2019-06-03 2019-08-27 深圳市腾讯网域计算机网络有限公司 一种目标对象的控制方法及装置
CN112121280A (zh) * 2020-08-31 2020-12-25 浙江大学 一种心音盒的控制方法及控制系统

Also Published As

Publication number Publication date
KR101718837B1 (ko) 2017-03-22
KR20160060003A (ko) 2016-05-27
WO2016058303A1 (zh) 2016-04-21
CN104281265B (zh) 2017-06-16
EP3208686A4 (en) 2018-06-06
EP3208686A1 (en) 2017-08-23
JP2018502403A (ja) 2018-01-25
US20160349848A1 (en) 2016-12-01
JP6545271B2 (ja) 2019-07-17

Similar Documents

Publication Publication Date Title
CN104281265A (zh) 一种应用程序的控制方法、装置及电子设备
CN102934066B (zh) 用姿势进行交互的方法
CN102902349B (zh) 一种通过触点动态采样技术降低嵌入式系统功耗的方法
EP3628381A1 (en) Game picture display method and apparatus, storage medium and electronic device
CN103380405A (zh) 用于手势识别的用户界面、装置和方法
CN102508609A (zh) 一种控制电脑应用程序窗口显示与隐藏的方法
CN111643899A (zh) 一种虚拟物品显示方法、装置、电子设备和存储介质
CN114998491B (zh) 数字人驱动方法、装置、设备及存储介质
JP6810048B2 (ja) モバイル機器のバーチャルボールのシミュレーションおよびコントロールの方法
CN103795931A (zh) 一种信息处理方法及电子设备
CN106611366A (zh) 自动选品的方法及装置
CN107066081A (zh) 一种虚拟现实系统的交互控制方法和装置及虚拟现实设备
CN113268303A (zh) 界面元素配置方法、装置、存储介质及电子设备
CN110568931A (zh) 交互方法、设备、系统、电子设备及存储介质
CN113952709A (zh) 游戏交互的方法及装置、存储介质、电子设备
CN104778044B (zh) 触摸屏手势事件流分发的方法及装置
CN111768474A (zh) 一种动画生成方法、装置、设备
CN103513972B (zh) 显示方法和电子设备
CN107688389B (zh) Vr抓取动作的优化方法及装置
CN112750182A (zh) 一种动效实现方法、装置和计算机可读存储介质
CN103809846B (zh) 一种功能调用方法及电子设备
CN104679400B (zh) 一种非接触式输入信息的方法及终端
CN105760386B (zh) 电子图片曲谱滚动方法、装置及系统
CN110624240A (zh) 一种网络游戏的操作控制方法、装置、终端设备和介质
Stork et al. The influence of instruction mode on reaching movements during manual assembly

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant