CN106975218B - 基于多个可穿戴设备控制体感游戏的方法及装置 - Google Patents

基于多个可穿戴设备控制体感游戏的方法及装置 Download PDF

Info

Publication number
CN106975218B
CN106975218B CN201710142373.6A CN201710142373A CN106975218B CN 106975218 B CN106975218 B CN 106975218B CN 201710142373 A CN201710142373 A CN 201710142373A CN 106975218 B CN106975218 B CN 106975218B
Authority
CN
China
Prior art keywords
motion
action
confirmed
feature vector
signal data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710142373.6A
Other languages
English (en)
Other versions
CN106975218A (zh
Inventor
张稷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zepp Labs Inc
Original Assignee
Beijing Shunyuan Kaihua Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Shunyuan Kaihua Technology Co Ltd filed Critical Beijing Shunyuan Kaihua Technology Co Ltd
Priority to CN201710142373.6A priority Critical patent/CN106975218B/zh
Publication of CN106975218A publication Critical patent/CN106975218A/zh
Application granted granted Critical
Publication of CN106975218B publication Critical patent/CN106975218B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/21Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/211Input arrangements for video game devices characterised by their sensors, purposes or types using inertial sensors, e.g. accelerometers or gyroscopes
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/21Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/212Input arrangements for video game devices characterised by their sensors, purposes or types using sensors worn by the player, e.g. for measuring heart beat or leg activity
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/23Input arrangements for video game devices for interfacing with the game device, e.g. specific interfaces between game controller and console
    • A63F13/235Input arrangements for video game devices for interfacing with the game device, e.g. specific interfaces between game controller and console using a wireless connection, e.g. infrared or piconet
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Biophysics (AREA)
  • Cardiology (AREA)
  • General Health & Medical Sciences (AREA)
  • Heart & Thoracic Surgery (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请提供一种基于多个可穿戴设备控制体感游戏的方法及装置,该方法包括:根据当前预设时间段内接收到的可穿戴设备发送的设备信号数据,确定用户在当前预设时间段内的动作特征向量,其中,动作特征向量包括1*N组特征值,N的值与关联的可穿戴设备的个数相同;将动作特征向量缓存至对应的动作时间窗口中;使用动作确认模型对待确认特征向量进行检测,得到检测结果;当检测结果为待确认特征向量对应一个完整动作时,根据待确认特征向量对应的完整动作控制体感游戏。本发明的技术方案中体感游戏机可基于多个可穿戴设备提供的设备信号数据识别出时间上有重合的多个动作,从而可以支持复杂游戏的操作。

Description

基于多个可穿戴设备控制体感游戏的方法及装置
技术领域
本申请涉及可穿戴设备技术领域,尤其涉及一种基于多个可穿戴设备控制体感游戏的方法及装置。
背景技术
体感游戏是一种将肢体动作变化通过传感器传给游戏设备来进行操作的新型电子游戏,一般用户可通过体感游戏机实现体感游戏,例如,如日本任天堂公司的Wii、微软的Kinect、索尼的PlayStation Move等可通过内置摄像装置识别人体动作,进而控制体感游戏的进程。但是,摄像装置对于细小的动作,例如,对转动手腕的动作无法判断,虽然可以借助手持游戏棒等实现细小动作的识别,但是这种专业游戏设备增加了游戏成本,而且具有一定的局限性,如无法感知腿脚部位的动作等。
发明内容
有鉴于此,本申请提供一种新的技术方案,可以使用户基于多个可穿戴设备控制体感游戏,降低游戏成本,而且基于可穿戴设备与人体的贴合度可以检测到细小动作,而且基于用户身体多个部位佩戴的多个可穿戴设备可以支持时间上重合的多个动作的识别。
为实现上述目的,本申请提供技术方案如下:
根据本申请的第一方面,提出了一种基于多个可穿戴设备控制体感游戏的方法,包括:
根据当前预设时间段内接收到的可穿戴设备发送的设备信号数据,确定用户在所述当前预设时间段内的动作特征向量,其中,所述动作特征向量包括1*N组特征值,N的值与关联的可穿戴设备的个数相同;
将所述动作特征向量缓存至对应的动作时间窗口中,其中,所述当前预设时间段内的动作特征向量与所述动作时间窗口中的已有动作特征向量组合为待确认特征向量;
使用动作确认模型对所述待确认特征向量进行检测,得到检测结果;
当所述检测结果为所述待确认特征向量对应一个完整动作时,根据所述待确认特征向量对应的完整动作控制体感游戏。
根据本申请的第二方面,提出了一种基于多个可穿戴设备控制体感游戏的装置,包括:
确定模块,用于根据当前预设时间段内接收到的可穿戴设备发送的设备信号数据,确定用户在所述当前预设时间段内的动作特征向量,其中,所述动作特征向量包括1*N组特征值,N的值与关联的可穿戴设备的个数相同;
缓存模块,用于将所述第一确定模块确定的所述动作特征向量缓存至对应的动作时间窗口中,其中,所述当前预设时间段内的动作特征向量与所述动作时间窗口中的已有动作特征向量组合为待确认特征向量;
第一检测模块,用于使用动作确认模型对所述待确认特征向量进行检测,得到检测结果;
控制模块,用于当所述第一检测模块检测到的所述检测结果为所述待确认特征向量对应一个完整动作时,根据所述待确认特征向量对应的完整动作控制体感游戏。
根据本申请的第三方面,提出了一种基于多个可穿戴设备控制体感游戏的装置,所述装置包括:
处理器;用于存储所述处理器可执行指令的存储器;
其中,所述处理器,被配置为执行上述基于多个可穿戴设备控制体感游戏的方法。
由以上技术方案可见,本申请实现了基于多个可穿戴设备的设备信号数据,识别用户的肢体动作,由于多个可穿戴设备可以佩戴在用户的不同身体部位,例如佩戴在左手、右手、左脚、右脚等部位,因此体感游戏机可基于多个可穿戴设备提供的设备信号数据识别出时间上有重合的多个动作,从而可以支持复杂游戏的操作,此外,由于可穿戴设备与人体的贴合度比较大,因此可以检测到细小动作,而且成本比较低。
附图说明
图1A示出了根据本发明的一示例性实施例一的基于多个可穿戴设备控制体感游戏的方法的流程示意图;
图1B示出了图1A所示实施例的一次基于多个可穿戴设备控制体感游戏的场景示意图;
图2示出了根据本发明的一示例性实施例二的基于多个可穿戴设备控制体感游戏的方法的流程示意图;
图3示出了根据本发明的一示例性实施例三的根据接收到的可穿戴设备发送设备信号数据确定对应的动作特征向量的方法的流程示意图;
图4示出了根据本发明的一示例性实施例的体感游戏机的结构示意图;
图5示出了根据本发明的一示例性实施例的基于多个可穿戴设备控制体感游戏的装置的结构示意图;
图6示出了根据本发明的另一示例性实施例的基于多个可穿戴设备控制体感游戏的装置的结构示意图;
图7示出了根据本发明的又一示例性实施例的基于多个可穿戴设备控制体感游戏的装置的结构示意图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
在本申请使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本申请。在本申请和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本申请可能采用术语第一、第二、第三等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本申请范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
为对本申请进行进一步说明,提供下列实施例:
图1A示出了根据本发明的一示例性实施例一的基于多个可穿戴设备控制体感游戏的方法的流程示意图,图1B示出了图1A所示实施例的一次基于多个可穿戴设备控制体感游戏的场景示意图;本实施例可以通过体感游戏机来实现,该体感游戏机可以与多个可穿戴设备进行无线通信连接配对,其中,可穿戴设备可以包括但不限于智能手环、跑鞋、袜子等,可穿戴设备可以佩戴的位置包括但不限于脚踝、脚、手腕、手等位置。如图1A所示,基于多个可穿戴设备控制体感游戏的方法包括如下步骤:
步骤101,根据当前预设时间段内接收到的可穿戴设备发送的设备信号数据,确定用户在当前预设时间段内的动作特征向量。
在一实施例中,动作特征向量包括1*N组特征值,N的值与关联的可穿戴设备的个数相同,例如,如果体感游戏机当前与佩戴在左手、右手、左脚、右脚的4个可穿戴设备建立了无线通信连接,则动作特征向量可以包(左手信号,右手信号,左脚信号,右脚信号),也即,包括4组特征值。
在一实施例中,可穿戴设备和体感游戏机都支持无线通信技术,例如,蓝牙、无线保真(Wireless-Fidelity,WIFI)、ZigBee等。
在一实施例中,设定时间段可以为1秒钟、0.5秒钟等时间间隔,每一个可穿戴设备可按照设定时间段将采集的信号数据发送至体感游戏机。
在一实施例中,设备信号数据可以为运动信号数据,如多个轴向的加速度数据、角速度数据等,可穿戴设备可控制内置的两个以上轴向的加速度传感器(例如:三轴加速度传感器,或者包含三轴加速度传感器的集成传感器,如六轴传感器或九轴传感器等)按照预设的采样频率采集得到的多个轴向的加速度数据,如按照25Hz的采样频率采样及速度数据;在一实施例中,可穿戴设备还可控制角速度传感器、陀螺仪等采集运动信号数据。
在一实施例中,根据当前预设时间段内接收到的可穿戴设备发送的设备信号数据,确定用户在当前预设时间段内的动作特征向量的方法可参见图3所示实施例,这里先不详述。
步骤102,将动作特征向量缓存至对应的动作时间窗口中。
在一实施例中,每一个动作时间窗口可以为一个缓存区块,用来存储该类动作对应的动作特征向量;在一实施例中,可以为每一个可穿戴设备创建一个动作时间窗口,还可以为任意两个以上组合的可穿戴设备创建一个动作时间窗口,例如,如果体感游戏机当前绑定了3个可穿戴设备,分别为可穿戴设备A、可穿戴设备B、可穿戴设备C,则可以对应创建动作时间窗口A、动作时间窗口B、动作时间窗口C、动作时间窗口A+B、动作时间窗口A+C、动作时间窗口B+C、动作时间窗口A+B+C,当在一个预设时间段内只接收到了可穿戴设备A发送的设备信号数据时,可以将该预设时间段对应的动作特征向量缓存至可穿戴设备A对应的动作时间窗口A,当在一个预设时间段内同时接收到了可穿戴设备A和可穿戴设备B发送的设备信号数据时,可将该预设时间段对应的动作特征向量缓存至可穿戴设备A和B对应的动作时间窗口A+B。
在一实施例中,将每一个预设时间段对应的动作特征向量对应缓存至对应的动作时间窗口具体可以为,将每一个预设时间段对应的动作特征向量缓存至每一个动作时间窗口;或者,将每一个预设时间段对应的动作特征向量缓存至对应的一个动作时间窗口,例如,当在一个预设时间段内只接收到了可穿戴设备A发送的设备信号数据时,可以将该预设时间段对应的动作特征向量缓存至动作A时间窗口,而不缓存至其他动作时间窗口。
在一实施例中,当前预设时间段内的动作特征向量与动作时间窗口中的已有动作特征向量组合为待确认特征向量。
步骤103,使用动作确认模型对待确认特征向量进行检测,得到检测结果。
在一实施例中,动作确认模型可以由每一个动作的大量的训练样本的设备信号数据训练得到,设备信号数据包括但不限于:加速度数据、角速度等。
在一实施例中,动作确认模型包括但不限于目前公开的算法模型,例如:支持向量机(Support Vector Machine,SVM)、贝叶斯网络、时域频域分析、时间递归神经网络(LongShort-Term Memory,LSTM)、卷积神经网络(Convolutional Neural Network,CNN),等等。
在一实施例中,可以为每一个动作时间窗口设置一个动作确认模型,将动作时间窗口中的待确认特征向量输入对应动作时间窗口的动作确认模型,即可得到待确认特征向量对应的检测结果,例如,对于右手动作时间窗口,由于待确认特征向量(左手信号,右手信号,左脚信号,右脚信号)中只有右手信号是有效特征值,右手动作时间窗口对应的动作确认模型可以只针对右手信号的训练样本进行训练得到,由此使用动作确认模型对待确认特征向量进行检测时的计算量比较小;在又一实施例中,可以为所有的动作时间窗口设置一个动作确认模型,将待确认特征向量输入动作确认模型即可得到待确认特征向量对应的检测结果,只训练一个动作确认模性的前期训练计算量比较小,但是在对待确认特征向量进行检测时的计算量比较大。
步骤104,当检测结果为待确认特征向量对应一个完整动作时,根据待确认特征向量对应的完整动作控制体感游戏。
在一实施例中,体感游戏机可以将检测出的完整动作传输至应用层的游戏程序,游戏程序即可按照该动作控制游戏进程,如在电视机或者其他显示设备上显示对应的游戏画面等。
在一示例性实施例中,参见图1B,图中用户佩戴智能手环110、智能手环111、智能手环112、智能手环113(本申请中可穿戴设备的佩戴位置并不限定于手脚位置,例如还可以位于头部,本申请中可穿戴设备并不限定于手环,还可以为帽子、鞋子等),智能手环110、智能手环111、智能手环112、智能手环113与体感游戏机120建立无线通信连接,体感游戏机120通过电视机显示对应的动作和游戏画面,用户在执行手部动作和腿脚部动作时,动作部位的智能手环可以检测到该动作,并将对应的设备信号数据传输至体感游戏机120,体感游戏机120根据设备信号数据计算出动作特征向量,进而使用动作确认模型即可计算出对应的肢体动作,然后控制游戏进程并且在电视机130上显示游戏画面和动作。由于本申请中,多个可穿戴设备可以同时检测到用户的动作,因此体感游戏机120可以支持同一时间的多个动作。
由上述描述可知,本申请实施例通过上述步骤101-步骤104实现了基于多个可穿戴设备的设备信号数据,识别用户的肢体动作,由于多个可穿戴设备可以佩戴在用户的不同身体部位,例如佩戴在左手、右手、左脚、右脚等部位,因此体感游戏机可基于多个可穿戴设备提供的设备信号数据识别出时间上有重合的多个动作,从而可以支持复杂游戏的操作,此外,由于可穿戴设备与人体的贴合度比较大,因此可以检测到细小动作,而且成本比较低。
图2示出了根据本发明的一示例性实施例二的基于多个可穿戴设备控制体感游戏的方法的流程示意图;本实施例在上述实施例的基础上,以体感游戏机如何基于多个可穿戴设备控制体感游戏为例进行示例性说明,如图2所示,包括如下步骤:
步骤201,根据当前预设时间段内接收到的可穿戴设备发送的设备信号数据,确定用户在当前预设时间段内的动作特征向量。
在一实施例中,动作特征向量包括1*N组特征值,N的值与关联的可穿戴设备的个数相同。
在一实施例中,步骤201的描述可参见图1A实施例的步骤101的描述,这里不再详述。
步骤202,根据当前预设时间段内的动作特征向量中的N组特征值,确定动作特征向量待缓存至的动作时间窗口。
在一实施例中,可计算当前预设时间段内每一个采样点的特征值,当前预设时间段中所有采样点的特征值即组合为一组特征值。
在一实施例中,每一组特征值对应一个可穿戴设备的设备信号数据,可以通过对当前预设时间段内设备信号数据的数值的进行的特征提取得到,例如,如果当前预设时间段内佩戴在右脚上的可穿戴设备所检测到的加速度数据为0或者接近0的数值,则佩戴在右脚上的可穿戴设备的设备信号数据所对应的特征值可以为0;如果当前预设时间段内佩戴在右脚上的可穿戴设备所检测到的加速度数据为z轴方向的加速度数据大于0且局部峰值大于2,则佩戴在右脚上的可穿戴设备的设备信号数据所对应的特征值可以为z轴加速度数据大于0。
步骤203,将动作特征向量缓存至对应的动作时间窗口中。
在一实施例中,当前预设时间段内的动作特征向量与动作时间窗口中的已有动作特征向量组合为待确认特征向量。
在一实施例中,如果当前预设时间段之前动作时间窗口中已经缓存有动作特征向量,则说明已缓存的动作特征向量不能被确认为对应一个完整动作,因此可将当前预设时间段内的动作特征向量与动作时间窗口中的已有动作特征向量组合为待确认特征向量。
步骤204,使用动作确认模型对待确认特征向量进行检测,得到检测结果。
在一实施例中,步骤204的描述可参见图1A所示实施例的步骤103的描述,这里不再详述。
步骤205,当检测结果为待确认特征向量对应一个完整动作时,根据待确认特征向量对应的完整动作控制体感游戏,并且删除动作时间窗口中的待确认特征向量。
在一实施例中,体感游戏机可以将检测出的完整动作传输至应用层的游戏程序,游戏程序即可按照该动作控制游戏进程,如在电视机或者其他显示设备上显示对应的游戏画面等。
在一实施例中,如果根据待确认特征向量可以识别到一个完整的动作,则可将动作时间窗口中的缓存数据删除。
步骤206,当检测结果为待确认特征向量对应一个异常动作时,删除动作时间窗口中的待确认特征向量。
在一实施例中,异常动作可以理解为不符合动作确认模型定义的动作,例如,右脚对应的动作的待确认特征向量为z轴加速度数据持续大于2,由于用户不可能一直向上抬右脚,因此如果待确认特征向量持续大于2超过几个预设时间段,则可确定该待确认特征向量对应一个异常动作。
步骤207,当检测结果为待确认特征向量对应一个未完成动作时,基于下一预设时间段内接收到的可穿戴设备发送的设备信号数据对应的动作特征向量,执行使用动作确认模型对待确认特征向量进行检测的操作。
本实施例中,基于多个可穿戴设备的设备信号数据,识别用户的肢体动作,由于多个可穿戴设备可以佩戴在用户的不同身体部位,例如佩戴在左手、右手、左脚、右脚等部位,因此体感游戏机可基于多个可穿戴设备提供的设备信号数据识别出时间上有重合的多个动作,从而可以支持复杂游戏的操作,此外,由于可穿戴设备与人体的贴合度比较大,因此可以检测到细小动作,而且成本比较低。
图3示出了根据本发明的一示例性实施例三的根据接收到的可穿戴设备发送设备信号数据确定对应的动作特征向量的方法的流程示意图;本实施例以确定动作特征向量为例进行示例性说明,如图3所示,包括如下步骤:
步骤301,对接收到的可穿戴设备中每一个可穿戴设备的设备信号数据提取对应的特征值。
在一实施例中,可针对每一个可穿戴设备,计算当前预设时间段内每一个采样点的特征值,当前预设时间段中所有采样点的特征值即组合为一组特征值。
步骤302,将每一个可穿戴设备的设备信号数据对应的特征值按照预设顺序生成当前预设时间段内的动作特征向量。
在一实施例中,为了支持多个可穿戴设备的设备信号数据,动作特征向量可以包括多个维度,每一个维度对应一个可穿戴设备,为了准确地通过动作确认模型对动作特征向量进行检测,动作特征向量中每一个可穿戴设备的设备信号数据对应的特征值的顺序需要与动作确认模型匹配。
本实施例中,通过按照预设顺序生成的动作特征向量可以实现支持使用多个可穿戴设备来控制体感游戏,并且支持输出时间上有重合的多个“动作”,进而支持复杂游戏的操作。
对应于上述的基于多个可穿戴设备控制体感游戏的方法,本申请还提出了图4所示的根据本申请的一示例性实施例的体感游戏机的示意结构图。请参考图4,在硬件层面,该可穿戴设备包括处理器、内部总线、网络接口、内存以及非易失性存储器,当然还可能包括其他业务所需要的硬件。处理器从非易失性存储器中读取对应的计算机程序到内存中然后运行,在逻辑层面上形成实现基于多个可穿戴设备控制体感游戏的装置。当然,除了软件实现方式之外,本申请并不排除其他实现方式,比如逻辑器件抑或软硬件结合的方式等等,也就是说以下处理流程的执行主体并不限定于各个逻辑单元,也可以是硬件或逻辑器件。
图5为根据本发明的一示例性实施例的基于多个可穿戴设备控制体感游戏的装置的结构示意图;如图5所示,该基于多个可穿戴设备控制体感游戏的装置可以包括:确定模块51、缓存模块52、第一检测模块53和控制模块54。其中:
确定模块51,用于根据当前预设时间段内接收到的可穿戴设备发送的设备信号数据,确定用户在当前预设时间段内的动作特征向量,其中,动作特征向量包括1*N组特征值,N的值与关联的可穿戴设备的个数相同;
缓存模块52,用于将确定模块51确定的动作特征向量缓存至对应的动作时间窗口中,其中,当前预设时间段内的动作特征向量与动作时间窗口中的已有动作特征向量组合为待确认特征向量;
第一检测模块53,用于使用动作确认模型对待确认特征向量进行检测,得到检测结果;
控制模块54,用于当第一检测模块53检测到的检测结果为待确认特征向量对应一个完整动作时,根据待确认特征向量对应的完整动作控制体感游戏。
图6示出了根据本发明的另一示例性实施例的基于多个可穿戴设备控制体感游戏的装置的结构示意图,在图5所示实施例的基础上,如图6所示,在一实施例中,装置还包括:
第一删除模块55,用于当第一检测模块53检测到的检测结果为待确认特征向量对应一个异常动作时,删除动作时间窗口中的待确认特征向量。
在一实施例中,装置还包括:
第二检测模块56,用于当第一检测模块53检测到的检测结果为待确认特征向量对应一个未完成动作时,基于下一预设时间段内接收到的可穿戴设备发送的设备信号数据对应的动作特征向量,执行使用动作确认模型对待确认特征向量进行检测的操作。
在一实施例中,装置还包括:
第二删除模块57,用于当第一检测模块53检测到的检测结果为待确认特征向量对应一个完整动作时,删除动作时间窗口中的待确认特征向量。
在一实施例中,装置还包括:
分配模块58,用于根据当前预设时间段内的动作特征向量中的N组特征值,确定动作特征向量待缓存至的动作时间窗口。
图7示出了根据本发明的又一示例性实施例的基于多个可穿戴设备控制体感游戏的装置的结构示意图,在图5和/或图6所示实施例的基础上,如图7所示,在一实施例中,第一检测模块53包括:
输入单元531,用于将待确认特征向量输入动作时间窗口对应的动作确认模型,得到检测结果。
在一实施例中,装置还包括:
训练模块59,用于使用每一个动作的训练样本的设备信号数据对动作确认模型进行训练,得到每一个动作对应的动作确认模型。
在一实施例中,确定模块51包括:
提取单元511,用于对接收到的可穿戴设备中每一个可穿戴设备的设备信号数据提取对应的特征值;
生成单元512,用于将每一个可穿戴设备的设备信号数据对应的特征值按照预设顺序生成当前预设时间段内的动作特征向量。
通过上述实施例,可以实现基于多个可穿戴设备的设备信号数据,识别用户的肢体动作,由于多个可穿戴设备可以佩戴在用户的不同身体部位,例如佩戴在左手、右手、左脚、右脚等部位,因此体感游戏机可基于多个可穿戴设备提供的设备信号数据识别出时间上有重合的多个动作,从而可以支持复杂游戏的操作,此外,由于可穿戴设备与人体的贴合度比较大,因此可以检测到细小动作,而且成本比较低。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本申请的其它实施方案。本申请旨在涵盖本申请的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本申请的一般性原理并包括本申请未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本申请的真正范围和精神由下面的权利要求指出。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括要素的过程、方法、商品或者设备中还存在另外的相同要素。
以上仅为本申请的较佳实施例而已,并不用以限制本申请,凡在本申请的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本申请保护的范围之内。

Claims (15)

1.一种基于多个可穿戴设备控制体感游戏的方法,其特征在于,多个可穿戴设备用于分别采集不同肢体部位的信号数据,每个所述可穿戴设备具有至少一个用于采集信号数据的传感器,所述方法包括:
根据当前预设时间段内接收到的可穿戴设备发送的设备信号数据,确定用户在所述当前预设时间段内的动作特征向量,其中,所述动作特征向量包括1*N组特征值,N的值与关联的可穿戴设备的个数相同;
将所述动作特征向量缓存至对应的动作时间窗口中,其中,所述当前预设时间段内的动作特征向量与所述动作时间窗口中的已有动作特征向量组合为待确认特征向量;
使用动作确认模型对所述待确认特征向量进行检测,得到检测结果;
当所述检测结果为所述待确认特征向量对应一个完整动作时,根据所述待确认特征向量对应的完整动作控制体感游戏;
当所述检测结果为所述待确认特征向量对应一个未完成动作时,基于下一预设时间段内接收到的可穿戴设备发送的设备信号数据对应的动作特征向量,执行所述使用动作确认模型对所述待确认特征向量进行检测的操作。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
当所述检测结果为所述待确认特征向量对应一个异常动作时,删除所述动作时间窗口中的待确认特征向量。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
当所述检测结果为所述待确认特征向量对应一个完整动作时,删除所述动作时间窗口中的待确认特征向量。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
根据所述当前预设时间段内的动作特征向量中的N组特征值,确定所述动作特征向量待缓存至的动作时间窗口。
5.根据权利要求1所述的方法,其特征在于,所述使用动作确认模型对所述待确认特征向量进行检测,得到检测结果,包括:
将所述待确认特征向量输入所述动作时间窗口对应的动作确认模型,得到所述检测结果。
6.根据权利要求5所述的方法,其特征在于,所述方法还包括:
使用每一个动作的训练样本的设备信号数据对动作确认模型进行训练,得到每一个动作对应的动作确认模型。
7.根据权利要求1所述的方法,其特征在于,所述根据当前预设时间段内接收到的可穿戴设备发送的设备信号数据,确定用户在所述当前预设时间段内的动作特征向量,包括:
对接收到的可穿戴设备中每一个可穿戴设备的设备信号数据提取对应的特征值;
将每一个可穿戴设备的设备信号数据对应的特征值按照预设顺序生成所述当前预设时间段内的动作特征向量。
8.一种基于多个可穿戴设备控制体感游戏的装置,其特征在于,多个可穿戴设备用于分别采集不同肢体部位的信号数据,每个所述可穿戴设备具有至少一个用于采集信号数据的传感器,所述装置包括:
确定模块,用于根据当前预设时间段内接收到的可穿戴设备发送的设备信号数据,确定用户在所述当前预设时间段内的动作特征向量,其中,所述动作特征向量包括1*N组特征值,N的值与关联的可穿戴设备的个数相同;
缓存模块,用于将所述确定模块确定的所述动作特征向量缓存至对应的动作时间窗口中,其中,所述当前预设时间段内的动作特征向量与所述动作时间窗口中的已有动作特征向量组合为待确认特征向量;
第一检测模块,用于使用动作确认模型对所述待确认特征向量进行检测,得到检测结果;
控制模块,用于当所述第一检测模块检测到的所述检测结果为所述待确认特征向量对应一个完整动作时,根据所述待确认特征向量对应的完整动作控制体感游戏;
第二检测模块,用于当所述第一检测模块检测到的所述检测结果为所述待确认特征向量对应一个未完成动作时,基于下一预设时间段内接收到的可穿戴设备发送的设备信号数据对应的动作特征向量,执行所述使用动作确认模型对所述待确认特征向量进行检测的操作。
9.根据权利要求8所述的装置,其特征在于,所述装置还包括:
第一删除模块,用于当所述第一检测模块检测到的所述检测结果为所述待确认特征向量对应一个异常动作时,删除所述动作时间窗口中的待确认特征向量。
10.根据权利要求8所述的装置,其特征在于,所述装置还包括:
第二删除模块,用于当所述第一检测模块检测到的所述检测结果为所述待确认特征向量对应一个完整动作时,删除所述动作时间窗口中的待确认特征向量。
11.根据权利要求8所述的装置,其特征在于,所述装置还包括:
分配模块,用于根据所述当前预设时间段内的动作特征向量中的N组特征值,确定所述动作特征向量待缓存至的动作时间窗口。
12.根据权利要求8所述的装置,其特征在于,所述第一检测模块包括:
输入单元,用于将所述待确认特征向量输入所述动作时间窗口对应的动作确认模型,得到所述检测结果。
13.根据权利要求12所述的装置,其特征在于,所述装置还包括:
训练模块,用于使用每一个动作的训练样本的设备信号数据对动作确认模型进行训练,得到每一个动作对应的动作确认模型。
14.根据权利要求8所述的装置,其特征在于,所述确定模块包括:
提取单元,用于对接收到的可穿戴设备中每一个可穿戴设备的设备信号数据提取对应的特征值;
生成单元,用于将每一个可穿戴设备的设备信号数据对应的特征值按照预设顺序生成所述当前预设时间段内的动作特征向量。
15.一种基于多个可穿戴设备控制体感游戏的装置,其特征在于,所述装置包括:
处理器;用于存储所述处理器可执行指令的存储器;
其中,所述处理器,被配置为执行权利要求1-7任一项所述的基于多个可穿戴设备控制体感游戏的方法。
CN201710142373.6A 2017-03-10 2017-03-10 基于多个可穿戴设备控制体感游戏的方法及装置 Active CN106975218B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710142373.6A CN106975218B (zh) 2017-03-10 2017-03-10 基于多个可穿戴设备控制体感游戏的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710142373.6A CN106975218B (zh) 2017-03-10 2017-03-10 基于多个可穿戴设备控制体感游戏的方法及装置

Publications (2)

Publication Number Publication Date
CN106975218A CN106975218A (zh) 2017-07-25
CN106975218B true CN106975218B (zh) 2021-03-23

Family

ID=59338157

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710142373.6A Active CN106975218B (zh) 2017-03-10 2017-03-10 基于多个可穿戴设备控制体感游戏的方法及装置

Country Status (1)

Country Link
CN (1) CN106975218B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107909023B (zh) * 2017-11-13 2020-07-14 Oppo广东移动通信有限公司 运动参数的识别方法、装置、终端及存储介质
CN107982911A (zh) * 2017-12-04 2018-05-04 成都思悟革科技有限公司 一种可穿戴式动作捕捉游戏控制系统
CN108499107B (zh) * 2018-04-16 2022-02-25 网易(杭州)网络有限公司 虚拟现实中虚拟角色的控制方法、装置及存储介质
CN109718536A (zh) * 2019-02-02 2019-05-07 泉州市云汉鞋服贸易有限公司 一种体感跑步游戏运动系统
CN111318009A (zh) * 2020-01-19 2020-06-23 张衡 基于可穿戴惯性感知的体感健康娱乐系统及其工作方法

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8002710B1 (en) * 2009-09-28 2011-08-23 Impact Sports Technologies, Inc. Monitoring device for an interactive game
CN102368297A (zh) * 2011-09-14 2012-03-07 北京英福生科技有限公司 一种用于识别被检测对象动作的设备、系统及方法
CN103007534A (zh) * 2012-11-28 2013-04-03 深圳Tcl新技术有限公司 无线操控体感游戏的方法和系统
CN104111733A (zh) * 2014-07-29 2014-10-22 上海交通大学 一种手势识别系统及方法
CN105169700A (zh) * 2015-09-16 2015-12-23 康佳集团股份有限公司 一种新型电视游戏的人机交互方法及系统
CN105477858A (zh) * 2016-01-28 2016-04-13 罗振宇 一种实时互动体感交互人体智能穿戴器
CN105677039A (zh) * 2016-02-16 2016-06-15 北京博研智通科技有限公司 一种基于手势检测驾驶状态的方法、装置及可穿戴设备
CN105877757A (zh) * 2016-03-30 2016-08-24 哈尔滨理工大学 多传感器集成的人体运动姿态捕获与识别装置
CN106023308A (zh) * 2016-05-31 2016-10-12 东南大学 一种体感交互快速三维建模辅助系统及其方法
CN106125936A (zh) * 2016-06-30 2016-11-16 联想(北京)有限公司 一种体感控制方法及电子装置
CN106331801A (zh) * 2016-08-31 2017-01-11 北京乐动卓越科技有限公司 一种智能电视体感游戏的人机交互方法和系统
CN106406547A (zh) * 2016-11-22 2017-02-15 包磊 可穿戴的体感模拟装置、体感模拟方法及体感模拟系统

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101908103A (zh) * 2010-08-19 2010-12-08 北京启动在线文化娱乐有限公司 以体感方式进行互动的网络舞蹈系统
JP6355978B2 (ja) * 2014-06-09 2018-07-11 株式会社バンダイナムコエンターテインメント プログラムおよび画像生成装置
CN106267774B (zh) * 2015-05-25 2019-05-24 腾讯科技(深圳)有限公司 运动状态识别方法和装置

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8002710B1 (en) * 2009-09-28 2011-08-23 Impact Sports Technologies, Inc. Monitoring device for an interactive game
CN102368297A (zh) * 2011-09-14 2012-03-07 北京英福生科技有限公司 一种用于识别被检测对象动作的设备、系统及方法
CN103007534A (zh) * 2012-11-28 2013-04-03 深圳Tcl新技术有限公司 无线操控体感游戏的方法和系统
CN104111733A (zh) * 2014-07-29 2014-10-22 上海交通大学 一种手势识别系统及方法
CN105169700A (zh) * 2015-09-16 2015-12-23 康佳集团股份有限公司 一种新型电视游戏的人机交互方法及系统
CN105477858A (zh) * 2016-01-28 2016-04-13 罗振宇 一种实时互动体感交互人体智能穿戴器
CN105677039A (zh) * 2016-02-16 2016-06-15 北京博研智通科技有限公司 一种基于手势检测驾驶状态的方法、装置及可穿戴设备
CN105877757A (zh) * 2016-03-30 2016-08-24 哈尔滨理工大学 多传感器集成的人体运动姿态捕获与识别装置
CN106023308A (zh) * 2016-05-31 2016-10-12 东南大学 一种体感交互快速三维建模辅助系统及其方法
CN106125936A (zh) * 2016-06-30 2016-11-16 联想(北京)有限公司 一种体感控制方法及电子装置
CN106331801A (zh) * 2016-08-31 2017-01-11 北京乐动卓越科技有限公司 一种智能电视体感游戏的人机交互方法和系统
CN106406547A (zh) * 2016-11-22 2017-02-15 包磊 可穿戴的体感模拟装置、体感模拟方法及体感模拟系统

Also Published As

Publication number Publication date
CN106975218A (zh) 2017-07-25

Similar Documents

Publication Publication Date Title
CN106975218B (zh) 基于多个可穿戴设备控制体感游戏的方法及装置
US10222868B2 (en) Wearable device and control method using gestures
EP3007030B1 (en) Portable device and control method via gestures
JP5863423B2 (ja) 情報処理装置、情報処理方法及びプログラム
JP2021072136A (ja) ジェスチャに基づいて制御するための筋活動センサ信号と慣性センサ信号とを結合する方法および装置
CN102789313B (zh) 一种用户交互系统和方法
US9772684B2 (en) Electronic system with wearable interface mechanism and method of operation thereof
CN104503589B (zh) 体感识别系统及其识别方法
CN106527709B (zh) 一种虚拟场景调整方法及头戴式智能设备
RU2019116179A (ru) Система для измерения совокупности клинических параметров функции зрения
WO2018161906A1 (zh) 动作识别方法、装置、系统以及存储介质
US11918883B2 (en) Electronic device for providing feedback for specific movement using machine learning model and operating method thereof
JP6750046B2 (ja) 情報処理装置及び情報処理方法
RU2601152C2 (ru) Устройство, способ и компьютерная программа для обеспечения предоставления информации пользователю
CN105068657B (zh) 手势的识别方法及装置
JP6109288B2 (ja) 情報処理装置、情報処理方法及びプログラム
WO2014185808A1 (en) System and method for controlling multiple electronic devices
CN114779932A (zh) 用户姿态识别方法、系统、设备及存储介质
WO2020049692A2 (ja) 推定装置、学習装置、推定方法、学習方法及びプログラム
WO2019053399A1 (en) SYSTEM AND METHOD FOR CONTACTLESS CONTROL OF A TECHNICAL FIELD OF APPARATUS
WO2019083406A1 (ru) Способ изготовления перчатки виртуальной реальности (варианты)
JP7476505B2 (ja) 画像処理装置、メイクシミュレーション装置、画像処理方法及びプログラム
CN105279354A (zh) 用户可融入剧情的情境建构系统
CN111766941B (zh) 一种基于智能戒指的手势识别方法及系统
CN107153461A (zh) 一种控制显示对象的运动方式的方法和运动控制装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20200225

Address after: 100193 2nd Floor 206-2, 23rd Building, 8th Hospital, Wangxi Road, Haidian District, Beijing

Applicant after: Zepp Labs, Inc.

Address before: Anhui city of Hefei province innovation road 230088 No. 2800 high tech Zone Innovation Industrial Park two building H8

Applicant before: Anhui Huami Information Technology Co.,Ltd.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant