CN107847789A - 被配置为经由基于传感器的对身体表演的技能的监测来实现包括特定于位置的游戏化在内的游戏化的框架、设备和方法 - Google Patents

被配置为经由基于传感器的对身体表演的技能的监测来实现包括特定于位置的游戏化在内的游戏化的框架、设备和方法 Download PDF

Info

Publication number
CN107847789A
CN107847789A CN201680044207.6A CN201680044207A CN107847789A CN 107847789 A CN107847789 A CN 107847789A CN 201680044207 A CN201680044207 A CN 201680044207A CN 107847789 A CN107847789 A CN 107847789A
Authority
CN
China
Prior art keywords
technical ability
data
user
challenge
performance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201680044207.6A
Other languages
English (en)
Inventor
达伦·弗里格
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Gn Ltd By Share Ltd
GN IP Pty Ltd
Original Assignee
Gn Ltd By Share Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from AU2015901945A external-priority patent/AU2015901945A0/en
Priority claimed from PCT/AU2016/000020 external-priority patent/WO2016123648A1/en
Application filed by Gn Ltd By Share Ltd filed Critical Gn Ltd By Share Ltd
Publication of CN107847789A publication Critical patent/CN107847789A/zh
Pending legal-status Critical Current

Links

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/21Input arrangements for video game devices characterised by their sensors, purposes or types
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0003Analysing the course of a movement or motion sequences during an exercise or trainings sequence, e.g. swing for golf or tennis
    • A63B24/0006Computerised comparison for qualitative assessment of motion sequences or the course of a movement
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00Teaching not covered by other main groups of this subclass
    • G09B19/003Repetitive work cycles; Sequence of movements
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/08Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations
    • G09B5/12Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations different stations being capable of presenting different information simultaneously
    • G09B5/125Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations different stations being capable of presenting different information simultaneously the stations being mobile
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/30ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to physical therapies or activities, e.g. physiotherapy, acupressure or exercising
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/021Services related to particular areas, e.g. point of interest [POI] services, venue services or geofences
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/80Special sensors, transducers or devices therefor
    • A63B2220/803Motion sensors
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/80Special sensors, transducers or devices therefor
    • A63B2220/83Special sensors, transducers or devices therefor characterised by the position of the sensor
    • A63B2220/836Sensors arranged on the body of the user
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B60/00Details or accessories of golf clubs, bats, rackets or the like
    • A63B60/46Measurement devices associated with golf clubs, bats, rackets or the like for measuring physical parameters relating to sporting activity, e.g. baseball bats with impact indicators or bracelets for measuring the golf swing

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Educational Administration (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Educational Technology (AREA)
  • Health & Medical Sciences (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Primary Health Care (AREA)
  • Biophysics (AREA)
  • Public Health (AREA)
  • Medical Informatics (AREA)
  • Epidemiology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • User Interface Of Digital Computer (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本申请涉及技术框架,由此使用表演传感器单元(PSU)来监测用户技能表演,并且处理从这些PSU导出的数据,从而确定用户技能表演的属性。例如,对表演的属性的识别用于驱动计算机处理,例如本文描述的计算机处理。特别关注通过提供竞争性挑战来实现技能游戏化的技术,这些挑战是由从监测身体表演的PSU中导出的数据来驱动的。例如,在一个实施例中,用户在执行一个或多个特定技能的上下文中(例如,在幅度、力量、准确性、连续完成等等的上下文中)比其他人“更好地”进行竞争。

Description

被配置为经由基于传感器的对身体表演的技能的监测来实现 包括特定于位置的游戏化在内的游戏化的框架、设备和方法
技术领域
本发明涉及被配置为经由基于传感器的对身体表演的技能的监测来实现包括特定于位置的游戏化在内的游戏化的框架、设备和方法。本发明的实施例包括与游戏化内容的生成、分发和执行相关联的软件和硬件以及相关联的方法。本文描述的技术的特定焦点是使得用户能够定义和/或参与竞争性活动,该竞争性活动是基于对于多个用户对定义的基于运动的技能的相应表演的分析来评估的。
背景技术
在整个说明书中对背景技术的任何讨论绝不应被视为承认这样的技术是众所周知的或者形成本领域公知常识的一部分。
近年来,基于跟踪技术来评估的竞争性活动越来越受欢迎。例如,骑行者普遍采用了一系列的技术,这些技术能够跟踪特定的行程(例如,具有经由GPS坐标定义的起点和终点),从而实现一种形式的定时竞赛活动,这涉及的组织管理开销很少。例如,通常骑行者为了竞争而需要做的所有事情就是在任何方便的时间完成指定的行程,同时携带运行兼容的跟踪软件的具有GPS功能的设备(通常是智能手机)。
发明内容
至少在一些实施例中,本发明的目的是克服或改善现有技术的至少一个缺点、或提供有用的替代方案。
提供了以下概述实施例的集合以基于以下具体实施方式中公开的技术方面的选择来预示潜在的专利权利要求。这些概述实施例的集合并不旨在以任何方式限制可能要求的权利要求的范围。
一个实施例提供了一种用于使得包括一个或多个运动传感器单元(MSU)的最终用户硬件的用户能够参与竞争性活动的方法,该方法包括:
在服务器设备处维护多个挑战数据集,其中每个挑战数据集表示被配置为由包括一个或多个MSU的最终用户硬件的用户所尝试的挑战活动,其中每个挑战数据集包括表示下述各项的数据:
(i)一个或多个挑战技能,其中该一个或多个挑战技能中的每一个与特定于技能的配置数据相关联,其中特定于技能的配置数据可下载到最终用户硬件,从而用于将最终用户硬件配置为基于从一个或多个MSU导出的运动传感器数据(MSD)来实现对挑战技能的表演事件的识别和分析;以及
(ii)表示一个或多个竞争性参数的数据;
使得包括一个或多个MSU的最终用户硬件的用户能够参与给定的挑战活动,其中使得用户能够参与给定的挑战活动包括:
(i)使得用户的最终用户硬件针对一个或多个挑战技能应用特定于技能的配置数据;以及
(ii)使得基于所应用的特定于技能的配置数据来对从一个或多个MSU导出的数据进行分析,从而实现关于一个或多个竞争性参数的评估。
一个实施例提供了一种用于操作包括一个或多个运动传感器单元(MSU)的最终用户硬件的用户的方法,该方法包括:
识别挑战数据集,其中挑战数据集表示被配置为由包括一个或多个MSU的最终用户硬件的用户所尝试的挑战活动,其中每个挑战数据集包括表示下述各项的数据:
(i)一个或多个挑战技能,其中该一个或多个挑战技能中的每一个与特定于技能的配置数据相关联,其中特定于技能的配置数据可下载到最终用户硬件,从而用于将最终用户硬件配置为基于从一个或多个MSU导出的运动传感器数据(MSD)来实现对挑战技能的表演事件的识别和分析;以及
(ii)表示一个或多个竞争性参数的数据;
使得包括一个或多个MSU的最终用户硬件的用户能够参与给定的挑战活动,其中使得用户能够参与给定的挑战活动包括:
(i)使得用户的最终用户硬件针对一个或多个挑战技能应用特定于技能的配置数据;以及
(ii)使得基于所应用的特定于技能的配置数据来对从一个或多个MSU导出的数据进行分析,从而实现关于一个或多个竞争性参数的评估。
一个实施例提供了一种用于提供多用户竞争性活动的方法,该方法包括:
提供创作界面,该创作界面被配置为使得活动创作者用户能够为竞争性活动定义挑战数据集,其中每个挑战数据集包括:
(i)表示挑战位置的位置信息的数据;
(ii)表示一个或多个挑战技能的数据,其中该一个或多个挑战技能中的每一个都从被配置为经由最终用户穿戴的运动传感器单元来识别的挑战技能的储存库中选择;以及
(iii)表示一个或多个竞争性参数的数据;
使得竞争性活动可用于多个活动参与者用户,其中给定的活动参与者基于对从与用户相关联的运动感测服装导出的数据的分析来参与竞争性活动。
一个实施例提供了一种用于提供多用户竞争性活动的方法,该方法包括:
识别与活动参与者用户相关联的位置信息;
识别与位置信息相关联的一个或多个预定义的竞争性活动,其中每个竞争性活动与相应的挑战数据集相关联,其中每个挑战数据集包括:
(i)表示挑战位置的位置信息的数据;
(ii)表示一个或多个挑战技能的数据,其中该一个或多个挑战技能中的每一个都从被配置为经由最终用户穿戴的运动传感器单元来识别的挑战技能的储存库中选择;以及
(iii)表示一个或多个竞争性参数的数据;
处理从与活动参与者用户相关联的一组穿戴的运动传感器单元导出的数据,从而针对所识别的预定义的竞争性活动中的给定的一个竞争性活动,确定针对一个或多个竞争性参数评估活动参与者用户。
一个实施例提供了用于执行如本文所述的方法的计算机程序产品。
一个实施例提供用于携带计算机可执行代码的非暂态载体介质,当计算机可执行代码在处理器上被执行时,使得处理器执行如本文所述的方法。
一个实施例提供了一种被配置用于执行如本文所述的方法的系统。
在整个本说明书中对“一个实施例”、“一些实施例”或“实施例”的引用表示结合实施例描述的特定特征、结构或特性被包括在本发明的至少一个实施例中。因此,整个本说明书的各个地方中短语“在一个实施例中”、“在一些实施例中”或“在实施例中”的出现不一定全部指代同一实施例,但是可以指代同一实施例。此外,在一个或多个实施例中,可以以任何合适的方式组合特定的特征、结构或特性,如根据本公开对本领域普通技术人员将显而易见的。
如本文所使用的,除非另有规定,否则使用序数形容词“第一”、“第二”、“第三”等来描述同类对象仅表示被指代的相似对象的不同实例,并且不旨在隐含如此描述的对象必须在时间上、空间上、排名上、或以任何其它方式按照给定的顺序。
在下面的权利要求和本文的描述中,术语包括、包含或其包括中的任何一个是开放式术语,其表示至少包括随后的元素/特征,但不排除其它元素/特征。因此,术语包括当在权利要求中使用时,不应被解释为对其后列出的装置或元素或步骤的限制。例如,包括A和B的设备的表达的范围不应限于仅由元素A和B组成的设备。术语包含或其包含或如本文所使用的包含中的任何一个也是开放式术语,其也表示至少包括该术语之后的元素/特征,但不排除其它元素/特征。因此,包含是包括的同义词,并且包含表示包括。
如本文所使用的,术语“示例性的”用于提供示例的意义,而不是指示质量。也就是说,“示例性实施例”是作为示例提供的实施例,而不一定是示例性质量的实施例。
PCT/AU2016/000020的内容通过交叉引用以其整体并入本文。
附图说明
现在将参考附图仅通过示例的方式描述本发明的实施例,其中:
图1A示意性地示出了根据一个实施例的被配置为实现对内容的生成和传送的框架。
图1B示意性地示出了根据另一实施例的被配置为实现对挑战内容的生成和传送的框架。
图2A示出了根据一个实施例的技能分析方法。
图2B示出了根据一个实施例的技能分析方法。
图2C示出了根据一个实施例的技能分析方法。
图2D示出了根据一个实施例的技能分析方法。
图2E示出了根据一个实施例的技能分析方法。
图3示出了根据一个实施例的用户界面的用户界面显示视图。
图4A示出了根据一个实施例的挑战实现方法。
图4B示出了根据一个实施例的挑战实现方法。
图4C示出了根据一个实施例的挑战实现方法。
图4D示出了根据一个实施例的挑战实现方法。
图4E示出了根据一个实施例的挑战实现方法。
图5示出了根据一个实施例的SIM分析方法。
图6示出了根据一个实施例的SIM分析方法。
图7示出了根据一个实施例的ODC验证方法。
图8示意性地示出了根据一个实施例的示例性实现方式。
图9A示出了包括服务器端和客户端组件的示例框架。
图9B示出了包括服务器端和客户端组件的另一示例框架。
图9C示出了包括服务器端和客户端组件的另一示例框架。
图9D示出了包括服务器端和客户端组件的另一示例框架。
图10A示出了示例框架的操作。
图10B示出另一示例框架的操作。
图10C示出另一示例框架的操作。
图11示出了示例操作方法。
图12A示出了根据一个实施例的表演分析设备。
图12B示出了根据一个实施例的表演分析设备。
图12C示出了根据一个实施例的表演分析设备。
图12D示出了根据一个实施例的表演分析设备。
图12E示出了根据一个实施例的具有MSU功能的服装布置。
图12F示出了根据一个实施例的具有示例连接设备的具有MSU功能的服装布置。
图12G示出了根据一个实施例的具有示例连接设备的具有MSU功能的服装布置。
图12H示出了根据一个实施例的MSU。
图12I示出了根据一个实施例的MSU和壳体。
具体实施方式
本文描述的实施例涉及技术框架,由此使用表演传感器单元(PSU)来监测用户技能表演,并且处理从这些PSU得到的数据,从而确定用户技能表演的属性。例如,对表演的属性的识别用于驱动计算机处理,例如本文描述的计算机处理。特别关注通过提供竞争性挑战来实现技能游戏化的技术,这些挑战是由从监测身体表演的PSU中导出的数据驱动的。例如,在一个实施例中,用户在执行一个或多个特定技能的上下文中(例如,在幅度、力量、准确性、连续完成等等的上下文中)比其他人“更好地”进行竞争。
本文描述的技术涉及PCT/AU2016/000020中描述的技术,PCT/AU2016/000020通过交叉引用以其整体并入本文,并且提供有关支持技术方面的有用内容和附加细节。更具体地说,本文描述的技术框架利用PSU收集表示表演属性的数据,并将该数据用于下游处理目的。这些目的可以包括(PCT/AU2016/000020中详细描述的)技能训练目的和其它目的。本文特别考虑的一个目的是基于技能的游戏化,包括特定于位置的游戏化。实质上,这包括使得用户能够参与游戏/挑战,该游戏/挑战是基于经由运动传感器导出的数据对基于表演的技能进行的分析来评分(或以其它方式来评估)的。
技能表演的性质在实施例之间是不同的,并且以下两个一般类别用于本文考虑的示例的目的:
·基于人类运动的技能表演。这些是其中人类运动属性表示技能的典型特性的表演。例如,基于运动的表演基本上包括涉及表演者的身体的运动的任何身体技能。一类重要的基于运动的表演是体育活动中使用的技能的表演。
·基于音频的技能表演。这些是其中可听见-可感知的属性表示技能的典型特性的表演。例如,基于音频的技能表演包括音乐和/或语言表演。一类重要的基于音频的表演是与演奏乐器相关联的技能的表演。
虽然以下提供的示例主要集中在基于运动的技能表演的相对在技术上更具挑战性的情况,但是应该理解的是,在基于运动的技能方面所应用的原理很容易应用于其它情况。例如,在从PSU接收的数据中使用可观测数据条件(ODC)的概念在运动、音频和其它形式的表演之间同样适用。
术语
为了下述实施例的目的,使用以下术语:
·表演传感器单元(PSU)。表演传感器单元是被配置为响应于对身体表演的监测而生成数据的硬件设备。这里主要考虑被配置用于处理运动数据和音频数据的传感器单元的示例,但应当理解,这些绝不是限制性的示例。
·表演传感器数据(PSD)。由PSU传送的数据被称为表演传感器数据。该数据可以包括来自PSU的完整原始数据或该数据的子集(例如基于压缩、减少的监测、采样速率等)。
·音频传感器单元(ASU)。音频传感器单元是一种PSU,其是被配置为响应于对声音的监测而生成和发送数据的硬件设备。在一些实施例中,ASU被配置为监测声音和/或振动效果,并将它们转换成数字信号(例如MIDI信号)。一个示例是ASU是拾取设备,其包括被配置为捕获弦乐器中的机械振动并将它们融合成电信号的换能器。
·音频传感器数据(ASD)。这是由一个或多个ASU传送的数据。
·运动传感器单元(MSU)。运动传感器单元是一种PSU,其是被配置为响应于运动而生成和发送数据的硬件设备。在大多数情况下,该数据是相对于本地参考系(frame ofreference)定义的。给定的MSU可以包括一个或多个加速度计;从一个或多个磁力计得到的数据;以及从一个或多个陀螺仪得到的数据。优选实施例使用一个或多个3轴加速度计、一个3轴磁力计和一个3轴陀螺仪。运动传感器单元可以是“被穿着的”或“可穿戴的”,这表示其被配置为被安装到人体固定位置(例如经由服装)。
·运动传感器数据(MSD)。由MSU传送的数据被称为运动传感器数据(MSD)。该数据可以包括来自MSU的完整原始数据或该数据的子集(例如基于压缩、减少的监测、采样速率等)。
·具有MSU功能的服装。具有MSU功能的服装是被配置为携带多个MSU的服装(例如衬衫或裤子)。在一些实施例中,MSU可被安装在形成在服装中的限定安装区中(优选地以可移除的方式,使得各个MSU能够被移除和替换)并被耦合到通信线路。
·POD设备。POD设备是接收PSD(例如,来自MSU的MSD)的处理设备。在一些实施例中,它由具有MSU功能的服装携带,并且在其它实施例中,它是单独的设备(例如,在一个实施例中,POD设备是耦合到智能手机的处理设备,并且在一些实施例中POD设备功能由智能手机或移动设备提供)。MSD在某些情况下经由有线连接被接收,并且在某些情况下经由无线连接被接收,并且在某些情况下经由无线和有线连接的组合被接收。如本文所述,POD设备负责处理MSD,从而识别MSD中的数据条件(例如,以使得能够识别一个或多个症状的存在)。在一些实施例中,POD设备的作用全部或部分地由诸如智能手机之类的多用途最终用户硬件设备执行。在一些实施例中,PSD处理的至少一部分由基于云的服务执行。
·运动捕获数据(MCD)。运动捕获数据(MCD)是使用任何可用的运动捕获技术得到的数据。在这方面,“运动捕获”涉及捕获设备用于例如使用被安装到已知位置的对象的视觉标记物来捕获表示运动的数据的技术。一个示例是由Vicon提供的运动捕获技术(但不推测发明人/申请人和Vicon之间的关系)。如下面进一步讨论的,MCD优选地用于提供视觉观测和MSD观测之间的联系。
·技能。在基于运动的活动的上下文中,技能是例如在辅导的上下文中要被观测(视觉上和/或经由MSD)的单个运动(或一组相关联的运动)。技能可以是例如划船运动、特定类别的足球踢出、特定类别的高尔夫挥杆、特定的杂技演习等等。还提及了“子技能”。这主要是为了区分被训练的技能与形成该技能的一部分或者是该技能的构造块的较少的技能。例如,在玩杂耍形式的技能的上下文中,子技能是涉及投掷球并将其捕捉在同一只手中的技能。
·症状。症状是能够被观测(例如,在初始技能分析的上下文中在视觉上被观测,并且在最终用户环境的上下文中经由对MSD进行处理而被观测)的技能的属性。在实践中,症状是技能的可观测的运动属性,其与意义相关联。例如,对症状的识别可以触发关于传送自动辅导处理的动作。症状可以在视觉上(在传统辅导的上下文中相关)或经由PSD(在本文讨论的传送自动自适应技能训练的上下文中相关)被观测。
·原因。至少在某些情况下,症状与一个原因相关联(例如,给定的症状可以与一个或多个原因相关联)。在某些情况下,原因还能够在MSD中被观测到,然而这不一定是必需的。从辅导的角度来,一种方法是首先识别症状,然后确定/预测该症状的原因(例如,可以经由对MSD的分析进行确定,并且可以通过除分析MSD之外的方式进行预测)。然后,可以通过辅导反馈来解决所确定/所预测的原因,随后进行后续的表演评估,从而确定辅导反馈是否成功地解决了症状。
·可观测数据条件(ODC)。术语可观测数据条件用于描述能够在PSD(例如MSD(通常基于对ODC或一组预期ODC的存在的监测))中被观测到从而触发下游功能的条件。例如,可以针对给定的症状(或原因)定义ODC;如果在MSD中针对给定表演识别了该ODC,则确定该表演中存在相关症状(或原因)。这然后触发了训练程序中的事件。
·训练程序。术语“训练程序”用于描述经由执行软件指令被传送的交互过程,其向最终用户提供关于如何执行的指令,以及关于如何修改、改善或以其它方式调整其表演的反馈。在下面描述的至少一些实施例中,训练程序是“自适应训练程序”,其是基于规则/逻辑执行的训练程序,该规则/逻辑使得对处理的排序、对选择的反馈和/或训练的其它属性能够基于对相关最终用户的分析(例如,对其表演的分析和/或对诸如心理和/或身体属性之类的个人属性的分析)进行适应。
如下面更详细地描述的,从最终用户产品的角度来看,一些实施例采用下述技术:通过该技术,POD设备被配置为针对给定的表演分析用户的PSD(例如MSD),从而识别所表演的特定技能,并且在某些情况下还识别与特定技能的表演相关联的症状。
示例端到端框架
图1A提供了由本文所述的一系列实施例利用的端到端框架的高级概述。在图1A的上下文中,利用示例技能分析环境101,从而分析一个或多个技能,并且提供能够生成与这些技能相关的最终用户内容的数据。例如,这在一些实施例中包括分析技能,从而确定能够由PSU识别的ODC(优选与特定技能、技能症状等相关联的ODC)。这些ODC能够在由示例内容生成平台102(例如训练程序)实现的内容生成逻辑内使用。在这方面,生成内容优选地包括定义协议,由此响应于对特定ODC的识别而采取规定的动作。在下面描述的实施例中,内容生成平台102用于为一个或多个计算程序生成规则,从而使得这些程序能够基于PSD来识别已经表演的特定技能(以及在某些情况下与那些技能表演相关联的症状)。
利用一个或多个技能分析环境和内容生成平台,从而向示例内容管理和传送平台103提供内容。在一些实施例中,该平台由多个联网的服务器设备定义。实质上,平台103的目的是将由内容生成平台生成的可用内容提供给最终用户。在图1A的上下文中,其包括实现内容到示例最终用户设备104的下载。一些实施例中,下载包括内容的初始下载,以及随后对额外所需内容的进一步下载。进一步下载的性质在某些情况下受到用户交互的影响(例如,基于技能训练程序的组件和/或用户选择之间的自适应进展)。本文考虑的下载的内容的特定示例是被配置为基于PSD来识别已经表演的特定技能(以及在某些情况下与那些技能表演相关联的症状)的内容。
示例设备104以具有MSU功能的服装结合用户界面设备(例如,智能手机、耳机、HUD眼镜、视网膜投影设备等)的形式示出,具有MSU功能的服装携带多个MSU和POD设备。
在图1A的示例中,用户从平台103下载内容,并且使得该内容经由设备104被执行。例如,这可以包括能够基于PSD来监测特定技能(例如,与特定形式的身体活动相关的技能,例如滑雪)的表演的内容。在一些实施例中,这是结合图1A的示例提供的,设备104被配置为与一个或多个内容交互平台(包括媒体管理平台105)进行交互。这在一些实施例中是如下所述的外部(基于web的和/或经由本地计算硬件提供的)平台:该平台提供与媒体内容的管理相关的附加功能,并且具体地提供与媒体数据(例如视频数据)和通过经由硬件104的一个或多个实例生成的PSD识别的技能表演的二者的关联关系相关的功能。
应该理解的是,图1A描绘了技术的多个阶段,包括技能分析阶段(由此实施以分析将经由最终用户硬件来识别和根据症状测量的技能)、内容生成和分发(其将来自技能分析阶段的数据处理技术嵌入到用于由最终用户体验的软件产品和内容中)、以及最终用户阶段(其中最终用户硬件被操作用于实现对身体表演的分析,从而识别技能和症状)。媒体管理功能主要是作为最终用户阶段的一部分发生。
经由挑战和竞争性活动进行游戏化-概述
如上所述,本申请的焦点是基于运动的技能的游戏化。例如,这允许包括MSU(或其它形式的PSU)的最终用户硬件的用户参与基于MSD导出的技能表演评估来评估的挑战等。本文公开的技术涉及提供多用户竞争性活动。这在一些实施例中包括工具,例如创作界面,其使得能够实现用户驱动的竞争性活动的生成,并且在一些平台中包括使这种竞争性活动可用于分布式用户的平台。
总的来说,本文公开的竞争性活动是基于对人类表演的监测。在下面考虑的示例中,这些是通过运动感测硬件(例如,具有MSU功能的服装)来监测的表演。这使得适当配置的处理设备能够基于从运动传感器单元导出的输入来确定基于运动的表演的属性。例如,这包括确定所执行的特定技能以及这些技能的属性(例如症状)等。这些属性可以可选地涉及表演因素,例如力量、速度、准确度、高度等等。
在下面描述的一些实施例中,关注于特定于位置的竞争性活动。也就是说,特定的竞争性活动与特定的位置相关联。一个实际的示例是关于滑板公园的示例;可以针对特定的公园定义诸如“最高空中位置(highest air)”、“最连续的成功踢翻(kickflip)”等的挑战。这允许该公园的用户彼此竞争,尽管不需要在同一时间参加该设施,或甚至在个人层面上彼此了解。相反,当在相关的滑板公园处时,用户能够识别已经(例如,由其他用户)被定义了的挑战,并且经由基于硬件的对他/她自己的身体表演的监测来进行竞争。
一个实施例提供了一种用于使得包括一个或多个运动传感器单元(MSU)的最终用户硬件(例如,具有MSU功能的服装)的用户能够参与竞争性活动的方法。该方法包括在服务器设备处维护多个“挑战数据集”。挑战数据集是定义特定“挑战”的一组数据,其被用作描述竞争性活动的通用术语。每个挑战数据集表示被配置为由包括一个或多个MSU的最终用户硬件的用户所尝试的挑战活动。例如,挑战包括以特定方式执行一个或多个技能以达到所定义的目标。
每个挑战数据集包括表示下述各项的数据:(i)一个或多个挑战技能;以及(ii)表示一个或多个竞争性参数的数据。总的来说,挑战技能是构成挑战的一部分的预定义技能(即,要表演的技能),并且竞争性参数定义了如何评估用户(例如,目标是否是多次执行给定技能,还是执行特定属性最大化的给定技能等)。
一个或多个挑战技能中的每一个与特定于技能的配置数据相关联。该特定于技能的配置数据可下载到最终用户硬件,从而用于将最终用户硬件配置为基于从一个或多个MSU导出的运动传感器数据(MSD)来实现对挑战技能的表演事件的识别和分析。如下面更详细讨论的,特定于技能的配置数据优选地包括传感器配置数据(其将MSU配置为以定义的方式收集MSD)和状态引擎数据(其实现对MSD的处理从而识别技能表演并确定症状/属性)。
该方法然后包括使得包括一个或多个MSU的最终用户硬件的用户能够参与给定的挑战活动。使得用户能够参与给定的挑战活动包括:(i)使得用户的最终用户硬件针对一个或多个挑战技能应用特定于技能的配置数据;以及(ii)使得基于所应用的特定于技能的配置数据来对从一个或多个MSU导出的数据进行分析,从而实现关于一个或多个竞争性参数的评估。
一些实施例包括提供创作界面,该创作界面被配置为使得活动创作者用户能够为竞争性活动定义挑战数据集。通过这种方式,挑战内容由用户定义,从而实现用户驱动的对多用户竞争性活动的协调。
示例性框架在图1中示出。框140表示示例性的活动创作者设备,其包括客户端设备101和具有运动传感器功能的服装102。
客户端设备101被配置为例如经由专有应用或经由网页浏览器应用来呈现活动创作用户界面。尽管客户端设备101被示出为移动设备,但在实现方式中使用各种形式的客户端设备,例如包括智能手机、平板电脑、笔记本/膝上型PC、台式PC、游戏控制台等等。在该实施例中,客户端设备101还被配置为与具有传感器功能的服装102进行通信。下面进一步描述与具有传感器功能的服装102相关的示例性硬件和技术。
框130表示示例性活动参与者用户的设备,其也包括客户端设备和具有MSU功能的服装。这些用户使用他们各自的客户端设备来查看可用的活动,并且查看他们参与这些活动的结果。通过使用具有传感器功能的服装来实现参与,具有传感器功能的服装实现表演分析(通过如下所述的机载处理能力或通过替代方式来实现)。
如下面更详细描述的,活动创作者用户和活动参与者用户经由他们各自的设备与竞争服务器110进行交互,竞争服务器110使得由给定用户(充当活动创作者用户)创作的活动能够变得可用于由其他用户(充当活动参与者用户)参与。
术语“竞争性活动”和“挑战”在本文中通常可互换使用。也就是说,术语“挑战”用于描述竞争性活动。然而,术语“竞争性活动”用于指示能够由各种实施例提供的活动的范围可以超出通常与术语“挑战”相关联的活动的范围。
技能分析阶段-概述
如上所述,实施技能分析阶段从而分析将在最终用户传送阶段中(例如,在挑战参与的上下文中)识别和分析的技能。也就是说,存在一个初步阶段,由此检查技能,从而用于确定如何经由PSD(如MSD)来自动识别和分析该技能。该阶段的结果用于实现对最终用户硬件(例如,具有MSU功能的服装和相关联的处理基础设施)和/或服务器侧处理基础设施的配置,该服务器侧处理基础设施被配置为接收从最终用户硬件MSU导出的原始的和/或经部分处理的数据。
在一些实施例中,技能分析阶段优选地包括以下分析:(i)确定技能的属性,例如表示正在被表演的技能的属性(其在最终用户功能包括技能识别的情况下特别相关)以及表示执行技能的方式的属性,例如症状和原因(其在最终用户功能包括技能表演分析的情况下(例如在技能训练的传送的上下文中)特别相关);以及(ii)定义实现对技能属性(例如,正在被表演的技能、以及该技能的表演的属性,例如症状和/或原因)的自动识别的ODC,使得最终用户硬件(PSU,例如MSU)能够被配置用于自动技能表演分析。
技能分析阶段的性质根据给定技能的性质(例如,在基于运动的技能和基于音频的技能的类别之间)而显著变化。为了示例的目的,现在在基于运动的技能的上下文中关于技能分析阶段来描述示例性实施例。也就是说,通过参考分析身体活动,从而确定用于配置POD设备的ODC来描述实施例,其中,所述POD设备监测来自安装于身体的MSU的数据。该示例被选择为表示相对具有挑战性和复杂性的上下文中的技能分析阶段,其中已经开发了各种新颖和创造性的技术方法来辅助针对基于运动的技能生成有效的ODC的任务。应当理解,并不是本文所描述的方法的所有方面都存在于所有实施例中、或者用于所有活动的上下文中。该技术适用于广泛的身体活动,具有不同程度的复杂性(例如,在表演、辅导和监测方面)。然而,本文描述的方法适用于广泛的活动,例如在个人和团队运动的上下文中表演的技能。
以下详细描述的方法和技术通过参考涉及下述特定身体活动的具体示例进行描述:划船。技能是标准划船划浆。已经选择划船作为示例,主要是为了方便的文本解释的目的,并且将很容易理解,参考该特定活动描述的技术如何容易地应用于其它活动(例如,表演英式足球的特定形式的踢球、摇摆高尔夫球杆、在滑雪板上进行杂技演习等)。
一般而言,有很多方法来确定给定身体活动的ODC。这些方法包括但不限于以下内容:
·利用二级技术,从而简化对MSD的理解。例如,下面提供的示例讨论了利用MCD和MSD的组合的方法。MCD主要由于运动捕获技术的已建立的性质(例如使用强大的高速摄像机)而被使用;另一方面,运动传感器技术目前在不断提高效能。使用成熟的MCD分析技术有助于理解和/或验证MSD和关于MSD进行的观测。
·直接利用MSD,无需MCD协助。例如,MSD在捕获数据方面以与MCD相似的方式被利用,从而生成与从MCD(例如,基于具有骨骼关节的身体化身(avatar))常规生成的三维身体模型类似的三维身体模型。将理解的是,这假设关于MCD的阈值准确度和可靠度。然而,在一些实施例中,能够实现这一点,因此致使不需要MCD协助。
·机器学习方法,例如其中MSD和/或MCD被收集用于多个样本表演、以及客观定义的表演结果数据(例如,在划船的情况下:功率输出;以及在高尔夫球的情况下:球方向和轨迹)。机器学习方法被实现,从而使能自动定义ODC和对技能表演的影响之间的关系。这种方法在以足够的样本规模被实现时,实现对ODC的计算机识别以驱动对技能表演结果的预测。例如,基于使用MSD(或在一些实施例中,MCD)的样本表演集合的高尔夫挥杆运动的机器学习,使用对客观定义的结果的分析来自动识别影响挥杆表演的ODC,从而实现对关于使用最终用户硬件(例如具有MSU功能的服装)的最终用户挥杆的结果的可靠的自动预测。
·远程收集来自最终用户的分析数据。例如,最终用户设备被配备有“记录”功能,其实现对表示由最终用户分别执行的特定技能的MSD(可选地连同关于由用户本身识别的症状等的信息)的记录。所记录的数据被发送到中央处理位置,以针对多个用户对于给定技能(或具有特定症状的特定技能)的MSD进行比较,从而识别技能(和/或症状)的ODC。例如,这通过识别数据中的共同点来实现。
还可以使用其它方法,包括利用非MSD数据验证和/或以其它方式辅助MSD数据的其它方法,并且还包括实现用于定义和分析样本用户组的不同技术的其它方法。
以下通过参考具体的示例实施例更详细地考虑上述第一示例,这些具体的示例实施例涉及使得主观专家辅导知识能够有助于开发能够在技能训练程序的上下文中使用的症状和/或原因的ODC。
技能分析阶段-样本分析示例
在一些示例实施例中,针对要训练的每个技能,需要使用一个或多个样本技能表演者来执行对该技能中涉及的运动的初始分析,从而实现对最优表演与次优表演之间的差异的确定(从而使得能够朝向最优表演方向进行辅导)。一般来说,这从视觉分析开始,随后将其(经由一个或多个中间处理)转换为对运动传感器数据的分析(称为针对可观测数据条件或ODC的监测)。
本文描述的示例技术包括通过多个样本对象获得表示身体技能表演(针对给定技能)的数据。针对每个身体技能表演,数据优选地包括:
(i)由一个或多个捕获设备从一个或多个捕获角度捕获的视频数据。例如,在划船的上下文中,这可以包括侧捕获角度和后捕获角度。
(ii)使用任何可用的运动捕获技术的运动捕获数据(MCD)。在这方面,“运动捕获”涉及捕获设备用于例如使用在已知位置被安装到对象的视觉标记物来捕获表示运动的数据的技术。一个示例是由Vicon提供的运动捕获技术(但不推测发明人/申请人和Vicon之间的关系)。
(iii)使用一个或多个安装于身体的运动传感器的运动传感器数据(MSD)。
在每种情况下,优选的方法是存储下述两者:(i)原始数据;以及(ii)已经经过一定程度的处理的数据。针对运动传感器数据尤其如此;随着更新/更好的处理算法变得可用,原始数据可以随时间被重新处理,从而增强最终用户功能。
总的来说,一般的概念是使用MCD作为视频数据(这对现实世界辅导是最有用的)和MSD(这是最终的最终用户功能所需要的,最终的最终用户功能涉及经由对从具有MSU功能的服装得到的数据的分析进行辅导)之间的垫脚石。在这方面,MCD呈现有用的垫脚石,因为(i)它是发达且可靠的技术;以及(ii)它非常适合监测身体部位的精确相对运动。
整体技术包括以下阶段:(i)收集表示所选对象的样本表演的数据;(ii)一个或多个教练使用视频数据来视觉分析样本表演;(iii)将一个或多个教练进行的视觉观测转换到MCD空间中;以及(iv)基于MCD观测分析MSD,从而识别MSD空间中的ODC,其在实际意义上表示一个或多个教练的观测。以下将更详细地讨论这些阶段中的每一个。这在图2A中经由框201至204示出。
替代方法在图2B(其省略了对视频数据的收集,并且替代地经由使用MCD生成的数字模型来执行视觉分析)、图2C(其中仅使用MSD,并且使用基于MSD的计算机生成的模型来实现视觉分析)、图2D(其中没有视觉分析,只有对MCD进行数据分析以识别样本之间的相似性和差异)、图2E(其经由MSD(MSD被收集用于样本表演,基于结果数据执行数据分析,如此客观地测量样本表演的一个或多个结果参数,并且基于机器学习来定义ODC,从而基于ODC实现对结果的预测)利用机器学习)中示出。
在使用“一个或多个”教练方面,在某些情况下,多个教练被使用,从而定义关于给定技能的分析和辅导的共识位置,并且在某些情况下,多个教练替代地/另外地用于定义特定于教练的内容。后者允许最终用户基于更广泛的辅导共识在辅导之间进行选择,或者基于特定教练的特定观点进行辅导。在实际层面上,在商业实现的上下文中,后者可以被提供作为优质内容产品(可选地具有更高的价格)的基础。术语“教练”可用于描述被认定为教练的人员、或针对目前的目的以辅导能力操作的人员(如运动员或其它专家)。
技能分析阶段-对象选择示例
对象选择包括选择代表给定技能的一组对象。在一些示例实施例中,执行样本选择以实现以下参数中的一个或多个之间的标准化:
(i)能力水平。优选地选择多个对象,使得在一定范围的能力水平上具有足够的表示。这可以包括:最初确定一组已知的能力水平,并针对每个水平确保足够的对象数目;分析第一样本组,基于分析识别该组内的能力水平表示,以及可选地扩展用于表示不足的能力水平的样本组或其它方法。在本文描述的实施例中,用户能力水平在多层次上是自动辅导处理的核心。例如,如下面进一步讨论的,使用对用户能力水平的初始评估来确定如何配置POD设备,例如,根据其监测的ODC来配置POD设备。作为上下文,新手所犯的错误将不同于专家所犯的错误。此外,有利的是提供针对用户的实际能力水平的辅导,例如通过首先提供训练,从而实现新手水平的最佳(或接近最佳)的表演,并且随后提供训练,从而实现更高级水平的最佳(或接近最佳)的表演。
(ii)身体尺寸和/或形状。在一些实施例中,或针对一些技能,身体尺寸和/或形状可能对技能的运动属性(例如通过参考症状的可观测特性)具有直接影响。可选的方法是扩展样本,使得其代表多个身体尺寸/形状中的每一个(理想地在每个能力水平处)。如下面进一步讨论的,在一些实施例中,经由数据驱动的样本扩展方法替代地实现身体尺寸/形状标准化,如下面进一步讨论的。简而言之,这允许通过对收集的数据应用一组预定义的转换从而在各种不同的身体尺寸和/或形状间转换该数据,来为每个样本用户表演定义多个MCD/MSD数据集。
(iii)风格。用户可以具有独特的风格,这不会对表演造成重大影响。样本优选地包括足够的表示以实现风格间的标准化,使得症状的可观测特性是独立于风格的。这实现以基于表演的方式进行辅导,而不依赖于个人风格的各方面。然而,在一些实施例中,以特定于风格的方式定义症状的至少一个选择。例如,这使得辅导能够采用特定的风格(例如,以实现针对特定运动员的风格的辅导)。
为了简单起见,以下描述集中于针对多个能力水平的标准化。在一个示例实施例中,存在“m”个能力水平(AL1到ALm)和每个能力水平的“n”个对象(SUB1到SUBn)。也就是说,总体上有m*n个对象。应当理解,每个单独的能力水平的对象的数目不必相等(例如,在一些实施例中,在给定能力水平处观测到额外的对象,从而获得更可靠的数据)。
如上所述,在一些实施例中,样本例如基于下述识别而随时间扩展:附加数据点是优选的。
技能分析阶段-表演制度定义示例
在一些示例实施例中,每个测试对象(AL1到ALm中的每一个处的SUB1到SUBn)执行定义的表演制度。在一些实施例中,表演制度在多个能力水平间是恒定的;在其它实施例中,针对每个能力水平定义特定的表演制度。作为上下文,在某些情况下,表演制度包括在不同强度水平下的表演,并且某些强度水平可能不适当地低于阈值能力水平。
一些实施例提供了一种处理,其包括针对给定技能定义分析表演制度。该制度定义了为了样本数据收集的目的而要由每个对象表演的多个身体技能表演。优选地,分析表演制度由用于执行定义数目的组的指令定义,每组具有所定义的组参数。组参数优选地包括:
(i)针对每组的重复的数目。例如,一组可以包括n次重复(其中n≥1),其中对象重复地尝试具有定义的参数的技能。
(ii)重复指令。例如,重复之间有多少休息时间。
(iii)强度参数。例如,可以以恒定强度(每个重复REP1到REPn以相同的强度Ic)、递增强度(以强度I1执行重复REP1,然后以强度I2执行重复REP2,其中I1>I2,依此类推)、或递减强度(以强度I1执行重复REP1,然后以强度I2执行重复REP2,其中I1<I2,依此类推)或更复杂的强度分布来执行组。定义强度的方式取决于活动。例如,可以使用诸如速度、功率、频率之类的强度参数。在某些情况下,这类度量实现客观测量和反馈。替代地,可以使用最大强度的百分比(例如“最大值的50%”),这是主观的但通常是有效的。
作为示例,用于分析在尔格(erg)机器上的划船运动形式(室内划船设备的形式)的技能的给定分析表演制度可以按如下所示来定义:
·执行6组(SET1至SET6),每组之间休息5分钟。
·针对每组,执行8次连续重复(REP1到REP8)。
·强度参数为:SET1处于强度=100W;SET2处于强度=250W;SET3处于强度=400W;SET4处于强度=550W;SET5处于强度=700W;SET6处于强度=850W。
下面还继续参考划船的示例。然而,应当理解,这仅仅是为了说明的目的而提供的代表性技能,并且基本原理适用于广泛的技能。
技能分析阶段-示例数据收集协议
收集和存储关于每个用户对表演制度的完成的数据。如前所述,针对本示例。在本文考虑的主要示例中,数据包括:
(i)由一个或多个捕获设备从一个或多个捕获角度捕获的视频数据。例如,可以使用前面、后面、侧面、相对侧、顶部和其它摄像头角度中的一个或多个。
(ii)使用任何可用的运动捕获技术的运动捕获数据(MCD)。
(iii)使用一个或多个安装于身体的运动传感器的运动传感器数据(MSD)。
优选地控制执行数据收集的条件,从而实现样本之间的高度一致性和可比性。例如,这可以包括诸如确保一致的摄像头放置、使用标记物等以辅助对象定位、对对象上的MSU的精确定位之类的技术。
收集的数据被组织并存储在一个或多个数据库中。还优选地收集和存储元数据,从而提供附加的上下文。此外,在某些情况下处理数据以识别关键事件。特别地,事件可以被自动地和/或手动地标记在针对基于运动的事件的数据中。例如,给定技能的重复可以包括多个运动事件,例如开始、完成和一个或多个中间事件。事件可以包括类似步骤、接触球的时刻、划船运动中的关键点等等。这些事件可以在每个数据集中或在能够跨视频数据、MCD和MSD同步的时间线上被定义。
技能分析阶段-示例数据同步
每种形式的数据优选地被配置为被同步。例如:
·视频数据和MCD优选地被配置为被同步,从而实现比较审查。这可以包括并行视频审查(这针对从不同的观看角度捕获的视频/MCD的比较分析尤其有用)以及重叠审查,例如使用部分透明(这对于针对共同角度捕获的视频/MCD尤其有用)。
·MSD优选地被配置为被同步,使得来自多个MSU的数据相对于公共时间参考被转换/被存储。这在一些实施例中是通过每个MSU向POD设备提供表示相对于其本地时钟的时间参考和/或相对于可观测的全局时钟的时间参考的数据来实现的。针对由分布式节点提供的数据的时间同步的各种有用的同步技术从其它信息技术环境(包括例如媒体数据同步)中是已知的。
同步优选地包括基于时间的同步(借此数据被配置为被标准化为公共时间参考),但不限于基于时间的同步。在一些实施例中,除基于时间的同步之外或作为基于时间的同步的替代还使用基于事件的同步(或作为辅助基于时间的同步的方法)。
基于事件的同步涉及数据(例如MCD或MSD)借以包括表示事件的数据的处理。事件通常相对于数据的本地时间轴被定义。例如,MCD可以包括起始点在0:00:00处的视频文件,并且在相对于该起始点的时间定义事件。事件可以被自动定义(例如通过参考能够由软件处理识别的事件,例如预定义的可观测信号)和/或被手动定义(例如,在对该数据的手动视觉审查期间标记视频数据以识别发生特定事件的时间)。
在MCD的上下文中,优选地标记数据以基于一个或多个表演事件实现同步。例如,在划船的上下文中,标记划船运动中的各种可识别的运动点,从而基于运动点的共同性来实现对视频数据的同步。这在比较来自不同样本用户的视频数据时是特别有用的:其有助于识别这些用户之间的不同移动速率。在某些情况下,基于运动点的同步是基于多个点的,其中视频速率被调整(例如,速度增加或速度降低),使得针对两个不同的样本(例如,不同的用户、不同的重复、不同的组等)的视频数据中的两个公共运动点能够被并排(或重叠)观看,以显示这些运动点之间的相同前进速率。例如,如果一个桨手具有1秒的划桨时间,并且另一桨手具有1.2秒的划桨时间,则应用基于运动点的同步,使得后者被缩小到一秒,从而实现两个桨手的运动之间的更直接的比较。
技能分析阶段-示例数据扩展方法
在一些实施例中,针对每个对象经由数据扩展处理来转换MSD和/或MCD,从而定义具有不同身体属性的多个另外的“虚拟对象”。例如,定义转换,从而使得每个MCD和/或MSD数据点能够基于多个不同的身体尺寸被转换。这使得能够从具有特定身体尺寸的对象捕获表演,以被扩展到反映不同身体尺寸的多个样本表演。术语“身体尺寸”涉及诸如高度、躯干长度、大腿长度、小腿长度、臀部宽度、肩宽之类的属性。应当理解,这些属性实际上将分别改变用于MCD和MSD数据收集的标记物和MSU的移动路径和相对位置。
数据扩展在身体尺寸标准化的上下文中也是有用的,这在于从所有样本表演者收集的数据能够被扩展到包括具有“标准”身体尺寸的虚拟表演者进行的一个或多个虚拟表演的一组虚拟表演。在一些实施例中,定义了单个“标准”身体尺寸。使用标准身体尺寸、并将来自样本表演的MSD和MCD转换到该标准身体尺寸,这允许对MCD和MSD的直接比较,而不管多个样本表演者的身体尺寸差异如何。
技能分析阶段-示例视觉分析方法
如上所述以及在图2A的框202中示出的,示例技能分析方法的一个方面包括经由视频数据对样本表演进行视觉分析。在其它实施例中,作为视频数据的替代或除视频数据之外,使用从MCD和/或MSD得到的计算机生成的模型来执行视频分析。因此,尽管下面的示例集中于基于视频数据的审查,但是应当理解,这样的示例是非限制性的,并且视频数据在其它示例中由基于MCD和/或MSD生成的模型代替。
视觉分析被执行用于各种目的,包括:对技能和该技能的组成部分的初步了解;对症状的初始识别;以及基于定义的分析模式对各个样本表演的分析。
图3示出了根据一个实施例的示例用户界面301。应当理解,特别适配的软件并未用于所有实施例中;图3的示例主要被提供来说明在视觉分析处理中特别有用的关键功能。
用户界面301包括多个视频显示对象302a-302d,每个视频显示对象被配置为播放所存储的视频数据。在一些实施例中,视频显示对象的数目例如基于下述项是可变的:(i)针对给定样本表演的视频捕获摄像头角度的数目,其中针对每个角度提供视频显示对象;以及(ii)用户控制。在用户控制方面,用户能够按表演水平(在这种情况下,多个视频显示对象被共同配置用于与该表演相关联的多个视频角度)或以单个视频为基础(例如从一个或多个样本表演中选择特定的角度)来选择要显示的视频数据。每个视频显示对象被配置为显示单个视频、或同时显示多个视频(例如,两个视频彼此重叠,并且具有透明度,从而实现对重叠和差异的观测)。播放上下文显示304提供在视频显示对象中正在显示的内容的细节。
对象302a至302d中显示的视频数据被同步,例如时间同步。公共滚动条303被提供用于实现多个同步视频(如所指出的,其可以包括每个视频显示对象中的多个重叠的视频对象)的同步导航。在一些实施例中,提供切换以在时间同步和基于运动事件的同步之间移动。
导航界面305使得用户能够导航可用的视频数据。该数据优选地被配置为通过参考多个属性来排序,从而实现对期望的表演和/或视频的识别。例如,一种方法是首先按技能排序,然后按能力水平排序,然后按用户排序。在优选实施例中,用户能够将表演视频数据集和/或单个视频拖放到视频显示对象中。
图3另外示出了观测记录界面306。这用于使得用户能够记录能够与被观看的表演数据集相关联的观测信息(例如,完成检查表、制作笔记等)。在观看多个表演数据集的情况下,优选地具有主集合和一个或多个重叠的比较集合,并且观测与主集合相关联。
技能分析阶段-经由视觉分析的示例症状识别
在示例实施例中,多个专家(例如教练)参与审查样本表演,从而识别症状。在一些情况下,这通过诸如用户界面301之类的界面来辅助,该界面提供观测记录界面306。在PCT/AU2016/000020中讨论了从专家提取知识的示例方法。
技能分析阶段-ODC的示例确定(例如,针对状态引擎数据)
在专家/教练进行视觉分析之后,技能分析阶段进入数据分析子阶段,从而分析从样本表演的视觉分析中获得的专家知识,以定义能够基于MSD自动检测症状的ODC。例如,这样的ODC被用于稍后下载到最终用户硬件(例如POD设备)的状态引擎数据中,使得训练程序能够基于表示对最终用户的身体表演中的特定症状的检测的输入来进行操作。
应当理解,在各种实施例中使用一系列不同的方法来定义给定症状的ODC。在一些实施例中,一般方法包括:
(i)执行对MSD的分析,从而(例如,基于包括加速度和方向的MSD)识别数据属性的组合,其基于视觉分析结果被预测为指示症状的存在;
(ii)针对表示样本表演的数据(例如,使用实际记录的MSD)测试那些数据属性,以验证那些数据属性存在于显示相关症状的所有样本表演中(可选地以特定于能力水平为基础);以及
(iii)针对表示样本表演的数据(例如,使用实际记录的MSD)测试那些数据属性,以验证那些数据属性不存在于未显示相关症状的样本表演中(再次,可选地以特定于能力水平为基础)。
示例包括但不限于以下内容:
·使用MCD作为视觉分析和MSD之间的垫脚石的方法;
·直接从视觉分析移动到分析MSD的方法;
·基于从各个传感器获得的数据来定义ODC的方法;以及
·使用从MSD构建的虚拟身体模型,基于整体身体运动来定义ODC的方法。
下面详细描述一些示例。
在一些实施例中,ODC还例如通过定义在MSU和/或POD设备上处理器/功率密度较低的ODC而被调整,从而有效地使用最终用户硬件。例如,这可能与采样速率、数据分辨率等有关。
技能分析阶段-视觉观测到MCD空间的示例转换
如上所述,在一些实施例中,MCD空间被用作视觉观测和MSD数据分析之间的垫脚石。这有助于避免与基于MSD的准确定义虚拟身体模型相关的挑战(例如,注意与将MSD转换到公共几何参考系相关联的挑战)。
总而言之,对于给定的症状,该处理包括分析与已经被标记为显示该症状的表演相关联的MCD。在一些实施例中,该分析在特定于能力水平基础上被执行(注意,症状从运动中可观测到的程度可以在能力水平之间变化)。例如,分析包括将显示相关症状的样本的MCD(例如从MCD得到的计算机生成的模型)与不显示症状的样本的MDC进行比较。
图5示出了根据一个实施例的方法。应当理解,这仅是一个示例,并且可选地使用各种其它方法来实现类似的目的。框501表示包括确定用于分析的症状的处理。例如,在划船的上下文中,症状可以是“抢臂”。框502表示包括识别用于分析的样本数据的处理。例如,样本数据可以包括:
·针对与症状相关联的所有重复的MCD。
·针对与特定强度参数处的症状相关联的所有重复的MCD。也就是说,该分析考虑了症状如何存在于特定强度参数处(与其它强度参数不同)。
·针对与特定能力水平处的症状相关联的所有重复的MCD。也就是说,该分析考虑了症状如何呈现在特定能力水平处(与其它能力水平不同)。
·针对与特定强度参数和特定能力水平处的症状相关联的所有重复的MCD(即组合前两种方法)。
也可以使用其它方法。在某些情况下,将上述方法中的多个结合使用以更好地了解诸如强度和能力之类的因素的影响(其可证明与给定症状相关或无关)。
这里使用的MCD优选地例如基于上面讨论的样本扩展技术来经MCD标准化为标准身体尺寸。同样,从这些处理得到的ODC能够使用样本扩展的转换原理被去标准化(de-normalised),从而适用于身体尺寸的可变(以及潜在的无限可变)范围。
功能框503表示包括识别潜在的症状指示符运动(SIM)的处理。例如,这包括识别针对每个样本重复被预测为表示相关症状的MCD中可观测的运动的属性。在一些实施例中,指示符运动由安装MSU的身体部分的运动路径的属性来定义。运动路径的属性可以包括角度、角度变化、加速/减速、加速/减速变化等。这在本文被称为“点路径数据”,其是表示在身体上定义的点的运动属性的数据。在这方面,潜在的SIM由一组或多组“点路径数据”定义(也就是说,在某些情况下,存在一组点路径数据,其中SIM基于仅一个身体部分的运动,以及在某些情况下,存在多组点路径数据,其中SIM基于诸如前臂和上臂之类的多个身体部分的运动)。
作为上下文,可以定义一组点路径数据以包括给定点的以下数据:
·X轴加速度:最小值:A,最大值B。
·Y轴加速度:最小值:C,最大值D。
·Z轴加速度:最小值:E,最大值F。
还可以使用除加速度之外的数据。此外,可以有多个加速度测量,并且这些可以在时间上参考其它事件和/或测量。例如,一组点路径数据可以通过参考观测另一组点路径数据之后的所定义的时间段来约束。作为上下文,这可以用于定义考虑到大腿上的点与前臂上的点的相对运动的SIM。
功能框504表示测试处理,借以针对比较数据测试潜在的SIM。在一些实施例中,测试验证如下:
(i)在针对样本数据中的每个重复的MCD中观测到一组或多组点路径数据。这验证了潜在的SIM在识别其被设计为进行操作的样本中的症状的存在方面是有效的。
(ii)在针对不与相关症状相关联的重复的MCD中未观测到一组或多组点路径数据。这验证了潜在的SIM将不会在症状不存在的情况下被触发。
判定505表示基于505处的测试确定潜在的SIM是否被验证。
在潜在的SIM不能被成功验证的情况下,其会被改善(参见框506)并被重新测试。在一些实施例中,经由交互式算法自动改善和重新测试。例如,这操作来将先前定义的潜在SIM下的点路径数据定义缩小到能够通过参考针对不存在相关症状的表演重复的MCD而被验证为唯一的点。在某些情况下,给定的SIM不能在阈值数目的迭代之后被验证,并且需要新的起始点潜在SIM。
框507表示在成功测试后对SIM的验证。
在一些实施例中,在样本数据是与相关症状相关联的所有重复的总MCD数据的子集的情况下,生成数据以指示SIM是否也被验证用于该总MCD数据的任何其它子集(例如,SIM是基于第一能力水平的分析得到的,但在第二能力水平处也是有效的)。
应当理解,确定潜在的SIM的处理可以主要是人工处理(例如,基于对视频和/或MCD得到的模型数据的视觉分析)。然而,在一些实施例中,该处理由各种级别的自动化来协助。例如,在一些实施例中,算法被配置为基于显示症状的MCD中的MCD与不存在症状的MCD中的MCD相比的共性来识别潜在的SIM。在一些实施例中,这样的算法被配置为定义潜在的SIM(每个由MCD空间或MSD空间中的相应一组或多组点路径数据来定义)的集合,这些潜在的SIM综合地定义显示症状的样本表演的样本集相对于所有其它样本表演(这些样本表演针对身体尺寸被标准化)的唯一性。在一个实施例中,算法被配置为输出表示包含对所选择的症状或症状集合通用的所有MCD的数据集的数据,并且能够对该数据集(例如基于特定传感器、运动内的特定时间窗口、数据分辨率约束等)进行过滤,从而能够通过用户引导将数据集缩小到具有在最终用户硬件的上下文中实现实际应用的特性的潜在SIM(例如,基于被提供给最终用户的具有MSU功能的服装的MCD)。
在一些实施例中,测试处理另外用于实现对视觉分析不成功的重复中的症状的识别。例如,在测试失败数目较少的情况下,对这些测试失败进行视觉分析,以确认症状确实不存在还是巧妙地存在。
技能分析阶段-从MCD空间到MSD空间的示例转换(ODC)
经由诸如图5的方法被验证的SIM然后被转换到MSD空间中。如上所述,每个SIM包括表示一组或多组点路径数据的数据,每组点路径数据定义针对人体上所定义的点的运动属性。
人体上定义了点路径数据的点优选地对应于在下述项的上下文中安装了MSU的点:(i)样本表演期间由对象穿戴的MSU布置;和(ii)最终用户使用的具有MSU功能的服装。在一些实施例中,最终用户的具有MSU功能的服装(或其变体)被用于样本表演的目的。
在针对除安装MSU的点之外的点定义了点路径数据的情况下,优选地执行数据转换,从而将点路径数据调整到这样的点。或者,这种转换可以被集成到后续阶段。
总而言之,分析样本数据(图5的框502的样本数据)中的一个或多个样本表演重复的MSD,从而识别与点路径数据相对应的数据属性。例如,点路径数据可以指示运动和/或加速方向相对于参考系(优选地是重力参考系)的一个或多个定义的范围。
在一些实施例中,从(a)在MCD空间中得到的SIM到(b)MSD空间中定义的数据的转换包括:
(i)针对每组点路径数据,识别存在于与SIM相关的每个样本表演中的表示点路径数据的MSD属性。在某些情况下,点路径数据和MSD属性之间的关系是不完美的,这例如由于MSD的性质所致。在这种情况下,所识别的MSD属性可以比由点路径数据定义的运动更宽。
(ii)通过与图5的框504-506的迭代测试类似的处理来验证所识别的MSD数据属性,从而验证所识别的MSD属性在针对显示症状的样本表演的MSD中一致地被发现,并且在所有不存在症状的样本表演中不存在。
该转换到MSD空间的处理产生数据条件,当该数据条件在从收集阶段(例如,图2A的框201)期间使用的一个或多个MSU得到的数据中被观测到时,指示存在症状。也就是说,转换处理产生症状的ODC。
以该方式定义的ODC由一个或多个传感器的各个传感器数据条件定义。例如,基于每个传感器处的速度和/或加速度测量结合规则(例如,时序规则:传感器X观测A,并且在定义的时间接近度内,传感器X观测B)来观测ODC。
然后,ODC能够被集成到状态引擎数据中,状态引擎数据被配置为可用于下载到最终用户设备,从而能够配置该最终用户设备以监测相关症状。
应当理解,由上述转换处理定义的ODC对于在数据收集阶段中使用的MSU是唯一的。因此,在最终用户将使用的收集阶段期间,使用相同的MSU和MSU定位(例如经由相同的具有MSU功能的服装)是方便的。然而,在一些实施例中,存在多个版本的最终用户的具有MSU功能的服装,例如具有不同的MSU和/或不同的MSU定位。在这种情况下,针对每个服装版本,可选地分别执行到MSD空间的转换。这可以通过经由虚拟MSU配置(对应于特定最终用户设备)的虚拟应用对所收集的测试数据应用已知的数据转换和/或进行建模来实现。例如,关于后者,可选地使用从MCD得到的虚拟模型作为支持一个或多个虚拟MSU的框架,并且确定对应于SIM数据的计算机预测的MSU读数。应当理解,这提供了基于硬件进展随时间重新定义ODC的能力,这是因为考虑到经由分析阶段收集的数据在这种情况下能够随时间被重新使用。
图6中示出了示例处理,作为用于定义基于MSC分析生成的ODC或SIM的处理。在601处识别经验证的SIM。在602处识别点路径数据的集合中的第一集合,并且经由由框603至608表示的处理来分析该集合,由框603至608表示的处理循环用于点路径数据的每个集合。该循环处理包括识别与点路径数据相对应的潜在MSD属性。例如,在一些实施例中,这包括针对与全部收集的相关MSD或其子集的点路径数据相同的时间点处理收集的MSD(注意,MCD和MSD以被配置用于时间同步的方式被存储)。然后在604处执行测试,以在605处确定所识别的MSD属性是否存在于从样本表演收集的所有相关存在症状的MSD(并且在一些实施例中,以确保其不存在于不存在症状的MSD中)。必要时,在606处执行改善,否则在607处MSD属性被验证。
一旦针对SIM中的所有点路径数据的集合完成了框603至608的循环处理,则在609处组合经验证的MSD属性,从而定义该症状的潜在ODC。然后经由框610至613的处理对这些潜在ODC进行测试、改善和验证,从而确保潜在ODC:(i)在确实存在相关症状的所有相关样本表演MSD中被识别,以及(ii)在不存在相关症状的所有相关样本表演MSD中不被识别(术语“相关”表示在某些情况下分析受能力水平等限制)
应当理解,在另外的实施例中使用各种替代方法,从而定义给定症状的ODC。然而,在基本所有的情况下,方法包括执行分析,从而定义可观测数据条件,可观测数据条件能够在存在症状的样本表演的MSD中被识别(被收集或被虚拟地定义),但是不能在不存在症状的样本表演中被识别。
技能分析阶段-经由MCD空间将视觉观测替代转换到MCD空间
在另外的实施例中,MCD用于生成虚拟身体模型,并且该模型与经时间同步的MSD相关联。以这种方式,能够在技能表演运动中的特定点处使用针对所选择的一个或多个MSU的MSD执行分析。
在该阶段使用的MSD可以是针对特定表演的MSD,或者是在类似表演的子集之间聚合的MSD(例如,在定义的能力水平下,经标准化的身体尺寸的表演)。聚合可以包括下述项中的一项或两项:(i)仅利用在所有表演的子集中相似/相同的MSD;以及(ii)定义数据值范围,使得经聚合的MSD包括针对表演的子集的全部MSD(或统计上相关的比例)。例如,关于后者,针对第一表演的MSD可能具有:特定传感器在特定时间点的x轴加速度值A,并且针对第二表演的MSD可能具有:该特定传感器在该特定时间点的x轴加速度值B。这些能够被聚合到经聚合的MSD中,其中该特定传感器在该特定时间点的x轴加速度的值被定义为在A和B之间。
因此,能够执行分析以确定类似下述项:
(i)针对特定表演,在运动中的特定点处,特定传感器的MSD的一个或多个方面的值(例如,加速度计值)。
(ii)将(i)处的值与运动中的同一点处的其它表演(例如,在相同能力水平下显示相同症状的其它表演)进行比较的比较数据。
(iii)针对一组表演(例如,在相同能力水平下显示相同症状的其它表演),在运动中的特定点处,针对特定传感器的MSD的一个或多个方面的值范围(例如,加速度计值)。
(iv)针对具有特定症状的特定表演,在运动中的特定点处,与针对不显示该特定症状的一个或多个另外的表演的相应MSD相比,特定传感器的MSD的一个或多个方面的比较数据(例如,加速度计值)。
这类分析用于确定给定症状的预测ODC。
一旦预测ODC被定义,这些ODC能够使用诸如图7所示的方法被测试。在701处确定特定症状的预测ODC,然后这些预测ODC在702处针对样本表演的MSD被测试。与前面的示例一样,这用于验证预测ODC存在于显示该症状的相关表演的MSD中,并且ODC在不显示该症状的相关表演的MSD中不存在。例如,“相关”表演是在共同能力水平下的样本表演,并且在一些实施例中被标准化为标准身体尺寸。基于测试,ODC在704处被改善、或者在705处被验证。
技能分析阶段:替代方法
在PCT/AU2016/000020中讨论了与技能分析阶段相关的各种另外的替代方法和技术。这些技术/方法以及其它技术/方法可选地用于针对如本文考虑的媒体管理的实施例的上下文中。
示例可下载内容数据结构
在优选实施例中,可下载内容包括以下三种数据类型:
(i)表示传感器配置指令的数据,也称为“传感器配置数据”。这是被配置为执行下述操作的数据:使得将一个或多个PSU的集合配置为提供具有指定属性的传感器数据。例如,传感器配置数据包括使得给定PSU执行下述操作的指令:采用活跃/非活跃状态(和/或响应于定义的提示在这些状态之间进行);基于定义的协议(例如,采样速率和/或分辨率)传送来自其组成传感器组件中的一个或多个的传感器数据。给定的训练程序可以包括多组传感器配置数据,这些数据应用于相应的练习(或响应于提示特定形式的ODC监测的节目内事件)。在一些实施例中,多组传感器配置数据被定义为分别优化用于在最终用户硬件的不同布置中识别特定ODC。例如,最终用户硬件的一些布置可以具有附加的PSU和/或更高级的PSU。在优选实施例中,定义传感器配置数据,从而优化由PSU传送的数据,以在监测ODC时提高数据处理的效率。也就是说,在内容的特定元素监测n个特定ODC的情况下,传感器配置数据被定义为移除传感器数据中对于那些ODC的识别是多余的各方面。
(ii)状态引擎数据,其将诸如POD设备之类的表演分析设备配置为处理从连接的传感器的集合中的一个或多个传感器接收到的输入数据,从而分析由连接的传感器的集合中的该一个或多个传感器感测到的身体表演。重要的是,这包括监测与正在被传送的内容相关的一个或多个ODC的集合。例如,内容由逻辑驱动,该逻辑基于对由PSU传送的数据中的特定ODC的观测。
(iii)用户界面数据,其将表演分析设备配置为执行基于技能/活动监测(经由对MSD的处理)的功能(例如,本文讨论的媒体纪念(monuments)所需的报告),并且可选地响应于对身体表演的分析而向用户提供反馈和指令(例如,传送包括训练程序数据的课程)。在一些实施例中,用户界面数据至少部分地从web服务器定期下载。
将可下载内容传送到最终用户设备的方式在实施例之间变化,例如基于最终用户硬件设备的性质、基于云的数据组织框架等而变化。下面描述了各种实施例。
关于传感器配置数据,内容数据包括计算机可读代码,其使得POD设备(或另一设备)能够将PSU的集合配置为以针对该特定技能(或一组技能)优化的定义的方式提供数据。这在减少在POD设备上执行的处理的量的上下文中是相关的;传感器提供的数据量基于识别正在被训练的特定一个或多个技能的症状实际所需要的数据量来减少。例如,这可以包括:
·选择性地(在某些情况下动态地)激活/禁用一个或多个传感器。
·设置单个传感器的采样速率。
·针对单个传感器设置数据传输速率和/或数据批处理序列。
·将传感器配置为仅提供其收集的数据的子集。
POD设备基于将要训练的技能来向传感器提供配置指令,并且随后基于所应用的配置(参见例如图11A中的功能框1101和1102)从一个或多个传感器接收数据,以便允许对PSU驱动的训练程序的传送。
在某些情况下,传感器配置数据包括在不同时间加载到POD设备上的各个部分。例如,POD设备可以包括在所有传感器配置中通用的这类代码(例如在其固件中)的第一集合,其由代码的一个或多个附加集合(其可以同时下载或可以在不同时间下载)补充,其以分级方式增加了实现传感器配置的特异性。例如,一种方法是具有基本级指令、特定于MSU的特定集合的指令、以及针对正在被训练的特定技能特定于那些MSU的配置的指令。
传感器优选地基于针对其传送训练内容的技能的特定监测要求来配置。这在某些情况下特定于正在被训练的特定的基于运动的技能,或甚至特定于正在被训练的基于运动的技能的特定属性。
在一些实施例中,状态引擎数据针对如何基于正在被训练的给定技能来处理从连接的传感器获得的数据(即,PSD)对POD设备进行配置。在一些实施例中,每个技能与一组ODC(其可选地各自表示症状)相关联,并且状态引擎数据将POD设备配置为处理传感器数据,从而基于对特定ODC的观测来对用户的表演进行客观判定。在一些实施例中,这包括识别特定ODC的存在,然后确定相关联的症状存在。在一些情况下,这随后触发辅助分析以识别表示与该症状相关联的原因的集合中的一个原因的ODC。在其它实施例中,分析包括基于下述(i)和(ii)之间的变化的确定:(i)基于用户的表演从传感器数据确定的症状模型数据;以及(ii)预定义的基线症状模型数据值。例如,这用于针对每个症状实现对用户的表演与预定义的特性的比较。
一些实施例中的用户界面数据包括呈现的数据,从而提供经由用户界面呈现的图形内容。在一些实施例中,这样的数据被维护在POD设备上(例如,视频数据从POD设备被流传输到用户界面设备,如智能手机或其它显示器)。在其它实施例中,定义用于经由用户界面呈现图形内容的数据被存储在其它地方,包括(i)在智能手机上;或(ii)在云托管的位置处。
用户界面数据还包括被配置为导致执行自适应训练程序的数据。这包括响应于输入的逻辑/规则,输入包括PSD(例如从MSD得到的ODC)和其它因素(例如,用户属性,如能力水平、学习风格和心理/身体状态)。在一些实施例中,对这类数据的下载实现离线模式的操作,由此为了用户参与训练程序,不需要活跃的因特网连接。
示例内容传送方法
如上所述,在一些实施例中,内容经由在线市场(例如,由云托管平台提供的在线市场)对用户可用。用户访问该市场(例如,经由在个人计算机或移动设备上执行的web浏览器应用),并获得期望的训练内容。基于获得的内容,用户配置POD设备以执行功能,包括关于提供针对期望的活动和/或技能的训练的功能(例如,通过使服务器将代码经由POD设备的因特网连接直接下载到POD设备,POD设备的因特网连接可以是本地WiFi网络)。基于该配置,能够在POD设备(或者在另外的实施例中耦合到POD设备的辅助设备)上执行一组训练程序规则,以提供交互式训练过程。交互式训练过程向用户提供响应于表示用户表演的输入的反馈/指令。该输入源自PSU,并且由POD设备处理。在一些实施例中,交互式训练过程基于一组复杂规则进行操作,这些规则考虑:(i)相对于预定义的表演属性观测到的用户表演属性;(ii)用户属性数据,包括历史表演数据;(iii)技能训练进展路径(可以是动态变量);以及(iv)其它因素。
本公开主要侧重于接收从一组运动传感器(例如,包括耦合到服装的可穿戴运动传感器;运动传感器被配置为使得能够分析用户身体位置在三维中的变化)得到的用户表演数据的POD设备的示例。例如,这特别适用于关于身体活动(如体育活动)和涉及人类运动的其它活动的训练。然而,该技术同样适用于从其它形式的传感器得到的数据。示例包括监测音频、视频、位置、湿度、温度、压力等的传感器。应当理解,来自这类传感器的数据可能对于广泛的活动类型的技能训练是有用的。例如,音频传感器对于训练诸如语言技能、歌唱和乐器的演奏之类的活动特别有用。
在一般层面上,本文公开的技术在一些实施例中被配置为能够捕获专家的智慧,并且从中复制教练和学生之间的一对一对话。在这方面,特征在某些情况下包括:
·双向交换。数字技术是多功能和高度可扩展的,并且可以应用于几乎任何技能或活动。使用传感器和相关技术,每个交互都有更好的教学能力,在实时辅导体验中适应个人用户的风格和生理。
·实时指令。传感器诊断运动和技术方面的错误,并实现对个性化的、触觉和/或视听反馈和/或指令的自动的(并且基本上即时的)传送。
·高级表演。不仅仅是跟踪,用户经常被辅导。由此产生的可衡量的表演提升有助于用户更快地且更确定地到达里程碑并达到目标。
基于本文的描述将理解通过各种实施例实现这些特征的方式。
技能训练内容经由用户界面(例如以图形和/或听觉形式)呈现。如上所述,存在实现这一点的各种技术布置。优选的方法是训练内容要直接下载到POD设备150,并且经由包括视频和/或音频输出的单独设备呈现,其允许用户体验呈现的内容。单独的设备可以包括诸如智能手机(其在一些实施例中执行配置为呈现由POD设备150提供的内容的应用)、耳机、具有集成显示器的一组眼镜、视网膜显示器设备和其它这样的用户界面设备之类的移动设备中的一个或多个。
在使用移动设备(例如,智能手机)的一些实施例中,POD设备提供被配置为向移动设备传送内容的本地web服务器。移动设备执行web浏览器应用(或在某些情况下是专用应用),其导航到作为本地web服务器从POD设备获得代码的web地址。
在优选实施例中,技能训练内容是从在线市场获得的。该市场优选地使得用户能够选择和购买各种不同的技能训练包,并且管理这些技能训练包到用户的POD设备(或多个POD设备)的下载。术语“技能训练包”描述了一组可获得的技能训练内容。这可以涉及单一技能、与常见活动相关的各种技能或各种其它布置。本公开不应通过参考用于构造技能训练数据如何被组织、如何可用于采购、如何货币化等的任何具体实现选项而受到限制。
示例内容传送框架
以下部分描述用于内容(例如,通过PSD(例如MSD)的处理驱动的自适应技能训练内容)到最终用户设备的传送的各种示例性技术框架。
总之,可以使用以下方法中的任何一个或多个或其组合:
·经由第一具有web功能的设备浏览和选择可下载内容,随后将内容下载到第二具有启用web功能的设备。例如,经由智能手机浏览内容,然后将内容直接从web源下载到POD设备。
·经由第一具有web功能的设备浏览和选择可下载的内容,随后将内容下载到该第一具有启用web功能的设备。然后可以将部分或全部内容从第一具有web功能的设备辅助下载到诸如POD设备之类的第二设备(例如,传感器配置数据和状态引擎数据首先被下载到移动设备,然后被传送到POD设备)。
·利用与用户界面设备分离的POD设备。例如,移动设备用于提供用户界面,并且POD设备是安装在具有MSU功能的服装中的处理单元。
·利用与用户界面设备集成的POD设备。例如,在一些实施例中,智能手机扮演POD设备的角色。
·利用物理耦合到现有最终用户移动设备的POD设备。例如,POD设备被定义为处理单元,其例如经由支架式座架耦合到智能手机。
图9A示出了根据一个实施例的示例性计算机实现的框架。图9B到图9D示出了各种替代实施例,其中相同的特征已经被指定相应的参考标号。
每个所示的框架包括多个计算设备(也称为“机器”或“终端”),每个计算设备被配置为通过经由一个或多个微处理器(也简称为“处理器”)执行计算机可执行代码(其可以被存储在计算机可读载体介质上)来提供功能(例如,执行“计算机实现的方法”)。应当理解,各种计算设备包括一系列其它硬件组件,这些组件没有具体示出。
图9A的示例示出了中央管理和内容管理平台900。该平台能够由单个计算设备(例如,服务器设备)来定义,或者更优选地由多个联网的计算设备来定义。在功能上描述了服务器的组件,而没有具体参考被配置为单独地或共同地提供相关功能的各种组成计算设备。应当理解,这样的事情是设计选择的问题,广泛的网络和服务器架构在本领域中是公知的。此外,在一些实施例中,存在并行操作的平台900的多个实例。
平台900被配置为提供由多个用户(例如,上面提及的对象)经由那些用户操作的计算设备访问的功能。图9A示出了相对于示例性用户操作的一组用户侧设备920。实际上,多个用户中的每一个操作相似设备920的相应集合(未示出)。
设备920包括移动设备930。例如,在本实施例中,移动设备930采用智能手机的形式。然而,在其它实施例中,使用不同的移动设备,例如平板电脑、PDA、便携式游戏设备等的。在一些实施例中,移动设备930由按目的配置的硬件定义,专门旨在提供与所描述的整体框架相关的功能。概括地说,移动设备930的主要功能是经由用户接口传送从平台900获得的内容。该内容能够“根据需要”(以在线模式)被下载、提前下载(从而实现在离线模式下的操作)、或两者皆有。
移动设备930能够耦合到一个或多个外部用户交互硬件,例如外部耳机、麦克风、提供图形显示器的可穿戴设备(例如,被配置为提供增强现实显示器的眼镜、视网膜投影显示器),等等。
在图9A的示例中,移动设备930被配置为经由从应用下载服务器971下载的移动应用(例如,iOS或安卓应用)与平台900进行交互。(在该实施例中,服务器971是第三方操作的服务器,尽管其它实施例使用第一方服务器)。这样的移动应用被存储在存储器设备934上并经由处理器933被执行。移动应用将移动设备930配置为经由可用的因特网连接与应用交互服务器972进行通信,应用交互服务器972进而提供到经由平台900可用的数据的网关。
在图9B的示例中,移动设备930被配置为经由web浏览器应用与平台900进行交互,web浏览器应用在导航到预定义的web地址时配置移动设备930以经由可用的因特网连接与移动设备web服务器974进行通信。web服务器974进而提供到经由平台900可用的数据的网关。基于存储在移动设备930的存储器934中的代码执行web浏览器应用,并且经由浏览器可渲染的用户界面代码提供特定于平台900的用户界面,浏览器可渲染的用户界面代码经由服务器974被下载到设备930。
设备920还包括个人计算机(PC)940。这可以是基本上被正确且适当地配置为使得POD设备950形式的另外的硬件设备能够与平台900通信的任何计算设备。例如,在一个实施例中,POD设备经由有线连接(例如USB连接)或无线连接(例如WiFi或蓝牙连接)连接到PC940。在功能上,这允许将数据从平台900下载到POD设备950。能够实现替代布置和连接,从而实现POD设备950之间的通信,例如:
·POD设备950经由移动服务930以及web服务器973访问平台900(参见图9C)。这涉及访问与POD设备950的操作相关的设备930的特定功能,或者在一些实施例中仅访问通过移动设备930提供的因特网连接。
·POD设备950经由web服务器973访问平台900(参见图9D)。
在某些这种情况下,例如在POD设备950不固有地提供用户界面的情况下,给定的用户操作移动设备930(或另一合适配置的计算设备)来访问用户界面(例如,经由移动应用或web页面),从而指示平台900将特定数据传送到与该用户相关联的POD设备950。在这样的实施例中,数据经由可用的因特网连接被直接下载到POD设备950。
在一些实施例中,首先将在移动设备930上呈现的技能训练内容下载到POD设备950。这被实现为使得移动设备930能够以离线模式(没有因特网连接)提供技能训练数据,其中必要的内容由POD设备950提供。这在没有移动设备930的示例中特别相关,并且经由仅与POD设备950(例如,耳机、具有内置显示器的眼镜组、视网膜投影设备等)通信的用户界面传送设备990提供用户界面。
示例性POD设备和传感器布置
POD设备950被配置为执行对从一个或多个PSU 960收集的数据的处理。这些PSU经由有线和/或无线连接连接到POD 950。例如,在一个实施例中,POD设备经由直接有线耦合连接到第一组PSU,并且经由到桥接组件的RF链路连接到第二组PSU,桥接组件进而经由直接有线耦合连接到第二组PSU。
在各种实施例中使用一系列PSU,这取决于正在被收集的数据的性质。进一步地,正在被收集的数据的性质取决于用户正在进行的技能或活动。例如,以下用户情况与本文中考虑的许多示例和实施例相关:
·可穿戴的MSU。MSU被集成到被配置为由对象佩戴的服装用品(具有MSU功能的服装)中。这种服装制品的示例包括压缩型服装(例如衬衫或裤子),每个包括已知位置处的多个间隔开的MSU。在一些情况下,服装包括预先形成的安装位置,用于可释放地接收相应的MSU以使得MSU能够在可用的安装位置之间移动。在一个实施例中,压缩衬衫支撑多个运动MSU并且具有用于互补地可释放地接收POD设备的安装件,使得安装件经由扩展通过并且由衬衫包围的有线连接将POD设备耦合到MSU。该衬衫能够与一组互补的压缩裤耦合,该组互补的压缩裤包括有线连接到公共RF通信模块的另外多个运动MSU。该RF通信模块将MSD传送到衬衫上提供的或由POD设备提供的另一RF模块,从而使得POD设备可以从衬衫和裤子上的所有MSU接收数据。
·ASU。在不同实施例中,使用不同的音频传感器。可用传感器的示例包括基于麦克风的传感器、插入音频输入端口(例如,经由2.5mm或3.5mm插孔连接器)从而接收音频信号的传感器、生成MIDI信号的拾音器等。
应当理解,POD设备950能够经由软件被配置为处理来自提供由POD设备接收的输出信号(例如数字输出信号)的基本上任何形式的PSU的数据。
一些实施例提供POD设备的多个不同的硬件配置,每个都被制造成与特定的PSU进行交互。例如,示例性POD设备可以包括:
·被配置为由服装携带的POD设备,其物理耦合到由该服装携带的多个MSU(并且在某些情况下,直接或间接地与一个或多个另外的MSU无线耦合)。
·包含麦克风的POD设备。
·包含音频输入端口(如3.5mm耳机插孔)的POD设备。
还将理解,各种形式的PSU允许针对各种技能的训练。例如,耦合到一个或多个ASU的POD设备在某些情况下用于提供各种音乐技能(例如歌唱、乐器的演奏等)的训练。
针对用户界面的传送的示例布置
用户界面提供反馈和/或指令的方式基于硬件配置而变化。在一些实施例中,用户接口仅是音频(例如使用耳机),在这种情况下,指令和反馈是基于音频的。在一些实施例中,用户界面包括视觉信息,其需要显示屏幕(例如,由智能手机设备、适当的眼镜和/或视网膜显示设备提供的显示屏幕等)。
图9A中的用户侧设备的布置能够被配置为如图10A所示的功能。更具体地说,市场平台在技术上被配置为将POD/引擎数据传送到POD设备,进而允许将POD设备配置为传送关于特定技能(或一组技能)的训练内容。POD设备被配置为基于先前从市场下载的POD/引擎数据来处理从传感器接收到的数据。基于该处理,POD设备向移动设备提供指令以经由其用户界面来显示平台内容(例如,从而提供反馈,指示用户执行特定任务等)。移动设备在相关的情况下从平台下载平台内容。
在其它实施例中使用另外的反馈设备(例如,音频装置、具有数字显示器的眼镜等),并且在图10A中,这被示出为直接耦合到POD设备。
图10B示出了移动设备以离线模式操作的替代布置。在该示例中,用户界面数据被下载到POD设备,并且经由POD设备提供给移动设备。另一替代布置在图10C中示出,其中没有移动设备,并且POD设备经由反馈设备(例如,耳机、具有屏幕的眼镜、视网膜投影设备或其它反馈设备)直接提供反馈/指令。
包含MSU的示例最终用户硬件布置
下面描述的是在实施例中实现的各种硬件配置,以便能够监测最终用户对给定技能的尝试表演,其包括在该尝试表演期间收集的传感器数据中识别预定义的可观测数据条件(例如,通过上述方法定义的可观测数据条件)。
应当理解:(i)这些仅是示例,并且本文公开的技术可以经由替代硬件布置来实现;(ii)提供的图示为示意图,并且不按比例绘制;以及(iii)图示提供了示出关键组件的功能表示,而不表示PCB设计、传感器单元定位、连接布线等方面。
各种实施例提供了可穿戴服装。例如,这些服装可以包括下述各项中的一个或多个:紧身衣、衬衫(短袖或长袖)、裤子(短裤或长裤)、手套、鞋类、帽子等。在一些情况下,可穿戴服装由被配置为彼此通信(例如,经由有线耦合或无线通信)的多个可分离的服装项(例如衬衫和裤子)定义。服装优选地由弹性材料制成,例如作为压缩服装。这有助于保持传感器组件相对于穿戴者身体的固定。优选地将这些服装制造为能够移除电气组件(例如传感器单元和POD设备),例如以进行维护等。
服装包括多个传感器串(strand),每个传感器串包括一个或多个传感器单元。传感器串各自从传感器串连接端口1208开始,其中传感器串连接端口被配置为将多个传感器串耦合到中央处理设备,该中央处理设备以与上面进一步公开的内容一致的方式被称为POD设备。传感器串可以包括单个传感器单元或多个传感器单元。
当传感器串包括多个传感器单元时,它们优选地串联连接。也就是说,其中串包括n个传感器单元SU1…SUn,寻址到到传感器单元SUi的通信由SU1…SUi-1中的每一个接收并重新发送。可以使用各种寻址协议,然而这些协议被配置为使得基于传感器单元安装位置来寻址通信。这允许安装传感器单元,而无需确保给定的特定传感器单元被安装在特定的安装位置(在传感器单元被移除用于服装清洗的情况下特别有用),并且还允许对传感器单元进行置换(例如,在故障的情况下)。
在一些情况下,寻址协议部分地基于与各个传感器单元相关联的标识符,在这种情况下,POD设备在识别出传感器单元时执行自动配置步骤,从而识别安装该传感器单元的安装位置,并将传感器的标识符与该安装位置相关联。在一些实施例中,通过不需要知道传感器标识符的技术来实现寻址,诸如在消息中包括重传计数(例如,消息包括由POD设备设置的重传整数,其在每次传输时递减,并且该消息在递减计数达到零的情况下由传感器单元接收和处理)。后一种方法在允许传感器单元被交换/替换而不需要随后重新配置POD设备处的寻址参数方面具有一些优点。
在优选实施例中,每个传感器单元包括安装在密封容器内的电路板组件。密封容器包括两个连接端口;一个用于沿着传感器串进行上行通信,一个用于沿着传感器链进行下行通信。在一些实施例中,传感器单元能够识别安装的方向,使得哪个端口是基于安装方向确定的上行端口和下行端口。在其它实施例中,存在预定义的安装方向,使得传感器单元不能被反向安装。连接端口优选地被配置用于卡扣(snap-locking)安装到传感器串上的互补连接端口,使得物理上可观测的耦合相应地提供电子/通信耦合。
传感器串包括连接线,包括一条或多条用于通信的线,以及一条或多条用于供电(向由POD设备提供的传感器单元供电)的线。连接线被密封,使得服装浸入水中(例如在清洁期间)不会损坏线。优选地,将POD设备和传感器单元连接到连接线的连接器模块提供不透水密封。此外,在优选实施例中,当POD设备和传感器单元被安装在服装上时,所有电气组件都被提供在防水或抗水配置中(例如,POD设备和传感器单元连接端口到传感器串连接端口的卡扣接合提供防水或抗水密封)。
在包括近端传感器单元和一个或多个下游传感器单元的给定传感器串上,近端传感器单元被配置为(i)在下行方向上中继由中央处理单元提供并寻址到一个或多个下游传感器单元的传感器指令;以及(ii)在上行方向将由下游传感器单元中的给定一个提供的传感器数据中继到中央处理单元。这可以包括激活/禁用指令。传感器指令还包括传感器配置数据,其中传感器配置数据配置传感器单元以定义的方式提供传感器数据。在某些情况下,传感器配置数据通过参考采样速率、监测由传感器组件可观测的减少的信息、以及专门针对正由POD设备观测的技能所定义的其它配置属性进行定义。
每个传感器单元包括(i)微处理器;(ii)存储器模块;以及(iii)一个或多个运动传感器组件的集合。下面进一步提供示例性传感器硬件的更详细的公开。然而,这些基本组件使得传感器组件能够接收来自POD设备的通信,并以预定义的方式(例如,通过参考分辨率、采样速率等定义)提供来自传感器组件的观测数据。在一些实施例中,每个传感器单元包括本地电源,然而优选地,沿着传感器串从POD设备(或另一中央电源)供电,而不需要对传感器单元电池等进行单独充电。
针对示例性传感器单元,一个或多个传感器组件的集合包括下述项中的一个或多个:(i)陀螺仪;(ii)磁力计;以及(iii)加速度计。在下面描述的优选实施例中,具有这些组件中的每一个,并且每个都被配置为提供三轴灵敏度。在另外的实施例中,存在一个或多个组件类型的多个组件,例如两个加速度计。这实现不同的配置,例如使得一个被配置为以给定的分辨率观测粗糙运动,而另一个被配置以更高的分辨率观测特定的精细运动。
中央处理设备(POD设备)包括:(i)电源;(ii)微处理器;以及(iii)存储器模块。存储器模块被配置为存储可由微处理器执行的软件指令,其使得处理设备能够执行各种功能,包括将传感器单元配置为以预定义的方式发送传感器数据,以及识别传感器数据中的一组或多组预定义的可观测数据条件,传感器数据包括由中央处理设备从多个连接的传感器单元接收的传感器数据。在优选实施例中,POD设备还包括传感器组件(例如,与传感器单元相同的传感器组件),从而能够在POD设备的位置进行运动观测。在一些实施例中,POD设备在被提供于使用中接近用户背部的上部中心的位置(例如在肩胛骨之间)处提供的口袋中被安装到服装。
图12A示出了根据一个实施例的可穿戴服装的许多硬件组件。应当理解,这些硬件组件被示出而不参考由服装它本身的配置产生的几何/空间配置。
图12A的POD设备1200包括耦合到存储器模块1202的处理器1201,该存储器模块被配置为存储软件指令,从而提供本文所述的功能。这些包括:
·表示训练程序(或多个训练程序)的数据,包括通过训练程序进行的逻辑,以及在由其它组件(如耳机、显示设备等)呈现的POD设备的外部传送的用户界面数据。
·针对训练程序(或每个训练程序),有多个要训练的技能。每个技能由包括传感器配置指令、用于识别传感器数据中的可观测数据条件的规则、以及与特定可观测数据条件被识别时的反馈(和/或其它动作)相关的规则的数据定义。
应当理解,还提供了软件指令的各种其它方面。
可再充电的电源1203向POD设备1200以及一个或多个连接的设备(包括传感器单元,以及一个或多个控制单元(在提供的情况下))提供电力。本地传感器组件1205(例如,三轴磁力计、三轴加速度计和三轴陀螺仪)使得POD设备能够用作传感器单元。还提供输入/输出1206,并且这些可以包括类似:电源/复位按钮;被配置为显示操作特性的灯;以及在一些实施例中为显示屏幕。然而,在这里描述的实施例中,POD设备和用户之间的主要通信模式是通过外部的(和自供电的)用户界面设备。
POD设备1200包括一个或多个无线通信模块1204,从而实现与一个或多个远程设备的通信/交互。例如,通信模块可以包括下述各项中的任何一个或多个:
·WiFi。例如,在一些实施例中,WiFi用于传送用户界面内容(包括图像、文本、音频和视频数据)以用于在UI显示设备1231处呈现。这可以包括智能手机、平板电脑、具有平视显示器(例如,增强现实耳机或眼镜)的设备以及其它这样的设备。UI显示设备可用于选择和/或导航可用于经由POD设备传送的训练内容。
·蓝牙。例如,在一些实施例中,蓝牙用于将可渲染的音频数据传送到蓝牙耳机等,从而向用户提供可听见的指令/反馈。
·被配置为允许与诸如心率监测器之类的监测设备进行交互的ANT+(或其它这样的通信模块)。
·RF通信模块。在一些实施例中,提供了一个或多个这样的模块,从而实现与无线传感器单元(例如,被配置为附接到设备(例如,滑板、黄金球棒等)的传感器单元)的通信。在一些情况下,这包括由连接到与POD设备无线通信的公共集线器的多个有线传感器单元定义的无线传感器串。
可以存在用于各种其它外部设备1233的各种其它无线通信模块。
POD设备包括电路板和可选地额外的硬件组件,其被提供在密封或可密封的容器中(防水或抗水)。该容器能够被安装到服装(或具体配置的口袋中的示例)中,并且该安装包括连接一个或多个耦合件。优选地,单个耦合件将POD设备连接到所有可用的传感器串。再次,这可以是卡扣耦合(防水或抗水),其基本上同时提供物理和电子耦合。
图12A示出了耦合到传感器连接端口1208的多个传感器串(串1...串n)。每个传感器串包括多个传感器单元(传感器单元1...传感器单元n),然而应当理解,在一些实施例中,给定的串只包括单个传感器单元。
图12B示出了传感器串的替代布置。作为上下文,一些实施例提供配置有一个或多个“部分”传感器串的服装。每个部分传感器串包括(i)没有或更多传感器单元;以及(ii)连接器模块,其被配置为耦合到由辅助服装提供的互补连接器模块。短语“没有或更多”表示在一些情况下,部分传感器串由传感器串线定义,传感器串线将POD设备连接到连接器模块,而没有任何中间传感器单元,而在其它情况下,部分传感器串由其上提供有一个或多个传感器单元的传感器串线定义,该串终止于连接器模块。
将连接器模块耦合到由辅助服装提供的互补连接器模块在功能上将一个或多个部分传感器串连接到相应的一个或多个辅助服装部分传感器串,从而实现(i)提供在一个或多个辅助服装部分传感器串上的一个或多个传感器单元;以及(ii)中央处理设备之间的通信。
在图12B的示例中,服装包括衬衫和裤子。有四个衬衫传感器串,以及两个裤子传感器串。连接器布置1209将部分裤子串耦合在一起,从而实现提供在裤子上的传感器单元与POD设备之间的通信(以及由POD设备为那些传感器单元供电)。在另外的实施例中,这种布置用于使得能够连接到提供在鞋类、手工品、头饰等上的传感器单元。例如,在一些实施例中,连接器端口被提供有近端臂、颈部和脚部孔,从而能够伸长通过由另外的服装物品或设备携带的一个或多个其它传感器单元所提供的传感器串。
在一些实施例中,由辅助服装(例如,手工品或鞋类)携带的传感器包括测量除运动之外的属性的专家传感器组件。例如,可以使用压力传感器组件(例如,从而测量黄金球棒上的握力、测量施加到地面或另一物体上的力等)。POD设备被配置为针对给定的训练程序了解要提供的传感器布置。例如,向用户提供关于应当连接的传感器单元的指令,并且POD设备执行检查以确保传感器响应,并且提供期望的传感器数据。
图12B还示出了设备可安装的传感器单元1240。该单元包括基本上与传感器单元1220相同的处理器1241、存储器1242和传感器组件1245。然而,它还包括无线通信模块1246,从而实现与POD设备1200的无线通信(例如RF通信),并且包括本地电源1243。还提供输入/输出(例如,灯、电源/复位按钮等)。
图12C在图12B上通过提供控制单元1230来扩展。该控制单元物理地耦合到衬衫串之一的远端,例如作为手腕安装的控制单元。在一些实施例中,控制单元与传感器单元集成。控制单元1230包括诸如一个或多个按钮之类的输入设备1231和诸如一个或多个灯和/或显示屏(优选地是低功率屏幕)之类的输出设备1232。提供控制单元1230以协助用户提供基本命令以经由POD设备来控制训练内容的提供。例如,命令可以包括“先前”和“下一个”,例如重复先前的可听指令,或者跳到训练课程中的下一阶段。在一些实施例中,提供可听内容以协助用户操作输入设备,例如通过可听见地提供可选择的菜单项。
在图12D的实施例中,控制单元1230还包括被配置为接收由设备可安装的传感器单元1240提供的无线信号的无线通信模块(例如RF)。以这种方式,无线传感器单元数据能够在POD设备直接地(经由模块1204)和间接地(经由模块1233、经由控制单元1230并且沿着传感器串,在这种情况下为衬衫传感器串4)被接收。这为无线通信提供冗余;应当理解,在信号通过人体(其主要是水)的可靠接收无线通信中可能存在挑战。具有两个间隔开的位置(如图12D所示或经由替代布置),来自单元1240的所有传感器数据将被接收并使其可用于分析的机会显著增加。POD设备实现数据完整性协议,从而确定如何组合/选择由两个路径中的每一个提供的数据。在一些实施例中,例如在对外部传感器单元具有更大依赖性的情况下,可以存在位于服装上的各个位置处的多个冗余无线通信单元。
在一些实施例中,单元1230被提供在其自己的串上而不是传感器串上,否则传感器串可以包括用于附接具有传感器功能的手部组件的终端连接器。
图12E提供了根据一个实施例的两件式服装的示意图(未按比例)。这标记有与前面的图相对应的参考标号。所示出的服装是由衬衫组件上的三个传感器串、以及在裤子组件上提供传感器单元的两个传感器串定义的两件式衣服(连接器1209将服装组件之间的传感器串耦合在一起)。
所示出的传感器单元的定位决不是限制性的,而是提供关于具有该传感器单元数目的服装的潜在传感器单元位置的粗略指导。图12E所示的一般原理是提供远离接头的传感器。从相应的传感器单元的陀螺仪、加速度计和磁力计收集的数据使得能够进行处理,从而确定跨多轴的相对传感器位置、角度、运动等等(注意,提供三个3轴传感器实际上为每个传感器提供九个灵敏度)。因此能够确定与身体运动有关的丰富数据。此外,通过POD设备提供的配置数据,每个传感器的灵敏度/操作能够针对特定技能进行选择性调整,例如为每个单独的传感器组件设置水平,仅报告特定的运动伪影,等等。这从一系列的角度来看是有用的,包括降低传感器单元处的功耗、减少POD设备处的处理开销、以及提高对特定关键运动伪影的敏感度(例如,通过应用运动模型,该运动模型仅监测具有特定定义的特性的运动,例如对划船动作中的运动进行高分辨率监测,而不监测人走向划船机的运动)。
图12F在图12E上通过示出远程设备的一部分来扩展,在该情况下,远程设备是携带无线传感器单元1240的滑板。如上所述,优选地,传感器单元1240经由多个通信路径与POD设备1200进行无线通信,从而管理与无线通信相关联的限制。例如,在所示出的示例中,由传感器单元1240发送的信号被配置为被由POD设备1200提供的无线通信模块和由手腕控制单元1230提供的无线通信模块(其经由与其连接的传感器串发送接收到的传感器数据)接收。
图12G在图12F上通过示出移动设备1281、以及无线耳机1282来扩展。
POD设备1200与移动设备1281(例如,智能手机或平板电脑,其可以操作包括iOS、安卓、Windows等在内的一系列操作系统中的任何一个)通信,从而为移动设备提供被配置为能够在用户界面显示器中呈现内容的数据,该内容协助通过技能训练程序指导用户。例如,内容可以包括视频数据、文本数据、图像等。在一些实施例中,POD设备1200作为用于传送这样的内容的本地web服务器进行操作(即,移动设备连接到由POD设备通告的无线网络)。
耳机1282(其不需要是具有所示出的设计配置的耳机)使得用户能够从POD设备接收可听见的反馈和/或指令,而不需要携带或涉及移动设备1281。这例如在携带或涉及移动设备将是不可行的或者通常不方便地涉及移动设备的技能的上下文中是相关的,例如在划船、慢跑、游泳、滑雪等时。在一些实施例中,可以使用有线耳机,例如通过由有线连接到POD设备的服装提供的3.5mm耳机插孔来使用。
图12H示出了根据一个实施例的传感器串。这包括多个传感器单元1220。每个传感器单元包括耦合到存储器1222的处理器1221。提供上行和下行数据连接1223和1224(在一些实施例中,这些可以在功能上基于安装方向来区分)。可以提供输入/输出1225,例如灯和/或电源/复位按钮。所示出的实施例包括触觉反馈单元1226,其可以用于协助向用户提供反馈(例如,在右臂传感器单元上激活与用户的右臂进行某些操作的指令相对应的触觉反馈)。所示出的传感器组件1227是3轴磁力计1227a、3轴加速度计1227b和3轴陀螺仪1227c。
图12I示出了根据一个实施例的示出了外壳1296的示例性传感器单元1220。该外壳由塑料材料形成,并且以水密的方式包围电路板1297,该电路板提供图12H所示的组件。连接器1298实现到由服装提供的传感器串的连接。
MSU和具有MSU功能的服装的配置:概述
在某些情况下,最终用户设备中的ODC的识别需要:(i)关于给定用户上的MSU的实际位置的知识;以及(ii)关于MSU的相对定位的知识。有意义地组合来自多个MSU的数据存在挑战,因为每个MSU通常提供关于它们自己的参考系的运动数据。
上述各种实施例使用从传感器单元的集合导出的数据,从而能够分析身体表演。这些传感器单元例如通过被配置为携带多个传感器单元的可穿戴服装被安装到用户的身体。本部分以及随后的部分描述了在一些实施例中用于配置传感器单元的示例性方法,从而能够基于从传感器导出的数据来分析诸如人体运动之类的运动。
作为背景,用于收集表示物理表演的数据的已知和流行的方法是使用光学运动捕获技术。例如,这种技术在光学上定位在用户身体上的各个位置处可观测的标记,并且使用视频捕获技术来导出表示标记的位置和运动的数据。分析通常使用虚拟构造的身体模型(例如,完整的骨骼、面部表情等),并且将标记的位置和运动转换到虚拟构造的身体模型。在一些现有技术示例中,计算机系统能够经由在计算机系统中定义的虚拟身体模型基本上实时地重建物理用户的精确运动。例如,这种技术由运动捕获技术组织Vicon提供。
运动捕获技术在其实用性方面受到限制,因为它们通常需要以下两者:(i)用户具有位于其身体上各个位置处的标记;以及(ii)使用一个或多个摄像头设备捕获用户表演。虽然一些技术(例如,使用深度感测摄像头的技术)能够减少对视觉标记的需求的依赖,但运动捕获技术本质上受限于针对在能够由一个或多个摄像头设备捕获的位置发生的表演的需求。
本文描述的实施例使用运动传感器单元,从而克服与运动捕获技术相关联的限制。运动传感器单元(也称为惯性测量单元或IMU),例如包括一个或多个加速度计、一个或多个陀螺仪和一个或多个磁力计的运动传感器单元能够固有地提供表示其自身运动的数据。这种传感器单元测量和报告参数,包括速度、方向和重力。
与运动捕获技术相比,使用运动传感器单元提出了一系列挑战。例如,针对至少以下原因,使用多个运动传感器时会出现技术挑战:
·每个传感器单元基于其自身的本地参考系提供数据。在这方面,每个传感器固有地提供数据,就像它本质上定义其自身宇宙的中心一样。这与运动捕获不同,在运动捕获中,捕获设备固有地能够相对于公共参考系来分析每个标记。
·每个传感器单元都不能准确地知道其所位于的枝干。虽然传感器服装可以定义大致的位置,但是个体用户将具有不同的身体属性,这将影响精确定位。这与运动捕获技术不同,在运动捕获中,标记通常以高精度定位。
·所有传感器完全独立地运行,就好像它们被放置在电子“碗汤(bowl of soup)”中,没有骨骼/四肢连接它们。也就是说,传感器各自的数据输出与任何种类的虚拟身体上的相对定位无关,这不同于运动捕获中使用的标记。
下面描述的技术和方法使得能够处理传感器单元数据,从而提供通用的全体范围的参考系。例如,这可以通过下述各项中的一者或两者来实现:(i)定义被配置为将传感器单元SU1至SUn的运动数据转换到公共参考系的转换;以及(ii)确定传感器单元SU1至SUn之间的骨骼关系。应当理解,在许多情况下,这些是不可分割的联系在一起的:转换到共同的参照系能够确定骨骼关系。
在一些实施例中,对传感器数据的处理导致定义表示虚拟骨骼身体模型的数据。这实际上使得从运动传感器套装布置收集的数据能够提供与经由常规运动捕获可用的分析类似形式的分析(其还提供表示虚拟骨骼身体模型的数据)。
可以使用在PCT/AU2016/000020中描述的处理技术。总的来说,至少在以下上下文中发现可以应用这些处理技术:
·组装适用于与经由定义的运动捕获技术提供的模型进行比较的骨骼模型。例如,可以在分析阶段期间收集运动捕获数据和传感器导出的数据,从而验证从运动传感器数据的处理导出的骨骼模型数据是否与从运动捕获技术导出的相应骨骼模型匹配。这适用于在客观上定义技能(如上所述)的处理的上下文中,或者更普遍地适用于测试和验证数据传感器数据处理方法的上下文中。
·穿戴的具有传感器功能的服装的自动“非姿态特定”配置。也就是说,为了传感器配置的目的,不要求用户采用一个或多个预定义的配置姿态,下面描述的处理技术允许通过处理由基本上任何运动产生的传感器数据,来将每个相应传感器的数据转换到公共参考系(例如通过组装骨骼模型)。也就是说,下面的方法需要相当通用的“运动”,用于比较一个传感器相对于另一传感器的运动的目的。该运动的确切性质的重要性是有限的。
·实现对技能的物理表演的准确监测(例如在技能训练和反馈的上下文中)。例如,这可以包括监测传感器数据中的可观测数据条件(如上所述,其表示表演影响因素)。
PCT/AU2016/000020中提供了更多细节。
示例性挑战实现方法
下面讨论各种示例性的计算机实现的方法,从而用于提供在实践中如何在挑战实现的上下文中实现本文描述的技术的具体示例。应该理解,进一步的实施例包括这些方法的变型,包括步骤的重新排序、增加进一步的步骤、移除某些步骤、和/或以除了具体描述的那些方式之外的方式实现步骤。
图4A示出了根据一个实施例的方法400。方法400是用于操作挑战创作界面的方法。
功能框401表示特定用户访问挑战创作界面的过程。例如,用户操作计算设备(诸如PC、笔记本电脑、膝上型计算机、游戏控制台、平板电脑或智能手机),从而在屏幕上呈现允许创作界面和用户之间进行交互的用户界面。优选地,创作界面本身全部或部分地被云托管(即,经由服务器设备提供与创作竞争性活动有关的代码和处理操作的实质部分)。在一些实施例中,用户界面被呈现在网络浏览器应用中(通过从网络服务器下载的代码的方式),并且在其它实施例中经由存储在本地存储器中的专有软件应用呈现。在任何情况下,访问挑战创作界面包括用户提供登录凭证(在某些情况下,这些登录凭证存储在本地以允许自动登录),从而使得用户能够被唯一标识。
在一些实施例中,挑战位置未被定义,使得能够在任何位置参与。在一些实施例中,存在另外地(或替代地)与挑战相关联的定时参数(例如,所定义的挑战将可用的时间段)。
功能框402表示包括确定挑战位置的过程。该过程可以使用各种技术,包括:
(i)对用户当前位置的地理定位,例如使用GPS等。在用户使用移动设备(例如智能手机)在相关位置创作挑战的情况下,这尤其相关。
(ii)特定于位置的令牌,例如2D条形码、BLE标签、RFID标签等。这些特定于位置的令牌各自都能够与定义的位置唯一地相关联,从而使得客户端设备的用户能够读取令牌并且因此识别位置。
(iii)访问与用户关联的以前的位置数据。例如,用户定义来自家庭位置的挑战,并且访问表示用户先前表演技能的位置(例如,基于地理定位、特定于位置的令牌等)的数据。
(iv)利用搜索引擎,例如提供与在地理上定义的位置相关联的结果的搜索引擎。
用户定义挑战位置的特异性程度在各实施例之间不同。
功能框403表示包括确定一个或多个挑战技能的过程。例如,在一个实施例中,用户选择活动(例如,通过选择诸如“足球”、“网球”或“滑板”之类的运动),然后用户被呈现以可用于包括在挑战中的技能(例如,基于能够使用MSD进行识别/分析的技能)。在一些实施例中,建议模块例如通过基于相关用户已经(i)执行和/或(ii)证明了能力的(例如,经由参加训练程序)技能来过滤技能,从而帮助用户。在某些情况下,挑战被定义为要求对单个技能的表演,在某些情况下,要求对多个技能的表演。将理解的是,在一些实施例中,对一个或多个技能的确定使得能够确定为了参与活动在给定的活动参与者用户的POD设备处所需要的状态引擎数据。
功能框404表示包括确定一个或多个挑战竞争性参数的过程。在一些实施例中,基于在404处选择的一个或多个技能来过滤竞争性参数。例如,在一些实施例中,能够基于技能的属性来设置竞争性参数:给定的技能在一些情况下与诸如“高度”、“准确度”、“速度”、“力量”之类的属性相关联。在一个实施例中,对于每个所选择的技能,活动创作者用户能够为每个属性设置竞争性参数。例如,某技能,如技能A,可以具有“高度”属性,并且用户基于引导“无高度要求”、“最小高度要求X”或“竞争最大高度”的可选标准来设置竞争性参数。在一些实施例中,用户通过使用AND运算符或通过其它类似技术来组合多个参数,从而建立竞争性参数。
功能框405表示包括由活动创作者用户完成挑战(此时使得挑战对其他用户可用)的过程。也就是说,其他用户能够识别挑战,并且如果他们愿意的话,可以参与挑战。在一些实施例中,活动创作者用户能够决定与哪些其他用户分享给定的挑战,例如与“公众”、与“朋友”或与“联系人”、或与特定的用户或用户组分享。例如,在运动上下文中,教练能够定义挑战,并且仅与该教练团队的队员分享该挑战。
图4B示出了方法400',其是方法400的变型。在这种情况下,功能框403和404被颠倒,使得用户首先选择一个或多个竞争性参数,然后选择技能。例如,用户选择诸如“连续最多”、“最高尝试”、“最长保持”、“最快时间”之类的竞争性参数类型,然后用户被呈现适合于该竞争性参数的一组经过滤的技能。将理解的是,在一些实施例中,挑战数据被定义的过程在技能的选择和竞争性参数的选择之间是迭代的。
图4C示出了方法410,该方法410是使得智能建议确定能够辅助活动创作者用户的方法。功能框411表示包括访问表示在所确定的位置处的用户表演的数据的过程。在一些实施例中,用户先前将状态引擎数据下载到其POD设备,该状态引擎数据被配置为使得能够监测包括多个技能的给定活动类型。例如,这可以是“滑板监测包”,其使得用户的POD设备能够识别一组滑板技巧(例如特定的技巧)和那些技巧的属性(例如,识别用户已经成功地表演“踢翻”动作,以及对该踢翻动作的高度测量)。这允许用户维护他们的表演的记录,其能够与位置相关联,并且随后以其它方式被分析/查询。例如,用户可能希望通过查看有多少技巧被成功表演、它们是哪些技巧、这些技巧的属性是什么等等来查看滑板会话的总体结果。表示用户表演的数据优选地被存储在诸如图1的数据库120之类的中央储存库中。
功能框412表示包括关于表示用户表演的数据应用预定义的挑战模板算法的过程。例如,挑战模板可以基于每个活动来定义,或者可以一般地定义。每个模板被配置为与一个或多个特定技能相关联(例如,针对特定技能定义特定的挑战类型),或者与具有一个或多个特定属性的任何技能相关联(例如,“针对最高尝试的挑战”能够与记录高度属性的所有技能相关联)。该算法可以关于下述项中的一者或两者来执行:(i)与预定义的挑战位置相关联的技能;以及(ii)与特定活动创作者用户相关的技能。例如,在一个实施例中,“最高尝试”模板算法针对与给定位置(位置X)处的给定用户相关联的表演数据来执行,并且识别用户已经在相关位置表演了技能A,技能A是具有高度属性的技能,并且用户针对技能A的高度是记录在数据库120中的最高高度。用户被通知:“你在位置X处的技能A有最高的尝试;你想挑战别人来打败你吗?”
功能框413表示用户查看、选择并且可选地修改经由框412的过程建议的挑战的过程。随后,挑战能够与其他用户共享(框405)。
图4D示出了方法420,其包括用于实现挑战记录功能的功能。功能框421包括访问挑战记录界面,其将POD设备配置为在422处记录用户表演。例如,在一些实施例中,挑战记录界面使用诸如智能手机之类的控制设备来访问。422处的记录可以包括记录由传感器单元收集的数据的全部或子集,例如以使得能够生成实现后续查看和/或监测(针对活动参与者用户)的模型(例如,运动学、动力学或“骨架”模型)。功能框423表示包括对用户表演进行分类并且建议挑战数据的过程。例如,可以在属性数据中识别诸如高度、力量等的属性。然而,在一些实施例中,所记录的表演的关键来源于特定的运动方面(例如,记录是关于下述新技能的情况:例如,瑜伽姿势、拉伸、滑板技巧、跑酷动作等等)。
功能框424表示下述过程:该过程包括在所记录的挑战在425处可获得之前,使得用户能够查看和/或编辑所记录的挑战的挑战数据。查看和/或编辑可以包括查看显示所记录内容的三维图形模型、以及修剪/剪裁定义所需技能的记录的基于时间的部分。
图4E示出了用于使得用户能够参与一个或多个挑战的方法430。功能框431表示在一个位置处的用户登记。基于此登记,用户能够查看可用的挑战。在一些实施例中,用户肯定地选择要参与的一个或多个挑战,这使得用户的POD设备能够监测相关的一个或多个技能(和/或其属性)。在一些实施例中,这触发了在用户的本地硬件(例如,在POD设备上)设备处所需的状态引擎数据(以及其他数据,例如传感器配置数据)的下载过程,以便针对所选择的挑战识别技能和/或属性。在其它实施例中,只有在必要的状态引擎数据已经在用户的POD设备处可用的情况下,挑战才被显示为可选择。
功能框433表示包括将用户表演数据与挑战数据进行比较的过程。例如,这可以包括基于给定的挑战数据集的要求来记录表示所表演的技能及其属性的数据。这在434处实现了用户相对于其他用户的评级。
图8提供了挑战实现框架的替代示意表示方式,其示出了示例用例。这示出了内容管理服务器、挑战管理服务器和最终用户硬件。仅为了便于说明,内容管理服务器和挑战管理服务器被示出为单独的组件,并且在一些实施例中这两个服务器的功能由单个服务器或由更多数量的服务器提供。
在功能层面:
·内容管理服务器提供特定于技能的配置数据,包括状态引擎数据和传感器配置数据。在一些实施例中,内容管理服务器另外被配置为执行对从MSU导出的数据的至少一部分处理,从而识别技能表演属性。内容管理服务器可选地还负责提供与挑战无关的一系列附加内容,例如技能训练内容。
·挑战管理服务器维护表示所定义的挑战的数据,并且管理这些挑战中的用户参与。
·最终用户硬件包括具有MSU功能的服装和用户界面设备(例如智能手机)。
图8示出了用户参与挑战的示例用例过程。如步骤1所示,用户从可用挑战列表中选择挑战。该列表基于由挑战管理服务器(可选地经由内容管理服务器)提供的数据在用户的用户界面设备处呈现。选择挑战后,用户的硬件(例如,具有MSU功能的服装)被配置为使得MSU传送实现对与挑战相关的身体表演事件的分析的数据。这在图8的示例中包括下载配置数据(包括针对构成所选择的挑战的一部分的一个或多个技能的传感器配置数据和状态引擎数据)。例如,挑战可以是“最大的脚踢(punt kick)”挑战,在这种情况下,配置数据被下载(步骤2)并且被应用,以由此实现:(i)用于识别已经表演的“脚踢”的分析;以及(ii)用于确定与所表演的脚踢相关联的力量输出测量的分析(例如,基于一个或多个MSU的加速度的变化);例如使用所表演的技能的一个或多个症状。监测由步骤3指定;如图所示,服务器侧参与监测(例如,传送MSD导出的数据以用于服务器侧处理)。基于监测,识别针对挑战参数的值,从而实现对用户挑战尝试的评估并且报告结果。表示针对挑战参数的所确定的值的数据在一些情况下直接从最终用户硬件传送到挑战管理服务器;在其它情况下,该数据将经由内容管理服务器进行路由。
结论和解释
应当理解,上述技术提供了在游戏化内容的领域、传送的范围内的进步。例如,通过使用使得能够从具有MSU功能的服装(以及可选地其它形式的PSU)进行技能表演识别的预定义的处理技术,能够以丰富且有效的方式自动对视频数据进行分类。
除非另有明确说明,否则从以下讨论中可以明显看出,应该理解,在整个说明书中,利用诸如“处理”、“计算”、“核算”、“确定”、“分析”等的术语涉及计算机或计算系统或类似的电子计算设备将表示为物理(例如电子)量的数据操纵和/或转换为类似地表示为物理量的其它数据的动作和/或处理。
以类似的方式,术语“处理器”可以指处理电子数据(例如,来自寄存器和/或存储器)以将该电子数据转换到其它电子数据(例如可以被存储在寄存器和/或存储器中)的任何设备或设备的一部分。“计算机”或“计算机器”或“计算平台”可以包括一个或多个处理器。
在一个实施例中,这里描述的方法可以由接受计算机可读(也称为机器可读)代码的一个或多个处理器执行,该处理器包含指令集,当一个或多个处理器执行时,该指令集执行至少一个本文描述的方法。包括能够执行指定要采取的动作的指令集(顺序或以其它方式)的任何处理器。因此,一个示例是包括一个或多个处理器的典型处理系统。每个处理器可以包括CPU、图形处理单元和可编程DSP单元中的一个或多个。处理系统还可以包括具有主RAM和/或静态RAM和/或ROM的存储器子系统。可以包括总线子系统以在组件之间进行通信。处理系统还可以是具有由网络耦合的处理器的分布式处理系统。如果处理系统需要显示器,则可以包括这样的显示器,例如液晶显示器(LCD)或阴极射线管(CRT)显示器。如果需要手动数据输入,则处理系统还包括输入设备,例如,诸如键盘之类的字母数字输入单元。诸如鼠标之类的定点控制设备等中的一个或多个。如本文所使用的术语存储器单元,如果从上下文中清楚并且除非另有明确说明,还包括诸如盘驱动器单元之类的存储系统。一些配置中的处理系统可以包括声音输出设备和网络接口设备。存储器子系统因此包括计算机可读载体介质,其携带包括指令集的计算机可读代码(例如,软件),以在由一个或多个处理器执行时执行本文所描述的方法中的一个或多个。注意,当该方法包括数个元素,例如数个步骤时,除非具体说明,否则不暗示这些元件的排序。该软件可以驻留在硬盘中,或者也可以在由计算机系统执行期间完全或至少部分地驻留在RAM内和/或处理器内。因此,存储器和处理器也构成携带计算机可读代码的计算机可读载体介质。
此外,计算机可读载体介质可以形成计算机程序产品或被包括在计算机程序产品中。
在替代实施例中,一个或多个处理器作为独立设备操作,或者可以在网络部署中连接(例如,联网到其它处理器),一个或多个处理器可以以服务器或用户机器的身份在服务器用户网络环境中进行操作,或作为对等或分布式网络环境中的对等机器进行操作。一个或多个处理器可以形成个人计算机(PC)、平板PC、机顶盒(STB)、个人数字助理(PDA)、蜂窝电话、网络设备、网络路由器、交换机或网桥、或任何能够执行指定要由该机器采取的动作的指令集(顺序或以其它方式)的机器。
注意,虽然图仅示出携带计算机可读代码的单个处理器和单个存储器,但是本领域技术人员将理解,包括上述组件中许多组件,但未明确示出或描述,以便不模糊发明方面。例如,虽然仅示出了单个机器,但术语“机器”也应被视为包括单独或共同执行一组(或多组)指令以执行本文所讨论的任何一种或多种方法的机器的任何集合。
因此,本文描述的每种方法的一个实施例是携带一组指令的计算机可读载体介质的形式,例如用于在一个或多个处理器(例如作为web服务器布置的一部分一个或多个处理器)上执行的计算机程序。因此,如本领域技术人员将理解的,本发明的实施例可以体现为方法、诸如专用装置之类的装置、诸如数据处理系统之类的装置或计算机可读载体介质,例如,计算机程序产品。计算机可读载体介质携带计算机可读代码,其包括指令集,当在一个或多个处理器上执行时,指令集使得一个或多个处理器实现方法。因此,本发明的各方面可以采取方法、完全硬件实施例、完全软件实施例或组合软件和硬件方面的实施例的形式。此外,本发明可以采取携带介质中实施的计算机可读程序代码的载体介质(例如,计算机可读存储介质上的计算机程序产品)的形式。
还可以经由网络接口设备通过网络发送或接收该软件。尽管在示例性实施例中将载体介质示出为单个介质,但术语“载体介质”应当被认为包括存储一组或多组指令的单个介质或多个介质(例如,集中式或分布式数据库和/或相关联的高速缓存和服务器)。术语“载体介质”还应被视为包括能够存储、编码或携带指令集以供一个或多个处理器执行并使一个或多个处理器执行本发明的任何一个或多个方法的介质。载体介质可以采取许多形式,包括但不限于非易失性介质、易失性介质和传输介质。非易失性介质包括例如光盘、磁盘和磁光盘。易失性介质包括动态存储器,如主存储器。传输介质包括同轴电缆、铜线和光纤,包括构成总线子系统的电线。传输介质还可以采取声波或光波的形式,例如在无线电波和红外数据通信期间生成的波。因此,术语“载体介质”应被视为包括但不限于固态存储器,体现在光学和磁性介质中的计算机产品;具有承载由一个或多个处理器中的至少一个处理器可检测的传播信号并且表示指令集的介质,当指令集被运行时,执行方法;以及网络中承载由一个或多个处理器中的至少一个处理器可检测的可传播信号并且表示指令集的传输介质。
应当理解,所讨论的方法的步骤在一个实施例中由执行存储在存储装置中的指令(计算机可读代码)的处理(即,计算机)系统的适当的处理器(或多个处理器)执行。还将理解,本发明不限于任何特定的实现或编程技术,并且本发明可以使用用于实现本文所描述的功能的任何适当的技术来实现。本发明不限于任何特定的编程语言或操作系统。
应当理解,在上面对本发明的示例性实施例的描述中,为了简化本公开并有助于理解各种发明方面中的一个或多个方面,本发明的各种特征有时在单个实施例、图或其描述中被分组在一起。然而,这种公开的方法不应被解释为反映所要求保护的发明需要比每个权利要求中明确叙述的特征更多的特征的意图。相反,如以下权利要求所反映的那样,发明的各方面在于少于单个前述公开实施例的所有特征。因此,具体实施方式中的权利要求在此明确地并入具体实施方式中,其中每个权利要求独立地作为本发明的单独实施例。
此外,虽然本文所描述的一些实施例包括一些特征但不包括其它实施例中的其它特征,但是不同实施例的特征的组合意图在本发明的范围内,并且形成不同的实施例,如本领域技术人员将理解的。例如,在所附权利要求中,任何要求保护的实施例可以以任何组合使用。
此外,一些实施例在这里被描述为可以由计算机系统的处理器或通过执行该功能的其它手段来实现的方法或方法的元素的组合。因此,具有用于执行方法或方法的元素的必要指令的处理器形成用于执行方法或方法元素的装置。此外,本文中描述的装置实施例的元件是用于执行由针对实现本发明的目的的元件执行的功能的装置的示例。
在本文提供的描述中,阐述了许多具体细节。然而,应当理解,可以在没有这些具体细节的情况下实践本发明的实施例。在其它情况下,还没有详细地示出众所周知的方法、结构和技术,以便不模糊对描述的理解。
类似地,应注意,术语耦合在权利要求中使用时不应被解释为仅限于直接连接。可使用术语“耦合”和“连接”以及其派生词。应理解,这些术语不旨在作为彼此的同义词。因此,耦合到设备B的设备A的表达式的范围不应被限制在其中设备A的输出直接连接到设备B的输入的设备或系统。这意味着在A的输出和B的输入之间存在路径,其可以是包括其它设备或装置的路径。“耦合”可以意味着两个或更多个元件直接物理或电接触,或者两个或更多个元件彼此不直接接触但仍然彼此协作或相互作用。
因此,虽然已经描述了被认为是本发明的优选实施例的内容,但是本领域技术人员将认识到,在不脱离本发明的精神的情况下,可以对其进行其它和进一步的修改,并且旨在要求所有这些改变和修改落入本发明的范围内。例如,上面给出的任何公式仅仅表示可以使用的过程。可以从框图中添加或删除功能,并且可以在功能框之间互换操作。可以将步骤添加或删除到在本发明的范围内描述的方法。

Claims (78)

1.一种用于使得包括一个或多个运动传感器单元(MSU)的最终用户硬件的用户能够参与竞争性活动的方法,所述方法包括:
在服务器设备处维护多个挑战数据集,其中,每个挑战数据集表示被配置为由包括一个或多个MSU的最终用户硬件的用户所尝试的挑战活动,其中,每个挑战数据集包括表示下述各项的数据:
(i)一个或多个挑战技能,其中,所述一个或多个挑战技能中的每个挑战技能与特定于技能的配置数据相关联,其中,所述特定于技能的配置数据可下载到所述最终用户硬件,从而用于将所述最终用户硬件配置为基于从所述一个或多个MSU导出的运动传感器数据(MSD)来实现对挑战技能的表演事件的识别和分析;以及
(ii)表示一个或多个竞争性参数的数据;
使得所述包括一个或多个MSU的最终用户硬件的用户能够参与给定的挑战活动,其中,使得所述用户能够参与所述给定的挑战活动包括:
(i)使得所述用户的最终用户硬件针对所述一个或多个挑战技能应用所述特定于技能的配置数据;以及
(ii)使得基于所应用的特定于技能的配置数据来对从所述一个或多个MSU导出的数据进行分析,从而实现关于所述一个或多个竞争性参数的评估。
2.根据权利要求1所述的方法,其中,所述最终用户硬件包括具有MSU功能的服装。
3.根据权利要求1所述的方法,包括提供创作界面,所述创作界面被配置为使得活动创作者用户能够为竞争性活动定义挑战数据集。
4.根据权利要求3所述的方法,还包括:访问表示与下述两项相关联的技能表演事件的数据:(i)所述活动创作者用户;以及(ii)挑战位置,其中,通过包括分析经由一组穿戴的运动传感器单元所收集的数据的过程来定义给定的技能表演事件。
5.根据权利要求4所述的方法,其中,所述创作界面被配置为处理表示与在所述挑战位置处的所述活动创作者用户相关联的技能表演事件的数据,从而使得创作者能够基于由所述活动创作者用户完成的活动来定义挑战数据集。
6.根据权利要求5所述的方法,其中,所述创作界面被配置为处理表示与在所述挑战位置处的所述活动创作者用户相关联的技能表演事件的数据,并且基于该处理来建议一个或多个挑战数据集属性,从而使得所述创作者能够基于由所述活动创作者用户完成的活动来定义挑战数据集。
7.根据权利要求6所述的方法,其中,所述建议被配置为使得所述活动创作者用户能够定义与下述活动相对应的挑战数据集:(i)该活动由所述活动创作者用户完成;并且(ii)针对该活动,所述活动创作者用户是当前的竞争领导者。
8.根据权利要求1所述的方法,其中,所述挑战数据集中的一个或多个包括定义挑战位置的数据,其中,该定义挑战位置的数据表示所述挑战活动能够被完成的区域。
9.根据权利要求1所述的方法,其中,对于给定的挑战数据集,所述一个或多个竞争性参数定义如何相对于所述竞争性活动中的第二参与者来评判所述竞争性活动中的第一参与者。
10.根据权利要求1所述的方法,其中,所述一个或多个竞争性参数包括对连续表演特定技能的次数的计数。
11.根据权利要求1所述的方法,其中,所述一个或多个竞争性参数包括相对于定义的定时参数对表演特定技能的次数的计数。
12.根据权利要求1所述的方法,其中,所述一个或多个竞争性参数包括对连续表演独特技能的次数的计数。
13.根据权利要求1所述的方法,其中,所述一个或多个竞争性参数包括相对于定义的定时参数对表演独特技能的次数的计数。
14.根据权利要求1所述的方法,其中,所述一个或多个竞争性参数包括表演一组定义的技能的时间段。
15.根据权利要求14所述的方法,其中,所述一组定义的技能包括单个技能的多个实例。
16.根据权利要求1所述的方法,其中,所述一个或多个竞争性参数包括受从给定技能表演事件的一个或多个表演属性导出的值影响的参数。
17.根据权利要求16所述的方法,其中,所述一个或多个表演属性是基于下述各项中的一项或多项来定义的:所述技能相对于定义的最佳表演的表演;在所述技能的表演中观察到的一个或多个基于运动的属性;技能表演高度属性;技能表演距离属性;技能表演力量属性;技能表演速度属性;以及技能表演持续时间属性。
18.根据权利要求3所述的方法,其中,所述创作界面在本地模式下可用,由此所述界面被呈现在本地用户界面设备上,并且所述界面从本地存储储存库访问与所述活动创作者用户相关联的技能表演数据。
19.根据权利要求18所述的方法,其中,所述创作界面另外在在线模式下可用,由此所述界面从中央存储储存库访问与所述活动创作者用户相关联的技能表演数据。
20.根据权利要求1所述的方法,其中,使得所述包括一个或多个MSU的最终用户硬件的用户能够参与给定的挑战活动包括:将所述活动参与者用户本地的设备配置为以离线模式监测所述挑战技能相对于所述竞争性参数的表演。
21.根据权利要求1所述的方法,其中,使得所述包括一个或多个MSU的最终用户硬件的用户能够参与给定的挑战活动包括:(i)确定活动参与者用户的位置;和(ii)向用户活动用户显示表示与所确定的位置相关联的一个或多个预定义的竞争性活动的数据。
22.根据权利要求1所述的方法,包括执行自动化过程,从而基于在给定位置处识别的表演,在没有用户输入的情况下定义针对该位置的一个或多个竞争性活动。
23.根据权利要求1所述的方法,其中,所述挑战技能中给定的一个挑战技能由所述活动创作者用户的表演记录过程来定义。
24.一种用于操作包括一个或多个运动传感器单元(MSU)的最终用户硬件的用户的方法,所述方法包括:
识别挑战数据集,其中,所述挑战数据集表示被配置为由包括一个或多个MSU的最终用户硬件的用户所尝试的挑战活动,其中,每个挑战数据集包括表示下述各项的数据:
(i)一个或多个挑战技能,其中,所述一个或多个挑战技能中的每个挑战技能与特定于技能的配置数据相关联,其中,特定于技能的配置数据可下载到所述最终用户硬件,从而用于将所述最终用户硬件配置为基于从所述一个或多个MSU导出的运动传感器数据(MSD)来实现对挑战技能的表演事件的识别和分析;以及
(ii)表示一个或多个竞争性参数的数据;
使得所述包括一个或多个MSU的最终用户硬件的用户能够参与给定的挑战活动,其中,使得所述用户能够参与所述给定的挑战活动包括:
(i)使得所述用户的最终用户硬件针对所述一个或多个挑战技能应用所述特定于技能的配置数据;以及
(ii)使得基于所应用的特定于技能的配置数据来对从所述一个或多个MSU导出的数据进行分析,从而实现关于所述一个或多个竞争性参数的评估。
25.根据权利要求24所述的方法,其中,所述最终用户硬件包括具有MSU功能的服装。
26.根据权利要求24所述的方法,包括提供创作界面,所述创作界面被配置为使得活动创作者用户能够为竞争性活动定义挑战数据集。
27.根据权利要求26所述的方法,还包括:访问表示与下述两项相关联的技能表演事件的数据:(i)所述活动创作者用户;以及(ii)挑战位置,其中,通过包括分析经由一组穿戴的运动传感器单元所收集的数据的过程来定义给定的技能表演事件。
28.根据权利要求27所述的方法,其中,所述创作界面被配置为处理表示与在所述挑战位置处的所述活动创作者用户相关联的技能表演事件的数据,从而使得创作者能够基于由所述活动创作者用户完成的活动来定义挑战数据集。
29.根据权利要求28所述的方法,其中,所述创作界面被配置为处理表示与在所述挑战位置处的所述活动创作者用户相关联的技能表演事件的数据,并且基于该处理来建议一个或多个挑战数据集属性,从而使得所述创作者能够基于由所述活动创作者用户完成的活动来定义挑战数据集。
30.根据权利要求29所述的方法,其中,所述建议被配置为使得所述活动创作者用户能够定义与下述活动相对应的挑战数据集:(i)该活动由所述活动创作者用户完成;并且(ii)针对该活动,所述活动创作者用户是当前的竞争领导者。
31.根据权利要求24所述的方法,其中,所述挑战数据集中的一个或多个包括定义挑战位置的数据,其中,该定义挑战位置的数据表示所述挑战活动能够被完成的区域。
32.根据权利要求24所述的方法,其中,对于给定的挑战数据集,所述一个或多个竞争性参数定义如何相对于所述竞争性活动中的第二参与者来评判所述竞争性活动中的第一参与者。
33.根据权利要求24所述的方法,其中,所述一个或多个竞争性参数包括对连续表演特定技能的次数的计数。
34.根据权利要求24所述的方法,其中,所述一个或多个竞争性参数包括相对于定义的定时参数对表演特定技能的次数的计数。
35.根据权利要求24所述的方法,其中,所述一个或多个竞争性参数包括对连续表演独特技能的次数的计数。
36.根据权利要求24所述的方法,其中,所述一个或多个竞争性参数包括相对于定义的定时参数对表演独特技能的次数的计数。
37.根据权利要求24所述的方法,其中,所述一个或多个竞争性参数包括表演一组定义的技能的时间段。
38.根据权利要求37所述的方法,其中,所述一组定义的技能包括单个技能的多个实例。
39.根据权利要求24所述的方法,其中,所述一个或多个竞争性参数包括受从给定技能表演事件的一个或多个表演属性导出的值影响的参数。
40.根据权利要求39所述的方法,其中,所述一个或多个表演属性是基于下述各项中的一项或多项来定义的:所述技能相对于定义的最佳表演的表演;在所述技能的表演中观察到的一个或多个基于运动的属性;技能表演高度属性;技能表演距离属性;技能表演力量属性;技能表演速度属性;以及技能表演持续时间属性。
41.根据权利要求26所述的方法,其中,所述创作界面在本地模式下可用,由此所述界面被呈现在本地用户界面设备上,并且所述界面从本地存储储存库访问与所述活动创作者用户相关联的技能表演数据。
42.根据权利要求18所述的方法,其中,所述创作界面另外在在线模式下可用,由此所述界面从中央存储储存库访问与所述活动创作者用户相关联的技能表演数据。
43.根据权利要求24所述的方法,其中,使得所述包括一个或多个MSU的最终用户硬件的用户能够参与给定的挑战活动包括:将所述活动参与者用户本地的设备配置为以离线模式监测所述挑战技能相对于所述竞争性参数的表演。
44.根据权利要求24所述的方法,其中,使得所述包括一个或多个MSU的最终用户硬件的用户能够参与给定的挑战活动包括:(i)确定活动参与者用户的位置;和(ii)向用户活动用户显示表示与所确定的位置相关联的一个或多个预定义的竞争性活动的数据。
45.根据权利要求24所述的方法,包括执行自动化过程,从而基于在给定位置处识别的表演,在没有用户输入的情况下定义针对该位置的一个或多个竞争性活动。
46.一种用于提供多用户竞争性活动的方法,所述方法包括:
提供创作界面,所述创作界面被配置为使得活动创作者用户能够为竞争性活动定义挑战数据集,其中,每个挑战数据集包括:
(i)表示挑战位置的位置信息的数据;
(ii)表示一个或多个挑战技能的数据,其中,所述一个或多个挑战技能中的每个挑战技能都从被配置为经由最终用户穿戴的运动传感器单元来识别的挑战技能的储存库中选择;以及
(iii)表示一个或多个竞争性参数的数据;
使得所述竞争性活动可用于多个活动参与者用户,其中,给定的活动参与者基于对从与所述用户相关联的运动感测服装导出的数据的分析来参与所述竞争性活动。
47.根据权利要求46所述的方法,还包括:访问表示与下述两项相关联的技能表演事件的数据:(i)所述活动创作者用户;以及(ii)所述挑战位置,其中,通过包括分析经由一组穿戴的运动传感器单元所收集的数据的过程来定义给定的技能表演事件。
48.根据权利要求47所述的方法,其中,所述创作界面被配置为处理表示与在所述挑战位置处的所述活动创作者用户相关联的技能表演事件的数据,从而使得创作者能够定义与由所述活动创作者用户完成的活动相对应的挑战数据集。
49.根据权利要求48所述的方法,其中,所述创作界面被配置为处理表示与在所述挑战位置处的所述活动创作者用户相关联的技能表演事件的数据,并且基于该处理来建议一个或多个挑战数据集属性,从而使得所述创作者能够定义与由所述活动创作者用户完成的活动相对应的挑战数据集。
50.根据权利要求49所述的方法,其中,所述建议被配置为使得所述活动创作者用户能够定义与下述活动相对应的挑战数据集:(i)该活动由所述活动创作者用户完成;并且(ii)针对该活动,所述活动创作者用户是当前的竞争领导者。
51.根据权利要求46所述的方法,其中,对于给定的挑战数据集,所述一个或多个竞争性参数定义如何相对于所述竞争性活动中的第二参与者来评估所述竞争性活动中的第一参与者。
52.根据权利要求46所述的方法,其中,所述一个或多个竞争性参数包括对连续表演特定技能的次数的计数。
53.根据权利要求46所述的方法,其中,所述一个或多个竞争性参数包括相对于定义的定时参数对表演特定技能的次数的计数。
54.根据权利要求46所述的方法,其中,所述一个或多个竞争性参数包括对连续表演独特技能的次数的计数。
55.根据权利要求46所述的方法,其中,所述一个或多个竞争性参数包括相对于定义的定时参数对表演独特技能的次数的计数。
56.根据权利要求46所述的方法,其中,所述一个或多个竞争性参数包括表演一组定义的技能的时间段。
57.根据权利要求56所述的方法,其中,所述一组定义的技能包括单个技能的多个实例。
58.根据权利要求46所述的方法,其中,所述一个或多个竞争性参数包括从给定技能表演事件的一个或多个表演属性导出的值。
59.根据权利要求58所述的方法,其中,所述一个或多个表演属性是基于下述各项中的一项或多项来定义的:所述技能相对于定义的最佳表演的表演;在所述技能的表演中观察到的一个或多个基于运动的属性;技能表演高度属性;技能表演距离属性;技能表演力量属性;技能表演速度属性;以及技能表演持续时间属性。
60.根据权利要求46所述的方法,其中,所述创作界面在本地模式下可用,由此所述界面被呈现在本地用户界面设备上,并且所述界面从本地存储储存库访问与所述活动创作者用户相关联的技能表演数据。
61.根据权利要求46所述的方法,其中,所述创作界面另外在在线模式下可用,由此所述界面从中央存储储存库访问与所述活动创作者用户相关联的技能表演数据。
62.根据权利要求46所述的方法,其中,使得所述竞争活动可用于给定的活动参与者用户包括:将所述活动参与者用户本地的设备配置为以离线模式监测所述挑战技能相对于所述竞争性参数的表演。
63.根据权利要求46所述的方法,其中,使得所述竞争活动可用于多个活动参与者用户包括:(i)确定活动参与者用户的位置;和(ii)向用户活动用户显示表示与所确定的位置相关联的一个或多个预定义的竞争性活动的数据。
64.根据权利要求46所述的方法,包括执行自动化过程,从而基于在给定位置处识别的表演,在没有用户输入的情况下定义针对该位置的一个或多个竞争性活动。
65.根据权利要求46所述的方法,其中,所述挑战技能中给定的一个挑战技能由所述活动创作者用户的表演记录过程来定义。
66.一种用于提供多用户竞争性活动的方法,所述方法包括:
识别与活动参与者用户相关联的位置信息;
识别与所述位置信息相关联的一个或多个预定义的竞争性活动,其中,每个竞争性活动与相应的挑战数据集相关联,其中,每个挑战数据集包括:
(i)表示挑战位置的位置信息的数据;
(ii)表示一个或多个挑战技能的数据,其中,所述一个或多个挑战技能中的每个挑战技能都从被配置为经由最终用户穿戴的运动传感器单元来识别的挑战技能的储存库中选择;以及
(iii)表示一个或多个竞争性参数的数据;
处理从与所述活动参与者用户相关联的一组穿戴的运动传感器单元导出的数据,从而针对所识别的预定义的竞争性活动中的给定的一个竞争性活动,确定针对所述一个或多个竞争性参数评估所述活动参与者用户。
67.根据权利要求66所述的方法,其中,对于给定的挑战数据集,所述一个或多个竞争性参数定义如何相对于所述竞争性活动中的第二参与者来评判所述竞争性活动中的第一参与者。
68.根据权利要求66所述的方法,其中,所述一个或多个竞争性参数包括对连续表演特定技能的次数的计数。
69.根据权利要求66所述的方法,其中,所述一个或多个竞争性参数包括相对于定义的定时参数对表演特定技能的次数的计数。
70.根据权利要求66所述的方法,其中,所述一个或多个竞争性参数包括对连续表演独特技能的次数的计数。
71.根据权利要求66所述的方法,其中,所述一个或多个竞争性参数包括相对于定义的定时参数对表演独特技能的次数的计数。
72.根据权利要求66所述的方法,其中,所述一个或多个竞争性参数包括表演一组定义的技能的时间段。
73.根据权利要求72所述的方法,其中,所述一组定义的技能包括单个技能的多个实例。
74.根据权利要求66所述的方法,其中,所述一个或多个竞争性参数包括从给定技能表演事件的一个或多个表演属性导出的值。
75.根据权利要求74所述的方法,其中,所述一个或多个表演属性是基于下述各项中的一项或两项来定义的:所述技能相对于定义的最佳表演的表演;以及在所述技能的表演中观察到的一个或多个基于运动的属性。
76.根据权利要求75所述的方法,其中,所述一个或多个表演属性是基于下述各项中的一项或多项来定义的:技能表演高度属性;技能表演距离属性;技能表演力量属性;技能表演速度属性;以及技能表演持续时间属性。
77.根据权利要求66所述的方法,包括将所述活动参与者用户本地的设备配置为以离线模式监测所述挑战技能相对于所述竞争性参数的表演。
78.一种计算机系统,被配置为执行根据任一前述权利要求所述的方法。
CN201680044207.6A 2015-05-27 2016-05-27 被配置为经由基于传感器的对身体表演的技能的监测来实现包括特定于位置的游戏化在内的游戏化的框架、设备和方法 Pending CN107847789A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
AU2015901945 2015-05-27
AU2015901945A AU2015901945A0 (en) 2015-05-27 Frameworks and methodologies configured to enable skill gamization, including location-specific skill gamization
AUPCT/AU2016/000020 2016-02-02
PCT/AU2016/000020 WO2016123648A1 (en) 2015-02-02 2016-02-02 Frameworks, devices and methodologies configured to enable delivery of interactive skills training content, including content with multiple selectable expert knowledge variations
PCT/AU2016/050415 WO2016187673A1 (en) 2015-05-27 2016-05-27 Frameworks, devices and methodologies configured to enable gamification via sensor-based monitoring of physically performed skills, including location-specific gamification

Publications (1)

Publication Number Publication Date
CN107847789A true CN107847789A (zh) 2018-03-27

Family

ID=57392282

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680044207.6A Pending CN107847789A (zh) 2015-05-27 2016-05-27 被配置为经由基于传感器的对身体表演的技能的监测来实现包括特定于位置的游戏化在内的游戏化的框架、设备和方法

Country Status (6)

Country Link
US (1) US10441847B2 (zh)
EP (1) EP3302733A4 (zh)
JP (1) JP2018522618A (zh)
KR (1) KR20180022674A (zh)
CN (1) CN107847789A (zh)
WO (1) WO2016187673A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108536598A (zh) * 2018-04-12 2018-09-14 深圳市腾讯网络信息技术有限公司 一种技能逻辑测试方法、装置、测试终端及存储介质
CN111127979A (zh) * 2020-02-21 2020-05-08 上海墩庐生物医学科技有限公司 一种进行戏曲唱念身段互动教学的方法及互联网应用方法
TWI756754B (zh) * 2020-04-08 2022-03-01 博晶醫電股份有限公司 以多重方案監控運動期間的方法

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11284544B1 (en) * 2015-12-03 2022-03-22 Eta Vision Inc. Systems and methods for sensing, recording, analyzing and reporting environmental conditions in data centers and similar facilities
US10863330B1 (en) * 2015-12-03 2020-12-08 Eta Vision Inc. Systems and methods for sensing, recording, analyzing and reporting environmental conditions in data centers and similar facilities
US11269480B2 (en) 2016-08-23 2022-03-08 Reavire, Inc. Controlling objects using virtual rays
US11556879B1 (en) * 2017-06-12 2023-01-17 Amazon Technologies, Inc. Motion data driven performance evaluation and training
US11054638B2 (en) 2018-06-13 2021-07-06 Reavire, Inc. Tracking pointing direction of device
US10880331B2 (en) * 2019-11-15 2020-12-29 Cheman Shaik Defeating solution to phishing attacks through counter challenge authentication

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100056876A1 (en) * 2001-02-20 2010-03-04 Michael Ellis Personal data collection systems and methods
US20140142459A1 (en) * 2012-11-14 2014-05-22 MAD Apparel, Inc. Wearable performance monitoring, analysis, and feedback systems and methods
CN104126184A (zh) * 2011-11-23 2014-10-29 耐克创新有限合伙公司 用于包括训练计划的自动个人训练的方法和系统

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100201512A1 (en) 2006-01-09 2010-08-12 Harold Dan Stirling Apparatus, systems, and methods for evaluating body movements
US8355337B2 (en) * 2009-01-28 2013-01-15 Headwater Partners I Llc Network based service profile management with user preference, adaptive policy, network neutrality, and user privacy
US9474970B2 (en) 2012-01-26 2016-10-25 David H. Kil System and method for processing motion-related sensor data with social mind-body games for health application
US20140320481A1 (en) * 2013-04-30 2014-10-30 Hewlett-Packard Development Company, L.P. Display control
US10854104B2 (en) * 2015-08-28 2020-12-01 Icuemotion Llc System for movement skill analysis and skill augmentation and cueing

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100056876A1 (en) * 2001-02-20 2010-03-04 Michael Ellis Personal data collection systems and methods
CN104126184A (zh) * 2011-11-23 2014-10-29 耐克创新有限合伙公司 用于包括训练计划的自动个人训练的方法和系统
US20140142459A1 (en) * 2012-11-14 2014-05-22 MAD Apparel, Inc. Wearable performance monitoring, analysis, and feedback systems and methods

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108536598A (zh) * 2018-04-12 2018-09-14 深圳市腾讯网络信息技术有限公司 一种技能逻辑测试方法、装置、测试终端及存储介质
CN108536598B (zh) * 2018-04-12 2023-03-10 深圳市腾讯网络信息技术有限公司 一种技能逻辑测试方法、装置、测试终端及存储介质
CN111127979A (zh) * 2020-02-21 2020-05-08 上海墩庐生物医学科技有限公司 一种进行戏曲唱念身段互动教学的方法及互联网应用方法
TWI756754B (zh) * 2020-04-08 2022-03-01 博晶醫電股份有限公司 以多重方案監控運動期間的方法

Also Published As

Publication number Publication date
WO2016187673A1 (en) 2016-12-01
KR20180022674A (ko) 2018-03-06
US20180161624A1 (en) 2018-06-14
EP3302733A4 (en) 2019-02-20
EP3302733A1 (en) 2018-04-11
US10441847B2 (en) 2019-10-15
JP2018522618A (ja) 2018-08-16

Similar Documents

Publication Publication Date Title
CN107847789A (zh) 被配置为经由基于传感器的对身体表演的技能的监测来实现包括特定于位置的游戏化在内的游戏化的框架、设备和方法
CN107533806A (zh) 被配置为实现对包括具有多个可选择的专家知识变化的内容在内的交互技能训练内容的传送的框架、设备和方法
CN107851113A (zh) 被配置为基于从表演传感器单元导出的用户表演属性来实现对媒体数据的自动分类和/或搜索的框架、设备和方法
CN104815428B (zh) 监测体育锻炼事件
CN108463271A (zh) 用于运动技能分析以及技能增强和提示的系统和方法
US20140278218A1 (en) Capturing and Analyzing Boardsport Maneuver Data
CN106462725A (zh) 监测游戏场所的活动的系统和方法
CN106310660A (zh) 一种基于力学可视化的虚拟足球运动控制系统
CN107851457A (zh) 被配置为实现包括应用于交互技能训练内容的传送的对身体表演的技能的分析的框架和方法
Nie et al. [Retracted] The Construction of Basketball Training System Based on Motion Capture Technology
Li et al. An image classification algorithm for football players’ activities using deep neural network
Mimouna et al. A survey of human action recognition using accelerometer data
Kim et al. Detecting and Preventing Online Game Bots in MMORPGs
WO2018057044A1 (en) Dual motion sensor bands for real time gesture tracking and interactive gaming
Ferreira Classification of table tennis strokes using a wearable device and deep learning
Jeong et al. iSIG-Blocks: interactive creation blocks for tangible geometric games
Lee et al. Memorix: A tangible memory game using iSIG-blocks
Khaksar A Framework for Gamification of Human Joint Remote Rehabilitation, Incorporating Non-Invasive Sensors
Ciliberto Movement recognition from wearable sensors data: power-aware evolutionary training for template matching and data annotation recovery methods
Bau et al. Diversity in Gaming and the Metaverse
Fiadotau Dōjin Game
Ferencik et al. Patient assessment using computer games in rehabilitation
Jia Artificial Intelligence Of Things For Ubiquitous Sports Analytics
Yalçinkaya Designing 3D scenarios and interaction tasks for immersive environments
Jiménez Bascones Cloud point labelling in optical motion capture systems

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
AD01 Patent right deemed abandoned

Effective date of abandoning: 20210702

AD01 Patent right deemed abandoned