CN113181619A - 一种运动训练方法、装置和系统 - Google Patents

一种运动训练方法、装置和系统 Download PDF

Info

Publication number
CN113181619A
CN113181619A CN202110383654.7A CN202110383654A CN113181619A CN 113181619 A CN113181619 A CN 113181619A CN 202110383654 A CN202110383654 A CN 202110383654A CN 113181619 A CN113181619 A CN 113181619A
Authority
CN
China
Prior art keywords
head
motion
movement
6dof
tracker
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110383654.7A
Other languages
English (en)
Inventor
吴涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qingdao Xiaoniao Kankan Technology Co Ltd
Original Assignee
Qingdao Xiaoniao Kankan Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qingdao Xiaoniao Kankan Technology Co Ltd filed Critical Qingdao Xiaoniao Kankan Technology Co Ltd
Priority to CN202110383654.7A priority Critical patent/CN113181619A/zh
Publication of CN113181619A publication Critical patent/CN113181619A/zh
Priority to PCT/CN2022/085321 priority patent/WO2022213984A1/zh
Priority to US17/883,057 priority patent/US11872468B2/en
Pending legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0622Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/014Hand-worn input/output arrangements, e.g. data gloves
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0622Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
    • A63B2071/06363D visualisation
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0622Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
    • A63B2071/0638Displaying moving images of recorded environment, e.g. virtual environment

Abstract

本申请公开了一种运动训练方法、装置和系统。运动训练之前,双手佩戴上双手运动追踪器,双脚佩戴上双脚运动追踪器,头部佩戴上VR头戴一体机;双手和双脚运动追踪器分别连接VR头戴一体机;运动训练过程中,VR头戴一体机获取自身实时采集的头部6DoF运动数据、双手和双脚运动追踪器实时采集的双手6DoF运动数据和双脚6DoF运动数据;将双手和双脚的6DoF运动数据与头部6DoF运动数据进行融合;根据融合后数据计算出人体不同部位的运动数据;将人体不同部位的运动数据与运动训练标准数据进行相似度比对,如果相似度大于阈值,则该人体部位的动作符合规范训练标准,否则,则对动作不规范的人体部位标注提示信息,进行动作规范化纠正。

Description

一种运动训练方法、装置和系统
技术领域
本申请涉及VR领域,具体涉及一种运动训练方法、装置和系统。
背景技术
随着社会的发展,人们对健康的关注程度也越来越高。在现有技术中,健身运动(例如瑜伽)通常是在瑜伽会馆或者健身房里进行,健身者需要缴纳一定的费用,由瑜伽教练进行现场教学及指导,当健身者人数较多时,瑜伽教练并不能顾及到每一位健身者,对每一位健身者的动作进行指导,但是如果进行小班教课,又会增加健身者和瑜伽会馆的费用,存在智能化程度较低,效率较低,费用较高,健身效果欠佳等问题。
在现有技术中,用户也可以选择在家里练习,通过下载一些训练科目视频,对着电脑或者电视进行学习练习,但这种视频指导方式仅为单向的动作示范指导,用户无法获得自身动作规范程度信息反馈,无法确定瑜伽动作是否标准,不能及时矫正自身动作姿势,也无法评估健身效果,导致效率较低,健身效果欠佳。
发明内容
鉴于现有健身方式存在的效率和效果较低、缺少系统的健身评估与反馈机制等问题,提出了本申请以便提供一种克服上述问题或者至少部分地解决上述问题的运动训练方法、装置和系统。
依据本申请的一个方面,提供了一种运动训练方法,运动训练之前,在用户双手和用户双脚的指定部位分别佩戴上双手运动追踪器和双脚运动追踪器,并在用户头部佩戴上VR头戴一体机;所述双手运动追踪器和所述双脚运动追踪器分别无线连接所述VR头戴一体机;运动训练过程中,用户根据所述VR头戴一体机中显示的虚拟示范动作做相应的动作,所述方法包括:
所述VR头戴一体机获取自身实时采集的头部6DoF运动数据、所述双手运动追踪器实时采集的双手6DoF运动数据和所述双脚运动追踪器实时采集的双脚6DoF运动数据;
所述VR头戴一体机将所述双手6DoF运动数据和所述双脚6DoF运动数据与所述头部6DoF运动数据进行融合;
所述VR头戴一体机根据融合后数据计算出人体不同部位的运动数据;
所述VR头戴一体机将计算出的人体不同部位的运动数据与运动训练标准数据进行相似度比对,如果相似度大于阈值,则判断人体部位的动作符合规范训练标准,否则,则在所述VR头戴一体机中对动作不规范的人体部位标注提示信息,进行动作规范化纠正。
依据本申请的另一方面,提供了一种运动训练装置,所述装置包括VR头戴一体机、双手运动追踪器和双脚运动追踪器,所述双手运动追踪器和所述双脚运动追踪器分别无线连接所述VR头戴一体机;运动训练之前,在用户双手和用户双脚的指定部位分别佩戴上所述双手运动追踪器和所述双脚运动追踪器,并在用户头部佩戴上所述VR头戴一体机,运动训练过程中,用户根据所述VR头戴一体机中显示的虚拟示范动作做相应的动作;
所述双手运动追踪器,用于实时采集双手6DoF运动数据,并无线传输给所述VR头戴一体机;
所述双脚运动追踪器,用于实时采集双脚6DoF运动数据,并无线传输给所述VR头戴一体机;
所述VR头戴一体机,用于运动训练过程中显示虚拟示范动作,实时采集头部6DoF运动数据,并获取所述手运动追踪器实时采集的双手6DoF运动数据和所述双脚运动追踪器实时采集的双脚6DoF运动数据;将所述双手6DoF运动数据和所述双脚6DoF运动数据与所述头部6DoF运动数据进行融合;根据融合后数据计算出人体不同部位的运动数据;以及将计算出的人体不同部位的运动数据与运动训练标准数据进行相似度比对,如果相似度大于阈值,则判断人体部位的动作符合规范训练标准,否则,则在所述VR头戴一体机中对动作不规范的人体部位标注提示信息,进行动作规范化纠正。
依据本申请的又一方面,提供了一种运动训练系统,所述系统包括:数据处理服务器、与所述数据处理服务器网络连接的多个VR头戴一体机;
各个VR头戴一体机,用于将计算出的自身用户的人体不同部位的运动数据发送给所述数据处理服务器;
所述数据处理服务器,用于实时接收多个VR头戴一体机发送的多个用户的人体不同部位的运动数据,通过二次元方式在虚拟现实场景中绘制化身用户,对接收的各个VR头戴一体机的用户数据通过图形处理器GPU实时驱动虚拟用户化身,渲染更新得到多人互动运动场景信息,将所述多人互动运动场景信息实时发送给各个所述VR头戴一体机;
各个VR头戴一体机,还用于在显示屏上显示所述多人互动运动场景信息,在虚拟现实场景中实现与其他运动训练用户之间的远程互动。
由上述可知,本申请的技术方案,通过在用户双手和用户双脚的指定部位分别佩戴上双手运动追踪器和双脚运动追踪器,并在用户头部佩戴上VR头戴一体机,实时追踪每一位运动训练用户的关键肢体的运动信息,且无需用户佩戴大量的传感器,用户佩戴非常方便;通过VR头戴一体机获取自身实时采集的头部6DoF运动数据、双手运动追踪器实时采集的双手6DoF运动数据和双脚运动追踪器实时采集的双脚6DoF运动数据,且将双手6DoF运动数据和双脚6DoF运动数据与头部6DoF运动数据进行融合,获取高精度、高频率的运动数据,提高了追踪精度;通过根据融合后数据计算出人体不同部位的运动数据,将计算出的人体不同部位的运动数据与运动训练标准数据进行相似度比对,如果相似度大于阈值,则判断该人体部位的动作符合规范训练标准,否则,则在VR头戴一体机中对动作不规范的人体部位标注提示信息,进行动作规范化纠正,实现了用户在家锻炼时,也可对动作是否标准进行判断,并及时纠正不标准的动作,提高了健身效率和效果,解决了用户在进行瑜伽等健身活动过程中存在的无法确定瑜伽动作是否标准、无法及时纠正瑜伽动作、缺少系统的健身评估与反馈机制等问题。而且,利用数据处理服务器各运动训练用户之间还可以进行远程互动,进一步提升了用户体验。
上述说明仅是本申请技术方案的概述,为了能够更清楚了解本申请的技术手段,而可依照说明书的内容予以实施,并且为了让本申请的上述和其它目的、特征和优点能够更明显易懂,以下特举本申请的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述,各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的,而并不认为是对本申请的限制。而且在整个附图中,用相同的参考符号表示相同的部件。在附图中:
图1示出了根据本申请一个实施例的一种运动训练方法的流程示意图;
图2示出了根据本申请一个实施例的多用户进行VR远程互动的示意图;
图3示出了根据本申请一个实施例的一种运动训练装置的结构示意图;
图4示出了根据本申请一个实施例的一种佩戴效果示意图;
图5示出了根据本申请一个实施例的一种运动训练系统的结构示意图。
具体实施方式
下面将参照附图更详细地描述本申请的示例性实施例。虽然附图中显示了本申请的示例性实施例,然而应当理解,可以以各种形式实现本申请而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本申请,并且能够将本申请的范围完整的传达给本领域的技术人员。
虚拟现实技术(Virtual Reality,VR),通过计算机模拟虚拟环境,从而给人以环境沉浸感。本申请通过将VR设备与传感器相结合,解决了用户在进行瑜伽等健身活动过程中存在的无法确定动作是否标准、无法及时纠正动作、缺少系统的健身评估与反馈机制等问题,给用户带来更好的健身体验。本申请的技术方案中,用户进行运动训练之前,在双手和双脚的指定部位分别佩戴上双手运动追踪器和双脚运动追踪器,并在头部佩戴上VR头戴一体机。双手运动追踪器和双脚运动追踪器分别无线连接VR头戴一体机,运动训练过程中,用户根据VR头戴一体机中显示的虚拟示范动作做相应的动作。
图1示出了根据本申请一个实施例的运动训练方法的流程示意图。如图1所示,该方法包括:
步骤S110,VR头戴一体机获取实时采集的头部6DoF运动数据、双手运动追踪器实时采集的双手6DoF运动数据和双脚运动追踪器实时采集的双脚6DoF运动数据。
6DoF表示用6个自由度(Degree of Freedom,DoF)信息来表示物体的运动,具体包括X,Y,Z三个轴上的位置移动信息,和X,Y,Z三个轴上的旋转信息。本实施例中,除了检测身体各部位的转动带来的视野角度的变化外,还能够检测到由于身体各部位的移动带来的上下前后左右位移的变化。
本实施例通过实时采集用户头部、双手、双脚的6DoF运动数据,全面监测人体关节的运动数据,能够更加真实、精确的反映人体运动情况。
步骤S120,VR头戴一体机将双手6DoF运动数据和双脚6DoF运动数据与头部6DoF运动数据进行融合。
本实施例中,由于分别通过VR头戴一体机、双手运动追踪器、双脚运动追踪器获取头部、双手和双脚的6DoF运动数据,即每一个6DoF运动数据拥有各自的坐标系。因此,需要把头部、双手和双脚的运动数据进行融合,具体是将双手和双脚的6DoF运动数据统一到头部的坐标系中,使真实人体的运动与VR头戴一体机中的虚拟人体的运动保持一致。
步骤S130,VR头戴一体机根据融合后数据计算出人体不同部位的运动数据。
本实施例中,把头部、双手和双脚的运动数据进行融合,将双手和双脚的6DoF运动数据统一到头部的坐标系中,计算出头部、双手和双脚的6DoF运动数据在头部坐标系中的运动数据。
步骤S140,VR头戴一体机将计算出的人体不同部位的运动数据与运动训练标准数据进行相似度比对,如果相似度大于阈值,则判断该人体部位的动作符合规范训练标准,否则,则在VR头戴一体机中对动作不规范的人体部位标注提示信息,进行动作规范化纠正。
本实施例中,运动训练标准数据是根据资深运动训练师,按照上述步骤完成相应动作的数据采集,建立的标准动作数据库。阈值例如可设为95%。
综上所述,本实施例的技术方案,通过在用户双手和用户双脚的指定部位分别佩戴上双手运动追踪器和双脚运动追踪器,并在用户头部佩戴上VR头戴一体机,实时追踪每一位运动训练用户的关键肢体的运动信息,且无需用户佩戴大量的传感器,用户佩戴非常方便;通过VR头戴一体机获取自身实时采集的头部6DoF运动数据、双手运动追踪器实时采集的双手6DoF运动数据和双脚运动追踪器实时采集的双脚6DoF运动数据,且将双手6DoF运动数据和双脚6DoF运动数据与头部6DoF运动数据进行融合,获取高精度、高频率的运动数据,提高了追踪精度;通过根据融合后数据计算出人体不同部位的运动数据,将计算出的人体不同部位的运动数据与运动训练标准数据进行相似度比对,如果相似度大于阈值,则判断该人体部位的动作符合规范训练标准,否则,则在VR头戴一体机中对动作不规范的人体部位标注提示信息,进行动作规范化纠正,实现了用户在家锻炼时,也可对动作是否标准进行判断,并及时纠正不标准的动作,提高了健身效率和效果,解决了用户在进行瑜伽等健身活动过程中存在的无法确定瑜伽动作是否标准、无法及时纠正瑜伽动作、缺少系统的健身评估与反馈机制等问题。
在本申请的一个实施例中,VR头戴一体机内置有头戴追踪摄像头、电磁信号接收模组或者超声波信号接收模组;双手运动追踪器和双脚运动追踪器均内置有电磁传感器和电磁信号发射模组,或者均内置有超声波传感器和超声波信号发射模组。
VR头戴一体机获取实时采集的头部6DoF运动数据、双手运动追踪器实时采集的双手6DoF运动数据和双脚运动追踪器实时采集的双脚6DoF运动数据,包括:
VR头戴一体机通过内置的头戴追踪摄像头实时采集头部运动的位姿信息;
双手运动追踪器和双脚运动追踪器通过内置的电磁传感器分别实时采集双手运动的位姿信息和双脚运动的位姿信息,并通过电磁信号发射模组和电磁信号接收模组的配对连接无线传输给VR头戴一体机;
或者,双手运动追踪器和双脚运动追踪器通过内置的超声波传感器分别实时采集双手运动的位姿信息和双脚运动的位姿信息,并通过超声波信号发射模组和超声波信号接收模组的配对连接无线传输给VR头戴一体机。
本实施例中,优选地,VR头戴一体机内置高性能的计算处理器(CPU)和图形渲染处理器(GPU),可以是高通骁龙845,高通骁龙865等高性能移动平台,VR头戴一体机还内置4颗头戴追踪摄像头,每颗头戴追踪摄像头配置如下:①.帧率:30Hz及以上②.视场角(AngleOf View,FOV):130°*80°(H*V)及以上③.曝光方式一般为全局曝光(Global shutter)方式④.透镜(Lens)的透光波段一般为400至900左右,VR头戴一体机通过头戴追踪摄像头实时采集用户头部运动相对环境的6DoF位姿信息。
在本申请的一个实施例中,VR头戴一体机还内置有第一无线通讯模块及第一IMU惯性导航传感器;双手运动追踪器和双脚运动追踪器还均内置有第二无线通讯模块及第二IMU惯性导航传感器。
VR头戴一体机获取实时采集的头部6DoF运动数据、双手运动追踪器实时采集的双手6DoF运动数据和双脚运动追踪器实时采集的双脚6DoF运动数据,还包括:
VR头戴一体机还通过内置的第一IMU惯性导航传感器实时采集头部运动的IMU信息,并将头部运动的IMU信息与头部运动的位姿信息进行融合得到头部6DoF运动数据;
双手运动追踪器和双脚运动追踪器还通过内置的第二IMU惯性导航传感器分别实时采集双手运动的IMU信息和双脚运动的IMU信息,并通过第二无线通讯模块和第一无线通讯模块的配对连接无线传输给VR头戴一体机;以及,VR头戴一体机将双手运动的位姿信息与双手运动的IMU信息进行融合得到双手6DoF运动数据,将双脚运动的位姿信息与双脚运动的IMU信息进行融合得到双脚6DoF运动数据。
VR头戴一体机除了内置4颗头戴追踪摄像头外,一般为了能输出高频率(>200Hz)的6DoF运动数据还需要VR头戴一体机内置一个高精度和高频率的IMU(InertialMeasurement Unit,惯性测量单元)惯性导航传感器测量头部的三轴姿态角(或角速率)以及加速度。结合IMU信息,通过即时定位与地图构建(Simultaneous Localization AndMapping,SLAM)技术可以输出高频率的头戴运动状态的6DoF信息。
双手运动追踪器,可以是通过电磁传感器也可以是通过超声波传感器实现双手运动追踪;如果是电磁传感器,在双手运动追踪器内置电磁信号发射模组,在VR头戴一体机端内置电磁信号接收模组,如果是超声波传感器,在双手运动追踪器内置超声波信号发射模组,在VR头戴一体机端内置超声波信号接收模组,双手运动追踪器还内置无线通讯模块,为了提高其双手运动追踪器的追踪稳定性,还内置了高精度和高频率的IMU惯性导航传感器,通过无线通讯模块传输双手运动追踪器中的IMU惯性导航信息给到VR头戴一体机端,VR头戴一体机端的电磁信号接收模组或者超声波信号接收模组接收到双手运动追踪器的运动电磁信号或者运动超声波信号,结合双手运动追踪的IMU信息,通过超声波信号处理或者电磁信号处理算法实时计算双手运动追踪器的6DoF信息;双脚运动追踪器内置的运动传感器和双手内置的一致,如果双手运动追踪器内置电磁波传感器,双脚运动追踪器也内置电磁波传感器,如果双手运动追踪器内置超声波传感器,双脚运动追踪器也内置超声波传感器。
本实施例中,双手运动追踪器和双脚运动追踪器各自通过内置的电磁传感器或超声波传感器,结合第二IMU惯性导航传感器得到双手6DoF运动数据和双脚6DoF运动数据,VR头戴一体机通过头戴追踪摄像头和第一IMU惯性导航传感器,得到头部6DoF运动数据,克服了现有技术中,仅通过IMU惯性导航传感器获取用户运动数据,只能获取人体关节点的3DoF姿态数据,无法获取关节点的位移数据,以及IMU惯性导航传感器随着时间的推移会发生累计漂移误差等缺陷,获取了高精度,高频率的6DoF运动数据,提高了追踪精度,使得位置偏移误差可达毫米级,旋转角度偏移误差可控制在1.5°以内,且输出频率大于200Hz。
在本申请的一个实施例中,VR头戴一体机将双手6DoF运动数据和双脚6DoF运动数据与头部6DoF运动数据进行融合,包括:
VR头戴一体机获取电磁信号接收模组或者超声波信号接收模组相对于第一IMU惯性导航传感器的旋转矩阵和平移向量,通过旋转矩阵和平移向量对双手6DoF运动数据和双脚6DoF运动数据进行坐标系转换,分别转换为以第一IMU惯性导航传感器为原点的6DoF运动数据。
本实施例中,双手运动追踪器和双脚运动追踪器中内置电磁传感器或者超声波传感器,电磁信号接收模组或者超声波信号接收模组内置在VR头戴显示一体机中。双手和双脚的6DoF运动数据的坐标系是以接收端传感器为原点的,而头部的6DoF运动数据的坐标系是以第一IMU惯性导航传感器为原点的。只有将双手、双脚和头部的6DoF运动数据统一到同一坐标系中,才能使真实人体的运动与VR头戴一体机中的虚拟人体的运动保持一致。
具体地,将双手、双脚的6DoF运动数据统一到头部坐标系中。获取电磁信号接收模组或者超声波信号接收模组相对VR头戴一体机中内置的第一IMU惯性导航传感器的旋转矩阵R和平移向量T,通过旋转矩阵R和平移向量T对双手和双脚的6DoF运动数据进行坐标系转换,转换成以VR头戴一体机中内置的第一IMU惯性导航传感器为原点的6DoF追踪数据,其中,坐标系转换公式为:
以第一IMU惯性导航传感器为原点的6DoF运动数据=R*双手的6DoF运动数据+T(1)
以第一IMU惯性导航传感器为原点的6DoF运动数据=R*双脚的6DoF运动数据+T(2)
为准确计算出人体不同部位的运动数据,在本申请的一个实施例中,运动训练之前,事先根据用户做出的与示范动作相对应的动作,进行人体运动数据校准。具体地,用户在佩戴上双手运动追踪器、双脚运动追踪器和VR头戴一体机之后,根据VR头戴一体机中显示的虚拟校准动作做相应的动作时,根据融合后数据和运动训练校准数据,结合反向运动学算法计算出人体不同部位的运动速度、运动角度、每个部位的位移信息,以及每个人体关键部位的运动保持时长。
下面以瑜伽运动为例,对本申请的系统运行进行说明。
(1)运动之前,用户先按照瑜伽训练指导手册,在双手,和双脚的指定部位佩戴好运动追踪传感器,然后戴好VR头戴一体机。
(2)用户完成传感器佩戴后,在VR头戴一体机中的“瑜伽训练指导”APP中,首先进行人体运动数据校准。用户按照APP的指示的示范动作完成几个相应的动作,进行人体运动数据校准,以使各传感器对用户瑜伽动作的运动追踪数据更加稳定和精确。人体运动校准数据会相应存入VR头戴一体机中。整个校准过程大概需要1-2分钟,为了使其瑜伽动作的运动追踪数据更加稳定和精确,建议每次在佩戴好运动追踪传感器之后,都做一次人体运动数据的校准。
(3)在上述步骤(1)和(2)完成之后,可以进行瑜伽训练指导,用户可以在APP中选择不同的瑜伽练习动作,选择好瑜伽练习的动作之后,用户可以在VR头戴一体机中看到每一个动作的虚拟示范动作,然后用户会同时做相应的动作,系统会根据此时的头部6DoF运动数据,双手6DoF运动数据、双脚6DoF运动数据和人体运动校准数据,结合IK(InverseKinematics,反向运动学)算法计算出人体不同部位的运动速度、运动角度、每一个部位的位移信息、以及每一个人体关键部位的运动保持时长,和VR头戴一体机中的瑜伽训练数据库,进行相似度比对,如果相似度值大于95%,就认为该人体部位的标准程度符合规范瑜伽训练标准,否则在VR头戴一体机中对该不规范动作的人体部位标注提示信息,进行动作规范化纠正。
(4)根据步骤(3)依次进行动作课程练习,每一个课程练习的时长基本是30~40分钟左右,在每一个课程练习结束之后,APP会统计该课程错误动作次数,错误动作时间,正确动作的成功平均率,完成动作个数。
在本申请的一个实施例中,VR头戴一体机还将计算出的人体不同部位的运动数据发送给数据处理服务器;接收数据处理服务器通过图形处理器(Graphics ProcessingUnit,GPU)渲染更新得到的多人互动运动场景信息,在虚拟现实场景中实现与其他运动训练用户之间的远程互动。
如图2所示,本实施例需要构建一个数据处理服务器,用户可根据实际应用中的用户端(即图2所示的VR头戴一体机)的个数和VR内容的渲染复杂度确定数据处理服务器的处理能力、应用场景渲染能力等硬件配置规格。本实施例中的数据处理服务器可支持的用户端个数上限为100人。
本实施例中,VR头戴一体机内置CPU、GPU、无线网络模块等元器件,实时采集头部6DoF运动数据,并获取双手运动追踪器实时采集的双手6DoF运动数据和双脚运动追踪器实时采集的双脚6DoF运动数据,将双手6DoF运动数据和双脚6DoF运动数据与头部6DoF运动数据进行融合,根据融合后数据计算出人体不同部位的运动数据,得到150Hz人体不同部位的运动数据。每一个用户端通过无线网络处理器比如无线路由器等设备连接网络,进而通过网络和数据处理服务器进行对接。
数据处理服务器实时接收每个VR头戴一体机通过网络发送的150Hz人体不同部位的运动数据,对接收的该运动数据再次进行融合,通过二次元方式在虚拟现实场景中绘制化身用户,对接收的各个VR头戴一体机的用户数据通过GPU实时驱动虚拟用户化身,渲染更新多人互动场景信息内容,然后再实时传入每一位用户端的VR头戴一体机,其他运动训练用户可以通过第三视角在自己的VR头戴的显示屏上实时观察其他运动训练用户在多人互动运动场景中的运动状态。
本实施例还构建一个主控制器,该主控制器在该运动训练系统中承担管理员的角色,用于对系统中的VR头戴一体机进行管理,本实施例中主控制器的物理结构与VR头戴一体机的物理结构相同。
下面以瑜伽运动为例,对本申请的用户互动系统运行进行说明。
(1)运动之前,用户在VR头戴一体机的多人健身应用APP中,向数据处理服务器发送“加入多人健身互动请求”。
(2)数据处理服务器把用户发送的“加入多人健身互动请求”指令迅速发给主控制器端。
(3)主控制器端对用户的加入请求进行确认,如果允许该用户加入,则发送同意指令,进而使该用户加入多人健身系统中。
本实施例中,主控器端可以是任何比较资深的健身达人用户,该用户负责邀请其他热爱健身的用户加入到多人健身系统中,该用户还负责制定健身规则和惩罚奖励机制等规范措施。
在运动训练过程中,任何的运动训练用户都可以通过VR头戴一体机端的麦克风和其他运动训练用户进行互动聊天,可以分享健身运动的技术方法,一些比较资深的健身达人也可以帮助一些初级的运动训练用户纠正健身的技术动作,也可以分享健身运动的饮食注意事项等一些比较有兴趣的、积极的有利于健身运动的互动话题,实现各运动训练用户之间的远程互动,提升用户体验。
图3示出了根据本申请一个实施例的一种运动训练装置的结构示意图。如图3所示,该运动训练装置300包括VR头戴一体机310、双手运动追踪器320和双脚运动追踪器330。双手运动追踪器320和双脚运动追踪器330分别无线连接VR头戴一体机310。运动训练之前,在用户双手和用户双脚的指定部位分别佩戴上双手运动追踪器320和双脚运动追踪器330,并在用户头部佩戴上VR头戴一体机310,佩戴效果如图4所示。运动训练过程中,用户根据VR头戴一体机310中显示的虚拟示范动作做相应的动作。
双手运动追踪器320,用于实时采集双手6DoF运动数据,并无线传输给VR头戴一体机310。
双脚运动追踪器330,用于实时采集双脚6DoF运动数据,并无线传输给VR头戴一体机330。
VR头戴一体机310,用于运动训练过程中显示虚拟示范动作,实时采集头部6DoF运动数据,并获取双手运动追踪器320实时采集的双手6DoF运动数据和双脚运动追踪器330实时采集的双脚6DoF运动数据;将双手6DoF运动数据和双脚6DoF运动数据与头部6DoF运动数据进行融合;根据融合后数据计算出人体不同部位的运动数据;以及将计算出的人体不同部位的运动数据与运动训练标准数据进行相似度比对,如果相似度大于阈值,则判断该人体部位的动作符合规范训练标准,否则,则在VR头戴一体机310中对动作不规范的人体部位标注提示信息,进行动作规范化纠正。
在本申请的一个实施例中,VR头戴一体机310内置有头戴追踪摄像头、电磁信号接收模组或者超声波信号接收模组;双手运动追踪器320和双脚运动追踪器330均内置有电磁传感器和电磁信号发射模组,或者均内置有超声波传感器和超声波信号发射模组。
VR头戴一体机310,具体用于通过内置的头戴追踪摄像头实时采集头部运动的位姿信息。
双手运动追踪器320和双脚运动追踪器330,具体用于通过内置的电磁传感器分别实时采集双手运动的位姿信息和双脚运动的位姿信息,并通过电磁信号发射模组和电磁信号接收模组的配对连接无线传输给VR头戴一体机310;
或者,双手运动追踪器320和双脚运动追踪器330通过内置的超声波传感器分别实时采集双手运动的位姿信息和双脚运动的位姿信息,并通过超声波信号发射模组和超声波信号接收模组的配对连接无线传输给VR头戴一体机310。
在本申请的一个实施例中,VR头戴一体机310还内置有第一无线通讯模块及第一IMU惯性导航传感器,双手运动追踪器320和双脚运动追踪器330还均内置有第二无线通讯模块及第二IMU惯性导航传感器。
VR头戴一体机310,还具体用于通过内置的第一IMU惯性导航传感器实时采集头部运动的IMU信息,并将头部运动的IMU信息与头部运动的位姿信息进行融合得到头部6DoF运动数据。
双手运动追踪器320和双脚运动追踪器330,还具体用于通过内置的第二IMU惯性导航传感器分别实时采集双手运动的IMU信息和双脚运动的IMU信息,并通过第二无线通讯模块和第一无线通讯模块的配对连接无线传输给VR头戴一体机310;以及,VR头戴一体机310,还用于将双手运动的位姿信息与双手运动的IMU信息进行融合得到双手6DoF运动数据,将双脚运动的位姿信息与双脚运动的IMU信息进行融合得到双脚6DoF运动数据。
在本申请的一个实施例中,VR头戴一体机310,具体用于获取电磁信号接收模组或者超声波信号接收模组相对于第一IMU惯性导航传感器的旋转矩阵和平移向量,通过旋转矩阵和平移向量对双手6DoF运动数据和双脚6DoF运动数据进行坐标系转换,分别转换为以第一IMU惯性导航传感器为原点的6DoF运动数据。
在本申请的一个实施例中,运动训练之前,用户在佩戴上双手运动追踪器320、双脚运动追踪器330和VR头戴一体机310之后,还根据VR头戴一体机中显示的虚拟校准动作做相应的动作。VR头戴一体机310,还用于运动训练之前显示虚拟校准动作,获取运动训练校准数据;以及根据融合后数据和运动训练校准数据,结合反向运动学算法计算出人体不同部位的运动速度、运动角度、每个部位的位移信息,以及每个人体关键部位的运动保持时长。
图5示出了根据本申请一个实施例的一种运动训练系统的结构示意图。如图5所示,该运动训练系统500包括:数据处理服务器510、与数据处理服务器510网络连接的上述的多个VR头戴一体机310。
各个VR头戴一体机310,用于将计算出的自身用户的人体不同部位的运动数据发送给数据处理服务器510;
数据处理服务器510,用于实时接收多个VR头戴一体机310发送的多个用户的人体不同部位的运动数据,通过二次元方式在虚拟现实场景中绘制化身用户,对接收的各个VR头戴一体机的用户数据通过图形处理器GPU实时驱动虚拟用户化身,渲染更新得到多人互动运动场景信息,将多人互动运动场景信息实时发送给各个VR头戴一体机310;
各个VR头戴一体机310,还用于在显示屏上显示多人互动运动场景信息,在虚拟现实场景中实现与其他运动训练用户之间的远程互动。
本实施例的运动训练系统,通过数据处理服务器510和多个与数据处理服务器连接的VR头戴一体机310,在虚拟现实场景中实现运动训练用户之间的远程互动,使运动训练用户之间可以在健身过程中进行互动聊天、分享健身方法、饮食注意事项等话题,提升了健身运动的互动性和趣味性,提升了用户体验,提高了健身效率和效果。
需要说明的是,上述各装置、系统实施例的具体实施方式可以参照前述对应方法实施例的具体实施方式进行,在此不再赘述。
综上所述,本申请的技术方案,通过双手运动追踪器、双脚运动追踪器和VR头戴一体机即可实现对用户动作是否标准以及保持时间是否足够进行判断,并及时反馈到VR头戴一体机中,无需用户佩戴大量的传感器,提升了用户体验。其中,通过头戴追踪摄像头、电磁传感器或超声波传感器与IMU惯性导航传感器相配合,提高了追踪精度和频率,位置偏移误差可达毫米级,旋转角度偏移误差可到1.5°以内,输出频率大于200Hz,可获取到高精度、高频率的运动数据。进一步地,通过将获取的运动数据与标准动作进行对比,在动作不规范的人体部位标注提示信息,可以及时纠正不规范动作,并对错误动作次数、错误动作时间、正确动作的成功平均率、完成动作个数等各项运动指标进行统计,并及时反馈给用户,可以使用户了解动作完成情况,提升了健身效率和效果,而且,利用数据处理服务器各运动训练用户之间还可以进行远程互动,进一步提升了用户体验。
需要说明的是:
在此提供的算法和显示不与任何特定计算机、虚拟装置或者其它设备固有相关。各种通用装置也可以与基于在此的示教一起使用。根据上面的描述,构造这类装置所要求的结构是显而易见的。此外,本申请也不针对任何特定编程语言。应当明白,可以利用各种编程语言实现在此描述的本申请的内容,并且上面对特定语言所做的描述是为了披露本申请的最佳实施方式。
在此处所提供的说明书中,说明了大量具体细节。然而,能够理解,本申请的实施例可以在没有这些具体细节的情况下实践。在一些实例中,并未详细示出公知的方法、结构和技术,以便不模糊对本说明书的理解。
类似地,应当理解,为了精简本申请并帮助理解各个发明方面中的一个或多个,在上面对本申请的示例性实施例的描述中,本申请的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而,并不应将该公开的方法解释成反映如下意图:即所要求保护的本申请要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说,如下面的权利要求书所反映的那样,发明方面在于少于前面公开的单个实施例的所有特征。因此,遵循具体实施方式的权利要求书由此明确地并入该具体实施方式,其中每个权利要求本身都作为本申请的单独实施例。
本领域那些技术人员可以理解,可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件,以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外,可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述,本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
此外,本领域的技术人员能够理解,尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征,但是不同实施例的特征的组合意味着处于本申请的范围之内并且形成不同的实施例。例如,在下面的权利要求书中,所要求保护的实施例的任意之一都可以以任意的组合方式来使用。
本申请的各个部件实施例可以以硬件实现,或者以在一个或者多个处理器上运行的软件模块实现,或者以它们的组合实现。本领域的技术人员应当理解,可以在实践中使用微处理器或者数字信号处理器(DSP)来实现根据本申请实施例的运动训练装置中的一些或者全部部件的一些或者全部功能。本申请还可以实现为用于执行这里所描述的方法的一部分或者全部的设备或者装置程序(例如,计算机程序和计算机程序产品)。这样的实现本申请的程序可以存储在计算机可读介质上,或者可以具有一个或者多个信号的形式。这样的信号可以从因特网网站上下载得到,或者在载体信号上提供,或者以任何其他形式提供。
应该注意的是上述实施例对本申请进行说明而不是对本申请进行限制,并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中,不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本申请可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中,这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。

Claims (10)

1.一种运动训练方法,其特征在于,运动训练之前,在用户双手和用户双脚的指定部位分别佩戴上双手运动追踪器和双脚运动追踪器,并在用户头部佩戴上VR头戴一体机;所述双手运动追踪器和所述双脚运动追踪器分别无线连接所述VR头戴一体机;运动训练过程中,用户根据所述VR头戴一体机中显示的虚拟示范动作做相应的动作,所述方法包括:
所述VR头戴一体机获取自身实时采集的头部6DoF运动数据、所述双手运动追踪器实时采集的双手6DoF运动数据和所述双脚运动追踪器实时采集的双脚6DoF运动数据;
所述VR头戴一体机将所述双手6DoF运动数据和所述双脚6DoF运动数据与所述头部6DoF运动数据进行融合;
所述VR头戴一体机根据融合后数据计算出人体不同部位的运动数据;
所述VR头戴一体机将计算出的人体不同部位的运动数据与运动训练标准数据进行相似度比对,如果相似度大于阈值,则判断人体部位的动作符合规范训练标准,否则,则在所述VR头戴一体机中对动作不规范的人体部位标注提示信息,进行动作规范化纠正。
2.如权利要求1所述的方法,其特征在于,所述VR头戴一体机内置有头戴追踪摄像头、电磁信号接收模组或者超声波信号接收模组;所述双手运动追踪器和所述双脚运动追踪器均内置有电磁传感器和电磁信号发射模组,或者均内置有超声波传感器和超声波信号发射模组;
所述VR头戴一体机获取自身实时采集的头部6DoF运动数据、所述双手运动追踪器实时采集的双手6DoF运动数据和所述双脚运动追踪器实时采集的双脚6DoF运动数据,包括:
所述VR头戴一体机通过内置的头戴追踪摄像头实时采集头部运动的位姿信息;
所述双手运动追踪器和所述双脚运动追踪器通过内置的电磁传感器分别实时采集双手运动的位姿信息和双脚运动的位姿信息,并通过电磁信号发射模组和电磁信号接收模组的配对连接无线传输给所述VR头戴一体机;或者,所述双手运动追踪器和所述双脚运动追踪器通过内置的超声波传感器分别实时采集双手运动的位姿信息和双脚运动的位姿信息,并通过超声波信号发射模组和超声波信号接收模组的配对连接无线传输给所述VR头戴一体机。
3.如权利要求2所述的方法,其特征在于,所述VR头戴一体机还内置有第一无线通讯模块及第一IMU惯性导航传感器;所述双手运动追踪器和所述双脚运动追踪器还均内置有第二无线通讯模块及第二IMU惯性导航传感器;
所述VR头戴一体机获取自身实时采集的头部6DoF运动数据、所述双手运动追踪器实时采集的双手6DoF运动数据和所述双脚运动追踪器实时采集的双脚6DoF运动数据,还包括:
所述VR头戴一体机还通过内置的第一IMU惯性导航传感器实时采集头部运动的IMU信息,并将所述头部运动的IMU信息与所述头部运动的位姿信息进行融合得到所述头部6DoF运动数据;
所述双手运动追踪器和所述双脚运动追踪器还通过内置的第二IMU惯性导航传感器分别实时采集双手运动的IMU信息和双脚运动的IMU信息,并通过第二无线通讯模块和第一无线通讯模块的配对连接无线传输给所述VR头戴一体机;以及,
所述VR头戴一体机将所述双手运动的位姿信息与所述双手运动的IMU信息进行融合得到所述双手6DoF运动数据,将所述双脚运动的位姿信息与所述双脚运动的IMU信息进行融合得到所述双脚6DoF运动数据。
4.如权利要求3所述的方法,其特征在于,所述VR头戴一体机将所述双手6DoF运动数据和所述双脚6DoF运动数据与所述头部6DoF运动数据进行融合,包括:
所述VR头戴一体机获取电磁信号接收模组或者超声波信号接收模组相对于第一IMU惯性导航传感器的旋转矩阵和平移向量,通过所述旋转矩阵和平移向量对所述双手6DoF运动数据和所述双脚6DoF运动数据进行坐标系转换,分别转换为以所述第一IMU惯性导航传感器为原点的6DoF运动数据。
5.如权利要求1-4任一项所述的方法,其特征在于,所述方法还包括:
所述VR头戴一体机还将计算出的人体不同部位的运动数据发送给数据处理服务器;
接收所述数据处理服务器通过图形处理器GPU渲染更新得到的多人互动运动场景信息,在虚拟现实场景中实现与其他运动训练用户之间的远程互动。
6.一种运动训练装置,其特征在于,所述装置包括VR头戴一体机、双手运动追踪器和双脚运动追踪器,所述双手运动追踪器和所述双脚运动追踪器分别无线连接所述VR头戴一体机;运动训练之前,在用户双手和用户双脚的指定部位分别佩戴上所述双手运动追踪器和所述双脚运动追踪器,并在用户头部佩戴上所述VR头戴一体机,运动训练过程中,用户根据所述VR头戴一体机中显示的虚拟示范动作做相应的动作;
所述双手运动追踪器,用于实时采集双手6DoF运动数据,并无线传输给所述VR头戴一体机;
所述双脚运动追踪器,用于实时采集双脚6DoF运动数据,并无线传输给所述VR头戴一体机;
所述VR头戴一体机,用于运动训练过程中显示虚拟示范动作,实时采集头部6DoF运动数据,并获取所述手运动追踪器实时采集的双手6DoF运动数据和所述双脚运动追踪器实时采集的双脚6DoF运动数据;将所述双手6DoF运动数据和所述双脚6DoF运动数据与所述头部6DoF运动数据进行融合;根据融合后数据计算出人体不同部位的运动数据;以及将计算出的人体不同部位的运动数据与运动训练标准数据进行相似度比对,如果相似度大于阈值,则判断人体部位的动作符合规范训练标准,否则,则在所述VR头戴一体机中对动作不规范的人体部位标注提示信息,进行动作规范化纠正。
7.如权利要求6所述的装置,其特征在于,所述VR头戴一体机内置有头戴追踪摄像头、电磁信号接收模组或者超声波信号接收模组;所述双手运动追踪器和所述双脚运动追踪器均内置有电磁传感器和电磁信号发射模组,或者均内置有超声波传感器和超声波信号发射模组;
所述VR头戴一体机,具体用于通过内置的头戴追踪摄像头实时采集头部运动的位姿信息;
所述双手运动追踪器和所述双脚运动追踪器,具体用于通过内置的电磁传感器分别实时采集双手运动的位姿信息和双脚运动的位姿信息,并通过电磁信号发射模组和电磁信号接收模组的配对连接无线传输给所述VR头戴一体机;
或者,所述双手运动追踪器和所述双脚运动追踪器通过内置的超声波传感器分别实时采集双手运动的位姿信息和双脚运动的位姿信息,并通过超声波信号发射模组和超声波信号接收模组的配对连接无线传输给所述VR头戴一体机。
8.如权利要求6所述的装置,其特征在于,所述VR头戴一体机还内置有第一无线通讯模块及第一IMU惯性导航传感器;所述双手运动追踪器和所述双脚运动追踪器还均内置有第二无线通讯模块及第二IMU惯性导航传感器;
所述VR头戴一体机,还具体用于通过内置的第一IMU惯性导航传感器实时采集头部运动的IMU信息,并将所述头部运动的IMU信息与所述头部运动的位姿信息进行融合得到所述头部6DoF运动数据;
所述双手运动追踪器和所述双脚运动追踪器,还具体用于通过内置的第二IMU惯性导航传感器分别实时采集双手运动的IMU信息和双脚运动的IMU信息,并通过第二无线通讯模块和第一无线通讯模块的配对连接无线传输给所述VR头戴一体机;以及,
所述VR头戴一体机,还用于将所述双手运动的位姿信息与所述双手运动的IMU信息进行融合得到所述双手6DoF运动数据,将所述双脚运动的位姿信息与所述双脚运动的IMU信息进行融合得到所述双脚6DoF运动数据。
9.如权利要求8所述的装置,其特征在于,所述VR头戴一体机,具体用于获取电磁信号接收模组或者超声波信号接收模组相对于所述第一IMU惯性导航传感器的旋转矩阵和平移向量,通过所述旋转矩阵和平移向量对所述双手6DoF运动数据和所述双脚6DoF运动数据进行坐标系转换,分别转换为以所述第一IMU惯性导航传感器为原点的6DoF运动数据。
10.一种运动训练系统,其特征在于,所述系统包括:数据处理服务器、与所述数据处理服务器网络连接的多个VR头戴一体机;
各个VR头戴一体机,用于将计算出的自身用户的人体不同部位的运动数据发送给所述数据处理服务器;
所述数据处理服务器,用于实时接收多个VR头戴一体机发送的多个用户的人体不同部位的运动数据,通过二次元方式在虚拟现实场景中绘制化身用户,对接收的各个VR头戴一体机的用户数据通过图形处理器GPU实时驱动虚拟用户化身,渲染更新得到多人互动运动场景信息,将所述多人互动运动场景信息实时发送给各个所述VR头戴一体机;
各个VR头戴一体机,还用于在显示屏上显示所述多人互动运动场景信息,在虚拟现实场景中实现与其他运动训练用户之间的远程互动。
CN202110383654.7A 2021-04-09 2021-04-09 一种运动训练方法、装置和系统 Pending CN113181619A (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202110383654.7A CN113181619A (zh) 2021-04-09 2021-04-09 一种运动训练方法、装置和系统
PCT/CN2022/085321 WO2022213984A1 (zh) 2021-04-09 2022-04-06 一种运动训练方法和系统及一种头戴式vr设备
US17/883,057 US11872468B2 (en) 2021-04-09 2022-08-08 Sport training method and system and head-mounted VR device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110383654.7A CN113181619A (zh) 2021-04-09 2021-04-09 一种运动训练方法、装置和系统

Publications (1)

Publication Number Publication Date
CN113181619A true CN113181619A (zh) 2021-07-30

Family

ID=76975439

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110383654.7A Pending CN113181619A (zh) 2021-04-09 2021-04-09 一种运动训练方法、装置和系统

Country Status (3)

Country Link
US (1) US11872468B2 (zh)
CN (1) CN113181619A (zh)
WO (1) WO2022213984A1 (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113709411A (zh) * 2020-05-21 2021-11-26 陈涛 一种mr智能眼镜基于眼动追踪技术的体育辅助训练系统
CN113778224A (zh) * 2021-08-17 2021-12-10 安克创新科技股份有限公司 姿态矫正方法、装置及智能音频眼镜
CN113867532A (zh) * 2021-09-30 2021-12-31 上海千丘智能科技有限公司 一种基于虚拟现实技能训练的评估系统及评估方法
CN114894253A (zh) * 2022-05-18 2022-08-12 威海众合机电科技有限公司 一种应急视觉智能增强方法、系统及设备
WO2022213984A1 (zh) * 2021-04-09 2022-10-13 青岛小鸟看看科技有限公司 一种运动训练方法和系统及一种头戴式vr设备
TWI811108B (zh) * 2022-02-18 2023-08-01 宏達國際電子股份有限公司 混合實境處理系統及混合實境處理方法

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112416125A (zh) * 2020-11-17 2021-02-26 青岛小鸟看看科技有限公司 Vr头戴式一体机
CN117255188B (zh) * 2023-07-21 2024-03-01 北京行者无疆科技有限公司 Ar眼镜的转换器对于移动终端设备的空间界面显示控制交互系统及方法

Citations (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101910992A (zh) * 2007-11-30 2010-12-08 耐克国际有限公司 用于社交网络服务的交互式体现形式
CN102243687A (zh) * 2011-04-22 2011-11-16 安徽寰智信息科技股份有限公司 一种基于动作识别技术的体育教学辅助系统及其实现方法
CN202662011U (zh) * 2011-04-22 2013-01-09 安徽寰智信息科技股份有限公司 一种基于动作识别技术的体育教学辅助系统
CN103100205A (zh) * 2012-12-12 2013-05-15 徐玉文 一种适用于中小学体育教学评测的辅助装置及其实现方法
CN105396279A (zh) * 2015-04-29 2016-03-16 解瑛 用于实现团体运动成果的系统和方法
CN107281728A (zh) * 2017-08-07 2017-10-24 深圳市科创数字显示技术有限公司 配合传感器的增强现实滑雪辅助训练系统及方法
CN107930013A (zh) * 2017-12-04 2018-04-20 成都思悟革科技有限公司 一种基于自适应随动跑步机的实时交互系统及方法
CN108091380A (zh) * 2017-11-30 2018-05-29 中科院合肥技术创新工程院 基于多传感融合的青少年基本运动能力训练系统及方法
CN108187333A (zh) * 2018-01-29 2018-06-22 南京邮电大学 上肢康复训练中的多惯性节点无线监测与评价系统及方法
CN108786015A (zh) * 2018-06-26 2018-11-13 郑州大学 一种穿戴式手指功能主动康复训练系统
CN109260647A (zh) * 2018-09-10 2019-01-25 郑州大学 基于多模态信号的人体跳跃指标综合评测及训练系统
CN109350923A (zh) * 2018-10-25 2019-02-19 北京机械设备研究所 一种基于vr及多体位传感器的上肢康复训练系统
CN109528203A (zh) * 2019-01-21 2019-03-29 郑州大学 一种基于多源信息融合的交互式脑卒中患者步态训练及评测系统
CN110624217A (zh) * 2019-09-23 2019-12-31 孙孟雯 一种基于多传感器融合的复健手套及其实现方法
CN111135536A (zh) * 2019-12-30 2020-05-12 埃欧健身管理(上海)有限公司 一种用于提供健身提示信息的方法与设备
CN111330214A (zh) * 2020-03-24 2020-06-26 孝感峰创智能科技有限公司 一种vr跑步机的安全防护方法、系统及可读存储介质
CN111803903A (zh) * 2019-04-10 2020-10-23 深圳先进技术研究院 一种健身动作识别方法、系统及电子设备
CN112527102A (zh) * 2020-11-16 2021-03-19 青岛小鸟看看科技有限公司 头戴式一体机系统及其6DoF追踪方法和装置

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6430997B1 (en) * 1995-11-06 2002-08-13 Trazer Technologies, Inc. System and method for tracking and assessing movement skills in multidimensional space
US9240067B2 (en) * 2009-10-15 2016-01-19 Yeda Research & Development Co. Ltd. Animation of photo-images via fitting of combined models
US9283429B2 (en) * 2010-11-05 2016-03-15 Nike, Inc. Method and system for automated personal training
US9352207B2 (en) * 2012-01-19 2016-05-31 Nike, Inc. Action detection and activity classification
US9058663B2 (en) * 2012-04-11 2015-06-16 Disney Enterprises, Inc. Modeling human-human interactions for monocular 3D pose estimation
US9588582B2 (en) * 2013-09-17 2017-03-07 Medibotics Llc Motion recognition clothing (TM) with two different sets of tubes spanning a body joint
US10136840B2 (en) * 2013-10-14 2018-11-27 Nike, Inc. Fitness training system for merging energy expenditure calculations from multiple devices
US10586469B2 (en) * 2015-06-08 2020-03-10 STRIVR Labs, Inc. Training using virtual reality
US11182946B2 (en) * 2015-09-21 2021-11-23 TuringSense Inc. Motion management via conductive threads embedded in clothing material
KR101763404B1 (ko) * 2016-03-28 2017-07-31 (주)한보이앤씨 헤드 마운트 디스플레이 장치를 통해 디스플레이되는 도로 영상의 로드 정보가 헬스 자전거에 부여된 운동 시스템
CN107349573A (zh) * 2016-05-10 2017-11-17 北京环形山网络科技有限公司 基于智能手机和物联网的虚拟现实健身系统
DE202017104928U1 (de) * 2016-08-23 2017-11-24 Google Inc. Manipulation virtueller Objekte anhand von Controllern mit sechs Freiheitsgraden in erweiterten bzw. virtuellen Realitätsumgebungen
CN106422207A (zh) * 2016-09-29 2017-02-22 乐视控股(北京)有限公司 基于虚拟现实的运动训练方法及装置
US10529137B1 (en) * 2016-11-29 2020-01-07 MAX-PLANCK-Gesellschaft zur Förderung der Wissenschaften e.V. Machine learning systems and methods for augmenting images
CN107376302B (zh) * 2017-07-20 2019-04-12 宋宇 一种基于虚拟现实技术的复合弓的模拟射箭的方法及装置
CN110227249A (zh) * 2018-03-05 2019-09-13 义慧科技(深圳)有限公司 一种上肢训练系统
US10416755B1 (en) * 2018-06-01 2019-09-17 Finch Technologies Ltd. Motion predictions of overlapping kinematic chains of a skeleton model used to control a computer system
WO2019226691A1 (en) * 2018-05-22 2019-11-28 Magic Leap, Inc. Transmodal input fusion for a wearable system
US11054638B2 (en) * 2018-06-13 2021-07-06 Reavire, Inc. Tracking pointing direction of device
TWI715903B (zh) * 2018-12-24 2021-01-11 財團法人工業技術研究院 動作追蹤系統及方法
US11145133B2 (en) * 2019-03-27 2021-10-12 Verizon Patent And Licensing Inc. Methods and systems for generating an animated 3D model based on a 2D image
US11017560B1 (en) * 2019-04-15 2021-05-25 Facebook Technologies, Llc Controllable video characters with natural motions extracted from real-world videos
US11409358B2 (en) * 2019-09-12 2022-08-09 New York University System and method for reconstructing a VR avatar with full body pose
US11029753B2 (en) * 2019-11-05 2021-06-08 XRSpace CO., LTD. Human computer interaction system and human computer interaction method
US10705597B1 (en) * 2019-12-17 2020-07-07 Liteboxer Technologies, Inc. Interactive exercise and training system and method
US11213733B1 (en) * 2020-11-05 2022-01-04 Liteboxer Technologies, Inc. Surface interactions in a virtual reality (VR) environment
US11914762B2 (en) * 2020-12-28 2024-02-27 Meta Platforms Technologies, Llc Controller position tracking using inertial measurement units and machine learning
US11221493B1 (en) * 2021-02-03 2022-01-11 Jamaul Baker Virtual reality body suit assembly
US11644890B2 (en) * 2021-02-11 2023-05-09 Qualcomm Incorporated Image capturing in extended reality environments
CN113181619A (zh) * 2021-04-09 2021-07-30 青岛小鸟看看科技有限公司 一种运动训练方法、装置和系统

Patent Citations (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101910992A (zh) * 2007-11-30 2010-12-08 耐克国际有限公司 用于社交网络服务的交互式体现形式
CN102243687A (zh) * 2011-04-22 2011-11-16 安徽寰智信息科技股份有限公司 一种基于动作识别技术的体育教学辅助系统及其实现方法
CN202662011U (zh) * 2011-04-22 2013-01-09 安徽寰智信息科技股份有限公司 一种基于动作识别技术的体育教学辅助系统
CN103100205A (zh) * 2012-12-12 2013-05-15 徐玉文 一种适用于中小学体育教学评测的辅助装置及其实现方法
CN105396279A (zh) * 2015-04-29 2016-03-16 解瑛 用于实现团体运动成果的系统和方法
CN107281728A (zh) * 2017-08-07 2017-10-24 深圳市科创数字显示技术有限公司 配合传感器的增强现实滑雪辅助训练系统及方法
CN108091380A (zh) * 2017-11-30 2018-05-29 中科院合肥技术创新工程院 基于多传感融合的青少年基本运动能力训练系统及方法
CN107930013A (zh) * 2017-12-04 2018-04-20 成都思悟革科技有限公司 一种基于自适应随动跑步机的实时交互系统及方法
CN108187333A (zh) * 2018-01-29 2018-06-22 南京邮电大学 上肢康复训练中的多惯性节点无线监测与评价系统及方法
CN108786015A (zh) * 2018-06-26 2018-11-13 郑州大学 一种穿戴式手指功能主动康复训练系统
CN109260647A (zh) * 2018-09-10 2019-01-25 郑州大学 基于多模态信号的人体跳跃指标综合评测及训练系统
CN109350923A (zh) * 2018-10-25 2019-02-19 北京机械设备研究所 一种基于vr及多体位传感器的上肢康复训练系统
CN109528203A (zh) * 2019-01-21 2019-03-29 郑州大学 一种基于多源信息融合的交互式脑卒中患者步态训练及评测系统
CN111803903A (zh) * 2019-04-10 2020-10-23 深圳先进技术研究院 一种健身动作识别方法、系统及电子设备
CN110624217A (zh) * 2019-09-23 2019-12-31 孙孟雯 一种基于多传感器融合的复健手套及其实现方法
CN111135536A (zh) * 2019-12-30 2020-05-12 埃欧健身管理(上海)有限公司 一种用于提供健身提示信息的方法与设备
CN111330214A (zh) * 2020-03-24 2020-06-26 孝感峰创智能科技有限公司 一种vr跑步机的安全防护方法、系统及可读存储介质
CN112527102A (zh) * 2020-11-16 2021-03-19 青岛小鸟看看科技有限公司 头戴式一体机系统及其6DoF追踪方法和装置

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113709411A (zh) * 2020-05-21 2021-11-26 陈涛 一种mr智能眼镜基于眼动追踪技术的体育辅助训练系统
WO2022213984A1 (zh) * 2021-04-09 2022-10-13 青岛小鸟看看科技有限公司 一种运动训练方法和系统及一种头戴式vr设备
US11872468B2 (en) 2021-04-09 2024-01-16 Qingdao Pico Technology Co., Ltd. Sport training method and system and head-mounted VR device
CN113778224A (zh) * 2021-08-17 2021-12-10 安克创新科技股份有限公司 姿态矫正方法、装置及智能音频眼镜
CN113867532A (zh) * 2021-09-30 2021-12-31 上海千丘智能科技有限公司 一种基于虚拟现实技能训练的评估系统及评估方法
TWI811108B (zh) * 2022-02-18 2023-08-01 宏達國際電子股份有限公司 混合實境處理系統及混合實境處理方法
CN114894253A (zh) * 2022-05-18 2022-08-12 威海众合机电科技有限公司 一种应急视觉智能增强方法、系统及设备

Also Published As

Publication number Publication date
US20230001283A1 (en) 2023-01-05
WO2022213984A1 (zh) 2022-10-13
US11872468B2 (en) 2024-01-16

Similar Documents

Publication Publication Date Title
CN113181619A (zh) 一种运动训练方法、装置和系统
JP6938542B2 (ja) 組込みセンサと外界センサとを組み合わせる多関節トラッキングのための方法およびプログラム製品
US11037369B2 (en) Virtual or augmented reality rehabilitation
US10755466B2 (en) Method and apparatus for comparing two motions
CN107330967B (zh) 基于惯性传感技术的骑师运动姿态捕捉及三维重建系统
US20200126284A1 (en) Motion control based on artificial intelligence
US11210834B1 (en) Article of clothing facilitating capture of motions
US20200105041A1 (en) Method and system for providing real-time feedback in performing motions
EP0959444A1 (en) Method for following and imaging a subject's three-dimensional position and orientation, method for presenting a virtual space to a subject, and systems for implementing said methods
CN106843507B (zh) 一种虚拟现实多人互动的方法及系统
US20130171596A1 (en) Augmented reality neurological evaluation method
RU2107328C1 (ru) Способ отслеживания и отображения положения и ориентации пользователя в пространстве и система для осуществления способа
US11798216B2 (en) Motion detection method and system
US20090303179A1 (en) Kinetic Interface
JP2018512980A (ja) 複数のエキスパート知識のバリエーションを持つコンテンツを含む、インタラクティブスキルトレーニングコンテンツの配信を可能にするように構成されるフレームワーク、デバイスおよび方法
JP2021512388A (ja) 拡張現実のためのシステムおよび方法
US11112857B2 (en) Information processing apparatus, information processing method, and program
KR20150101629A (ko) 태권도 품새 판독 및 교육 장치 및 그 방법
CN109545003A (zh) 一种显示方法、装置、终端设备及存储介质
US11682157B2 (en) Motion-based online interactive platform
CN206819290U (zh) 一种虚拟现实多人互动的系统
KR20060109762A (ko) 온라인 운동자세 교정시스템
TWM582409U (zh) Virtual reality underwater training device
GB2575299A (en) Method and system for directing and monitoring exercise
CN107065599A (zh) 基于体感交互的轮式机器人运动仿真系统与方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20210730

RJ01 Rejection of invention patent application after publication