CN107080932A - 基于人脸识别及动作捕捉的康复锻炼方法和系统 - Google Patents

基于人脸识别及动作捕捉的康复锻炼方法和系统 Download PDF

Info

Publication number
CN107080932A
CN107080932A CN201710332998.9A CN201710332998A CN107080932A CN 107080932 A CN107080932 A CN 107080932A CN 201710332998 A CN201710332998 A CN 201710332998A CN 107080932 A CN107080932 A CN 107080932A
Authority
CN
China
Prior art keywords
guiding
user
face
recognition
motion capture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710332998.9A
Other languages
English (en)
Inventor
秦路
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201710332998.9A priority Critical patent/CN107080932A/zh
Publication of CN107080932A publication Critical patent/CN107080932A/zh
Pending legal-status Critical Current

Links

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619—Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0622—Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B22/00—Exercising apparatus specially adapted for conditioning the cardio-vascular system, for training agility or co-ordination of movements
    • A63B22/02—Exercising apparatus specially adapted for conditioning the cardio-vascular system, for training agility or co-ordination of movements with movable endless bands, e.g. treadmills
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00—Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0062—Monitoring athletic performances, e.g. for determining the work of a user on an exercise apparatus, the completed jogging or cycling distance
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00—Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0087—Electric or electronic controls for exercising apparatus of groups A63B21/00 - A63B23/00, e.g. controlling load
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B22/00—Exercising apparatus specially adapted for conditioning the cardio-vascular system, for training agility or co-ordination of movements
    • A63B22/02—Exercising apparatus specially adapted for conditioning the cardio-vascular system, for training agility or co-ordination of movements with movable endless bands, e.g. treadmills
    • A63B2022/0271—Exercising apparatus specially adapted for conditioning the cardio-vascular system, for training agility or co-ordination of movements with movable endless bands, e.g. treadmills omnidirectional
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619—Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0622—Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
    • A63B2071/0638—Displaying moving images of recorded environment, e.g. virtual environment
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00—Measuring of physical parameters relating to sporting activity
    • A63B2220/80—Special sensors, transducers or devices therefor
    • A63B2220/806—Video cameras
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2230/00—Measuring physiological parameters of the user
    • A63B2230/62—Measuring physiological parameters of the user posture
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1087—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Vascular Medicine (AREA)
  • Cardiology (AREA)
  • Rehabilitation Tools (AREA)

Abstract

本发明提供了一种基于人脸识别及动作捕捉的康复锻炼方法和系统。其方法包括：S1：接收用户选择和/或输入的引导要求，并根据该引导要求提供用于引导用户做相应肢体动作的虚拟场景；S2：获取通过体感互动设备捕捉到的用户肢体动作，同时控制虚拟场景根据用户的肢体动作做出相应的反馈；S3：在控制虚拟场景根据用户的肢体动作做出相应的反馈后，重复步骤S2。本发明的优点在于：更具有针对性，提供针对不同目的、疾病以及部位的引导功能，满足不同用户的需要，具有实用性更强，适用性更广等优点。

Description

基于人脸识别及动作捕捉的康复锻炼方法和系统
技术领域
本发明属于康复锻炼领域，尤其涉及一种基于人脸识别及动作捕捉的康复锻炼方法和系统。
背景技术
研究表明，运动锻炼不仅对身体形态和机能有很大作用，对人的心智发展的作用也是不可估量的。然而由于现代人快节奏的生活，以及受运动场所和环境的限制，甚至本身就对运动锻炼兴趣缺乏等种种因素导致现代人严重缺乏运动锻炼，从而引发各种疾病，以及患有疾病以后康复锻炼的方式或装置不够完善，使患者得不到很好的治疗。
为解决上述技术问题，人们进行了长期的探索，例如中国专利公开了一种多模态融合手功能康复训练与智能评估系统[申请号：CN105963926A]，包括康复训练机构、传感器数据采集装置、康复评估系统以及情景互动游戏系统，康复训练机构用于对手指和手腕进行康复训练，传感器数据采集装置用于实时采集表面肌电信号、力信号以及姿态信号中的一种或多种信号，康复评估系统根据传感器数据采集装置采集的多模态信号对患者的康复训练情况进行量化评估，情景互动游戏系统用于为患者提供游戏康复训练、效果评估和视觉等信息反馈。本方案针对脑卒中患者康复训练，可以对康复训练过程进行实时反馈调控、量化评估和游戏反馈，有效调动其训练积极性，增强康复训练效果。
上述技术方案虽然在一定程度上提高脑卒患者的手功能康复训练效果，但是其仍然存在不足，例如功能过少，且无法适用于健康人的运动锻炼等。
发明内容
本发明的目的是针对上述问题，提供一种能够有针对性地对用户进行引导锻炼的基于人脸识别及动作捕捉的康复锻炼方法；
本发明的另一目的是针对上述问题，提供一种基于基于人脸识别及动作捕捉的康复锻炼方法的基于人脸识别及动作捕捉的康复锻炼系统；
为达到上述目的，本发明采用了下列技术方案：
一种基于人脸识别及动作捕捉的康复锻炼方法，包括如下步骤：
S1：接收用户选择和/或输入的引导要求，并根据该引导要求提供用于引导用户做相应肢体动作的虚拟场景；
S2：获取通过体感互动设备捕捉到的用户肢体动作，同时控制虚拟场景根据用户的肢体动作做出相应的反馈；
S3：在控制虚拟场景根据用户的肢体动作做出相应的反馈后，重复步骤S2。
在上述的基于人脸识别及动作捕捉的康复锻炼方法中，在步骤S1中，根据用户的引导要求，提供包括针对疾病康复的引导、针对肢体锻炼的引导以及针对锻炼目的的引导中的任意一种或多种组合的虚拟场景。
通过上述技术方案，根据用户需求提供虚拟场景以引导用户完成相应动作达到锻炼目的，具有操作方便，且针对性以及功能性强等优势。
在上述的基于人脸识别及动作捕捉的康复锻炼方法中，所述的针对疾病康复的引导包括颈椎疾病康复引导、偏瘫疾病康复引导、风湿疾病康复引导和中风病人康复引导中的任意一种或多种的组合。
在上述的基于人脸识别及动作捕捉的康复锻炼方法中，所述的针对肢体锻炼的引导包括腿部锻炼引导、腹部锻炼引导、颈椎锻炼引导、大腿锻炼引导、小腿锻炼引导、关节锻炼引导和全身锻炼引导中的任意一种或多种的组合。
在上述的基于人脸识别及动作捕捉的康复锻炼方法中，所述的颈椎锻炼引导包括以下步骤：
A、控制器针对颈椎锻炼构建一个需要扭动脖子的虚拟场景；
B、控制器接收通过摄像头记录用户根据场景需要扭动脖子的图像，并将图像信息上传至控制器；
C、控制器根据人脸识别算法识别人脸位置，并根据计算结果控制虚拟场景做出相应的反馈；
D、在控制器控制虚拟场景做出相应的反馈后，重复步骤B和步骤C。
在上述的基于人脸识别及动作捕捉的康复锻炼方法中，在步骤S2中，所述的虚拟场景为具有供用户选择的闯关模式和训练模式的游戏场景，且在一轮游戏结束后对当前用户表现做出评分，并在接收到用户的分享请求后将评分结果分享到第三方平台中。
一种基于所述的基于人脸识别及动作捕捉的康复锻炼方法的基于人脸识别及动作捕捉的康复锻炼系统，所述的系统包括分别与控制器相连接的虚拟现实设备和体感互动设备，所述的控制器包括用于构建针对相应引导要求以引导用户做相应动作的虚拟场景的引导模块，所述的虚拟现实设备包括用于显示虚拟场景的显示模块。
在上述的基于人脸识别及动作捕捉的康复锻炼系统中，所述的系统还包括通过无线模块连接于控制器的客户端模块，且所述的客户端模块包括分享模块和评分模块。
在上述的基于人脸识别及动作捕捉的康复锻炼系统中，所述的体感互动设备包括用于记录用户头部动作的摄像头模块，所述的控制器连接有用于分析脸部位置的人脸识别模块。
在上述的基于人脸识别及动作捕捉的康复锻炼系统中，所述的系统还包括连接于控制器用于供用户长距离移动的万向跑步机，所述的体感互动设备包括用于捕捉用户肢体动作的Kinect体感互动设备。
本发明基于人脸识别及动作捕捉的康复锻炼方法和系统相较于现有技术具有以下优点：1、利用虚拟现实设备等，让用户沉浸在虚拟世界中，让用户在虚拟世界中体验的同时不知不觉达到相应部位的锻炼目的；2、结合万向跑步机使用户可以自由移动；3、更具有针对性，提供针对不同目的、疾病以及部位的引导功能，满足不同用户的需要，具有实用性更强，适用性更广等优点。
附图说明
图1是本发明实施例一的系统结构框图；
图2是本发明实施例二的系统结构框图；
图3是本发明实施例三的系统结构框图。
附图标记：控制器1；引导模块11；人脸识别模块12；虚拟现实设备2；显示模块21；体感互动设备3；摄像头模块31；客户端模块4；分享模块41；评分模块42；万向跑步机5。
具体实施方式
以下是本发明的优选实施例并结合附图，对本发明的技术方案作进一步的描述，但本发明并不限于这些实施例。
实施例一
如图1所示，本实施例的基于人脸识别及动作捕捉的康复锻炼系统包括分别与控制器1相连接的虚拟现实设备2和体感互动设备3，其中虚拟现实设备用于显示虚拟场景，体感互动设备用于捕捉用户肢体动作，控制器1包括用于构建针对相应引导要求，以引导用户做相应动作的虚拟场景的引导模块11，虚拟现实设备2包括用于显示虚拟场景的显示模块21。
本实施例中的虚拟现实设备2可以为DK2，CV1，HTC VIVE等具有头部动作捕捉功能的虚拟显示设备对用户的头部动作进行进一步捕捉,本实施例中的体感互动设备3采用用于捕捉用户肢体动作的Kinect V2体感互动设备。
通过上述的康复锻炼系统进行康复锻炼方法，包括如下步骤：
S1：通过控制器1接收用户选择和/或输入的引导要求，并根据该引导要求控制虚拟现实设备2提供用于引导用户做有益于相应疾病、或达到相应锻炼目的肢体动作的虚拟场景；
提供虚拟场景的方法具体包括：根据用户的引导要求，提供包括针对疾病康复的引导、针对肢体锻炼的引导以及针对锻炼目的的引导中的任意一种或多种组合的虚拟场景。
其中，针对疾病康复的引导包括颈椎疾病康复引导、偏瘫疾病康复引导、风湿疾病康复引导和中风病人康复引导中的任意一种或多种的组合；
同样地，针对肢体锻炼的引导包括腿部锻炼引导、腹部锻炼引导、颈椎锻炼引导、大腿锻炼引导、小腿锻炼引导、关节锻炼引导和全身锻炼引导中的任意一种或多种的组合；
同样地，针对锻炼目的的引导包括腹部瘦身目的引导、臀部瘦身目的引导、大腿瘦身目的引导、全身平衡锻炼目的引导等。
S2：控制器1获取通过体感互动设备3捕捉用户肢体动作，同时控制虚拟场景根据用户的肢体动作做出相应的反馈，控制虚拟场景根据用户的肢体动作做出相应的反馈具体指：当体感互动设备3感应到用户跟随引导完成一个动作后，控制器1便控制虚拟场景进入下一个引导动作同时告知用户在上一个动作中的完成情况以及在下一个动作中需要注意的地方等反馈信息。
进一步地，在控制虚拟场景根据用户的肢体动作做出相应的反馈后，重复步骤S2，以使用户持续不断地与场景不停地互动。
本实施例基于虚拟现实技术构建虚拟场景引导用户进行肢体活动，利用动作捕捉技术捕捉用户肢体动作来与虚拟场景交互，以达到普通锻炼和康复锻炼的目的。
实施例二
如图2所示，本实施例与实施例一类似，不同之处在于，本实施例的系统还包括通过无线模块连接于控制器1的客户端模块4，且客户端模块4包括分享模块41和评分模块42。本实施例的控制器1和客户端模块4均内嵌于手机等终端，通过手机等终端完成动作引导，此时，虚拟现实设备2可以为头戴式手机用VR以与手机内的控制器1进行连接，或者，虚拟现实设备2通过终端的显示屏显示虚拟场景，本系统的体感互动设备3可以为终端本身具有的摄像头模块，进一步地，体感互动设备3包括用于记录用户头部动作的摄像头模块31。
优选地，为了更好地识别人脸部位置，控制器1连接有用于分析脸部位置的人脸识别模块12。
本实施例的康复锻炼系统的虚拟场景为具有供用户选择的闯关模式和训练模式的游戏场景，且在一轮游戏结束后通过评分模块对当前用户表现做出评分，并在接收到用户的分享请求后通过分享模块将评分结果分享到第三方平台中。
例如，本实施例的系统可用于颈椎锻炼引导，其具体包括以下步骤：
A、用户通过客户端模块输入相关的引导要求等参数，通过客户端模块将引导要求等参数发送给控制模块，控制器1针对颈椎锻炼控制虚拟现实设备2构建一个需要扭动脖子的虚拟场景，即在终端屏幕上显示需要扭动脖子的游戏场景，例如用户通过晃动头部去控制游戏场景中的小狗的头部去吃掉落下来的食物，并且躲避掉落的盘子以达到活动用户脖子的目的；
B、开始游戏后，控制器1接收通过摄像头记录用户根据场景需要扭动脖子的图像，并将图像信息上传至控制器1；
C、控制器1根据人脸识别算法识别人脸位置，并根据计算结果控制虚拟场景做出相应的反馈；
进一步地，在控制器1控制虚拟场景做出相应的反馈后，重复步骤B和步骤C，以使用户与系统持续进行互动。
游戏结束后，系统根据用户表现进行评分，用户可以将评分分享到社交软件中，例如微信朋友圈、微博等。
除此之外，用户的评分被记录在系统的服务器内，客户端模块中还可以包括排行榜，用户通过选择排行榜进入排行榜界面，客户端模块展示分数前十名的用户的数据，以及当前用户的历史最佳分数和排名等，
本实施例将康复锻炼系统可通过手机等终端实现功能，具有普及面广，成本低等优点。
实施例三
如图3所示，本实施例与实施例一或实施例二类似，不同之处在于，本实施例的系统还包括有连接于控制器1用于供用户长距离移动的万向跑步机5。
用户的锻炼动作在万向跑步机5上进行，万向跑步机5将用户在真实世界中的行走、跑步等动作，变成虚拟空间里的相应运动。
本实施例通过结合万向跑步机5使用户可进行各种运动，适用范围更加广泛。
本文中所描述的具体实施例仅仅是对本发明精神作举例说明。本发明所属技术领域的技术人员可以对所描述的具体实施例做各种各样的修改或补充或采用类似的方式替代，但并不会偏离本发明的精神或者超越所附权利要求书所定义的范围。
尽管本文较多地使用了控制器1；引导模块11；人脸识别模块12；虚拟现实设备2；显示模块21；体感互动设备3；摄像头模块31；客户端模块4；分享模块41；评分模块42；万向跑步机5等术语，但并不排除使用其它术语的可能性。使用这些术语仅仅是为了更方便地描述和解释本发明的本质；把它们解释成任何一种附加的限制都是与本发明精神相违背的。

Claims (10)

1.一种基于人脸识别及动作捕捉的康复锻炼方法，其特征在于，包括如下步骤：
S1：接收用户选择和/或输入的引导要求，并根据该引导要求提供用于引导用户做相应肢体动作的虚拟场景；
S2：获取通过体感互动设备(3)捕捉到的用户肢体动作，同时控制虚拟场景根据用户的肢体动作做出相应的反馈；
S3：在控制虚拟场景根据用户的肢体动作做出相应的反馈后，重复步骤S2。
2.根据权利要求1所述的基于人脸识别及动作捕捉的康复锻炼方法，其特征在于，在步骤S1中，根据用户的引导要求，提供包括针对疾病康复的引导、针对肢体锻炼的引导以及针对锻炼目的的引导中的任意一种或多种组合的虚拟场景。
3.根据权利要求2所述的基于人脸识别及动作捕捉的康复锻炼方法，其特征在于，所述的针对疾病康复的引导包括颈椎疾病康复引导、偏瘫疾病康复引导、风湿疾病康复引导和中风病人康复引导中的任意一种或多种的组合。
4.根据权利要求2所述的基于人脸识别及动作捕捉的康复锻炼方法，其特征在于，所述的针对肢体锻炼的引导包括腿部锻炼引导、腹部锻炼引导、颈椎锻炼引导、大腿锻炼引导、小腿锻炼引导、关节锻炼引导和全身锻炼引导中的任意一种或多种的组合。
5.根据权利要求4所述的基于人脸识别及动作捕捉的康复锻炼方法，其特征在于，所述的颈椎锻炼引导包括以下步骤：
A、控制器(1)针对颈椎锻炼构建一个需要扭动脖子的虚拟场景；
B、控制器(1)接收通过摄像头记录用户根据场景需要扭动脖子的图像，并将图像信息上传至控制器(1)；
C、控制器(1)根据人脸识别算法识别人脸位置，并根据计算结果控制虚拟场景做出相应的反馈；
D、在控制器(1)控制虚拟场景做出相应的反馈后，重复步骤B和步骤C。
6.根据权利要求1或5所述的基于人脸识别及动作捕捉的康复锻炼方法，其特征在于，在步骤S2中，所述的虚拟场景为具有供用户选择的闯关模式和训练模式的游戏场景，且在一轮游戏结束后对当前用户表现做出评分，并在接收到用户的分享请求后将评分结果分享到第三方平台中。
7.一种基于权利要求1-6任意一项所述的基于人脸识别及动作捕捉的康复锻炼方法的基于人脸识别及动作捕捉的康复锻炼系统，其特征在于，所述的系统包括分别与控制器(1)相连接的虚拟现实设备(2)和体感互动设备(3)，所述的控制器(1)包括用于构建针对相应引导要求以引导用户做相应动作的虚拟场景的引导模块(11)，所述的虚拟现实设备(2)包括用于显示虚拟场景的显示模块(21)。
8.根据权利要求7所述的基于人脸识别及动作捕捉的康复锻炼系统，其特征在于，所述的系统还包括通过无线模块连接于控制器(1)的客户端模块(4)，且所述的客户端模块(4)包括分享模块(41)和评分模块(42)。
9.根据权利要求8所述的基于人脸识别及动作捕捉的康复锻炼系统，其特征在于，所述的体感互动设备(3)包括用于记录用户头部动作的摄像头模块(31)，所述的控制器(1)连接有用于分析脸部位置的人脸识别模块(12)。
10.根据权利要求7所述的基于人脸识别及动作捕捉的康复锻炼系统，其特征在于，所述的系统还包括连接于控制器(1)用于供用户长距离移动的万向跑步机(5)，所述的体感互动设备(3)包括用于捕捉用户肢体动作的Kinect体感互动设备。
CN201710332998.9A 2017-05-12 2017-05-12 基于人脸识别及动作捕捉的康复锻炼方法和系统 Pending CN107080932A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710332998.9A CN107080932A (zh) 2017-05-12 2017-05-12 基于人脸识别及动作捕捉的康复锻炼方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710332998.9A CN107080932A (zh) 2017-05-12 2017-05-12 基于人脸识别及动作捕捉的康复锻炼方法和系统

Publications (1)

Publication Number Publication Date
CN107080932A true CN107080932A (zh) 2017-08-22

Family

ID=59612962

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710332998.9A Pending CN107080932A (zh) 2017-05-12 2017-05-12 基于人脸识别及动作捕捉的康复锻炼方法和系统

Country Status (1)

Country Link
CN (1) CN107080932A (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107803012A (zh) * 2017-09-21 2018-03-16 上海菜猫健康管理有限公司 适用于训练场地的动态交互式动作控制系统与方法及介质
CN108379817A (zh) * 2018-04-03 2018-08-10 杭州心景科技有限公司 肢体康复训练系统及方法
CN108469900A (zh) * 2018-03-29 2018-08-31 北京微播视界科技有限公司 信息触发方法、装置、系统及服务器
CN109276847A (zh) * 2018-04-03 2019-01-29 李红军 大数据控制方法
CN110415357A (zh) * 2019-04-09 2019-11-05 杨瀚博 一种基于虚拟现实和扩增实境的互动训练监控方法
CN111297370A (zh) * 2020-03-24 2020-06-19 成都翡铭科技有限公司 颈椎本体感觉评估方法
CN111316313A (zh) * 2017-11-06 2020-06-19 松下知识产权经营株式会社 整理辅助系统、整理辅助方法以及程序
CN113813547A (zh) * 2021-10-27 2021-12-21 北京觅淘智联科技有限公司 一种情景式锻炼装置和相应的方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140188257A1 (en) * 2012-12-27 2014-07-03 Casio Computer Co., Ltd. Exercise information display system, exercise information display method, and computer-readable storage medium having exercise information display program stored thereon
CN103977539A (zh) * 2014-05-14 2014-08-13 首都医科大学 颈椎康复保健辅助训练系统
CN104258539A (zh) * 2014-09-04 2015-01-07 燕山大学 一种基于虚拟现实和肢体动作交互的老人康复与监护系统
CN104874152A (zh) * 2015-06-11 2015-09-02 苏州百源软件设计有限公司 万向跑步运动器械
CN104983426A (zh) * 2015-05-27 2015-10-21 蝶和科技（中国）有限公司 虚拟现实床旁康复训练系统及方法
CN204952205U (zh) * 2015-08-12 2016-01-13 毛颖 一种头戴式组合健身系统
CN105833462A (zh) * 2016-03-31 2016-08-10 乐视控股（北京）有限公司 跑步机控制的方法及装置
CN106139519A (zh) * 2016-07-29 2016-11-23 韩莹光 一种混合现实万向跑步机及其应用方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140188257A1 (en) * 2012-12-27 2014-07-03 Casio Computer Co., Ltd. Exercise information display system, exercise information display method, and computer-readable storage medium having exercise information display program stored thereon
CN103977539A (zh) * 2014-05-14 2014-08-13 首都医科大学 颈椎康复保健辅助训练系统
CN104258539A (zh) * 2014-09-04 2015-01-07 燕山大学 一种基于虚拟现实和肢体动作交互的老人康复与监护系统
CN104983426A (zh) * 2015-05-27 2015-10-21 蝶和科技（中国）有限公司 虚拟现实床旁康复训练系统及方法
CN104874152A (zh) * 2015-06-11 2015-09-02 苏州百源软件设计有限公司 万向跑步运动器械
CN204952205U (zh) * 2015-08-12 2016-01-13 毛颖 一种头戴式组合健身系统
CN105833462A (zh) * 2016-03-31 2016-08-10 乐视控股（北京）有限公司 跑步机控制的方法及装置
CN106139519A (zh) * 2016-07-29 2016-11-23 韩莹光 一种混合现实万向跑步机及其应用方法

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107803012A (zh) * 2017-09-21 2018-03-16 上海菜猫健康管理有限公司 适用于训练场地的动态交互式动作控制系统与方法及介质
CN111316313A (zh) * 2017-11-06 2020-06-19 松下知识产权经营株式会社 整理辅助系统、整理辅助方法以及程序
CN108469900A (zh) * 2018-03-29 2018-08-31 北京微播视界科技有限公司 信息触发方法、装置、系统及服务器
CN108379817A (zh) * 2018-04-03 2018-08-10 杭州心景科技有限公司 肢体康复训练系统及方法
CN109276847A (zh) * 2018-04-03 2019-01-29 李红军 大数据控制方法
CN110415357A (zh) * 2019-04-09 2019-11-05 杨瀚博 一种基于虚拟现实和扩增实境的互动训练监控方法
CN111297370A (zh) * 2020-03-24 2020-06-19 成都翡铭科技有限公司 颈椎本体感觉评估方法
CN113813547A (zh) * 2021-10-27 2021-12-21 北京觅淘智联科技有限公司 一种情景式锻炼装置和相应的方法

Similar Documents

Publication Publication Date Title
CN107080932A (zh) 基于人脸识别及动作捕捉的康复锻炼方法和系统
US10950336B2 (en) System and method for pre-action training and control
US11944446B2 (en) Apparatus, method, and system for pre-action therapy
EP3901961A1 (en) Hardware/software system for the rehabilitation of patients with cognitive impairments of the upper extremities after stroke
Desai et al. Augmented reality-based exergames for rehabilitation
CN111091890B (zh) 自我激励与反馈控制下的健康认知系统
US20140081432A1 (en) Method and Apparatus for Rehabilitation Using Adapted Video Games
CN109907936A (zh) 基于虚拟现实的上肢康复训练设备
Palaniappan et al. Developing rehabilitation practices using virtual reality exergaming
CN111773539A (zh) 一种基于实景与虚拟场景结合的神经康复训练装置
CN108785975A (zh) 结合虚拟现实技术的抗阻训练装置及方法
Oña et al. Towards a framework for rehabilitation and assessment of upper limb motor function based on serious games
Ding et al. Kinect-based virtual rehabilitation and evaluation system for upper limb disorders: A case study
Santos et al. Kinematic parameters after repeated swimming efforts in higher and lower proficiency swimmers and para-swimmers
Martins et al. Application for physiotherapy and tracking of patients with neurological diseases-preliminary studies
Kolivand et al. Review on augmented reality technology
KR20210014085A (ko) 환자의 상태를 기반으로 하는 훈련 제공 방법
CN207137304U (zh) 基于人脸识别及动作捕捉的康复锻炼系统
CN115054903A (zh) 一种用于脑卒中患者主动康复的虚拟游戏康复系统及方法
CN111450511A (zh) 一种脑卒中的肢体功能评估和康复训练系统及方法
Lin et al. An upper extremity rehabilitation system using virtual reality technology
Vogiatzaki et al. Telemedicine system for game-based rehabilitation of stroke patients in the FP7-“StrokeBack” project
US20150064662A1 (en) Device and method for treating abnormal muscle function
Friedrich et al. Serious Games for Home-based Stroke Rehabilitation.
Pham et al. Game-based virtual rehabilitation system for upper extremity using low-cost camera

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170822