CN107485826B - 基于虚拟现实技术的手部康复训练系统 - Google Patents

基于虚拟现实技术的手部康复训练系统 Download PDF

Info

Publication number
CN107485826B
CN107485826B CN201710627299.7A CN201710627299A CN107485826B CN 107485826 B CN107485826 B CN 107485826B CN 201710627299 A CN201710627299 A CN 201710627299A CN 107485826 B CN107485826 B CN 107485826B
Authority
CN
China
Prior art keywords
data
module
game
user
virtual reality
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710627299.7A
Other languages
English (en)
Other versions
CN107485826A (zh
Inventor
陈晓娟
吴洁
宫玉琳
曲畅
王�华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Changchun University of Science and Technology
Original Assignee
Changchun University of Science and Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Changchun University of Science and Technology filed Critical Changchun University of Science and Technology
Priority to CN201710627299.7A priority Critical patent/CN107485826B/zh
Publication of CN107485826A publication Critical patent/CN107485826A/zh
Application granted granted Critical
Publication of CN107485826B publication Critical patent/CN107485826B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B23/00Exercising apparatus specially adapted for particular parts of the body
    • A63B23/035Exercising apparatus specially adapted for particular parts of the body for limbs, i.e. upper or lower limbs, e.g. simultaneously
    • A63B23/12Exercising apparatus specially adapted for particular parts of the body for limbs, i.e. upper or lower limbs, e.g. simultaneously for upper limbs or related muscles, e.g. chest, upper back or shoulder muscles
    • A63B23/16Exercising apparatus specially adapted for particular parts of the body for limbs, i.e. upper or lower limbs, e.g. simultaneously for upper limbs or related muscles, e.g. chest, upper back or shoulder muscles for hands or fingers
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0622Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/21Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/212Input arrangements for video game devices characterised by their sensors, purposes or types using sensors worn by the player, e.g. for measuring heart beat or leg activity
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25Output arrangements for video game devices
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/80Special adaptations for executing a specific game genre or game mode
    • A63F13/814Musical performances, e.g. by evaluating the player's ability to follow a notation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • General Health & Medical Sciences (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Orthopedic Medicine & Surgery (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Biophysics (AREA)
  • Cardiology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Rehabilitation Tools (AREA)

Abstract

基于虚拟现实技术的手部康复训练系统,涉及一种虚拟现实技术应用于康复医学领域,解决现有采用康复器材进行康复训练过程中,康复器只能起到被动式辅助性训练,导致训练效果差的问题,包括数据采集装置、数据处理系统和虚拟现实人机交互系统;所述数据采集装置用于获取手部的位置、移动状态以及手指位置的数据信息,并通过网络模块传至数据处理系统处理,虚拟现实人机交互系统提供用户手部康复训练的虚拟游戏界面;为用户提供指导说明,显示分数的消息,同时接收通知触发模块以及音频显示器的信息。本发明通过穿戴手套传感器采集用户活动手的运动与位置信息,以及运行有虚拟现实游戏界面增强康复训练。

Description

基于虚拟现实技术的手部康复训练系统
技术领域
本发明涉及一种虚拟现实技术应用于康复医学领域,具体涉及一种基于虚拟现实的手部康复训练系统。
背景技术
脑卒中又称“中风”、“脑血管意外”是一种急性脑血管疾病,具有发病率高、死亡率高和致残率高的特点。如今,全球有1500万人患有中风,用户发病后多伴有不同程度的残疾,因此脑卒中用户的康复治疗显得尤为重要。传统的康复治疗通常是在医院或者社区康复中由康复医师制定康复计划,利用医疗康复器材进行被动式辅助性康复训练,其康复治疗过程单调、枯燥,用户难以产生兴趣,治疗效果也不尽人意。
近年来,随着虚拟现实技术的广泛应用,将虚拟现实技术引入人的肢体康复治疗中已成为研究热点。虚拟现实技术由软件提供多种人工景物,如同置身于游戏之中,在用户使用虚拟现实技术进行康复治疗时,可以明显地感受到自己在动作技能、平衡、肌肉张力、躯干控制等方面的提高,使治疗过程充满乐趣,提高用户的乐观情绪。
发明内容
本发明为解决现有采用康复器材进行康复训练过程中,康复器只能起到被动式辅助性训练,导致训练效果差的问题,提供一种基于虚拟现实技术的手部康复系统,
基于虚拟现实技术的手部康复训练系统,包括数据采集装置、数据处理系统和虚拟现实人机交互系统;
所述数据采集装置包括五个附着于手指部位的弯曲传感器和手背部的集成电路;五个弯曲传感器记录用户手指弯曲数据,所述集成电路包括加速度计、陀螺仪和磁力计和网络模块,分别用于获取手部的位置、移动状态以及手指位置的数据信息,并通过网络模块将手指弯曲数据、手部的位置、移动状态以及手指位置的数据汇总至数据处理系统;
所述数据处理系统包括数据汇总模块、数据检查模块和后台控制模块,所述数据汇总模块获取数据采集装置的信息进行汇总并存储,数据检查模块用于检查用户是否开始执行目标任务,检查结果包含正在游戏和暂停游戏;
后台控制模块包括密钥识别模块、纠错模块和触发模块;
密钥识别模块用于识别虚拟现实游戏按键是否被按下或者释放,并通过触发模块将游戏按键信息反馈至虚拟现实人机交互系统;
纠错模块,用于对用户在进行虚拟游戏时存在不规范动作时而不能准确定位手部信息时纠错;
触发模块包括分数记录功能,通知触发生成按键反馈,发送通知至虚拟现实人机交互系统,并通过消息反馈模块将消息显示。当用户准确地完成虚拟游戏任务时,计分功能计分显示,分数将持续增加直至用户重置游戏为止;当用户成功地完成游戏,则在显示器上显示对应的消息功能;
虚拟现实人机交互系统包括虚拟用户界面和消息反馈模块;虚拟用户界面用于提供用户手部康复训练的虚拟游戏界面;
消息反馈模块用于为用户提供指导说明,显示分数的消息,同时接收通知触发模块以及音频显示器的信息。
本发明的有益效果:本发明所述的康复训练系统通过将引入虚拟现实技术到脑卒中用户的康复治疗之中,以往的康复训练利用一些器械对肢体进行主动或被动牵引,其整个康复过程过于单调、枯燥,用户很难产生兴趣,康复效果也不甚理想。虚拟现实技术可由软件提供富有沉浸感的游戏环境,使治疗过程充满乐趣,用户在治疗过程中可以感受到自己在动作技能、灵活性、肌肉张力等方面的提高,提高用户的乐观情绪和康复效果。
本发明通过可穿戴手套传感器采集用户活动手的运动与位置信息,以及运行有虚拟现实游戏界面的软件来增强康复训练的趣味性,并利用软件记录和分析用户康复训练数据。
附图说明
图1为本发明所述的基于虚拟现实技术的手部康复训练系统的整体框图;
图2为本发明所述的基于虚拟现实技术的手部康复训练系统中数据处理系统的原理图。
具体实施方式
具体实施方式一、结合图1和图2说明本实施方式,基于虚拟现实技术的手部康复训练系统,该系统包括数据采集装置、数据处理系统和虚拟现实人机交互系统;
数据采集装置采用基于传感器的康复手套来完成;基于传感器的康复手套由五个弯曲传感器和1个内置集成电路的电路盒,其中五个弯曲传感器记录用户手指弯曲数据,电路盒中的集成电路包含加速度计、陀螺仪和磁力计三个嵌入式传感器,具有高传感分辨率并且可以精确计算用户手部位置参数,如横滚角(roll)、俯仰角(pitch)、偏航角(yaw)。通过对传感器的配置可以使手感测系统能够感测到手的位置、移动状态以及手指位置等数据信息,并且通过USB或者WiFi将数据汇总至计算机。采用WiFi可同时进行多个手套的高数据速率传输。使用TCP/IP和WAP2,其单个手套的数据吞吐量可达到1Mbps。
数据处理系统包括数据汇总模块、数据检查模块和后台控制模块,数据通过USB或WiFi从康复手套发送到虚拟现实人机交互系统上位机。图2所示为数据处理部分流程框图。
数据汇总模块通过TCP/IP获取来自康复手套实时数据的套接字,数据以5Hz的频率采样,并将其存储为.txt文件以备制定下一步康复计划时使用。
数据检查模块含有一个决策树分类器,用于检查用户是否开始执行目标任务,其分类结果包含正在游戏和暂停游戏两种。决策树分类器的分类结果是通过分层训练进行的,并将输入空间递归为类区域,其结果是一个由决策节点和叶组成的树状结构,每个决策节点有含有一个测试功能以决定下一步骤采用哪一个分支,反复此过程,直到达到一个叶子从而作出相应决定。
后台控制模块包含密钥识别模块、纠错模块、触发子模块三部分。
密钥识别模块用于识别用户信息、虚拟现实游戏按键是否被按下或者释放。
纠错模块由错误检查过程构成,旨在降低系统的使用困难,使系统更容易访问。为实现纠错目的,制定以下规则:
(1)当虚拟游戏中某个按键被按下时间超过预先设定的时间时,则关闭密钥识别。这样防止由特定手指引起的连续显示问题而不能很好地定位手及手指的信息;
(2)当用户在游戏过程中,两个游戏按键被同时按下时,仅记录正确的按键。这样可以避免相邻的按键被认为同时按下的可能性。
(3)当某一特定的游戏按键被不正确地按下5次,则发送通知给触发模块,继续判断下一按键的正确性,以使整个游戏界面能够流畅地进行。
触发子模块包含计分功能和消息功能两部分。通知触发生成按键反馈,发送通知以触发视觉音频显示器。当用户准确地完成虚拟游戏任务时,计分功能则以累加1的方式将得分显示,分数将持续增加直至用户重置游戏为止。当用户成功地完成游戏,消息功能将在屏幕上显示“Great job!”等消息,以激励用户康复训练兴趣与信心。
虚拟现实人机交互系统包括虚拟用户界面和消息反馈模块两部分。虚拟用户界面主要提供以用户手部康复训练为目的的虚拟游戏界面。消息反馈模块提供指导说明、分数与消息和音频反馈等功能。指导说明主要规范用户在游戏过程中手部动作的正确性,以免影响用户手部康复训练的进程以及用户手部运动数据的采集。音频反馈主要用于产生虚拟游戏的音效,使虚拟游戏具有更加强烈的沉浸感,并且具有友好的人机交互体验。
具体实施方式二、本实施方式为具体实施方式一所述的基于虚拟现实技术的手部康复训练系统的实施例:本实施方式所述的基于虚拟现实技术的手部康复训练系统将以基于虚拟钢琴游戏的手部康复训练系统为例。本实施例中所述数据采集装置采用基于传感器的康复手套;所述数据处理系统采用2.4GHz的Windows操作系统计算机;述虚拟游戏用户界面采用虚拟钢琴游戏。
本实施例中,脑卒中用户在进行手部康复训练时,首先选择虚拟钢琴游戏演奏的音乐,当演奏音乐选定后,就可以根据指导说明规范手部动作进行手部康复训练。
所述的数据采集装置利用基于传感器的康复手套,基于传感器的康复手套由五个弯曲传感器和一个内置集成电路的电路盒,其中五个弯曲传感器记录手指弯曲数据,内置集成电路的电路盒其集成电路包含加速度计、陀螺仪和磁力计三个嵌入式传感器,具有高传感分辨率并且可以精确计算用户手部位置参数,如横滚角(roll)、俯仰角(pitch)、偏航角(yaw)。通过对传感器的配置可以使手感测系统能够感测到手的位置、移动状态以及手指位置等数据信息,并且通过USB或者WiFi将数据汇总至计算机。
所述的数据处理系统包括数据汇总模块和数据检查模块和后台控制模块。
所述的数据汇总模块属于计算机侧,通过TCP/IP获取来自用户佩戴的康复手套演奏音乐的实时数据,数据以5Hz的频率采样,并将其存储为.txt文件以备制定下一步康复计划时使用。
所述的数据检查模块用于检查用户是否开始执行目标任务,其分类结果包含正在弹琴和暂停休息两种。
所述的后台控制模块包含密钥识别模块、纠错模块、触发模块三部分。
所述的密钥识别模块用于识别虚拟钢琴游戏琴键是否被按下或者释放,其算法输入为连接到五个手指的弯曲传感器所采集到的数据,其密钥识别过程需要预先收集数据集。
所述的预先收集数据集利用三个健康成年人进行虚拟钢琴游戏的演奏,其中有1人具有10年以上的钢琴演奏经验,其余2人无钢琴演奏经验。预先收集数据集包括两个步骤:(1)收集训练数据,即收集三位健康成人演奏同一首目标乐曲5次,并且在每次演奏完毕休息相同的时间的数据。所收集到的数据用于在数据处理过程中对分类器进行训练,并在密钥建立过程中用于识别虚拟现实游戏按键是否被按下或者释放;(2)收集验证数据,即收集三位健康成人演奏同一目标音乐5次,并且在每次演奏完毕休息各自设定的休息时间的数据。
所述的验证数据其数据分析结果利用视频摄像头,手指位置和手指运动以及反馈界面都用音视频图像记录。具有数据分析知识和钢琴演奏技巧的专家手动记录下按键不正确的按键。
纠错模块由错误检查过程构成,旨在降低系统的使用困难,使系统更容易访问。为实现纠错目的,制定以下规则:
(1)当虚拟钢琴游戏某个琴键被按下时间超过预先设定的时间时,则关闭密钥识别。这样防止由特定手指引起的连续显示问题而不能很好地定位手及手指的信息;
(2)当用户在游戏过程中,两个琴键被同时按下时,仅记录正确的按键。这样可以避免相邻的按键被认为同时按下的可能性。
(3)当某一特定的琴键被不正确地按下5次,则发送通知给继续播放键,以使整个游戏界面能够流畅地进行。
通知触发部分即当用户开始游戏时,我们发送通知以触发用户界面中的视觉和音频显示,包括琴键指示和对应演奏的音乐。通知触发部分包含计分功能和消息功能两部分。通知触发生成按键反馈,发送通知以触发视觉音频显示器。当用户准确地演奏音符时,计分功能则以累加1的方式将得分显示,分数将持续增加直至用户重置游戏为止。当用户成功地演奏乐曲时,消息功能将在屏幕上显示“Great job!”等消息,以激励用户康复训练兴趣与信心。
虚拟现实人机交互系统包括虚拟用户界面和消息反馈模块两部分。虚拟用户界面主要提供以用户手部康复训练为目的的虚拟游戏界面。消息反馈模块提供指导说明、分数与消息和音频反馈等功能。指导说明主要规范用户在游戏过程中手部动作的正确性,以免影响用户手部康复训练的进程以及用户手部运动数据的采集。音频反馈主要用于产生虚拟游戏的音效,使虚拟游戏具有更加强烈的沉浸感,并且具有友好的人机交互体验。

Claims (2)

1.基于虚拟现实技术的手部康复训练系统,包括数据采集装置、数据处理系统和虚拟现实人机交互系统,其特征是;
所述数据采集装置包括五个附着于手指部位的弯曲传感器和手背部的集成电路;五个弯曲传感器记录用户手指弯曲数据,所述集成电路包括加速度计、陀螺仪和磁力计和网络模块,分别用于获取手部的位置、移动状态以及手指位置的数据信息,并通过网络模块将手指弯曲数据、手部的位置、移动状态以及手指位置的数据汇总至数据处理系统;
所述数据处理系统包括数据汇总模块、数据检查模块和后台控制模块;所述数据检查模块为决策树分类器;
所述数据汇总模块获取数据采集装置采集的信息进行汇总并存储,数据检查模块用于检查用户是否开始执行目标任务,检查结果包含正在游戏和暂停游戏;
后台控制模块包括密钥识别模块、纠错模块和触发模块;
密钥识别模块用于识别虚拟现实游戏按键是否被按下或者释放,并通过触发模块将游戏按键信息反馈至虚拟现实人机交互系统;
纠错模块,用于对用户在进行虚拟游戏时存在不规范动作时而不能准确定位手部信息时纠错;
触发模块包括分数记录功能,通知触发生成按键反馈,并发送反馈信息至虚拟现实人机交互系统;
当用户准确地完成虚拟游戏任务时,计分功能计分显示,分数将持续增加直至用户重置游戏为止;当用户成功地完成游戏,则在显示器上显示对应的消息功能;
所述虚拟现实人机交互系统包括虚拟用户界面和消息反馈模块;虚拟用户界面用于提供用户手部康复训练的虚拟游戏界面;
消息反馈模块用于为用户提供指导说明,显示分数的消息,同时接收触发模块的信息;
虚拟游戏界面采用虚拟钢琴游戏;
所述的密钥识别模块用于识别虚拟钢琴游戏琴键是否被按下或者释放,其算法输入为连接到五个手指的弯曲传感器所采集到的数据,其密钥识别过程需要预先收集数据集;
所述的预先收集数据集利用三个健康成年人进行虚拟钢琴游戏的演奏,其中有1人具有10年以上的钢琴演奏经验,其余2人无钢琴演奏经验;预先收集数据集包括两个步骤:(1)收集训练数据,即收集三位健康成人演奏同一首目标乐曲5次,并且在每次演奏完毕休息相同的时间的数据;所收集到的数据用于在数据处理过程中输入到数据处理系统的决策数分类器进行训练,并在密钥建立过程中用于识别虚拟现实游戏按键是否被按下或者释放;(2)收集验证数据,即收集三位健康成人演奏同一目标音乐5次,并且在每次演奏完毕休息各自设定的休息时间的数据;
所述的验证数据其数据分析结果利用视频摄像头,手指位置和手指运动以及反馈界面都用音视频图像记录;
所述纠错模块由错误检查过程构成,纠错模块的纠错方式有三种:
一、当虚拟游戏中某个按键被按下时间超过预先设定的时间时,则关闭密钥识别;
二、当用户在游戏过程中,两个游戏按键被同时按下时,仅记录正确的按键;
三、当某个游戏按键被不正确地按下五次,则将信息发送至触发模块,触发模块继续生成下一按键信息反馈,继续判断下一按键的正确性。
2.根据权利要求1所述的基于虚拟现实技术的手部康复训练系统,其特征在于,所述网络模块为WIFI模块。
CN201710627299.7A 2017-07-28 2017-07-28 基于虚拟现实技术的手部康复训练系统 Active CN107485826B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710627299.7A CN107485826B (zh) 2017-07-28 2017-07-28 基于虚拟现实技术的手部康复训练系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710627299.7A CN107485826B (zh) 2017-07-28 2017-07-28 基于虚拟现实技术的手部康复训练系统

Publications (2)

Publication Number Publication Date
CN107485826A CN107485826A (zh) 2017-12-19
CN107485826B true CN107485826B (zh) 2020-07-31

Family

ID=60643859

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710627299.7A Active CN107485826B (zh) 2017-07-28 2017-07-28 基于虚拟现实技术的手部康复训练系统

Country Status (1)

Country Link
CN (1) CN107485826B (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108257654A (zh) * 2017-12-21 2018-07-06 天津大学 一种通过虚拟现实技术实现颈椎康复训练的方法
CN108415319A (zh) * 2018-02-07 2018-08-17 江苏理工学院 一种多功能手指康复控制系统
CN108682450A (zh) * 2018-06-11 2018-10-19 郑州大学 在线手指运动功能评测系统
CN108786015A (zh) * 2018-06-26 2018-11-13 郑州大学 一种穿戴式手指功能主动康复训练系统
CN108992852A (zh) * 2018-07-18 2018-12-14 广州市三甲医疗信息产业有限公司 基于虚拟现实康复训练的智能评估方法与系统
CN110478860B (zh) * 2019-09-02 2021-07-30 燕山大学 基于手物自然交互的手部功能障碍虚拟康复系统
CN112999013A (zh) * 2021-02-23 2021-06-22 上海健康医学院 一种基于语音控制的手功能康复训练及评估装置
CN117582643B (zh) * 2023-12-20 2024-05-28 广州叁人行医疗科技有限公司 基于虚拟现实的视听综合训练方法及系统

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6885361B1 (en) * 1987-03-24 2005-04-26 Sun Microsystems, Inc. Tactile feedback mechanism for a data processing system
CN203149575U (zh) * 2011-12-29 2013-08-21 无锡微感科技有限公司 一种基于微型传感器的交互式上肢康复设备
CN103235641B (zh) * 2013-03-17 2016-08-03 浙江大学 一种6维度感官交互的虚拟键盘乐器系统及其实现方法
CN103251419A (zh) * 2013-04-25 2013-08-21 西安交通大学苏州研究院 用于手功能康复训练与评估的数据手套及其监测方法
US9390630B2 (en) * 2013-05-03 2016-07-12 John James Daniels Accelerated learning, entertainment and cognitive therapy using augmented reality comprising combined haptic, auditory, and visual stimulation
US10635171B2 (en) * 2014-09-10 2020-04-28 Sony Corporation Detection device, detection method, control device, and control method
CN104898837A (zh) * 2015-05-22 2015-09-09 燕山大学 一种基于手势交互的便携式手部虚拟康复实验箱及方法
CN205680441U (zh) * 2016-06-06 2016-11-09 北京千音互联科技有限公司 一种虚拟演奏系统
CN106652656A (zh) * 2016-10-18 2017-05-10 朱金彪 利用虚拟乐器学习和演奏的方法、装置以及使用其的眼镜或头盔

Also Published As

Publication number Publication date
CN107485826A (zh) 2017-12-19

Similar Documents

Publication Publication Date Title
CN107485826B (zh) 基于虚拟现实技术的手部康复训练系统
Limbu et al. Using sensors and augmented reality to train apprentices using recorded expert performance: A systematic literature review
TWI377055B (en) Interactive rehabilitation method and system for upper and lower extremities
US9046919B2 (en) Wearable user interface device, system, and method of use
US8758020B2 (en) Periodic evaluation and telerehabilitation systems and methods
US11508344B2 (en) Information processing device, information processing method and program
Afyouni et al. A therapy-driven gamification framework for hand rehabilitation
JP7367690B2 (ja) 情報処理装置
Zhang et al. An affordable augmented reality based rehabilitation system for hand motions
Batista et al. FarMyo: a serious game for hand and wrist rehabilitation using a low-cost electromyography device
Holmes et al. Usability and performance of Leap Motion and Oculus Rift for upper arm virtual reality stroke rehabilitation
Rego et al. A serious games framework for health rehabilitation
Zirbel et al. The VRehab system: a low-cost mobile virtual reality system for post-stroke upper limb rehabilitation for medically underserved populations
Lourenço et al. Tailored virtual reality and mobile application for motor rehabilitation
Popescu et al. PC-based telerehabilitation system with force feedback
Lukacs et al. Wrist rehabilitation in carpal tunnel syndrome by gaming using EMG controller
Ribeiro et al. Conceptualization of PhysioFun game: A low-cost videogame for home-based stroke rehabilitation
CN109282695A (zh) 一种射击训练裸眼3d系统
Batista et al. Surface electromyography for game-based hand motor rehabilitation
Calado et al. Towards a virtual coach for Boccia: Developing a virtual augmented interaction based on a Boccia simulator
Hadjadj et al. Leap motion controller for upper limbs physical rehabilitation in post-stroke patients: a usability evaluation
Pereira et al. A systematic review of the use of virtual reality games in post-stroke rehabilitation
CN113178241A (zh) 一种vr康复训练系统
Xiao et al. Towards an FMG based augmented musical instrument interface
Lim et al. Development of Visual-based Rehabilitation Using Sensors for Stroke Patient

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant