CN111110982A - 基于运动想象的手部康复训练方法 - Google Patents

基于运动想象的手部康复训练方法 Download PDF

Info

Publication number
CN111110982A
CN111110982A CN201911214330.XA CN201911214330A CN111110982A CN 111110982 A CN111110982 A CN 111110982A CN 201911214330 A CN201911214330 A CN 201911214330A CN 111110982 A CN111110982 A CN 111110982A
Authority
CN
China
Prior art keywords
electroencephalogram
hand
rehabilitation
virtual
rehabilitation training
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201911214330.XA
Other languages
English (en)
Inventor
杜义浩
房华蕾
王子豪
于金须
郝慎才
白晓林
袁航
程生翠
温美哲
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yanshan University
Original Assignee
Yanshan University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yanshan University filed Critical Yanshan University
Priority to CN201911214330.XA priority Critical patent/CN111110982A/zh
Publication of CN111110982A publication Critical patent/CN111110982A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H1/00—Apparatus for passive exercising; Vibrating apparatus; Chiropractic devices, e.g. body impacting devices, external devices for briefly extending or aligning unbroken bones
    • A61H1/02—Stretching or bending or torsioning apparatus for exercising
    • A61H1/0274—Stretching or bending or torsioning apparatus for exercising for the upper limbs
    • A61H1/0285—Hand
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2411—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on the proximity to a decision surface, e.g. support vector machines
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H2201/00—Characteristics of apparatus not provided for in the preceding codes
    • A61H2201/16—Physical interface with patient
    • A61H2201/1602—Physical interface with patient kind of interface, e.g. head rest, knee support or lumbar support
    • A61H2201/165—Wearable interfaces
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H2201/00—Characteristics of apparatus not provided for in the preceding codes
    • A61H2201/16—Physical interface with patient
    • A61H2201/1657—Movement of interface, i.e. force application means
    • A61H2201/1659—Free spatial automatic movement of interface within a working area, e.g. Robot
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
    • A61M2021/0005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
    • A61M2021/0005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus
    • A61M2021/0027—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the hearing sense
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
    • A61M2021/0005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus
    • A61M2021/0044—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the sight sense
    • A61M2021/005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the sight sense images, e.g. video
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2230/00—Measuring parameters of the user
    • A61M2230/08—Other bio-electrical signals
    • A61M2230/10—Electroencephalographic signals
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00—Aspects of pattern recognition specially adapted for signal processing
    • G06F2218/08—Feature extraction

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Public Health (AREA)
  • Animal Behavior & Ethology (AREA)
  • Evolutionary Computation (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • General Engineering & Computer Science (AREA)
  • Veterinary Medicine (AREA)
  • Artificial Intelligence (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Pain & Pain Management (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Rehabilitation Therapy (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Epidemiology (AREA)
  • Acoustics & Sound (AREA)
  • Psychology (AREA)
  • Anesthesiology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Hematology (AREA)
  • Rehabilitation Tools (AREA)

Abstract

本发明提出一种基于运动想象的手部康复训练方法，首先设计包含文字语音、图片语音、虚拟动作在内的多种虚拟场景，深层次诱导受试者进行肢体运动想象；通过脑电采集设备实时采集大脑运动想象区的脑电信号，经信号预处理、特征提取、分类识别后将结果以指令形式通过蓝牙发送给可穿戴康复机械手，利用可穿戴康复机械手辅助受试者进行抓握训练，实现运动想象和物理治疗相结合方式进行手部康复训练。同时，通过Leap Motion采集受试者手部动作，并同步到虚拟场景中的虚拟手，实现可穿戴康复机械手与虚拟手的虚实交互，刺激受试者进行主动运动想象。本发明加速了受试者大脑受损运动区功能的重塑和手部康复速度与康复效果，提高患者手部康复训练的主动性。

Description

基于运动想象的手部康复训练方法
技术领域
本发明涉及一种基于运动想象的手部康复训练方法，属于虚拟现实、运动想象及康复机械手控制等领域。
背景技术
据世界卫生组织报道，因脑卒中所引起的运动功能障碍患者正在逐年增加，而且我国脑卒中发病率已位居世界第一。临床发现，75％以上的脑卒中患者存在不同程度的肢体功能障碍，严重影响患者的生活质量，给患者、家庭及社会带来沉重负担。其中，手部运动功能障碍已成为脑卒中引发的主要病症之一，具体表现为手指关节弯曲伸展困难，不能进行正常的抓握与伸展动作。研究证明，积极主动的康复训练有助于患者肢体运动功能的恢复并促进痊愈。
然而，传统手部运动功能障碍患者的康复训练，主要是采取医师一对一式康复治疗或借助简单康复器械，不仅劳动强度大、费用昂贵，而且训练效果差强人意，尤其针对康复后期患者，康复过程枯燥乏味，患者参与主动性差，使得康复周期延长。近几年，脑卒中后手部运动功能障碍康复治疗技术不断出现，如强迫性运动疗法、机器人辅助治疗技术、经颅磁刺激技术、运动想象疗法等。其中，运动想象与物理治疗相结合可以显著改善脑卒中患者手部运动功能。但由于康复训练模式单一、交互性差，无法适应不同患者、不同康复阶段的康复训练需求，即存在个体适应性差和患者主动性差的问题。
本发明提出一种基于运动想象的手部康复训练方法，通过构建不同的虚拟场景和Leap Motion视觉反馈刺激患者大脑功能神经的激活程度，提高康复训练的趣味性和患者康复训练的主动性；利用运动想象脑肌接口控制可穿戴康复机械手进行抓取动作训练，实现可穿戴康复机械手抓握和Leap Motion虚拟手抓握的虚实交互，进而重塑脑卒中患者的大脑运动区功能。本发明不仅可以提高患者康复训练的积极性，而且可以通过康复机械手的辅助加快对手部肌力、手指协调性、灵活性等功能的恢复，使康复训练更加智能化、人性化，构建“以人为中心”的康复训练策略。
发明内容
本发明公开一种基于运动想象的手部康复训练方法，目的在于通过运动想象与物理治疗相结合，构建不同的虚拟场景和Leap Motion视觉反馈刺激大脑功能神经的激活程度，利用运动想象脑肌接口控制可穿戴康复机械手进行康复训练，并通过虚拟场景中的Leap Motion虚拟手进行虚实交互，为脑卒中患者提供一种基于运动想象的手部康复训练方法。
一种基于运动想象的手部康复训练方法，其包括脑电采集装置、可穿戴康复机械手、虚拟康复训练系统及Leap Motion手部跟踪器，所述脑电采集装置包括脑电帽、脑电放大器，所述脑电帽佩戴于受试者头顶，以采集运动想象脑电信号，通过所述脑电放大器与上位机进行信号的发送与接收；所述可穿戴康复机械手包括掌骨板、电机推杆、掌骨连接件、关节推杆、关节角板和铰链销，所述关节推杆的第一端与所述掌骨板相连，所述关节推杆的第二端通过所述铰链销与所述掌骨连接件相连，所述电机推杆的第一端与驱动相连，所述电机推杆的第二端与所述关节角板相连，所述关节角板上的滑杆能沿所述关节推杆上的滑槽滑动；所述可穿戴康复机械手能实现手部每根手指的独立运动，并辅助受试者实现各个手指关节的伸展和弯曲，所述可穿戴康复机械手与所述虚拟康复训练系统相结合，用于受试者的康复训练；所述康复训练系统包括脑电采集软件，能进行脑电信号的预处理、特征提取及分类识别，通过对虚拟场景设计，多方位、深层次地诱发受试者进行肢体运动想象，提高训练的趣味性和受试者大脑的神经激活程度；所述Leap Motion手部跟踪器能实时采集受试者手部动作，并以虚拟手的实时动作形式在虚拟场景中展示出来，以作为视觉反馈和进行虚实交互，刺激受试者的大脑运动功能区，提高受试者大脑的神经激活程度；
一种基于运动想象的手部康复训练方法包括以下步骤：
S1：为受试者佩戴所述脑电帽并涂抹脑电膏，将所述脑电放大器与脑电采集软件连接，同时接通所述可穿戴康复机械手，通过蓝牙与上位机进行连接；S2：登录所述康复训练系系统，采集受试者进行肢体运动想象的脑电信号，信号采集通道选取大脑运动功能区C3、C4、FC3、FC4、CP3、CP4、C5、C6共8个通道，对采集的脑电信号进行预处理和特征提取；S3：通过已建立的PSO-SVM分类模型进行分类，并以两个十六进制指令的形式将分类结果通过蓝牙模块发送至所述可穿戴康复机械手，分别用来控制所述可穿戴康复机械手的抓握与伸展，辅助受试者进行手部康复训练；S4：通过所述Leap Motion手部跟踪器采集受试者手部动作，并在虚拟场景中以虚拟手的实时动作形式展示出来，作为视觉反馈加深受试者大脑运动区神经激活程度，形成闭环的神经康复训练能从运动想象层面对大脑运动区功能进行重塑，提高康复训练的效果；S5：根据受试者情况设置训练时间，训练结束后，生成训练报表并打印存档，退出康复训练系统。
优选地，所述步骤S2中对采集的脑电信号所进行的预处理包括：截取各通道第2s～第6s间的数据，进行降采样到128Hz，再进行0.5Hz～2Hz高通滤波去除基线漂移，进行自适应陷波去除50Hz工频干扰；对信号进行6层小波包分解提取脑电特征频段，选择小波包分解的第4层中的0～4Hz频带与EEG信号中的δ波对应，选择第4层中的4～8H频带与EEG信号中的θ波对应，选择第4层中的8～12Hz频带与第6层中的12～13Hz频带组合后与α波对应，选择第5层中的14～16Hz频带和28～30Hz频带组合后与β波对应。
优选地，所述步骤S2中对采集的脑电信号所进行的特征提取包括：对各通道中的α波与β波频段的EEG数据分别进行CSP共空间模式和多导联空间滤波，以生成能够最优区分抓取动作运动想象时间序列；采用周期图法对α/β频段进行功率谱密度提取，进一步通过提取小波包节点能量和小波熵的特征获得小波包熵作为脑电信号的特征点。
本发明技术方案产生的积极效果如下：
(1)本发明针对受试者肢体运动想象能力差异性，采用多种虚拟场景对受试者进行多方位的神经刺激，诱发受试者进行运动想象，加速大脑受损运动区的重塑；
(2)本发明针对受试者的手部功能障碍问题，利用可穿戴康复机械手进行抓握动作辅助，通过对手功能障碍患者的物理治疗，加速患者的手部康复速度与康复效果；
(3)本发明与传统康复训练方法相比，采用运动想象与可穿戴康复机械手相结合的方式进行手部功能障碍康复训练，并通过Leap Motion虚拟手进行视觉反馈，提高患者手部康复训练的主动性。
附图说明
图1为本发明提出的系统原理图；
图2为本发明的脑电信号采集电极分布图；
图3为本发明训练阶段实验范式示意图；
图4为本发明可穿戴康复机械手机构图；
图5为本发明虚拟场景图；以及
图6为本发明所述康复训练方法实施流程图。
图中：
1掌骨板；2电机推杆；3掌骨连接件；4关节推杆；5关节角板；6铰链销。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。
需要注意的为，除非另有说明，本申请使用的技术术语或者科学术语应当为本发明所属领域技术人员所理解的通常意义。
如图1～图6所示，本发明提出一种基于运动想象的手部康复训练方法，其包括脑电采集装置、可穿戴康复机械手、运动想象康复训练系统及Leap Motion手部跟踪器，脑电采集装置包括脑电帽和脑电放大器，脑电帽佩戴于受试者头顶，以采集运动想象脑电信号，通过脑电放大器与上位机进行信号的发送与接收；可穿戴康复机械手能实现手部每根手指的独立运动，能够辅助各个手指关节伸展和弯曲，可穿戴康复机械手与运动想象康复训练系统相结合，用于受试者的康复训练；康复训练系统包括脑电采集软件，能进行脑电信号的预处理、特征提取及分类识别，通过对虚拟场景设计；Leap Motion手部跟踪器为进行手部移动追踪的高精度手指识别设备。
人手骨骼结构主要由腕骨、掌骨、指骨所组成，指骨又由近端指骨、中指骨和远端指骨组成。如图4所示，本发明的可穿戴康复机械手包括掌骨板1、电机推杆2、掌骨连接件3、关节推杆4、关节角板5和铰链销6，其中关节推杆4的第一端与掌骨板1相连，关节推杆4的第二端通过铰链销6与掌骨连接件3相连，电机推杆2的第一端与驱动相连，电机推杆2的第二端与关节角板5相连，关节角板5上的滑杆能沿关节推杆4上的滑槽滑动，可穿戴康复机械手以掌骨板1作为固定基座，掌骨板1通过掌骨连接件3将相互连接的近指骨外壳和中指骨外壳连接起来；近指关节推杆、近指关节角板、中指关节角板、中指关节推杆、中指骨外壳之间的顺次连接均采用带肩扣环固定型的铰链销6；手背接触面为弧面设计，增加使用者的穿戴舒适感。
优选地，采用直线电机作为驱动，不仅可以将电能直接转换成直线运动的机械能，且不需要中间转换机构，也能满足手指康复机器人对于柔顺性、便携性、安全性的要求。
在加工制造时，可通过3D扫描逆向工程实现患者个性定制可穿戴设备，3D打印零件采用进口的高韧性树脂。
本发明的设计思路为：通过声音文字、图片视频、虚拟动作等，设计多种运动想象虚拟场景，深层次地诱导受试者进行肢体运动想象。脑电采集设备实时采集大脑运动想象区的脑电信号，经过信号预处理、特征提取、分类识别后将结果以指令的形式通过蓝牙发送给可穿戴康复机械手，利用可穿戴康复机械手辅助受试者进行抓握训练，实现运动想象和物理治疗相结合方式进行手部康复训练。同时，通过Leap Motion手部跟踪器采集受试者手部动作，并同步到虚拟场景中的虚拟手，实现可穿戴康复机械手与虚拟手的视觉交互，刺激受试者进行主动运动想象，以促进患者大脑运动区功能的重塑，具体流程如图6所示。
选取一个安静舒适的实验环境，受试者位于电脑屏幕前约一米处，打开脑电放大器与脑电采集软件进行连接，为受试者佩戴脑电帽并在相应电极通道涂抹导电膏，如图2所示，本发明选取大脑运动区C3、C4，为了更好地分析大脑运动区脑电信号，另选取FC3、FC4、CP3、CP4、C5、C6通道，同时接通可穿戴康复机械手电源，通过蓝牙与上位机进行连接，为受试者穿戴康复机械手。
登录运动想象康复训练系统，开始对受试者进行手部抓握动作训练，包括对运动想象信号的采集、预处理、特征提取、分类识别和PSO-SVM分类模型建立。
运动想象信号采集：如图2所示，L表示左脑区，R表示右脑区，脑电数据采集选用64导无线脑电采集系统，电极位置采用国际标准10–20电极导联定位，参考电极设在头顶中央区。放大器采样频率为1000Hz，采集通道为运动区相关的8个通道，包括：C3、C4、FC3、FC4、CP3、CP4、C5、C6。
训练阶段实验范式：选取安静舒适的实验环境，受试者佩戴脑电采集设备和可穿戴康复机械手，保持身体处于放松状态，训练过程中尽量避免眼动及其它实际动作。要求受试者根据屏幕提示进行肢体运动想象。首先，屏幕提示受试者集中精神即将开始运动想象，此过程持续2s时间，第2s时，屏幕中央出现抓取动作提示，受试者跟随抓取动作的虚拟场景提示进行抓取运动想象，持续时间为4s，第6s时运动想象提示消失，受试者运动想象过程结束，之后有2s时间供受试者休息，重复进行第二次运动想象训练，直到完成10次运动想象训练。
脑电信号数据预处理：将采集到的训练数据分成10段，分别截取8个通道中每个通道第2s到6s之间(共4s)的数据进行分析处理。首先对截取的运动想象信号进行降采样到128Hz，之后进行0.5～2Hz高通滤波去除基线漂移和自适应陷波去除50Hz工频干扰。
运动意图特征提取与分类识别：因为脑电信号的特征主要体现在alpha(α)频段(8～13Hz)和beta(β)频段(13～30Hz，所以对10次试验中采集的脑电信号的α频段(8～13Hz)与β频段(13～30Hz)数据分别进行CSP共空间模式进行多导联空间滤波，脑电信号在滤波处理之后产生新的能够最优区分抓取动作运动想象时间序列。
进一步地，采用周期图法实现对α/β频段进行功率谱密度提取，将随机序列x(n)的N个观测数据视为一能量有限的序列，直接计算x(n)的离散傅立叶变换，得X(k)，然后再取其幅值的平方，并除以N，作为序列，x(n)真实功率谱的估计。假定有限长随机信号序列为x(n)，它的功率谱密度估计求取存在关系为：
Figure BDA0002299070130000071
其中，
Figure BDA0002299070130000072
代表谱密度，FFT[x(n)]代表随机序列x(n)的傅里叶变换，N代表观测数据的个数，n代表随机信号中离散序列的序列号。
进一步地，提取小波包节点能量特征。信号x(t)经过N层分解，可以分成2N个子空间，第n(n＝1,2,3,....,2N)个子空间重构信号对应的能量En可由该空间小波包系数的平方和计算，如式：
Figure BDA0002299070130000073
其中，t代表时间，j表示尺度系数，k代表平移因数，
Figure BDA00022990701300000710
为小波系数。
进一步地，提取小波熵特征，首先，将重构信号
Figure BDA0002299070130000074
进行m等分，那么每个时段的总能量可表示为：
Figure BDA0002299070130000075
其次，每一频带能量的概率密度分布Pmk可由每时段总能量经过归一化后为
Figure BDA0002299070130000076
再次，这时候信号在不同时段的不同频带中的能量分布情况可通过pmk反映出来，计算不同时段对应的带谱熵值
Figure BDA0002299070130000077
该带谱熵值称为小波包频带局部熵，矩阵可表示为：
Figure BDA0002299070130000078
最后，可得小波包熵S计算公式为：
Figure BDA0002299070130000079
其中，Ek代表平移因数为k时的时段能量，Pk代表平移因数为k时频带能量的概率密度，P代表所有频带能量的概率密度，Pi代表第i个频带能量的概率密度，i代表频带的序号，m为信号等分的份数。
PSO-SVM分类模型建立：SVM(支持向量机)能够实现在特征空间构建最优分割超平面，进而使不同类别的样本线性分开。将CSP特征矩阵输入到SVM进行分类模型训练，同时利用粒子群优化算法PSO的全局搜索能力，对SVM建模过程中的惩罚参数C和核参数g进行自适应优化调整，以获得分类效果更佳、识别更为精确的SVM分类器。
可穿戴康复机械手控制：将受试者运动想象分类结果，通过上位机以指令形式发送给可穿戴康复机械手，控制可穿戴康复机械手辅助患者进行康复训练，如图3所示，可穿戴康复机械手可以实现手部每根手指单独运动，能够辅助各个手指关节伸展和弯曲，并通过蓝牙4.2接收上位机两个十六进制指令。
肢体运动想象在线训练阶段：利用已经建立的PSO-SVM分类模型进行当前运动想象分类识别，并将分类结果以指令形式发送给可穿戴康复机械手，控制可穿戴康复机械手辅助手功能障碍患者进行康复训练。
运动想象虚拟场景：如图5(a)、5(b)、5(c)所示，利用Unity3D游戏开发引擎搭建了包括声音文字、图片视频、虚拟动作三种任务式虚拟场景，全方位诱导受试者进行肢体运动想象。
进一步地，在图5(a)所示的声音文字场景中，通过诸如“抓取水杯”等文字提示，同时播放对应文字内容的语音来诱导受试者进行相应的肢体运动想象。如果PSO-SVM对受试者运动想象信号的分类识别结果为抓取，则上位机发送抓取指令给可穿戴康复机械手，若分类结果不是抓取，则上位机发送指令使可穿戴康复机械手处于伸展姿态，其中a1-训练计时时间，a2-文字提示，a3-语音开，a4-虚拟手。
在图5(b)所示的图片视频场景中，通过诸如“抓取水杯”等与现实相关的图片或短视频提示，受试者进行相应动作的肢体运动想象。
在图5(c)所示的虚拟游戏场景，受试者能够通过场景中虚拟手抓取动作的提示进行肢体抓取运动想象。
进一步，本发明采用Leap Motion手部跟踪器实时采集受试者的手部动作，经过分析处理后，完成手势识别，并将其以虚拟手的动作展示给受试者，对受试者产生一种视觉神经反馈，达到一种闭环神经康复训练和物理疗法同时进行的效果，提高了手功能障碍患者康复训练的主动性和效率。
到达目标训练时间，康复训练系统自动生成训练报表，并对受试者的训练信息进行打印并存档，最后退出康复训练系统，完成本次康复训练。
以上所述各实施例仅用于说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应该理解：其依然可以对前述实施例所记载的技术方案进行修改，或者对其中部分或全部技术特征进行等同替换；而这些修改或替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (3)

1.一种基于运动想象的手部康复训练方法，其包括脑电采集装置、可穿戴康复机械手、虚拟康复训练系统及Leap Motion手部跟踪器，
所述脑电采集装置包括脑电帽、脑电放大器，所述脑电帽佩戴于受试者头顶，以采集运动想象脑电信号，通过所述脑电放大器与上位机进行信号的发送与接收；
所述可穿戴康复机械手包括掌骨板、电机推杆、掌骨连接件、关节推杆、关节角板和铰链销，所述关节推杆的第一端与所述掌骨板相连，所述关节推杆的第二端通过所述铰链销与所述掌骨连接件相连，所述电机推杆的第一端与驱动相连，所述电机推杆的第二端与所述关节角板相连，所述关节角板上的滑杆能沿所述关节推杆上的滑槽滑动；
所述可穿戴康复机械手能实现手部每根手指的独立运动，并辅助受试者实现各个手指关节的伸展和弯曲，所述可穿戴康复机械手与所述虚拟康复训练系统相结合，用于受试者的康复训练；
所述康复训练系统包括脑电采集软件，能进行脑电信号的预处理、特征提取及分类识别，通过对虚拟场景设计，多方位、深层次地诱发受试者进行肢体运动想象，提高训练的趣味性和受试者大脑的神经激活程度；
所述Leap Motion手部跟踪器能实时采集受试者手部动作，并以虚拟手的实时动作形式在虚拟场景中展示出来，以作为视觉反馈和进行虚实交互，刺激受试者的大脑运动功能区，提高受试者大脑的神经激活程度；其特征在于，其包括以下步骤：
S1：为受试者佩戴所述脑电帽并涂抹脑电膏，将所述脑电放大器与脑电采集软件连接，同时接通所述可穿戴康复机械手，通过蓝牙与上位机进行连接；
S2：登录所述康复训练系系统，采集受试者进行肢体运动想象的脑电信号，信号采集通道选取大脑运动功能区C3、C4、FC3、FC4、CP3、CP4、C5、C6共8个通道，对采集的脑电信号进行预处理和特征提取；
S3：通过已建立的PSO-SVM分类模型进行分类，并以两个十六进制指令的形式将分类结果通过蓝牙模块发送至所述可穿戴康复机械手，分别用来控制所述可穿戴康复机械手的抓握与伸展，辅助受试者进行手部康复训练；
S4：通过所述Leap Motion手部跟踪器采集受试者手部动作，并在虚拟场景中以虚拟手的实时动作形式展示出来，作为视觉反馈加深受试者大脑运动区神经激活程度，形成闭环的神经康复训练能从运动想象层面对大脑运动区功能进行重塑，提高康复训练的效果；
S5：根据受试者情况设置训练时间，训练结束后，生成训练报表并打印存档，退出康复训练系统。
2.根据权利要求1所述基于运动想象的手部康复训练方法，其特征在于，所述步骤S2中对采集的脑电信号所进行的预处理包括：
截取各通道第2s～第6s间的数据，进行降采样到128Hz，再进行0.5Hz～2Hz高通滤波去除基线漂移，进行自适应陷波去除50Hz工频干扰；
对信号进行6层小波包分解提取脑电特征频段，选择小波包分解的第4层中的0～4Hz频带与EEG信号中的δ波对应，选择第4层中的4～8H频带与EEG信号中的θ波对应，选择第4层中的8～12Hz频带与第6层中的12～13Hz频带组合后与α波对应，选择第5层中的14～16Hz频带和28～30Hz频带组合后与β波对应。
3.根据权利要求1所述基于运动想象的手部康复训练方法，其特征在于，所述步骤S2中对采集的脑电信号所进行的特征提取包括：
对各通道中的α波与β波频段的EEG数据分别进行CSP共空间模式和多导联空间滤波，以生成能够最优区分抓取动作运动想象时间序列；
采用周期图法对α/β频段进行功率谱密度提取，进一步通过提取小波包节点能量和小波熵的特征获得小波包熵作为脑电信号的特征点。
CN201911214330.XA 2019-12-02 2019-12-02 基于运动想象的手部康复训练方法 Pending CN111110982A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911214330.XA CN111110982A (zh) 2019-12-02 2019-12-02 基于运动想象的手部康复训练方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911214330.XA CN111110982A (zh) 2019-12-02 2019-12-02 基于运动想象的手部康复训练方法

Publications (1)

Publication Number Publication Date
CN111110982A true CN111110982A (zh) 2020-05-08

Family

ID=70496832

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911214330.XA Pending CN111110982A (zh) 2019-12-02 2019-12-02 基于运动想象的手部康复训练方法

Country Status (1)

Country Link
CN (1) CN111110982A (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111789740A (zh) * 2020-06-22 2020-10-20 浙江工业大学 一种关节康复机械手
CN111938991A (zh) * 2020-07-21 2020-11-17 燕山大学 一种双主动控制模式的手部康复训练装置及训练方法
CN113070875A (zh) * 2021-02-26 2021-07-06 中国人民解放军海军工程大学 一种基于脑波识别的机械手控制方法及装置
CN113111761A (zh) * 2021-04-07 2021-07-13 山东建筑大学 基于脑机接口与虚拟现实的手部运动能力恢复系统及方法
CN113274032A (zh) * 2021-04-29 2021-08-20 上海大学 一种基于ssvep+mi脑机接口的脑卒中康复训练系统及方法
CN113509349A (zh) * 2021-04-12 2021-10-19 杭州风行医疗器械有限公司 一种关节康复设备及其控制方法
CN114191256A (zh) * 2021-12-23 2022-03-18 燕山大学 一种可穿戴双球铰链腕部康复训练机器人
CN114366129A (zh) * 2021-12-31 2022-04-19 西安臻泰智能科技有限公司 一种脑机接口手功能康复训练系统和方法
CN114664434A (zh) * 2022-03-28 2022-06-24 上海韶脑传感技术有限公司 面向不同医疗机构的脑卒中康复训练系统及其训练方法
CN116421151A (zh) * 2023-06-12 2023-07-14 慧创科仪(北京)科技有限公司 一种用于神经反馈康复训练装置的交互控制方法
CN117159336A (zh) * 2023-11-03 2023-12-05 首都医科大学宣武医院 一种康复训练方法、装置及电子设备

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103750975A (zh) * 2013-12-27 2014-04-30 天津理工大学 基于脑电控制的外骨骼手指康复机器人系统及工作方法
KR20170106039A (ko) * 2016-03-11 2017-09-20 한국생산기술연구원 손 재활 장치 및 이를 포함한 가상현실 재활 훈련 시스템
CN107315478A (zh) * 2017-07-05 2017-11-03 中国人民解放军第三军医大学 一种运动想象上肢智能康复机器人系统及其训练方法
CN109192272A (zh) * 2018-11-26 2019-01-11 燕山大学 基于Leap Motion与VR相结合的手功能康复训练系统及其实现方法
CN109568083A (zh) * 2018-12-15 2019-04-05 华南理工大学 一种多模态交互的上肢康复机器人训练系统
CN208726201U (zh) * 2018-01-29 2019-04-12 燕山大学 一种可穿戴主动式手功能康复机械手
CN109992113A (zh) * 2019-04-09 2019-07-09 燕山大学 一种基于多场景诱发的mi-bci系统及其控制方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103750975A (zh) * 2013-12-27 2014-04-30 天津理工大学 基于脑电控制的外骨骼手指康复机器人系统及工作方法
KR20170106039A (ko) * 2016-03-11 2017-09-20 한국생산기술연구원 손 재활 장치 및 이를 포함한 가상현실 재활 훈련 시스템
CN107315478A (zh) * 2017-07-05 2017-11-03 中国人民解放军第三军医大学 一种运动想象上肢智能康复机器人系统及其训练方法
CN208726201U (zh) * 2018-01-29 2019-04-12 燕山大学 一种可穿戴主动式手功能康复机械手
CN109192272A (zh) * 2018-11-26 2019-01-11 燕山大学 基于Leap Motion与VR相结合的手功能康复训练系统及其实现方法
CN109568083A (zh) * 2018-12-15 2019-04-05 华南理工大学 一种多模态交互的上肢康复机器人训练系统
CN109992113A (zh) * 2019-04-09 2019-07-09 燕山大学 一种基于多场景诱发的mi-bci系统及其控制方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
刘志辉 等: "基于Leap Motion的脑卒中上肢功能康复主动运动系统", 《东华大学学报（自然科学版）》 *

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111789740A (zh) * 2020-06-22 2020-10-20 浙江工业大学 一种关节康复机械手
CN111938991A (zh) * 2020-07-21 2020-11-17 燕山大学 一种双主动控制模式的手部康复训练装置及训练方法
CN113070875A (zh) * 2021-02-26 2021-07-06 中国人民解放军海军工程大学 一种基于脑波识别的机械手控制方法及装置
CN113111761A (zh) * 2021-04-07 2021-07-13 山东建筑大学 基于脑机接口与虚拟现实的手部运动能力恢复系统及方法
CN113509349A (zh) * 2021-04-12 2021-10-19 杭州风行医疗器械有限公司 一种关节康复设备及其控制方法
CN113274032A (zh) * 2021-04-29 2021-08-20 上海大学 一种基于ssvep+mi脑机接口的脑卒中康复训练系统及方法
CN114191256A (zh) * 2021-12-23 2022-03-18 燕山大学 一种可穿戴双球铰链腕部康复训练机器人
CN114366129A (zh) * 2021-12-31 2022-04-19 西安臻泰智能科技有限公司 一种脑机接口手功能康复训练系统和方法
CN114366129B (zh) * 2021-12-31 2024-05-03 西安臻泰智能科技有限公司 一种脑机接口手功能康复训练系统和方法
CN114664434A (zh) * 2022-03-28 2022-06-24 上海韶脑传感技术有限公司 面向不同医疗机构的脑卒中康复训练系统及其训练方法
CN116421151A (zh) * 2023-06-12 2023-07-14 慧创科仪(北京)科技有限公司 一种用于神经反馈康复训练装置的交互控制方法
CN116421151B (zh) * 2023-06-12 2023-09-12 慧创科仪(北京)科技有限公司 一种用于神经反馈康复训练装置的交互控制方法
CN117159336A (zh) * 2023-11-03 2023-12-05 首都医科大学宣武医院 一种康复训练方法、装置及电子设备
CN117159336B (zh) * 2023-11-03 2024-02-02 首都医科大学宣武医院 一种康复训练方法、装置及电子设备

Similar Documents

Publication Publication Date Title
CN111110982A (zh) 基于运动想象的手部康复训练方法
CN111938991A (zh) 一种双主动控制模式的手部康复训练装置及训练方法
CN113398422B (zh) 基于运动想象-脑机接口和虚拟现实的康复训练系统及方法
CN109992113B (zh) 一种基于多场景诱发的mi-bci系统及其控制方法
CN107928980B (zh) 一种偏瘫患者的手部自主康复训练系统及训练方法
Pfurtscheller et al. 15 years of BCI research at Graz University of Technology: current projects
CN104107134B (zh) 基于肌电反馈的上肢训练方法及系统
CN108814597A (zh) 一种基于运动信息与肌电交互的康复训练评测方法及系统
CN107626040A (zh) 一种基于可交互虚拟现实和神经电刺激的康复系统及方法
CN113274032A (zh) 一种基于ssvep+mi脑机接口的脑卒中康复训练系统及方法
CN105771087A (zh) 基于音乐和肌电反馈刺激的康复训练系统
CN111544854A (zh) 基于脑肌电信号深度学习融合的脑卒中运动康复方法
WO2023206833A1 (zh) 基于肌肉协同和变刚度阻抗控制的手腕部康复训练系统
CN111091890B (zh) 自我激励与反馈控制下的健康认知系统
CN113940856A (zh) 一种基于肌电-惯性信息的手部康复训练装置及方法
CN112465059A (zh) 基于跨脑融合决策的多人运动想象识别方法及脑机系统
CN1803122A (zh) 利用想象运动脑电波产生康复训练器械控制命令的方法
CN110400619A (zh) 一种基于表面肌电信号的手功能康复训练方法
CN111584031A (zh) 基于便携式脑电采集设备的脑控智能肢体康复系统及应用
CN113713333B (zh) 一种下肢康复全训练过程的动态虚拟诱导方法及系统
CN114173663A (zh) 神经康复系统及神经康复方法
Kim et al. Subject-Transfer Approach based on Convolutional Neural Network for the SSSEP-BCIs
CN106371588A (zh) 基于运动想象脑机接口的手功能康复方法
CN215017698U (zh) 康复训练运动模拟可视化系统
CN109568891A (zh) 基于脑电的康复机器人主被动训练模式控制系统及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20200508

RJ01 Rejection of invention patent application after publication