CN113476799A - 基于肌电和惯性信息的手部训练及评估方法 - Google Patents

基于肌电和惯性信息的手部训练及评估方法 Download PDF

Info

Publication number
CN113476799A
CN113476799A CN202110762225.0A CN202110762225A CN113476799A CN 113476799 A CN113476799 A CN 113476799A CN 202110762225 A CN202110762225 A CN 202110762225A CN 113476799 A CN113476799 A CN 113476799A
Authority
CN
China
Prior art keywords
training
data point
action
myoelectric
inertia
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110762225.0A
Other languages
English (en)
Other versions
CN113476799B (zh
Inventor
谢平
蔚建
王子豪
王颖
王新宇
于金须
焦云涛
陈晓玲
李增勇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yanshan University
Original Assignee
Yanshan University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yanshan University filed Critical Yanshan University
Priority to CN202110762225.0A priority Critical patent/CN113476799B/zh
Publication of CN113476799A publication Critical patent/CN113476799A/zh
Application granted granted Critical
Publication of CN113476799B publication Critical patent/CN113476799B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B23/00Exercising apparatus specially adapted for particular parts of the body
    • A63B23/035Exercising apparatus specially adapted for particular parts of the body for limbs, i.e. upper or lower limbs, e.g. simultaneously
    • A63B23/12Exercising apparatus specially adapted for particular parts of the body for limbs, i.e. upper or lower limbs, e.g. simultaneously for upper limbs or related muscles, e.g. chest, upper back or shoulder muscles
    • A63B23/16Exercising apparatus specially adapted for particular parts of the body for limbs, i.e. upper or lower limbs, e.g. simultaneously for upper limbs or related muscles, e.g. chest, upper back or shoulder muscles for hands or fingers
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1101Detecting tremor
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/24Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316Modalities, i.e. specific diagnostic methods
    • A61B5/389Electromyography [EMG]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7203Signal processing specially adapted for physiological signals or for diagnostic purposes for noise prevention, reduction or removal
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235Details of waveform analysis
    • A61B5/725Details of waveform analysis using specific filters therefor, e.g. Kalman or adaptive filters
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235Details of waveform analysis
    • A61B5/7264Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
    • A61B5/7267Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems involving training the classification device
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61HPHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H1/00Apparatus for passive exercising; Vibrating apparatus; Chiropractic devices, e.g. body impacting devices, external devices for briefly extending or aligning unbroken bones
    • A61H1/02Stretching or bending or torsioning apparatus for exercising
    • A61H1/0218Drawing-out devices
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61HPHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H1/00Apparatus for passive exercising; Vibrating apparatus; Chiropractic devices, e.g. body impacting devices, external devices for briefly extending or aligning unbroken bones
    • A61H1/02Stretching or bending or torsioning apparatus for exercising
    • A61H1/0274Stretching or bending or torsioning apparatus for exercising for the upper limbs
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B21/00Exercising apparatus for developing or strengthening the muscles or joints of the body by working against a counterforce, with or without measuring devices
    • A63B21/00181Exercising apparatus for developing or strengthening the muscles or joints of the body by working against a counterforce, with or without measuring devices comprising additional means assisting the user to overcome part of the resisting force, i.e. assisted-active exercising
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0062Monitoring athletic performances, e.g. for determining the work of a user on an exercise apparatus, the completed jogging or cycling distance
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0622Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61HPHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H2201/00Characteristics of apparatus not provided for in the preceding codes
    • A61H2201/16Physical interface with patient
    • A61H2201/1657Movement of interface, i.e. force application means
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/40Acceleration
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2230/00Measuring physiological parameters of the user
    • A63B2230/60Measuring physiological parameters of the user muscle strain, i.e. measured on the user

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Physics & Mathematics (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Biophysics (AREA)
  • Medical Informatics (AREA)
  • Artificial Intelligence (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Physiology (AREA)
  • Signal Processing (AREA)
  • Orthopedic Medicine & Surgery (AREA)
  • Psychiatry (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Epidemiology (AREA)
  • Rehabilitation Therapy (AREA)
  • Pain & Pain Management (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Evolutionary Computation (AREA)
  • Fuzzy Systems (AREA)
  • Mathematical Physics (AREA)
  • Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本发明提供一种基于肌电和惯性信息的手部训练及评估方法,步骤如下:S1、根据不同的训练强度,设计两种虚拟训练场景;S2、将delsys的肌电惯性采集模块分别与第一侧和第二侧进行连接,并将采集的肌电惯性信号传输给上位机;S3、在进入虚拟训练场景之前,将S1中虚拟训练场景的动作训练提示进行分类器的训练;S4、将S2采集的第一侧的肌电信号通过S3进行预处理和特征提取,并送入S3训练好的区分动作的分类器中,生成相应的动作指令;S5、将S4生成的动作指令传输到康复机械手中,完成对应的动作;S6、对S5训练好的动作完成训练后的结果进行评估。本发明利用第一侧第二侧协同运动,结合康复机械手辅助第二侧进行抓握训练,加速手部康复速度和康复效果。

Description

基于肌电和惯性信息的手部训练及评估方法
技术领域
本发明涉及虚拟肌电反馈领域,特别涉及一种基于肌电和惯性信息的手部训练及评估方法。
背景技术
脑卒中,俗称中风,是最常见的最多发的脑血管疾病,据2016年全球疾病负担研究,由于生活工作压力,生活不规律等原因,使得脑卒中不仅老年人容易发生,第一批90后也成为了中风的高发人群。国际权威杂志《circulation》上有文章指出,我国目前是个脑卒中大国,发病率很高。研究表明,75%以上的脑卒中患者存在不同程度的肢体功能障碍,给个人健康、家庭幸福带来影响。中风后若不能及时治疗或处理不当,可能会导致偏瘫甚至危及生命,其中,手部运动功能障碍已成为脑卒中引发的主要病症之一,具体表现为手指关节弯曲伸展困难,不能进行正常的抓握与伸展动作。研究证明,目前最有效的治疗方案是,在药物治疗后立刻转为康复治疗,通过康复训练重建肢体与中枢神经的反射弧,逐步促进脑部受损神经系统恢复,积极主动的康复训练有助于患者肢体运动功能的恢复并促进痊愈。
目前,主要的手部康复训练的方法,是采用康复医师借助简单医疗器械一对一进行康复训练,这种方法主要依靠治疗医师的经验,缺乏对患者个体本身机能的分析诊断,训练过程枯燥乏味,患者参与主动性差,并且容易因疲劳造成二次伤害,使得康复周期延长。随着科学技术的高速发展,市面上也出现了多种手部康复训练的新兴技术,如脉冲电流刺激疗法,机器人辅助疗法,运动想象疗法等,其中,机器人辅助疗法结合生理电信号反馈和虚拟场景刺激,可以提高康复训练的效率,调动患者的积极性,对于脑卒中患者手部功能的改善后很好的疗效。但是目前康复训练存在模式单一、缺乏疲劳反馈调节等缺陷。
发明内容
针对现有技术存在的问题,本发明提供一种基于肌电和惯性信息的手部训练及评估系统方法,主要通过采集第一侧手臂肌电信号,协同控制第二侧的可穿戴机械手进行伸展和抓握动作,结合不同的虚拟场景和leap motion实现虚拟手的抓握的虚实交互,进而完成手部的康复训练,并通过采集第一侧第二侧食指的惯性信息和手臂的肌电信号进行第一侧第二侧之间的相关性分析,进而评估患者康复状况,方便后续的训练调整。
本发明提供了一种基于肌电和惯性信息的手部训练及评估方法,具体实施步骤如下:
S1、从肌电数据库中提取第一侧动作肌电惯性信号和第二侧动作肌电惯性信号并传输给上位机;
S2、根据不同的训练强度,设计两种虚拟训练场景,通过体感控制器完成相应的动作;
S3、在进入虚拟训练场景之前,根据步骤S2中虚拟训练场景的动作训练提示进行分类器的训练:
S31、将步骤S1提取的第一侧动作肌电惯性信号传输给上位机,利用10~200Hz的带通滤波器和50Hz的陷波器去除肌电信号的高频噪声和工频干扰;
S32、确定肌电惯性信号的K-邻近距离,用Rx和Ry分别表示第一侧动作肌电惯性信号和第二侧动作肌电惯性信号,得到数据点p到数据点o的可达距离reach-dist(p,o),具体表达式如下:
reach_distk(p,o)=max{k-distance(o),d(p,o)}
式中,p、o-信号中的任意两个数据点,k-distance(o)-第k个最近的点跟点p之间的距离,d(p,o)-数据点数据点p到数据点o的距离;
S33、根据步骤S32获得的可达距离,计算数据点p的局部可达密度,具体表达式如下:
Figure BDA0003150361700000021
式中,Nk(p)-与数据点p的距离小于等于K-邻近距离的数据点;
S34、根据步骤S33获得的可达距离,计算数据点p的局部相对密度(局部异常因子),具体表达式如下:
Figure BDA0003150361700000031
式中,lrdk(p)-数据点p的局部可达密度;
S35、根据Rx和Ry两个肌电惯性信号各点所求的局部异常因子的大小,定义一个阈值u,通过阈值u得到优化后的第一侧动作肌电惯性信号和第二侧动作肌电惯性信号R′x和R′y
S36、通过LOF算法结合传统CSP算法,得到改进的CSP算法的目标函数,具体表达式如下:
Figure BDA0003150361700000032
式中,w-空间滤波器,R′x、R′y-优化后的肌电信号;
S37、结合步骤S35和步骤S36,根据广义特征方程,求出空间滤波器w,具体表达式如下:
Rxw=λRyw
式中,λ-(R′y)-1R′x的特征值;
S38、利用步骤S37得到的空间滤波器对步骤S31处理的样本进行特征提取,具体表达式如下:
Figure BDA0003150361700000033
式中,δ一般取值为0.05;
S39、将步骤S34提取的两类动作的特征,送入支持向量机(SVM)中,进行模型的训练,得到训练好的区分动作的分类器;
S4、根据步骤S2建立的虚拟训练场景,将步骤S1提取的第一侧动作肌电惯性信号通过步骤S31至步骤S38进行预处理和特征提取,并送入步骤S3训练好的区分动作的分类器中,生成相应的动作指令;
S5、将步骤S4生成的动作指令传输到康复机械手中,完成对应的动作;
S6、对步骤S5通过训练好的动作完成训练后的结果进行评估:
S61、采集第一侧和第二侧在虚拟场景训练中相关动作造成的静态姿势震颤引起的加速度信号;
S62、对步骤S61采集的加速度信号进行0.5~195Hz的带通滤波;
S63、计算步骤S62得到的加速度信号的欧几里得范数,具体表达式如下:
Figure BDA0003150361700000041
式中,x1、x2、x3分别是x、y、z三个轴上的加速度值;
S64、对步骤S63得到的第一侧动作肌电惯性信号、第二侧动作肌电惯性信号和加速度信号进行一致性分析,具体表达式为:
Figure BDA0003150361700000042
式中,sxy(f)是信号x和y之间的互功率密度谱;sxy(f)、sxy(f)分别为信号x、y的自功率谱密度函数。
可优选的是,在步骤S3中,第一侧进行数据训练的次数为20次。
可优选的是,在步骤S32中,所述可达距离reach-dist(p,o),为数据点o的K-邻近距离和数据点p与数据点o之间的直接距离的最大值。
可优选的是,在步骤S33中,所述数据点p的局部可达密度为数据点p与邻近的数据点的平均可达距离的倒数。
可优选的是,在步骤S34中,所述数据点p的局部相对密度(局部异常因子)为数据点p的邻居们的平均局部可达密度跟数据点p的局部可达密度的比值。
可优选的是,在步骤S35中,阈值u的取值大于1。
可优选的是,所述训练及评估方法的训练装置,其包括Delsys肌电惯性采集模块、上位机软件、无线传输模块、电极驱动模块、leap motion人机交互设备和康复机械手。
本发明与现有技术相比,具有如下优点:
1.本发明针对受试者肢体运动能力差异性,采用多种虚拟场景对受试者进行场景刺激,确保受试者参与的主动性和康复训练的高效性,加速受试者的健康恢复,缩短康复周期;
2.本发明针对受试者的手部功能障碍问题,利用第一侧第二侧协同运动,结合可穿戴康复机械手辅助受试者第二侧进行抓握训练,通过对手部功能障碍患者的物理治疗,加速患者的手部康复速度和康复效果;
3.本发明采用LOF-CSP算法进行数据的特征提取,消除了传统CSP算法对异常数据敏感的特点,使的特征值提取的更加准确,也提高了后续分类准确性。
4.本发明针对受试者个体差异性,采用分析同一受试者的第一侧和第二侧的加速度信号和肌电信号的多种指标的相关性,来评估受试者的康复状况,采用受试者自身的第一侧第二侧的多个信号指标进行对比,使得评估结果更加准确合理。
附图说明
图1为本发明基于肌电和惯性信息的手部训练及评估方法的方法原理图;
图2为本发明基于肌电和惯性信息的手部训练及评估方法中训练阶段实验范式示意图;
图3为本发明基于肌电和惯性信息的手部训练及评估方法的虚拟场景图;
图4为本发明基于肌电和惯性信息的手部训练及评估方法的评估结果界面图;
图5为本发明基于肌电和惯性信息的手部训练及评估方法中的康复训练方法实施流程图;
图6为本发明基于肌电和惯性信息的手部训练及评估方法中的康复评估方法实施流程图。
具体实施方式
为详尽本发明之技术内容、所达成目的及功效,以下将结合说明书附图进行详细说明。
如图1所示,基于肌电和惯性信息的手部训练及评估方法,主要是通过采集第一侧的肌电信号,经过无线传输到上位机,通过上位机软件MATLAB进行处理,通过基于局部异常因子算法(LOF)的共空间模式(CSP)改进算法进行数据特征的提取,经支持向量机(SVM)进行分类处理,对第一侧动作进行区分,并将动作指令经无线传输到第二侧佩戴的可穿戴康复机械手,使第二侧完成同样动作,结合不同的虚拟场景和leap motion实现左右两个虚拟手与现实手动作的虚实交互,实现第一侧第二侧手与虚拟手的“四手联动”,进而完成手部的康复训练,并通过同步采集受试者第一侧和第二侧手臂上的肌电和惯性信号对受试者的康复状态进行评估,对患者目前的康复情况进行评估,方便后续的康复训练的进行。
本发明通过虚拟场景的人机交互充分调动了患者参与康复训练的积极性,增加康复训练的有效性,缩短康复周期;通过康复机械手的辅助训练,增强患者手部肌力、手指协调性、灵活性等功能的恢复,并通过对患者第一侧第二侧肌电和惯性信息的分析,实时对患者康复状态进行评估,方便后续训练的调整,使康复训练更加智能化、人性化,构建“以人为中心”的康复训练策略,具体流程如图4所示。
本发明是这样实现的,具体实施步骤如下,如图5所示:
S1、将delsys(表面肌电仪)的肌电惯性采集模块分别与第一侧和第二侧进行连接,通过delsys自带的通讯基站实现与上位机软件的无线通讯,并在第二侧佩戴康复机械手,通过无线传输模块实现康复机械手与上位机软件的通讯。
S2、根据不同的训练强度,设计两种虚拟训练场景,通过leap motion(体感控制器)完成相应的动作。
每种虚拟训练场景构造了左右两个虚拟手,通过leap motion体感控制器实现现实手和虚拟手的交互,leap motion体感控制器是通过识别受试者放在识别区域的手部的关节活动信息,可以在虚拟场景中操纵虚拟手实现相同动作,在进行动作之前,两个虚拟手同时进行抓握和伸展的重复动作,从视觉上对受试者产生刺激,引导受试者完成抓握动作。
S3、在进入虚拟训练场景之前,需对受试者进行动作数据训练,动作主要包含手部的抓握和伸展,在开始之前,受试者手处于放松状态,根据场景中的提示,完成抓握或者伸展动作,在进行完动作后立马回复成放松状态,等待下一次场景的提示,手部的抓握和伸展各进行20次,出现顺序是随机的。
S4、根据步骤S2建立的虚拟训练场景,接将步骤S1采集的第一侧的肌电信号通过步骤S31至步骤S38进行预处理和特征提取,并送入步骤S3训练好的区分动作的分类器中,进行动作识别,生成相应的动作指令。
S5、将步骤S4生成的动作指令通过无线传输模块传输到第二侧佩戴的康复机械手中,完成对应的动作;协助第二侧完成同样的动作,共同完成虚拟场景的任务,实现康复训练。
S6、同步采集第一侧手臂上的动作肌电惯性信号、第二侧手臂上的动作肌电惯性信号和加速度信号,对步骤S5通过训练好的动作完成训练后的结果进行评估。
具体而言,所述步骤S3的具体实施步骤如下:
S31、将步骤S2采集的第一侧动作的肌电惯性信号传输给上位机,利用10~200Hz的带通滤波器和50Hz的陷波器去除肌电信号的高频噪声和工频干扰。
基于局部异常因子算法(LOF)的改进共空间模式(CSP)算法,对于传统的CSP算法对于异常值敏感的特点,采用LOF算法对异常数据进行筛选和剔除。LOF算法之前的异常检测算法大多是基于统计方法的,或者是借用了一些聚类算法用于异常点的识别,其中基于统计的异常检测算法通常需要假设数据服从特定的概率分布,这个假设往往是不成立的;而聚类的方法通常只能给出0/1的判断(即:是不是异常点),不能量化每个数据点的异常程度。相比较而言,LOF算法要更简单、直观,它不需要对数据的分布做太多要求,还能量化每个数据点的异常程度。
S32、确定肌电惯性信号的K-邻近距离,用Rx和Ry分别表示第一侧和第二侧两种肌电惯性信号,得到数据点p到数据点o的可达距离reach-dist(p,o),可达距离reach-dist(p,o)为数据点o的K-邻近距离和数据点p与数据点o之间的直接距离的最大值,具体表达式如下:
reach_distk(p,o)=max{k-distance(o),d(p,o)}
式中,p、o-信号中的任意两个数据点,k-distance(o)-第k个最近的点跟点p之间的距离,d(p,o)-数据点数据点p到数据点o的距离。
S33、根据步骤S32获得的可达距离,计算数据点p的局部可达密度,对于数据点p,那些跟点p的距离小于等于k-distance(p)的数据点称为它的k-nearest-neighbor,记为Nk(p),数据点p的局部可达密度为数据点p与邻近的数据点的平均可达距离的倒数,具体表达式如下:
Figure BDA0003150361700000081
式中,Nk(p)-与数据点p的距离小于等于K-邻近距离的数据点。
S34、根据局部可达密度的定义,如果一个数据点跟其他点比较疏远的话,那么显然它的局部可达密度就小,但LOF算法衡量一个数据点的异常程度,并不是看它的绝对局部密度,而是看它跟周围邻近的数据点的相对密度。这样做的好处是可以允许数据分布不均匀、密度不同的情况。局部异常因子即是用局部相对密度来定义的。数据点p的局部相对密度(局部异常因子)为点p的邻居们的平均局部可达密度跟数据点p的局部可达密度的比值,根据步骤S33获得的可达距离,具体表达式如下:
Figure BDA0003150361700000082
式中,lrdk(p)-数据点p的局部可达密度。
S35、根据Rx和Ry两个肌电信号各点所求的局部异常因子的大小,定义一个阈值u,阈值u根据实际情况选定,一般所选阈值u>1,根据所选阈值u,剔除大于阈值u的值,通过阈值u得到优化后的第一侧动作肌电惯性信号和第二侧动作肌电惯性信号R′x和R′y
S36、通过LOF算法结合传统CSP算法,得到改进的CSP算法的目标函数,具体表达式如下:
Figure BDA0003150361700000083
式中,w-空间滤波器,R′x、R′y-优化后的肌电信号。
S37、结合步骤S35和步骤S36,根据广义特征方程,求出空间滤波器w,具体表达式如下:
R′xw=λR′yw
式中,λ-(R′y)-1R′x的特征值。
S38、利用步骤S37得到的空间滤波器对步骤S31处理的样本进行特征提取,求取包含t个离散采样点的肌电信号的特征的具体表达式如下:
Figure BDA0003150361700000091
式中,δ一般取值为0.05;
S39、将步骤S31~S38提取的两类动作的特征,送入支持向量机(SVM)中,进行模型的训练,训练好区分抓握和伸展的二分类器,对虚拟训练场景中的动作进行分类得到训练好的区分动作的分类器。
具体而言,所述步骤S6的具体实施步骤如下:
S61、采集第一侧第二侧在虚拟场景训练中抓握或伸张动作造成的手臂静态姿势震颤引起的加速度信号。
S62、对步骤S61采集的加速度信号进行0.5~195Hz的带通滤波。
S63、计算步骤S62得到的加速度信号的欧几里得范数,避免方向对加速度的影响,具体表达式如下:
Figure BDA0003150361700000092
式中,x1、x2、x3分别是x、y、z三个轴上的加速度值;
S64、进行康复评估,对步骤S63得到的第一侧动作肌电惯性信号、第二侧动作肌电惯性信号和加速度信号进行一致性分析:
Figure BDA0003150361700000093
式中,sxy(f)是信号x和y之间的互功率密度谱;sxy(f)、sxy(f)分别为信号x、y的自功率谱密度函数。
根据查阅相关资料,设置一致性的阈值为0.8,对肌电和加速度信号的一致性大于阈值的部分计算所占整体的百分比,然后将算得的肌电和加速度信号所占百分比的平均值作为受试者的评估结果。本发明的评估方法采用对比第一侧和第二侧的相关性进行评估,避免了受试者之间的个体差异性,使得评估结果更加准确。
在本发明的一个优选实施例中,训练及评估方法的训练装置,其包括Delsys肌电惯性采集模块、上位机软件、无线传输模块、电极驱动模块、leap motion人机交互设备和康复机械手。
以下结合实施例对本发明一种基于肌电和惯性信息的手部训练及评估方法做进一步描述:
S1、在进行康复训练之前,将delsys(表面肌电仪)的肌电惯性采集模块分别贴于第一侧和第二侧的肱桡肌和指伸屈肌处,通过delsys(表面肌电仪)的肌电惯性采集模块的无线基站与上位机连通,并将采集的肌电惯性信号传输给上位机。
S2、根据所需的训练强度不同,设计两种虚拟的训练场景,如图3(b)和(c)所示,通过leap motion(体感控制器)实现虚拟现实的交互,通过识别现实手的关节动作实现虚拟手的相同动作的完成;
所述的虚拟场景包括“摘水果”和“搭积木”两种虚拟场景,如图3(b)和(c)所示。对于图片视频场景,如图3(b)所示,通过诸如“摘水果”游戏画面,通过leap motion实现虚拟现实交互,第一侧第二侧“四手联动”进行虚拟场景中的三种水果根据提示词进行选择摘取,受试者通过康复机械手辅助手部康复训练动作的完成。其中b1-葡萄,b2-苹果,b3-桔子。对于虚拟游戏场景,如图3(c)所示,受试者能够通过leap motion完成场景中虚拟手抓取和伸展动作,完成手部的康复训练。
S3、在进入虚拟训练场景之前,需要进行动作训练。
S31、训练场景如图3(a)所示,根据动作提示在读条时间内完成相应动作,训练阶段实验范式,如图2所示,进入训练环节后,提示受试者集中精神即将开始进行动作,此过程持续2s时间,第2s时,屏幕中央出现抓取动作提示,受试者跟随抓取动作提示进行抓取,持续时间为4s,第6s时运动提示消失,受试者运动结束,之后有2s时间供受试者休息,重复进行第二次运动训练,直到完成10次运动训练。
S32、肌电信号数据预处理:将采集到的训练数据分成10段,分别截取2个通道中每个通道第2s到6s之间(共4s)的数据进行分析处理。首先对截取的运动信号进行带通滤波用于减弱频率低于5Hz和高于200Hz的信号,之后进行0.5~2Hz高通滤波去除基线漂移和自适应陷波去除50Hz工频干扰。
S33、确定肌电信号的K-邻近距离,用Rx和Ry分别表示第一侧和第二侧两种肌电信号,得到数据点p到数据点o的可达距离reach-dist(p,o),具体表达式如下:
reach_distk(p,o)=max{k-distance(o),d(p,o)}
式中,p、o-信号中的任意两个数据点,k-distance(o)-第k个最近的点跟点p之间的距离,d(p,o)-数据点数据点p到数据点o的距离。
S34、根据步骤S33获得的可达距离,计算数据点p的局部可达密度,具体表达式如下:
Figure BDA0003150361700000111
式中,Nk(p)-与数据点p的距离小于等于K-邻近距离的数据点。
S35、密度跟数据点p的局部可达密度的比值,根据步骤S33获得的可达距离,具体表达式如下:
Figure BDA0003150361700000112
式中,lrdk(p)-数据点p的局部可达密度。
S36、根据Rx和Ry两个肌电惯性信号各点所求的局部异常因子的大小,定义一个阈值u,阈值u根据实际情况选定,一般所选阈值u>1,根据所选阈值u,剔除大于阈值u的值,通过阈值u得到优化后的第一侧和第二侧两类动作信号R′x和R′y
S37、通过LOF算法结合传统CSP算法,得到改进的CSP算法的目标函数,具体表达式如下:
Figure BDA0003150361700000113
式中,w-空间滤波器,R′x、R′y-优化后的肌电信号。
S38、结合步骤S36和步骤S37,根据广义特征方程,求出空间滤波器w,具体表达式如下:
R′xw=λR′yw
式中,λ-(R′y)-1R′x的特征值。
S39、利用步骤S38得到的空间滤波器对步骤S32处理的样本进行特征提取,求取包含t个离散采样点的肌电信号的特征的具体表达式如下:
Figure BDA0003150361700000121
式中,δ一般取值为0.05;
S310、将步骤S39提取的两类动作的特征,送入支持向量机(SVM)中,进行模型的训练,SVM能够实现在特征空间构建最优分割超平面,进而使不同类别的样本线性分开。选用径向基函数作为SVM的核函数,惩罚系数c和决定数据映射到新特征空间分布的参数g采用交叉验证方式自动确定,训练好区分抓握和伸展的二分类器,对虚拟训练场景中的动作进行分类得到训练好的区分动作的分类器。
S4、根据步骤S2建立的虚拟训练场景,接将步骤S31采集的第一侧的肌电惯性信号通过步骤S32至步骤S310进行预处理和特征提取,并送入步骤S3训练好的区分动作的分类器中,生成相应的动作指令。
S5、进入虚拟康复训练界面,利用Unity3D游戏开发引擎搭建了虚拟场景,全方位诱导受试者进行肢体运动。通过训练采集数据,根据上述步骤S3-S4,将经过预处理和特征提取后的信号特征,送入到构建好的SVM分类模型中,对信号进行动作的识别,并生成相应的动作指令。将生成的动作指令通过无线传输模块传输到第二侧佩戴的康复机械手中,完成对应的动作,协助第二侧完成同样的动作,共同完成虚拟场景的任务,实现康复训练;
S6、同步采集第一侧和第二侧手臂上的肌电惯性信号和加速度信号,对步骤S5通过训练好的动作完成训练后的结果进行评估,具体流程如图6所示:
S61、采集第一侧第二侧在虚拟场景训练中抓握或伸张动作造成的静态姿势震颤引起的加速度信号。
S62、对步骤S61采集的加速度信号进行0.5~195Hz的带通滤波。
S63、计算步骤S62得到的加速度信号的欧几里得范数,避免方向对加速度的影响,具体表达式如下:
Figure BDA0003150361700000131
式中,x1、x2、x3分别是x、y、z三个轴上的加速度值;
S64、进行康复评估,对步骤S63得到的第一侧第二侧的肌电和加速度信号进行一致性分析,具体表达式为进行康复评估,对步骤S63得到的第一侧动作肌电惯性信号、第二侧动作肌电惯性信号和加速度信号进行一致性分析:
Figure BDA0003150361700000132
式中,sxy(f)是信号x和y之间的互功率密度谱;sxy(f)、sxy(f)分别为信号x、y的自功率谱密度函数。
以上所述的实施例仅是对本发明的优选实施方式进行描述,并非对本发明的范围进行限定,在不脱离本发明设计精神的前提下,本领域普通技术人员对本发明的技术方案做出的各种变形和改进,均应落入本发明权利要求书确定的保护范围内。

Claims (7)

1.一种基于肌电和惯性信息的手部训练及评估方法,其特征在于,具体实施步骤如下:
S1、从肌电数据库中提取第一侧动作肌电惯性信号和第二侧动作肌电惯性信号并传输给上位机;
S2、根据不同的训练强度,设计两种虚拟训练场景,通过体感控制器完成相应的动作;
S3、在进入虚拟训练场景之前,根据步骤S2中虚拟训练场景的动作训练提示进行分类器的训练:
S31、将步骤S1提取的第一侧动作肌电惯性信号传输给上位机,利用10~200Hz的带通滤波器和50Hz的陷波器去除肌电信号的高频噪声和工频干扰;
S32、确定肌电惯性信号的K-邻近距离,用Rx和Ry分别表示第一侧动作肌电惯性信号和第二侧动作肌电惯性信号,得到数据点p到数据点o的可达距离reach-dist(p,o),具体表达式如下:
reach_distk(p,o)=max{k-distance(o),d(p,o)}
式中,p、o-信号中的任意两个数据点,k-distance(o)-第k个最近的点跟点p之间的距离,d(p,o)-数据点数据点p到数据点o的距离;
S33、根据步骤S32获得的可达距离,计算数据点p的局部可达密度,具体表达式如下:
Figure FDA0003150361690000011
式中,Nk(p)-与数据点p的距离小于等于K-邻近距离的数据点;
S34、根据步骤S33获得的可达距离,计算数据点p的局部相对密度(局部异常因子),具体表达式如下:
Figure FDA0003150361690000012
式中,lrdk(p)-数据点p的局部可达密度;
S35、根据Rx和Ry两个肌电惯性信号各点所求的局部异常因子的大小,定义一个阈值u,通过阈值u得到优化后的第一侧动作肌电惯性信号和第二侧动作肌电惯性信号R′x和R′y
S36、通过LOF算法结合传统CSP算法,得到改进的CSP算法的目标函数,具体表达式如下:
Figure FDA0003150361690000021
式中,w-空间滤波器,R′x、R′y-优化后的肌电信号;
S37、结合步骤S35和步骤S36,根据广义特征方程,求出空间滤波器w,具体表达式如下:
R′xw=λR′yw
式中,λ-(R′y)-1R′x的特征值;
S38、利用步骤S37得到的空间滤波器对步骤S31处理的样本进行特征提取,具体表达式如下:
Figure FDA0003150361690000022
式中,δ一般取值为0.05;
S39、将步骤S34提取的两类动作的特征,送入支持向量机(SVM)中,进行模型的训练,得到训练好的区分动作的分类器;
S4、根据步骤S2建立的虚拟训练场景,将步骤S1提取的第一侧动作肌电惯性信号通过步骤S31至步骤S38进行预处理和特征提取,并送入步骤S3训练好的区分动作的分类器中,生成相应的动作指令;
S5、将步骤S4生成的动作指令传输到康复机械手中,完成对应的动作;
S6、对步骤S5通过训练好的动作完成训练后的结果进行评估:
S61、采集第一侧和第二侧在虚拟场景训练中相关动作造成的静态姿势震颤引起的加速度信号;
S62、对步骤S61采集的加速度信号进行0.5~195Hz的带通滤波;
S63、计算步骤S62得到的加速度信号的欧几里得范数,具体表达式如下:
Figure FDA0003150361690000031
式中,x1、x2、x3分别是x、y、z三个轴上的加速度值;
S64、对步骤S63得到的第一侧动作肌电惯性信号、第二侧动作肌电惯性信号和加速度信号进行一致性分析,具体表达式为:
Figure FDA0003150361690000032
式中,sxy(f)是信号x和y之间的互功率密度谱;sxy(f)、sxy(f)分别为信号x、y的自功率谱密度函数。
2.根据权利要求1所述的基于肌电和惯性信息的手部训练及评估方法,其特征在于,在步骤S3中,第一侧进行数据训练的次数为20次。
3.根据权利要求1或者2所述的基于肌电和惯性信息的手部训练及评估方法,其特征在于,在步骤S32中,所述可达距离reach-dist(p,o),为数据点o的K-邻近距离和数据点p与数据点o之间的直接距离的最大值。
4.根据权利要求1或者2所述的基于肌电和惯性信息的手部训练及评估方法,其特征在于,在步骤S33中,所述数据点p的局部可达密度为数据点p与邻近的数据点的平均可达距离的倒数。
5.根据权利要求1或者2所述的基于肌电和惯性信息的手部训练及评估方法,其特征在于,在步骤S34中,所述数据点p的局部相对密度(局部异常因子)为数据点p的邻居们的平均局部可达密度跟数据点p的局部可达密度的比值。
6.根据权利要求1或者2所述的基于肌电和惯性信息的手部训练及评估方法,其特征在于,在步骤S35中,阈值u的取值大于1。
7.根据权利要求1所述的基于肌电和惯性信息的手部训练及评估方法,其特征在于,所述训练及评估系统的训练装置,其包括Delsys肌电惯性采集模块、上位机软件、无线传输模块、电极驱动模块、leap motion人机交互设备和康复机械手。
CN202110762225.0A 2021-07-06 2021-07-06 基于肌电和惯性信息的手部训练及评估方法 Active CN113476799B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110762225.0A CN113476799B (zh) 2021-07-06 2021-07-06 基于肌电和惯性信息的手部训练及评估方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110762225.0A CN113476799B (zh) 2021-07-06 2021-07-06 基于肌电和惯性信息的手部训练及评估方法

Publications (2)

Publication Number Publication Date
CN113476799A true CN113476799A (zh) 2021-10-08
CN113476799B CN113476799B (zh) 2022-04-19

Family

ID=77941320

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110762225.0A Active CN113476799B (zh) 2021-07-06 2021-07-06 基于肌电和惯性信息的手部训练及评估方法

Country Status (1)

Country Link
CN (1) CN113476799B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113940856A (zh) * 2021-10-22 2022-01-18 燕山大学 一种基于肌电-惯性信息的手部康复训练装置及方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180051728A (ko) * 2016-11-08 2018-05-17 주식회사 사람과기술 견관절 트레이닝 프로토콜을 이용한 메디컬 트레이닝 시스템
CN109003300A (zh) * 2018-07-09 2018-12-14 查常财 一种基于人体质心位移计算算法的虚拟现实系统
CN109331453A (zh) * 2018-08-07 2019-02-15 燕山大学 基于肌电反馈与Kinect交互的虚拟康复系统及训练方法
US20190314680A1 (en) * 2018-04-11 2019-10-17 Roemsystem Corp. Noiseless exercise system using emg
CN110362608A (zh) * 2019-06-11 2019-10-22 广东工业大学 基于雨流计数法和局部异常因子的能耗异常检测方法
CN110852969A (zh) * 2019-11-07 2020-02-28 中国科学院微小卫星创新研究院 一种基于局部异常因子的星图小波去噪方法
CN111191509A (zh) * 2019-11-28 2020-05-22 燕山大学 基于scsp-lda的脑电信号特征提取与分类方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180051728A (ko) * 2016-11-08 2018-05-17 주식회사 사람과기술 견관절 트레이닝 프로토콜을 이용한 메디컬 트레이닝 시스템
US20190314680A1 (en) * 2018-04-11 2019-10-17 Roemsystem Corp. Noiseless exercise system using emg
CN109003300A (zh) * 2018-07-09 2018-12-14 查常财 一种基于人体质心位移计算算法的虚拟现实系统
CN109331453A (zh) * 2018-08-07 2019-02-15 燕山大学 基于肌电反馈与Kinect交互的虚拟康复系统及训练方法
CN110362608A (zh) * 2019-06-11 2019-10-22 广东工业大学 基于雨流计数法和局部异常因子的能耗异常检测方法
CN110852969A (zh) * 2019-11-07 2020-02-28 中国科学院微小卫星创新研究院 一种基于局部异常因子的星图小波去噪方法
CN111191509A (zh) * 2019-11-28 2020-05-22 燕山大学 基于scsp-lda的脑电信号特征提取与分类方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113940856A (zh) * 2021-10-22 2022-01-18 燕山大学 一种基于肌电-惯性信息的手部康复训练装置及方法

Also Published As

Publication number Publication date
CN113476799B (zh) 2022-04-19

Similar Documents

Publication Publication Date Title
CN109718059B (zh) 手部康复机器人自适应控制方法及装置
CN104107134B (zh) 基于肌电反馈的上肢训练方法及系统
CN113398422B (zh) 基于运动想象-脑机接口和虚拟现实的康复训练系统及方法
Bhattacharyya et al. A synergetic brain-machine interfacing paradigm for multi-DOF robot control
CN111938991A (zh) 一种双主动控制模式的手部康复训练装置及训练方法
CN107273798A (zh) 一种基于表面肌电信号的手势识别方法
CN111110982A (zh) 基于运动想象的手部康复训练方法
CN113940856B (zh) 一种基于肌电-惯性信息的手部康复训练装置及方法
CN111584030A (zh) 基于深度学习和复杂网络的意念控制智能康复系统及应用
CN111584031B (zh) 基于便携式脑电采集设备的脑控智能肢体康复系统及应用
CN113143676B (zh) 一种基于脑肌电协同的外肢体手指的控制方法
CN107440887A (zh) 全仿生类脑智能手部电子机械外骨骼及其综合控制系统
CN114469641A (zh) 基于肌电识别的功能性电刺激运动障碍镜像训练方法
Li et al. A brain computer interface based humanoid robot control system
CN106267557A (zh) 一种基于小波变换和支持向量机辨识的脑控主动上肢医疗康复训练系统
CN113476799B (zh) 基于肌电和惯性信息的手部训练及评估方法
CN114021604A (zh) 一种基于3d虚拟现实技术实时反馈的运动想象训练系统
CN113426007B (zh) 一种用于上肢功能恢复的闭环硬脊膜外电刺激系统
CN114082169B (zh) 基于脑电信号的伤残手软体康复机器人运动想象识别方法
Tao et al. Decoding multi-class EEG signals of hand movement using multivariate empirical mode decomposition and convolutional neural network
Bhattacharyya et al. EEG controlled remote robotic system from motor imagery classification
CN113730190A (zh) 一种三维空间运动的上肢康复机器人系统
CN115778760A (zh) 一种手功能自适应康复训练系统及工作方法
Koyas et al. Detection of intention level in response to task difficulty from EEG signals
CN115624338A (zh) 一种上肢刺激反馈康复装置及其控制方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant