CN110826625A - 一种基于表面肌电信号的手指手势分类方法 - Google Patents

一种基于表面肌电信号的手指手势分类方法 Download PDF

Info

Publication number
CN110826625A
CN110826625A CN201911076572.7A CN201911076572A CN110826625A CN 110826625 A CN110826625 A CN 110826625A CN 201911076572 A CN201911076572 A CN 201911076572A CN 110826625 A CN110826625 A CN 110826625A
Authority
CN
China
Prior art keywords
matrix
svm
value
follows
signals
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201911076572.7A
Other languages
English (en)
Other versions
CN110826625B (zh
Inventor
李春泉
何永华
胡杜娟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lattice Power Jiangxi Corp
Original Assignee
Lattice Power Jiangxi Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lattice Power Jiangxi Corp filed Critical Lattice Power Jiangxi Corp
Priority to CN201911076572.7A priority Critical patent/CN110826625B/zh
Publication of CN110826625A publication Critical patent/CN110826625A/zh
Application granted granted Critical
Publication of CN110826625B publication Critical patent/CN110826625B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2411Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on the proximity to a decision surface, e.g. support vector machines
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00Aspects of pattern recognition specially adapted for signal processing
    • G06F2218/08Feature extraction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00Aspects of pattern recognition specially adapted for signal processing
    • G06F2218/12Classification; Matching

Landscapes

  • Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)

Abstract

本发明提供了一种基于表面肌电信号的手指手势分类方法,包括以下步骤:步骤1,采集人体手指动作的表面肌电信号;步骤2:处理表面肌电信号:(a)提取活动段肌电信号,(b)对活动段信号进行去噪处理,(c)提取特征值,(d)对特征值进行降维;步骤3:手指动作的模式识别:(a)选取SVM混合核函数,(b)基于VGLBSO算法的混合核SVM参数优化,(c)构造SVM多分类器。本发明充分考虑日常生活中所用手势动作的复杂性和多态性,涵盖了手指的微小手势动作,并将矢量分组学习BSO(Vector Grouping Learning,VGLBSO)算法应用到SVM模型的重要参数寻优中,选出权重系数δ、目标函数中正则化参数c和RBF核函数中参数σ的最优值,达到了提高SVM模型预测分类准确率的目的。

Description

一种基于表面肌电信号的手指手势分类方法
技术领域
本发明涉及人机交互技术领域,具体为一种基于表面肌电信号的手指手势分类方法。
背景技术
计算机的存在和人机交互的设施给社会带来了积极的影响。在日常生活中,人们主要通过物理按压键盘和触摸板与计算机、家用电子产品和工业设备进行互动。随着虚拟和增强现实方面技术的不断进步,更自然、更和谐、更符合人类交互习惯的人机交互方式,手势交互已经成为研究热点,其中的关键在于手势识别。
手势识别是通过传感器获取骨骼肌的电信号,然后通过模式分类识别手势的类型。最近的研究表明,手势识别可以实现广泛的互动活动,如远程控制家庭服务机器人、与智能手机进行交互、甚至可以帮助聋人更有效地与不懂手语的人沟通。如果与Oculus Rift或Microsoft HoloLens等系统结合使用,实时手势识别还可用于虚拟现实和增强现实领域。
常人的手受人类意识支配而进行灵活运动,存在于大脑的意识通过神经元以生物电信号的形式传递到身体的各个部位,并指引相关肌肉群收缩从而牵动相对应的骨骼完成手势动作。利用电极可以记录伴随肌肉活动而产生的表面肌电信号(surfaceelectromyography,sEMG),不同的手势动作对应着不同的肌肉运动方式,所产生的sEMG信号也不同。通过对sEMG信号的处理可以得到手势动作的信息,因此sEMG信号对于手势动作的识别具有重要意义。基于sEMG信号的手势识别已成为虚拟现实、假肢控制和康复训练领域的研究热点之一。随着科学技术的不断发展,手势动作的识别也将广泛的被应用于临床肌肉诊断、运动医学和医疗康复学等领域。
发明内容
本发明的目的是针对现有的SVM手势识别分类模型,使用改进型的BSO算法,矢量分组学习BSO(Vector Grouping Learning,VGLBSO)算法来提高SVM模型对手指动作分类识别的准确度。本发明充分考虑了SVM模型中的参数优化问题,采用VGLBSO算法对混合核SVM模型中的参数进行寻优,选出权重系数δ、目标函数中正则化参数c和RBF核函数中参数σ的最优值,提高了预测分类的准确率。
为实现上述目的,本发明提供如下技术方案:一种基于表面肌电信号的手指手势分类方法,包括以下步骤:
步骤1:采集人体手指动作的表面肌电信号:
放置表面电极,利用生理信号采集仪和计算机采集手指表面肌电信号,并将采集到的sEMG信号上传到计算机端。
步骤2:处理表面肌电信号:
(a)提取活动段肌电信号,采用基于能量值的端点检测法首先提取出一小段时间内的肌电信号数据,对其进行平方积分得到当前时段内的信号能量值,公式如下:
Figure BDA0002262653270000021
式中,x(t)是当前时段内的sEMG信号数据,E为t时刻对应的sEMG信号的能量值;
采用滑动矩形窗口的方法进一步提高数据的处理速度,窗口宽度设置为T,滑动窗口的移动步长设置为T/2,由此得到肌电信号的能量值;对能量值进行分割,从原始sEMG信号中获取手部活动段信号。
(b)对活动段信号进行去噪处理,采用带通滤波器和陷波器对采集到的肌电信号进行滤波和去噪处理。
(c)提取特征值,提取出均方根值RMS、肌电积分值IEMG、平均功率频率MPF、中值频率MF这四个特征值。
(d)对特征值进行降维,为剔除多维特征值中不重要的信息,对特征值进行更全面的分析,对上一步提取出的多种特征值采用主成分分析法(PCA)进行降维,将所有特征值中的各类信息综合成联合特征向量。
步骤3:手指动作的模式识别:
(a)选取SVM混合核函数
SVM算法中约束最优化问题的求解可以转换成如下:
Figure BDA0002262653270000031
αi≥0 i=1,2,…,N
对于上式,构造一个核函数来避免特征空间中的大量运算,其公式如下:
Figure BDA0002262653270000033
为平衡核函数的学习性能和泛化性能,选取一种混合型核函数,公式如下:
kmix(xi,xj)=δkpoly+(1-δ)kRBF
上式中,kpoly为SVM模型中全局性核函数的一种;kRBF为径向基核函数属于局部性核函数的一种,δ为一个新增加的需要优化的SVM模型参数,其取值范围:δ∈[0,1]。
(b)基于VGLBSO算法的混合核SVM参数优化
矢量分组学习BSO(Vector Grouping Learning,VGLBSO)算法主要包括三个方面:个体分组策略、个体产生策略、个体更新策略。其具体步骤如下:
①随机分组策略随机地为每个群体从整个群体中选择不同的个体,保持个体分组策略的不同个体之间的信息交换的多样性;
②随机矢量分组学习机制:提出随机矢量分组机制用于产生足够多的子矢量,为每个新产生的个体提供合理的信息多样性;具体的,每个个体是一个D维向量xi=[xi1,xi2,…,xiD,],i∈{1,2,….N},把每个个体的D个维度随机分成T个子矢量{si1,si2,…,siT},并且每个子矢量Sik,k∈{1,2,…,T}包含至少Δ维或至多D-Δ维,因此,T的取值范围是[2,D/Δ],每个子矢量的起始维度在xi中索引为Sk,每个子矢量Sik的表达式如下:
Figure BDA0002262653270000034
式中sk+1表示子矢量si(k+1)起始位置的维度索引,当k=1时,sk=1,并且sk+1的计算公式为:
Figure BDA0002262653270000035
式中Sk≤D-(2Δ-2),r表示[0,1]之间的随机数,根据上述公式,获得每个个体的子矢量Sik,k∈(1,2,…,T);
③混合个体更新策略将整个种群新产生的个体划分为两组,并且分别根据原始BSO和差分进化算法中的DE策略的个体跟新策略更新两组中的个体,进一步平衡改进型BSO算法的全局勘探能力和局部开发能力。
采用VGLBSO算法对混合核SVM模型中的参数进行寻优。SVM模型中需要优化的参数包括:混合核函数引入的权重系数δ、目标函数中的正则化参数c:c∈[2-5,2-3,…,215]和RBF核函数中的参数σ:1/σ2∈[2-15,2-13,…,23]。优化参数的具体步骤如下:
①读取训练数据和测试数据,并且对其进行归一化处理;
②设置SVM参数δ,c,σ的取值范围,在解空间中随机初始化SVM参数δ,c,σ和粒子的初始位置,计算每个粒子的适应度值;
③根据VGLBSO算法学习过程更新粒子的位置,计算位置更新之后每个粒子的适应度值;
④将粒子的适应度值与前一次迭代中相应粒子的适应度值比较,如果更新之后的粒子适应度值比前一次迭代中相应粒子好,则替换前一次适应度值差的粒子的位置信息,反之,不替换;
⑤根据迭代终止条件,判断是否满足,条件满足时,输出SVM的最优参数组合;反之,转到步骤③;如果得出最优分类精度的参数不唯一时,应当取惩罚系数c最小的那组参数。
(c)构造SVM多分类器
样本数据有K类,设计K(K-1)/2个分类器。分类器排列成一个有向无环图,该有向无环图含有K个叶子数和K(K-1)/2个节点数。
通过VGLBSO优化后的混合核SVM模型来对样本数据进行分类,根据样本的类别从第一层节点依次向下一层节点分类,直到该样本的类别都分配在无环图的叶节点上,即每个叶的类别代表样本数据的类别,则获得具体的手势类别,结束该样本分类进程。
进一步的,所述步骤2的(a)中对能量值进行分割的过程如下:
①根据实际采集的数据而设定启动阈值α和终止阈值β,启动阈值α设置为最大能量的1/4,终止阈值β设置为方差值的1/4;
②依据(a)中的公式,计算原始sEMG信号在t时刻的能量值;
③比较E和α,在连续n1个时间窗内均有E大于α,则将第一个时间窗的起始时刻设置为动作的起始点;
④比较E和β,在连续n2个时间窗内均有E小于β,则将第一个时间窗的起始时刻设置为动作的终止点;
⑤最后,依据起始点和终止点从原始sEMG信号中获取手部活动段信号。
进一步的,所述步骤2的(c)中均方根值RMS、肌电积分值IEMG、平均功率频率MPF、中值频率MF这四个特征值的计算公式分别如下,其中,t是采样个数,xi是sEMG信号的第i个采样点的幅值;
均方根RMS:均方根特性能够反应手部运动时小臂肌肉力的大小:
Figure BDA0002262653270000051
肌电积分值IEMG:肌电积分值特性能反应一段信号的平均强度,并且能够反应肌肉动作的强度:
Figure BDA0002262653270000052
平均功率频率MPF:表示信号在一个时间段的总功率除以总时间:
Figure BDA0002262653270000053
中值频率MF:表示信号各个时间段内功率的平均值:
Figure BDA0002262653270000054
进一步的,所述步骤2中(d)的具体步骤如下:
①假设一个n维的特征向量x=(x1,x2,...,xn),向量中的变量是随机的,且均值为0:
E(x)=0
将向量x的n维的特征空间通过一个m*n的α权值矩阵映射成m维度的特征空间:
y=αx
②计算协方差矩阵C,采用矩阵y协方差矩阵C,在这里,考虑的是
Figure BDA0002262653270000061
的最大值:且E(yiyj)=0,i不等于j,其计算公式如下:
Figure BDA0002262653270000063
③计算矩阵y的协方差矩阵C的特征值以及特征向量:
C=E(yyT)
=E(αx(αx)T)
=E(α(xx)TαT)
=αE(xxTT
=αQαT
式中,Q为x的协方差矩阵,α是协方差矩阵C的对角矩阵,α应满足:
i=λiωi,i=1,2,…,m
④将特征值λ按升序排序,由于矩阵xxT是一个正定矩阵,其特征向量的个数等于矩阵的维度数,且特征值均为大于或等于零的数:
λ1≥λ2≥…≥λn≥0
⑤保留协方差矩阵特征值较大的前m个特征向量,所以,矩阵α由矩阵xxT的前m个特征值所对应的特征向量构成:
α=(α1,α2,…,αm,)T
⑥最后,通过矩阵α将x映射到y,即y=αx,在经过上述特征值提取后,每个sEMG信号的特征模式都以向量形式表示如下:
x=[x1,x2,x3...xn],n=8
因此,4种sEMG信号的特征向量能组合成一个4*8的矩阵X,n表示通道数,将信号的4*8特征矩阵降成一个1*8的特征矩阵Y,即一个联合特征向量,由PCA原理可知,只需要保留协方差矩阵特征值中最大的一个λ1以及其对应的特征向量
α1=(α1112,…,α1n),由此可得出:
Y=α1*X。
与现有技术相比,本发明的有益效果是:
本发明充分考虑日常生活中所用手势动作的复杂性和多态性,涵盖了手指的微小手势动作,并将矢量分组学习BSO(Vector Grouping Learning,VGLBSO)算法应用到SVM模型的重要参数寻优中,选出权重系数δ、目标函数中正则化参数c和RBF核函数中参数σ的最优值,达到了提高SVM模型预测分类准确率的目的。
附图说明
图1为本发明手势分类模型结构图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步的详细说明。此处所描述的具体实施例仅用于解释本发明技术方案,并不限于本发明。
本发明提供一种技术方案:一种基于表面肌电信号的手指手势分类方法,其模型结构如图1所示,包括以下步骤:
步骤1:采集人体12种手指动作的表面肌电信号:
(a)放置表面电极,将8个表面电极分别放置于肱桡肌、桡侧腕屈肌、尺侧腕屈肌和小指伸肌的肌群位置,参考电极放置于右手手臂肌肉数量最少的地方;
(b)采集手指表面肌电信号,要求5名年龄在23岁左右的身体健康人员完成12种基本手势,这12种手势分别是:食指弯曲或抬起、中指弯曲或抬起、无名指弯曲或抬起、小指弯曲或抬起、拇指内收或外展以及拇指弯曲或抬起。为减小数据采集过程中带来的误差,每种手势测10次,间隔休息5秒,为避免疲劳,每类手势间隔休息30秒,通过生理信号采集仪采集实验人员的小臂sEMG信号,并上传到计算机端。每个实验参与人员采集120组数据,总的实验数据集有600组单个手势信号。
步骤2:处理表面肌电信号:
(a)提取活动段肌电信号,采用基于能量值的端点检测法首先提取出一小段时间内的肌电信号数据,对其进行平方积分得到当前时段内的信号能量值,公式如下:
Figure BDA0002262653270000081
式中,x(t)是当前时段内的sEMG信号数据,E为t时刻对应的sEMG信号的能量值;
本发明采用滑动矩形窗口的方法进一步提高数据的处理速度,窗口宽度设置为T,滑动窗口的移动步长设置为T/2,由此可以得到肌电信号的能量值。对能量值进行分割的过程如下:
①根据实际采集的数据而设定启动阈值α和终止阈值β,本发明中启动阈值α设置为最大能量的1/4,终止阈值β设置为方差值的1/4;
②依据上式,计算原始sEMG信号在t时刻的能量值;
③比较E和α,在连续n1个时间窗内均有E大于α,则将第一个时间窗的起始时刻设置为动作的起始点;
④比较E和β,在连续n2个时间窗内均有E小于β,则将第一个时间窗的起始时刻设置为动作的终止点;
⑤最后,依据起始点和终止点从原始sEMG信号中获取手部活动段信号。
(b)对活动段信号进行去噪处理,本发明采用巴特沃斯带通滤波器和50Hz陷波器对采集到的肌电信号进行滤波和去噪处理;
(c)提取特征值,提取出均方根值(RMS)、肌电积分值(IEMG)、平均功率频率(MPF)、中值频率(MF)这四个特征值,其计算公式分别如下,其中,t是采样个数,xi是sEMG信号的第i个采样点的幅值;
均方根(RMS):均方根特性能够反应手部运动时小臂肌肉力的大小:
Figure BDA0002262653270000082
肌电积分值(IEMG):肌电积分值特性能反应一段信号的平均强度,并且能够反应肌肉动作的强度:
Figure BDA0002262653270000091
平均功率频率(MPF):表示信号在一个时间段的总功率除以总时间:
Figure BDA0002262653270000092
中值频率(MF):表示信号各个时间段内功率的平均值:
Figure BDA0002262653270000093
(d)对特征值进行降维,为剔除多维特征值中不重要的信息,对特征值进行更全面的分析,对上一步提取出的多种特征值采用主成分分析法(PCA)进行降维,将所有特征值中的各类信息综合成联合特征向量。其具体步骤如下:
①假设一个n维的特征向量x=(x1,x2,...,xn),向量中的变量是随机的,且均值为0:
E(x)=0
将向量x的n维的特征空间通过一个m*n的α权值矩阵映射成m维度的特征空间:
y=αx
②计算协方差矩阵C,采用矩阵y协方差矩阵C,在这里,考虑的是
Figure BDA0002262653270000094
的最大值:
Figure BDA0002262653270000095
且E(yiyj)=0,i不等于j,其计算公式如下:
Figure BDA0002262653270000096
③计算矩阵y的协方差矩阵C的特征值以及特征向量:
C=E(yyT)
=E(αx(αx)T)
=E(α(xx)TαT)
=αE(xxTT
=αQαT
式中,Q为x的协方差矩阵,α是协方差矩阵C的对角矩阵,α应满足:
i=λiωi,i=1,2,…,m
④将特征值λ按升序排序,由于矩阵xxT是一个正定矩阵,其特征向量的个数等于矩阵的维度数,且特征值均为大于或等于零的数:
λ1≥λ2≥…≥λn≥0
⑤保留协方差矩阵特征值较大的前m个特征向量,所以,矩阵α由矩阵xxT的前m个特征值所对应的特征向量构成:
α=(α1,α2,…,αm,)T
⑥最后,通过矩阵α将x映射到y,即y=αx,在经过上述特征值提取后,每个sEMG信号的特征模式都可以以向量形式表示如下:
x=[x1,x2,x3...xn],n=8
因此,4种sEMG信号的特征向量能组合成一个4*8的矩阵X,n表示通道数,将信号的4*8特征矩阵降成一个1*8的特征矩阵Y,即一个联合特征向量,由PCA原理可知,只需要保留协方差矩阵特征值中最大的一个λ1以及其对应的特征向量α1=(α11,α12,…,α1n),由此可得出:
Y=α1*X
步骤3:手指动作的模式识别:
(a)选取SVM混合核函数
SVM算法中约束最优化问题的求解可以转换成如下:
Figure BDA0002262653270000101
Figure BDA0002262653270000102
αi≥0 i=1,2,...,N
对于上式,构造一个核函数来避免特征空间中的大量运算,其公式如下:
Figure BDA0002262653270000103
为平衡核函数的学习性能和泛化性能,选取一种混合型核函数,公式如下:
kmix(xi,xj)=δkpoly+(1-δ)kRBF
上式中,kpoly为SVM模型中全局性核函数的一种;kRBF为径向基核函数属于局部性核函数的一种,δ为一个新增加的需要优化的SVM模型参数,其取值范围:δ∈[0,1];
(b)基于VGLBSO算法的混合核SVM参数优化
矢量分组学习BSO(Vector Grouping Learning,VGLBSO)算法主要包括三个方面:个体分组策略、个体产生策略、个体更新策略,其具体步骤如下:
①随机分组策略可以随机地为每个群体从整个群体中选择不同的个体,因此它可以保持个体分组策略的不同个体之间的信息交换的多样性;
②随机矢量分组学习机制:提出随机矢量分组机制用于产生足够多的子矢量,为每个新产生的个体提供合理的信息多样性;具体的,每个个体是一个D维向量xi=[xi1,xi2,…,xiD,],i∈{1,2,….N},把每个个体的D个维度随机分成T个子矢量{si1,si2,…,siT},并且每个子矢量Sik,k∈{1,2,…,T}包含至少Δ维或至多D-Δ维,因此,T的取值范围是[2,D/Δ],每个子矢量的起始维度在xi中索引为Sk,每个子矢量Sik的表达式如下:
Figure BDA0002262653270000111
式中sk+1表示子矢量si(k+1)起始位置的维度索引,当k=1时,sk=1,并且sk+1的计算公式为:
Figure BDA0002262653270000112
式中Sk≤D-(2Δ-2),r表示[0,1]之间的随机数,根据上述公式,可以获得每个个体的子矢量Sik,k∈(1,2,…,T);
③混合个体更新策略将整个种群新产生的个体划分为两组,并且分别根据原始BSO和差分进化算法中的DE策略的个体跟新策略更新两组中的个体,可以进一步平衡改进型BSO算法的全局勘探能力和局部开发能力。
对模型参数进行优化处理是SVM实现预测分类的前提,SVM中通常使用网格搜索的方法寻找两个重要参数c和σ的最优值,这样做的缺点是容易把网格内部的潜在解遗漏掉,且网格法不适用于多参数的寻优。针对这种情况,本发明采用群智能算法对混合核SVM模型中的参数进行寻优。SVM模型中需要优化的参数包括:混合核函数引入的权重系数δ、目标函数中的正则化参数c:c∈[2-5,2-3,…,215]和RBF核函数中的参数σ:1/σ2∈[2-15,2-13,…,23]。优化参数的具体步骤如下:
①读取训练数据和测试数据,并且对其进行归一化处理;
②设置SVM参数δ,c,σ的取值范围,在解空间中随机初始化SVM参数δ,c,σ和粒子的初始位置,计算每个粒子的适应度值;
③根据VGLBSO算法学习过程更新粒子的位置,计算位置更新之后每个粒子的适应度值;
④将粒子的适应度值与前一次迭代中相应粒子的适应度值比较,如果更新之后的粒子适应度值比前一次迭代中相应粒子好,则替换前一次适应度值差的粒子的位置信息,反之,不替换;
⑤根据迭代终止条件,判断是否满足,条件满足时,输出SVM的最优参数组合;反之,转到步骤③;如果得出最优分类精度的参数不唯一时,应当取惩罚系数c最小的那组参数。
(c)构造SVM多分类器
样本数据有12类,设计66个分类器。分类器排列成一个有向无环图,该有向无环图含有12个叶子数和66个节点数。
通过VGLBSO优化后的混合核SVM模型来对样本数据进行分类。对于一个类型样本数据,首先采用第一层分类器(1,12)进行分类,该分类器结果为1或者12,若分类器结果是1,说明该样本数据不属于第12类,采用第二层分类器(1,11)继续进行分类;若分类器结果是12,说明该样本数据不属于第1类,则采用第二层分类器(2,12)继续分类。直到得出样本的具体类别,即获得具体的手势类别,结束该样本分类进程。
以上所述仅表达了本发明的优选实施方式,其描述较为具体和详细,但并不能因此而理解为对本发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形、改进及替代,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。

Claims (4)

1.一种基于表面肌电信号的手指手势分类方法,其特征在于:包括以下步骤:
步骤1:采集人体手指动作的表面肌电信号:
放置表面电极,利用生理信号采集仪和计算机采集手指手势动作的表面肌电信号,并将采集到的sEMG信号上传到计算机端;
步骤2:处理表面肌电信号:
(a)提取活动段肌电信号,采用基于能量值的端点检测法首先提取出一小段时间内的肌电信号数据,对其进行平方积分得到当前时段内的信号能量值,公式如下:
Figure FDA0002262653260000011
式中,x(t)是当前时段内的sEMG信号数据,E为t时刻对应的sEMG信号的能量值;
采用滑动矩形窗口的方法进一步提高数据的处理速度,窗口宽度设置为T,滑动窗口的移动步长设置为T/2,由此得到肌电信号的能量值;对能量值进行分割,从原始sEMG信号中获取手部活动段信号;
(b)对活动段信号进行去噪处理,采用带通滤波器和陷波器对采集到的肌电信号进行滤波和去噪处理;
(c)提取特征值,提取出均方根值RMS、肌电积分值IEMG、平均功率频率MPF、中值频率MF这四个特征值;
(d)对特征值进行降维,为剔除多维特征值中不重要的信息,对特征值进行更全面的分析,对上一步提取出的多种特征值采用主成分分析法PCA进行降维,将所有特征值中的各类信息综合成联合特征向量;
步骤3:手指动作的模式识别:
(a)选取SVM混合核函数
SVM算法中约束最优化问题的求解可以转换成如下:
Figure FDA0002262653260000012
Figure FDA0002262653260000013
αi≥0 i=1,2,...,N
对于上式,构造一个核函数来避免特征空间中的大量运算,其公式如下:
Figure FDA0002262653260000014
为平衡核函数的学习性能和泛化性能,选取一种混合型核函数,公式如下:
kmix(xi,xj)=δkpoly+(1-δ)kRBF
上式中,kpoly为SVM模型中全局性核函数的一种;kRBF为径向基核函数属于局部性核函数的一种,δ为一个新增加的需要优化的SVM模型参数,其取值范围:δ∈[0,1];
(b)基于VGLBSO算法的混合核SVM参数优化
矢量分组学习BSO(Vector Grouping Learning,VGLBSO)算法主要包括三个方面:个体分组策略、个体产生策略、个体更新策略,其具体步骤如下:
①随机分组策略随机地为每个群体从整个群体中选择不同的个体,保持个体分组策略的不同个体之间的信息交换的多样性;
②随机矢量分组学习机制:提出随机矢量分组机制用于产生足够多的子矢量,为每个新产生的个体提供合理的信息多样性;具体的,每个个体是一个D维向量xi=[xi1,xi2,…,xiD,],i∈{1,2,….N},把每个个体的D个维度随机分成T个子矢量{si1,si2,…,siT},并且每个子矢量Sik,k∈{1,2,…,T}包含至少Δ维或至多D-Δ维,因此,T的取值范围是[2,D/Δ],每个子矢量的起始维度在xi中索引为Sk,每个子矢量Sik的表达式如下:
式中Sk+1表示子矢量si(k+1)起始位置的维度索引,当k=1时,sk=1,并且sk+1的计算公式为:
Figure FDA0002262653260000022
式中Sk≤D-(2Δ-2),r表示[0,1]之间的随机数,根据上述公式,获得每个个体的子矢量Sik,k∈(1,2,…,T);
③混合个体更新策略将整个种群新产生的个体划分为两组,并且分别根据原始BSO和差分进化算法中的DE策略的个体跟新策略更新两组中的个体,进一步平衡改进型BSO算法的全局勘探能力和局部开发能力;
采用VGLBSO算法对混合核SVM模型中的参数进行寻优,SVM模型中需要优化的参数包括:混合核函数引入的权重系数δ、目标函数中的正则化参数c:c∈[2-5,2-3,…,215]和RBF核函数中的参数σ:1/σ2∈[2-15,2-13,…,23],优化参数的具体步骤如下:
①读取训练数据和测试数据,并且对其进行归一化处理;
②设置SVM参数δ,c,σ的取值范围,在解空间中随机初始化SVM参数δ,c,σ和粒子的初始位置,计算每个粒子的适应度值;
③根据VGLBSO算法学习过程更新粒子的位置,计算位置更新之后每个粒子的适应度值;
④将粒子的适应度值与前一次迭代中相应粒子的适应度值比较,如果更新之后的粒子适应度值比前一次迭代中相应粒子好,则替换前一次适应度值差的粒子的位置信息,反之,不替换;
⑤根据迭代终止条件,判断是否满足,条件满足时,输出SVM的最优参数组合;反之,转到步骤③;如果得出最优分类精度的参数不唯一时,应当取惩罚系数c最小的那组参数;
(c)构造SVM多分类器
样本数据有K类,设计K(K-1)/2个分类器,分类器排列成一个有向无环图,该有向无环图含有K个叶子数和K(K-1)/2个节点数;
通过VGLBSO优化后的混合核SVM模型来对样本数据进行分类,根据样本的类别从第一层节点依次向下一层节点分类,直到该样本的类别都分配在无环图的叶节点上,即每个叶的类别代表样本数据的类别,则获得具体的手势类别,结束该样本分类进程。
2.根据权利要求1所述的一种基于表面肌电信号的手指手势分类方法,其特征在于:所述步骤2的(a)中对能量值进行分割的过程如下:
①根据实际采集的数据而设定启动阈值α和终止阈值β,启动阈值α设置为最大能量的1/4,终止阈值β设置为方差值的1/4;
②依据(a)中的公式,计算原始sEMG信号在t时刻的能量值;
③比较E和α,在连续n1个时间窗内均有E大于α,则将第一个时间窗的起始时刻设置为动作的起始点;
④比较E和β,在连续n2个时间窗内均有E小于β,则将第一个时间窗的起始时刻设置为动作的终止点;
⑤最后,依据起始点和终止点从原始sEMG信号中获取手部活动段信号。
3.根据权利要求1所述的一种基于表面肌电信号的手指手势分类方法,其特征在于:所述步骤2的(c)中均方根值RMS、肌电积分值IEMG、平均功率频率MPF、中值频率MF这四个特征值的计算公式分别如下,其中,t是采样个数,xi是sEMG信号的第i个采样点的幅值;
均方根RMS:均方根特性能够反应手部运动时小臂肌肉力的大小:
Figure FDA0002262653260000041
肌电积分值IEMG:肌电积分值特性能反应一段信号的平均强度,并且能够反应肌肉动作的强度:
Figure FDA0002262653260000042
平均功率频率MPF:表示信号在一个时间段的总功率除以总时间:
Figure FDA0002262653260000043
中值频率MF:表示信号各个时间段内功率的平均值:
Figure FDA0002262653260000044
4.根据权利要求1所述的一种基于表面肌电信号的手指手势分类方法,其特征在于:所述步骤2中(d)的具体步骤如下:
①假设一个n维的特征向量x=(x1,x2,...,xn),向量中的变量是随机的,且均值为0:
E(x)=0
将向量x的n维的特征空间通过一个m*n的α权值矩阵映射成m维度的特征空间:
y=αx
②计算协方差矩阵C,采用矩阵y协方差矩阵C,在这里,考虑的是的最大值:且E(yiyj)=0,i不等于j,其计算公式如下:
Figure FDA0002262653260000052
③计算矩阵y的协方差矩阵C的特征值以及特征向量:
C=E(yyT)
=E(αx(αx)T)
=E(α(xx)TαT)
=αE(xxTT
=αQαT
式中,Q为x的协方差矩阵,α是协方差矩阵C的对角矩阵,α应满足:
i=λiωi,i=1,2,…,m
④将特征值λ按升序排序,由于矩阵xxT是一个正定矩阵,其特征向量的个数等于矩阵的维度数,且特征值均为大于或等于零的数:
λ1≥λ2≥…≥λn≥0
⑤保留协方差矩阵特征值较大的前m个特征向量,所以,矩阵α由矩阵xxT的前m个特征值所对应的特征向量构成:
α=(α1,α2,…,αm,)T
⑥最后,通过矩阵α将x映射到y,即y=αx,在经过上述特征值提取后,每个sEMG信号的特征模式都以向量形式表示如下:
x=[x1,x2,x3...xn],n=8
因此,4种sEMG信号的特征向量能组合成一个4*8的矩阵X,n表示通道数,将信号的4*8特征矩阵降成一个1*8的特征矩阵Y,即一个联合特征向量,由PCA原理可知,只需要保留协方差矩阵特征值中最大的一个λ1以及其对应的特征向量α1=(α11,α12,…,α1n),由此可得出:
Y=α1*X。
CN201911076572.7A 2019-11-06 2019-11-06 一种基于表面肌电信号的手指手势分类方法 Active CN110826625B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911076572.7A CN110826625B (zh) 2019-11-06 2019-11-06 一种基于表面肌电信号的手指手势分类方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911076572.7A CN110826625B (zh) 2019-11-06 2019-11-06 一种基于表面肌电信号的手指手势分类方法

Publications (2)

Publication Number Publication Date
CN110826625A true CN110826625A (zh) 2020-02-21
CN110826625B CN110826625B (zh) 2022-04-12

Family

ID=69553006

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911076572.7A Active CN110826625B (zh) 2019-11-06 2019-11-06 一种基于表面肌电信号的手指手势分类方法

Country Status (1)

Country Link
CN (1) CN110826625B (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111696645A (zh) * 2020-06-07 2020-09-22 长春理工大学 一种基于表面肌电信号的手部外骨骼康复训练装置及方法
CN111709314A (zh) * 2020-05-27 2020-09-25 杭州电子科技大学 基于面部表面肌电的情感分布识别方法
CN111743667A (zh) * 2020-06-29 2020-10-09 北京海益同展信息科技有限公司 一种假肢控制方法、装置、系统及存储介质
CN111844032A (zh) * 2020-07-15 2020-10-30 北京海益同展信息科技有限公司 肌电信号处理、外骨骼机器人控制方法及装置
CN112036357A (zh) * 2020-09-09 2020-12-04 曲阜师范大学 一种基于表面肌电信号的上肢动作识别方法及系统
CN113589920A (zh) * 2020-04-30 2021-11-02 北京海益同展信息科技有限公司 手势识别方法、人机交互方法、装置、设备及存储介质
CN114098768A (zh) * 2021-11-25 2022-03-01 哈尔滨工业大学 基于动态阈值和EasyTL的跨个体表面肌电信号手势识别方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140240223A1 (en) * 2013-02-22 2014-08-28 Thalmic Labs Inc. Method and apparatus for analyzing capacitive emg and imu sensor signals for gesture control
CN107273798A (zh) * 2017-05-11 2017-10-20 华南理工大学 一种基于表面肌电信号的手势识别方法
CN107957783A (zh) * 2017-12-21 2018-04-24 北京航天测控技术有限公司 一种基于脑电与肌电信息的多模式智能控制系统及方法
CN109213305A (zh) * 2017-06-29 2019-01-15 沈阳新松机器人自动化股份有限公司 一种基于表面肌电信号的手势识别方法
CN109262618A (zh) * 2018-12-12 2019-01-25 武汉理工大学 基于肌肉协同的上肢多关节同步比例肌电控制方法与系统
CN110389663A (zh) * 2019-06-24 2019-10-29 广东工业大学 一种基于小波宽度学习系统的sEMG手势识别方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140240223A1 (en) * 2013-02-22 2014-08-28 Thalmic Labs Inc. Method and apparatus for analyzing capacitive emg and imu sensor signals for gesture control
CN107273798A (zh) * 2017-05-11 2017-10-20 华南理工大学 一种基于表面肌电信号的手势识别方法
CN109213305A (zh) * 2017-06-29 2019-01-15 沈阳新松机器人自动化股份有限公司 一种基于表面肌电信号的手势识别方法
CN107957783A (zh) * 2017-12-21 2018-04-24 北京航天测控技术有限公司 一种基于脑电与肌电信息的多模式智能控制系统及方法
CN109262618A (zh) * 2018-12-12 2019-01-25 武汉理工大学 基于肌肉协同的上肢多关节同步比例肌电控制方法与系统
CN110389663A (zh) * 2019-06-24 2019-10-29 广东工业大学 一种基于小波宽度学习系统的sEMG手势识别方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
CHUNQUAN LI 等: "A Vector Grouping Learning Brain Storm Optimization Algorithm for Global Optimization Problems", 《IEEE ACCESS》 *
曹昂 等: "基于表面肌电信号的肌肉疲劳状态分类系统", 《计算机应用》 *
顾晓婷: "基于表面肌 电信号的手势动作识别方法研究", 《中国优秀硕士学位论文全文数据库 基础科学辑》 *

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113589920B (zh) * 2020-04-30 2024-06-18 京东科技信息技术有限公司 手势识别方法、人机交互方法、装置、设备及存储介质
CN113589920A (zh) * 2020-04-30 2021-11-02 北京海益同展信息科技有限公司 手势识别方法、人机交互方法、装置、设备及存储介质
WO2021219039A1 (zh) * 2020-04-30 2021-11-04 京东数科海益信息科技有限公司 手势识别方法、人机交互方法、装置、设备及存储介质
CN111709314B (zh) * 2020-05-27 2023-08-22 杭州电子科技大学 基于面部表面肌电的情感分布识别方法
CN111709314A (zh) * 2020-05-27 2020-09-25 杭州电子科技大学 基于面部表面肌电的情感分布识别方法
CN111696645A (zh) * 2020-06-07 2020-09-22 长春理工大学 一种基于表面肌电信号的手部外骨骼康复训练装置及方法
CN111743667A (zh) * 2020-06-29 2020-10-09 北京海益同展信息科技有限公司 一种假肢控制方法、装置、系统及存储介质
CN111844032A (zh) * 2020-07-15 2020-10-30 北京海益同展信息科技有限公司 肌电信号处理、外骨骼机器人控制方法及装置
CN111844032B (zh) * 2020-07-15 2022-04-12 京东科技信息技术有限公司 肌电信号处理、外骨骼机器人控制方法及装置
CN112036357B (zh) * 2020-09-09 2023-05-12 曲阜师范大学 一种基于表面肌电信号的上肢动作识别方法及系统
CN112036357A (zh) * 2020-09-09 2020-12-04 曲阜师范大学 一种基于表面肌电信号的上肢动作识别方法及系统
CN114098768A (zh) * 2021-11-25 2022-03-01 哈尔滨工业大学 基于动态阈值和EasyTL的跨个体表面肌电信号手势识别方法
CN114098768B (zh) * 2021-11-25 2024-05-03 哈尔滨工业大学 基于动态阈值和EasyTL的跨个体表面肌电信号手势识别方法

Also Published As

Publication number Publication date
CN110826625B (zh) 2022-04-12

Similar Documents

Publication Publication Date Title
CN110826625B (zh) 一种基于表面肌电信号的手指手势分类方法
Jabbari et al. EMG-based hand gesture classification with long short-term memory deep recurrent neural networks
CN107480697B (zh) 一种肌电手势识别方法和系统
Fang et al. Attribute-driven granular model for EMG-based pinch and fingertip force grand recognition
Al-Faiz et al. A k-nearest neighbor based algorithm for human arm movements recognition using EMG signals
Gautam et al. Locomo-net: a low-complex deep learning framework for sEMG-based hand movement recognition for prosthetic control
CN109480838B (zh) 一种基于表层肌电信号的人体连续复杂运动意图预测方法
Yang et al. Surface EMG based handgrip force predictions using gene expression programming
Sahin et al. Pattern recognition with surface EMG signal based wavelet transformation
Mokhlesabadifarahani et al. EMG signals characterization in three states of contraction by fuzzy network and feature extraction
Pancholi et al. Advanced energy kernel-based feature extraction scheme for improved EMG-PR-based prosthesis control against force variation
Shao et al. Single-channel SEMG using wavelet deep belief networks for upper limb motion recognition
CN113111831A (zh) 一种基于多模态信息融合的手势识别技术
CN110333783A (zh) 一种用于鲁棒肌电控制的无关手势处理方法及系统
Li et al. EEG signal classification method based on feature priority analysis and CNN
Sezgin A new hand finger movements’ classification system based on bicoherence analysis of two-channel surface EMG signals
Raurale et al. Emg acquisition and hand pose classification for bionic hands from randomly-placed sensors
Barioul et al. Four sensors bracelet for American sign language recognition based on wrist force myography
Meng et al. User-tailored hand gesture recognition system for wearable prosthesis and armband based on surface electromyogram
Cao et al. A Novel Adaptive Mutation PSO Optimized SVM Algorithm for sEMG‐Based Gesture Recognition
Suppiah et al. Fuzzy inference system (FIS)-long short-term memory (LSTM) network for electromyography (EMG) signal analysis
Jie et al. High dimensional feature data reduction of multichannel sEMG for gesture recognition based on double phases PSO
CN114647314A (zh) 一种基于肌电的穿戴式肢体运动智能感知系统
Kumar et al. A critical review on hand gesture recognition using semg: Challenges, application, process and techniques
AlOmari et al. Novel hybrid soft computing pattern recognition system SVM–GAPSO for classification of eight different hand motions

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant