CN102013016B - 可用于假肢手控制的基于肌音信号手部动作模式识别方法 - Google Patents

可用于假肢手控制的基于肌音信号手部动作模式识别方法 Download PDF

Info

Publication number
CN102013016B
CN102013016B CN 201010558259 CN201010558259A CN102013016B CN 102013016 B CN102013016 B CN 102013016B CN 201010558259 CN201010558259 CN 201010558259 CN 201010558259 A CN201010558259 A CN 201010558259A CN 102013016 B CN102013016 B CN 102013016B
Authority
CN
China
Prior art keywords
action
hand
frame
data
hand motion
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN 201010558259
Other languages
English (en)
Other versions
CN102013016A (zh
Inventor
夏春明
曾勇
曹炜
宋中建
周侃恒
董畅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
East China University of Science and Technology
Original Assignee
East China University of Science and Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by East China University of Science and Technology filed Critical East China University of Science and Technology
Priority to CN 201010558259 priority Critical patent/CN102013016B/zh
Publication of CN102013016A publication Critical patent/CN102013016A/zh
Application granted granted Critical
Publication of CN102013016B publication Critical patent/CN102013016B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Prostheses (AREA)

Abstract

本发明涉及可用于假肢手控制的基于肌音信号手部动作模式识别方法，该方法包括以下步骤：A、数据采集：a1)通过传感器采集肌肉声音信号，a2)利用数据采集卡采集手动作的肌音信号；B、数据处理：b1)将采集到的信号进行数字滤波，b2)将滤波后的信号通过滑动窗等长分割成短时帧，经判断后完成整个数据段的动作分割，b3)提取动作帧的时域特征和频域特征，构成特征空间，b4)利用特征提取方法对特征空间进行降维处理，b5)将降维后得到的新的特征空间输入分类器，得到动作判别结果数据。与现有技术相比，本发明具有方法简单，识别准确率高，易于将算法植入嵌入式系统，可实现基于肌音信号的手部动作实时识别等优点。

Description

可用于假肢手控制的基于肌音信号手部动作模式识别方法
技术领域
本发明涉及一种手部动作模式的识别方法，尤其是涉及可用于假肢手控制的基于肌音信号手部动作模式识别方法。
背景技术
加拿大多伦多大学的J.Silva实验室利用六个传感器对手部9个动作识别率达到90±4％。最近，华东理工大学虚拟样机与系统仿真试验室利用单个传感器对手部张合动作识别率达到95.63±2.55％。尚没有对四种手部动作模式的识别方法的研究，而四模式的研究对市场上占有率极高的两自由度假肢手的控制极为适用。此类识别方法，实际应用时需要算法尽量简单、传感器尽量少，以达到实时、低成本的目的，然而两者在研究中相互矛盾，利用简单算法时必然需要多个传感器才能达到较高的准确率，反之亦然。因此，对四种手部动作模式的识别技术是当前亟待解决的难题。
发明内容
本发明的目的就是为了克服上述现有技术存在的缺陷而提供一种方法简单、识别准确率高、易于将算法植入嵌入式系统、可实现手部动作的实时识别的可用于假肢手控制的基于肌音信号手部动作模式识别方法。
本发明的目的可以通过以下技术方案来实现：可用于假肢手控制的基于肌音信号手部动作模式识别方法，其特征在于，该方法包括以下步骤：
A、数据采集：
a1)通过多个压电加速度传感器采集肌肉声音信号；
a2)利用数据采集卡采集手张开、手握紧、手腕弯曲、手腕伸直四个动作的肌音信号；
B、数据处理：
b1)将采集到的信号进行数字滤波；
b2)将滤波后得到的信号通过滑动窗等长分割成短时帧，并对每帧的绝对均值和方差进行分析，如两参数均超过阈值，则判定其为动作帧，该动作帧后的两帧直接跳过，再进行下一个动作的判断，据此，完成整个数据段的动作分割；
b3)提取动作帧的时域特征和频域特征，构成特征空间；
b4)利用特征提取方法对特征空间进行降维处理；
b5)将降维后得到的新的特征空间输入二次或线性分类器，得到动作识别结果数据，该识别结果数据可用于假肢手控制。
所述的数字滤波采用20阶最小二乘法线性相位FIR低通滤波器。
所述的b2)中的阈值为不同人设定不同的阈值。
所述的b2)中的动作分割具体为，动作分割时，采用绝对均值和方差两个可变阈值，且判定动作帧后，其后的两个帧直接跳过，再进行下面一个动作的判断，排除了干扰信号对动作分割的影响。
所述的时域特征包括：绝对均值，方差值，绝对均值差分，斜率改变次数，过零率，均方根，AR模型估计参数，高阶累积量；频域特征包括：功率谱参数，倒谱系数，功率谱非负矩阵分解系数。
特征提取方法中，利用核广义判别分析法(KDA)时降维至6维，利用主成分分析法(PCA)时参数取t＝0.9。
利用核广义判别分析法(KDA)以及二次分类器进行试验，双通道信号即取得了较高的识别准确率，达到95.12±3.83％。
利用主成分分析法(PCA)以及线性分类器识别四个模式的手部动作时，三通道信号可得到最佳效果，准确率可达到96.55±4.48％。
与现有技术相比，本发明具有以下优点：
1、方法简单，且识别准确率高；
2、易于将算法植入嵌入式系统，可实现手部动作的实时识别；
3、硬件系统简单，成本低廉。
应用时若更重视成本低廉、系统简单，则应用KDA(核广义判别分析法)以及二次分类器，需要两个传感器；若更重视算法简单、实时，则采用PCA(主成分分析)和线性分类器，需要三个传感器。总之，利用本发明的方法，可以根据具体情况，选择线性或非线性方法对手部动作的四个模式进行识别，从而实现对机械手的控制或其它用途。
具体实施方式
下面结合具体实施例对本发明进行详细说明。
实施例1
可用于假肢手控制的基于肌音信号手部动作模式识别方法，包括以下步骤：
A.数据采集：
a1)通过2个压电加速度传感器采集肌肉声音信号；
a2)利用数据采集卡采集手张开、手握紧、手腕弯曲、手腕伸直四个动作的肌音信号；
B.数据处理：
b1)采用2路肌音信号，利用20阶最小二乘法线性相位FIR低通滤波器对信号进行数字滤波。
b2)将滤波后得到的信号通过滑动窗等长分割成短时帧，并对每帧的绝对均值和方差进行分析，如两参数均超过阈值(阈值因人而异，需用参考样本训练获得)则判定其为动作帧，该动作帧后的两帧直接跳过，再进行下一个动作的判断，这样可以排除干扰信号对动作分割的影响。据此方法，完成整个数据段的动作分割；
b3)提取动作帧的时域特征和频域特征，构成特征空间。时域特征包括：绝对均值，方差值，绝对均值差分，斜率改变次数，过零率，均方根，AR模型估计参数，高阶累积量；频域特征包括：功率谱参数，倒谱系数，功率谱非负矩阵分解系数。
b4)利用核广义判别分析法(KDA)特征提取方法将特征空间降维至6维。
b5)将降维后得到的新的特征空间输入二次分类器进行试验，得到动作判别的结果，识别准确率达到95.12±3.83％。
实施例2
可用于假肢手控制的基于肌音信号手部动作模式识别方法，包括以下步骤：
A.数据采集：
a1)通过3个压电加速度传感器采集肌肉声音信号；
a2)利用数据采集卡采集手张开、手握紧、手腕弯曲、手腕伸直四个动作的肌音信号；
B.数据处理：
b1)采用3路肌音信号，利用20阶最小二乘法线性相位FIR低通滤波器对信号进行数字滤波。
b2)将滤波后得到的信号通过滑动窗等长分割成短时帧，并对每帧的绝对均值和方差进行分析，如两参数均超过阈值(阈值因人而异，需用参考样本训练获得)则判定其为动作帧，该动作帧后的两帧直接跳过，再进行下一个动作的判断，这样可以排除干扰信号对动作分割的影响。据此方法，完成整个数据段的动作分割；
b3)提取动作帧的时域特征和频域特征，构成特征空间。时域特征包括：绝对均值，方差值，绝对均值差分，斜率改变次数，过零率，均方根，AR模型估计参数，高阶累积量；频域特征包括：功率谱参数，倒谱系数，功率谱非负矩阵分解系数。
b4)利用主成分分析法(PCA)特征优化方法，参数取t＝0.9对特征空间进行降维。
b5)将降维后得到的新的特征空间输入线性分类器进行试验，得到动作判别的结果，识别准确率可达到96.55±4.48％。
由于传感器采集位置并不影响识别效果，则两通道信号和三通道信号传感器的排布位置没有严格规定。
本方法主要分为三大部分：
1、数据采集部分：将压电加速度传感器用带子固定在前臂特定位置的肌肉表面，采集肌肉声音信号，然后利用数据采集卡采集手张开、手握紧、手腕弯曲、手腕伸直四个动作的肌音信号。将信号转化为数字信号之后存入电脑为后续处理做准备。
2、数据处理部分：将采集到的信号进行数字滤波。再把滤波后得到的信号通过滑动窗等长分割成短时帧，并对每帧的绝对均值和方差进行分析，从而完成动作分割。接着提取动作帧的时域和频域特征一共18个参数，构成特征空间；再利用不同的特征提取方法对特征空间进行降维处理；最后将降维后得到的新的特征空间输入不同分类器，得到动作判别的结果。
3、数据处理结果分析：传感器采集位置的不同对动作识别准确率无影响。利用线性方法(PCA和线性分类器)识别四个模式的手部动作时，三通道信号可得到最佳效果，准确率可达到96.55±4.48％。利用非线性方法(KDA以及二次分类器)进行试验，双通道信号即取得了较高的识别准确率，达到95.12±3.83％。
应用时若更重视成本低廉、系统简单，则应用KDA(核广义判别分析法)以及二次分类器，需要两个传感器；若更重视算法简单、实时，则采用PCA(主成分分析)和线性分类器，需要三个传感器。
通过试验共对32个健康个体进行采样分析，实验对象年龄25±3岁，其中男性15名，女性17名。
试验过程中队每位对象采集两组数据，每组数据采集180秒，大约可完成100-150个动作。试验者遵循试验规范，均阅读过《赫尔辛基宣言》并签署志愿书，所以试验数据有效。最终对手部动作四个模式的识别率，采用三通道信号，利用线性方法(PCA和线性分类器)，准确率可达到96.55±4.48％；采用两通道信号，利用非线性方法(KDA以及二次分类器)，准确率可达到95.12±3.83％。完全可以满足实际应用的需要。

Claims (3)

1.可用于假肢手控制的基于肌音信号手部动作模式识别方法，其特征在于，该方法包括以下步骤：
A、数据采集：
a1）通过多个压电加速度传感器采集肌音信号；
a2）利用数据采集卡采集手张开、手握紧、手腕弯曲、手腕伸直四个动作的肌音信号；
B、数据处理：
b1）将采集到的信号进行数字滤波；
b2）将滤波后得到的信号通过滑动窗等长分割成短时帧，并对每帧的绝对均值和方差进行分析，如两参数均超过阈值，则判定其为动作帧，该动作帧后的两帧直接跳过，再进行下一个动作的判断，据此，完成整个数据段的动作分割；
b3）提取动作帧的时域特征和频域特征，构成特征空间；
b4）利用特征提取方法对特征空间进行降维处理；
b5）将降维后得到的新的特征空间输入二次或线性分类器，得到动作识别结果数据，该识别结果数据可用于假肢手控制；
所述的数字滤波采用20阶最小二乘法线性相位FIR低通滤波器；
所述的时域特征包括：绝对均值，方差值，绝对均值差分，斜率改变次数，过零率，均方根，AR模型估计参数，高阶累积量；频域特征包括：功率谱参数，倒谱系数，功率谱非负矩阵分解系数。
2.根据权利要求1所述的可用于假肢手控制的基于肌音信号手部动作模式识别方法，其特征在于，所述的b2)中的阈值为不同人设定不同的阈值。
3.根据权利要求1所述的可用于假肢手控制的基于肌音信号手部动作模式识别方法，其特征在于，所述的b2）中的动作分割具体为，动作分割时，采用绝对均值和方差两个可变阈值，且判定动作帧后，其后的两个帧直接跳过，再进行下面一个动作的判断，排除了干扰信号对动作分割的影响。
CN 201010558259 2010-11-23 2010-11-23 可用于假肢手控制的基于肌音信号手部动作模式识别方法 Expired - Fee Related CN102013016B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN 201010558259 CN102013016B (zh) 2010-11-23 2010-11-23 可用于假肢手控制的基于肌音信号手部动作模式识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN 201010558259 CN102013016B (zh) 2010-11-23 2010-11-23 可用于假肢手控制的基于肌音信号手部动作模式识别方法

Publications (2)

Publication Number Publication Date
CN102013016A CN102013016A (zh) 2011-04-13
CN102013016B true CN102013016B (zh) 2013-05-08

Family

ID=43843188

Family Applications (1)

Application Number Title Priority Date Filing Date
CN 201010558259 Expired - Fee Related CN102013016B (zh) 2010-11-23 2010-11-23 可用于假肢手控制的基于肌音信号手部动作模式识别方法

Country Status (1)

Country Link
CN (1) CN102013016B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102614061A (zh) * 2012-03-01 2012-08-01 上海理工大学 基于肌音信号的人体上肢功能康复训练实现方法
WO2014110672A1 (en) * 2013-01-21 2014-07-24 Trusted Positioning Inc. Method and apparatus for determination of misalignment between device and pedestrian
CN103294199B (zh) * 2013-06-09 2017-09-12 华东理工大学 一种基于脸部肌音信号的无声信息识别系统
CN105117703B (zh) * 2015-08-24 2018-10-16 复旦大学 基于矩阵乘法的快速动作单元识别方法
CN105786189B (zh) * 2016-04-28 2018-07-06 深圳大学 一种基于肌动信号的指部独立动作识别方法及系统
CN107744436A (zh) * 2017-10-16 2018-03-02 华东理工大学 一种基于颈部肌音信号处理的轮椅控制方法及控制系统
CN109171124A (zh) * 2018-09-11 2019-01-11 华东理工大学 一种用于手语识别的肌音信号无线采集手环

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101766509A (zh) * 2009-12-24 2010-07-07 华东理工大学 一种基于单点采集肌音信号的假肢实时控制方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101766509A (zh) * 2009-12-24 2010-07-07 华东理工大学 一种基于单点采集肌音信号的假肢实时控制方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
夏春明等.基于肌音信号的虚拟假肢控制.《华东理工大学学报（自然科学版）》.2010,第36卷(第4期), *

Also Published As

Publication number Publication date
CN102013016A (zh) 2011-04-13

Similar Documents

Publication Publication Date Title
CN102013016B (zh) 可用于假肢手控制的基于肌音信号手部动作模式识别方法
CN106726030B (zh) 基于临床脑电信号控制机械手运动的脑机接口系统及其应用
CN110353702A (zh) 一种基于浅层卷积神经网络的情感识别方法及系统
CN102697493B (zh) 一种快速的脑电信号中眼电伪迹自动识别和去除的方法
CN104063645B (zh) 一种基于心电信号动态自更新样本的身份识别方法
CN101766509B (zh) 一种基于单点采集肌音信号的假肢实时控制方法
CN105956624B (zh) 基于空时频优化特征稀疏表示的运动想象脑电分类方法
CN107799114A (zh) 一种猪只咳嗽声音识别方法及系统
CN106228200A (zh) 一种不依赖于动作信息采集设备的动作识别方法
CN104091172A (zh) 一种运动想象脑电信号的特征提取方法
CN111931656B (zh) 基于迁移学习的用户独立型运动想象分类模型训练方法
CN106725452A (zh) 基于情感诱发的脑电信号识别方法
CN111870235A (zh) 一种基于ippg的吸毒人员筛查方法
CN105147252A (zh) 心脏疾病识别及评估方法
CN107918487A (zh) 一种基于皮肤电信号识别中文情感词的方法
CN108958474A (zh) 一种基于误差权重的动作识别多传感信息融合方法
CN104586402B (zh) 一种人体活动的特征提取方法
CN108403108A (zh) 基于波形优化的阵列式表面肌电信号分解方法
CN113116361A (zh) 一种基于单导脑电的睡眠分期方法
CN107822629A (zh) 四肢表面肌电轴的检测方法
CN115481695A (zh) 一种利用多分支特征提取的运动想象分类方法
CN103425983A (zh) 一种基于网络同步性的脑网络拓扑差异的快速提取方法
CN116172576A (zh) 一种基于多模块神经网络的脑电信号伪迹去除方法
CN114569143A (zh) 一种基于注意力机制与多特征融合的肌电手势识别方法
CN113128384A (zh) 一种基于深度学习的脑卒中康复系统脑机接口软件关键技术方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C53 Correction of patent for invention or patent application
CB03 Change of inventor or designer information

Inventor after: Xia Chunming

Inventor after: Zeng Yong

Inventor after: Cao Wei

Inventor after: Song Zhongjian

Inventor after: Zhou Kanheng

Inventor after: Dong Chang

Inventor before: Xia Chunming

Inventor before: Zeng Yong

Inventor before: Cao Wei

COR Change of bibliographic data

Free format text: CORRECT: INVENTOR; FROM: XIA CHUNMING CENG YONG CAO WEI TO: XIA CHUNMING CENG YONG CAO WEI SONG ZHONGJIAN ZHOU KANHENG DONG CHANG

C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20130508

Termination date: 20151123