CN111241982B - 一种基于cae-svm的机器人手势识别方法 - Google Patents

一种基于cae-svm的机器人手势识别方法 Download PDF

Info

Publication number
CN111241982B
CN111241982B CN202010014564.6A CN202010014564A CN111241982B CN 111241982 B CN111241982 B CN 111241982B CN 202010014564 A CN202010014564 A CN 202010014564A CN 111241982 B CN111241982 B CN 111241982B
Authority
CN
China
Prior art keywords
cae
svm
sample
output
model
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010014564.6A
Other languages
English (en)
Other versions
CN111241982A (zh
Inventor
应明峰
莫晓晖
杭阿芳
吴敏
苗甜银
司立众
陈淼
高峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jinling Institute of Technology
Original Assignee
Jinling Institute of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jinling Institute of Technology filed Critical Jinling Institute of Technology
Priority to CN202010014564.6A priority Critical patent/CN111241982B/zh
Publication of CN111241982A publication Critical patent/CN111241982A/zh
Application granted granted Critical
Publication of CN111241982B publication Critical patent/CN111241982B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00Aspects of pattern recognition specially adapted for signal processing
    • G06F2218/12Classification; Matching
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2411Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on the proximity to a decision surface, e.g. support vector machines

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Artificial Intelligence (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Engineering & Computer Science (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Evolutionary Computation (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Signal Processing (AREA)
  • Manipulator (AREA)
  • Feedback Control In General (AREA)
  • Image Analysis (AREA)

Abstract

本发明的目的是提出一种基于CAE‑SVM的机器人手势识别方法,本发明针对手势信号具有多样化、多义性等特征,在提取手势特征时存在一定的盲目性和随意性,难以识别等问题,提出了以CAE提取表面肌电信号的深层特征,再利用SVM对手势特征进行识别,最后将手势的动作类型用于控制机器人手臂动作。

Description

一种基于CAE-SVM的机器人手势识别方法
技术领域
本发明涉及机器人手势识别领域,特别设计基于CAE-SVM的机器人手势识别方法。
背景技术
随着人机交互和人工智能的迅猛发展,人机交互技术由最开始的通过命令行及操作指令控制计算机到图形交互界面控制计算机,再到多传感器融合交互的人机交互新模式。新的人机交互模式通过多传感器采集的语音、手势、表情、眼动等信号与机器交互,并完成交互任务。其中手势识别是人机交互中的一个重要组成部分。
表面肌电信号(surface Electronmyography,sEMC)是肌肉活动产生的非平稳生物电信号,该信号可以反映了手腕、手指的精细动作。手势识别技术主要分为三步:手势信号采集、提取特征、手势判别。然而手势具有多样化、多义化等特征,并且在不同的时间以及空间上的上存在差异性,还有手势信号出现的干扰噪声,选取手势特征的盲目性和随意性,这都是影响手势识别的重要因素。
压缩自编码(Contractive Autoencoder,CAE)是一种正则自编码器。采用雅可比矩阵F范数的平方作为误差约束项,通过雅可比矩阵F提取样本数据在各个方向的特征,实现数据降维。相比于自编码算法,压缩自编码提高了对于输入数据中的扰动的鲁棒性,能在一定程度上消除输入数据的噪声。
支持向量机(Support Vector Machine,SVM),属于机器学习范畴。SVM算法的学习策略是找到分类样本的“间隔最大化”,也就是找出能够使得分类类别间距最大化的最优超平面,算法的本质是在特征空间中的最大线性分类器。SVM算法把样本的低维特征通过核函数映射到高维特征空间上,可使得SVM的适用范围扩展到非线性可分的领域中。SVM有着非线性映射、很强的鲁棒性、对样本量需求小、能划分特征空间的最优超平面等优点,因此可以使用SVM的方法解决手势分类的问题。
发明内容
为了解决上述存在问题。本发明提供一种基于CAE-SVM的机器人手势识别方法,采用SVM代替CAE顶层的Softmax分类器,既结合了CAE较好的深层特征提取能力,也结合了SVM算法泛化能力强、分类精度高等优点,实现对机器人的手势识别,最后将识别的手势用于控制机器人手臂的工作状态。
本发明提供基于CAE-SVM的机器人手势识别方法的技术方案如下:
步骤1:使用肌电采集传感器采集的表面肌电信号样本,同时制作样本数据库,并划分训练样本和测试样本;
步骤2:构建CAE模型,确定CAE模型隐含层的层数、隐含层神经元的数目,压缩系数λ;
步骤3:将表面肌电信号送入CAE网络中,提取表面肌电信号的深层特征;
步骤4:将提取的肌电信号深层特征输入到SVM模型中进行分类;
步骤5:将CAE-SVM模型输出的类别控制机器人动作。
作为本发明进一步改进,所述步骤2中CAE网络结构设置如下:
CAE网络结构设置为1000-500-300-6的网络结构,压缩系数λ为0.003,最大迭代次数设置为300,学习率设置为0.05,激活函数设置为Sigmoid,误差函数采用均方根误差。
作为本发明进一步改进,所述步骤3中表面肌电信号的深层特征提取如下:
从训练好的CAE模型隐含层中提取深层特征,原始数据到提取深层特征的步骤分为:编码过程和解码过程;
编码过程是将原始数据x(n)输入到输入层在传到隐含层,实现对原始数据的编码:
h1=σ(W1x(n)+b1) (1)
其中,h1是第一个隐含层的输出,σ是激活函数,W1和b1分别是权重和阈值;
解码过程是将隐含层提取的样本特征输出到输出层,实现对隐含层提取的样本特征的解码:
Figure BDA0002358387500000021
CAE网络在数据解码重构时,通过在损失函数中将雅可比矩阵F范数的平方作为约束项,即
Figure BDA0002358387500000022
其中λ是压缩比例系数,
Figure BDA0002358387500000023
为雅可比矩阵F范数的平方,记为:
Figure BDA0002358387500000024
其中,hi表示隐含层输出,Wij表示CAE网络中层与层之间的连接权值;将最后一层隐含层的输出作为样本特征
作为本发明进一步改进,所述步骤3中SVM模型如下:
设线性可分的样本集为(xi,yi),其中i=1,2,...,n,xi是通过CAE网络提取的n个特征,yi是手势的类别标号,通过间隔最大化学习得到分类的最优超平面为:
ω·x+b=0 (5)
式中ω是法向量,决定了超平面的方向。b是位移量,决定超平面与原点的距离。相应的线性分类函数的一般形式为:
f(x)=ω·x+b (6)
同时最优超平面使所有样本点满足:
|f(x)|≥1 (7)
SVM的支持向量是令式6成立的样本点。
本发明提供一种基于CAE-SVM的机器人手势识别方法,有益效果如下:
1、本发明结合了CAE和SVM算法,提高了手势动作的识别率和效率。
2、本发明利用CAE的雅可比矩阵F可提取样本数据在各个方向特征的特点,提取了表面肌电信号的深层特征,CAE提取的特征鲁棒性更强,泛化能力能强,能够更好的表征更精细的手势动作。
3、本发明提出的手势识别方法以及机器人手臂控制流程,为新的人机交互模式提供了新方法,在工程上具有一定的应用意义。
附图说明
图1是本发明整体算法原理流程图。
图2是本发明中压缩自编码网络结构。
图3是SVM算法流程图
图4是机器人控制策略框图
具体实施方式
下面结合附图与具体实施方式对本发明作进一步详细描述:
基于CAE-SVM机器人手势识别方法的流程图如图1所示,主要分为:采集表面肌电信号、CAE模型提取信号特征、SVM模型判别手势动作、机器人控制器根据判别的动作控制机器人手臂动作四步。
首先对采集到的肌电信号样本标注类别,分别为:手爪动作、手腕动作、手爪闭合、手爪张开、手腕顺时针旋转、手腕逆时针旋转,共6种类别。然后将建立好的数据集中的原始数据划分为训练样本图像和测试样本图像,训练样本用于训练CAE模型和SVM模型,测试样本图像用于测试算法模型的有效性。测试样本输入训练完成的CAE模型后,提取CAE模型隐含层的输出,将该输出作为表面肌电信号的深层特征输入到训练完成的SVM模型中,并输出手势类别。最后将输出的手势类别用于控制机器人动作。
然后构建CAE网络结构,CAE网络结构设置为1000-500-300-6的网络结构,压缩系数λ为0.003,最大迭代次数设置为300,学习率设置为0.05,激活函数设置为Sigmoid,误差函数采用均方根误差。CAE的网络模型结构如图2所示。
训练好CAE模型后,需要从CAE网络的隐含层中提取深层特征,从原始数据到提取深层特征的步骤分为:编码过程和解码过程。
编码过程是将原始数据x(n)输入到输入层在传到隐含层,实现对原始数据的编码:
h1=σ(W1x(n)+b1) (1)
其中,h1是第一个隐含层的输出,σ是激活函数,W1和b1分别是权重和阈值。
解码过程是将隐含层提取的样本特征输出到输出层,实现对隐含层提取的样本特征的解码:
Figure BDA0002358387500000041
CAE网络在数据解码重构时,通过在损失函数中将雅可比矩阵F范数的平方作为约束项,即
Figure BDA0002358387500000042
其中λ是压缩比例系数,
Figure BDA0002358387500000043
为雅可比矩阵F范数的平方,记为:
Figure BDA0002358387500000044
其中,hi表示隐含层输出,Wij表示CAE网络中层与层之间的连接权值。
最后一层隐含层的输出作为样本特征,再将样本特征输入到SVM分类器中,完成分类目标,SVM的分类核心原理是:
设线性可分的样本集为(xi,yi),其中i=1,2,...,n,xi是通过CAE网络提取的n个特征,yi是手势的类别标号,通过间隔最大化学习得到分类的最优超平面为:
ω·x+b=0 (5)
式中ω是法向量,决定了超平面的方向。b是位移量,决定超平面与原点的距离。相应的线性分类函数的一般形式为:
f(x)=ω·x+b (6)
同时最优超平面使所有样本点满足:
|f(x)|≥1 (7)
SVM的支持向量是令式6成立的样本点,SVM算法流程如图3所示。
在控制机器人手臂动作时,预先将编码做出相应的动作,控制器根据CAE-SVM识别的动作类型用于控制机器人手臂动作,控制策略框图如图4所示。
以上所述,仅是本发明的较佳实施例而已,并非是对本发明作任何其他形式的限制,而依据本发明的技术实质所作的任何修改或等同变化,仍属于本发明所要求保护的范围。

Claims (3)

1.基于CAE-SVM的机器人手势识别方法,具体步骤如下,其特征在于,
步骤1:使用肌电采集传感器采集的表面肌电信号样本,同时制作样本数据库,并划分训练样本和测试样本;
步骤2:构建CAE模型,确定CAE模型隐含层的层数、隐含层神经元的数目,压缩系数λ;
步骤3:将表面肌电信号送入CAE网络中,提取表面肌电信号的深层特征;
步骤4:将提取的肌电信号深层特征输入到SVM模型中进行分类;
所述的提取表面肌电信号的深层特征:
从训练好的CAE模型隐含层中提取深层特征,原始数据到提取深层特征的步骤分为:编码过程和解码过程;
编码过程是将原始数据x(n)输入到输入层在传到隐含层,实现对原始数据的编码:
h1=σ(W1x(n)+b1) (1)
其中,h1是第一个隐含层的输出,σ是激活函数,W1和b1分别是权重和阈值;
解码过程是将隐含层提取的样本特征输出到输出层,实现对隐含层提取的样本特征的解码:
Figure FDA0004088689610000011
CAE网络在数据解码重构时,通过在损失函数中将雅可比矩阵F范数的平方作为约束项,即
Figure FDA0004088689610000012
其中λ是压缩比例系数,
Figure FDA0004088689610000013
为雅可比矩阵F范数的平方,记为:
Figure FDA0004088689610000014
其中,hi表示隐含层输出,Wij表示CAE网络中层与层之间的连接权值;将最后一层隐含层的输出作为样本特征;
步骤5:将CAE-SVM模型输出的类别控制机器人动作;
所述的CAE-SVM模型:
设线性可分的样本集为(xi,yi),其中i=1,2,...,n,xi是通过CAE网络提取的n个特征,yi是手势的类别标号,通过间隔最大化学习得到分类的最优超平面为:
ω·x+b=0 (5)
式中ω是法向量,决定了超平面的方向,b是位移量,决定超平面与原点的距离;相应的线性分类函数的一般形式为:
f(x)=ω·x+b (6)
同时最优超平面使所有样本点满足:
|f(x)|≥1 (7)
SVM的支持向量是令式6成立的样本点。
2.根据权利要求1基于CAE-SVM的机器人手势识别方法,其特征在于:所述的构建CAE模型:CAE网络结构设置为1000-500-300-6的网络结构,压缩系数λ为0.003,最大迭代次数设置为300,学习率设置为0.05,激活函数设置为Sigmoid,误差函数采用均方根误差。
3.根据权利要求1基于CAE-SVM的机器人手势识别方法,其特征在于:所述的机器人动作:
手爪动作、手腕动作、手爪闭合、手爪张开、手腕顺时针旋转、手腕逆时针旋转,共6种机器人手臂动作类型。
CN202010014564.6A 2020-01-07 2020-01-07 一种基于cae-svm的机器人手势识别方法 Active CN111241982B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010014564.6A CN111241982B (zh) 2020-01-07 2020-01-07 一种基于cae-svm的机器人手势识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010014564.6A CN111241982B (zh) 2020-01-07 2020-01-07 一种基于cae-svm的机器人手势识别方法

Publications (2)

Publication Number Publication Date
CN111241982A CN111241982A (zh) 2020-06-05
CN111241982B true CN111241982B (zh) 2023-04-28

Family

ID=70874296

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010014564.6A Active CN111241982B (zh) 2020-01-07 2020-01-07 一种基于cae-svm的机器人手势识别方法

Country Status (1)

Country Link
CN (1) CN111241982B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111730604B (zh) * 2020-08-04 2020-12-04 季华实验室 基于人体肌电信号的机械夹爪控制方法、装置和电子设备
CN113520413B (zh) * 2021-08-25 2022-10-21 长春工业大学 一种基于表面肌电信号的下肢多关节角度估计方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106293057A (zh) * 2016-07-20 2017-01-04 西安中科比奇创新科技有限责任公司 基于bp神经网络的手势识别方法
CN106709469B (zh) * 2017-01-03 2020-06-23 中国科学院苏州生物医学工程技术研究所 基于脑电和肌电多特征的自动睡眠分期方法
CN106951872B (zh) * 2017-03-24 2020-11-06 江苏大学 一种基于无监督深度模型与层次属性的行人再识别方法
CN107729393A (zh) * 2017-09-20 2018-02-23 齐鲁工业大学 基于混合自动编码器深度学习的文本分类方法及系统
US10699407B2 (en) * 2018-04-11 2020-06-30 Pie Medical Imaging B.V. Method and system for assessing vessel obstruction based on machine learning

Also Published As

Publication number Publication date
CN111241982A (zh) 2020-06-05

Similar Documents

Publication Publication Date Title
Pal et al. Handwritten English character recognition using neural network
CN110222580B (zh) 一种基于三维点云的人手三维姿态估计方法和装置
CN111241982B (zh) 一种基于cae-svm的机器人手势识别方法
CN110188669B (zh) 一种基于注意力机制的空中手写字符轨迹恢复方法
CN112528804A (zh) 基于生成对抗网络的肌电信号降噪和分类方法
CN113946218A (zh) 设备上的活动识别
CN114384999B (zh) 基于自适应学习的用户无关肌电手势识别系统
CN107346207B (zh) 一种基于隐马尔科夫模型的动态手势切分识别方法
Nogales et al. Real-time hand gesture recognition using the leap motion controller and machine learning
Li et al. Design of Bionic Robotic Hand Gesture Recognition System Based on Machine Vision
TWM595256U (zh) 智能手勢辨識裝置
CN111291804A (zh) 基于注意力机制的多传感器时间序列分析模型
CN117909881A (zh) 多源数据融合的抽油机的故障诊断方法及装置
Klassen et al. Towards the on-line recognition of arabic characters
CN115205989A (zh) 一种用于自然手势识别的多模态混合融合方法及其应用
Chen et al. A handwritten character recognition algorithm based on artificial immune
CN109492558A (zh) 一种基于Leap Motion的动态手势识别方法
Dhamanskar et al. Human computer interaction using hand gestures and voice
Li et al. Cross-people mobile-phone based airwriting character recognition
Harshitha et al. Hand Sign Classification Techniques Using Supervised And Unsupervised Learning Algorithms
CN113869255A (zh) 一种基于四元数的空中笔势识别方法
Hirota et al. Directional fuzzy clustering and its application to fuzzy modelling
Pavlidis et al. An on-line handwritten note recognition method using shape metamorphosis
Wei Gesture recognition technology based on depth convolutional neural network
CN114353925B (zh) Sqb称重传感器自动测试系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant