CN104866099A - 基于运动传感器提高智能设备手势识别精度的误差补偿方法 - Google Patents

基于运动传感器提高智能设备手势识别精度的误差补偿方法 Download PDF

Info

Publication number
CN104866099A
CN104866099A CN201510278151.8A CN201510278151A CN104866099A CN 104866099 A CN104866099 A CN 104866099A CN 201510278151 A CN201510278151 A CN 201510278151A CN 104866099 A CN104866099 A CN 104866099A
Authority
CN
China
Prior art keywords
acceleration
gesture
starting point
angular velocity
point
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510278151.8A
Other languages
English (en)
Other versions
CN104866099B (zh
Inventor
徐平平
杨璐纯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Southeast University
Original Assignee
Southeast University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Southeast University filed Critical Southeast University
Priority to CN201510278151.8A priority Critical patent/CN104866099B/zh
Publication of CN104866099A publication Critical patent/CN104866099A/zh
Application granted granted Critical
Publication of CN104866099B publication Critical patent/CN104866099B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Gyroscopes (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种基于运动传感器提高智能设备手势识别精度的误差补偿方法,通过同时使用加速度传感器和陀螺仪,提高识别准确率和用户体验。在运动检测中,针对现有方案中计算量大,每个手势的测量值由于用户个体的差异而有所区别的问题,本发明采用一种基于自适应阈值的方法来对滤波后的手势信号进行分段,确定手势的起点和终点。在加速度误差补偿阶段,对经过坐标转换的加速度值进行误差补偿,从而减小加速度的零位移偏差对手势识别精度的影响。

Description

基于运动传感器提高智能设备手势识别精度的误差补偿方法
技术领域
本发明涉及一种基于运动传感器提高智能设备手势识别精度的误差补偿方法,属于人机交互技术。
背景技术
手势作为一种新型的、自然的人机交互方式得到了广泛的研究,已经逐渐应用于手持移动设备和远程控制领域。目前存在两种方式的手势识别技术:基于图像的手势识别和基于传感器的手势识别技术。前者发展成熟、算法识别成功率高,但是受光线和背景等外部条件的影响比较大,而后者仅和手势的移动相关,基本不受外界条件的影响。目前智能手机功能强大,不仅包括通信模块,还包括加速度传感器、陀螺仪、光线传感器等,这也为利用加速度传感器和陀螺仪进行手势识别提供了可能。
基于传感器的手势识别步骤一般包括手机坐标系和导航坐标系的变换、再对变换到导航坐标系中的加速度值进行两次积分得到三维轨迹,最后,将三维轨迹转换到二维平面中实现手势的还原。而坐标变换和轨迹还原的精度从本质上说与测得的角速度和加速度都有关系,由于传感器存在确定性误差和随机误差,通过积分的累积效应,误差会随着时间的增长而变大,从而影响识别的精确度。通过对误差传播模型的分析,可以得到以下结论:姿态误差主要是由陀螺仪误差和初始校准时的欧拉角引起的;位置误差和速度误差主要由导航坐标系下的加速度误差△an引起。
下面结合现有技术中较有代表性的两种手势识别方法对现有技术及其存在的问题加以说明。
方法一
文献[1]中的方案是基于DTW(Dynamic Time Warping,动态时间规整)的手势识别方案,由三个阶段组成,手势准备阶段、手势训练阶段和手势识别阶段。手势准备阶段利用手势采集算法提取出有效的手势加速度数据,然后对采集的原始数据进行预处理,包括失真补偿、转换坐标系、重采样、平滑滤波和归一化等,使数据格式规整、统一;手势训练阶段采用DTW算法计算训练样本间的相似度,再利用AP(亲和传播聚类)算法提取手势模版;手势识别阶段采用DTW对待识别手势和手势模版进行匹配计算,通过二者的相似度筛选手势聚类,重构字典;采用快速傅立叶变换FFT估算待识别手势稀疏度,在重构字典基础上,利用一种MSAMP(改进的稀疏度自适应匹配追踪)对待识别手势进行稀疏重构;根据重构结果的逼近误差特征,对待识别的手势进行分类。
方法一存在如下缺点:
1、基于DTW(动态模版匹配)的手势识别方法中关键是建立手势模板数据,因为这直接影响算法对个体差异的适应性和识别的准确率。而手势数据模板是由训练样本得到的,训练阶段所选样本数据和样本的大小决定了匹配模版的准确率。由于训练样本只是部分用户数据,难以建立实用性广泛的手势模版,这就导致算法识别准确率低、个体差异适应性差的特点。而且,需要对所有的模板进行匹配,计算量大,随着手势数目的增加,其算法的实时性会大大降低。
2、基于DTW手势识别方法中,只使用了加速度传感器的输出值,无法获取设备的姿态信息,这样,手势操作就只能在限定的设备姿态下进行,大大降低了用户体验和识别的准确率。
方法二
文献[2]中给出了一种智能设备轨迹还原的方法。包含运动检测、误差补偿和轨迹的重建三个步骤,在误差补偿阶段采用ZVC(Zero Velocity Compensation,零速度补偿)方法对欧拉角和加速度进行修正。该方法的框图如图1所示,具体步骤如下:
1、运动检测阶段采用三轴加速度标准差(式2)的平均值(式1)与设定的阈值进行比较来表示抖动的剧烈程度。当标准差的平均值大于阈值时,为运动状态。
δ=1/3[δ(X)+δ(Y)+δ(Z)]   (1)
δ ( X ) = Σ k = 1 ∞ [ X k - E ( X ) ] 2 p k - - - ( 2 )
其中,δ(X)、δ(Y)和δ(Z)分别表示X、Y、Z轴上的加速度标准差,Xk表示X轴上的第k个采样点的加速度值,E(X)表示样本X的平均值,pk表示Xk出现的概率。
2、欧拉角补偿,假设在t=0的时候,系统初始校准误差为0,而航向角ψ、横滚角倾斜角θ的误差随着时间的增加而线性增长,从而对计算出的欧拉角进行修正。
3、加速度的补偿算法如式(3-6)所示,其中为原始测量加速度值经过坐标变换后的加速度值,为静止时的速度,Vn(t)是按照线性模型补偿后得到的速度值。再对所得速度进行积分获得三维空间的轨迹,然后再将三维轨迹转换到二维平面中。
V ^ n ( t ) = &Integral; 0 t a ^ n dt ( 0 < t < t end ) - - - ( 3 )
V v n ( t ) = 0 , ( 0 < t &le; t 1 , t 2 &le; t &le; t end ) - - - ( 4 )
&Delta; V n ( t ) = 0 ( t 0 < t &le; t 1 ) V ^ n ( t 2 ) t 2 - t 1 ( t - t 1 ) ( t 1 < t &le; t 2 ) 0 ( t 1 < t &le; t end ) - - - ( 5 )
V n ( t ) = 0 ( 0 < t &le; t 1 ) V ^ n ( t ) - V ^ n ( t 2 ) t 2 - t 1 ( t - t 1 ) ( t 1 < t &le; t 2 ) 0 ( t 2 < t &le; t end ) - - - ( 6 )
其中,t0~t1表示运动前的静止时段,t1~t2表示运动时段,t2~tend表示运动后的静止时段。
方法二存在如下缺点:
1、运动检测阶段只考虑到了与加速度相关的阈值,即将三个轴加速度数据方差的平均值作为阈值,但方差牵涉的运算量比较大,这对于智能设备有限的计算能力和电量是不可取的。
2、在加速度误差补偿阶段,直接对经过坐标变换的进行积分得到速度值,而不先对加速度进行修正,虽然后面对速度的值进行了修正,但是加速度的误差已经在积分的过程中被累积到速度中,尤其是加速度的零位移偏移造成的影响最大。
参考文献(如专利/论文/标准)
[1]王海婴,李正山.一种基于加速度传感器的手势识别方法[P].北京:CN103984416A,2014-08-13.
[2]张春龙.基于智能手机的智能家居控制系统的设计与实现[D].西安电子科技大学,2014.
[3]Sung-Jung Cho,Jong Koo Oh,Wook Chang,et al.Magic Wand:A novel hand gestureinput device based on inertial sensing technique[C].30th Annual Conference of IEEE onIndustrial Electronics Society,2004:2786~2791.
发明内容
发明目的:为克服传统手势识别中只使用加速度传感器,而无法获取设备姿态信息,使得手势操作只能在限定的设备姿态下进行的问题,本发明通过同时使用加速度传感器和陀螺仪提高智能设备手势识别精度和用户体验,根据运用于智能家居控制终端运动的特征,从优化相关参量的误差补偿方法入手,设计带有误差补偿的移动轨迹还原算法,从而提高手势识别的精确度。
技术方案:为实现上述目的,本发明采用的技术方案为:
一种基于运动传感器提高智能设备手势识别精度的误差补偿方法,同时使用加速度传感器和陀螺仪进行手势识别,具体包括如下步骤:
(1)运动检测阶段:基于自适应阈值的方法对滤波后的手势信号进行分段,以确定手势起点和手势终点,即:当去除重力加速度后的加速度幅值和角速度幅值中任意一个大于起点设置的门限时,确定对应时刻为手势起点;当去除重力加速度后的加速度幅值和角速度幅值均小于终点设置的门限时,确定对应时刻为手势终点;同时,为了有效减少因抖动而造成的误检测,引入超时机制以去除误动作;具体执行过程如下:
对于加速度传感器和陀螺仪检测到的原始采样信号,先通过低通滤波器滤除高频分量,接着进行如下计算:使用分别表示加速度传感器在第n个采样点上的X、Y、Z轴上的加速度值,使用分别表示陀螺仪在第n个采样点上的X、Y、Z轴上的角速度值,计算:
R a ( n ) = | ( x n a ) 2 + ( y n a ) 2 + ( z n a ) 2 - g |
R w ( n ) = | ( x n w ) 2 + ( y n w ) 2 + ( z n w ) 2 |
其中,g表示重力加速度,Ra(n)表示第n个采样点上去除重力加速度的加速度幅值,Rw(n)表示第n个采样点上的角速度幅值;进行如下判断:
①若Ra(M)>δth1,M=n1,n1+1…,n1+N,则判断采样点n1为加速度起点;若Rw(M)>δth2,M=m1,m1+1…,m1+N,则判断采样点m1为角速度起点;在此引入超时机制,判断在检测到加速度起点/角速度起点后的一定时长t*内,是否检测到角速度起点/加速度起点,若检测到,则确定手势起点的坐标为A=min(n1,m1);其中,N=5;
②若Ra(M)<δth1,M=n2,n2+1…,n2+N,则判断采样点n2为加速度终点;若Rw(M)<δth2,M=m2,m2+1…,m2+N,则判断采样点m2为角速度终点;确定手势终点的坐标为B=max(n2,m2);其中,N=5;
以t0~t1时段表示运动前的静止时段,计算该静止时段的所有采样点的加速度平均值和角速度平均值同时设定系数Kt,定义加速度阈值δth1和角速度阈值δth2分别为:
&delta; th 1 = K t R &OverBar; a
&delta; th 2 = K t R &OverBar; w
通过多次实验确定,当Kt=2时能有效降低由于突然抖动而产生的误检测;
(2)手势的三维空间轨迹重建阶段:对于加速度传感器和陀螺仪检测到的原始采样信号,先通过低通滤波器滤除高频分量,接着进行如下计算:对经过低通滤波器滤波后的原始采样信号先进行坐标转换,然后对坐标转换后的加速度值进行前段补偿和后段补偿,接着对补偿后的加速度值进行积分以得到速度,最后对速度进行后段补偿,最终积分获得手势的三维空间轨迹;具体执行过程如下:
以t1~t2时段表示运动时段,以t2~tend时段表示运动后的静止时段,将t时刻的原始加速度值进行坐标转换后得到an(t),以表示t0~t1时段内加速度an(t)的平均值,以表示t2~tend时段内加速度an(t)的平均值;
对an(t)进行前段补偿后得到对an(t)进行后段补偿后得到
a &OverBar; &OverBar; n ( t ) = 0 ( t 0 < t &le; t 1 ) a n ( t ) - a &OverBar; t 0 - t 1 t 1 ( t 1 < t &le; t end )
a ^ n ( t ) = 0 ( t 0 < t &le; t 1 ) a &OverBar; &OverBar; n ( t ) - a &OverBar; t 2 - t end ( t - t 1 ) t 2 - t 1 ( t 1 < t &le; t 2 ) 0 ( t 2 < t &le; t end )
对补偿后的加速度值进行积分后得到速度Vn(t):
V n ( t ) = 0 ( t 0 < t &le; t 1 ) a &OverBar; &OverBar; n ( t ) ( t - t 1 ) - a &OverBar; t 2 - t end ( t - t 1 ) 2 2 ( t 2 - t 1 ) ( t 1 < t &le; t 2 ) 0 ( t 2 < t &le; t end )
对速度进行后段补偿得到最终速度
V ^ n ( t ) = 0 ( 0 < t &le; t 1 ) V n ( t ) - V n ( t 2 ) - V n ( t 1 ) t 2 - t 1 ( t - t 1 ) ( t 1 < t &le; t 2 ) 0 ( t 2 < t &le; t end )
对补偿后的速度进行积分从而还原手势的三维空间轨迹。
所述运动检测阶段的具体执行过程如下:
(101)对于加速度传感器和陀螺仪检测到的原始采样信号,先通过低通滤波器滤除高频分量,接着进行如下计算:对于当前采样点,计算去除重力加速度的加速度幅值Ra(M)和角速度幅值Rw(M),执行步骤(102);
(102)若Ra(M)>δth1,则当前采样点为加速度起点,执行步骤(103);若Rw(M)>δth2,则当前采样点为角速度起点,执行步骤(105);若Ra(M)<δth1,则当前采样点为加速度终点,执行步骤(108);若Rw(M)<δth2,则当前采样点为角速度终点,执行步骤(109);
(103)加速度起点后的t*时长内是否检测到角速度起点:若检测到,则执行步骤(104);否则,执行步骤(107);
(104)将加速度起点确定为手势起点,执行步骤(111);
(105)角速度起点后的t*时长内是否检测到加速度起点:若检测到,则执行步骤(106);否则,执行步骤(107);
(106)将角速度起点确定为手势起点,执行步骤(111);
(107)判断当前采样点为误动作,执行步骤(111);
(108)判断当前节点是否同时为角速度终点:若是,则执行步骤(110);否则,执行步骤(111);
(109)判断当前节点是否同时为加速度终点:若是,则执行步骤(110);否则,执行步骤(111);
(110)将当前采样点确定为手势终点,执行步骤(111);
(111)采集下一个采样点,返回步骤(101)。
有益效果:本发明提供的基于运动传感器提高智能设备手势识别精度的误差补偿方法,与现有的手势识别方法相比,本发明不需要设计专门的传感器,在搭载加速度传感器和陀螺仪的终端上都能够使用;并采用一种基于自适应阈值的方法来完成经过信号处理的信号的起点和终点的判断;同时对加速度的补偿进行了更合理的优化,从而使得还原的三维轨迹更准确,提高了手势识别的准确率;为实际的工程应用提供了理论基础。
附图说明
图1是基于ZVC零速度补偿算法的手势轨迹还原流程图;
图2是本发明实施例中带有误差补偿的基于改进的ZVC手势轨迹还原整体框图;
图3是本发明实施例中判断手势起点流程图。
具体实施方式
下面结合附图对本发明作更进一步的说明。
为克服传统手势识别中只使用加速度传感器,而无法获取设备姿态信息,使得手势操作只能在限定的设备姿态下进行的问题,本发明通过同时使用加速度传感器和陀螺仪,提高识别准确率和用户体验。在运动检测中,针对现有方案中计算量大,每个手势的测量值由于用户个体的差异而有所区别的问题,本发明采用一种基于自适应阈值的方法来对滤波后的手势信号进行分段,确定手势的起点和终点。在加速度误差补偿阶段,对经过坐标转换的加速度值进行误差补偿,从而减小加速度的零位移偏差对手势识别精度的影响。
下面结合实施例对本发明做出进一步的说明。
一种基于运动传感器提高智能设备手势识别精度的误差补偿方法,同时使用加速度传感器和陀螺仪进行手势识别,包括运动检测阶段和手势的三维空间轨迹重建阶段两个重要阶段。
(1)运动检测阶段
手势识别的第一步是确定手势的起点和终点,从而有效截取手势信号段。当手势动作开始时,加速度信号和角速度信号发生剧烈变化,因此可以同时比较加速度传感器和陀螺仪手势信号值与相应阈值的关系来确定起点和终点,但是要考虑到加速度和角速度不一定同时达到手势的起点和终点阈值的问题。
由于一次手势持续时间大约为0.5~1s,即手势的频率为1~2Hz,因此可以将信号的采样频率设置为100Hz。在进行运动检测之前,先通过低通滤波器来滤除高频分量。使用分别表示加速度传感器在第n个采样点上的X、Y、Z轴上的加速度值,使用分别表示陀螺仪在第n个采样点上的X、Y、Z轴上的角速度值,计算:
R a ( n ) = | ( x n a ) 2 + ( y n a ) 2 + ( z n a ) 2 - g |
R w ( n ) = | ( x n w ) 2 + ( y n w ) 2 + ( z n w ) 2 |
其中,g表示重力加速度,Ra(n)表示第n个采样点上去除重力加速度的加速度幅值,Rw(n)表示第n个采样点上的角速度幅值;进行如下判断:
①若Ra(M)>δth1,M=n1,n1+1…,n1+N,则判断采样点n1为加速度起点;若Rw(M)>δth2,M=m1,m1+1…,m1+N,则判断采样点m1为角速度起点;在此引入超时机制,判断在检测到加速度起点/角速度起点后的一定时长t*=0.1s内,是否检测到角速度起点/加速度起点(结合采样频率和t*值的设定,即判断|m1-n1|≤10是否成立),若检测到,则确定手势起点的坐标为A=min(n1,m1);其中,N=5;
②若Ra(M)<δth1,M=n2,n2+1…,n2+N,则判断采样点n2为加速度终点;若Rw(M)<δth2,M=m2,m2+1…,m2+N,则判断采样点m2为角速度终点;确定手势终点的坐标为B=max(n2,m2);其中,N=5。
以t0~t1时段表示运动前的静止时段,计算该静止时段的所有采样点的加速度平均值和角速度平均值同时设定系数Kt,定义加速度阈值δth1和角速度阈值δth2分别为:
&delta; th 1 = K t R &OverBar; a
&delta; th 2 = K t R &OverBar; w
通过多次实验确定,当Kt=2时能有效降低由于突然抖动而产生的误检测;如图3所示,手势起点和手势终点判断的流程如下:
(101)对于加速度传感器和陀螺仪检测到的原始采样信号,先通过低通滤波器滤除高频分量,接着进行如下计算:对于当前采样点,计算去除重力加速度的加速度幅值Ra(M)和角速度幅值Rw(M),执行步骤(102);
(102)若Ra(M)>δth1,则当前采样点为加速度起点,执行步骤(103);若Rw(M)>δth2,则当前采样点为角速度起点,执行步骤(105);若Ra(M)<δth1,则当前采样点为加速度终点,执行步骤(108);若Rw(M)<δth2,则当前采样点为角速度终点,执行步骤(109);
(103)加速度起点后的t*时长内是否检测到角速度起点:若检测到,则执行步骤(104);否则,执行步骤(107);
(104)将加速度起点确定为手势起点,执行步骤(111);
(105)角速度起点后的t*时长内是否检测到加速度起点:若检测到,则执行步骤(106);否则,执行步骤(107);
(106)将角速度起点确定为手势起点,执行步骤(111);
(107)判断当前采样点为误动作,执行步骤(111);
(108)判断当前节点是否同时为角速度终点:若是,则执行步骤(110);否则,执行步骤(111);
(109)判断当前节点是否同时为加速度终点:若是,则执行步骤(110);否则,执行步骤(111);
(110)将当前采样点确定为手势终点,执行步骤(111);
(111)采集下一个采样点,返回步骤(101)。
(2)手势的三维空间轨迹重建阶段
通过对误差传播模型的建立,分析出需要从欧拉角和加速度两个参量进行补偿。本发明主要从加速度补偿的角度进行改进。
对于加速度传感器和陀螺仪检测到的原始采样信号,先通过低通滤波器滤除高频分量,接着进行如下计算:对经过低通滤波器滤波后的原始采样信号先进行坐标转换,然后对坐标转换后的加速度值进行前段补偿和后段补偿,接着对补偿后的加速度值进行积分以得到速度,最后对速度进行后段补偿,最终获得手势的三维空间轨迹;具体执行过程如下:
以t1~t2时段表示运动时段,以t2~tend时段表示运动后的静止时段,将t时刻的原始加速度值进行坐标转换后得到an(t),以表示t0~t1时段内加速度an(t)的平均值,以表示t2~tend时段内加速度an(t)的平均值;
对an(t)进行前段补偿后得到对an(t)进行后段补偿后得到
a &OverBar; &OverBar; n ( t ) = 0 ( t 0 < t &le; t 1 ) a n ( t ) - a &OverBar; t 0 - t 1 t 1 ( t 1 < t &le; t end )
a ^ n ( t ) = 0 ( t 0 < t &le; t 1 ) a &OverBar; &OverBar; n ( t ) - a &OverBar; t 2 - t end ( t - t 1 ) t 2 - t 1 ( t 1 < t &le; t 2 ) 0 ( t 2 < t &le; t end )
对补偿后的加速度值进行积分后得到速度Vn(t):
V n ( t ) = 0 ( t 0 < t &le; t 1 ) a &OverBar; &OverBar; n ( t ) ( t - t 1 ) - a &OverBar; t 2 - t end ( t - t 1 ) 2 2 ( t 2 - t 1 ) ( t 1 < t &le; t 2 ) 0 ( t 2 < t &le; t end )
对速度进行后段补偿得到最终速度
V ^ n ( t ) = 0 ( 0 < t &le; t 1 ) V n ( t ) - V n ( t 2 ) - V n ( t 1 ) t 2 - t 1 ( t - t 1 ) ( t 1 < t &le; t 2 ) 0 ( t 2 < t &le; t end )
对补偿后的速度进行积分从而还原手势的三维空间轨迹。
以上所述仅是本发明的优选实施方式,应当指出:对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (2)

1.一种基于运动传感器提高智能设备手势识别精度的误差补偿方法,其特征在于:同时使用加速度传感器和陀螺仪进行手势识别,具体包括如下步骤:
(1)运动检测阶段:基于自适应阈值的方法对滤波后的手势信号进行分段,以确定手势起点和手势终点,即:当去除重力加速度后的加速度幅值和角速度幅值中任意一个大于起点设置的门限时,确定对应时刻为手势起点;当去除重力加速度后的加速度幅值和角速度幅值均小于终点设置的门限时,确定对应时刻为手势终点;同时,为了有效减少因抖动而造成的误检测,引入超时机制以去除误动作;具体执行过程如下:
对于加速度传感器和陀螺仪检测到的原始采样信号,先通过低通滤波器滤除高频分量,接着进行如下计算:使用分别表示加速度传感器在第n个采样点上的X、Y、Z轴上的加速度值,使用分别表示陀螺仪在第n个采样点上的X、Y、Z轴上的角速度值,计算:
R a ( n ) = | ( x n a ) 2 + ( y n a ) 2 + ( z n a ) 2 - g |
R w ( n ) = | ( x n w ) 2 + ( y n w ) 2 + ( z n w ) 2 |
其中,g表示重力加速度,Ra(n)表示第n个采样点上去除重力加速度的加速度幅值,Rw(n)表示第n个采样点上的角速度幅值;进行如下判断:
①若Ra(M)>δth1,M=n1,n1+1…,n1+N,则判断采样点n1为加速度起点;若Rw(M)>δth2,M=m1,m1+1…,m1+N,则判断采样点m1为角速度起点;在此引入超时机制,判断在检测到加速度起点/角速度起点后的一定时长t*内,是否检测到角速度起点/加速度起点,若检测到,则确定手势起点的坐标为A=min(n1,m1);其中,N=5;
②若Ra(M)<δth1,M=n2,n2+1…,n2+N,则判断采样点n2为加速度终点;若Rw(M)<δth2,M=m2,m2+1…,m2+N,则判断采样点m2为角速度终点;确定手势终点的坐标为B=max(n2,m2);其中,N=5;
以t0~t1时段表示运动前的静止时段,计算该静止时段的所有采样点的加速度平均值和角速度平均值同时设定系数Kt,定义加速度阈值δth1和角速度阈值δth2分别为:
&delta; th 1 = K t R &OverBar; a
&delta; th 2 = K t R &OverBar; w
(2)手势的三维空间轨迹重建阶段:对于加速度传感器和陀螺仪检测到的原始采样信号,先通过低通滤波器滤除高频分量,接着进行如下计算:对经过低通滤波器滤波后的原始采样信号先进行坐标转换,然后对坐标转换后的加速度值进行前段补偿和后段补偿,接着对补偿后的加速度值进行积分以得到速度,最后对速度进行后段补偿,最终积分获得手势的三维空间轨迹;具体执行过程如下:
以t1~t2时段表示运动时段,以t2~tend时段表示运动后的静止时段,将t时刻的原始加速度值进行坐标转换后得到an(t),以表示t0~t1时段内加速度an(t)的平均值,以表示t2~tend时段内加速度an(t)的平均值;
对an(t)进行前段补偿后得到对an(t)进行后段补偿后得到
a = n ( t ) = 0 ( t 0 < t &le; t 1 ) a n ( t ) - a &OverBar; t 0 - t 1 t 1 ( t 1 < t &le; t end )
a ^ n ( t ) = 0 ( t 0 < t &le; t 1 ) a = n ( t ) - a &OverBar; t 2 - t end ( t - t 1 ) t 2 - t 1 ( t 1 < t &le; t 2 ) 0 ( t 2 < t &le; t end )
对补偿后的加速度值进行积分后得到速度Vn(t):
V n ( t ) = 0 ( t 0 < t &le; t 1 ) a = n ( t ) ( t - t 1 ) - a &OverBar; t 2 - t end ( t - t 1 ) 2 2 ( t 2 - t 1 ) ( t 1 < t &le; t 2 ) 0 ( t 2 < t &le; t end )
对速度进行后段补偿得到最终速度
V ^ n ( t ) = 0 ( 0 < t &le; t 1 ) V n ( t ) - V n ( t 2 ) - V n ( t 1 ) t 2 - t 1 ( t - t 1 ) ( t 1 < t &le; t 2 ) 0 ( t 2 < t &le; t end )
对补偿后的速度进行积分从而还原手势的三维空间轨迹。
2.根据权利要求1所述的基于运动传感器提高智能设备手势识别精度的误差补偿方法,其特征在于:所述运动检测阶段的具体执行过程如下:
(101)对于加速度传感器和陀螺仪检测到的原始采样信号,先通过低通滤波器滤除高频分量,接着进行如下计算:对于当前采样点,计算去除重力加速度的加速度幅值Ra(M)和角速度幅值Rw(M),执行步骤(102);
(102)若Ra(M)>δth1,则当前采样点为加速度起点,执行步骤(103);若Rw(M)>δth2,则当前采样点为角速度起点,执行步骤(105);若Ra(M)<δth1,则当前采样点为加速度终点,执行步骤(108);若Rw(M)<δth2,则当前采样点为角速度终点,执行步骤(109);
(103)加速度起点后的t*时长内是否检测到角速度起点:若检测到,则执行步骤(104);否则,执行步骤(107);
(104)将加速度起点确定为手势起点,执行步骤(111);
(105)角速度起点后的t*时长内是否检测到加速度起点:若检测到,则执行步骤(106);否则,执行步骤(107);
(106)将角速度起点确定为手势起点,执行步骤(111);
(107)判断当前采样点为误动作,执行步骤(111);
(108)判断当前节点是否同时为角速度终点:若是,则执行步骤(110);否则,执行步骤(111);
(109)判断当前节点是否同时为加速度终点:若是,则执行步骤(110);否则,执行步骤(111);
(110)将当前采样点确定为手势终点,执行步骤(111);
(111)采集下一个采样点,返回步骤(101)。
CN201510278151.8A 2015-05-27 2015-05-27 基于运动传感器提高智能设备手势识别精度的误差补偿方法 Expired - Fee Related CN104866099B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510278151.8A CN104866099B (zh) 2015-05-27 2015-05-27 基于运动传感器提高智能设备手势识别精度的误差补偿方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510278151.8A CN104866099B (zh) 2015-05-27 2015-05-27 基于运动传感器提高智能设备手势识别精度的误差补偿方法

Publications (2)

Publication Number Publication Date
CN104866099A true CN104866099A (zh) 2015-08-26
CN104866099B CN104866099B (zh) 2017-12-26

Family

ID=53911980

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510278151.8A Expired - Fee Related CN104866099B (zh) 2015-05-27 2015-05-27 基于运动传感器提高智能设备手势识别精度的误差补偿方法

Country Status (1)

Country Link
CN (1) CN104866099B (zh)

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105105759A (zh) * 2015-08-31 2015-12-02 张昊华 康复行为辅助方法及移动智能动作监测康复指导仪
CN105407150A (zh) * 2015-10-31 2016-03-16 苏浩强 应用程序远程控制方法
CN105549746A (zh) * 2016-01-28 2016-05-04 广州成潮智能科技有限公司 一种基于加速度传感芯片的动作识别方法
CN105824420A (zh) * 2016-03-21 2016-08-03 李骁 一种基于加速度传感器的手势识别方法
CN106950927A (zh) * 2017-02-17 2017-07-14 深圳大学 一种控制智能家居的方法和智能穿戴设备
CN107408169A (zh) * 2016-02-18 2017-11-28 指纹卡有限公司 用于远程控制的便携式电子装置
CN107590823A (zh) * 2017-07-21 2018-01-16 昆山国显光电有限公司 三维形态的捕捉方法和装置
WO2018045902A1 (zh) * 2016-09-06 2018-03-15 深圳市民展科技开发有限公司 装置动作识别方法、计算机设备及计算机可读存储介质
CN108108015A (zh) * 2017-11-20 2018-06-01 电子科技大学 一种基于手机陀螺仪和动态时间规整的动作手势识别方法
CN109189218A (zh) * 2018-08-20 2019-01-11 广州市三川田文化科技股份有限公司 一种手势识别的方法、装置、设备及计算机可读存储介质
CN109262608A (zh) * 2018-08-22 2019-01-25 南京阿凡达机器人科技有限公司 一种遥控机器人进行格斗的方法及系统
CN109856424A (zh) * 2018-12-30 2019-06-07 贝壳技术有限公司 Android加速传感器阈值确定方法、电子设备及介质
CN110348275A (zh) * 2018-04-08 2019-10-18 中兴通讯股份有限公司 手势识别方法、装置、智能设备及计算机可读存储介质
CN111596614A (zh) * 2020-06-02 2020-08-28 中国科学院自动化研究所 基于云边协同的运动控制误差补偿系统及方法
CN111896808A (zh) * 2020-07-31 2020-11-06 中国电子科技集团公司第四十一研究所 将频谱轨迹处理和自适应门限生成进行一体化设计的方法
CN112212782A (zh) * 2019-06-25 2021-01-12 合肥欣奕华智能机器有限公司 一种玻璃基板检测方法、装置及系统
CN114422762A (zh) * 2021-12-25 2022-04-29 深圳市幕工坊科技有限公司 投影幕动作控制系统
WO2022099588A1 (zh) * 2020-11-13 2022-05-19 深圳振科智能科技有限公司 字符输入方法、装置、电子设备及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120037739A (ko) * 2010-10-12 2012-04-20 오민애 손동작 기반 사용자 인터페이스 장치 및 그 방법
CN202404523U (zh) * 2011-12-29 2012-08-29 沈信伟 一种动作控制装置
CN102945362A (zh) * 2012-10-18 2013-02-27 中国科学院计算技术研究所 基于异构数据融合的传感器协同手势识别方法及系统
CN103984416A (zh) * 2014-06-10 2014-08-13 北京邮电大学 一种基于加速度传感器的手势识别方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120037739A (ko) * 2010-10-12 2012-04-20 오민애 손동작 기반 사용자 인터페이스 장치 및 그 방법
CN202404523U (zh) * 2011-12-29 2012-08-29 沈信伟 一种动作控制装置
CN102945362A (zh) * 2012-10-18 2013-02-27 中国科学院计算技术研究所 基于异构数据融合的传感器协同手势识别方法及系统
CN103984416A (zh) * 2014-06-10 2014-08-13 北京邮电大学 一种基于加速度传感器的手势识别方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
张春龙: "基于智能手机的智能家居控制系统的设计与实现", 《中国优秀硕士学位论文全文数据库》 *

Cited By (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105105759A (zh) * 2015-08-31 2015-12-02 张昊华 康复行为辅助方法及移动智能动作监测康复指导仪
CN105407150A (zh) * 2015-10-31 2016-03-16 苏浩强 应用程序远程控制方法
CN105549746A (zh) * 2016-01-28 2016-05-04 广州成潮智能科技有限公司 一种基于加速度传感芯片的动作识别方法
CN105549746B (zh) * 2016-01-28 2018-10-30 广州成潮智能科技有限公司 一种基于加速度传感芯片的动作识别方法
CN107408169A (zh) * 2016-02-18 2017-11-28 指纹卡有限公司 用于远程控制的便携式电子装置
CN105824420B (zh) * 2016-03-21 2018-09-14 李骁 一种基于加速度传感器的手势识别方法
CN105824420A (zh) * 2016-03-21 2016-08-03 李骁 一种基于加速度传感器的手势识别方法
WO2018045902A1 (zh) * 2016-09-06 2018-03-15 深圳市民展科技开发有限公司 装置动作识别方法、计算机设备及计算机可读存储介质
CN106950927A (zh) * 2017-02-17 2017-07-14 深圳大学 一种控制智能家居的方法和智能穿戴设备
CN106950927B (zh) * 2017-02-17 2019-05-17 深圳大学 一种控制智能家居的方法和智能穿戴设备
CN107590823A (zh) * 2017-07-21 2018-01-16 昆山国显光电有限公司 三维形态的捕捉方法和装置
CN107590823B (zh) * 2017-07-21 2021-02-23 昆山国显光电有限公司 三维形态的捕捉方法和装置
CN108108015A (zh) * 2017-11-20 2018-06-01 电子科技大学 一种基于手机陀螺仪和动态时间规整的动作手势识别方法
CN110348275A (zh) * 2018-04-08 2019-10-18 中兴通讯股份有限公司 手势识别方法、装置、智能设备及计算机可读存储介质
CN109189218A (zh) * 2018-08-20 2019-01-11 广州市三川田文化科技股份有限公司 一种手势识别的方法、装置、设备及计算机可读存储介质
CN109189218B (zh) * 2018-08-20 2019-05-10 广州市三川田文化科技股份有限公司 一种手势识别的方法、装置、设备及计算机可读存储介质
CN109262608A (zh) * 2018-08-22 2019-01-25 南京阿凡达机器人科技有限公司 一种遥控机器人进行格斗的方法及系统
CN109856424A (zh) * 2018-12-30 2019-06-07 贝壳技术有限公司 Android加速传感器阈值确定方法、电子设备及介质
CN112212782A (zh) * 2019-06-25 2021-01-12 合肥欣奕华智能机器有限公司 一种玻璃基板检测方法、装置及系统
CN112212782B (zh) * 2019-06-25 2023-01-17 合肥欣奕华智能机器股份有限公司 一种玻璃基板检测方法、装置及系统
CN111596614A (zh) * 2020-06-02 2020-08-28 中国科学院自动化研究所 基于云边协同的运动控制误差补偿系统及方法
CN111596614B (zh) * 2020-06-02 2021-06-25 中国科学院自动化研究所 基于云边协同的运动控制误差补偿系统及方法
CN111896808A (zh) * 2020-07-31 2020-11-06 中国电子科技集团公司第四十一研究所 将频谱轨迹处理和自适应门限生成进行一体化设计的方法
CN111896808B (zh) * 2020-07-31 2023-02-03 中国电子科技集团公司第四十一研究所 将频谱轨迹处理和自适应门限生成进行一体化设计的方法
WO2022099588A1 (zh) * 2020-11-13 2022-05-19 深圳振科智能科技有限公司 字符输入方法、装置、电子设备及存储介质
CN114422762A (zh) * 2021-12-25 2022-04-29 深圳市幕工坊科技有限公司 投影幕动作控制系统
CN114422762B (zh) * 2021-12-25 2023-10-13 深圳市幕工坊科技有限公司 投影幕动作控制系统

Also Published As

Publication number Publication date
CN104866099B (zh) 2017-12-26

Similar Documents

Publication Publication Date Title
CN104866099A (zh) 基于运动传感器提高智能设备手势识别精度的误差补偿方法
EP3923273B1 (en) Voice recognition method and device, storage medium, and air conditioner
CN101976330B (zh) 手势识别方法和系统
CN104050681B (zh) 一种基于视频图像的道路消失点检测方法
CN104731307B (zh) 一种体感动作识别方法及人机交互装置
KR20160024858A (ko) 지역성 말투를 구분하는 음성 데이터 인식 방법, 장치 및 서버
CN102629329B (zh) 基于自适应sift算法的人员室内定位方法
CN111373336B (zh) 状态感知方法以及相关设备
CN103675758B (zh) 一种双曲调频信号周期斜率和起始频率估计方法
CN103996292A (zh) 一种基于角点匹配的运动车辆跟踪方法
CN107463873B (zh) 一种基于rgbd深度传感器的实时手势分析与评价方法与系统
CN108182418A (zh) 一种基于多维声波特征的键击识别方法
CN105354863A (zh) 基于特征滤波和快速运动检测模板预测的自适应尺度图像序列目标跟踪方法
CN107392123A (zh) 一种基于相参积累消噪的射频指纹特征提取和识别方法
CN115200575A (zh) 一种基于人类活动识别辅助行人航位推算的室内定位方法
CN107346207B (zh) 一种基于隐马尔科夫模型的动态手势切分识别方法
Asad et al. Kinect depth stream pre-processing for hand gesture recognition
CN101782964A (zh) 一种基于加速度传感器的失重特征提取方法
CN102779268B (zh) 基于方向运动历史图及竞争机制的手挥运动方向判定方法
CN102306060B (zh) 移动设备输入方法及系统
CN110163142B (zh) 实时手势识别方法及系统
WO2018014432A1 (zh) 语音应用触发控制方法、装置及终端
CN110309689B (zh) 基于超宽带雷达的Gabor域手势识别检测方法
CN103136376B (zh) 基于copula和Gabor小波的旋转不变图像检索方法
CN104463902B (zh) 一种基于nmi特征的静止目标消除方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20171226