CN108519812A - 一种基于卷积神经网络的三维微多普勒手势识别方法 - Google Patents
一种基于卷积神经网络的三维微多普勒手势识别方法 Download PDFInfo
- Publication number
- CN108519812A CN108519812A CN201810232707.3A CN201810232707A CN108519812A CN 108519812 A CN108519812 A CN 108519812A CN 201810232707 A CN201810232707 A CN 201810232707A CN 108519812 A CN108519812 A CN 108519812A
- Authority
- CN
- China
- Prior art keywords
- time
- frequency
- gesture
- convolutional neural
- neural networks
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
- G06F18/2411—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on the proximity to a decision surface, e.g. support vector machines
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/56—Extraction of image or video features relating to colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Bioinformatics & Computational Biology (AREA)
- Artificial Intelligence (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Human Computer Interaction (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Psychiatry (AREA)
- Social Psychology (AREA)
- Image Analysis (AREA)
Abstract
本发明公开了一种基于卷积神经网络的三维微多普勒手势识别方法,涉及人机交互、无线感知和图像处理领域,具体涉及到使用卷积神经网络对三通道雷达架构探测到的三维微多普勒手势时频图识别方法。该方法首先提出能充分采集手势速度信息的三通道摆放系统架构;使用能量窗统计技术能连续提取有效的手势时域信号;使用时频图合成方式,使得三通道时频图信息可以同时融合处理;设计出经过裁剪并加入SVM层的卷积神经网络,能充分提取图像信息,识别准确率高。
Description
技术领域
本发明涉及人机交互、无线感知和图像处理领域,具体涉及到使用卷积神经网络对三通道雷达架构探测到的三维微多普勒手势时频图识别方法。
背景技术
手势作为最传统的人机交互方式得到了巨大的发展,特别是当各种智能小型化电子设备已经越来越多的出现在人们生活中,电子设备的智能人机交互成为了大家研究的重点。目前在人机交互领域广泛应用的是基于视觉和穿戴式传感器的手势识别技术,目前基于视觉的手势识别技术已经应用于车载系统的视频手势控制和手语翻译识别,而基于穿戴式传感器的手势识别技术已应用于体感游戏中。基于视觉和穿戴传感器的手势识别具有精度高和手势种类多的有点,但是在光线昏暗下无法使用,而且在用户上穿戴东西降低了体验性,并且它们都具有较大的体积。
针对视觉手势识别光线要求高和穿戴传感器体验性不高缺点,使用无线感知技术对手势进行识别成为了研究的一个方向。国外研究人员利用常见的WiFi信号,实现了对房间内简单手势信号的识别;而谷歌针对微形的智能手表等移动电子设备的操作控制,利用高频段雷达开发了手势识别系统,该系统能探测手指的位置和速度信息实现了对精细手势的识别,然而该系统对硬件要求高,成本巨大。清华大学针对一维的雷达微多普勒时频图使用支持向量机识别,然而手势的速度信息在三维上都有体现,这导致他的手势速度信息提取不够充分手势种类较少。
发明内容
本发明提供一种适用于利用雷达三维微多普勒信息进行手势识别的方法,本发明首先提出了三通道雷达摆放架构,通过能量窗统计技术提取出手势信号,使用卷积神经网络对三通道合成的时频图识别,具有手势种类多、手势限制少和识别率高的优点。
本发明技术方案如下:
一种基于卷积神经网络的三维微多普勒手势识别方法,包括以下步骤:
步骤1:搭建三通道雷达摆放架构
将三个相互独立的自发自收雷达,分别在x、y和z上方向上按照固定角度摆放,作为手势信号获取装置;
步骤2:能量窗统计技术提取有效手势信号区域
以W为窗口大小W的取值范围为大于等于15ms小于等于25ms,首先分别得到三个雷达在空环境下的信号能量值为Ex、Ey和Ez,之后以相同的窗口大小统计三个雷达的信号能量值,当某个雷达的窗口内信号能量值大于空环境该雷达的信号能量值一定阈值时,认定该窗口内存在手势信号,该阈值根据步骤1中三个雷达的实际情况确定;如果存在手势的窗口后连续Q个窗口都不存在手势信号则认为该手势已经结束,其中Q大于等于43小于等于62,将第一个出现手势的窗口和最后一个出现手势的窗口的这段时间内三个雷达获取的信号时域区域截取出来作为有效手势信号区域;
步骤3:时频图合成
将步骤2中提取的三个雷达时域手势信号通过短时傅里叶变换得到三张频率随时间分布的时频图,将代表时频图的三个时频图矩阵按行组合,得到列数不变行数增加的合成时频图矩阵;对合成的时频图矩阵使用伪彩色法将灰度时频图转换成为具有RGB的彩色时频图;
步骤4:设计卷积神经网络模型
将已知的VGG16卷积神经网络的conv1到fc2层作为步骤3得到时频图像的图像特征提取层,合成时频图的特征全部体现在fc2层的4096个特征向量中;之后从4096个特征向量中使用差值法裁剪出1000个最能代表不同手势图像差别的特征向量,再在裁剪出1000个特征的fc2层后接入一个SVM层,由SVM层给出最终识别结果;
步骤5:训练卷积神经网络模型
首先由多人产生丰富的数据集,将尺寸不一的具有RGB的彩色时频图归一化到指定的大小;之后将不同类别的手势输入步骤4建立的VGG16卷积神经网络,每一张时频图可在fc2层得到4096维特征向量;然后根据所有类别综合得到的特征向量使用差值法,确定M个最能体现类别差距的特征向量;最后由这M个特征向量作为SVM层的输入,采用序列最小最优算法可以训练出SVM模型,其中M的取值为大于等于900小于等于1200;
步骤6:使用卷积神经网络模型识别
采用步骤1~步骤3相同的方法获取指定大小的具有RGB的彩色时频图,采用步骤4训练出的SVM模型对得到的具有RGB的彩色时频图进行识别,输出识别结果。
进一步的,所述步骤2中W的取值为20ms,Q的取值为50,步骤4中M取值为1000。
进一步的,所述步骤3中使用伪彩色方法将A转换为彩色图像B,其具体使用的方法为:
B(m,ω,0)=0.3*A(m,ω)
B(m,ω,1)=1*A(m,ω)
B(m,ω,2)=0.4*A(m,ω)
其中B(m,ω,0)、B(m,ω,1)和B(m,ω,2)分别为彩色图像的R、G、B通道,m表示行,ω表示列,A(m,ω)表示时频矩阵。
进一步的,所述步骤4中采用差值发选择出最能代表不同手势图像差别的M个特征向量,具体方法为:
先统计每种类手势的在第L维特征向量的均值:
其中g(i)代表第i张图片在第L维的特征值,N表示共有N张图片;
然后将各种手势在同样的L维处的差值D(L)进行计算:
其中I和J表示手势种类的标号,m(I,L)、m(J,L)表示手势I、J在第L维特征向量的均值,从4096个特征向量的差值中选择前M个差值最大的特征向量。
本发明的有益效果是:
本发明提出了一种基于卷积神经网络的三维微多普勒手势识别方法,该方法首先提出能充分采集手势速度信息的三通道摆放系统架构;使用能量窗统计技术能连续提取有效的手势时域信号;使用时频图合成方式,使得三通道时频图信息可以同时融合处理;设计出经过裁剪并加入SVM层的卷积神经网络,能充分提取图像信息,识别准确率高。
附图说明
图1为基于卷积神经网络的三维微多普勒手势识别方法流程图。
图2为三通道雷达摆放架构图。
图3为手势运动定义图。
图4为手势的时频图。
具体实施方式
下面结合附图介绍本发明体实施方式。
本发明的流程图如图1所示,其实现的具体步骤为:
步骤1:搭建三通道雷达摆放架构
如图2所示将三个相互独立的自发自收雷达,分别放置在1、2和3三个平面的黑色方块标记的位置,雷达所处位置的平面2、3与平面1的成固定120度的角度。
步骤2:能量窗统计技术提取有效手势信号区域
首先在空环境下以20ms为能量窗大小,三个雷达分别连续采集100个窗的时域信号,统计求100个窗的平均能量大小为Ex、Ey和Ez,之后以同样的窗口大小统计三个通道的能量值EEx、EEy和EEz,当任何一个雷达通道的能量窗值超过已知的空环境能量值ET时,便认为该能量窗内存在手势信号并保存该窗的位置。如果在某个存在手势的能量窗后,连续50个能量窗都不存在手势信号则认为该手势已经结束,将第一个出现能量窗和最后一个出现能量窗的时域区域截取出来作为有效手势信号区域x(n)、y(n)和z(n)。
步骤3:时频图合成
首先将步骤2中提取的三个通道时域手势信号通过短时傅里叶变换:
A(m,ω)是短时傅里叶变换后的时频图,其中Y(n)是时域手势信号,H是汉明窗函数,m为窗函数滑动的位置。此时A(m,ω)为一个灰度图像,为了显著的展现时频图的能量和形状特征使用伪彩色方法将A转换为彩色图像B,其具体使用的方法为:
B(m,ω,0)=0.3*A(m,ω)
B(m,ω,1)=1*A(m,ω)
B(m,ω,2)=0.4*A(m,ω)
其中B(m,ω,0)、B(m,ω,1)和B(m,ω,2)分别为彩色图像的R、G、B通道。之后将三张频率随时间分布的时频图,将代表时频图的三个时频图矩阵按行组合,得到列数没变行数增加的合成时频图矩阵。具体的各种手势合成时频图如图4所示。
步骤4:设计卷积神经网络模型
卷积神经网络模型是在已公开的VGG16的基础上改进而来,首先将已知的VGG16卷积神经网络的conv1到fc2层作为时频图像的图像特征提取层,合成时频图的特征全部体现在fc2层的4096个特征向量中。由于手势数据量并不是非常巨大,为了防止过拟合将从4096个特征向量中裁剪出1000个最能代表不同手势图像差别的特征向量。其具体差值法为,先统计每种类手势的在第L为特征向量的均值:
其中g(i)代表第i张图片在第L维的特征值。然后将各种手势在同样的L维处的差值D(L)进行统计:
其中I和J表示手势种类的标号,从4096个特征向量的差值中选择出前1000个特征向量,最后将这1000个特征向量与SVM层的输入连接形成如表1所示的卷积神经网络结构:
表1卷积神经网络结构
步骤5:训练卷积神经网络模型
首先在图3所定义的手势运动标准下,5个人分别对每种手势重复做100次,得到每种手势500个,6种手势共3000张时频图。然后将尺寸不一的时频图重新调整到224*224大小。之后时频图将输入已经知道的VGG16卷积神经网络,提取出它的fc2层的4096维特征向量。然后根据所有类别综合得到的特征向量使用差值法,确定1000个最能体现类别差距的特征向量。最后由这1000个特征向量作为SVM层的输入,借用公开的LIBSVM工具箱训练SVM层的参数,最终得到由裁剪的VGG16和SVM层结合的卷积神经网络。
步骤6:使用卷积神经网络模型识别
在步骤5的基础上,对于重新做手势产生的时频图只需将图像尺寸重新生成大小,然后输入到训练好的卷积神经网络模型,最后由模型计算输出最终的所属类别。通过重新采集的数据测试,使用卷积神经网络模型的综合识别准确率达到96%,具有高的应用性。
Claims (4)
1.一种基于卷积神经网络的三维微多普勒手势识别方法,包括以下步骤:
步骤1:搭建三通道雷达摆放架构
将三个相互独立的自发自收雷达,分别在x、y和z上方向上按照固定角度摆放,作为手势信号获取装置;
步骤2:能量窗统计技术提取有效手势信号区域
以W为窗口大小W的取值范围为大于等于15ms小于等于25ms,首先分别得到三个雷达在空环境下的信号能量值为Ex、Ey和Ez,之后以相同的窗口大小统计三个雷达的信号能量值,当某个雷达的窗口内信号能量值大于空环境该雷达的信号能量值一定阈值时,认定该窗口内存在手势信号,该阈值根据步骤1中三个雷达的实际情况确定;如果存在手势的窗口后连续Q个窗口都不存在手势信号则认为该手势已经结束,其中Q大于等于43小于等于62,将第一个出现手势的窗口和最后一个出现手势的窗口的这段时间内三个雷达获取的信号时域区域截取出来作为有效手势信号区域;
步骤3:时频图合成
将步骤2中提取的三个雷达时域手势信号通过短时傅里叶变换得到三张频率随时间分布的时频图,将代表时频图的三个时频图矩阵按行组合,得到列数不变行数增加的合成时频图矩阵;对合成的时频图矩阵使用伪彩色法将灰度时频图转换成为具有RGB的彩色时频图;
步骤4:设计卷积神经网络模型
将已知的VGG16卷积神经网络的conv1到fc2层作为步骤3得到时频图像的图像特征提取层,合成时频图的特征全部体现在fc2层的4096个特征向量中;之后从4096个特征向量中使用差值法裁剪出1000个最能代表不同手势图像差别的特征向量,再在裁剪出1000个特征的fc2层后接入一个SVM层,由SVM层给出最终识别结果;
步骤5:训练卷积神经网络模型
首先由多人产生丰富的数据集,将尺寸不一的具有RGB的彩色时频图归一化到指定的大小;之后将不同类别的手势输入步骤4建立的VGG16卷积神经网络,每一张时频图可在fc2层得到4096维特征向量;然后根据所有类别综合得到的特征向量使用差值法,确定M个最能体现类别差距的特征向量;最后由这M个特征向量作为SVM层的输入,采用序列最小最优算法可以训练出SVM模型,其中M的取值为大于等于900小于等于1200;
步骤6:使用卷积神经网络模型识别
采用步骤1~步骤3相同的方法获取指定大小的具有RGB的彩色时频图,采用步骤4训练出的SVM模型对得到的具有RGB的彩色时频图进行识别,输出识别结果。
2.如权利要求1所述的一种基于卷积神经网络的三维微多普勒手势识别方法,其特征在于所述步骤2中W的取值为20ms,Q的取值为50,步骤4中M取值为1000。
3.如权利要求1所述的一种基于卷积神经网络的三维微多普勒手势识别方法,其特征在于所述步骤3中使用伪彩色方法将A转换为彩色图像B,其具体使用的方法为:
B(m,ω,0)=0.3*A(m,ω)
B(m,ω,1)=1*A(m,ω)
B(m,ω,2)=0.4*A(m,ω)
其中B(m,ω,0)、B(m,ω,1)和B(m,ω,2)分别为彩色图像的R、G、B通道,m表示行,ω表示列,A(m,ω)表示时频矩阵。
4.如权利要求1或3所述的一种基于卷积神经网络的三维微多普勒手势识别方法,其特征在于所述步骤4中采用差值发选择出最能代表不同手势图像差别的M个特征向量,具体方法为:
先统计每种类手势的在第L维特征向量的均值:
其中g(i)代表第i张图片在第L维的特征值,N表示共有N张图片;
然后将各种手势在同样的L维处的差值D(L)进行计算:
其中I和J表示手势种类的标号,m(I,L)、m(J,L)表示手势I、J在第L维特征向量的均值,从4096个特征向量的差值中选择前M个差值最大的特征向量。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810232707.3A CN108519812B (zh) | 2018-03-21 | 2018-03-21 | 一种基于卷积神经网络的三维微多普勒手势识别方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810232707.3A CN108519812B (zh) | 2018-03-21 | 2018-03-21 | 一种基于卷积神经网络的三维微多普勒手势识别方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108519812A true CN108519812A (zh) | 2018-09-11 |
CN108519812B CN108519812B (zh) | 2020-09-25 |
Family
ID=63433897
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810232707.3A Active CN108519812B (zh) | 2018-03-21 | 2018-03-21 | 一种基于卷积神经网络的三维微多普勒手势识别方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108519812B (zh) |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109444845A (zh) * | 2018-09-28 | 2019-03-08 | 中国矿业大学 | 基于固态激光雷达成像对煤岩界面进行识别的装置及方法 |
CN110286774A (zh) * | 2019-07-03 | 2019-09-27 | 中国科学技术大学 | 一种基于手腕运动传感器的手语识别方法 |
CN110988863A (zh) * | 2019-12-20 | 2020-04-10 | 北京工业大学 | 一种新的毫米波雷达手势信号处理方法 |
CN111813222A (zh) * | 2020-07-09 | 2020-10-23 | 电子科技大学 | 一种基于太赫兹雷达的精细动态手势识别方法 |
CN111901267A (zh) * | 2020-07-27 | 2020-11-06 | 重庆大学 | 基于短时傅里叶变换时频分析的多天线盲调制识别方法 |
CN112598614A (zh) * | 2019-09-17 | 2021-04-02 | 南京大学 | 一种基于深度神经网络的司法图像质量度量方法 |
CN112966662A (zh) * | 2021-03-31 | 2021-06-15 | 安徽大学 | 一种近程电容式动态手势识别系统及方法 |
CN113030936A (zh) * | 2021-03-24 | 2021-06-25 | 中国人民解放军93114部队 | 一种基于微多普勒特征的手势识别方法及系统 |
CN113208566A (zh) * | 2021-05-17 | 2021-08-06 | 深圳大学 | 一种数据处理方法、装置、电子设备及存储介质 |
CN113296087A (zh) * | 2021-05-25 | 2021-08-24 | 沈阳航空航天大学 | 一种基于数据增强的调频连续波雷达人体动作识别方法 |
CN115006840A (zh) * | 2022-06-20 | 2022-09-06 | 深圳十米网络科技有限公司 | 体感联网游戏方法、设备及计算机可读存储介质 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103502911A (zh) * | 2011-05-06 | 2014-01-08 | 诺基亚公司 | 使用多个传感器的手势识别 |
CN103793059A (zh) * | 2014-02-14 | 2014-05-14 | 浙江大学 | 一种基于时域多普勒手势恢复识别方法 |
CN105786185A (zh) * | 2016-03-12 | 2016-07-20 | 浙江大学 | 基于连续波微多普勒雷达的非接触式手势识别系统与方法 |
US20160349845A1 (en) * | 2015-05-28 | 2016-12-01 | Google Inc. | Gesture Detection Haptics and Virtual Tools |
CN106295684A (zh) * | 2016-08-02 | 2017-01-04 | 清华大学 | 一种基于微多普勒特征的动态连续/非连续手势识别方法 |
CN106664538A (zh) * | 2014-06-05 | 2017-05-10 | 奥卡多创新有限公司 | 通信系统与方法 |
CN106855941A (zh) * | 2016-12-09 | 2017-06-16 | 清华大学 | 基于雷达微多普勒信号稀疏优化的手势识别方法及系统 |
US20170192522A1 (en) * | 2014-06-03 | 2017-07-06 | Google Inc. | Radar-Based Gesture-Recognition through a Wearable Device |
-
2018
- 2018-03-21 CN CN201810232707.3A patent/CN108519812B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103502911A (zh) * | 2011-05-06 | 2014-01-08 | 诺基亚公司 | 使用多个传感器的手势识别 |
CN103793059A (zh) * | 2014-02-14 | 2014-05-14 | 浙江大学 | 一种基于时域多普勒手势恢复识别方法 |
US20170192522A1 (en) * | 2014-06-03 | 2017-07-06 | Google Inc. | Radar-Based Gesture-Recognition through a Wearable Device |
CN106664538A (zh) * | 2014-06-05 | 2017-05-10 | 奥卡多创新有限公司 | 通信系统与方法 |
US20160349845A1 (en) * | 2015-05-28 | 2016-12-01 | Google Inc. | Gesture Detection Haptics and Virtual Tools |
CN105786185A (zh) * | 2016-03-12 | 2016-07-20 | 浙江大学 | 基于连续波微多普勒雷达的非接触式手势识别系统与方法 |
CN106295684A (zh) * | 2016-08-02 | 2017-01-04 | 清华大学 | 一种基于微多普勒特征的动态连续/非连续手势识别方法 |
CN106855941A (zh) * | 2016-12-09 | 2017-06-16 | 清华大学 | 基于雷达微多普勒信号稀疏优化的手势识别方法及系统 |
Cited By (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109444845A (zh) * | 2018-09-28 | 2019-03-08 | 中国矿业大学 | 基于固态激光雷达成像对煤岩界面进行识别的装置及方法 |
CN109444845B (zh) * | 2018-09-28 | 2023-05-23 | 中国矿业大学 | 基于固态激光雷达成像对煤岩界面进行识别的装置及方法 |
CN110286774B (zh) * | 2019-07-03 | 2021-08-13 | 中国科学技术大学 | 一种基于手腕运动传感器的手语识别方法 |
CN110286774A (zh) * | 2019-07-03 | 2019-09-27 | 中国科学技术大学 | 一种基于手腕运动传感器的手语识别方法 |
CN112598614A (zh) * | 2019-09-17 | 2021-04-02 | 南京大学 | 一种基于深度神经网络的司法图像质量度量方法 |
CN110988863A (zh) * | 2019-12-20 | 2020-04-10 | 北京工业大学 | 一种新的毫米波雷达手势信号处理方法 |
CN111813222A (zh) * | 2020-07-09 | 2020-10-23 | 电子科技大学 | 一种基于太赫兹雷达的精细动态手势识别方法 |
CN111813222B (zh) * | 2020-07-09 | 2022-03-29 | 电子科技大学 | 一种基于太赫兹雷达的精细动态手势识别方法 |
CN111901267A (zh) * | 2020-07-27 | 2020-11-06 | 重庆大学 | 基于短时傅里叶变换时频分析的多天线盲调制识别方法 |
CN111901267B (zh) * | 2020-07-27 | 2021-07-02 | 重庆大学 | 基于短时傅里叶变换时频分析的多天线盲调制识别方法 |
CN113030936A (zh) * | 2021-03-24 | 2021-06-25 | 中国人民解放军93114部队 | 一种基于微多普勒特征的手势识别方法及系统 |
CN113030936B (zh) * | 2021-03-24 | 2023-05-23 | 中国人民解放军93114部队 | 一种基于微多普勒特征的手势识别方法及系统 |
CN112966662A (zh) * | 2021-03-31 | 2021-06-15 | 安徽大学 | 一种近程电容式动态手势识别系统及方法 |
CN113208566A (zh) * | 2021-05-17 | 2021-08-06 | 深圳大学 | 一种数据处理方法、装置、电子设备及存储介质 |
CN113208566B (zh) * | 2021-05-17 | 2023-06-23 | 深圳大学 | 一种数据处理方法、装置、电子设备及存储介质 |
CN113296087A (zh) * | 2021-05-25 | 2021-08-24 | 沈阳航空航天大学 | 一种基于数据增强的调频连续波雷达人体动作识别方法 |
CN113296087B (zh) * | 2021-05-25 | 2023-09-22 | 沈阳航空航天大学 | 一种基于数据增强的调频连续波雷达人体动作识别方法 |
CN115006840A (zh) * | 2022-06-20 | 2022-09-06 | 深圳十米网络科技有限公司 | 体感联网游戏方法、设备及计算机可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN108519812B (zh) | 2020-09-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108519812A (zh) | 一种基于卷积神经网络的三维微多普勒手势识别方法 | |
CN106598226B (zh) | 一种基于双目视觉和深度学习的无人机人机交互方法 | |
CN105718878A (zh) | 基于级联卷积神经网络的第一视角空中手写和空中交互方法 | |
CN103246891B (zh) | 一种基于Kinect的中国手语识别方法 | |
CN103020992B (zh) | 一种基于运动颜色关联的视频图像显著性检测方法 | |
CN107688391A (zh) | 一种基于单目视觉的手势识别方法和装置 | |
Li et al. | Sign language recognition based on computer vision | |
CN103605986A (zh) | 一种基于局部特征的人体动作识别方法 | |
CN103020614B (zh) | 基于时空兴趣点检测的人体运动识别方法 | |
CN101661556A (zh) | 基于视觉的静态手势识别方法 | |
CN107392131A (zh) | 一种基于人体骨骼节点距离的动作识别方法 | |
CN103942535B (zh) | 多目标跟踪方法及装置 | |
Li et al. | Dynamic Hand Gesture Recognition Using Multi-direction 3D Convolutional Neural Networks. | |
CN101551853A (zh) | 复杂静态彩色背景下的人耳检测方法 | |
CN106960181A (zh) | 一种基于rgbd数据的行人属性识别方法 | |
CN107067031A (zh) | 一种基于Wi‑Fi信号的书法姿态自动识别方法 | |
Zamani et al. | Saliency based alphabet and numbers of American sign language recognition using linear feature extraction | |
CN105069745A (zh) | 基于普通图像传感器及增强现实技术的带表情变脸系统及方法 | |
CN109492575A (zh) | 一种基于YOLOv3的扶梯安全监测方法 | |
CN110147163A (zh) | 面向移动设备的多模型融合驱动的眼动跟踪方法和系统 | |
CN105426882A (zh) | 一种人脸图像中快速定位人眼的方法 | |
CN103070682A (zh) | 基于眼电信号的眼动方向提取方法及提取装置 | |
Khan et al. | A vision based approach for Pakistan sign language alphabets recognition | |
CN109064389A (zh) | 一种手绘线条画生成现实感图像的深度学习方法 | |
Juan | Gesture recognition and information recommendation based on machine learning and virtual reality in distance education |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |