CN104898844B - 基于超声波定位的手势识别与控制装置及识别与控制方法 - Google Patents

基于超声波定位的手势识别与控制装置及识别与控制方法 Download PDF

Info

Publication number
CN104898844B
CN104898844B CN201510315444.9A CN201510315444A CN104898844B CN 104898844 B CN104898844 B CN 104898844B CN 201510315444 A CN201510315444 A CN 201510315444A CN 104898844 B CN104898844 B CN 104898844B
Authority
CN
China
Prior art keywords
signal
gesture
ultrasonic
control
identification
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201510315444.9A
Other languages
English (en)
Other versions
CN104898844A (zh
Inventor
张笑宇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
AAC Optoelectronic Changzhou Co Ltd
Original Assignee
AAC Optoelectronic Changzhou Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by AAC Optoelectronic Changzhou Co Ltd filed Critical AAC Optoelectronic Changzhou Co Ltd
Priority to CN201510315444.9A priority Critical patent/CN104898844B/zh
Publication of CN104898844A publication Critical patent/CN104898844A/zh
Priority to US15/004,975 priority patent/US9811168B2/en
Application granted granted Critical
Publication of CN104898844B publication Critical patent/CN104898844B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/043Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using propagating acoustic waves

Abstract

本发明涉及了一种基于超声波定位的手势识别与控制装置及方法,该装置包括:超声波发射器、超声波接收器、计算模块、手势库、以及手势识别与控制模块,所述计算模块计算超声波接收器接收到的超声波信号的多普勒频移,并转换成相应的手势特征信号,所述手势识别与控制模块将该手势特征信号与手势库中预设的手势特征信号进行对比,从而确定手势并输出相应的控制信号。本发明提供了一种基于超声波定位的手势识别与控制装置及方法,其利用了超声波的高指向性,并将被手反射回来的超声波信号所产生的多普勒频移转换成相应的手势特征信号,之后将该手势特征信号与预设手势特征信号进行对比来确定不同的手势,大大提高了手势识别在不同环境中的应用。

Description

基于超声波定位的手势识别与控制装置及识别与控制方法
【技术领域】
本发明涉及手势识别领域,尤其涉及一种基于超声波定位的手势识别与控制装置及识别与控制方法。
【背景技术】
通常的手势识别装置利用摄像头及图片处理软件识别手势,然而摄像头与图片处理软件的组合对用户的动作感应比较滞后,通常用户动作完成一段时间之后,该组合才能识别,而且该组合对光线要求比较高,如光线不好,会影响到识别效果。
【发明内容】
本发明的目的在于提供一种基于超声波定位的手势识别与控制装置及识别与控制方法,其解决了单独基于视频的手势识别在光学环境恶劣时或单独基于音频的手势识别在声学环境恶劣时,大大降低了手势识别的可信度的技术问题。
为了解决上述技术问题,本发明提供了一种基于超声波定位的手势识别与控制装置,该装置包括:超声波发射器,用于发射超声波信号;超声波接收器,用于接收反射回来的超声波信号;计算模块,其用于计算超声波信号从被超声波发射器发射出去时到被超声波接收器接收到时这段时间内所产生的多普勒频移,并将该多普勒频移转换成相应的手势特征信号;手势库,其内设有预设手势特征信号以及与该预设手势特征信号对应的用于实现特定功能的控制信号;手势识别与控制模块,其将计算模块输出的手势特征信号与手势库中的预设手势特征信号进行匹配,得到相应的控制信号并输出该控制信号。
优选的,该手势识别控制装置还包括一分割模块,该分割模块用于将需要发射的超声波信号按一时间间隔分割成若干帧。
优选的,当超声波接收器接收到某一帧超声波信号时,所述计算模块将会计算该帧超声波信号从被超声波发射器发射出去时到被超声波接收器接收到时这段时间内所产生的多普勒频移,并将该多普勒频移转换成相应的手势特征信号。
优选的,所述手势识别与控制装置还包括一功能执行模块,其用于接收手势识别与控制模块输出的控制信号,并执行与该控制信号所对应的特定功能。
优选的,所述超声波发射器的数量至少两个,每个超声波发射器都发射预设频率的超声波信号。
优选的,所述每个超声波发射器发射的超声波信号频率都不同。
优选的,所述计算模块计算不同超声波发射器发出的超声波信号产生的多普勒频移。
优选的,所述手势识别与控制模块,其将计算模块输出的多个手势特征信号与手势库中的预设手势特征信号进行匹配。
本发明还提供了一种基于超声波定位的手势识别与控制方法,该方法包括如下步骤:S1、发射超声波信号;S2、接收反射回来的超声波信号;S3、计算超声波信号从被发射出去时到被接收到时这段时间内所产生的多普勒频移,并将该多普勒频移转换成相应的手势特征信号;S4、将手势特征信号与预设手势特征信号进行匹配,得到相应的控制信号并输出该控制信号;S5、接收所述控制信号,并执行与该控制信号所对应的特定功能。
本发明的有益效果在于:本发明提供了一种基于超声波定位的手势识别与控制装置及识别与控制方法,其利用了超声波的高指向性,并将被手反射回来的超声波信号所产生的多普勒频移转换成相应的手势特征信号,之后将该手势特征信号与预设手势特征信号进行对比来确定不同的手势,大大提高了手势识别在不同环境中的应用。
【附图说明】
图1是本发明基于超声波定位的手势识别与控制装置的模块结构图;
图2是本发明实施例提供的四个发射超声波和一个接收超声波的位置及手势的位置的空间直角坐标示意图;
图3是本发明基于超声波定位的手势识别与控制方法的流程图。
【具体实施方式】
下面结合附图和实施方式对本发明作进一步详细描述。以下实施例用于说明本发明,但不用来限制本发明的范围。
如图1所示,本发明提供了一种基于超声波定位的手势识别与控制装置1,该装置1包括超声波发射器10、超声波接收器11、计算模块12、手势库13、手势识别与控制模块14。
所述超声波发声器10用于发射超声波信号,发射出去的超声波信号被手反射回来后被所述超声波接收器11接收,所述计算模块12计算超声波信号从被超声波发射器发射出去时到被超声波接收器11接收到时这段时间内所产生的多普勒频移,并将该多普勒频移转换成相应的手势特征信号。所述手势库13内设有预设手势特征信号以及与该预设手势特征信号对应的用于实现特定功能的控制信号,所述手势识别与控制模块14将计算模块12输出的手势特征信号与手势库13中的预设手势特征信号进行匹配,得到相应的控制信号并输出该控制信号。
为了使被超声波接收器11接收到的超声波信号易于计算,该手势识别控制装置1还包括一分割模块15,该分割模块15用于将需要发射的超声波信号按一时间间隔分割成若干帧,这样,当超声波接收器11接收到某一帧超声波信号时,所述计算模块12将会计算该帧超声波信号从被超声波发射器10发射出去时到被超声波接收器11接收到时这段时间内所产生的多普勒频移,并将该多普勒频移转换成相应的手势特征信号。
在本发明优选的实施例中,所述手势识别与控制装置1还包括一功能执行模块16,其用于接收手势识别与控制模块14输出的控制信号,并执行与该控制信号所对应的特定功能,该特定功能包括,例如,通过手势来实现电子设备上缩放、选定、确认、移动、关闭、开启等功能。
超声波发声器10的数量越多,手势的定位就更精确,因此,优选的,所述超声波发射器10的数量至少两个,每个超声波发射器10都发射预设频率的超声波信号。
为了辨别接收到的反射超声波信号是由哪个位置的超声波发射器10发射的,优选的,所述每个超声波发射器10发射的超声波信号频率都不同。所述计算模块12计算不同超声波发射器10发出的超声波信号产生的多普勒频移。所述手势识别与控制模块14将计算模块12输出的多个手势特征信号与手势库13中的预设手势特征信号进行匹配。
图2是本发明实施例提供的四个发射超声波和一个接收超声波的位置及手势的位置的空间直角坐标示意图。结合图1和图2所示,a、b、c和d四点代表四个超声波发射器10的空间位置,e点代表手的空间位置,坐标原点O代表超声波接收器11的空间位置,当e点的手在该空间直角坐标系里移动时,由a、b、c和d四点发出的超声波信号将会被e点的手反射,此时,O点接收到反射回来的超声波信号后由计算模块算出e点手相对于a、b、c和d四点的多普勒频移,从而确定手的手势。
再结合图1和3所示,本发明还提供了一种基于超声波定位的手势识别与控制方法,该方法包括如下步骤:
S1、超声波发射器10发射超声波信号;
S2、超声波接收器11接收反射回来的超声波信号;
S3、计算模块12计算超声波信号从被发射出去时到被接收到时这段时间内所产生的多普勒频移,并将该多普勒频移转换成相应的手势特征信号;
S4、手势识别与控制模块14将手势特征信号与手势库13中预设手势特征信号进行匹配,得到相应的控制信号并输出该控制信号;
S5、功能执行模块16接收所述控制信号,并执行与该控制信号所对应的特定功能。
本发明提供了一种基于超声波定位的手势识别与控制装置1,其利用了超声波的高指向性,并将被手反射回来的超声波信号所产生的多普勒频移转换成相应的手势特征信号,之后将该手势特征信号与预设手势特征信号进行对比来确定不同的手势,大大提高了手势识别在不同环境中的应用。
以上所述的仅是本发明的较佳实施方式,在此应当指出,对于本领域的普通技术人员来说,在不脱离本发明创造构思的前提下,还可以做出改进,但这些均属于本发明的保护范围。

Claims (7)

1.一种基于超声波定位的手势识别与控制装置,其特征在于,该装置包括:
超声波发射器,用于发射超声波信号;
超声波接收器,用于接收反射回来的超声波信号;
分割模块,其用于将超声波发射器发射的超声波信号按一时间间隔分割成若干帧;
计算模块,其用于计算超声波信号从被超声波发射器发射出去时到被超声波接收器接收到时这段时间内所产生的多普勒频移,并将该多普勒频移转换成相应的手势特征信号;
手势库,其内设有预设手势特征信号以及与该预设手势特征信号对应的用于实现特定功能的控制信号;
手势识别与控制模块,其将计算模块输出的手势特征信号与手势库中的预设手势特征信号进行匹配,得到相应的控制信号并输出该控制信号。
2.如权利要求1所述的基于超声波定位的手势识别与控制装置,其特征在于,所述手势识别与控制装置还包括一功能执行模块,其用于接收手势识别与控制模块输出的控制信号,并执行与该控制信号所对应的特定功能。
3.如权利要求1所述的基于超声波定位的手势识别与控制装置,其特征在于,所述超声波发射器的数量至少两个,每个超声波发射器都发射预设频率的超声波信号。
4.如权利要求3所述的基于超声波定位的手势识别与控制装置,其特征在于,所述每个超声波发射器发射的超声波信号频率都不同。
5.如权利要求3或4所述的基于超声波定位的手势识别与控制装置,其特征在于,所述计算模块计算不同超声波发射器发出的超声波信号产生的多普勒频移。
6.如权利要求5所述的基于超声波定位的手势识别与控制装置,其特征在于,所述手势识别与控制模块,其将计算模块输出的多个手势特征信号与手势库中的预设手势特征信号进行匹配。
7.一种基于超声波定位的手势识别与控制方法,其特征在于,该方法包括如下步骤:
S1、发射超声波信号,将发射的超声波信号按一时间间隔分割成若干帧;
S2、接收反射回来的超声波信号;
S3、计算超声波信号从被发射出去时到被接收到时这段时间内所产生的多普勒频移,并将该多普勒频移转换成相应的手势特征信号;
S4、将手势特征信号与预设手势特征信号进行匹配,得到相应的控制信号并输出该控制信号;
S5、接收所述控制信号,并执行与该控制信号所对应的特定功能。
CN201510315444.9A 2015-01-23 2015-06-10 基于超声波定位的手势识别与控制装置及识别与控制方法 Expired - Fee Related CN104898844B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201510315444.9A CN104898844B (zh) 2015-01-23 2015-06-10 基于超声波定位的手势识别与控制装置及识别与控制方法
US15/004,975 US9811168B2 (en) 2015-01-23 2016-01-24 Apparatus for performing gesture recognition and control based on ultrasonic positioning

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201520050575 2015-01-23
CN2015200505754 2015-01-23
CN201510315444.9A CN104898844B (zh) 2015-01-23 2015-06-10 基于超声波定位的手势识别与控制装置及识别与控制方法

Publications (2)

Publication Number Publication Date
CN104898844A CN104898844A (zh) 2015-09-09
CN104898844B true CN104898844B (zh) 2019-07-09

Family

ID=54031548

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510315444.9A Expired - Fee Related CN104898844B (zh) 2015-01-23 2015-06-10 基于超声波定位的手势识别与控制装置及识别与控制方法

Country Status (2)

Country Link
US (1) US9811168B2 (zh)
CN (1) CN104898844B (zh)

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104820472A (zh) * 2015-05-13 2015-08-05 瑞声声学科技(深圳)有限公司 移动终端
CN105607758A (zh) * 2015-09-22 2016-05-25 天脉聚源(北京)传媒科技有限公司 一种遥控视频播放的方法及装置
CN105302303A (zh) * 2015-10-15 2016-02-03 广东欧珀移动通信有限公司 一种游戏控制方法及装置和移动终端
CN106610716B (zh) 2015-10-21 2019-08-27 华为技术有限公司 一种手势识别方法和装置
CN105786185B (zh) * 2016-03-12 2019-01-18 浙江大学 基于连续波微多普勒雷达的非接触式手势识别系统与方法
CN105607745A (zh) * 2016-03-16 2016-05-25 京东方科技集团股份有限公司 显示控制电路、显示控制方法和显示装置
CN105904945A (zh) * 2016-04-18 2016-08-31 皇田工业股份有限公司 手势控制的车用卷帘系统
CN106203380B (zh) * 2016-07-20 2019-11-29 中国科学院计算技术研究所 超声波手势识别方法及系统
CN106446801B (zh) * 2016-09-06 2020-01-07 清华大学 基于超声主动探测的微手势识别方法及系统
CN107066086A (zh) * 2017-01-17 2017-08-18 上海与德信息技术有限公司 一种基于超声波的手势识别方法及装置
CN107330462B (zh) * 2017-06-30 2020-08-14 大连理工大学 基于时频分析的手势识别方法及其装置
CN107894830B (zh) * 2017-10-12 2019-07-26 深圳大学 一种基于声学感知的交互输入方法、系统及介质
CN107943300A (zh) * 2017-12-07 2018-04-20 深圳大学 一种基于超声波的手势识别方法及系统
CN107961035A (zh) * 2017-12-29 2018-04-27 深圳开立生物医疗科技股份有限公司 一种超声探头以及控制超声诊断仪的方法和装置
CN108361780B (zh) * 2018-01-25 2020-09-04 宁波隔空智能科技有限公司 基于微波雷达手势识别技术的抽油烟机控制器及控制方法
CN108343769A (zh) * 2018-01-25 2018-07-31 隔空(上海)智能科技有限公司 一种基于微波雷达手势识别技术的水龙头及其控制方法
CN108873715A (zh) * 2018-07-04 2018-11-23 深圳众厉电力科技有限公司 基于手势识别的智能家居控制系统
CN109274812B (zh) * 2018-08-13 2021-02-02 Oppo(重庆)智能科技有限公司 超声波手势控制电子装置的方法及相关产品
WO2020102943A1 (zh) * 2018-11-19 2020-05-28 深圳市欢太科技有限公司 手势识别模型的生成方法、装置、存储介质及电子设备
CN109597312B (zh) 2018-11-26 2022-03-01 北京小米移动软件有限公司 音箱控制方法及装置
CN109905183B (zh) * 2019-02-19 2021-08-10 杨世惟 一种基于超声波传输的水下通信装置及水下通信方法
CN110796767A (zh) * 2019-10-31 2020-02-14 的卢技术有限公司 一种基于手势识别实现无按键汽车钥匙控制方法和系统
CN113411139B (zh) * 2021-07-23 2022-11-22 北京小米移动软件有限公司 一种控制方法、装置及可读存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102467905A (zh) * 2010-10-28 2012-05-23 鸿富锦精密工业(深圳)有限公司 手势识别装置及方法
CN103344959A (zh) * 2013-07-22 2013-10-09 乾行讯科(北京)科技有限公司 一种超声定位系统和具有定位功能的电子装置
CN103793059A (zh) * 2014-02-14 2014-05-14 浙江大学 一种基于时域多普勒手势恢复识别方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7519537B2 (en) * 2005-07-19 2009-04-14 Outland Research, Llc Method and apparatus for a verbo-manual gesture interface
US9285840B2 (en) * 2010-08-19 2016-03-15 Michael S. Stamer Detachable sensory-interface device for a wireless personal communication device and method
US9033516B2 (en) * 2011-09-27 2015-05-19 Qualcomm Incorporated Determining motion of projection device
KR20130047890A (ko) * 2011-11-01 2013-05-09 삼성전기주식회사 원격 조정 장치 및 원격 조정 장치의 제스처 인식 방법
CN103838376B (zh) * 2014-03-03 2016-09-28 深圳超多维光电子有限公司 立体交互方法和立体交互系统
KR101575650B1 (ko) * 2014-03-11 2015-12-08 현대자동차주식회사 단말기, 그를 가지는 차량 및 그 제어 방법

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102467905A (zh) * 2010-10-28 2012-05-23 鸿富锦精密工业(深圳)有限公司 手势识别装置及方法
CN103344959A (zh) * 2013-07-22 2013-10-09 乾行讯科(北京)科技有限公司 一种超声定位系统和具有定位功能的电子装置
CN103793059A (zh) * 2014-02-14 2014-05-14 浙江大学 一种基于时域多普勒手势恢复识别方法

Also Published As

Publication number Publication date
US20160364006A1 (en) 2016-12-15
US9811168B2 (en) 2017-11-07
CN104898844A (zh) 2015-09-09

Similar Documents

Publication Publication Date Title
CN104898844B (zh) 基于超声波定位的手势识别与控制装置及识别与控制方法
US10262230B1 (en) Object detection and identification
US9779734B2 (en) Speech recognition system and method for recognizing a command to control a target
Khalaf et al. Survey On Recognition Hand Gesture By Using Data Mining Algorithms
CN110502109B (zh) 信息处理方法、装置、电子设备及存储介质
CN107003393A (zh) 用于执行超声存在检测的方法和设备
CN106919295B (zh) 人机交互装置和显示装置
WO2021017950A1 (zh) 超声波处理方法、装置、电子设备及计算机可读介质
CN104459703B (zh) 一种声纳测距方法和移动设备
CN105100854B (zh) 用于控制光标的方法、遥控器以及智能电视
WO2021017927A1 (zh) 设备控制方法、装置、电子设备及存储介质
US11740350B2 (en) Ultrasonic sensor
KR20220117282A (ko) 오디오 디바이스 자동-로케이션
US20230333205A1 (en) Sound source positioning method and apparatus
US20230342953A1 (en) Information processing apparatus, control method, and program
US9992593B2 (en) Acoustic characterization based on sensor profiling
US20170307436A1 (en) Method and apparatus for obtaining vibration information and user equipment
US20230236318A1 (en) PERFORMANCE OF A TIME OF FLIGHT (ToF) LASER RANGE FINDING SYSTEM USING ACOUSTIC-BASED DIRECTION OF ARRIVAL (DoA)
CN111246339B (zh) 一种调节拾音方向的方法、系统、存储介质及智能机器人
US11375275B2 (en) Method and system for using lip sequences to control operations of a device
CN114943242A (zh) 事件检测方法及装置、电子设备、存储介质
CN109871122A (zh) 一种智能电子设备的水下操控系统及其操控方法
WO2019047841A1 (zh) 一种解决3d视觉设备之间相互干扰的方法及装置
US11841455B1 (en) Calibrating radar systems for movement detection
US20230035360A1 (en) Mapping networked devices

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20190709

Termination date: 20210610

CF01 Termination of patent right due to non-payment of annual fee