CN113900507A - 手势识别方法和装置 - Google Patents
手势识别方法和装置 Download PDFInfo
- Publication number
- CN113900507A CN113900507A CN202010642990.4A CN202010642990A CN113900507A CN 113900507 A CN113900507 A CN 113900507A CN 202010642990 A CN202010642990 A CN 202010642990A CN 113900507 A CN113900507 A CN 113900507A
- Authority
- CN
- China
- Prior art keywords
- antenna
- target time
- echo signal
- gesture
- time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 112
- 238000004891 communication Methods 0.000 claims description 38
- 238000004590 computer program Methods 0.000 claims description 9
- 230000005540 biological transmission Effects 0.000 claims description 4
- 230000009286 beneficial effect Effects 0.000 abstract description 6
- 230000033001 locomotion Effects 0.000 description 114
- 238000010586 diagram Methods 0.000 description 47
- 230000006870 function Effects 0.000 description 35
- 230000008569 process Effects 0.000 description 24
- 238000012545 processing Methods 0.000 description 13
- 230000003247 decreasing effect Effects 0.000 description 12
- 230000003993 interaction Effects 0.000 description 11
- 230000008859 change Effects 0.000 description 10
- 230000036962 time dependent Effects 0.000 description 8
- 230000010363 phase shift Effects 0.000 description 7
- 238000004364 calculation method Methods 0.000 description 6
- 239000000725 suspension Substances 0.000 description 5
- 230000007423 decrease Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 238000012549 training Methods 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000013461 design Methods 0.000 description 3
- 238000000605 extraction Methods 0.000 description 3
- 238000004422 calculation algorithm Methods 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 206010039203 Road traffic accident Diseases 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000004424 eye movement Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 238000011022 operating instruction Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000036961 partial effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000001681 protective effect Effects 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
- 239000004984 smart glass Substances 0.000 description 1
- 230000003238 somatosensory effect Effects 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000002618 waking effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/88—Radar or analogous systems specially adapted for specific applications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/02—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
- G01S7/41—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
Abstract
本申请适用于终端技术领域,提供了一种手势识别方法和装置,有利于降低手势识别的复杂度。通过第一天线向手势识别区域发送第一雷达电磁信号;通过第二天线接收该第一雷达电磁信号经该手势识别区域中的手势反射后得到的第一回波信号;通过第三天线接收该第一雷达电磁信号经该手势识别区域中的该手势反射后得到的第二回波信号;根据该第一回波信号,确定该第二天线的第一目标时刻;根据该第二回波信号,确定该第三天线的第二目标时刻;根据该第一目标时刻和该第二目标时刻,确定该手势。
Description
技术领域
本申请属于终端技术领域,更具体地,涉及终端技术领域中的一种手势识别方法和装置。
背景技术
随着电子设备的种类、数量越来越多,普及程度越来越广泛,用户与电子设备的交互方式也从利用遥控器、鼠标、键盘等外设进行的简单交互方式,发展到了利用语音交互、体感交互、眼动交互和手势交互等多样化的交互方式。其中,手势交互方式由于比较自然方便,在很多应用场景中具有很大的需求。
在无线通信技术领域,手势会导致无线信号发生反射、衍射、以及多径等,因此可以基于电子设备接收到的无线信号的变化来识别不同的手势类型,以实现手势交互。目前,基于无线信号的手势识别主要是通过天线采集天线信号数据进行模型训练得到各种手势模型,之后在进行手势识别时从采集到天线信号数据中提取出与人体运动速度相关的特征,通过训练得到的手势模型识别出手势。
但是,在上述方法中,需要预先采集大量的天线信号数据进行模型训练,且在手势识别过程中需要对采集到的天线信号数据进行特征提取,计算量较大且计算复杂度较高。
发明内容
本申请实施例提供了一种手势识别方法和装置,有利于降低手势识别的复杂度。
本申请实施例提供一种手势识别的方法,该方法包括:通过第一天线向手势识别区域发送第一雷达电磁信号;通过第二天线接收该第一雷达电磁信号经该手势识别区域中的手势反射后得到的第一回波信号;通过第三天线接收该第一雷达电磁信号经该手势识别区域中的该手势反射后得到的第二回波信号;根据该第一回波信号,确定该第二天线的第一目标时刻,在该第一目标时刻,该第一回波信号对应的波程小于预设的第一波程阈值;根据该第二回波信号,确定该第三天线的第二目标时刻,在该第二目标时刻,该第二回波信号对应的波程小于预设的第二波程阈值;根据该第一目标时刻和该第二目标时刻,确定该手势;其中,该第一天线、该第二天线和该第三天线不共线,该手势识别区域位于该第一天线、该第二天线和该第三天线的上方。
采用本申请实施例提供的手势识别方法,终端配置位置不共线的发射天线(如第一天线)和至少两个接收天线(如第二天线和第三天线),通过发射天线向手势识别区域发射雷达电磁信号,并通过两个接收天线同时接收雷达电磁信号经手势识别区域中的手势反射产生的回波信号,从两个接收天线接收到的回波信号中提取由于手势的运动导致信号发射天线和不同接收天线之间的波程随时间变化的波程数据,并根据各接收天线的波程数据中波程具有最小值的时刻的先后顺序,确定该手势。
相比于现有技术中需要预先采集大量的天线信号数据进行模型训练,且在手势识别过程中需要对采集到的天线信号数据进行特征提取,计算量大且计算复杂度较高。本申请实施例提供的手势识别方法仅根据回波信号的多普勒相移随时间的变化就可以有效地分辨出手势,能够降低手势识别的复杂度。
在一种可能的实现方式中,在该第一目标时刻,该第一回波信号对应的波程具有最小值;在该第二目标时刻,该第二回波信号对应的波程具有最小值。
在一种可能的实现方式中,该根据该第一目标时刻和该第二目标时刻,确定该手势,包括:根据该第一目标时刻、该第二目标时刻、该第一天线的位置、该第二天线的位置和该第三天线的位置,确定该手势。
在一种可能的实现方式中,该第一目标时刻是根据该第一回波信号对应的波程随时间变化的第一波程数据确定的;该第二目标时刻是根据该第二回波信号对应的波程随时间变化的第二波程数据确定的。
在一种可能的实现方式中,该第一波程数据是根据该第一回波信号的相位差、时间差或距离差中的至少一项确定的;该第二波程数据是根据该第二回波信号的相位差、时间差或距离差中的至少一项确定的。
也就是说,该手势识别装置可以根据该第一回波信号的信号参数,确定该第一回波信号对应的波程随时间变化的该第一波程数据,该信号参数包括该第一回波信号的相位差、时间差或距离差;根据该第一波程数据,确定该第一目标时刻。
在一种可能的实现方式中,该第一雷达电磁信号是在预设的至少一个第一时刻通过该第一天线发送的,该方法还包括:在预设的至少一个第二时刻,通过该第二天线向该手势识别区域发射第二雷达电磁信号;通过该第一天线接收该第二雷达电磁信号经该手势识别区域中的该手势反射后得到的第三回波信号;通过该第三天线接收该第二雷达电磁信号经该手势识别区域中的该手势反射后得到的第四回波信号;根据该第三回波信号,确定该第一天线的第三目标时刻,在该第三目标时刻,该第三回波信号对应的波程小于第三波程阈值;根据该第四回波信号,确定该第三天线的第四目标时刻,在该第四目标时刻,该第四回波信号对应的波程小于第四波程阈值;该根据该第一目标时刻和该第二目标时刻,确定该手势,包括:根据该第一目标时刻、该第二目标时刻、该第三目标时刻和该第四目标时刻,确定该手势。
在本申请实施例提供的手势识别方法中,该手势识别装置可以通过切换第一天线和第二天线对应的射频电路实现天线功能的切换,在不额外增加天线和射频电路数量的前提下,增加了判断运动轨迹的维度,从而提高手势的识别精确度。
在一种可能的实现方式中,该至少一个第一时刻和该至少一个第二时刻间隔设置。
在一种可能的实现方式中,该第一雷达电磁信号为单频连续波或单频不连续波。
第二方面,本申请实施例还提供一种手势识别装置,用于执行上述第一方面或其任意可能的实现方式中所述的方法。具体地,手势识别装置可以包括用于执行上述第一方面或其任意可能的实现方式中所述的方法的单元。
第三方面,本申请实施例还提供一种手势识别装置,该装置包括:存储器、至少一个处理器、通信接口及存储在该存储器上并可在该处理器上运行的指令。进一步,该存储器、该处理器以及该通信接口之间通过内部连接通路互相通信。该至少一个处理器执行该指令使得该手势识别装置实现上述第一方面或其任意可能的实现方式中所述的方法。
第四方面,本申请还提供一种计算机可读存储介质,用于存储计算机程序,该计算机程序包括用于实现上述第一方面或其任意可能的实现方式中所述的方法。
第五方面,本申请实施例还提供一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机实现上述第一方面或其任意可能的实现方式中所述的方法。
第六方面,本申请实施例还提供一种芯片装置,包括:输入接口、输出接口、至少一个处理器。可选的,该芯片装置还包括存储器。该至少一个处理器用于执行该存储器中的代码,当该至少一个处理器执行该代码时,该芯片装置实现上述第一方面方面或其任意可能的实现方式中所述的方法。
可选地,上述手势识别装置可以为终端中的芯片装置或者集成电路。
第七方面,本申请实施例还提供一种终端,包括至少两个天线以及上述第二方面或第三方面中所述的手势识别装置,所述至少两个天线和所述手势识别装置耦合;或包括至少两个天线和上述第六方面中所述的芯片装置或者集成电路,所述至少两个天线和所述手势识别装置耦合。
本实施例提供的手势识别方法、手势识别装置、计算机存储介质、计算机程序产品、芯片和终端均用于执行上文所提供的手势识别方法,因此,其所能达到的有益效果可参考上文所提供的手势识别方法中的有益效果,此处不再赘述。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对本申请实施例中的附图作简单地介绍。
图1是本申请实施例提供的一种应用场景的示意图;
图2是本申请实施例提供的另一种应用场景的示意图;
图3是本申请实施例提供的又一种应用场景的示意图;
图4是本申请实施例提供的又一种应用场景的示意图;
图5是本申请实施例提供的又一种应用场景的示意图;
图6是本申请实施例提供的又一种应用场景的示意图;
图7是本申请实施例提供的又一种应用场景的示意图;
图8是本申请实施例提供的天线布局的示意图;
图9是本申请实施例提供的一发双收的天线模式示意图;
图10是本申请实施例提供的另一天线布局的示意图;
图11是本申请实施例提供的手势识别方法200的示意图;
图12是现有技术中双站雷达间的多普勒频移的原理示意图;
图13是本申请实施例提供的手势运动轨迹的示意图;
图14是本申请实施例提供的波程示意图;
图15是本申请实施例提供的波程随时间变化的曲线;
图16是本申请实施例提供的另一手势运动轨迹的示意图;
图17是本申请实施例提供的另一波程的示意图;
图18是本申请实施例提供的另一波程随时间变化的曲线;
图19是本申请实施例提供的又一手势运动轨迹的示意图;
图20是本申请实施例提供的又一波程的示意图;
图21是本申请实施例提供的又一波程随时间变化的曲线;
图22是本申请实施例提供的又一天线布局的示意图;
图23是本申请实施例提供的又一天线布局的示意图;
图24是本申请实施例提供的不同切换状态下波程的示意图;
图25是本申请实施例提供的不同切换状态下波程随时间变化的曲线;
图26是本申请实施例提供的另一不同切换状态下波程的示意图;
图27是本申请实施例提供的另一不同切换状态下波程随时间变化的曲线;
图28是本申请实施例提供的又一不同切换状态下波程的示意图;
图29是本申请实施例提供的又一不同切换状态下波程随时间变化的曲线;
图30是本申请实施例提供的又一手势运动轨迹的示意图;
图31是本申请实施例提供的又一手势运动轨迹的示意图;
图32是本申请实施例提供的手势识别装置300的示意性框图;
图33是本申请实施例提供的手势识别装置400的示意性框图;
图34提供了本申请实施例的芯片500的示意性框图。
具体实施方式
以下描述中,为了说明而不是为了限定,提出了诸如特定系统结构、技术之类的具体细节,以便透彻理解本申请实施例。然而,本领域的技术人员应当清楚,在没有这些具体细节的其它实施例中也可以实现本申请。在其它情况中,省略对众所周知的系统、装置、电路以及方法的详细说明,以免不必要的细节妨碍本申请的描述。
应当理解,当在本申请说明书和所附权利要求书中使用时,术语“包括”指示所描述特征、整体、步骤、操作、元素和/或组件的存在,但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解,在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。
另外,在本申请说明书和所附权利要求书的描述中,术语“第一”、“第二”、“第三”等仅用于区分描述,而不能理解为指示或暗示相对重要性。
在本申请说明书中描述的参考“一个实施例”或“一些实施例”等意味着在本申请的一个或多个实施例中包括结合该实施例描述的特定特征、结构或特点。由此,在本说明书中的不同之处出现的语句“在一个实施例中”、“在一些实施例中”、“在其他一些实施例中”、“在另外一些实施例中”等不是必然都参考相同的实施例,而是意味着“一个或多个但不是所有的实施例”,除非是以其他方式另外特别强调。术语“包括”、“包含”、“具有”及它们的变形都意味着“包括但不限于”,除非是以其他方式另外特别强调。
本申请实施例提供一种基于多天线的手势识别方法,该方法可以应用于配置有至少两个天线的终端中。
可选地,该终端可以为手机、平板电脑、可穿戴设备、车载设备、增强现实(augmented reality,AR)/虚拟现实(virtual reality,VR)设备、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本、个人数字助理(personaldigital assistant,PDA)等设备,本申请实施例对终端的具体类型不作任何限制。
例如,所述终端可以是WLAN中的站点(station,STA),可以是蜂窝电话、无绳电话、会话启动协议(session initiation protocol,SIP)电话、无线本地环路(wireless localloop,WLL)站、个人数字处理(Personal Digital Assistant,PDA)设备、具有无线通信功能的手持设备、计算设备或连接到无线调制解调器的其它处理设备、车载设备、车联网终端、电脑、膝上型计算机、手持式通信设备、手持式计算设备、卫星无线设备、无线调制解调器卡、电视机顶盒(set top box,STB)、用户驻地设备(customer premise equipment,CPE)和/或用于在无线系统上进行通信的其它设备以及下一代通信模块,例如,5G网络中的移动终端或者未来演进的公共陆地移动网络(public land mobile network,PLMN)网络中的移动终端等。
作为示例而非限定,当所述终端为可穿戴设备时,该可穿戴设备还可以是应用穿戴式技术对日常穿戴进行智能化设计、开发出可以穿戴的设备的总称,如眼镜、手套、手表、服饰及鞋等。可穿戴设备即直接穿在身上,或是整合到用户的衣服或配件的一种便携式设备。可穿戴设备不仅仅是一种硬件设备,更是通过软件支持以及数据交互、云端交互来实现强大的功能。广义穿戴式智能设备包括功能全、尺寸大、可不依赖智能手机实现完整或者部分的功能,如智能手表或智能眼镜等,以及只专注于某一类应用功能,需要和其它设备如智能手机配合使用,如各类进行体征监测的智能手环、智能首饰等。
本申请实施例提供的方法可适用于终端的各种应用场景中,通过本申请实施例提供的方法识别出的手势的作用与用户直接在触摸屏上做出的手势或者通过其他输入设备输入的手势命令等的作用可以有相同的效果。本申请实施例中用户做出的手势可以是在该终端附近(如距离该终端的屏幕上方3-5cm的范围等)做出的悬浮手势;或者是用户使用手直接在触摸屏上做出的手势,比如,当该终端的触摸屏损坏时,该终端可通过本申请提供的方法识别出用户直接在触摸屏做出的手势;或者是用户戴着防护套具等直接在触摸屏上做出的手势,比如,当用户带有手套时,用户无需摘卸可直接在触摸屏上做出的手势,该终端可通过本申请提供的手势识别方法识别出用户做出的手势。
需要说明的是,本申请实施例中所述的手势指的是用户手部的运动趋势,而不是手部的姿势。
可选地,终端上可以设置有触发手势识别指令的触发条件,当用户想要启用手势识别功能时,可以对终端进行操作,以触发手势识别指令。
触发手势识别指令的触发条件可以根据实际情况进行设置。在一些实施例中,终端上可以设置有触发手势识别的实体按键或虚拟按键等。当用户按压前述实体按键,或点击前述虚拟按键时,可以触发手势识别指令。
例如,如图1所示,终端100可以包括实体按键110和实体按键120,实体按键110为音量键,实体按键120为电源按键。用户在驾驶车辆的过程中,为了避免出现交通事故,通常不便于对终端100进行操作。因此,假设终端100中设置有音量键110与手势识别功能的关联关系,则用户可以在车辆行驶之前,用两个手指同时按压音量键的第一侧和第二侧,触发手势识别指令,启用手势操作功能,以便用户在行车的过程中通过手势对终端100下达相应的指令。
例如,如图2中的(a)所示,该终端100的设置选项中有“悬浮手势”选项101,用户在选择“悬浮手势”选项101之后,显示如图2中的(b)所示的界面,其中“开启”选项102用于开启悬浮手势,“关闭”选项103用于关闭悬浮手势,则当用户选择“开启”选项102后,该终端即可识别用户做出的悬浮手势,并根据具体的悬浮手势执行对应的指令。
在另一些实施例中,用户也可以在终端100上设置某一些应用与手势识别指令的关联关系,当用户启动这些特定的应用时,自动触发手势识别指令。
例如,当前许多用户喜欢在驾驶车辆时,使用终端100上的音频软件播放歌曲。因此,用户可以设置音频软件与手势识别指令的关联关系。如图3所示,当用户在行车之前,可以在终端100上使用音频软件播放歌曲,终端100显示音频软件的默认歌单中包括A歌曲104和B歌曲105。用户点击B歌曲105,启动音频软件播放B歌曲105,B歌曲105在音频软件启动时自动触发手势识别指令,启用手势操作功能,以便用户在行车的过程中通过手势对终端100下达相应的指令。
可选地,本申请实施例提供的手势识别方法可以适用于多种应用场景,本申请实施例对此不作限定。
在一种可能的实现方式中,如图4所示,当该终端100处于锁屏状态(如图4中的(a)时,用户可在该终端的屏幕上方做出向右滑动的悬浮手势(如图4中的(b)所示),则该终端可通过本申请实施例提供的方法识别出的向右滑动的手势,进而为用户解锁显示该终端的主界面(如图4中的(c)所示)。
在另一种可能的实现方式中,如图5所示,当该终端处于来电状态(如图5中的(a)所示)时,用户可在该终端的屏幕上方做出向右滑动的悬浮手势(如图5中的(b)所示),则该终端可通过本申请实施例提供的方法识别出的向右滑动的手势,进而为用户接通电话并显示通话界面(如图5中的(c)所示)。当然用户也可在该终端的屏幕上方做出向左滑动的悬浮手势以挂断电话。
在另一种可能的实现方式中,如图6所示,当用户使用该终端听音乐(如图6中的(a)所示)时,用户可在该终端的屏幕上方做出向左滑动的悬浮手势(如图6中的(b)所示),则该终端可以通过本申请实施例提供的方法识别出的向左滑动可用于播放上一首歌曲的手势,进而该终端为用户切换至上一首歌曲进行播放(如图6中的(c)所示)。当然用户也可在该终端的屏幕上方做出向右滑动的悬浮手势以切换至下一首歌曲;或者,在该终端的屏幕上方做出向上滑动的悬浮手势以增大音量;或者,在该终端的屏幕上方做出向下滑动的悬浮手势以减小音量等,本申请实施例在此不再一一画图示意。
在另一种可能的实现方式中,如图7所示,当用户使用该终端听音乐(如图7中的(a)所示)时,用户可在该终端的屏幕上方做出由高向低(即下压)的悬浮手势(如图7中的(b)所示),则该终端可以通过本申请实施例提供的方法识别出的下压手势可用于后台播放歌曲,进而该终端为用户切换至后台播放歌曲(如图7中的(c)所示)。当然用户也可在该终端的屏幕上方做出由高向低再向高(即先下压再上抬)的悬浮手势以切换至后台播放歌曲;或者,在该终端的屏幕上方做出由低向高(即上抬)的悬浮手势以切换至后台播放歌曲;或者,在该终端的屏幕上方做出下压的悬浮手势以减小音量;或者,在该终端的屏幕上方做出向上抬的悬浮手势以增大音量等,本申请实施例在此不再一一画图示意。
类似的,当用户使用该终端的通讯录时,用户可做出向上滑动或向下滑动的手势等,该终端通过本申请实施例提供的方法识别出手势为向上滑动时可用于为用户显示上一页通讯录,若识别出手势为向下滑动时可用于为用户显示下一页通讯录;或者,当用户使用该终端翻看相册时,用户可做出向左滑动或向右滑动的手势等,该终端通过本申请实施例提供的方法识别出手势为向右滑动时可用于为用户显示下一张图片,若识别出手势为向左滑动时可用于为用户显示上一张图片;或者,当用户使用终端的应用程序时,用户可以做出由高向低(即下压)、由低向高(即上抬)、由高向低再向高(即先下压再上抬)的手势等,该终端通过本申请实施例提供的方法识别出手势为下压、上抬、先下压再上抬时,可用于退出该应用程序或为用户显示桌面;或者,当该终端的屏幕处于点亮状态,当用户暂时不使用该终端时,用户可以做出下压的手势,该终端通过本申请实施例提供的方法识别出手势为下压时可用于灭屏;或者,当该终端的屏幕处于灭屏状态,当用户想唤醒该终端时,用户可以做出先下压再上抬的手势等,该终端通过本申请实施例提供的方法识别出手势为先下压再上抬时可用于点亮屏幕并唤醒终端。
需要说明的是,上面仅示意性示出或列举了一些可能的应用场景,但本申请实施例不限于此,本申请实施例提供的手势识别方法还可以应用于其他手势识别的应用场景,本申请实施例在此不一一列举。
还需要说明的是,用户可以通过一根或多根手指,如食指,实现上述各种滑动方向的手势;或者,用户可以通过手掌,实现上述各种滑动方向的手势,本申请实施例对此不作限定。
需要说明的是,本申请实施例中所述的“由右向左运动”可以理解为“向左运动”,“由左向右运动”可以理解为“向右运动”,“由下向上运动”可以理解为“向上运动”,“由上向下运动”可以理解为“向下运动”,“由高向低运动”可以理解为“向低运动(即下压)”,“由低向高运动”可以理解为“向高运动(即上抬)”。
本申请实施例所应用的终端可以包括至少两个天线和手势识别装置,该手势识别装置上配置有通信接口,该手势识别装置可以通过该通信接口与该至少两个天线之间进行信号/数据传输,以实现本申请实施例提供的手势识别方法。
需要说明的是,本申请实施例仅以该至少两个天线和该手势识别装置集成在同一个终端为例进行介绍,但本申请实施例不限于此。可选地,该至少两个天线可以集成在第一终端中,该手势识别装置可以集成第二终端中,且该第一终端与该第二终端之间可以进行信号和/或数据传输,当该至少两个天线和手势识别装置集成在不同的终端时,实现本申请实施例提供的手势识别方法的过程可以参考至少两个天线和手势识别装置集成在同一个终端的过程,为避免重复,此处不再赘述。
可选地,本申请实施例对具体的天线数量不作限定。
在一种可能的实现方式中,该终端可以包括两个天线,该两个天线设置为一发一收的天线模式。
在另一种可能的实现方式中,该终端可以包括三个天线,该三个天线设置为一发双收的天线模式,且该三个天线不共线。
在又一种可能的实现方式中,该终端可以包括至少四个天线,该至少四个天线设置为一发多收的天线模式,且该至少四个天线不共线。
需要说明的是,本申请实施例中所述的“A发B收”的天线模式是指A个天线分别与A个射频发射电路连接,形成A个发射通道;B个天线分别与B个射频接收电路连接,形成B个接收通道。
需要说明的是,为清楚起见,本申请实施例仅以该终端包括第一天线、第二天线和第三天线为例进行介绍,但本申请实施例不限于此。
还需要说明的是,该终端包括两个天线或四个以上天线的手势识别过程可以参考该终端包括第一天线、第二天线和第三天线的手势识别过程,为避免重复,此处不再赘述。
可选地,该第一天线、第二天线和第三天线可以为独立设置的、专用于手势识别的天线;或者,该至少三个天线可以复用现有的、用于无线通信的天线,如WIFI天线,本申请实施例对此不作限定。
在一种可能的实现方式中,该第一天线、第二天线和第三天线为独立设置的、用于手势识别的天线时,该第一雷达电磁信号可以为单频连续波。也就是说,该终端可以通过该第一天线、第二天线和第三天线实现雷达电磁信号的持续收发。
这样一来,采用以极窄带的单频连续波制式雷达为平台,对终端通信影响较小,回波信号虽然具有一定的带宽,但手势运动引起的带宽展宽十分小(近似Hz量级),故能与终端的通信共存。
在另一种可能的实现方式中,该第一天线、第二天线和第三天线复用现有的、用于无线通信的天线时,该第一雷达电磁信号可以为单频不连续波。也就是说,该终端可以通过复用该至少三个天线实现通信信号和雷达电磁信号的间隔收发。
这样一来,不会给终端的射频前端造成额外的布局布线负担,不增加任何硬件成本,不影响终端的功耗和体积,解决了目前使用雷达进行手势识别时,在终端内布局雷达传感器会给终端的射频前端带来较大的布局布线负担,增加终端的硬件成本、功耗和体积的问题。
还需要说明的是,本申请实施例中所述的该第一天线、该第二天线和该第三天线的位置不共线,可以理解为将该该第一天线、该第二天线和该第三天线投影在该终端的屏幕或触摸面板所在平面时,该第一天线、该第二天线和该第三天线在该平面内的投影位置不共线,若该平面通过二维空间(x轴和y轴)表示,则该第一天线、该第二天线和该第三天线在该平面内的投影对应在x轴上的值不同、或者在y轴上的值不同、或者在x轴上的值和y轴上的值均不同。
可选地,该第一天线、该第二天线和该第三天线可以通过多种方式设置,使得该第一天线、该第二天线和该第三天线不共线,本申请实施例对此不作限定。
在一种可能的实现方式中,图8中的(a)示出了该第一天线(A1)、该第二天线(A2)和该第三天线(A3)的一种可能的位置关系图。如图8中的(a)所示,以该终端的屏幕所在平面为该第一天线、该第二天线和该第三天线的投影面、水平方向为x轴方向、垂直方向为y轴方向为例,T表示该终端的顶部,B表示该终端的底部,L表示该终端的左侧,R表示该终端的右侧,该第一天线和该第三天线在y轴上的值相同,该第二天线和该第三天线在x轴的值相同。
可选地,该第一天线和该第三天线在y轴上的值也可以不同,和/或,该第二天线和该第三天线在x轴的值也可以不同,本申请实施例对此不作限定。
例如:图8中的(b)示出了另一种可能的位置关系,该第一天线和该第三天线在y轴上的值不同,且该第二天线和该第三天线在x轴的值不同。
需要说明的是,图8中的(a)和(b)仅示例性示出该第一天线、该第二天线和该第三天线投影在该屏幕的中间区域,该手势识别区域位于该屏幕的上方。
可选地,该第一天线、该第二天线、该第三天线以及手势识别区域还可以投影在该屏幕的其他区域,本申请实施例对此不作限定。
例如,该第一天线、该第二天线和该第三天线可以共同投影在该屏幕的左上角(如图8中的(c)所示)、右上角、左下角、右下角。
又例如:如图8中的(d)所示,该第一天线、该第二天线和该第三天线可以分别投影在该屏幕的右下角、左上角和左下角。
可选地,该手势识别区域在该屏幕上的投影与该第一天线、该第二天线和该第三天线在该屏幕上的投影可以重叠也可以不重叠,本申请实施例对此不作限定。
在一种可能的实现方式中,该第一天线、该第二天线和该第三天线按照如图8中的(a)设置时,该手势识别区域可以位于该屏幕的上方、该屏幕上方的中间区域、左上角区域或其他区域。
在另一种可能的实现方式中,该第一天线、该第二天线和该第三天线按照如图8中的(c)设置时,该手势识别区域可以位于该屏幕的上方、该屏幕上方的中间区域、左上角区域或其他区域。
可选地,该第一天线、该第二天线、该第三天线可以通过多种方式设置为一发双收的天线模式,本申请实施例对此不作限定。
在一种可能的实现方式中,图9示出了图8中的该第一天线、该第二天线和该第三天线设置为一发双收的天线模式的一种可能的设置方式。如图9所示,该第一天线可以与射频发射电路连接形成发射通道,该第二天线可以与第一射频接收电路连接形成第一发射通道,该第三天线可以与第二射频接收电路连接形成第二发射通道。也就是说,按照图9设置之后,该第一天线为发射天线,该第二天线为第一接收天线,该第三天线为第二接收天线。
例如:将图8中的(a)中所示的该第一天线、该第二天线和该第三天线按照图9中的一发双收模式设置之后,可以得到如图10所示的一发双收的天线模式示意图,其中,第一天线(A1)为发射天线(Tx),第二天线(A2)为第一接收天线(Rx1),该第三天线(A2)为第二接收天线(Rx2)。
可选地,图8中的(a)中所示的该第一天线、该第二天线和该第三天线也可以通过其他方式与该射频发射电路、该第一射频接收电路和该第二射频接收电路连接,设置为一发双收的天线模式,本申请实施例对此不作限定。
下面将以该第一天线、该第二天线和该第三天线按照如图10所示的一发双收的天线模式设置为例,介绍本申请实施例提供的手势识别方法。
应理解,该终端按照图8中(b)、(c)和(d)中所示的该第一天线、该第二天线、该第三天线的位置关系设置一发双收的天线模式,并执行该手势识别方法的过程,与按照图10中所示的该第一天线、该第二天线、该第三天线的位置关系设置一发双收的天线模式,并执行该手势识别方法的过程类似,为避免重复,此处不再赘述。
图11示出了本申请实施例提供的手势识别方法200的示意性流程图。该方法可以应用于上述终端,该终端中的第一天线、第二天线和第三天线按照如图10中所示的方式设置为一发双收的天线模式,该方法可以由该终端中的手势识别装置执行。
S201,手势识别装置通过第一天线向手势识别区域发送第一雷达电磁信号。
S202,该手势识别装置通过第二天线接收所述第一雷达电磁信号经所述手势识别区域中的手势反射后得到的第一回波信号。
S203,该手势识别装置通过第三天线接收所述第一雷达电磁信号经所述手势识别区域中的所述手势反射后得到的第二回波信号。
需要说明的是,S202和S203的执行顺序不分先后。也就是说,可以先执行S202,再执行S203;或者,先执行S203,再执行S202;或者,可以同时执行S202和S203。
S204,该手势识别装置根据所述第一回波信号,确定所述第二天线的第一目标时刻,在所述第一目标时刻,所述第一回波信号对应的波程小于预设的第一波程阈值。
在一种可能的实现方式中,在所述第一目标时刻,所述第一回波信号对应的波程具有最小值。
可选地,该手势识别装置可以通过多种方式根据该第一回波信号,确定该第二天线的第一目标时刻,本申请实施例对此不作限定。
在一种可能的实现方式中,该手势识别装置可以根据该第一回波信号的信号参数,确定该第一回波信号对应的波程随时间变化的第一波程数据,该信号参数包括该第一回波信号的相位差、时间差或距离差;根据该第一波程数据,确定该第一目标时刻。
也就是说,所述第一目标时刻是根据该第一波程数据确定的,该第一波程数据是根据所述第一回波信号的相位差、时间差或距离差中的至少一项确定的。
可选地,该第一波程数据可以通过多种方式表示所述第一回波信号对应的回波随时间的变化,本申请实施例对此不作限定。
在一种可能的实现方式中,该第一波程数据可以包括该第一回波信号对应的波程随时间变化的曲线。
在另一种可能的实现方式中,该第一波程数据可以包括该第一回波信号对应的波程与时间之间的对应关系。
需要说明的是,本申请实施例中,仅以该第一波程数据包括该第一回波信号对应的波程随时间变化的曲线为例进行介绍,但本申请实施例不限于此。
在一种可能的实现方式中,以单频连续波为例,单频连续波多普勒雷达传感器(doppler radar sensor,DRS)是一种发射点频射频电磁波,可以通过测量回波信号的多普勒频移感知探测目标相对运动的雷达。
如图12所示,双站雷达间的多普勒频移,源自于运动目标相对于发射天线与接收天线的位移变化。双站雷达间的多普勒频移可以通过如下公式一表示。
fd=fc|V|·(cosθT-cosθR)/c (公式一)
其中,fc表示射频载波频率,c表示光速,θT表示目标的速度矢量v与发射天线的方向矢量之间的夹角(即速度V在目标与发射天线连线上的投影),θR表示目标的速度矢量v与接收天线的方向矢量之间的夹角(即速度V在目标与接收天线连线上的投影)。
对于单频连续波信号,多普勒频移可以等效于测量回波信号的相移,如下公式二所示。
需要说明的是,回波信号的相移也称为回波信号的相位差。类似地,类似地,多普勒频移可以等效于测量回波信号的时间差或距离差。
因此,可以通过测量回波信号的相位差、时间差或距离差,确定回波信号的多普勒频移,从而得到回波信号的波程。
S205,该手势识别装置根据所述第二回波信号,确定所述第三天线的第二目标时刻,在所述第二目标时刻,所述第二回波信号对应的波程小于预设的第二波程阈值。
在一种可能的实现方式中,在所述第二目标时刻,所述第二回波信号对应的波程具有最小值。
可选地,该手势识别装置可以通过多种方式根据该第二回波信号,确定该第三天线的第二目标时刻,本申请实施例对此不作限定。
在一种可能的实现方式中,该手势识别装置可以根据该第二回波信号的信号参数,确定该第二回波信号对应的波程随时间变化的第二波程数据,该信号参数包括该第二回波信号的相位差、时间差或距离差;根据该第二波程数据,确定该第二目标时刻。
也就是说,所述第二目标时刻是根据该第二波程数据确定的,该第二波程数据是根据所述第二回波信号的相位差、时间差或距离差中的至少一项确定的。
可选地,该第二波程数据可以通过多种方式表示所述第二回波信号对应的回波随时间的变化,本申请实施例对此不作限定。
在一种可能的实现方式中,该第二波程数据可以包括该第二回波信号对应的波程随时间变化的曲线。
在另一种可能的实现方式中,该第二波程数据可以包括该第二回波信号对应的波程与时间之间的对应关系。
需要说明的是,本申请实施例中,仅以该第二波程数据包括该第二回波信号对应的波程随时间变化的曲线为例进行介绍,但本申请实施例不限于此。
需要说明的是,S204和S205的执行顺序不分先后。也就是说,可以先执行S204,再执行S205;或者,先执行S205,再执行S204;或者,可以同时执行S204和S205。
S206,该手势识别装置根据所述第一目标时刻和所述第二目标时刻,确定所述手势。
可选地,该手势识别装置可以通过多种方式,根据该第一目标时刻和该第二目标时刻,确定该手势,本申请实施例对此不作限定。
在一种可能的实现方式中,该手势识别装置可以根据所述第一目标时刻、所述第二目标时刻、所述第一天线的位置、所述第二天线的位置和所述第三天线的位置,确定所述手势。
例如:该手势识别装置可以根据该第一目标时刻和该第二目标时刻的先后顺序,以及该第一天线的位置、该第二天线的位置和该第三天线的位置,确定该手势。
在一种可能的实现方式中,当该手势为图13所示的左右运动(不区分由左向右或由右向左)时,该第一接收天线(Rx1)接收到的该第一回波信号对应的波程示意图如图14中的(a)所示,该第二接收天线(Rx2)接收到的该第二回波信号对应的波程示意图如图14中的(b)所示,其中,图14中的(a)和(b)中的黑色原点示意性示出该手势在不同时刻的运动轨迹。
相应地,当该手势为由左向右运动时,图14中的(a)所示的该第一回波信号对应的波程随时间变化的曲线如图15中的(a)中的虚线所示;图14中的(b)所示的该第二回波信号对应的波程随时间变化的曲线如图15中的(a)中的实线所示。当该手势为由右向左运动时,图14中的(a)所示的该第一回波信号对应的波程随时间变化的曲线如图15中的(b)中的虚线所示;图14中的(b)所示的该第二回波信号对应的波程随时间变化的曲线如图15中的(b)中的实线所示。
由图15中的(a)可以得知,该手势为由左向右运动时,在第一目标时刻t1,该第一接收天线Rx1接收到的该第一回波信号对应的波程具有最小值;在第二目标时刻t2,该第二接收天线Rx2接收到的第二回波信号对应的波程具有最小值。
由图15中的(b)可以得知,该手势为由右向左运动时,在第一目标时刻t1,该第一接收天线Rx1接收到的该第一回波信号对应的波程具有最小值;在第二目标时刻t2,该第二接收天线Rx2接收到的第二回波信号对应的波程具有最小值。
也就是说,当该第一目标时刻t1与该第二目标时刻t2相同,或该第一目标时刻t1与该第二目标时刻t2之间的差值小于时间阈值时,该手势识别装置可以确定该手势的运动轨迹为左右运动。
在一种可能的实现方式中,当该手势为图16所示的上下运动(不区分由上向下或由下向上)时,该第一接收天线(Rx1)接收到的该第一回波信号对应的波程示意图如图17中的(a)所示,该第二接收天线(Rx2)接收到的该第二回波信号对应的波程示意图如图17中的(b)所示,其中,图17中的(a)和(b)中的黑色原点示意性示出该手势在不同时刻的运动轨迹。
相应地,当该手势为由下向上运动时,图17中的(a)所示的该第一回波信号对应的波程随时间变化的曲线如图18中的(a)中的虚线所示;图17(b)所示的该第二回波信号对应的波程随时间变化的曲线如图18中的(a)中的实线所示。当该手势为由上向下运动时,图17中的(a)所示的该第一回波信号对应的波程随时间变化的曲线如图18中的(b)中的虚线所示;图17(b)所示的该第二回波信号对应的波程随时间变化的曲线如图18中的(b)中的实线所示。
由图18中的(a)可以得知,该手势为由下向上运动时,在第一目标时刻t1,该第一接收天线Rx1接收到的该第一回波信号对应的波程具有最小值;在第二目标时刻t2,该第二接收天线Rx2接收到的第二回波信号对应的波程具有最小值。
由图18中的(b)可以得知,该手势为由上向下运动时,在第一目标时刻t1,该第一接收天线Rx1接收到的该第一回波信号对应的波程具有最小值;在第二目标时刻t2,该第二接收天线Rx2接收到的第二回波信号对应的波程具有最小值。
也就是说,当该第一目标时刻t1晚于该第二目标时刻t2,该手势识别装置可以确定该手势的运动轨迹为由下向上运动;当该第一目标时刻t1早于该第二目标时刻t2,该手势识别装置可以确定该手势的运动轨迹为由上向下运动。在本申请另一实施例中,当该第一目标时刻t1晚于该第二目标时刻t2时,还可以进一步地确定当该第一目标时刻t1与该第二目标时刻t2之间的差值大于该时间阈值时,该手势识别装置可以确定该手势的运动轨迹为由下向上运动;而当该第一目标时刻t1早于该第二目标时刻t2,还可以进一步地确定当该第一目标时刻t1与该第二目标时刻t2之间的差值大于该时间阈值时,该手势识别装置可以确定该手势的运动轨迹为由上向下运动。
在一种可能的实现方式中,当该手势为图19所示的高低运动(不区分由高向低或由低向高)时,该第一接收天线(Rx1)接收到的该第一回波信号对应的波程示意图如图20中的(a)所示,该第二接收天线(Rx2)接收到的该第二回波信号对应的波程示意图如图20中的(b)所示,其中,图20中的(a)和(b)中的黑色原点示意性示出该手势在不同时刻的运动轨迹。
相应地,当该手势为由高向低运动时,图20中的(a)所示的该第一回波信号对应的波程随时间变化的曲线如图21中的(a)中的虚线所示;图20(b)所示的该第二回波信号对应的波程随时间变化的曲线如图21中的(a)中的实线所示。当该手势为由高向低再向高运动时,图20中的(a)所示的该第一回波信号对应的波程随时间变化的曲线如图21中的(b)中的虚线所示;图20(b)所示的该第二回波信号对应的波程随时间变化的曲线如图21中的(b)中的实线所示。
由图21中的(a)可以得知,该手势为由高向低运动时,在第一目标时刻t1,该第一接收天线Rx1接收到的该第一回波信号对应的波程具有最小值,且该第一接收天线Rx1接收到的该第一回波信号对应的波程随时间单调递减;在第二目标时刻t2,该第二接收天线Rx2接收到的第二回波信号对应的波程具有最小值,且该第二接收天线Rx2接收到的该第二回波信号对应的波程随时间单调递减。
由图21中的(b)可以得知,该手势为由高向低再向高运动时,在第一目标时刻t1,该第一接收天线Rx1接收到的该第一回波信号对应的波程具有最小值,且该第一接收天线Rx1接收到的该第一回波信号对应的波程随时间先单调递减再单调递增;在第二目标时刻t2,该第二接收天线Rx2接收到的第二回波信号对应的波程具有最小值,且该第二接收天线Rx2接收到的该第二回波信号对应的波程随时间先单调递减再单调递增。
也就是说,当该第一目标时刻t1与该第二目标时刻t2相同,或该第一目标时刻t1与该第二目标时刻t2之间的差值小于时间阈值,该第一回波信号对应的波程和该第二回波信号对应的波程均随时间单调递减时,该手势识别装置可以确定该手势的运动轨迹为高低运动;当该第一目标时刻t1与该第二目标时刻t2相同,或该第一目标时刻t1与该第二目标时刻t2之间的差值小于时间阈值,该第一回波信号对应的波程和该第二回波信号对应的波程均随时间先单调递减再单调递增时,该手势识别装置可以确定该手势的运动轨迹为由高向低再向高。
需要说明的是,以用户使用手掌进行手势运动为例,在一种可能的实现方式中,该手掌所在平面平行或近似平行于屏幕,并进行左右或上下运动时,雷达电磁信号在手掌的运动方向,例如水平方向上可能会被手掌的不同区域反射,例如被五个手指分别反射,即五个手指可能被检测为五个不同的目标,根据这些目标各自的回波信号所对应的波程,结合得到上述随时间变化的波程数据,或者得到各自的波程随时间变化的波程数据,从而得到上述随时间变化的曲线。在另一种可能的实现方式中,如图13和图16所示,用户的手掌所在平面可以垂直或近似垂直于该屏幕,并进行左右运动,这样,手掌在左右或上下运动方向上运动时,雷达电磁信号在手掌的运动方向上受到反射的区域(例如手掌侧面)较小,手势识别的准确率更高。
还需要说明的是,以用户使用手掌进行手势运动为例,在一种可能的实现方式中,该手掌所在平面垂直或近似垂直于屏幕,并进行高低运动时,雷达电磁信号在手掌的运动方向,例如垂直方向上可能会被手掌的不同区域反射,例如被五个手指分别反射,即五个手指可能被检测为五个不同的目标,根据这些目标各自的回波信号所对应的波程,结合得到上述随时间变化的波程数据,或者得到各自的波程随时间变化的波程数据,从而得到上述随时间变化的曲线。在另一种可能的实现方式中,如图19所示,用户的手掌所在平面可以平行或近似平行于该屏幕,并进行高低运动,这样,手掌在高低方向上运动时,雷达电磁信号在手掌的运动方向上受到反射的区域(例如手掌侧面)较小,手势识别的准确率更高。
需要说明的是,由图15和图18可以得知,当该手势为左右运动和高低运动时,都存在以下结论:该第一目标时刻t1与该第二目标时刻t2相同,或该第一目标时刻t1与该第二目标时刻t2之间的差值小于时间阈值。也就是说,该手势识别装置的天线采用如图11所示的设置方式无法进行精确度更高的手势识别,即无法区分手势是由左向右还是由右向左,或区分手势是左右运动还是由高向低再向高运动。
因此,可以考虑再添加一个或多个接收天线,以增加判断运动轨迹的维度,从而提高手势的识别精确度。但是,这样一来,需要设置更多的天线,以及相应的的射频接收电路,成本太高。
在本申请实施例提供的手势识别方法中,该手势识别装置可以通过切换第一天线和第二天线对应的射频电路实现天线功能的切换,在不额外增加天线和射频电路数量的前提下,增加了判断运动轨迹的维度的效果,从而提高手势的识别精确度。
需要说明的是,本申请实施例中所述的天线功能包括发射功能或接收功能,天线实现的功能是由与其连接的射频电路决定的,天线与射频发射电路连接能够实现发射功能,即为发射天线,天线与射频接收电路连接能够实现接收功能,即为接收天线。
在一种可能的实现方式中,该第一天线和该第二天线,与发射通道和第一接收通道之间可以设置一个双刀双掷(double pole double throw,DPDT)开关,控制该DPDT开关按照预设的切换频率不断切换,使得该第一天线和该第二天线以该切换频率切换天线功能。
例如:如图22中的(a)所示,当该双刀双掷开关在第一切换状态,该第一天线与射频发射电路连接,该第二天线与第一射频接收电路连接,该第三天线与第二射频接收电路连接。即该第一天线为发射天线,该第二天线为第一接收天线,该第三天线为第二接收天线。
需要说明的是,在上述第一切换状态下,该第一天线、该第二天线和该第三天线的一发双收的天线模式的设置方式与图11类似。
又例如:如图22中的(b)所示,当该双刀双掷开关在第二切换状态,该第一天线与第一射频接收电路连接,该第二天线与射频发射电路连接,该第三天线与第二射频接收电路连接。即该第一天线为第一接收天线,该第二天线为发射天线,该第三天线为第二接收天线。
需要说明的是,在上述第二切换状态下,该第一天线、该第二天线和该第三天线的一发双收的天线模式的设置方式如图23所示。
也就是说,上述第一雷达电磁信号是在预设的至少一个第一时刻通过所述第一天线发送的,所述方法200还包括:在预设的至少一个第二时刻,通过所述第二天线向所述手势识别区域发射第二雷达电磁信号;通过所述第一天线接收所述第二雷达电磁信号经所述手势识别区域中的所述手势反射后得到的第三回波信号;通过所述第三天线接收所述第二雷达电磁信号经所述手势识别区域中的所述手势反射后得到的第四回波信号;根据所述第三回波信号,确定所述第一天线的第三目标时刻,在所述第三目标时刻,所述第三回波信号对应的波程小于预设的第三波程阈值;根据所述第四回波信号,确定所述第三天线的第四目标时刻,在所述第四目标时刻,所述第四回波信号对应的波程小于预设的第四波程阈值。
需要说明的是,该第一波程阈值、该第二波程阈值、该第三波程阈值和该第四波程阈值可以相同,或可以不同,本申请实施例对此不作限定。应理解,该第一波程阈值、该第二波程阈值、该第三波程阈值和该第四波程阈值的具体数值可以由天线的设置方式、手势识别区域与天线之间的位置关系和预定义的各类手势等决定。
可选地,所述至少一个第一时刻和所述至少一个第二时刻间隔设置。也就是说,至少一个第一时刻为该双刀双掷开关在第一切换状态下的至少一个时刻,至少一个第二时刻为该双刀双掷开关在第二切换状态下的至少一个时刻。
需要说明的是,该手势识别装置可以在雷达扫描周期中的扫描时间段内,以预设的切换频率通过切换上述双刀双掷开关,实现第一天线和第二天线的天线功能的切换。也就是说,该至少一个第一时刻和该至少一个第二时刻属于雷达扫描周期中的扫描时间段。
需要说明的是,该手势识别装置确定所述第一天线的第三目标时刻的过程可以参考上述确定该第一天线的第一目标时刻的过程,该手势识别装置确定该第二天线的第四目标时刻的过程可以参考上述确定该第二天线的第二目标时刻的过程,为避免重复,此处不再赘述。
相应地,S206包括:根据所述第一目标时刻、所述第二目标时刻、所述第三目标时刻和所述第四目标时刻,确定所述手势。
在一种可能的实现方式中,该手势识别装置可以根据第一切换状态下该第一目标时刻和该第二目标时刻的先后顺序、第二切换状态下该第三目标时刻和该第四目标时刻的先后顺序,以及该第一天线的位置、该第二天线的位置和该第三天线的位置,确定该手势。
下面将以在第一切换状态下,该第一天线、该第二天线和该第三天线按照如图11所示的一发双收的天线模式设置,在第二切换状态下,该第一天线、该第二天线和该第三天线按照如图23所示的一发双收的天线模式设置为例,介绍该手势识别装置根据第一切换状态下该第一目标时刻和该第二目标时刻的先后顺序、第二切换状态下该第三目标时刻和该第四目标时刻的先后顺序,以及该第一天线的位置、该第二天线的位置和该第三天线的位置,确定该手势的过程。
在一种可能的实现方式中,当该手势为图13所示的左右运动(不区分由左向右或由右向左)时,在第一切换状态下,该第一接收天线(Rx1)接收到的该第一回波信号对应的波程示意图如图24中的(a)所示,该第二接收天线(Rx2)接收到的该第二回波信号对应的波程示意图如图24中的(b)所示;在第二切换状态下,该第一接收天线(Rx1)接收到的该第三回波信号对应的波程示意图如图24中的(c)所示,该第二接收天线(Rx2)接收到的该第四回波信号对应的波程示意图如图24中的(d)所示,其中,图24中的(a)、(b)、(c)和(d)中的黑色原点示意性示出该手势在不同时刻的运动轨迹。
相应地,当该手势为由左向右运动时,在第一切换状态下,图24中的(a)所示的该第一回波信号对应的波程随时间变化的曲线如图25中的(a)中的虚线所示;图24中的(b)所示的该第二回波信号对应的波程随时间变化的曲线如图25中的(a)中的实线所示;在第二切换状态下,图24中的(c)所示的该第三回波信号对应的波程随时间变化的曲线如图25中的(c)中的虚线所示;图24中的(d)所示的该第四回波信号对应的波程随时间变化的曲线如图25中的(c)中的实线所示。
相应地,当该手势为由右向左运动时,在第一切换状态下,图24中的(a)所示的该第一回波信号对应的波程随时间变化的曲线如图25中的(b)中的虚线所示;图24中的(b)所示的该第二回波信号对应的波程随时间变化的曲线如图25中的(b)中的实线所示;在第二切换状态下,图24中的(c)所示的该第三回波信号对应的波程随时间变化的曲线如图25中的(d)中的虚线所示;图24中的(d)所示的该第四回波信号对应的波程随时间变化的曲线如图25中的(d)中的实线所示。
由图25中的(a)可以得知,该手势为由左向右运动时,在第一切换状态下,在第一目标时刻t1,该第一接收天线Rx1接收到的该第一回波信号对应的波程具有最小值;在第二目标时刻t2,该第二接收天线Rx2接收到的第二回波信号对应的波程具有最小值。
由图25中的(c)可以得知,该手势为由左向右运动时,在第二切换状态下,在第三目标时刻t3,该第一接收天线Rx1接收到的该第三回波信号对应的波程具有最小值;在第四目标时刻t4,该第二接收天线Rx2接收到的第四回波信号对应的波程具有最小值。
由图25中的(b)可以得知,该手势为由右向左运动时,在第一切换状态下,在第一目标时刻t1,该第一接收天线Rx1接收到的该第一回波信号对应的波程具有最小值;在第二目标时刻t2,该第二接收天线Rx2接收到的第二回波信号对应的波程具有最小值。
由图25中的(d)可以得知,该手势为由右向左运动时,在第二切换状态下,在第三目标时刻t3,该第一接收天线Rx1接收到的该第三回波信号对应的波程具有最小值;在第四目标时刻t4,该第二接收天线Rx2接收到的第四回波信号对应的波程具有最小值。
因此,该手势识别装置可以在以下不同情况下,确定该手势。
情况1-1:当在第一切换状态下,该第一目标时刻t1与该第二目标时刻t2相同,或该第一目标时刻t1与该第二目标时刻t2之间的差值小于时间阈值,在第二切换状态下,该第三目标时刻t3晚于该第四目标时刻t4时,该手势识别装置可以确定该手势的运动轨迹为由左向右。
进一步地,在本申请另一实施例中,当在第一切换状态下,该第一目标时刻t1与该第二目标时刻t2相同,或该第一目标时刻t1与该第二目标时刻t2之间的差值小于时间阈值,在第二切换状态下,该第三目标时刻t3晚于该第四目标时刻t4,且该第三目标时刻t3与该第四目标时刻t4之间的差值大于该时间阈值时,该手势识别装置可以确定该手势的运动轨迹为由左向右。
情况1-2:当在第一切换状态下,该第一目标时刻t1与该第二目标时刻t2相同,或该第一目标时刻t1与该第二目标时刻t2之间的差值小于时间阈值,在第二切换状态下,该第三目标时刻t3早于该第四目标时刻t4时,该手势识别装置可以确定该手势的运动轨迹为由右向左。
进一步地,在本申请另一实施例中,当在第一切换状态下,该第一目标时刻t1与该第二目标时刻t2相同,或该第一目标时刻t1与该第二目标时刻t2之间的差值小于时间阈值,在第二切换状态下,该第三目标时刻t3早于该第四目标时刻t4,且该第四目标时刻t4与该第三目标时刻t3之间的差值大于该时间阈值时,该手势识别装置可以确定该手势的运动轨迹为由右向左。
在一种可能的实现方式中,当该手势为图16所示的上下运动(不区分由下向上或由上向下)时,在第一切换状态下,该第一接收天线(Rx1)接收到的该第一回波信号对应的波程示意图如图26中的(a)所示,该第二接收天线(Rx2)接收到的该第二回波信号对应的波程示意图如图26中的(b)所示;在第二切换状态下,该第一接收天线(Rx1)接收到的该第三回波信号对应的波程示意图如图26中的(c)所示,该第二接收天线(Rx2)接收到的该第四回波信号对应的波程示意图如图26中的(d)所示,其中,图26中的(a)、(b)、(c)和(d)中的黑色原点示意性示出该手势在不同时刻的运动轨迹。
相应地,当该手势为由下向上运动时,在第一切换状态下,图26中的(a)所示的该第一回波信号对应的波程随时间变化的曲线如图27中的(a)中的虚线所示;图26中的(b)所示的该第二回波信号对应的波程随时间变化的曲线如图27中的(a)中的实线所示;在第二切换状态下,图26中的(c)所示的该第三回波信号对应的波程随时间变化的曲线如图27中的(c)中的虚线所示;图26中的(d)所示的该第四回波信号对应的波程随时间变化的曲线如图27中的(c)中的实线所示。
相应地,当该手势为由上向下运动时,在第一切换状态下,图26中的(a)所示的该第一回波信号对应的波程随时间变化的曲线如图27中的(b)中的虚线所示;图26中的(b)所示的该第二回波信号对应的波程随时间变化的曲线如图27中的(b)中的实线所示;在第二切换状态下,图26中的(c)所示的该第三回波信号对应的波程随时间变化的曲线如图27中的(d)中的虚线所示;图26中的(d)所示的该第四回波信号对应的波程随时间变化的曲线如图27中的(d)中的实线所示。
由图27中的(a)可以得知,该手势为由下向上运动时,在第一切换状态下,在第一目标时刻t1,该第一接收天线Rx1接收到的该第一回波信号对应的波程具有最小值;在第二目标时刻t2,该第二接收天线Rx2接收到的第二回波信号对应的波程具有最小值。
由图27中的(c)可以得知,该手势为由下向上运动时,在第二切换状态下,在第三目标时刻t3,该第一接收天线Rx1接收到的该第三回波信号对应的波程具有最小值;在第四目标时刻t4,该第二接收天线Rx2接收到的第四回波信号对应的波程具有最小值。
由图27中的(b)可以得知,该手势为由上向下运动时,在第一切换状态下,在第一目标时刻t1,该第一接收天线Rx1接收到的该第一回波信号对应的波程具有最小值;在第二目标时刻t2,该第二接收天线Rx2接收到的第二回波信号对应的波程具有最小值。
由图27中的(d)可以得知,该手势为由上向下运动时,在第二切换状态下,在第三目标时刻t3,该第一接收天线Rx1接收到的该第三回波信号对应的波程具有最小值;在第四目标时刻t4,该第二接收天线Rx2接收到的第四回波信号对应的波程具有最小值。
因此,该手势识别装置可以在以下不同情况下,确定该手势。
情况2-1:当在第一切换状态下,该第一目标时刻t1晚于该第二目标时刻t2,在第二切换状态下,该第三目标时刻t3与该第四目标时刻t4相同,或该第三目标时刻t3与该第四目标时刻t4之间的差值小于该时间阈值时,该手势识别装置可以确定该手势的运动轨迹为由下向上。
进一步地,在本申请另一实施例中,当在第一切换状态下,该第一目标时刻t1晚于该第二目标时刻t2,且该第一目标时刻t1与该第二目标时刻t2之间的差值大于时间阈值,在第二切换状态下,该第三目标时刻t3与该第四目标时刻t4相同,或该第三目标时刻t3与该第四目标时刻t4之间的差值小于该时间阈值时,该手势识别装置可以确定该手势的运动轨迹为由下向上。
情况2-2:当在第一切换状态下,该第一目标时刻t1早于该第二目标时刻t2,在第二切换状态下,该第三目标时刻t3与该第四目标时刻t4相同,或该第三目标时刻t3与该第四目标时刻t4之间的差值小于该时间阈值时,该手势识别装置可以确定该手势的运动轨迹为由上向下。
进一步地,在本申请另一实施例中,当在第一切换状态下,该第一目标时刻t1早于该第二目标时刻t2,且该第二目标时刻t2与该第一目标时刻t1之间的差值大于时间阈值,在第二切换状态下,该第三目标时刻t3与该第四目标时刻t4相同,或该第三目标时刻t3与该第四目标时刻t4之间的差值小于该时间阈值时,该手势识别装置可以确定该手势的运动轨迹为由上向下。
在一种可能的实现方式中,当该手势为图19所示的高低运动(不区分由高向低或由高向低再向高)时,在第一切换状态下,该第一接收天线(Rx1)接收到的该第一回波信号对应的波程示意图如图28中的(a)所示,该第二接收天线(Rx2)接收到的该第二回波信号对应的波程示意图如图28中的(b)所示;在第二切换状态下,该第一接收天线(Rx1)接收到的该第三回波信号对应的波程示意图如图28中的(c)所示,该第二接收天线(Rx2)接收到的该第四回波信号对应的波程示意图如图28中的(d)所示,其中,图28中的(a)、(b)、(c)和(d)中的黑色原点示意性示出该手势在不同时刻的运动轨迹。
相应地,当该手势为由高向低运动时,在第一切换状态下,图28中的(a)所示的该第一回波信号对应的波程随时间变化的曲线如图29中的(a)中的虚线所示;图28中的(b)所示的该第二回波信号对应的波程随时间变化的曲线如图29中的(a)中的实线所示;在第二切换状态下,图28中的(c)所示的该第三回波信号对应的波程随时间变化的曲线如图29中的(c)中的虚线所示;图28中的(d)所示的该第四回波信号对应的波程随时间变化的曲线如图29中的(c)中的实线所示。
相应地,当该手势为由高向低再向高运动时,在第一切换状态下,图28中的(a)所示的该第一回波信号对应的波程随时间变化的曲线如图29中的(b)中的虚线所示;图28中的(b)所示的该第二回波信号对应的波程随时间变化的曲线如图29中的(b)中的实线所示;在第二切换状态下,图28中的(c)所示的该第三回波信号对应的波程随时间变化的曲线如图29中的(d)中的虚线所示;图28中的(d)所示的该第四回波信号对应的波程随时间变化的曲线如图29中的(d)中的实线所示。
由图29中的(a)可以得知,该手势为由高向低运动时,在第一切换状态下,在第一目标时刻t1,该第一接收天线Rx1接收到的该第一回波信号对应的波程小于预设第一波程阈值,且该第一接收天线Rx1接收到的该第一回波信号对应的波程随时间单调递减;在第二目标时刻t2,该第二接收天线Rx2接收到的第二回波信号对应的波程小于预设的第二波程阈值,且该第二接收天线Rx2接收到的该第二回波信号对应的波程随时间单调递减。
由图29中的(c)可以得知,该手势为由高向低运动时,在第二切换状态下,在第三目标时刻t3,该第一接收天线Rx1接收到的该第三回波信号对应的波程小于该第一波程阈值,且该第一接收天线Rx1接收到的该第三回波信号对应的波程随时间单调递减;在第四目标时刻t4,该第二接收天线Rx2接收到的第四回波信号对应的波程小于该第二波程阈值,且该第二接收天线Rx2接收到的该第四回波信号对应的波程随时间单调递减。
由图29中的(b)可以得知,该手势为由高向低再向高运动时,在第一切换状态下,在第一目标时刻t1,该第一接收天线Rx1接收到的该第一回波信号对应的波程具有最小值,且该第一接收天线Rx1接收到的该第一回波信号对应的波程随时间先单调递减再单调递增;在第二目标时刻t2,该第二接收天线Rx2接收到的第二回波信号对应的波程具有最小值,且该第二接收天线Rx2接收到的该第二回波信号对应的波程随时间先单调递减再单调递增。
由图29中的(d)可以得知,该手势为由高向低再向高运动时,在第二切换状态下,在第三目标时刻t3,该第一接收天线Rx1接收到的该第三回波信号对应的波程具有最小值,且该第一接收天线Rx1接收到的该第三回波信号对应的波程随时间先单调递减再单调递增;在第四目标时刻t4,该第二接收天线Rx2接收到的第四回波信号对应的波程具有最小值,且该第二接收天线Rx2接收到的该第四回波信号对应的波程随时间先单调递减再单调递增。
因此,该手势识别装置可以在以下不同情况下,确定该手势。
情况3-1:当在第一切换状态下,该第一目标时刻t1与该第二目标时刻t2相同,或该第一目标时刻t1与该第二目标时刻t2之间的差值小于时间阈值,在第二切换状态下,该第三目标时刻t3与该第四目标时刻t4相同,或该第三目标时刻t3与该第四目标时刻t4之间的差值小于该时间阈值,且在该第一切换状态和该第二切换状态下,该第一回波信号对应的波程和该第二回波信号对应的波程均随时间单调递减时,该手势识别装置可以确定该手势的运动轨迹为由高向低。
情况3-2:当在第一切换状态下,该第一目标时刻t1与该第二目标时刻t2相同,或该第一目标时刻t1与该第二目标时刻t2之间的差值小于时间阈值,在第二切换状态下,该第三目标时刻t3与该第四目标时刻t4相同,或该第三目标时刻t3与该第四目标时刻t4之间的差值小于该时间阈值,且在该第一切换状态和该第二切换状态下,该第一回波信号对应的波程和该第二回波信号对应的波程均随时间先单调递减再单调递增时,该手势识别装置可以确定该手势的运动轨迹为由高向低再向高。
上面示例性以在第一切换状态下,该终端的该第一天线、该第二天线和该第三天线按照如图11所示的一发双收的天线模式设置,在第二切换状态下,该终端的该第一天线、该第二天线和该第三天线按照如图23所示的一发双收的天线模式设置为例,介绍该该手势识别装置确定该手势的过程,但本申请实施例不限于此。本申请实施例中,该手势识别装置确定手势的过程,随着天线模式和/或天线位置的设置方式的改变而改变,但是基本原理类似。
可选地,本申请实施例提供的手势识别方法能够识别的手势还可以包括上述各种运动的变形或组合,本申请实施例对此不作限定。
例如:若定义该手势识别装置能够识别的手势包括向右运动,则可以将类似于向右的其他手势也确定为向右运动,如图30中的(a)所示的从左下至右上运动、从左上至右下运动、从左至右弧形运动、从左至右波浪形运动、从左至右锯齿形运动、先向上后向右运动、或者先向下后向右运动等。
又例如:若定义该手势识别装置能够识别的手势包括向左运动,则可以将类似于向左的其他手势也确定为向左运动,如图30中的(b)所示的从右上至左下运动、从右下至左上运动、从右至左弧形运动、从右至左波浪形运动、从右至左锯齿形运动、先向上后向左运动、或者先向下后向左运动等。
同理,若定义该手势识别装置能够识别的手势包括向下运动和向上运动,则可以将类似于从上至下的其他手势也确定为向下运动,降类似于从下至上的其他手势也确定为向上运动,具体的其他手势与上述类似于从左至右的其他手势、或者类似于从右至左的其他手势相似,本申请实施例对此不再赘述。
又例如:可识别的手势还可以包括如图31所示的S型、O型等各种运动的组合。
采用本申请实施例提供的手势识别方法,终端配置位置不共线的发射天线(如第一天线)和至少两个接收天线(如第二天线和第三天线),通过发射天线向手势识别区域发射雷达电磁信号,并通过两个接收天线同时接收雷达电磁信号经手势识别区域中的手势反射产生的回波信号,从两个接收天线接收到的回波信号中提取由于手势的运动导致信号发射天线和不同接收天线之间的波程随时间变化的曲线,并根据各接收天线的曲线中的波程具有最小值的时刻的先后顺序,确定该手势。
还需要说明的是,当该终端只包括该第一天线和该第二天线,且该第一天线和该第二天线设置为一发一收的天线模式(如该第一天线为发射天线,该第二天线为接收天线)时,该手势识别装置可以参考与上述一发双收的天线模式类似的原理,实现手势识别区域中是否存在手势的识别,即能够检测到第二天线的回波信号对应的波程有变化时,能够识别出该手势识别区域中存在手势。
相比于现有技术中需要预先采集大量的天线信号数据进行模型训练,且在手势识别过程中需要对采集到的天线信号数据进行特征提取,计算量大且计算复杂度较高。本申请实施例提供的手势识别方法仅根据回波信号的多普勒相移随时间的变化就可以有效地分辨出手势,能够降低手势识别的复杂度。
上面结合图2至图31介绍了本申请实施例提供手势识别方法200,下面将结合图32至图33介绍用于执行上述方法200的手势识别装置。
需要说明的是,该手势识别装置可以为上述方法200实施例中所述的手势识别装置,能够执行上述方法200中由该手势识别装置所实现的方法。
可以理解的是,该手势识别装置为了实现上述功能,其包含了执行各个功能相应的硬件和/或软件模块。结合本文中所公开的实施例描述的各示例的算法步骤,本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。本领域技术人员可以结合实施例对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
本实施例可以根据上述方法示例对该手势识别装置进行功能模块的划分,例如,可以对应各个功能划分各个功能模块,也可以将两个或两个以上的功能集成在一个处理模块中。上述集成的模块可以采用硬件的形式实现。需要说明的是,本实施例中对模块的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
在采用对应各个功能划分各个功能模块的情况下,图32示出了上述实施例中涉及的手势识别装置的一种可能的组成示意图,如图32所示,手势识别装置300可以包括:通信单元310和处理单元320。
其中,处理单元320可以通过通信单元310控制至少两个天线实现上述方法200实施例,和/或用于本文所描述的技术的其他过程。
需要说明的是,上述方法实施例涉及的各步骤的所有相关内容均可以援引到对应功能模块的功能描述,在此不再赘述。
在采用集成的单元的情况下,该手势识别装置300可以包括处理单元、存储单元和通信单元。其中,处理单元可以用于对该手势识别装置300的动作进行控制管理,例如,可以用于支持该手势识别装置300执行上述各个单元执行的步骤。存储单元可以用于支持该手势识别装置300执行存储程序代码和数据等。该通信单元可以用于控制发射天线发射雷达电磁信号,并控制接收天线接收雷达电磁信号的回波信号。
其中,处理单元可以是处理器或控制器。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框,模块和电路。处理器也可以是实现计算功能的组合,例如包含一个或多个微处理器组合,数字信号处理(digital signal processing,DSP)和微处理器的组合等等。存储单元可以是存储器。通信单元具体可以为射频电路、蓝牙芯片、Wi-Fi芯片等与其他电子设备交互的设备。
在一种可能的实现方式中,本申请实施例所涉及的手势识别装置可以为具有图33所示结构的装置400,该装置400包括处理器410和通信接口420,该处理器410和通信接口420通过内部连接通路互相通信。图32中的处理单元320所实现的相关功能可以由处理器410来实现,通信单元310所实现的相关功能可以由处理器410通过通信接口420控制至少两个天线来实现。
可选地,该装置400还可以包括存储器430,该处理器410、该通信接口420和该存储器430通过内部连接通路互相通信。图32中所述的存储单元所实现的相关功能可以由存储器430来实现。
本申请实施例还提供一种计算机存储介质,该计算机存储介质中存储有计算机指令,当该计算机指令在电子设备上运行时,使得电子设备执行上述相关方法步骤实现上述实施例中的手势识别方法。
本申请实施例还提供了一种计算机程序产品,当该计算机程序产品在计算机上运行时,使得计算机执行上述相关步骤,以实现上述实施例中的手势识别方法。
本申请实施例还提供一种装置,这个装置具体可以是芯片、集成电路、组件或模块。具体的,该装置可包括相连的处理器和用于存储指令的存储器,或者该装置包括至少一个处理器,用于从外部存储器获取指令。当装置运行时,处理器可执行指令,以使芯片执行上述各方法实施例中的手势识别方法。
图34示出了一种芯片500的结构示意图。芯片500包括一个或多个处理器510以及接口电路520。可选的,所述芯片500还可以包含总线530。
处理器510可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法200的各步骤可以通过处理器510中的硬件的集成逻辑电路或者软件形式的指令完成。
可选地,上述的处理器510可以是通用处理器、DSP、ASIC、FPGA或者其它可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本申请实施例中的公开的各方法、步骤。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
接口电路520可以用于数据、指令或者信息的发送或者接收,处理器510可以利用接口电路520接收的数据、指令或者其它信息,进行加工,可以将加工完成信息通过接口电路520发送出去。
可选的,芯片还包括存储器,存储器可以包括只读存储器和随机存取存储器,并向处理器提供操作指令和数据。存储器的一部分还可以包括非易失性随机存取存储器(non-volatile random access memory,NVRAM)。
可选的,存储器存储了可执行软件模块或者数据结构,处理器可以通过调用存储器存储的操作指令(该操作指令可存储在操作系统中),执行相应的操作。
可选的,芯片可以使用在本申请实施例涉及的手势识别装置或终端中。可选的,接口电路520可用于输出处理器510的执行结果。关于本申请的一个或多个实施例提供的手势识别方法可参考前述各个实施例,这里不再赘述。
需要说明的,处理器510、接口电路520各自对应的功能既可以通过硬件设计实现,也可以通过软件设计来实现,还可以通过软硬件结合的方式来实现,这里不作限制。
本申请实施例还提供一种终端,该终端可以包括至少两个天线以及上述图32中所述的装置300、图33中所述的装置400或图34中所述的装置500。
其中,本实施例提供的手势识别装置、终端、计算机存储介质、计算机程序产品或芯片均用于执行上文所提供的对应的方法,因此,其所能达到的有益效果可参考上文所提供的对应的方法中的有益效果,此处不再赘述。
应理解,在本申请的各种实施例中,上述各过程的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本申请实施例的实施过程构成任何限定。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应所述以权利要求的保护范围为准。
Claims (20)
1.一种手势识别方法,其特征在于,包括:
通过第一天线向手势识别区域发送第一雷达电磁信号;
通过第二天线接收所述第一雷达电磁信号经所述手势识别区域中的手势反射后得到的第一回波信号;
通过第三天线接收所述第一雷达电磁信号经所述手势识别区域中的所述手势反射后得到的第二回波信号;
根据所述第一回波信号,确定所述第二天线的第一目标时刻,在所述第一目标时刻,所述第一回波信号对应的波程小于预设的第一波程阈值;
根据所述第二回波信号,确定所述第三天线的第二目标时刻,在所述第二目标时刻,所述第二回波信号对应的波程小于预设的第二波程阈值;
根据所述第一目标时刻和所述第二目标时刻,确定所述手势;
其中,所述第一天线、所述第二天线和所述第三天线不共线,所述手势识别区域位于所述第一天线、所述第二天线和所述第三天线的上方。
2.根据权利要求1所述的方法,其特征在于,在所述第一目标时刻,所述第一回波信号对应的波程具有最小值;在所述第二目标时刻,所述第二回波信号对应的波程具有最小值。
3.根据权利要求1或2所述的方法,其特征在于,所述根据所述第一目标时刻和所述第二目标时刻,确定所述手势,包括:
根据所述第一目标时刻、所述第二目标时刻、所述第一天线的位置、所述第二天线的位置和所述第三天线的位置,确定所述手势。
4.根据权利要求1至3中任一项所述的方法,其特征在于,所述第一目标时刻是根据所述第一回波信号对应的波程随时间变化的第一波程数据确定的;所述第二目标时刻是根据所述第二回波信号对应的波程随时间变化的第二波程数据确定的。
5.根据权利要求4所述的方法,其特征在于,所述第一波程数据是根据所述第一回波信号的相位差、时间差或距离差中的至少一项确定的;所述第二波程数据是根据所述第二回波信号的相位差、时间差或距离差中的至少一项确定的。
6.根据权利要求1至5中任一项所述的方法,其特征在于,所述第一雷达电磁信号是在预设的至少一个第一时刻通过所述第一天线发送的,所述方法还包括:
在预设的至少一个第二时刻,通过所述第二天线向所述手势识别区域发射第二雷达电磁信号;
通过所述第一天线接收所述第二雷达电磁信号经所述手势识别区域中的所述手势反射后得到的第三回波信号;
通过所述第三天线接收所述第二雷达电磁信号经所述手势识别区域中的所述手势反射后得到的第四回波信号;
根据所述第三回波信号,确定所述第一天线的第三目标时刻,在所述第三目标时刻,所述第三回波信号对应的波程小于预设的第三波程阈值;
根据所述第四回波信号,确定所述第三天线的第四目标时刻,在所述第四目标时刻,所述第四回波信号对应的波程小于预设的第四波程阈值;
所述根据所述第一目标时刻和所述第二目标时刻,确定所述手势,包括:
根据所述第一目标时刻、所述第二目标时刻、所述第三目标时刻和所述第四目标时刻,确定所述手势。
7.根据权利要求6所述的方法,其特征在于,所述至少一个第一时刻和所述至少一个第二时刻间隔设置。
8.根据权利要求1至7中任一项所述的方法,其特征在于,所述第一雷达电磁信号为单频连续波或单频不连续波。
9.一种手势识别装置,其特征在于,包括第一通信接口、第二通信接口、第三通信接口和处理器,所述第一通信接口、所述第二通信接口和所述处理器耦合;
所述第一通信接口用于通过第一天线向手势识别区域发送第一雷达电磁信号;
所述第二通信接口用于通过第二天线接收所述第一雷达电磁信号经所述手势识别区域中手势反射后得到的第一回波信号;
所述第三通信接口用于通过第三天线接收所述第一雷达电磁信号经所述手势反射后得到的第二回波信号;
所述处理器用于根据所述第一回波信号,确定所述第二天线的第一目标时刻,在所述第一目标时刻,所述第一回波信号对应的波程小于预设的第一波程阈值;根据所述第二回波信号,确定所述第三天线的第二目标时刻,在所述第二目标时刻,所述第二回波信号对应的波程小于预设的第二波程阈值;根据所述第一目标时刻和所述第二目标时刻,确定所述手势;
其中,所述第一天线、所述第二天线和所述第三天线不共线,所述手势识别区域位于所述第一天线、所述第二天线和所述第三天线的上方。
10.根据权利要求9所述的装置,其特征在于,在所述第一目标时刻,所述第一回波信号对应的波程具有最小值;在所述第二目标时刻,所述第二回波信号对应的波程具有最小值。
11.根据权利要求9或10所述的装置,其特征在于,所述处理器具体用于:
根据所述第一目标时刻、所述第二目标时刻、所述第一天线的位置、所述第二天线的位置和所述第三天线的位置,确定所述手势。
12.根据权利要求9至11中任一项所述的装置,其特征在于,所述第一目标时刻是根据所述第一回波信号对应的波程随时间变化的第一波程数据确定的;所述第二目标时刻是根据所述第二回波信号对应的波程随时间变化的第二波程数据确定的。
13.根据权利要求12所述的装置,其特征在于,所述第一波程数据是根据所述第一回波信号的相位差、时间差或距离差中的至少一项确定的;所述第二波程数据是根据所述第二回波信号的相位差、时间差或距离差中的至少一项确定的。
14.根据权利要求9至13中任一项所述的装置,其特征在于,所述第一雷达电磁信号是在预设的至少一个第一时刻通过所述第一天线发送的;
所述第二通信接口还用于在预设的至少一个第二时刻,通过所述第二天线向所述手势识别区域发射第二雷达电磁信号;
所述第一通信接口还用于通过所述第一天线接收所述第二雷达电磁信号经所述手势识别区域中的所述手势反射后得到的第三回波信号;
所述第三通信接口还用于通过所述第三天线接收所述第二雷达电磁信号经所述手势识别区域中的所述手势反射后得到的第四回波信号;
所述处理器还用于根据所述第三回波信号,确定所述第一天线的第三目标时刻,在所述第三目标时刻,所述第三回波信号对应的波程小于预设的第三波程阈值;根据所述第四回波信号,确定所述第三天线的第四目标时刻,在所述第四目标时刻,所述第四回波信号对应的波程小于预设的第四波程阈值;根据所述第一目标时刻、所述第二目标时刻、所述第三目标时刻和所述第四目标时刻,确定所述手势。
15.根据权利要求14所述的装置,其特征在于,所述至少一个第一时刻和所述至少一个第二时刻间隔设置。
16.根据权利要求9至15中任一项所述的装置,其特征在于,所述第一雷达电磁信号为单频连续波或单频不连续波。
17.一种终端,其特征在于,包括第一天线、第二天线、第三天线和权利要求9至16中任一项所述的手势识别装置,所述第一天线、所述第二天线、所述第三天线分别与所述手势识别装置连接,且所述第一天线、所述第二天线和所述第三天线不共线。
18.一种芯片装置,包括至少一个处理器以及接口电路,所述接口电路用于为所述至少一个处理器提供数据、指令或者信息的发送或接收,其特征在于,当所述至少一个处理器执行程序代码或者指令时,实现如权利要求1至8中任一项所述的方法。
19.一种计算机可读存储介质,用于存储计算机程序,其特征在于,所述计算机程序包括用于实现权利要求1至8中任一项所述的方法的指令。
20.一种计算机程序产品,所述计算机程序产品中包含指令,其特征在于,当所述指令在计算机或处理器上运行时,使得所述计算机或所述处理器实现权利要求1至8中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010642990.4A CN113900507A (zh) | 2020-07-06 | 2020-07-06 | 手势识别方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010642990.4A CN113900507A (zh) | 2020-07-06 | 2020-07-06 | 手势识别方法和装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113900507A true CN113900507A (zh) | 2022-01-07 |
Family
ID=79186777
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010642990.4A Pending CN113900507A (zh) | 2020-07-06 | 2020-07-06 | 手势识别方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113900507A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114397963A (zh) * | 2022-01-18 | 2022-04-26 | 深圳大学 | 一种手势识别方法、装置、电子设备及存储介质 |
CN117008075A (zh) * | 2023-10-07 | 2023-11-07 | 西安乾景防务技术有限公司 | 一种基于微波天线阵列的无线手势采集方法及系统 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105786185A (zh) * | 2016-03-12 | 2016-07-20 | 浙江大学 | 基于连续波微多普勒雷达的非接触式手势识别系统与方法 |
DE202017105261U1 (de) * | 2016-12-05 | 2018-03-08 | Google LLC (n.d.Ges.d. Staates Delaware) | Gleichzeitige Erkennung von absoluter Distanz und relativer Bewegung zum Erfassen von Aktionsgesten |
CN109857251A (zh) * | 2019-01-16 | 2019-06-07 | 珠海格力电器股份有限公司 | 智能家电的手势识别控制方法、装置、存储介质及设备 |
CN110034375A (zh) * | 2019-04-19 | 2019-07-19 | Oppo广东移动通信有限公司 | 天线模组及电子设备 |
CN110741385A (zh) * | 2019-06-26 | 2020-01-31 | Oppo广东移动通信有限公司 | 手势识别的方法和设备、定位追踪的方法和设备 |
WO2020093278A1 (zh) * | 2018-11-07 | 2020-05-14 | 华为技术有限公司 | 一种基于多天线的手势识别方法及装置 |
-
2020
- 2020-07-06 CN CN202010642990.4A patent/CN113900507A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105786185A (zh) * | 2016-03-12 | 2016-07-20 | 浙江大学 | 基于连续波微多普勒雷达的非接触式手势识别系统与方法 |
DE202017105261U1 (de) * | 2016-12-05 | 2018-03-08 | Google LLC (n.d.Ges.d. Staates Delaware) | Gleichzeitige Erkennung von absoluter Distanz und relativer Bewegung zum Erfassen von Aktionsgesten |
WO2020093278A1 (zh) * | 2018-11-07 | 2020-05-14 | 华为技术有限公司 | 一种基于多天线的手势识别方法及装置 |
CN109857251A (zh) * | 2019-01-16 | 2019-06-07 | 珠海格力电器股份有限公司 | 智能家电的手势识别控制方法、装置、存储介质及设备 |
CN110034375A (zh) * | 2019-04-19 | 2019-07-19 | Oppo广东移动通信有限公司 | 天线模组及电子设备 |
CN110741385A (zh) * | 2019-06-26 | 2020-01-31 | Oppo广东移动通信有限公司 | 手势识别的方法和设备、定位追踪的方法和设备 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114397963A (zh) * | 2022-01-18 | 2022-04-26 | 深圳大学 | 一种手势识别方法、装置、电子设备及存储介质 |
CN114397963B (zh) * | 2022-01-18 | 2023-06-30 | 深圳大学 | 一种手势识别方法、装置、电子设备及存储介质 |
CN117008075A (zh) * | 2023-10-07 | 2023-11-07 | 西安乾景防务技术有限公司 | 一种基于微波天线阵列的无线手势采集方法及系统 |
CN117008075B (zh) * | 2023-10-07 | 2024-01-23 | 西安乾景防务技术有限公司 | 一种基于微波天线阵列的无线手势采集方法及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101527827B1 (ko) | 분할스크린 디스플레이 방법 및 장치, 및 이의 전자 장치 | |
US7643850B2 (en) | Cellular communication terminals and methods that sense terminal movement for cursor control | |
US11829581B2 (en) | Display control method and terminal | |
CN105765489A (zh) | 用于检测可穿戴无线设备上的传感器输入的技术 | |
KR20170025570A (ko) | 와치 타입 이동 단말기 및 그의 동작 방법 | |
CN106060612A (zh) | 视频播放方法及视频播放装置 | |
WO2023051411A1 (zh) | 一种识别触摸操作的方法及电子设备 | |
CN113900507A (zh) | 手势识别方法和装置 | |
KR20170081391A (ko) | 이동단말기 및 그 제어방법 | |
EP4152136A1 (en) | Multi-task management method and terminal device | |
KR20160136676A (ko) | 이동단말기 및 그 제어방법 | |
CN103345312A (zh) | 以智能终端同时作为主机、鼠标和触摸板的系统及方法 | |
CN105487689A (zh) | 一种指环鼠标及利用指环鼠标操控移动终端的方法 | |
US20220163650A1 (en) | Electronic device for identifying attribute of object by using millimeter wave and control method therefor | |
CN114125546B (zh) | 信息分享的方法、装置、终端设备和存储介质 | |
CN112882572A (zh) | 触控面板、电子设备及工作状态的控制方法 | |
CN115398879A (zh) | 用于以增强现实进行通信的电子装置及其方法 | |
CN112689812A (zh) | 一种基于多天线的手势识别方法及装置 | |
CN113495267A (zh) | 雷达天线阵列、移动终端、手势识别方法及装置 | |
US9432936B2 (en) | Portable electronic device | |
EP4321978A1 (en) | Display method, electronic device, storage medium and program product | |
CN107463246A (zh) | 一种信息处理方法及电子设备 | |
WO2021147428A1 (zh) | 手势识别方法、装置、终端设备及计算机存储介质 | |
KR20170024445A (ko) | 이동단말기 및 그 제어방법 | |
EP3313054B1 (en) | System with an electronic device having auxiliary device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |