CN103713730B - 应用于智能终端的空中手势识别方法及装置 - Google Patents

应用于智能终端的空中手势识别方法及装置 Download PDF

Info

Publication number
CN103713730B
CN103713730B CN201210374890.3A CN201210374890A CN103713730B CN 103713730 B CN103713730 B CN 103713730B CN 201210374890 A CN201210374890 A CN 201210374890A CN 103713730 B CN103713730 B CN 103713730B
Authority
CN
China
Prior art keywords
gesture
aerial
strokes
coding
immediately
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201210374890.3A
Other languages
English (en)
Other versions
CN103713730A (zh
Inventor
余方波
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
JUCAI MICRO DEVICES (SHENZHEN) CO Ltd
Original Assignee
JUCAI MICRO DEVICES (SHENZHEN) CO Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by JUCAI MICRO DEVICES (SHENZHEN) CO Ltd filed Critical JUCAI MICRO DEVICES (SHENZHEN) CO Ltd
Priority to CN201210374890.3A priority Critical patent/CN103713730B/zh
Priority to PCT/CN2013/080717 priority patent/WO2014048170A1/zh
Publication of CN103713730A publication Critical patent/CN103713730A/zh
Application granted granted Critical
Publication of CN103713730B publication Critical patent/CN103713730B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • G06V40/28Recognition of hand or arm movements, e.g. recognition of deaf sign language

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明适用于电子领域,提供了一种应用于智能终端的空中手势识别方法及装置,该方法包括:设定的采样频率获取空中手势的即时点位置信息;根据即时点位置信息确定即时轨迹段所对应的手势笔画及其笔画编号;根据该手势笔画的编号和计算出的即时轨迹段的位移,获取该手势笔画对应的编码;将空中手势中包含的所有即时轨迹段所对应的手势笔画的编码按先后顺序组合起来得到该空中手势的编码。本发明实施例提供的技术方案具有识别快、精度高的优点。

Description

应用于智能终端的空中手势识别方法及装置
技术领域
本发明属于人机交互领域,尤其涉及一种应用于智能终端的空中手势识别方法及装置。
背景技术
随着各种智能传感器的广泛应用,许多智能设备,如手机、智能电视、平板电脑、游戏机、智能手柄等电子设备,可以实现空中手势的识别。这些空中手势可以是通过挥动手臂产生、也可以是通过挥动智能装置(手机、智能手柄、体感手套)产生。空中手势可以有很广泛的应用,如操作智能电视、玩游戏、实现空中输入法等。
空中手势不但操作简单,而且生动有趣。怎样有效的给空中手势编码,并有效的识别空中手势成为一项技术难点和关键技术。
现有技术的空中手势识别技术是根据分析空中手势产生的事后轨迹图片来识别,或者固定化几个预置的手势模型,通过复杂的算法运算来识别。
因此,现有技术的技术方案不但忽视了空中手势运动产生的特征,同时运算复杂,系统资源占用多,难以适应复杂的空中手势应用,并且现有技术无法做到准确识别空中手势。
发明内容
本发明实施例的目的在于提供一种简便有效的应用于智能终端的空中手势识别方法及装置,以提高空中手势的识别效率和准确率,从而促进空中手势在智能电子设备领域的广泛应用。
本发明实施例是这样实现的,提供一种应用于智能终端的空中手势识别方法及装置,所述方法包括:
以设定的采样频率获取空中手势的即时点位置信息;
根据所述即时点位置信息确定即时轨迹段所对应的手势笔画及所述手势笔画的笔画编号;
根据所述笔画编号和依据所述即时点位置信息计算出的即时轨迹段的位移,获取所述手势笔画对应的编码;
将所述空中手势中包含的所有即时轨迹段所对应的手势笔画的编码按先后顺序组合起来得到所述空中手势的编码。
可选的,以设定的采样频率获取空中手势的即时点位置信息,具体包括:
将第一个即时点作为起点,以所述起点为参考,以设定的采样频率采样即时点相对起点的相对位置信息。
可选的,所述根据即时点位置信息确定即时轨迹段所对应的手势笔画及所述手势笔画的笔画编号,具体包括:
将所有所述即时点位置信息按先后次序连接起来的曲线即为空间手势的轨迹;按各相邻的采样点的角度属性是否相同将所述空间手势轨迹划分为多个即时轨迹段,将所述多个即时轨迹段与预先存储的数据库中的数据进行比对得到每个即时轨迹段对应一个手势笔画及 其笔画编号。
可选的,所述将所述所有即时点位置信息按先后次序连接起来的曲线即为空间手势的轨迹;按各相邻的采样点的角度属性是否相同将所述空间手势轨迹划分为多个即时轨迹段,使得每个即时轨迹段对应一个手势笔画具体包括:
以当前所述即时轨迹段所述起点为原点建立坐标系;跟踪运动轨迹的即时点坐标,动态计算即时点与当前即时轨迹段起点的连线和x坐标轴之间的角度α,同时动态计算即时点与上一采样点的连线与x坐标轴之间的角度β;根据α和β,得出移动方向,并进一步确定当前即时轨迹段所对应的手势笔画及其笔画编号;
当α和β属性发生根本变化时,则当前轨迹段结束,所述即时点为当前轨迹段的终点,同时该即时点也为下一个即时轨迹段的起点;所述α和β属性发生根本变化具体为,当所述α和β的变化值超出阈值时,确定所述α和β属性发生根本变化。
可选的,所述根据所述笔画编号和根据所述即时点位置信息计算出的即时轨迹段的位移,获取所述手势笔画对应的编码具体包括:
根据当前所述即时轨迹段的所述起点和终点计算当前即时轨迹段的位移;根据所述位移,参照预先设置的位移阀值区分长手势和短手势;根据手势笔画的笔画编号和位移查询预存的手势笔画编码表获取当前轨迹段对应的手势编码。
可选的,所述方法将空中手势中包含的所有所述即时轨迹段所对应的所述手势笔画的笔画编码按先后顺序组合起来得到所述空中手势的编码,具体包括:
将空中手势的轨迹分成一个个所述即时轨迹段后,每个所述即时 轨迹段对应一个所述手势笔画编码,所述智能终端按先后顺序将这些所述手势笔画编码组合起来得到所述空中手势的编码。
另一方面,本发明实施例还提供一种应用于智能终端的空中手势识别装置,所述识别装置包括:
传感器单元,用于以设定的采样频率获取空中手势的即时点位置信息;
判断单元,用于根据所述即时点位置信息确定即时轨迹段所对应的手势笔画及笔画编号;
笔画编码获取单元,用于根据所述笔画编号和依据所述即时点位置信息计算出的即时轨迹段的位移,获取所述手势笔画对应的编码;
手势编码获取单元,用于将空中手势中包含的所有即时轨道段所对应的手势笔画按先后顺序组合起来得到该空中手势的编码。
手势控制单元,用于根据所述空中手势的编码对空中手势进行识别,并控制智能终端。
可选的,上述传感器单元进一步包括:
采样模块,用于将第一个即时点作为起点,以设定的采样频率采样即时点相对起点的相对位置信息。
可选的,上述判断单元进一步包括:
比对模块,用于将所有即时点位置信息按先后次序连接起来的曲线即为空间手势的轨迹;按各相邻的采样点的角度属性是否相同将所述空间手势的轨迹划分为多个即时轨迹段,将该多个即时轨迹段与预先存储的数据库中的数据进行比对得到每个即时轨迹段对应一个手势笔画及笔画编号。
可选的,上述对比模块进一步包括:
角度判断子模块,用于以当前即时轨迹段起点为原点建立坐标系;跟踪运动轨迹的即时点坐标,动态计算即时点与当前即时轨迹段起点的连线和x坐标轴之间的角度α,同时动态计算所述即时点与上一采样点的连线与x坐标轴之间的角度β;根据α和β,得出移动方向,并进一步确定当前即时轨迹段所对应的手势笔画及其笔画编号;当α和β属性发生根本变化时,则当前轨迹段结束,所述即时点为当前轨迹段的终点,同时所述即时点也为下一个即时轨迹段的起点;
所述α和β属性发生根本变化具体为,当所述α和β的变化值超出预先设置的阈值时,确定所述α和β属性发生根本变化。
可选的,上述笔画编码获取单元进一步包括:
位移判断模块,用于根据当前即时轨迹段的所述起点和终点计算当前即时轨迹段的位移;根据所述位移,参照预先设置的位移阀值区分长手势和短手势;编码查询模块,用于根据手势笔画的笔画编号和位移查询预存的手势笔画编码表获取当前轨迹段对应的手势编码。
可选的,上述手势编码获取单元进一步包括:
分割模块,用于将空中手势的轨迹分成一个个即时轨迹段后,每个即时轨迹段对应一个手势笔画编码;
组合模块,用于按先后顺序将所述手势笔画编码组合起来得到空中手势的编码。
又一方面,提供一种智能终端,该智能终端包括上述空中手势识别装置。
在本发明实施例中,本发明提供的技术方案通过获取用户空中手势的运动轨迹,该运动轨迹包括:起点、终点、移动方向和角度,根 据该运动轨迹确定空中手势的笔画序列,组合笔画序列得到该空中手势的编码,再通过空中手势编码的匹配运算识别空中手势的含义,进而完成空中手势的识别。
由于本发明的技术方案是通过运动轨迹来识别手势充分考虑到空中手势是运动的特点,同时,本发明提供了一种简便有效的方法给空中手势识别,通过这种空中手势的编码方法,可以很高效、准确地识别空中手势,进而通过空中手势控制智能终端。
附图说明
图1是本发明实施例提供的一种应用于智能终端的空中手势编码方法的流程图;
图2是本发明实施例提供的一种应用于智能终端的空中手势识别装置的示意图;
图3是本发明实施例提供的手势笔画编码表;
图4是本发明实施提供的手势笔画原理图一;
图5是本发明实施提供的手势笔画原理图二;
图6是本发明实施例提供的手势例子示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本发明提供的技术方案仅仅针对于空中手势的识别,对接触式触摸手势的识别并不涉及,另外,本发明实施例的技术方案不仅针对二维空中手势,还针对三维的空中手势。
本发明具体实施方式提供的一种空中手势识别的方法,该方法由手势识别装置完成,该方法如图1所示,包括:
S11、以设定的采样频率(该采样频率用户可以自行设定,本发明具体实施方式并不限定具体的值)获取空中手势的即时点位置信息;
S12、根据即时点位置信息确定即时轨迹段所对应的手势笔画及其笔画编号;
S13、根据该手势笔画的编号和计算出的即时轨迹段的位移,获取该手势笔画对应的编码;
S14、将空中手势中包含的所有即时轨迹段所对应的手势笔画的编码按先后顺序组合起来得到该空中手势的编码。
可选的,实现S11的方法具体可以为:
在获取空中手势的轨迹时,总是以一定采样频率获取即时点位置信息的,如图4所示,该空中手势被采样到(A、B、C、D、E、F、G)7个点,其中点A为该空中手势的起点,点G为该空中手势的终点;
一般以第一个即时点作为起点,以起点为参考,采样即时点相对起点的相对位置信息;
可选的,实现S12的方法具体可以为:
空中手势的轨迹即为按先后次序将所有采样点连接起来的曲线; 一个空中手势的轨迹又可按各相邻的采样点的角度属性是否相同划分为一个个即时轨迹段,将所述多个即时轨迹段与预先存储的数据库中的数据(可以根据需要对数据库中的数据进行增减,本发明实施例不对数据库数据做限定)进行比对得到每个即时轨迹段对应一个手势笔画;
如图4所示,以当前即时轨迹段起点A为原点建立坐标系;跟踪运动轨迹的即时点坐标,比如点C,动态计算即时点C与当前即时轨迹段起点A的连线和x坐标轴之间的角度α,同时动态计算即时点C与上一采样点B的连线与x坐标轴之间的角度β;根据α和β,得出移动方向,并进一步确定当前即时轨迹段所对应的手势笔画及其笔画编号;当α和β属性发生根本变化时,则当前轨迹段结束,该即时点为当前轨迹段的终点,同时该即时点也为下一个即时轨迹段的起点,如此类推;上述α和β属性发生根本变化具体为,当所述α和β的变化值超出阈值(角度的阀值为角度的范围,可以根据需要设定,比如-22.5°<α<=22.5°,也可以设定为-45°<α<=45°,本发明并不限定阀值的具体值)时,确定所述α和β属性发生根本变化。
可选的,实现S13的方法具体可以为:
当一个即时轨迹段结束时,以当前即时点为终点计算当前即时轨迹段的位移;根据该位移,参照预先设置的位移阀值,区分长手势和短手势;根据手势笔画编号和位移,查询预存的手势笔画编码表,获取当前轨迹段对应的手势编码;
可选的,实现S14的方法具体可以为:
将空中手势的轨迹分成一个个即时轨迹段后,每个即时轨迹段对应一个手势笔画编码,按先后顺序将这些手势笔画编码组合起来得到该空中手势的编码。
上述空中手势编码方法依赖一套预先确定的手势笔画集合,如图3所示,为一实施例的手势笔画编码表。很容易发现,表中的每个手势笔画都是空中手势轨迹的最小独立单元,都有一个独立编号,各手势笔画的属性:起点、终点、移动方向和角度等有本质区别。
需要说明的是,本手势笔画集合中,手势笔画的编码以字母表示,每个手势笔画按位移的大小分别对应两个编码,即,系统设置一个△值(即位移阈值),用来区分长手势和短手势,长手势以小写字母编码,短手势以大写字母编码,当然也可以为长手势以大写字母编码,短手势以小写字母编码。
结合图5,我们可以更好的理解本案中所定义的手势笔画,在图5中,虚线按角度将整个圆周划分为8个区间,正好对应8个手势笔画。以△值为半径的小圆很好的说明大手势和小手势的区别,比如从原点o为起点,采样点都落在区域I中时(即:-22.5°<α<=22.5°),且-22.5°<β<=22.5°,则该手势笔画编号为1,编码为A;如果采样点都落在区域II中时(即:-22.5°<α<=22.5°),且-22.5°<β<=22.5°,则该手势笔画编号也为1,但编码为a,依次类推。
由于本发明的技术方案所提供的空中手势编码很巧妙地通过手势笔画序列将空中手势运动轨迹的过程完整的记录下来了,因此有利于提高空中手势的识别准确度。
空中手势编码为字符编码,可以存储,还可以支持智能匹配,通 过与预存的编码匹配,可以很好的识别空中手势的含义。
本发明实施例提供的一种空中手势的识别装置,是上述空中手势识别方法的一应用终端,如图2所示,包括:
21、传感器单元;
22、判断单元;
23、笔画编码获取单元;
24、手势编码获取单元;
25、手势控制单元;
其中
传感器单元21,用于以设定的采样频率获取空中手势的即时点位置信息;
判断单元22,用于根据所述即时点位置信息确定即时轨迹段所对应的手势笔画及笔画编号;
笔画编码获取单元23,用于根据所述笔画编号和依据所述即时点位置信息计算出的即时轨迹段的位移,获取所述手势笔画对应的编码;
手势编码获取单元24,用于将空中手势中包含的所有即时轨道段所对应的手势笔画按先后顺序组合起来得到该空中手势的编码。
手势控制单元25,用于根据所述空中手势的编码对空中手势进行识别,并控制智能终端。
可选的,上述传感器单元21进一步包括:
采样模块211,用于将第一个即时点作为起点,以设定的采样频 率采样即时点相对起点的相对位置信息。
可选的,上述判断单元22进一步包括:
比对模块221,用于将所有即时点位置信息按先后次序连接起来的曲线即为空间手势的轨迹;按各相邻的采样点的角度属性是否相同将所述空间手势的轨迹划分为多个即时轨迹段,将该多个即时轨迹段与预先存储的数据库中的数据进行比对得到每个即时轨迹段对应一个手势笔画及笔画编号。
可选的,上述对比模块221进一步包括:
角度判断子模块2211,用于以当前即时轨迹段起点为原点建立坐标系;跟踪运动轨迹的即时点坐标,动态计算即时点与当前即时轨迹段起点的连线和x坐标轴之间的角度α,同时动态计算所述即时点与上一采样点的连线与x坐标轴之间的角度β;根据α和β,得出移动方向,并进一步确定当前即时轨迹段所对应的手势笔画及其笔画编号;当α和β属性发生根本变化时,则当前轨迹段结束,所述即时点为当前轨迹段的终点,同时所述即时点也为下一个即时轨迹段的起点;
所述α和β属性发生根本变化具体为,当所述α和β的变化值超出预先设置的阈值时,确定所述α和β属性发生根本变化。
可选的,上述笔画编码获取单元23进一步包括:
位移判断模块231,用于根据当前即时轨迹段的所述起点和终点计算当前即时轨迹段的位移;根据所述位移,参照预先设置的位移阀值区分长手势和短手势;
编码查询模块232,用于根据手势笔画的笔画编号和位移查询预存的手势笔画编码表获取当前轨迹段对应的手势编码。
可选的,手势编码获取单元24进一步包括:
分割模块241,用于将空中手势的轨迹分成一个个即时轨迹段后,每个即时轨迹段对应一个手势笔画编码;
组合模块242,用于按先后顺序将所述手势笔画编码组合起来得到空中手势的编码。
如图6所示,列出了10个空中手势例子,图中虚线表示以一定采样频率获取的空中手势轨迹,实线表示为手势笔画分解辅助线,通过分析这些空中手势例子可以更深的理解本发明所述的空中手势编码方法和智能终端的优点。
首先按本发明所述编码方法,对这10空中手势例子进行编码,需要指出的是,依照本案所述编码方法,以下编码是在空中手势产生过程中动态完成的:
手势a:(bhe);
手势b:(heb);
手势c:(AhgfedcbA),起始点在y轴,假设第一个轨迹段和最后一个轨迹段的位移都小于△值;
手势d:(ahgfedcb);
手势e:(a);
手势f:(aBHa),假设中间2个轨迹段的位移小于△值;
手势g:(abha);
手势h:(CAGE),假设所有轨迹段的位移都小于△值;
手势i:(cage);
手势j:(geca)。
我们可以通过一些空中手势编码的匹配运算,达到一些意想不到的效果。如:
手势a和手势b,从图形上看都是一个三角形手势,但由于起点不同,手势a和手势b编码不同。但是,如果智能终端希望手势a和手势b当作同一手势处理,则智能终端手势识别模块可以通过环形匹 配运算来实现,步骤为:
(1).手势a的编码(bhe),忽略起点和终点,进行移位,得到编码(heb);
(2).手势a移位后的编码(heb)与手势b的编码相同。
手势c和手势d,从图形上看,都是一个圆性手势,但同样是起点不同,手势c和手势d编码不同,而且手势c的编码中产生了首尾两个“A”。同样,如果智能终端希望手势c和手势d当作同一手势处理,则空中手势识别装置手势识别模块可以通过去舍合并、环形匹配、忽略大小写等运算来实现,步骤为:
(1).将手势c的编码尾部“A”移到首位,得到编码(AAhgfedcb);
(2).根据相邻相同编码去舍原则,舍去第2个“A”,得到编码(Ahgfedcb);
(3).在以手势c转换后的编码(Ahgfedcb)与手势d的编码(ahgfedcb)进行忽视大小写匹配,即可。
手势e、f、g,从图形上看,做出空中手势的意图可能是一致的,即手势e,但是在做出空中手势的过程中,出现了不同幅度的上下抖动,根据抖动幅度是否大于△值,得到手势f和手势g不同的编码。如果空中手势识别装置希望将这三个手势作为同一手势处理,则是不允许的,但从空中手势的产生看,允许小幅度抖动是可以做到的,即手势g只能作为另一个手势来处理,手势e和手势f可以通过忽略小手势编码、去舍合并等运算来实现,步骤为:
(1).忽略手势f中的小手势编码,得到编码(aa);
(2).根据相邻相同编码去舍原则,舍去第2个“a”,得到编码(a);
(3).以手势f转换后的编码(a)与手势e的编码(a)进行匹配。
手势h和手势i,从图形上看,都是矩形,但由于手势幅度不同,手势h和手势i编码不同。如果智能终端希望将手势h和手势i作为同一手势处理,则智能终端手势识别模块只需做忽视大小写匹配运算即可。
手势j和手势i起点不同,同理,也可以通过环形匹配运算来实现当作同一手势来处理。
从以上例子来看,10个手势例子,其编码都不相同,严格上可以当作10个手势来识别,但考虑到空中手势产生的特证,完全严格的识别,可能并不能达到做出空中手势用户的本意,因此,我们可以在空中手势编码匹配运算上,定义一些算法,从而实现不但准备识别不同手势,而且让识别更人性化识别到手势用户的意图。
通过以上例子分析,更体现出本发明空中手势识别的方法的特点与优势。但需要说明的是,本发明所述识别方法不局限与本实施例中所示的手势笔画,上述单元和系统实施例中,所包括的各个模块或单元只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能模块的具体名称也只是为了便于相互区分,并不用于限制本发明的保护范围。
本发明实施例提供一种智能终端,该智能终端包括上述空中手势的识别装置。
本发明实施例还提供一种智能终端,所述智能终端包括:传感器和处理器,其中,所述传感器与处理器连接;
所述传感器,用于以设定的采样频率获取空中手势的即时点位置信息,并将即时点位置信息发送给所述处理器;
所述处理器,用于通过所述即时点位置信息确定即时轨迹段所对应的手势笔画及所述手势笔画的笔画编号;根据该手势笔画的编号和依据所述即时点位置信息计算出的即时轨迹段的位移,获取该手势笔画对应的编码;将手势笔画对应的编码按手势笔画的先后顺序组合起来得到该空中手势的编码。
可选的,上述处理器具体用于按即时轨迹段起点为原点建立坐标系,将接收到的即时点位置信息,换算为该坐标系中的坐标,并根据即时点的坐标,算出即时点与坐标系原点的连线和坐标x轴之间的角度α,算出即时点与上一采样点的连线与坐标x轴之间的角度β,并根据这两个角度,确定当前即时轨迹段所对应的手势笔画编号,当手势笔画编号发生变化时,将当前轨迹段的起点与终点坐标、手势笔画编号发给位移判断模块;所述α和β属性发生根本变化具体为,当所述α和β的变化值超出阈值时,确定所述α和β属性发生根本变化;
所述处理器还用于根据接收的起点和终点坐标,计算当前轨迹段的位移,并该位移连同接收的手势笔画编号;根据接收的手势笔画编号和位移,查询预存的手势笔画编码表,获取当前轨迹段对应的手势编码。
本领域技术人员可以理解,本发明实施例提供的非线性容限的补偿方法中,其全部或部分步骤是可以通过程序指令相关的硬件来完成。比如可以通过计算机运行程来完成。该程序可以存储在可读取存储介质,例如,随机存储器、磁盘、光盘等。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。

Claims (13)

1.一种应用于智能终端的空中手势识别方法,其特征在于,所述空中手势为二维空中手势和/或三维空中手势,所述方法包括:
以设定的采样频率获取空中手势的即时点位置信息;
根据所述即时点位置信息确定即时轨迹段所对应的手势笔画及笔画编号;
根据所述笔画编号和依据所述即时点位置信息计算出的即时轨迹段的位移,获取所述手势笔画对应的编码;
将空中手势中包含的所有即时轨迹段所对应的手势笔画的编码按先后顺序组合起来得到该空中手势的编码,所述空中手势的编码依赖预先确定的手势笔画编码表,所述手势笔画编码表中的每个手势笔画都是空中手势轨迹的最小独立单元,都有一个独立编号,各手势笔画的属性有本质区别;
根据所述空中手势的编码对空中手势进行识别,并控制所述智能终端。
2.根据权利要求1所述的方法,其特征在于,所述以设定的采样频率获取空中手势的即时点位置信息,具体包括:
将第一个即时点作为起点,以设定的采样频率采样即时点相对起点的相对位置信息。
3.根据权利要求1所述的方法,其特征在于,所述根据即时点位置信息确定即时轨迹段所对应的手势笔画及笔画编号,具体包括:
将所有即时点位置信息按先后次序连接起来的曲线即为空间手势的轨迹;按各相邻的采样点的角度属性是否相同将所述空间手势的轨迹划分为多个即时轨迹段,将该多个即时轨迹段与预先存储在数据库中的数据进行比对得到每个即时轨迹段对应一个手势笔画及笔画编号。
4.根据权利要求3所述的方法,其特征在于,所述将所有即时点位置信息按先后次序连接起来的曲线即为空间手势的轨迹;按各相邻的采样点的角度属性是否相同将所述空间手势的轨迹划分为多个即时轨迹段,使得每个即时轨迹段对应一个手势笔画具体包括:
以当前即时轨迹段起点为原点建立坐标系;跟踪运动轨迹的即时点坐标,动态计算即时点与当前即时轨迹段起点的连线和x坐标轴之间的角度α,同时动态计算所述即时点与上一采样点的连线与x坐标轴之间的角度β;根据α和β,得出移动方向,并进一步确定当前即时轨迹段所对应的手势笔画及其手势笔画对应的编码;当α和β属性发生根本变化时,则当前轨迹段结束,所述即时点为当前轨迹段的终点,同时所述即时点也为下一个即时轨迹段的起点;
所述α和β属性发生根本变化具体为,当所述α和β的变化值超出预先设置的阈值时,确定所述α和β属性发生根本变化。
5.根据权利要求2所述的方法,其特征在于,所述根据笔画编号和根据所述即时点位置信息计算出的即时轨迹段的位移,获取所述手势笔画对应的编码具体包括:
根据当前即时轨迹段的所述起点和终点计算当前即时轨迹段的位移;根据所述位移,参照预先设置的位移阀值区分长手势和短手势;
根据手势笔画的笔画编号和位移查询预存的手势笔画编码表获取当前轨迹段对应的手势编码。
6.根据权利要求1所述的方法,其特征在于,所述将空中手势中包含的所有即时轨迹段所对应的手势笔画的编码按先后顺序组合起来得到该空中手势的编码,具体包括:
将空中手势的轨迹分成一个个即时轨迹段后,每个即时轨迹段对应一个手势笔画编码;
按先后顺序将所述手势笔画编码组合起来得到空中手势的编码。
7.一种应用于智能终端的空中手势识别装置,其特征在于,所述空中手势为二维空中手势和/或三维空中手势,所述识别装置包括:
传感器单元,用于以设定的采样频率获取空中手势的即时点位置信息;
判断单元,用于根据所述即时点位置信息确定即时轨迹段所对应的手势笔画及笔画编号;
笔画编码获取单元,用于根据所述笔画编号和依据所述即时点位置信息计算出的即时轨迹段的位移,获取所述手势笔画对应的编码;
手势编码获取单元,用于将空中手势中包含的所有即时轨道段所对应的手势笔画按先后顺序组合起来得到该空中手势的编码,所述空中手势的编码依赖预先确定的手势笔画编码表,所述手势笔画编码表中的每个手势笔画都是空中手势轨迹的最小独立单元,都有一个独立编号,各手势笔画的属性有本质区别;
手势控制单元,用于根据所述空中手势的编码对空中手势进行识别,并控制智能终端。
8.根据权利要求7所述的识别装置,其特征在于,所述传感器单元进一步包括:
采样模块,用于将第一个即时点作为起点,以设定的采样频率采样即时点相对起点的相对位置信息。
9.根据权利要求7所述的识别装置,其特征在于,所述判断单元进一步包括:
比对模块,用于将所有即时点位置信息按先后次序连接起来的曲线即为空间手势的轨迹;按各相邻的采样点的角度属性是否相同将所述空间手势的轨迹划分为多个即时轨迹段,将该多个即时轨迹段与预先存储的数据库中的数据进行比对得到每个即时轨迹段对应一个手势笔画及笔画编号。
10.根据权利要求9所述的识别装置,其特征在于,所述比对模块进一步包括:
角度判断子模块,用于以当前即时轨迹段起点为原点建立坐标系;跟踪运动轨迹的即时点坐标,动态计算即时点与当前即时轨迹段起点的连线和x坐标轴之间的角度α,同时动态计算所述即时点与上一采样点的连线与x坐标轴之间的角度β;根据α和β,得出移动方向,并进一步确定当前即时轨迹段所对应的手势笔画及其笔画编号;当α和β属性发生根本变化时,则当前轨迹段结束,所述即时点为当前轨迹段的终点,同时所述即时点也为下一个即时轨迹段的起点;
所述α和β属性发生根本变化具体为,当所述α和β的变化值超出预先设置的阈值时,确定所述α和β属性发生根本变化。
11.根据权利要求8所述的识别装置,其特征在于,所述笔画编码获取单元进一步包括:
位移判断模块,用于根据当前即时轨迹段的所述起点和终点计算当前即时轨迹段的位移;根据所述位移,参照预先设置的位移阀值区分长手势和短手势;编码查询模块,用于根据手势笔画的笔画编号和位移查询预存的手势笔画编码表获取当前轨迹段对应的手势编码。
12.根据权利要求7所述的识别装置,其特征在于,所述手势编码获取单元进一步包括:
分割模块,用于将空中手势的轨迹分成一个个即时轨迹段后,每个即时轨迹段对应一个手势笔画编码;
组合模块,用于按先后顺序将所述手势笔画编码组合起来得到空中手势的编码。
13.一种智能终端,其特征在于,所述智能终端包括权利要求7—12任一种识别装置。
CN201210374890.3A 2012-09-29 2012-09-29 应用于智能终端的空中手势识别方法及装置 Active CN103713730B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201210374890.3A CN103713730B (zh) 2012-09-29 2012-09-29 应用于智能终端的空中手势识别方法及装置
PCT/CN2013/080717 WO2014048170A1 (zh) 2012-09-29 2013-08-02 应用于终端的空中手势识别方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210374890.3A CN103713730B (zh) 2012-09-29 2012-09-29 应用于智能终端的空中手势识别方法及装置

Publications (2)

Publication Number Publication Date
CN103713730A CN103713730A (zh) 2014-04-09
CN103713730B true CN103713730B (zh) 2018-03-20

Family

ID=50386948

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210374890.3A Active CN103713730B (zh) 2012-09-29 2012-09-29 应用于智能终端的空中手势识别方法及装置

Country Status (2)

Country Link
CN (1) CN103713730B (zh)
WO (1) WO2014048170A1 (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017021461A (ja) * 2015-07-08 2017-01-26 株式会社ソニー・インタラクティブエンタテインメント 操作入力装置および操作入力方法
CN106648039B (zh) * 2015-10-30 2019-07-16 富泰华工业(深圳)有限公司 手势控制系统及方法
CN107728775A (zh) * 2016-08-10 2018-02-23 富士通株式会社 动作识别方法及其装置
CN107633227B (zh) * 2017-09-15 2020-04-28 华中科技大学 一种基于csi的细粒度手势识别方法和系统
CN109189218B (zh) * 2018-08-20 2019-05-10 广州市三川田文化科技股份有限公司 一种手势识别的方法、装置、设备及计算机可读存储介质
CN109528121B (zh) * 2018-11-30 2021-02-26 佛山市顺德区美的洗涤电器制造有限公司 洗碗机和识别操作轨迹的方法、装置、设备及介质
CN112947836A (zh) * 2019-12-11 2021-06-11 北京集创北方科技股份有限公司 基于拐点特征的手势识别方法、系统、存储介质、触屏设备
CN112306242A (zh) * 2020-11-09 2021-02-02 幻境虚拟现实(广州)智能科技研究院有限公司 一种基于书空手势的交互方法和系统
CN114327615B (zh) * 2022-03-09 2022-06-28 湖南云畅网络科技有限公司 一种基于大数据的接口文档生成方法及系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0686931A2 (en) * 1994-06-06 1995-12-13 Xerox Corporation Searching and matching unrecognized handwriting
CN101739118A (zh) * 2008-11-06 2010-06-16 大同大学 视讯手写文字输入装置及其方法
CN101980107A (zh) * 2010-10-20 2011-02-23 陆钰明 一种基于直线基本手势的手势码的实现方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09319829A (ja) * 1996-06-03 1997-12-12 Nec Corp オンライン文字認識装置
CN101777250B (zh) * 2010-01-25 2012-01-25 中国科学技术大学 家用电器的通用遥控装置及方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0686931A2 (en) * 1994-06-06 1995-12-13 Xerox Corporation Searching and matching unrecognized handwriting
CN101739118A (zh) * 2008-11-06 2010-06-16 大同大学 视讯手写文字输入装置及其方法
CN101980107A (zh) * 2010-10-20 2011-02-23 陆钰明 一种基于直线基本手势的手势码的实现方法

Also Published As

Publication number Publication date
WO2014048170A1 (zh) 2014-04-03
CN103713730A (zh) 2014-04-09

Similar Documents

Publication Publication Date Title
CN103713730B (zh) 应用于智能终端的空中手势识别方法及装置
CN102999152B (zh) 一种手势动作识别方法和系统
CN102854982B (zh) 一种识别自定义手势轨迹的方法
TWI569176B (zh) 手寫軌跡識別方法與系統
TW200519764A (en) Method and system for three-dimensional handwriting recognition
CN1910636A (zh) 利用三维运动技术的家庭娱乐高级控制装置
CN103049761A (zh) 基于手语手套的手语识别方法及系统
CN106502390B (zh) 一种基于动态3d手写数字识别的虚拟人交互系统及方法
CN102067067A (zh) 参考姿势数据的注册方法、移动终端的驱动方法及其移动终端
CN105573498A (zh) 一种基于Wi-Fi信号的手势识别方法
CN102520790A (zh) 一种基于图像传感模块的字符输入方法、装置及终端
CN109543644B (zh) 一种多模态手势的识别方法
CN102981624A (zh) 三维手势输入方法及装置
CN103309612A (zh) 移动设备图形界面文本框的信息处理方法、装置和设备
CN102819751A (zh) 一种基于动作识别的人机互动方法及装置
CN110866468A (zh) 一种基于无源rfid的手势识别系统及方法
CN106512391B (zh) 一种双手手势识别方法及基于其的模拟驾驶系统、方法
CN101916141A (zh) 一种基于空间定位技术的交互式输入装置和方法
KR101467295B1 (ko) 필기 정렬이 가능한 정보 입력 장치 및 방법
CN106205632A (zh) 语音转化手写笔迹的方法和装置
Tsai et al. Reverse time ordered stroke context for air-writing recognition
KR20140112316A (ko) 모션인식을 이용한 스마트 디바이스 제어 장치 및 방법
Moustakas et al. Masterpiece: physical interaction and 3D content-based search in VR applications
Kozhamkulova et al. Two Dimensional Deep CNN Model for Vision-based Fingerspelling Recognition System
CN103207686A (zh) 一种指点杆、指点杆信息转换方法、装置及电子设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant