CN115033168A - 一种手势识别装置及其控制方法 - Google Patents

一种手势识别装置及其控制方法 Download PDF

Info

Publication number
CN115033168A
CN115033168A CN202210629226.2A CN202210629226A CN115033168A CN 115033168 A CN115033168 A CN 115033168A CN 202210629226 A CN202210629226 A CN 202210629226A CN 115033168 A CN115033168 A CN 115033168A
Authority
CN
China
Prior art keywords
module
sensing
sensing module
user interface
gesture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210629226.2A
Other languages
English (en)
Inventor
谢宗谚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Interface Optoelectronics Shenzhen Co Ltd
Interface Technology Chengdu Co Ltd
General Interface Solution Ltd
Original Assignee
Interface Optoelectronics Shenzhen Co Ltd
Interface Technology Chengdu Co Ltd
General Interface Solution Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Interface Optoelectronics Shenzhen Co Ltd, Interface Technology Chengdu Co Ltd, General Interface Solution Ltd filed Critical Interface Optoelectronics Shenzhen Co Ltd
Priority to CN202210629226.2A priority Critical patent/CN115033168A/zh
Priority to TW111121288A priority patent/TW202349262A/zh
Publication of CN115033168A publication Critical patent/CN115033168A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485Scrolling or panning

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明提供一种手势识别装置,以手势操控进行操作,该手势识别装置包括有显示模块、感测模块、判断模块、计算模块、检测模块以及执行模块。所述显示模块具有用户接口,所述用户接口具有至少一图标,所述图标具有相对应的操作指令。藉由上述,本发明亦提供一种手势识别控制方法,首先,所述感测模块于感测区域内,侦测手势操控后,于所述用户接口中产生移动轨迹。经由所述判断模块判断所述移动轨迹为封闭曲线后,所述计算模块计算该封闭曲线所围绕的区块面积与位置。当所述检测模块判断所述区块面积内具有所述图标后,该执行模块执行所述操作指令。

Description

一种手势识别装置及其控制方法
技术领域
本发明系关于识别操控技术领域,尤其是关于一种手势识别装置及其控制方法。
背景技术
随着移动通讯技术的快速发展,其识别装置的功能也越来越多,除了可以收发短信及打电话之外,还可以用于进行上网、收发邮件、听音乐、玩游戏等。并且识别装置野发展为现在的触摸式、感应是或是体感式的输入方式。
同时,随着技术的发展,于诸多场景中人机交流的方式也在逐渐发生着变化,也因此,手势控制也应运而生。
手势控制,也就是说,是指人手不需要直接接触机器,而是在空中做出相应的姿势变化,继而控制机器做出相应的动作。
手势控制目前在车载环境中已有较多应用,在司机与中控系统的互动中,用手势控制的方式代替原有的按键控制,可以增加司机行车的安全性。
手势控制是近年来发展起来的人机接口交互沟通的方式,与一般的按键、语音等交互方式不同,手势控制更容易掌握和应用。
但也由于目前技术的限制,依旧存在使用成本较高、手势识别正确率较低等问题,如当进行远距手势操控或是近接感应触控时,包括有远程手势操作、近接感应操作及实体触控等等,常常发生感应位置飘移或是手势判断不准确的问题,因此,习知技术于进行用户接口(GUI)的系统操控上,尚有存留待改进的空间。
发明内容
有鉴于以上的问题,本发明一种手势识别装置及其控制方法,提出一种手势操控应用方式。其目的在解决一种能够解决于近接感应操作以及在远距离操控时,讯号感应起伏造成点选不准或漂移的问题。
本发明提供一种手势识别装置,以手势操控进行操作,该手势识别装置包括有:显示模块、感测模块、判断模块、计算模块、检测模块以及执行模块。
所述显示模块用以显示用户接口,所述用户接口具有至少一图标,所述图标具有相对应的操作指令。
所述感测模块与所述显示模块电性连接,所述感测模块具有感测区域,所述感测区域邻靠所述用户接口,用以侦测手势操控以产生移动轨迹。
所述判断模块与所述感测模块电性连接,判断所述移动轨迹于所述用户接口上为封闭曲线。
所述计算模块与所述判断模块电性连接,计算所述移动轨迹所围绕的区块面积与位置。
所述检测模块与所述计算模块电性连接,判断所述区块面积内具有所述图标,以及执行模块,与所述检测模块电性连接,用以执行操作指令。
进一步地,所述感测区域为三维度的空间区域,所述感测区域具有深度,以及手势操控具有被感测点,所述被感测点距离所述用户接口具有距离,所述距离小于所述深度,且所述距离不小于零。
更进一步地,所述感测模块自所述感测区域侦测到所述被感测点后产生所述移动轨迹,并在所述用户接口上形成对应路径。
进一步地,所述位置为所述区块面积于所述用户接口的相对位置。
于一实施例中,所述感测模块为触控感测模块,所述触控感测模块为电阻式感测模块、电容式感测模块、光学式感测模块、超声波感测模块、电磁式感测模块或光学CMOS式感测模块。
于另一实施例中,所述感测模块为近接感测模块,所述近接感测模块为悬浮触控侦测模块、高电容式侦测模块。
于又一实施例中,所述感测模块为远程手势感测模块,所述远程手势感测模块为立体视觉感测模块、结构光感测模块或飞行时间测距感测模块(Time of flight,ToF)。
此外,本发明亦提供一种手势识别控制方法,包括有下列步骤:
a.提供一手势识别装置,包括有感测模块、判断模块、计算模块、检测模块、执行模块以及显示模块,所述感测模块具有感测区域,以及所述显示模块具有用户接口,所述用户接口具有至少一图标,所述图标具有相对应的操作指令。
b.于所述感测区域进行手势操控进行操作所述用户接口,所述感测模块感应手势操控的位置,产生移动轨迹,且于所述用户接口上形成对应路径。
c.所述判断模块进行判断所述对应路径是否为封闭曲线;若所述对应路径是封闭曲线,进行步骤d;若所述对应路径不是封闭曲线,则继续进行步骤b。
d.所述计算模块进行计算所述对应路径所围绕的区块面积以及位置。
e.所述检测模块判断步骤d所述所述位置上的所述区块面积内是否具有所述图示;若所述区块面积内上具有所述图示,则进行步骤f;若所述区块面积内无所述图示,则进行步骤b。
f.该执行模块执行操作指令,并显示于所述显示模块。进一步地,于步骤b中,手势操控具有被感测点,所述感测模块自所述感测区域侦测到所述被感测点后,产生所述移动轨迹。进一步地,于步骤d中,所述位置为所述区块面积于所述用户接口的相对位置。
附图说明
图1系本发明手势识别装置的简易架构示意图
图2系本发明的图标、封闭曲线以及区块面积的简易示意图。
图3系本发明感测模块的一较佳实施例示意图。
图4系本发明感测模块的另一较佳实施例示意图。
图5系本发明感测模块的又一较佳实施例示意图。
图6系本发明手势识别控制方法的步骤示意图。
图7系本发明手势识别控制方法的简易判断流程示意图。
附图标记:
1手势识别装置
2显示模块
21用户接口
211图示
2111操作指令
212对应路径
3感测模块
31感测区域
32移动轨迹
4判断模块
5计算模块
51区块面积
52位置
6检测模块
7执行模块
8手势识别控制方法
9手势操控
91被感测点
H深度
D距离
a~f步骤
具体实施方式
为达成上述目的及功效,本发明所采用的技术手段及构造,兹绘图就本创作较佳实施例详加说明其特征与功能如下,俾利完全了解,但须注意的是,所述内容不构成本发明的限定。
请参阅图1所示,图1为本发明手势识别装置的简易架构示意图。本发明提供一种手势识别装置1,以手势操控9进行操作,该手势识别装置1包括有:显示模块2、感测模块3、判断模块4、计算模块5、检测模块6以及执行模块7。
所述显示模块2用以显示用户接口21,且所述用户接口21具有至少一图标211,所述图标211具有相对应的操作指令2111。
所述感测模块3与所述显示模块2电性连接,所述感测模块3具有感测区域31,所述感测区域31邻靠所述用户接口21,用以侦测手势操控9以产生移动轨迹32。
需要说明的是,所述感测模块3自所述感测区域31侦测到手势操控9后产生所述移动轨迹32,同时,在所述用户接口21上所形成之对应路径212。
也就是说,所述感测区域31为三维度(X轴、Y轴以及Z轴)的空间区域,所述感测模块3默认将所述用户接口21设置于X轴与Y轴联合的XY平面上,且于Z轴上,所述感测区域31具有深度H,上述中,X轴、Y轴以及Z轴相互垂直。所述感测模块3将位于所述感测区域31中之所述移动轨迹32对应至为于二维度空间之所述用户接口21上,形成所述对应路径212。
所述判断模块4与所述感测模块3电性连接,所述判断模块4判断所述移动轨迹32对应至所述用户接口21后,所述对应路径212是否为封闭曲线。
所述计算模块5与所述判断模块4电性连接,用以计算所述移动轨迹32对应至所述用户接口21后,所述对应路径212所围绕的区块面积51与位置52,所述位置52为所述区块面积51于所述用户接口21的相对位置。
所述检测模块6与所述计算模块5电性连接,用以判断所述区块面积51内具有所述图示211。也就是说,所述检测模块6判断所述区块面积51于所述用户接口21上,所述区块面积51范围内是否有涵盖所述图示211。
该执行模块7与所述检测模块6电性连接,用以执行操作指令2111。
请附加参阅图2所示,图2系本发明的图标、封闭曲线以及区块面积的简易示意图。需要说明的是,当所述移动轨迹32被所述判断模块4判断为该封闭曲线后,所述计算模块5计算位于所述用户接口21上的所述移动轨迹32所围绕之所述区块面积51与位于所述用户接口上的所述位置52,使得所述检测模块6得以判断所述区块面积51内是否具有所述图示211。
请附加参阅图3所示,图3系本发明感测模块的一较佳实施例示意图。需要说明的是,于较佳实施例中,当所述感测模块3为触控感测模块,所述触控感测模块为电阻式感测模块、电容式感测模块、光学式感测模块、超声波感测模块、电磁式感测模块或光学CMOS式感测模块。
请附加参阅图4所示,图4系本发明感测模块的另一较佳实施例示意图。当所述感测模块3为近接感测模块,所述近接感测模块为悬浮触控侦测模块、高电容式侦测模块。
请附加参阅图5所示,图5系本发明感测模块的又一较佳实施例示意图。当所述感测模块3为远程手势感测模块,所述远程手势感测模块为立体视觉感测模块、结构光感测模块或飞行时间测距感测模块(Time of flight,ToF)。
此外,上述中需要说明的是,手势操控9具有被感测点91,所述被感测点91距离所述用户接口21具有距离D,所述距离D小于所述深度H,且所述距离D不小于零。所述感测模块3自所述感测区域31侦测到所述被感测点91后,投射于所述用户接口21上,形成所述对应路径212,且该路径位于一平面上。
另外,请参阅图6以及图7所示,图6系本发明手势识别控制方法的步骤示意图,以及图7系本发明手势识别控制方法的简易判断流程示意图。本发明亦提供一种手势识别控制方法8,包括有下列步骤:
a.提供一手势识别装置1,包括有显示模块2、感测模块3、判断模块4、计算模块5、检测模块6以及执行模块7,所述感测模块3具有感测区域31,以及所述显示模块2具有用户接口21,所述用户接口21具有至少一图标211,所述图标211具有相对应的操作指令2111。
b.于所述感测区域31进行手势操控9进行操作所述用户接口21,所述感测模块3感应手势操控9的位置,产生移动轨迹32,且于所述用户接口21上形成对应路径212。
c.所述判断模块4进行判断所述对应路径212是否为封闭曲线;若所述对应路径212是封闭曲线,进行步骤d。若所述对应路径212不是封闭曲线,则继续进行步骤b。
d.所述计算模块5进行计算所述对应路径212所围绕的区块面积51以及位置52。
e.所述检测模块6判断步骤d所述所述位置52上的所述区块面积51内是否具有所述图示211;若所述区块面积51内具有所述图示211,则进行步骤f。若所述区块面积51内无所述图示211,则进行步骤b。
f.该执行模块7执行操作指令2111,并显示于所述显示模块2。
需要说明的是,于上述该手势识别控制方法的步骤b中,所述移动轨迹32为所述感测模块3自所述感测区域31侦测到手势操控9后,于所述用户接口21上所形成的路径。另外,于步骤d中,所述位置52为所述区块面积51于所述用户接口21的相对位置。
综上所述,本发明手势识别装置及其控制方法的优势为:本发明一种手势识别装置及其控制方法,提出一种应用于装置上用户接口的识别手势操控的装置与方式,能够解决于近接感应操作以及在远距离操控时,讯号感应起伏造成点选不准或漂移的问题。
透过上述的详细说明,即可充分显示本发明的目的及功效上均具有实施的进步性,极具产业的利用性价值,完全符合发明专利要件,爰依法提出申请。唯以上所述仅为本发明较佳的实施例,并非因此限制本发明的实施方式及保护范围,对于本领域技术人员而言,应当能够意识到凡运用本发明说明书及图式内容所作出的等同替换和显而易见的变化所得到的方案,均应当包含在本发明的保护范围内。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理包括,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
对于软件实现,可通过执行本发明所述功能的模块(例如过程、函数等)来实现本发明所述的技术。软件代码可存储在内存中并通过处理器执行。内存可以在处理器中或在处理器外部实现。

Claims (10)

1.一种手势识别装置,其特征在于:以手势操控进行操作,该手势识别装置包括有:
显示模块,用以显示用户接口,所述用户接口具有至少一图标,所述图标具有相对应的操作指令;
感测模块,与所述显示模块电性连接,所述感测模块具有感测区域,所述感测区域邻靠所述用户接口,用以侦测手势操控以产生移动轨迹;
判断模块,与所述感测模块电性连接,判断所述移动轨迹于所述用户接口上为封闭曲线;
计算模块,与所述判断模块电性连接,计算所述移动轨迹所围绕的区块面积与位置;
检测模块,与所述计算模块电性连接,判断所述区块面积内具有所述图示;以及
执行模块,与所述检测模块电性连接,用以执行所述操作指令。
2.如权利要求1所述的手势识别装置,其特征在于,所述感测区域为三维度的空间区域,所述感测区域具有深度,以及所述手势操控具有被感测点,所述被感测点距离所述用户接口具有距离,所述距离小于所述深度,且所述距离不小于零。
3.如权利要求2所述的手势识别装置,其特征在于,所述感测模块自所述感测区域侦测到所述被感测点后产生所述移动轨迹,并在所述用户接口上形成对应路径。
4.如权利要求1所述的手势识别装置,其特征在于,所述位置为所述区块面积于所述用户接口的相对位置。
5.如权利要求1所述的手势识别装置,其特征在于,所述感测模块为触控感测模块,所述触控感测模块为电阻式感测模块、电容式感测模块、光学式感测模块、超声波感测模块、电磁式感测模块或光学CMOS式感测模块。
6.如权利要求1所述的手势识别装置,其特征在于,所述感测模块为近接感测模块,所述近接感测模块为悬浮触控侦测模块、高电容式侦测模块。
7.如权利要求1所述的手势识别装置,其特征在于,所述感测模块为远程手势感测模块,所述远程手势感测模块为立体视觉感测模块、结构光感测模块或飞行时间测距感测模块(Time of flight,ToF)。
8.一种手势识别控制方法,其特征在于,包括有下列步骤:
a.提供一手势识别装置,包括有感测模块、判断模块、计算模块、检测模块、执行模块以及显示模块,所述感测模块具有感测区域,以及所述显示模块具有用户接口,所述用户接口具有至少一图标,所述图标具有相对应的操作指令;
b.于所述感测区域进行手势操控进行操作所述用户接口,所述感测模块感应手势操控的位置,产生移动轨迹,且于所述用户接口上形成对应路径;
c.所述判断模块进行判断所述对应路径是否为封闭曲线;若所述对应路径是封闭曲线,进行步骤d;若所述对应路径不是封闭曲线,则继续进行步骤b;
d.所述计算模块进行计算所述对应路径所围绕的区块面积以及位置;
e.所述检测模块判断步骤d所述位置上的所述区块面积内是否具有所述图示;若所述区块面积内上具有所述图示,则进行步骤f;若所述区块面积内无所述图示,则进行步骤b;
f.该执行模块执行所述操作指令,并显示于所述显示模块。
9.如权利要求8所述的手势识别控制方法,其特征在于,于步骤b中,手势操控具有被感测点,所述感测模块自所述感测区域侦测到所述被感测点后,产生所述移动轨迹。
10.如权利要求8所述的手势识别控制方法,其特征在于,于步骤d中,所述位置为所述区块面积于所述用户接口的相对位置。
CN202210629226.2A 2022-06-01 2022-06-01 一种手势识别装置及其控制方法 Pending CN115033168A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202210629226.2A CN115033168A (zh) 2022-06-01 2022-06-01 一种手势识别装置及其控制方法
TW111121288A TW202349262A (zh) 2022-06-01 2022-06-08 一種手勢識別裝置及其控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210629226.2A CN115033168A (zh) 2022-06-01 2022-06-01 一种手势识别装置及其控制方法

Publications (1)

Publication Number Publication Date
CN115033168A true CN115033168A (zh) 2022-09-09

Family

ID=83124017

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210629226.2A Pending CN115033168A (zh) 2022-06-01 2022-06-01 一种手势识别装置及其控制方法

Country Status (2)

Country Link
CN (1) CN115033168A (zh)
TW (1) TW202349262A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102710911A (zh) * 2008-08-14 2012-10-03 索尼公司 信息处理装置、方法和程序
CN104656889A (zh) * 2009-08-10 2015-05-27 晶翔微系统股份有限公司 指令装置
CN104914980A (zh) * 2014-03-10 2015-09-16 联想(北京)有限公司 一种信息处理方法及装置
CN108021234A (zh) * 2017-12-13 2018-05-11 宝贝格子(北京)科技有限公司 获取方法与系统、电子设备与存储介质
CN109358792A (zh) * 2018-09-25 2019-02-19 维沃移动通信有限公司 一种显示对象的选取方法及终端

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102710911A (zh) * 2008-08-14 2012-10-03 索尼公司 信息处理装置、方法和程序
CN104656889A (zh) * 2009-08-10 2015-05-27 晶翔微系统股份有限公司 指令装置
CN104914980A (zh) * 2014-03-10 2015-09-16 联想(北京)有限公司 一种信息处理方法及装置
CN108021234A (zh) * 2017-12-13 2018-05-11 宝贝格子(北京)科技有限公司 获取方法与系统、电子设备与存储介质
CN109358792A (zh) * 2018-09-25 2019-02-19 维沃移动通信有限公司 一种显示对象的选取方法及终端

Also Published As

Publication number Publication date
TW202349262A (zh) 2023-12-16

Similar Documents

Publication Publication Date Title
CN106502570B (zh) 一种手势识别的方法、装置及车载系统
US10101874B2 (en) Apparatus and method for controlling user interface to select object within image and image input device
US9575562B2 (en) User interface systems and methods for managing multiple regions
CN102576268B (zh) 利用多种输入检测技术的交互表面
JP5640486B2 (ja) 情報表示装置
US20150301647A1 (en) Touch panel-type input device, method for controlling the same, and storage medium
KR20080041809A (ko) 휴대용 단말기에서 디스플레이 제어 방법 및 장치
JP6429886B2 (ja) 触感制御システムおよび触感制御方法
US20190272090A1 (en) Multi-touch based drawing input method and apparatus
CN111630480A (zh) 触摸面板装置
CN109213363B (zh) 预测指示器触摸位置或确定3d空间中指向的系统和方法
JPWO2014109262A1 (ja) タッチパネルシステム
JPH08212005A (ja) 3次元位置認識型タッチパネル装置
JP2012027515A (ja) 入力方法及び入力装置
KR20150001130A (ko) 사용자 입력 처리 방법 및 상기 방법이 적용된 장치
WO2012111227A1 (ja) タッチ式入力装置、電子機器および入力方法
WO2017110257A1 (ja) 情報処理装置および情報処理方法
US11644912B2 (en) Interface device and on-panel pad
US9501166B2 (en) Display method and program of a terminal device
CN115033168A (zh) 一种手势识别装置及其控制方法
KR101535738B1 (ko) 비접촉 동작 제어가 가능한 스마트 디바이스 및 이를 이용한 비접촉 동작 제어 방법
KR20130038785A (ko) 베젤을 이용한 터치스크린 제어방법
KR101573287B1 (ko) 전자기기에서 터치 위치 디스플레이 방법 및 장치
US20240160294A1 (en) Detection processing device, detection processing method, information processing system
EP4325337A1 (en) System and method for recognizing position of automotive display

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20220909

RJ01 Rejection of invention patent application after publication