CN104978013A - 体感侦测器的手势辨识方法 - Google Patents

体感侦测器的手势辨识方法 Download PDF

Info

Publication number
CN104978013A
CN104978013A CN201410137357.4A CN201410137357A CN104978013A CN 104978013 A CN104978013 A CN 104978013A CN 201410137357 A CN201410137357 A CN 201410137357A CN 104978013 A CN104978013 A CN 104978013A
Authority
CN
China
Prior art keywords
finger
action
body sense
user
sense detector
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410137357.4A
Other languages
English (en)
Inventor
刘凌伟
蔡宏昌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LIPUSI Co Ltd
Original Assignee
LIPUSI Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LIPUSI Co Ltd filed Critical LIPUSI Co Ltd
Priority to CN201410137357.4A priority Critical patent/CN104978013A/zh
Publication of CN104978013A publication Critical patent/CN104978013A/zh
Pending legal-status Critical Current

Links

Abstract

本发明公开一种体感侦测器的手势辨识方法,其包含下列步骤:启动一电子装置的所述体感侦测器;当所述体感侦测器侦测一使用者的至少一手指产生一第一动作时,将所述电子装置从一第一输入模式切换至一第二输入模式;以及在所述第二输入模式下,所述电子装置根据所述体感侦测器侦测所述使用者的所述至少一手指产生的一第二动作以执行一操作。

Description

体感侦测器的手势辨识方法
技术领域
本发明涉及一种手势辨识方法,特别是一种体感侦测器的手势辨识方法。
背景技术
随着科技的进步,计算器的操作方式也不断在改变,键盘、鼠标或触控板等操作装置陆续被提出,来解决使用者面临的输入操作问题。而且由于平板计算机装置的日益普及,让触控操作模式成为现今计算器操作的主流。
然而,触控操作模式在一般的计算机上需要直接触碰到屏幕,而计算机的操作通常需要键盘配合操作,若是使用触控操作在一般计算机上,使用者的双手需要来回在屏幕与键盘之间不断地移动来完成在计算机上的工作,十分不便。
因此,存在一种需求,设计一种操控方式,适用于一般的桌上型计算机或笔记型计算机,让使用者无需在屏幕与键盘之间反复地移动而能完成计算器操作。
发明内容
本发明的目的在于,提供一种用于体感侦测器的手势辨识方法,通过所述辨识方法可以仿真鼠标或是其它输入装置的操作,简化电子装置的使用。
根据上述的目的,本发明揭露一种体感侦测器的手势辨识方法,其包含下列步骤:启动一电子装置的所述体感侦测器;当所述体感侦测器侦测一使用者的至少一手指产生一第一动作时,将所述电子装置从一第一输入模式切换至一第二输入模式;以及在所述第二输入模式下,所述电子装置根据所述体感侦测器侦测所述使用者的所述至少一手指产生的一第二动作以执行一操作。
本发明的另一目的在提供一种体感侦测器的手势辨识方法,让使用者无需触碰屏幕而可以操作电子装置。
根据上述的目的,本发明揭露一种体感侦测器的手势辨识方法,其包含下列步骤:通过所述体感侦测器获得一第一手势影像信息;辨识所述第一手势影像信息对应的一第一操作指令;根据所述第一操作指令将一电子装置从一第一输入模式切换至一第二输入模式;通过所述体感侦测器获得一第二手势影像信息;辨识所述第二手势影像信息对应的一第二操作指令;以及在所述电子装置上执行所述第二操作指令对应的一操作。
附图说明
图1是显示本发明的实施例的手势辨识方法;
图2A ~图2F显示本发明的手势辨识方法的手势动作的示意图;
图3是显示本发明的利用体感侦测器的手势辨识方法的流程图;以及
图4是显示本发明之手势指令辨识系统的方块图;
图中的标号分别表示:
S102 ~ S106、步骤;S301 ~ S306、步骤;
40、手势指令辨识系统;402、屏幕;
404、键盘;406、体感侦测器;
408、辨识软件;4082、数据库;
410、主机。
具体实施方式
以下结合附图对本发明的技术方案进行详细说明。在此需要注意的是,不同的图标中,相同的组件符号表示相同或相似的组件。以下所提及之附加图式的面方向定义为垂直于该平面的法向量。在此,使用的方向用语是用以说明及理解本发明,而非用以限制本发明。
图1是显示本发明的实施例的手势辨识方法。在本发明的实施例的手势辨识方法是通过在计算机的屏幕周围设置一体感侦测器。通过所述体感侦测器辨识使用者的手指动作来仿真传统鼠标或其它周边装置的操作。而体感侦测器主要是由深度摄影机与传统摄影机所构成,深度摄影机通过计算所传递的红外光打中物体反射后的时间,计算物体与摄影机的距离,在拍摄时传统摄影机与深度摄影机之间的关系也需校正,以确保传统摄影机所拍摄到的像素都能有其对应的深度值。通过所述体感侦测器可以追踪到使用者手指的活动,通过辨识使用者手势的变化来仿真传统鼠标的操作。根据上述,本发明的手势辨识方法如下。在步骤S102中,将电子装置的体感侦测器开启。开启电子装置的体感侦测器,让体感侦测器可以侦测到使用者的手势,电子装置辨识使用者的手势,来仿真鼠标的操作。在本发明的手势辨识方法开始之前,使用者的手指都放置在键盘上作一般的文书操作。在步骤S104中,当体感侦测器侦测到使用者的手指产生一第一动作时,将电子装置从一第一输入模式切换至一第二输入模式。当使用者的手指原本放在键盘上时,若要开始仿真鼠标的操作,使用者的手指向上移动一特定角度,在此所谓的使用者的手指可以是一根手指或是两根手指以上,且所述特定角度可以是45度,但是在其它实施例中,特定角度也可以是其它角度,在此并不局限。当手指向上移动一特定角度时,体感侦测器感应到手指的移动,且辨识到此移动是要将计算机从第一输入模式切换到第二输入模式。在此实施例中,第一输入模式即为键盘输入模式,而第二输入模式则为仿真鼠标等周边装置的输入模式。另外,在第二输入模式时,在计算机屏幕上会出现传统的鼠标箭头图式,随着使用者的手指移动,体感侦测器侦测使用者的手指移动,而在屏幕上的鼠标箭头图式也跟着移动。接着,在步骤S106中,在第二输入模式下,所述体感侦测器侦测使用者的手指产生的一第二动作,根据所述第二动作所对应的指令来执行一操作。在第二输入模式下,也就是在仿真鼠标等周边装置的输入模式下,使用者的手指产生第二动作,体感侦测器侦测所述第二动作,计算机根据所述第二动作对应的指令执行操作。举例来说,第二动作可以是使用者的手指向下单点,通过使用者的手指向下单点的动作来仿真鼠标左键单击的动作,而使用者的手指较佳为食指。在不同实施例中,第二动作可以是使用者的手指向下连续多点,通过使用者的手指向下连续多点的动作来仿真鼠标左键连续多击的动作。在不同实施例中,第二动作可以是使用者的手指向前或向后移动,通过使用者的手指向前或向后移动来仿真鼠标中间滚轮滚动的动作。在不同实施例中,第二动作可以是使用者的食指与拇指分开与靠近的动作,通过使用者的食指与拇指分开与靠近的动作仿真放大屏幕显示或缩小屏幕显示的动作。在不同实施例中,第二动作可以是使用者的手指左右挥动,通过使用者的手指左右挥动仿真计算机操作系统的窗口转换的动作。若使用者要从第二输入模式切换回到第一输入模式,也就是从仿真鼠标输入模式转换为键盘输入模式,将使用者的手指向下移动一特定角度,计算机即会知道要做切换。
图2A ~ 图2F显示本发明的手势辨识方法的手势动作的示意图。如图2A所示,当使用者在使用计算机时,使用者双手的所有手指都放置于键盘上,通过键盘做文书(指使用者使用键盘在计算机上写字的动作)的输入工作。而当使用者要从键盘的文书处理工作转换到其它输入装置的计算机工作时,例如转换到仿真鼠标操作时,如图2B所示,使用者右手的食指向上举超过45度,这时计算机的体感侦测器会侦测到使用者右手食指的移动动作。根据在计算机内的预先设定,体感侦测器所侦测到的食指移动会辨识为输入模式的转换,而在计算机屏幕上出现鼠标箭头图式,即可确认计算机已经从键盘输入模式转换到另一周边装置的仿真输入模式。在此所谓的另一周边装置可以是鼠标或手写板等任何可以在计算机上使用的周边装置,在此并不局限。接着,当使用的手指向下单次单击(或称点放,即手指向下点,如同手指在鼠标上向下按的动作),体感侦测器则辨识为仿真鼠标左键单击的模式,如图2C所示。然而,若是使用者的手指向下多次点放,体感侦测器则辨识为仿真鼠标左键多击的模式。另外,若使用者想要放大或缩小屏幕上显示文字或图片的尺寸,将使用者的食指与拇指分开或靠近,体感侦测器侦测到使用者的食指与拇指分开或靠近的动作,将此动作信号传递至计算机,计算机立即将屏幕所显示的文字或图片放大或缩小,如图2D所示。另外,在此需要说明的是,使用者的食指与拇指分开或靠近可以是右手的食指与拇指,或是左有的食指与拇指,在此并不局限。另外,当仿真鼠标中间滚轮操作来上下浏览页面,如第2E图所示,使用者的左手四指平举并纵向后移动以仿真鼠标滚轮向后移动屏幕上的页面,而当使用者的左手四指纵向向前移动以仿真鼠标滚轮向前移动屏幕上的页面。然而,在不同实施例中,使用者也可以使用右手仿真鼠标滚轮的操作,在此并不局限。而如图2F所示,当使用者的手指左右挥动时,计算机辨识为将操作系统的窗口切换的指令,当使用者的手指左右挥动一次,操作系统的窗口就会切换一次。而使用者的手指左右挥动可以是一指左右挥动或是两指以上的左右挥动,在此并不局限。
图3是显示本发明的利用体感侦测器的手势辨识方法的流程图。如图3所示,在此实施例的体感侦测器的手势辨识方法,包含下列步骤。在步骤S301中,通过体感侦测器侦测一第一手势影像信息,体感侦测器通过侦测手势的移动,并将此手势与储存在电子装置内的手势指令做比对。在步骤S302中,辨识所述第一手势影像信息对应的一第一操作指令。根据储存在计算机内的手势指令,辨识第一手势影像信息对应的第一操作指令。然后在步骤S303中,根据第一操作指令将一电子装置从第一输入模式切换至第二输入模式。当电子装置辨识出第一手势影像信息所代表的指令,将电子装置目前的第一输入模式切换至第二输入模式。举例来说,第一输入模式可以是键盘输入模式,当电子装置辨识使用者的第一手势影像信息时,可以从键盘输入模式切换至第二输入模式。而第二输入模式可以是仿真鼠标的输入模式或是仿真触控的输入模式,在此并不局限。接着,在步骤S304中,通过体感侦测器侦测一第二手势影像信息。在第二输入模式时,体感侦测器侦测到使用者的第二手势影像信息。然后在步骤S305中,辨识所述第二手势影像信息对应的一第二操作指令。在体感侦测器辨识到第二手势影像信息后,电子装置将此第二手势影像信息与储存在电子装置内的手势指令做比对,以找到对应的第二操作指令。最后,在步骤S306中,在电子装置上执行第二操作指令对应的操作。在此所述的第二操作指令可以是仿真鼠标左键的操作、仿真鼠标中间滚轮的操作、仿真切换显示窗口的操作或仿真显示页面放大或缩小的操作,在此并不局限。另外,在此需要说明的是,在本发明的手势辨识方法所述的体感侦测器较佳为深度摄影机。而本发明的实施例中的电子装置较佳为桌上型计算机或笔记型计算机,但也可以用于配用键盘的平板计算机上,在此并不局限。
图4是显示本发明的手势指令辨识系统的方块图。如图4所示,手势指令辨识系统40主要包含屏幕402、键盘404、体感侦测器406、辨识软件408与主机410。屏幕402与键盘404分别连接至主机410,体感侦测器406设置在屏幕402的上方,且电性连接主机410。另外,体感侦测器406较佳包含深度摄影机,用于侦测使用者在屏幕前面与键盘上方的手势动作影像,然后将手势影像信息传递给辨识软件408。辨识软件408是预先安装于主机410内,将体感侦测器406所辨识的手势影像信息传递给辨识软件408,辨识软件408将此手势影像信息与预先储存在辨识软件408的数据库4082的手势影像信息作比对,若辨识软件找到对应的手势影像信息在数据库4082内,则执行对应此手势影像信息的指令。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (14)

1.一种体感侦测器的手势辨识方法,其特征在于,其包含:
启动一电子装置的所述体感侦测器;
当所述体感侦测器侦测一使用者的至少一手指产生一第一动作时,将所述电子装置从一第一输入模式切换至一第二输入模式;以及
在所述第二输入模式下,所述电子装置根据所述体感侦测器侦测所述使用者的所述至少一手指产生的一第二动作以执行一操作。
2.根据权利要求1所述的方法,其特征在于,所述第一动作为所述使用者的所述至少一手指向上举一角度。
3.根据权利要求1所述的方法,其特征在于,所述第二动作为所述至少一手指单次单击以仿真一鼠标左键单击的操作。
4.根据权利要求1所述的方法,其特征在于,所述第二动作为所述至少一手指多次单击以仿真一鼠标左键多击的操作。
5.根据权利要求1所述的方法,其特征在于,所述第二动作为所述至少一手指纵向前后移动以仿真鼠标中间滚轮的操作。
6.根据权利要求1所述的方法,其特征在于,所述第二动作为所述至少一手指中的食指与拇指分开与靠近以仿真窗口放大与缩小。
7.一种体感侦测器的手势辨识方法,其特征在于,其包含:
通过所述体感侦测器获得一第一手势影像信息;
辨识所述第一手势影像信息对应的一第一操作指令;
根据所述第一操作指令将一电子装置从一第一输入模式切换至一第二输入模式;
通过所述体感侦测器获得一第二手势影像信息;
辨识所述第二手势影像信息对应的一第二操作指令;以及
在所述电子装置上执行所述第二操作指令对应的一操作。
8.根据权利要求7所述的方法,其特征在于,所述体感侦测器为一深度摄影机。
9.根据权利要求7所述的方法,其特征在于,所述第一输入模式为键盘输入模式。
10.根据权利要求7所述的方法,其特征在于,所述第一动作为使用者的所述至少一手指向上举一角度。
11.根据权利要求7所述的方法,其特征在于,所述第二动作为所述至少一手指单字单击以仿真一鼠标左键单击的操作。
12.根据权利要求7所述的方法,其特征在于,所述第二动作为所述至少一手指多次点击以仿真一鼠标左键多击的操作。
13.根据权利要求7所述的方法,其特征在于,所述第二动作为所述至少一手指纵向前后移动以仿真鼠标中间滚轮的操作。
14.根据权利要求7所述的方法,其特征在于,所述第二动作为所述至少一手指中的食指与拇指分开与靠近以仿真窗口放大与缩小。
CN201410137357.4A 2014-04-08 2014-04-08 体感侦测器的手势辨识方法 Pending CN104978013A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410137357.4A CN104978013A (zh) 2014-04-08 2014-04-08 体感侦测器的手势辨识方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410137357.4A CN104978013A (zh) 2014-04-08 2014-04-08 体感侦测器的手势辨识方法

Publications (1)

Publication Number Publication Date
CN104978013A true CN104978013A (zh) 2015-10-14

Family

ID=54274593

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410137357.4A Pending CN104978013A (zh) 2014-04-08 2014-04-08 体感侦测器的手势辨识方法

Country Status (1)

Country Link
CN (1) CN104978013A (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102520794A (zh) * 2011-12-06 2012-06-27 华映视讯(吴江)有限公司 手势辨识系统及方法
CN102981742A (zh) * 2012-11-28 2013-03-20 无锡市爱福瑞科技发展有限公司 基于计算机视觉的手势交互系统
CN103139627A (zh) * 2013-02-07 2013-06-05 上海集成电路研发中心有限公司 智能电视及其手势控制方法
CN103440049A (zh) * 2013-08-28 2013-12-11 深圳超多维光电子有限公司 一种输入装置及输入方法
CN103440033A (zh) * 2013-08-19 2013-12-11 中国科学院深圳先进技术研究院 一种基于徒手和单目摄像头实现人机交互的方法和装置
CN103645804A (zh) * 2013-12-18 2014-03-19 三星电子(中国)研发中心 识别人体手势的方法、装置以及使用其的手表
CN103685908A (zh) * 2012-09-12 2014-03-26 联发科技股份有限公司 控制摄像装置相关功能的执行的方法
CN103677442A (zh) * 2012-08-28 2014-03-26 广达电脑股份有限公司 键盘装置及电子装置
CN103686283A (zh) * 2013-12-12 2014-03-26 成都优芯微电子技术有限公司 一种智能电视遥控器人机交互方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102520794A (zh) * 2011-12-06 2012-06-27 华映视讯(吴江)有限公司 手势辨识系统及方法
CN103677442A (zh) * 2012-08-28 2014-03-26 广达电脑股份有限公司 键盘装置及电子装置
CN103685908A (zh) * 2012-09-12 2014-03-26 联发科技股份有限公司 控制摄像装置相关功能的执行的方法
CN102981742A (zh) * 2012-11-28 2013-03-20 无锡市爱福瑞科技发展有限公司 基于计算机视觉的手势交互系统
CN103139627A (zh) * 2013-02-07 2013-06-05 上海集成电路研发中心有限公司 智能电视及其手势控制方法
CN103440033A (zh) * 2013-08-19 2013-12-11 中国科学院深圳先进技术研究院 一种基于徒手和单目摄像头实现人机交互的方法和装置
CN103440049A (zh) * 2013-08-28 2013-12-11 深圳超多维光电子有限公司 一种输入装置及输入方法
CN103686283A (zh) * 2013-12-12 2014-03-26 成都优芯微电子技术有限公司 一种智能电视遥控器人机交互方法
CN103645804A (zh) * 2013-12-18 2014-03-19 三星电子(中国)研发中心 识别人体手势的方法、装置以及使用其的手表

Similar Documents

Publication Publication Date Title
US10444989B2 (en) Information processing apparatus, and input control method and program of information processing apparatus
US10061510B2 (en) Gesture multi-function on a physical keyboard
US7849421B2 (en) Virtual mouse driving apparatus and method using two-handed gestures
CN102830819B (zh) 模拟鼠标输入的方法及设备
KR101117481B1 (ko) 멀티터치 방식 입력제어 시스템
US8542206B2 (en) Swipe gestures for touch screen keyboards
US10585493B2 (en) Touch sensitive mechanical keyboard
CN103034427B (zh) 一种触摸屏翻页方法、装置及一种触摸屏设备
US8432301B2 (en) Gesture-enabled keyboard and associated apparatus and computer-readable storage medium
US20100149099A1 (en) Motion sensitive mechanical keyboard
US20060119588A1 (en) Apparatus and method of processing information input using a touchpad
CN203276188U (zh) 计算机输入装置
CN103218044B (zh) 一种基于物理回馈的触摸装置及其触摸处理方法
CN102023735A (zh) 一种触摸输入设备、电子设备及手机
JP2015090670A (ja) 電子機器、方法およびプログラム
WO2017112714A1 (en) Combination computer keyboard and computer pointing device
US20140298275A1 (en) Method for recognizing input gestures
KR20090124172A (ko) 손의 모양 변화에 기초하여 제어되는 가상 마우스 장치 및그 구동 방법
CN103472931A (zh) 鼠标仿真触控屏幕操作的方法
CN101377725A (zh) 手持式电子装置及其控制方法
US20150103010A1 (en) Keyboard with Integrated Pointing Functionality
KR20130090210A (ko) 입력 장치
CN104978013A (zh) 体感侦测器的手势辨识方法
TWI603226B (zh) 體感偵測器之手勢辨識方法
CN206162403U (zh) 用于头戴显示装置的键盘

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20151014