CN102902469B - 手势识别方法及触控系统 - Google Patents

手势识别方法及触控系统 Download PDF

Info

Publication number
CN102902469B
CN102902469B CN201110209024.4A CN201110209024A CN102902469B CN 102902469 B CN102902469 B CN 102902469B CN 201110209024 A CN201110209024 A CN 201110209024A CN 102902469 B CN102902469 B CN 102902469B
Authority
CN
China
Prior art keywords
touch
application program
gesture
event signal
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201110209024.4A
Other languages
English (en)
Other versions
CN102902469A (zh
Inventor
张庆阳
吴祥成
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
TPK Touch Solutions Inc
Original Assignee
TPK Touch Solutions Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by TPK Touch Solutions Inc filed Critical TPK Touch Solutions Inc
Priority to CN201110209024.4A priority Critical patent/CN102902469B/zh
Priority to US13/472,500 priority patent/US8847904B2/en
Priority to KR1020120061446A priority patent/KR101502659B1/ko
Priority to TW101120834A priority patent/TWI467438B/zh
Priority to EP12172802.6A priority patent/EP2551759A3/en
Priority to JP2012145317A priority patent/JP5784551B2/ja
Publication of CN102902469A publication Critical patent/CN102902469A/zh
Application granted granted Critical
Publication of CN102902469B publication Critical patent/CN102902469B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04808Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

本发明涉及一种应用于触控设备的手势识别方法及触控系统。一种手势识别方法,包括:根据触控面板上的触控信息判断输入手势是否符合预定义的通用手势的规则;及当该输入手势符合该通用手势的规则时,发送一事件信号,并根据该事件信号产生对应的手势功能列。上述方法可免除用户记忆一堆的操作手势并让操作更为直接方便、不易出错。

Description

手势识别方法及触控系统
【技术领域】
本发明涉及触控技术领域,特别是涉及一种应用于触控设备的手势识别方法及触控系统。
【背景技术】
现今存在着许多种类型的输入设备用于执行计算机系统中的操作。这些操作通常对应于在显示屏幕上移动光标并作出选择。这些操作也可包括翻页、滚动、摇动、缩放等等。举例来说,输入设备可以是按钮、开关、键盘、鼠标、跟踪轨迹球、触控板、控制杆、触摸屏等等。
利用触控板设备,例如笔记本电脑的触控板,显示器上的输入指示器的移动通常对应于当用户的手指沿触控面板的表面移动时用户的手指(或指示笔)的相对移动。另一方面,触摸屏是一种在屏幕的透明面板上设有触敏器件的显示屏。当使用触摸屏时,用户通过屏幕上的图形用户界面(Graphical User Interface,GUI)对象(通常使用指示笔或手指)直接在显示屏幕上作选择。
为了提供附加的功能,已经使用这些输入设备的某些实现了手势(Gesture)识别。举例来说,在触控面板中,当在触控面板的表面上检测到一次或多次轻敲时可作出选择。在某些情况下,可以轻敲触控面板的任何部分,而在另一种情况下可以轻敲触控面板的指定部分。除了用于选择,还可通过利用触控面板的边界处的手指运动启动滚动。
近期,已经实现了更加高级的手势。例如,通过将四个手指放在触控面板以便识别滚动手势,并据此在触控面板上移动这些手指以执行滚动事件。随着新的手势输入设备不断地涌现,各种操作系统之间,甚至于同一操作系统内部的多个应用程序之间的手势命令很可能都逐渐发展成不近相同。而随着这些手势命令变得日益复杂,使用者常常会很困惑或不确定怎样去正确地与某一个特定的手势识别程序进行交互。举例来说,当一个用户用两只手指接触一个触控屏的窗口的两端,然后使一个手指朝另一个手指移动。这个输入手势可以被程序X解释为“关闭窗口”的命令,也可以被程序Y解释为“画直线”的命令。更进一步来说,当手势日趋复杂化时(例如包含了移动、拖拽、压力触控等各种元素的组合),用户们往往会变得很困惑怎样去输入正确的手势,而且很不确定输入的手势会被软件识别成何种命令。
【发明内容】
基于此,有必要提供一种用户操作较为方便的手势识别方法及系统。
一种手势识别方法,包括:
根据触控面板上的输入手势判断该输入手势是否符合预定义的通用手势的规则;及
当该输入手势符合该通用手势的规则时,发送一事件信号,并根据该事件信号产生对应的手势功能列。
在优选的实施例中,上述手势识别方法还包括:
判断是否由应用程序来响应该事件信号。
在优选的实施例中,当判断结果为由该应用程序来响应该事件信号时,进一步包括:
将该事件信号放入该应用程序的事件序列表中;及
该应用程序从该事件序列表中取得该事件信号并显示与该应用程序相对应的手势功能列。
在优选的实施例中,当判断结果为不由该应用程序来响应该事件信号时,进一步包括:显示与操作系统相对应的手势功能列。
在优选的实施例中,该通用手势为三个或三个以上的手指所形成的抓的手势。
在优选的实施例中,根据触控面板上的触控信息判断该输入手势是否符合该通用手势的规则的步骤包括:
判断一初始时间该触控面板上是否有三个或以上的触控点;
当判断该初始时间的触控点的结果为是时,进一步判断在一第一预定时间内所有触控点皆存在的条件下,所有触控点所连接形成的一多边形的面积是否与时间成反比;及
当判断该多边形的面积与时间的结果为是时,检测出该输入手势符合该通用手势的规则。
在优选的实施例中,判断所述多边形的面积是否与时间成反比的步骤进一步包括:
判断在该第一预订时间内所有触控点是否保持存在;及
当在该第一预定时间内有至少一该些触控点消失时,或者判断该多边形的面积与时间成反比的结果为否时,确认该输入手势符合该通用手势的规则为不成立。
在优选的实施例中,根据触控面板上的触控信息判断该输入手势是否符合该通用手势的规则的步骤包括:
判断一初始时间该触控面板上是否有三个或以上的触控点;
当判断该初始时间的触控点的结果为是时,进一步判断在一第一预定时间内所有触控点皆存在的条件下,相邻各触控点之间的距离是否与时间成反比;及
当判断该相邻各触控点之间的距离与时间的结果为是时,检测出该输入手势符合该通用手势的规则。
在优选的实施例中,判断相邻各触控点之间的距离是否与时间成反比的步骤进一步包括:
判断在该第一预订时间内所有触控点是否保持存在;及
当在该第一预定时间内有至少一该些触控点消失时,或者判断相邻各触控点之间的距离与时间的结果为否时,确认该输入手势符合该通用手势的规则为不成立。
在优选的实施例中,判断是否由应用程序来响应该事件信号的步骤包括:
确定该三个或以上触控点的质心;
判断该质心是否位于该应用程序的窗口的区域内;及
当判断该质心位置的结果为是时,由该应用程序来响应该事件信号;
当判断该质心位置的结果为否时,由操作系统来响应该事件信号。
在优选的实施例中,确定该三个或以上触控点的质心的步骤为:
设每个触控点Pi的坐标为(xi,yi),其中i=1,2,3...n,n≥3;
则质心点M的坐标为
在优选的实施例中,根据触控面板上的触控信息判断该输入手势是否符合该通用手势的规则的步骤还包括:
在检测出该输入手势符合该通用手势的规则之后,判断所有触控点是否进一步在一第二预定时间内全部消失;
若判断所有触控点是否全部消失的结果为是时,确认该输入手势符合该通用手势的规则为成立;及
若判断所有触控点是否全部消失的结果为否时,确认该输入手势符合该公用手势的规则为不成立。
在优选的实施例中,当判断该输入手势是否符合该通用手势的规则的结果为否时,操作系统依据该触控信息来执行对应的系统操控指令。
一种触控系统,包括:
触控面板,用于获取至少一个手指触碰所产生的触控信息;
触控集成电路,当根据该触控面板上的触控信息判断输入手势符合该通用手势的规则时,发送一事件信号;及
处理器,根据该事件信号控制操作系统或应用程序来产生对应的手势功能列。
在优选的实施例中,上述触控系统还包括:存储器,用于存储操作系统及位于该操作系统上层的应用程序。
在优选的实施例中,当该处理器判断由该应用程序来响应该事件信号时,该处理器将该事件信号放入该应用程序的事件序列表中,使得该应用程序从该事件序列表中取得该事件信号并显示与该应用程序相对应的手势功能列。
上述手势识别方法及系统提供了一种通用手势,该通用手势经由触控集成电路辨识之后组成一个特殊的事件信号传送到处理器;处理器根据该事件信号控制操作系统或应用程序来产生对应的手势功能列,最后操作系统或应用程序再搭配手势功能列中的可视化组件将可运用的操作显示在屏幕上让用户直接操作他想要的动作。这一方式可免除用户记忆一堆的操作手势并让操作更为直接方便、不易出错。
【附图说明】
通过附图中所示的本发明的优选实施例的更具体说明,本发明的上述及其它目的、特征和优势将更加清晰。在全部附图中相同的附图标记指示相同的部分。并未刻意按实际尺寸等比例缩放绘制附图,重点在于示出本发明的主旨。
图1为一实施方式的手势识别方法的流程示意图;
图2举例说明了一个触控点的触控信息;
图3举例说明了多个触控点的触控信息;
图4为一实施方式的判断触控信息是否符合该通用手势的规则的流程示意图;
图5为另一实施方式的判断触控信息是否符合该通用手势的规则的流程示意图;
图6为一实施方式的是否由应用程序来响应事件信号的判断过程的流程示意图;
图7表示触控点为三个时的通用手势演示图;
图8表示触控点为四个时的通用手势演示图;
图9表示触控点为五个时的通用手势演示图;
图10为一实施方式的手势识别系统的架构示意图。
【具体实施方式】
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图对本发明的具体实施方式做详细的说明。在下面的描述中阐述了很多具体细节以便于充分理解本发明。但是本发明能够以很多不同于在此描述的其它方式来实施,本领域技术人员可以在不违背本发明内涵的情况下做类似推广,因此本发明不受下面公开的具体实施的限制。在未做特别说明的情况下,其中一个实施例的特征也可以与其他实施例进行有益地组合。
本实施方式的基本思想是:定义并存储一个通用的手势于触控装置中。该通用手势经由触控集成电路内建的固件算法辨识之后形成一个特殊的事件(Event)信息传送到处理器(CPU,Central Processing Unit)。CPU根据此手势发生的几何特性(例如位置(Position)、区域(Area)与型态(Type)等)来决定是要由操作系统来解译此信息或转交给应用程序(AP,application program)来解译信息的实际意义。最后操作系统或应用程序再搭配可视化的图形用户界面(GUI,Graphical User Interface)组件,如突显式窗口(Popup Window)等,将可运用的操作显示在屏幕上让用户直接选择他想要的做出的命令。这一方式可免除用户记忆一堆的操作手势并让操作更直接、不易出错、最重要的是操作的多样性变的更丰富。根据后续细节描述,本申请的具体实施方式可在特制的电脑系统或普通的电脑系统中得以实现。
请参阅图1,一实施方式的手势识别方法包括如下步骤:
步骤S100,预先定义一通用手势的规则。该通用手势可为“抓”、“敲击”、“拖放”、“旋转”、“缩放”等,本实施方式中,以“抓”来说明。“抓”这一手势的规则可定义为:以三个或三个以上的手指同时向内弯曲并相互靠近的过程。该通用手势的定义可在产品出厂前就直接写入硬件芯片内部,以便使用者在使用时直接读取。
步骤S200,获取至少一个手指(或手写笔)在触控面板上的触控信息。如图2所示,该触控信息可以包括一个触控点P的x坐标、y坐标、触控点出现的初始时刻Tn、压力大小及运动轨迹等信息。如图3所示,该触控信息还可以包括多个触控点Pi的连线距离D、连线之间的夹角θ、由连线所组成的多边形G的面积A及多个触控点的质心M坐标等信息。
步骤S300,根据上述触控信息判断输入手势是否符合该通用手势的规则。可以根据触控信息来判断出使用者是否确定要做出“抓”这一通用手势。如果该输入手势不符合该通用手势的规则,则进入步骤S350,将触控信息直接发送到一处理器,并且由操作系统依据该触控信息来执行对应的一系统操控指令,例如:点选、移动等指令。如果该输入手势符合该通过手势的规则,则进入步骤S400,发送一个事件信号到处理器。
由于触控信息的内容比较丰富,因此步骤S300的判断过程也可以有多种,以下仅列举其中两种进行说明。请参阅图4,第一种判断方法包括如下步骤:
步骤S301,判断初始时刻Tn触控面板上是否有三个或以上的触控点。即判断触控点Pi的数量i是否大于等于3,一般来说i≤5。
在一个实施例中,如果触控点Pi的数量i小于3,这说明只有一个或两个手指在接触触控板,则进行到步骤S330,再此确定该输入手势不符合该通用手势的规则,接着进入步骤S350(见图1),将触控信息直接发送到一处理器,并且由操作系统依据该触控信息来执行对应的一系统操控指令,例如:点选、移动等指令。如果触控点Pi的数量i大于等于3,则进入步骤S302,将所有的触控点Pi连接成一多边形Gn
步骤S303,判断Tn+1时刻的所有的触控点是否存在。Tn+1时刻与Tn时刻间隔1帧(frame)。单帧的时间长度可以由触控面板的扫描频率所确定。当判断为否,即至少一个触控点在Tn+1时刻消失时,进入步骤S330。
当判断为是时,进入步骤S304,将所有的触控点Pi连接成一多边形Gn+1
步骤S305,判断Tn+2时刻的所有的触控点是否存在。同理,Tn+2时刻与Tn+1时刻间隔也为1帧。当判断为否时,返回步骤S330。
当判断为是时,进入步骤S306,将所有的触控点连接成一多边形Gn+2
步骤S307,判断多边形Gn的面积An是否大于多边形Gn+1的面积An+1,且多边形Gn+1的面积An+1是否大于多边形Gn+2的面积An+2。换句话说,也就是判断在一第一预定时间(以3帧为例)内所有触控点Pi均存在的条件下,所有触控点Pi所连接形成的多边形G的面积A是否随着时间的增加而减小(面积与时间成反比)。其中,多边形Gn的面积An可以使用业内的习知方法,通过Pi的坐标计算得到。
当步骤S307的判断结果为是时,进入步骤S308,检测出该输入手势符合该通用手势的规则。请同时参阅图7至图9,当An>An+1>An+2时,即面积在逐渐收缩时,说明所有的触控点都在相互靠拢,构成“抓”的手势。反之若An>An+1>An+2不成立时,则表示至少有一个触控点在做与其他触控点相远离的运动,没有构成“抓”的手势。当步骤S307的判断结果为否时,返回步骤S330。
由上述步骤可知,只需采集3个帧(Tn、Tn+1、Tn+2)的数据即可判断出使用者是否做出了该通用手势。为了获得更加精确的手势判断结果,也可以延长第一设定时间的长度,以增加帧的比对次数。
在更为优选的方案里,在步骤S308检测出该输入手势符合该通用手势的规则之后,还包括步骤S309,判断所有触控点Pi是否进一步在一第二预定时间Tn+2+m(m为任意自然数)内全部消失。其中第二预定时间是依据实际设计所需来设定,在此并无加以限制。若步骤S309的判断结果为是,则表示所有手指在第二预定时间内全部同时或依序离开触控面板,于是进入步骤S310,以确认该输入手势符合该通用手势的规则为成立。反之,若步骤S309的判断结果为否,则表示在检测出该输入手势符合该通用手势的规则之后的第二预定时间内有至少一手指离开触控面板,但其余手指并未接续着离开,而逾第二预定时间,于是进入步骤330,确认该输入手势符合该公用手势的规则为不成立。
请参阅图5,第二种判断方法包括如下步骤:
步骤S311,判断初始时刻Tn触控面板上是否有三个或以上的触控点。即判断触控点Pi的数量i是否大于等于3,一般来说i≤5。
如果触控点Pi的数量i小于3,这说明只有一个或两个手指在接触触控板,则进行到步骤S330,再此确定该输入手势不符合该通用手势的规则,接着进入步骤S350,将触控信息直接发送到一处理器,并且由操作系统依据该触控信息来执行对应的一系统操控指令,例如:点选、移动等指令。如果触控点Pi的数量i大于等于3,则进入步骤S312,获取相邻两触控点之间的距离Dijn
步骤S313,判断Tn+1时刻的所有的触控点是否存在。Tn+1时刻与Tn时刻间隔1帧(frame)。单帧的时间长度可以由触控面板的扫描频率所确定。当判断为否时,即至少一个触控点在Tn+1时刻消失,进入步骤S330。
当判断为是时,进入步骤S314,获取相邻各触控点之间的距离Dij(n+1)
步骤S315,判断Tn+2时刻的所有的触控点是否存在。同理,Tn+2时刻与Tn+1时刻间隔也为1帧。当判断为否时,进入步骤S330。
当判断为是时,进入步骤S316,获取相邻各触控点之间的距离Di(n+2)
步骤S317,判断Din是否大于Di(n+1),且Di(n+1)是否大于Di(n+2)。换句话说,也就是判断在一第一预定时间(以3帧为例)内所有触控点Pi均存在的条件下,相邻各触控点之间的距离Di是否随着时间的增加而减小(距离与时间成反比)。
当步骤S317的判断结果为是时,进入步骤S318,检测出该输入手势符合该通用手势的规则。请同时参阅图7至图9,当Din>Di(n+1)>Di(n+2)时,即相邻触控点的距离逐渐减小时,说明所有的触控点都在相互靠拢,构成“抓”的手势。反之若Din>Di(n+1)>Di(n+2)不成立时,则表示至少有一个触控点在做与其他触控点相远离的运动,没有构成“抓”的手势。当步骤S317的判断结果为否时,进入步骤S330。
在优选的实施例中,在步骤S318检测出该输入手势符合该通用手势的规则之后,还包括步骤S319,判断所有触控点Pi是否进一步在一第二预定时间(Tn+2+m)内全部消失。其中第二预定时间是依据实际设计所需来设定,在此并无加以限制。若步骤S319的判断结果为是,则表示所有手指在第二预定时间内全部同时或依序离开触控面板,于是进入步骤S320,以确认该输入手势符合该通用手势的规则为成立。反之,若步骤S319的判断结果为否,则表示在检测出该输入手势符合该通用手势的规则之后的第二预定时间内有至少一手指离开触控面板,但其余手指并未接续着离开,而逾时第二预定时间,于是进入步骤S330,确认该输入手势符合该公用手势的规则为不成立。
附带一提的是,上述图4及图5的实施例分别是以多边形的面积及各边长度(相邻两点的距离)来判断是否构成“抓”的手势。然而,在实际设计上,若为了更精确地判断出“抓”的手势的话,可在各帧时间中,进一步加以判断某一触控点与其相邻两个触控点连线所形成的夹角在靠拢过程中是否维持相同的角度。换句话说,当各触控点Pi在靠拢的过程中需为直线移动的状态,让所形成的夹角维持相同的角度时,才可被判定为“抓”的手势。
如上所述,当执行图2中的步骤S310或图3中的步骤S320之后,即可确认该输入手势符合该通用手势的规则为成立。于是,便可进一步进入图1中的步骤S400,发送一个事件(Event)信号到处理器。
该事件信号可由以下字段所组成:
型态:长度=2bits,01=3指,10=4指,11=5指;
区域:长度=14bits,数值范围=0-16384;
位置:长度=16bits,数值范围=0-65535。
步骤S500,判断是否由应用程序来响应该事件信号。处理器根据上述事件信号的型态、区域、位置等信息来判断是由操作系统还是由应用程序来响应该事件信号。以下以一个实施例来说明上述判断过程。请参阅图6,该判断方法包括:
步骤S510、确定三个或以上触控点Pi的质心位置。
多个触控点Pi的质心位置可以由多种方法确定,最简单的方法是直接获取由Pi连接成一多边形Gn的几何中心。
设每个触控点Pi的坐标为(xi,yi),其中i=1,2,3...n,n≥3;
则质心点M的坐标为
当然也可以采用内接圆或外接圆的圆心来作为质心,还可以根据每个点的压力大小不同确定出一个中心来作为质心。
步骤S520,判断该质心是否位于该应用程序的窗口的区域内。一般的应用程序的窗口只占操作系统的桌面(desktop)的部分区域。当判断的结果为质心点的坐标是位于该部分区域所覆盖的范围内时,说明使用者正在对应用程序进行操作,则进入步骤S530。当判断的结果为质心点的坐标是位于该部分区域所覆盖的范围外时,则表示使用者正在对操作系统进行操作,进入步骤S540,由操作系统来响应该事件信号,于是,便进入如图1所示的步骤S800。
步骤S530,由应用程序来响应该事件信号。于是,便可进一步进入图1中的步骤S600。
步骤S600,当判断由该应用程序来响应该事件信号的结果为是时,将该事件信号放入该应用程序的事件序列表(Event Queue)中。附带一提的是,本领域技术人员可以了解,一般在系统及应用程序之间进行信号传输时,通常会进一步将该信号进行封装等处理以使其符合收发格式之后再进行传输。
接着进入步骤S700,该应用程序从该事件序列表中取得该事件信号并产生对应显示于该应用程序的界面的可供使用者选择的手势功能列。该手势功能列可以是一个链接多个动作指令的地图,其包含多个图形元素(GUI Elements),并可让用户得以选择和操作手势功能列中的各个图形元素,以执行应用程序所支持的手势操作功能。举例来说,使用者可以通过上述图形元素实现(包括但不限于)打开新窗口、关闭窗口、删除、改名、全选、剪切、复制、粘贴、取消、确认、旋转、拖拽、放大、缩小、组合、分离、斜体、加粗、加下划线、前近、后退、播放、暂停、无声等等。
当判断由该应用程序来响应该事件信号的结果为否时,进入步骤S800,操作系统产生对应显示于该操作系统的界面的手势功能列。
请参阅图10,所示为一实施例的手势识别系统的架构示意图。手势识别系统100可应用于个人计算机系统,诸如桌面型、笔记本型、平板型或手持计算机;还可应用于诸如手机、PDA(Personal Digital Assistant)、媒体播放器、消费类电子设备等具有计算功能的电子设备。
图10所示的示例性的手势识别系统100包括配置用于执行指令并完成与手势识别系统相关的操作的处理器10。例如,利用例如从存储器获取的指令,处理器10可以控制手势识别系统100的各组件之间输入和输出数据的接收和操纵。处理器10可以在单芯片、多芯片或多个电子元件上实现。例如,多种体系结构可被用于处理器10,包括专用或嵌入式处理器、专用处理器、控制器、ASIC(Application Specific Integrated Circuit)等等。
手势识别系统100还包括与处理器10相连的存储器20,存储器20用于存储操作系统21(OS)。存储器20通常是用来存储或提供由手势识别系统100使用的计算机代码和数据的地方。举例来说,存储器20可包括只读存储器(ROM)、随机存取存储器(RAM)、硬盘驱动器等等。如有必要,存储器20还可包括移动存储媒介。移动存储媒介包括CD-ROM、PC-CARD、记忆卡、软盘、磁带或网络存储组件。操作系统21是众所周知的,将不再更加详细地描述。举例来说,操作系统21可为Windows、OS/2、DOS、Unix、Linux、PalmOS等等。操作系统21也可以是专用操作系统,如可能会用于有限用途的应用型计算设备。
存储器20还用于存储位于操作系统21上层的应用程序(AP,applicationprogram)22。应用程序22也是众所周知的,是指为了完成某项或某几项特定任务而被开发运行于操作系统21之上的计算机程序,例如可为文字、图像处理程序、音像处理程序、数据分析程序、及游戏程序等。本领域技术人员可以了解,目前的操作系统21和应用程序22大多采用图形用户接口(GUI)的设计。一般来说,GUI即是以图形图像来表示程序、文件和操作选项,用以提供使用者一个易于使用的操作接口。
手势识别系统100还包括可操作地连接到处理器10的显示设备30。显示设备30可以是液晶显示器(LCD)、阴极射线管(CRT)显示器等等。显示设备30还可以是等离子体显示器或以电子墨水实现的显示器。操作系统21和应用程序22的操作介面均通过显示设备30得以显示给使用者。
手势识别系统100还包括与显示设备30相结合,且可操作地连接到处理器10的触摸感应设备40。触摸感应设备40可以基于各种感应技术,包括但不限于电容感应、电阻感应、表面声波感应、压力感应、光感应等等。触摸感应设备40配置用于将所接收的外部数据从外部世界传送到处理器10中。触摸感应设备40可包括配置用于感应用户的触击操作的触控面板41和与该触控面板41相连的触控集成电路(IC)42。在多数情况下,触控面板41用于识别使用者在其表面上的触控信息。触控IC 42内设有固件(firmware),包括用于储存一通用手势的规则的通用手势储存模块421,和用于判断该输入手势是否符合该通用手势的规则的判断模块422。
如前所述,通用手势储存模块421可以储存“抓”、“敲击”、“拖放”、“旋转”、“缩放”等通用手势,本实施方式中,以“抓”来说明。
判断模块422可以根据触控信息来判断出使用者是否做出了“抓”这一通用手势。具体判断过程可以参考图4至图5及前述内容。
触控IC 42还能够在当该输入手势符合该通用手势的规则时,发送一事件(Event)信号给处理器10。
处理器10根据上述事件信号的型态、区域、位置等信息来判断是由操作系统21还是由应用程序22来响应该事件信号,例如可以采用前述确定触控点质心位置的方法来判断是由操作系统21还是由应用程序22来响应该事件信号。
当判断由应用程序22来响应该事件信号时,处理器10将该事件信号封装后放入应用程序22的事件序列表(图未示)中。应用程序22在处理器10的控制下,从该事件序列表中取得该事件信号并产生对应的可供使用者选择的手势功能列24,并将该手势功能列24显示在其操作界面上。本实施例中,应用程序22产生的手势功能列24同样是属于图形用户接口,以供使用者选择和操作。值得一提的是,本实施例的手势功能列24中的各个图形元素(Element)是分别对应该应用程序22所支持的手势操作功能。例如:在用于检视图片的应用程序22中,所对应产生的手势功能列24即可具有分别代表诸如显示屏的滚动、图片的旋转、放大及缩小等手势操作功能的图形元素,以供用户点选来执行。当然,应用程序22除了本身默认的手势操作功能之外,也可由使用者来自行新增定义所需的手势操作功能,在此并未加以限制。如此,用户在使用不同的应用程序22时,无需再针对各个应用程序22来记忆各种复杂手势,只需做出一通用的手势便可执行应用程序22所支持的手势操作功能。
同理,当处理器10根据上述事件信号的型态、区域、位置等信息判断出由操作系统21来响应该事件信号时,操作系统21在处理器10的控制下,产生对应可供使用者选择的手势功能列24,并将该手势功能列24显示在其操作界面上。
最后,若触控IC 42判断该输入手势不符合该通用手势的规则时,或确认该输入手势符合该公用手势的规则为不成立时,则直接将该触控信息作为一般的输入信号发送至处理器10,由操作系统20依据该触控信息来执行对应的一系统操控指令(如点选、移动等)。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。

Claims (12)

1.一种手势识别方法,其特征在于,包括:
根据触控面板上的触控信息判断输入手势是否符合预定义的通用手势的规则;及
当该输入手势符合该通用手势的规则时,发送一事件信号,并根据该事件信号产生对应的手势功能列;
其中,根据触控面板上的触控信息判断该输入手势是否符合该通用手势的规则的步骤包括:
判断一初始时间该触控面板上是否有三个或以上的触控点;
当判断该初始时间的触控点的结果为是时,进一步判断在一第一预定时间内所有触控点皆存在的条件下,所有触控点所连接形成的一多边形的面积是否与时间成反比或是进一步判断在该第一预定时间内所有触控点皆存在的条件下,相邻各触控点之间的距离是否与时间成反比;
当判断该多边形的面积与时间的结果为是时,检测出该输入手势符合该通用手势的规则;
当判断该相邻各触控点之间的距离与时间的结果为是时,检测出该输入手势符合该通用手势的规则;及
判断是否由应用程序来响应该事件信号,其中判断是否由应用程序来响应该事件信号的步骤包括:
确定该三个或以上触控点的质心;
判断该质心是否位于该应用程序的窗口的区域内;及
当判断该质心位置的结果为是时,由该应用程序来响应该事件信号;
当判断该质心位置的结果为否时,由操作系统来响应该事件信号。
2.根据权利要求1所述的手势识别方法,其特征在于,当判断结果为由该应用程序来响应该事件信号时,进一步包括:
将该事件信号放入该应用程序的事件序列表中;及
该应用程序从该事件序列表中取得该事件信号并显示与该应用程序相对应的手势功能列。
3.根据权利要求1所述的手势识别方法,其特征在于,当判断结果为不由该应用程序来响应该事件信号时,进一步包括:显示与操作系统相对应的手势功能列。
4.根据权利要求1所述的手势识别方法,其特征在于,该通用手势为三个或三个以上的手指所形成的抓的手势。
5.根据权利要求1所述的手势识别方法,其特征在于,判断所述多边形的面积是否与时间成反比的步骤进一步包括:
判断在该第一预订时间内所有触控点是否保持存在;及
当在该第一预定时间内有至少一该些触控点消失时,或者判断该多边形的面积与时间成反比的结果为否时,确认该输入手势符合该通用手势的规则为不成立。
6.根据权利要求1所述的手势识别方法,其特征在于,判断相邻各触控点之间的距离是否与时间成反比的步骤进一步包括:
判断在该第一预订时间内所有触控点是否保持存在;及
当在该第一预定时间内有至少一该些触控点消失时,或者判断相邻各触控点之间的距离与时间的结果为否时,确认该输入手势符合该通用手势的规则为不成立。
7.根据权利要求1所述的手势识别方法,其特征在于:确定该三个或以上触控点的质心的步骤为:
设每个触控点Pi的坐标为(xi,yi),其中i=1,2,3...n,n≥3;
则质心点M的坐标为
8.根据权利要求1所述的手势识别方法,其特征在于:根据触控面板上的触控信息判断该输入手势是否符合该通用手势的规则的步骤还包括:
在检测出该输入手势符合该通用手势的规则之后,判断所有触控点是否进一步在一第二预定时间内全部消失;
若判断所有触控点是否全部消失的结果为是时,确认该输入手势符合该通用手势的规则为成立;及
若判断所有触控点是否全部消失的结果为否时,确认该输入手势符合该通用手势的规则为不成立。
9.根据权利要求1所述的手势识别方法,其特征在于:当判断该输入手势是否符合该通用手势的规则的结果为否时,操作系统依据该触控信息来执行对应的系统操控指令。
10.一种触控系统,其特征在于,包括:
触控面板,用于获取至少一个手指触碰所产生的触控信息;
触控集成电路,当根据该触控面板上的触控信息判断输入手势符合一通用手势的规则时,发送一事件信号;及
处理器,根据该事件信号控制操作系统或应用程序来产生对应的手势功能列;
其中,根据触控面板上的触控信息判断该输入手势是否符合该通用手势的规则的步骤包括:
判断一初始时间该触控面板上是否有三个或以上的触控点;
当判断该初始时间的触控点的结果为是时,进一步判断在一第一预定时间内所有触控点皆存在的条件下,所有触控点所连接形成的一多边形的面积是否与时间成反比或是进一步判断在该第一预定时间内所有触控点皆存在的条件下,相邻各触控点之间的距离是否与时间成反比;
当判断该多边形的面积与时间的结果为是时,检测出该输入手势符合该通用手势的规则;
当判断该相邻各触控点之间的距离与时间的结果为是时,检测出该输入手势符合该通用手势的规则;及
判断是否由应用程序来响应该事件信号,其中判断是否由应用程序来响应该事件信号的步骤包括:
确定该三个或以上触控点的质心;
判断该质心是否位于该应用程序的窗口的区域内;及
当判断该质心位置的结果为是时,由该应用程序来响应该事件信号;
当判断该质心位置的结果为否时,由操作系统来响应该事件信号。
11.根据权利要求10所述的触控系统,其特征在于,还包括:
存储器,用于存储操作系统及位于该操作系统上层的应用程序。
12.根据权利要求11所述的触控系统,其特征在于:当该处理器判断由该应用程序来响应该事件信号时,该处理器将该事件信号放入该应用程序的事件序列表中,使得该应用程序从该事件序列表中取得该事件信号并显示与该应用程序相对应的手势功能列。
CN201110209024.4A 2011-07-25 2011-07-25 手势识别方法及触控系统 Expired - Fee Related CN102902469B (zh)

Priority Applications (6)

Application Number Priority Date Filing Date Title
CN201110209024.4A CN102902469B (zh) 2011-07-25 2011-07-25 手势识别方法及触控系统
US13/472,500 US8847904B2 (en) 2011-07-25 2012-05-16 Gesture recognition method and touch system incorporating the same
KR1020120061446A KR101502659B1 (ko) 2011-07-25 2012-06-08 제스쳐 인식 방법과, 이러한 방법을 구현하는 터치 시스템
TW101120834A TWI467438B (zh) 2011-07-25 2012-06-11 手勢識別方法及觸控系統
EP12172802.6A EP2551759A3 (en) 2011-07-25 2012-06-20 Gesture recognition method and touch system incorporating the same
JP2012145317A JP5784551B2 (ja) 2011-07-25 2012-06-28 ジェスチャー認識方法及び当該方法を実現するタッチシステム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201110209024.4A CN102902469B (zh) 2011-07-25 2011-07-25 手势识别方法及触控系统

Publications (2)

Publication Number Publication Date
CN102902469A CN102902469A (zh) 2013-01-30
CN102902469B true CN102902469B (zh) 2015-08-19

Family

ID=46545615

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110209024.4A Expired - Fee Related CN102902469B (zh) 2011-07-25 2011-07-25 手势识别方法及触控系统

Country Status (6)

Country Link
US (1) US8847904B2 (zh)
EP (1) EP2551759A3 (zh)
JP (1) JP5784551B2 (zh)
KR (1) KR101502659B1 (zh)
CN (1) CN102902469B (zh)
TW (1) TWI467438B (zh)

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW201432490A (zh) * 2013-02-04 2014-08-16 Hon Hai Prec Ind Co Ltd 電子裝置和用於電子裝置中的解鎖方法
US11209975B2 (en) 2013-03-03 2021-12-28 Microsoft Technology Licensing, Llc Enhanced canvas environments
JP5862587B2 (ja) * 2013-03-25 2016-02-16 コニカミノルタ株式会社 ジェスチャ判別装置、ジェスチャ判別方法、およびコンピュータプログラム
CN103345360B (zh) * 2013-06-21 2016-02-10 广东欧珀移动通信有限公司 一种智能终端触摸屏手势识别方法
TWI496069B (zh) * 2013-06-28 2015-08-11 Insyde Software Corp Method of Judging Electronic Device and Multi - window Touch Command
KR101488193B1 (ko) * 2013-09-04 2015-01-30 에스케이 텔레콤주식회사 상황 인지 기반의 명령 수행 방법 및 장치
TWI502413B (zh) * 2013-10-07 2015-10-01 Wistron Corp 光學觸控裝置及其手勢偵測方法
TWI528271B (zh) * 2013-12-16 2016-04-01 緯創資通股份有限公司 多邊形手勢偵測及互動方法、裝置及電腦程式產品
CN105446635A (zh) * 2014-08-25 2016-03-30 纬创资通股份有限公司 触控显示装置及窗口共享方法
CN105700784A (zh) * 2014-11-28 2016-06-22 神讯电脑(昆山)有限公司 触控输入方法及其电子装置
TWI578213B (zh) * 2014-12-11 2017-04-11 義隆電子股份有限公司 觸控信號的處理方法及電腦系統
US20170090606A1 (en) * 2015-09-30 2017-03-30 Polycom, Inc. Multi-finger touch
CN105607832B (zh) * 2015-12-21 2021-02-19 联想(北京)有限公司 一种信息处理方法及电子设备
CN106325704A (zh) * 2016-08-06 2017-01-11 广东欧珀移动通信有限公司 一种统一视频播放应用中的滑动功能的方法及装置
CN109739422B (zh) * 2018-05-14 2020-02-18 北京字节跳动网络技术有限公司 一种窗口控制方法、装置及设备
CN109558007B (zh) * 2018-11-27 2021-08-03 英华达(上海)科技有限公司 手势控制装置及其方法
CN112181265B (zh) * 2019-07-04 2022-04-15 北京小米移动软件有限公司 一种触控信号处理方法、装置及介质
CN112527180B (zh) * 2019-09-17 2022-03-08 北京小米移动软件有限公司 触摸事件识别方法、装置、设备及存储介质
TWI779310B (zh) * 2019-09-26 2022-10-01 華碩電腦股份有限公司 電子裝置之控制方法
TWI769502B (zh) * 2020-08-21 2022-07-01 大陸商北京集創北方科技股份有限公司 觸控識別方法及利用其之觸控模組與資訊處理裝置
CN113535057B (zh) * 2021-06-28 2022-12-16 荣耀终端有限公司 一种手势交互方法及终端设备
TWI828559B (zh) * 2023-03-17 2024-01-01 達運精密工業股份有限公司 觸控系統及觸控方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101571773A (zh) * 2008-05-04 2009-11-04 升达科技股份有限公司 多手指手势编码方法与编码系统
CN101620511A (zh) * 2008-07-01 2010-01-06 索尼株式会社 信息处理设备和用于显示辅助信息的方法
CN101770332A (zh) * 2009-01-05 2010-07-07 联想(北京)有限公司 一种用户界面方法、用户界面装置及终端
CN101866253A (zh) * 2009-04-20 2010-10-20 禾瑞亚科技股份有限公司 电阻式多点触控装置及方法
JP2011003074A (ja) * 2009-06-19 2011-01-06 Sharp Corp 入力方法、入力装置及び電気機器

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9292111B2 (en) 1998-01-26 2016-03-22 Apple Inc. Gesturing with a multipoint sensing device
US8479122B2 (en) * 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
JP4684745B2 (ja) * 2005-05-27 2011-05-18 三菱電機株式会社 ユーザインタフェース装置及びユーザインタフェース方法
US8681104B2 (en) * 2007-06-13 2014-03-25 Apple Inc. Pinch-throw and translation gestures
TW200925952A (en) 2007-12-05 2009-06-16 Elan Microelectronics Corp Method for manipulating objects on a touch screen by means of several fingers
US8169414B2 (en) * 2008-07-12 2012-05-01 Lim Seung E Control of electronic games via finger angle using a high dimensional touchpad (HDTP) touch user interface
JP5136292B2 (ja) * 2008-08-26 2013-02-06 日本電気株式会社 情報処理端末のアプリケーション起動方法、情報処理端末及びプログラム
US8217909B2 (en) * 2008-12-19 2012-07-10 Cypress Semiconductor Corporation Multi-finger sub-gesture reporting for a user interface device
KR20110123270A (ko) * 2009-02-23 2011-11-14 리서치 인 모션 리미티드 터치 감지형 디스플레이 및 이의 제어 방법
US8566044B2 (en) * 2009-03-16 2013-10-22 Apple Inc. Event recognition
EP2480957B1 (en) * 2009-09-22 2017-08-09 Apple Inc. Device, method, and graphical user interface for manipulating user interface objects
JP5501715B2 (ja) * 2009-09-28 2014-05-28 Necパーソナルコンピュータ株式会社 ユーザインターフェース装置、ユーザインターフェース装置の制御方法、及びプログラム
TW201122890A (en) * 2009-12-18 2011-07-01 Best Solution Technology Inc Touch-control lock operated according to gesture or figure.
JP5061176B2 (ja) * 2009-12-22 2012-10-31 ヤフー株式会社 情報表示装置、情報表示方法、およびそのプログラム
US8232990B2 (en) * 2010-01-05 2012-07-31 Apple Inc. Working with 3D objects
US20110296333A1 (en) * 2010-05-25 2011-12-01 Bateman Steven S User interaction gestures with virtual keyboard
WO2012043360A1 (ja) * 2010-09-29 2012-04-05 Necカシオモバイルコミュニケーションズ株式会社 情報処理装置、その制御方法及びプログラム
US8572508B2 (en) * 2010-11-22 2013-10-29 Acer Incorporated Application displaying method for touch-controlled device and touch-controlled device thereof
TWM407442U (en) * 2011-02-11 2011-07-11 Top Victory Invest Ltd Gesture-based power management of touch display

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101571773A (zh) * 2008-05-04 2009-11-04 升达科技股份有限公司 多手指手势编码方法与编码系统
CN101620511A (zh) * 2008-07-01 2010-01-06 索尼株式会社 信息处理设备和用于显示辅助信息的方法
CN101770332A (zh) * 2009-01-05 2010-07-07 联想(北京)有限公司 一种用户界面方法、用户界面装置及终端
CN101866253A (zh) * 2009-04-20 2010-10-20 禾瑞亚科技股份有限公司 电阻式多点触控装置及方法
JP2011003074A (ja) * 2009-06-19 2011-01-06 Sharp Corp 入力方法、入力装置及び電気機器

Also Published As

Publication number Publication date
KR101502659B1 (ko) 2015-03-13
EP2551759A2 (en) 2013-01-30
TWI467438B (zh) 2015-01-01
JP2013025797A (ja) 2013-02-04
US8847904B2 (en) 2014-09-30
JP5784551B2 (ja) 2015-09-24
TW201305878A (zh) 2013-02-01
US20130027327A1 (en) 2013-01-31
CN102902469A (zh) 2013-01-30
KR20130012543A (ko) 2013-02-04
EP2551759A3 (en) 2014-12-10

Similar Documents

Publication Publication Date Title
CN102902469B (zh) 手势识别方法及触控系统
CN105824559B (zh) 一种误触识别及处理方法和电子设备
CN100465867C (zh) 手写信息输入设备及手写信息输入方法
US9671893B2 (en) Information processing device having touch screen with varying sensitivity regions
US8059101B2 (en) Swipe gestures for touch screen keyboards
KR101453641B1 (ko) 컨트롤 선택 근사화
KR101424294B1 (ko) 터치스크린 장치의 사용자로부터 수신된 입력 및 제스쳐에 응답하여 동작을 수행하는 컴퓨터로 구현된 방법 및 컴퓨터판독가능 매체
US8633906B2 (en) Operation control apparatus, operation control method, and computer program
EP2359224B1 (en) Generating gestures tailored to a hand resting on a surface
US20090289902A1 (en) Proximity sensor device and method with subregion based swipethrough data entry
JP6180888B2 (ja) 電子機器、方法およびプログラム
US20110083104A1 (en) Methods and devices that resize touch selection zones while selected on a touch sensitive display
TWI463355B (zh) 多點觸控介面之訊號處理裝置、訊號處理方法及使用者介面圖像選取方法
US8542207B1 (en) Pencil eraser gesture and gesture recognition method for touch-enabled user interfaces
WO2007121676A1 (fr) Procédé et dispositif de commande d'un dispositif de sortie et d'entrée d'un affichage d'information
US20160147436A1 (en) Electronic apparatus and method
US9747002B2 (en) Display apparatus and image representation method using the same
KR101442438B1 (ko) 듀얼 터치 경험 필드를 달성하기 위한 싱글 터치 프로세스
CN107291367B (zh) 一种橡皮擦的使用方法及装置
US10521108B2 (en) Electronic apparatus for detecting touch, method of controlling the same, and display apparatus including touch controller
CN104345956A (zh) 防止手掌误触的方法
CN113485590A (zh) 触控操作方法及装置
CN102650926B (zh) 具触控式屏幕的电子装置及其显示控制方法
US20150268734A1 (en) Gesture recognition method for motion sensing detector
US20140145928A1 (en) Electronic apparatus and data processing method

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20150819

Termination date: 20180725