CN105677038A - 一种手势识别控制电路及控制方法 - Google Patents

一种手势识别控制电路及控制方法 Download PDF

Info

Publication number
CN105677038A
CN105677038A CN201610081315.2A CN201610081315A CN105677038A CN 105677038 A CN105677038 A CN 105677038A CN 201610081315 A CN201610081315 A CN 201610081315A CN 105677038 A CN105677038 A CN 105677038A
Authority
CN
China
Prior art keywords
dutycycle
gesture
pwm signal
outfan
operational amplifier
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610081315.2A
Other languages
English (en)
Other versions
CN105677038B (zh
Inventor
周党培
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuyi University
Original Assignee
Wuyi University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuyi University filed Critical Wuyi University
Priority to CN201610081315.2A priority Critical patent/CN105677038B/zh
Publication of CN105677038A publication Critical patent/CN105677038A/zh
Application granted granted Critical
Publication of CN105677038B publication Critical patent/CN105677038B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • G06V40/28Recognition of hand or arm movements, e.g. recognition of deaf sign language

Abstract

本发明公开了一种手势识别控制电路及控制方法,包括用于识别手势的手势传感器和用于调节占空比并根据占空比生成PWM信号的PWM信号产生模块,所述手势传感器与PWM信号产生模块连接,所述PWM信号产生模块设置有用于与电器设备连接的PWM信号输出端。本发明采用红外发光二极管和红外接收三极管构成传感器采集手势变化信号,经单片机程序识别手势方向,调节PWM信号的占空比,通过控制占空比实现对电器设备的控制,不但材料和生产成本极低,而且程序算法简单,因此可以广泛普及,具有广阔的市场空间。

Description

一种手势识别控制电路及控制方法
技术领域
本发明涉及一种控制电路及控制方法,特别是一种手势识别控制电路及控制方法。
背景技术
目前,一些高端的电气产品中已经开始出现一种新的人性化的遥控技术,即所谓的手势控制,例如,用手势遥控显示器画面的左右翻页等,这些技术采用了图像识别技术,首先用摄像头对手势图像进行跟踪拍摄,然后采用高性能的处理器对一系列图像进行处理、识别,最终获得控制信号,程序算法复杂,系统成本极高,因此目前得不到普及应用。
发明内容
为解决上述问题,本发明的目的在于提供一种手势识别控制电路及控制方法。
本发明解决其问题所采用的技术方案是:包括用于识别手势的手势传感器和用于调节占空比并根据占空比生成PWM信号的PWM信号产生模块,所述手势传感器与PWM信号产生模块连接,所述PWM信号产生模块设置有用于与电器设备连接的PWM信号输出端。
进一步,所述手势传感器包括红外发光二极管RF1、第一红外接收管RF2、第二红外接收管RF3、运算放大器OA1和运算放大器OA2,红外发光二极管RF1的正负极分别与电源的正负极连接,第一红外接收管RF2的集电极与运算放大器OA1的输入端和电源的正极连接,第二红外接收管RF3的集电极与运算放大器OA2的输入端和电源的正极连接,第一红外接收管RF2和第二红外接收管RF3的发射极与电源负极连接,运算放大器OA1的输出端V01和运算放大器OA2的输出端V02分别与PWM信号产生模块的两个输入端连接。
进一步,所述第一红外接收管RF2的集电极与运算放大器OA1的同相输入端连接,第二红外接收管RF3的集电极与运算放大器OA2的同相输入端连接。
进一步,所述手势传感器包括电位器RP1,所述RP1的固定端连接电源的正负极,滑动端分别与运算放大器OA1和运算放大器OA2连接。
进一步,所述电位器RP1的滑动端分别与运算放大器OA1的反相输入端和运算放大器OA2的反相输入端连接。
进一步,第一红外接收管RF2和第二红外接收管RF3分别设置在红外发光二极管RF1的两侧。
进一步,红外发光二极管RF1连接有电阻R1,红外发光二极管RF1通过电阻R1与电源正极连接。
进一步,第一红外接收管RF2连接有电阻R2,第一红外接收管RF2通过电阻R2与电源正极连接。
进一步,第二红外接收管RF3连接有电阻R5,第二红外接收管RF3通过电阻R5与电源正极连接。
一种手势识别控制电路的控制方法,包括以下步骤:
S10,开始;
S20,手势传感器进行手势识别;
S30,根据手势识别的结果调整占空比D;
S40,根据占空比D生成PWM信号;
S50,将生成的PWM信号传送到电器设备;
S60,结束。
进一步,步骤S20包括以下步骤:手势传感器进行手势识别,如果手势是左进或者右进则转步骤S30,如果手势不是左进或者右进则转步骤S20。
进一步,步骤S30包括以下步骤:初始占空比D设置为0,然后根据手势传感器的手势识别结果调整占空比D;如果手势是左进则判断占空比D是否为100,若是则不予执行并返回步骤S20,若否则增加占空比D并返回步骤S20;如果手势是右进则判断占空比D是否为0,若是则不予执行并返回步骤S20,若否则减小占空比D并返回步骤S20。
进一步,步骤S20进行手势识别的方法如下:设置参数N1和N2分别与运算放大器OA1的输出端和运算放大器OA2的输出端相对应,设置参数N=N1+N2用来保存N1与N2的值;第一输出端为高电平时,N1=1,第一输出端为低电平时,N1=0;第二输出端为高电平时,N2=2,第二输出端为低电平时,N2=0;当N前值为1且N1+N2=0时,说明手势是从右往左;当N前值为2且N1+N2=0时,说明手势是从左往右。
这样进行参数设置可以帮助系统有效识别手势,仅在手势是从左移动至中间和从右移动到中间时,系统进行有效识别并执行相应操作,有效避免了其它情况的干扰,比如手势是从左移动到右时,仅从左移动到中间的手势会被系统接受,而从中间到右的这一段手势不会被系统接受。
进一步,步骤S30调整占空比D的方法如下:当N前值为1且N1+N2=0时,占空比D就减小1,若占空比D减1后小于0,则占空比D=0;当N前值为2且N1+N2=0时,占空比D就增加1,若占空比D增加1后大于100,则占空比D=100。
进一步,步骤S30调整占空比D的方法如下:当N前值为1且N1+N2=0时,占空比D就增加1,若占空比D增加1后大于100,则占空比D=100;当N前值为2且N1+N2=0时,占空比D就减小1,若占空比D减1后小于0,则占空比D=0。
进一步,步骤S40生成PWM信号的方法如下:设置参数P=0,并且PWM信号输出端的初始信号为高电平,PWM信号输出端输出PWM信号的时候,每经过一个计时单元t,P就增加1,在P=占空比D的时候,PWM信号输出端输出低电平,在P=100的时候,PWM信号输出端重新输出高电平,并且将P重新赋值为0,进行下一个周期的循环。
本发明的有益效果是:本发明采用的一种手势识别控制电路及控制方法,本发明采用红外发光二极管和红外接收三极管构成传感器采集手势变化信号,经单片机程序识别手势方向,调节PWM信号的占空比,通过控制占空比实现对电器设备的控制,不但材料和生产成本极低,而且程序算法简单,操作简便时尚,因此可以广泛普及,具有广阔的市场空间。
附图说明
下面结合附图和实例对本发明作进一步说明。
图1是本发明的结构框图;
图2是本发明的电路图;
图3是本发明控制方法的流程图;
图4是本发明调节占空比的流程图;
图5是本发明具体实施例的电路图。
具体实施方式
参照图1-图4,包括用于识别手势的手势传感器1和用于调节占空比并根据占空比生成PWM信号的PWM信号产生模块2,所述手势传感器1与PWM信号产生模块2连接,所述PWM信号产生模块2设置有用于与电器设备连接的PWM信号输出端。
优选的,所述手势传感器1包括红外发光二极管RF1、第一红外接收管RF2、第二红外接收管RF3、运算放大器OA1和运算放大器OA2,红外发光二极管RF1的正负极分别与电源的正负极连接,第一红外接收管RF2的集电极与运算放大器OA1的输入端和电源的正极连接,第二红外接收管RF3的集电极与运算放大器OA2的输入端和电源的正极连接,第一红外接收管RF2和第二红外接收管RF3的发射极与电源负极连接,运算放大器OA1的输出端V01和运算放大器OA2的输出端V02分别与PWM信号产生模块2的两个输入端连接。
优选的,所述第一红外接收管RF2的集电极与运算放大器OA1的同相输入端连接,第二红外接收管RF3的集电极与运算放大器OA2的同相输入端连接。
优选的,所述手势传感器1包括电位器RP1,所述RP1的固定端连接电源的正负极,滑动端与运算放大器OA1和运算放大器OA2连接。
优选的,所述电位器RP1的滑动端分别与运算放大器OA1的反相输入端和运算放大器OA2的反相输入端连接。
优选的,第一红外接收管RF2和第二红外接收管RF3分别设置在红外发光二极管RF1的两侧。
优选的,红外发光二极管RF1连接有电阻R1,红外发光二极管RF1通过电阻R1与电源正极连接。
优选的,第一红外接收管RF2连接有电阻R2,第一红外接收管RF2通过电阻R2与电源正极连接。
优选的,第二红外接收管RF3连接有电阻R5,第二红外接收管RF3通过电阻R5与电源正极连接。
一种手势识别控制电路的控制方法,包括以下步骤:
S10,开始;
S20,手势传感器1进行手势识别;
S30,根据手势识别的结果调整占空比D;
S40,根据占空比D生成PWM信号;
S50,将生成的PWM信号传送到电器设备;
S60,结束。
优选的,步骤S20包括以下步骤:手势传感器1进行手势识别,如果手势是左进或者右进则转步骤S30,如果手势不是左进或者右进则转步骤S20。
优选的,步骤S30包括以下步骤:初始占空比D设置为0,然后根据手势传感器1的手势识别结果调整占空比D;如果手势是左进则判断占空比D是否为100,若是则不予执行并返回步骤S20,若否则增加占空比D并返回步骤S20;如果手势是右进则判断占空比D是否为0,若是则不予执行并返回步骤S20,若否则减小占空比D并返回步骤S20。
优选的,步骤S20进行手势识别的方法如下:设置参数N1和N2分别与运算放大器OA1的输出端和运算放大器OA2的输出端相对应,设置参数N=N1+N2用来保存N1与N2的值;第一输出端为高电平时,N1=1,第一输出端为低电平时,N1=0;第二输出端为高电平时,N2=2,第二输出端为低电平时,N2=0;当N前值为1且N1+N2=0时,说明手势是从右往左;当N前值为2且N1+N2=0时,说明手势是从左往右。
这样进行参数设置可以帮助系统有效识别手势,仅在手势是从左移动至中间和从右移动到中间时,系统进行有效识别并执行相应操作,有效避免了其它情况的干扰,比如手势是从左移动到右时,仅从左移动到中间的手势会被系统接受,而从中间到右的这一段手势不会被系统接受。
优选的,步骤S30调整占空比D的方法如下:当N前值为1且N1+N2=0时,占空比D就减小1,若占空比D减1后小于0,则占空比D=0;当N前值为2且N1+N2=0时,占空比D就增加1,若占空比D增加1后大于100,则占空比D=100。
优选的,步骤S30调整占空比D的方法如下:当N前值为1且N1+N2=0时,占空比D就增加1,若占空比D增加1后大于100,则占空比D=100;当N前值为2且N1+N2=0时,占空比D就减小1,若占空比D减1后小于0,则占空比D=0。
优选的,步骤S40生成PWM信号的方法如下:设置参数P=0,并且PWM信号输出端的初始信号为高电平,PWM信号输出端输出PWM信号的时候,每经过一个计时单元t,P就增加1,在P=占空比D的时候,PWM信号输出端输出低电平,在P=100的时候,PWM信号输出端重新输出高电平,并且将P重新赋值为0,进行下一个周期的循环。
本发明的工作过程:当第一红外接收管RF2或第二红外接收管RF3在没有接收到信号时,运算放大器OA1的同相输入端的电压和运算放大器OA2的同相输入端的电压约等于电源电压,高于参考电压Vref,此时运算放大器OA1的输出端Vo1和运算放大器OA2的输出端Vo2均为高电平;当手掌挡光形成反射时,第一红外接收管RF2或第二红外接收管RF3基极受光照而产生电流而导通,集电极电位就会下降,当其值下降到小于Vref时,输出端的输出信号电平反转为低电平,两个输出端Vo1和Vo2分别作为单片机MCU的输入信号,单片机通过程序识别这两个信号的时序并调节PWM信号的占空比,PWM信号从MCU的6脚输出到电器设备。
本发明的具体实施例如图5所示,一种能感应左右手的调光LED台灯,当左手从感应区域左方进入并停留在感应区域上方时,LED台灯逐渐调亮,直到全亮;反之,当右手从感区域右方进入并停留在感应区域上方时,LED台灯逐渐调暗,直到全暗;其工作原理是通过手势传感器11检测并识别手势,再根据手势识别结果利用软件程序对占空比进行调节,单片机根据占空比生成并输出PWM信号,再将输出的PWM信号连接到LED驱动ICP周期T4115的占空比Dim调光信号输入端,控制LED台灯的亮度变化。
以上所述,只是本发明的较佳实施例而已,本发明并不局限于上述实施方式,只要其以相同的手段达到本发明的技术效果,都应属于本发明的保护范围。

Claims (10)

1.一种手势识别控制电路,其特征在于:包括用于识别手势的手势传感器(1)和用于调节占空比并根据占空比生成PWM信号的PWM信号产生模块(2),所述手势传感器(1)与PWM信号产生模块(2)连接,所述PWM信号产生模块(2)设置有用于与电器设备连接的PWM信号输出端。
2.根据权利要求1所述的一种手势识别控制电路,其特征在于:所述手势传感器(1)包括红外发光二极管RF1、第一红外接收管RF2、第二红外接收管RF3、运算放大器OA1和运算放大器OA2,红外发光二极管RF1的正负极分别与电源的正负极连接,第一红外接收管RF2的集电极与运算放大器OA1的输入端和电源的正极连接,第二红外接收管RF3的集电极与运算放大器OA2的输入端和电源的正极连接,第一红外接收管RF2和第二红外接收管RF3的发射极与电源负极连接,运算放大器OA1的输出端V01和运算放大器OA2的输出端V02分别与PWM信号产生模块(2)的两个输入端连接。
3.根据权利要求2所述的一种手势识别控制电路,其特征在于:所述手势传感器(1)包括电位器RP1,所述RP1的固定端连接电源的正负极,滑动端分别与运算放大器OA1和运算放大器OA2连接。
4.根据权利要求2所述的一种手势识别控制电路,其特征在于:第一红外接收管RF2和第二红外接收管RF3分别设置在红外发光二极管RF1的两侧。
5.一种根据权利要求1至4任一所述的手势识别控制电路的控制方法,其特征在于,包括以下步骤:
S10,开始;
S20,手势传感器(1)进行手势识别;
S30,根据手势识别的结果调整占空比D;
S40,根据占空比D生成PWM信号;
S50,将生成的PWM信号传送到电器设备;
S60,结束。
6.根据权利要求5所述的一种手势识别控制电路的控制方法,其特征在于,步骤S30包括以下步骤:初始占空比D设置为0,然后根据手势传感器(1)的手势识别结果调整占空比D;如果手势是左进则判断占空比D是否为100,若是则不予执行并返回步骤S20,若否则增加占空比D并返回步骤S20;如果手势是右进则判断占空比D是否为0,若是则不予执行并返回步骤S20,若否则减小占空比D并返回步骤S20。
7.根据权利要求5所述的一种手势识别控制电路的控制方法,其特征在于,步骤S20进行手势识别的方法如下:设置参数N1和N2分别与运算放大器OA1的输出端和运算放大器OA2的输出端相对应,设置参数N=N1+N2用来保存N1与N2的值;第一输出端为高电平时,N1=1,第一输出端为低电平时,N1=0;第二输出端为高电平时,N2=2,第二输出端为低电平时,N2=0;当N前值为1且N1+N2=0时,说明手势是从右往左;当N前值为2且N1+N2=0时,说明手势是从左往右。
8.根据权利要求7所述的一种手势识别控制电路的控制方法,其特征在于,步骤S30调整占空比D的方法如下:当N前值为1且N1+N2=0时,占空比D就减小1,若占空比D减1后小于0,则占空比D=0;当N前值为2且N1+N2=0时,占空比D就增加1,若占空比D增加1后大于100,则占空比D=100。
9.根据权利要求7所述的一种手势识别控制电路的控制方法,其特征在于,步骤S30调整占空比D的方法如下:当N前值为1且N1+N2=0时,占空比D就增加1,若占空比D增加1后大于100,则占空比D=100;当N前值为2且N1+N2=0时,占空比D就减小1,若占空比D减1后小于0,则占空比D=0。
10.根据权利要求8或9任一所述的一种手势识别控制电路的控制方法,其特征在于,步骤S40生成PWM信号的方法如下:设置参数P=0,并且PWM信号输出端的初始信号为高电平,PWM信号输出端输出PWM信号的时候,每经过一个计时单元t,P就增加1,在P=占空比D的时候,PWM信号输出端输出低电平,在P=100的时候,PWM信号输出端重新输出高电平,并且将P重新赋值为0,进行下一个周期的循环。
CN201610081315.2A 2016-02-04 2016-02-04 一种手势识别控制电路及控制方法 Expired - Fee Related CN105677038B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610081315.2A CN105677038B (zh) 2016-02-04 2016-02-04 一种手势识别控制电路及控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610081315.2A CN105677038B (zh) 2016-02-04 2016-02-04 一种手势识别控制电路及控制方法

Publications (2)

Publication Number Publication Date
CN105677038A true CN105677038A (zh) 2016-06-15
CN105677038B CN105677038B (zh) 2018-06-05

Family

ID=56303504

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610081315.2A Expired - Fee Related CN105677038B (zh) 2016-02-04 2016-02-04 一种手势识别控制电路及控制方法

Country Status (1)

Country Link
CN (1) CN105677038B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107708245A (zh) * 2016-08-08 2018-02-16 上海新蕊光电科技有限公司 一种智能感应灯
CN115840390A (zh) * 2022-11-29 2023-03-24 凤凰智能电子(杭州)有限公司 一种低成本红外手势识别电路及控制方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102413614A (zh) * 2011-09-23 2012-04-11 东莞勤上光电股份有限公司 一种灯具控制装置和包含该灯具控制装置的led灯
CN102724793A (zh) * 2012-05-21 2012-10-10 四川新力光源有限公司 手势控制的led照明装置
CN103576861A (zh) * 2013-11-18 2014-02-12 谢元澄 非接触手势控制系统
CN103781217A (zh) * 2012-10-18 2014-05-07 北京七彩亮点环能技术股份有限公司 手势感应调光灯
CN203673593U (zh) * 2013-11-30 2014-06-25 成都捷康特科技有限公司 一种红外感应设备
CN103987169A (zh) * 2014-05-13 2014-08-13 广西大学 一种基于手势与语音控制的智能led台灯及其控制方法
US20150308949A1 (en) * 2014-04-29 2015-10-29 Texas Instruments Incorporated Method and apparatus to mitigate ripple in a time of flight (tof) system
CN105160863A (zh) * 2015-09-10 2015-12-16 金德奎 一种多功能手势控制智能盒子

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102413614A (zh) * 2011-09-23 2012-04-11 东莞勤上光电股份有限公司 一种灯具控制装置和包含该灯具控制装置的led灯
CN102724793A (zh) * 2012-05-21 2012-10-10 四川新力光源有限公司 手势控制的led照明装置
CN103781217A (zh) * 2012-10-18 2014-05-07 北京七彩亮点环能技术股份有限公司 手势感应调光灯
CN103576861A (zh) * 2013-11-18 2014-02-12 谢元澄 非接触手势控制系统
CN203673593U (zh) * 2013-11-30 2014-06-25 成都捷康特科技有限公司 一种红外感应设备
US20150308949A1 (en) * 2014-04-29 2015-10-29 Texas Instruments Incorporated Method and apparatus to mitigate ripple in a time of flight (tof) system
CN103987169A (zh) * 2014-05-13 2014-08-13 广西大学 一种基于手势与语音控制的智能led台灯及其控制方法
CN105160863A (zh) * 2015-09-10 2015-12-16 金德奎 一种多功能手势控制智能盒子

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107708245A (zh) * 2016-08-08 2018-02-16 上海新蕊光电科技有限公司 一种智能感应灯
CN115840390A (zh) * 2022-11-29 2023-03-24 凤凰智能电子(杭州)有限公司 一种低成本红外手势识别电路及控制方法
CN115840390B (zh) * 2022-11-29 2023-08-15 凤凰智能电子(杭州)有限公司 一种低成本红外手势识别电路及控制方法

Also Published As

Publication number Publication date
CN105677038B (zh) 2018-06-05

Similar Documents

Publication Publication Date Title
US10292229B1 (en) Line voltage compensation circuit, led drive system and drive method
US20180027626A1 (en) Color-temperature adjustable led lighting device and method for adjusting color temperature of led lighting device
CN103249220B (zh) 半导体发光元件驱动装置以及包括该装置的照明器材
EP3731601A1 (en) Current drive circuit, and light emitting diode lighting device using the same
CN106793253B (zh) 一种led线性恒流驱动电路及led照明装置
US10524323B2 (en) LED lamp control system
CN109561543A (zh) 镇流器系统、照明器具、照明控制系统和方法及可读介质
US20190037659A1 (en) Led driver and led lamp using the same
CN110621099B (zh) 多模式电流控制方法及调光电路
CN106875897A (zh) 一种触摸屏亮度自动调节电路
CN104053275A (zh) 照明装置
JP5984415B2 (ja) 点灯装置及びそれを備えた照明器具
CN111586919A (zh) 多信号输入的调光信号转换器
CN105677038A (zh) 一种手势识别控制电路及控制方法
US20200037423A1 (en) Dimming control for lighting systems and methods thereof
CN110381632B (zh) 一种带红外移动传感器的led灯电路
CN105611672A (zh) 一种与可控硅调光器兼容的led驱动电路
US10172205B2 (en) Dimming module, dimming method and lighting device
CN103096563A (zh) 一种基于多路照明led调光控制系统
CN212064456U (zh) 调光参数在线调整电路
CN113873715A (zh) 一种创新型闪光灯驱动芯片架构
US9198265B2 (en) Illumination apparatus automatically adjusted with time
CN103228083A (zh) 一种智能调光led驱动电源
CN106304516A (zh) 一种根据环境光亮度智能调节led灯亮度的控制方法
CN219919219U (zh) 一种led灯0-10v调光控制装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20180605

Termination date: 20210204