CN109840480B - 一种智能手表的交互方法及交互系统 - Google Patents
一种智能手表的交互方法及交互系统 Download PDFInfo
- Publication number
- CN109840480B CN109840480B CN201910013634.3A CN201910013634A CN109840480B CN 109840480 B CN109840480 B CN 109840480B CN 201910013634 A CN201910013634 A CN 201910013634A CN 109840480 B CN109840480 B CN 109840480B
- Authority
- CN
- China
- Prior art keywords
- signal
- algorithm
- vibration signals
- classification
- training
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/163—Wearable computers, e.g. on a belt
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
- G06F18/2413—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on distances to training or reference patterns
- G06F18/24147—Distances to closest patterns, e.g. nearest neighbour classification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/014—Hand-worn input/output arrangements, e.g. data gloves
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Computer Hardware Design (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Data Mining & Analysis (AREA)
- Life Sciences & Earth Sciences (AREA)
- Artificial Intelligence (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- User Interface Of Digital Computer (AREA)
- Telephone Function (AREA)
- Electric Clocks (AREA)
Abstract
本发明公开了一种智能手表的交互方法,包括以下步骤:S1、基于人体传播振动信号,采集智能手表加速度计和陀螺仪的振动信号;S2、采用异常检测算法识别振动信号;S3、对振动信号进行预处理,采用k近邻算法改进后的算法对振动信号进行进一步的分类识别;S4、分析使用者对结果的反馈,及时矫正以维持稳定的识别精度。还相应公开了其交互系统,包括信号检测模块、识别分类模块、实时反馈模块。通过基于人体传播振动信号把人体部位当作虚拟屏幕,并结合了改进的机器学习算法,实际地拓展了手表的交互手段,提高了用户体验,本发明的交互手段新颖有趣,能够切实满足用户需求,可广的应用于文本输入、手表游戏等。
Description
技术领域
本发明涉及智能设备的交互方式领域,具体涉及基于一种智能手表的交互方法及交互系统。
背景技术
目前,可穿戴智能感知设备迅速发展,其中智能手表尤为流行,但由于其佩戴于手腕,无法配备足够大的屏幕,人们无法像手机一样地随心所欲地输入。智能手表现有的输入方式主要分为三种:单点触屏、手指跟踪以及语音识别。单点触屏以及手指跟踪的方法受屏幕的限制,而语音识别则由于信息敏感更是颇受限制。为了摆脱智能手表输入困难的窘境,如今许多科研团队也进行了研究,大多需要额外配置设备,购置成本以及学习成本的存在,大多无法广泛地被接受。
发明内容
针对上述技术问题,本发明提出了基于人体传播振动信号的智能手表的交互方法及交互系统,尽量贴合用户使用习惯的情况下,为智能手表拓展新的交互手段,从而解决智能手表交互手段贫瘠的问题。本发明采用了如下技术方案:
一种智能手表的交互方法,包括以下步骤:
S1、基于人体传播振动信号,采集智能手表加速度计和陀螺仪的振动信号;
S2、采用异常检测算法识别振动信号;
S3、对振动信号进行预处理,采用k近邻算法改进后的算法对振动信号进行进一步的分类识别;
S4、分析使用者对结果的反馈,及时矫正以维持稳定的识别精度。
进一步,分别采集加速度计和陀螺仪的X、Y、Z三轴的振动信号。
进一步,步骤S2利用异常检测算法来识别信号包括:
S21、采集加速度计Z轴数据;
S22、采用高通滤波器对所述加速度计Z轴数据进行滤波;
S23、设置有效敲击信号的阈值及噪音信号阈值;
S24、读取一段振幅小于噪音信号阈值信号作为第一状态;
S25、继续监听,等待读取振幅大于有效敲击信号阈值的信号,计振幅大于有效敲击信号阈值的位置为x,设置信号的起始位置为位置X前L的位置,即X-L;
S26、继续监听,等待读取一段连续且振幅小于噪音信号阈值的信号,当出现连续振幅小于噪音信号阈值时,设置信号的结束位置为当前位置;
S27、通过信号起止位置获取信号数据,判断信号长度是否满足长度区间,如不满足则回到S25,如满足则进入下一步;
S28、对数据进行高通滤波,分别计算滤波后信号前m个点的能量及m个点之后的能量,判断信号是否大于信噪比阈值,大于则判断信号为有效信号,否则认为是噪音信号,返回到S25。
进一步,步骤S3包括:
S31、对信号进行归一化的预处理,将信号减去均值并除以方差;
S32、在初始化训练模型阶段,将步骤S31处理后的数据作为训练样本存储到数据库中;在实际使用阶段,使用基于k近邻算法改进后的算法对信号进行分类与识别。
进一步,K邻近算法改进后的算法具体为:基于动态时间规整算法,将实际信号与训练信号进行以帧为单位的匹配,计算出彼此之间的最短的曼哈顿距离,并以此来作为k近邻算法进行分类识别的依据。
进一步,步骤S4包括:
S41、由步骤3得到的分类结果集合后,纠正使用者输入结果;
S42、纠正后,对训练样本进行一定程度的修正,从而保持精度的稳定。
进一步,步骤S41中通过提供候选键或通过在输入法的联想结果对于实际输入进行纠正。
进一步,步骤S42具体为:
S421、纠正结果与分类结果一致,无操作;
S422、纠正结果与分类结果不一致时,对于训练样本中与分类结果相同类别的样本,删除通过K邻近算法改进后的算法计算得到的距离最大的样本,再将当前的样本替换至被删除样本的位置。
一种智能手表的交互系统,包括:
信号检测模块,基于人体传播振动信号,采集智能手表加速度计和陀螺仪的振动信号;
识别分类模块,采用异常检测算法识别振动信号;对振动信号进行预处理,采用k近邻算法改进后的算法对振动信号进行进一步的分类识别;
实时反馈模块,分析使用者对结果的反馈,及时矫正以维持稳定的识别精度。
一种程序,执行本发明所述的智能手表的交互方法。
与现有技术相比,本发明的有益效果在于:通过基于人体传播振动信号把人体部位(例如,手背)当作虚拟屏幕,并结合了改进的机器学习算法,实际地拓展了手表的交互手段,提高了用户体验,本发明的交互手段新颖有趣,能够切实满足用户需求,可广的应用于文本输入、手表游戏等。
附图说明
图1是本发明的交互方法的流程图;
图2是本发明的检测信号模块的工作流程图;
图3是本发明的反馈系统工作流程图;
图4为本发明的结构示意图;
图5是本发明原始动态时间规整算法的信号匹配结果;
图6是本发明改进后以帧为单位进行动态时间规整算法的匹配结果(帧移为1,帧长为3);
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
下面结合附图对本发明的较优的实施例作进一步的详细说明。
本发明公开了基于人体传播振动信号与机器学习的智能手表交互方法及交互系统。如图1所述,本发明的交互方法包括了以下步骤:
S1、基于人体传播振动信号,程序控制智能手表的加速度计和陀螺仪采集智能手表加速度计和陀螺仪的振动信号;
具体为分别采集加速度计和陀螺仪的X、Y、Z三轴的振动信号;
S2、采用异常检测算法识别振动信号;
S3、对振动信号进行预处理,采用k近邻算法改进后的算法对振动信号进行进一步的分类识别;
S4、分析使用者对结果的反馈,及时矫正以维持稳定的识别精度。
如图2所示,步骤S2利用异常检测算法来识别信号,具体步骤如下:
先采集加速度计Z轴数据,并取高通40hz的信号,同时读取一段振幅小于噪声信号阈值的信号,优选信号长度为10个点,噪声信号阈值为0.015,此时为信号检测的第一个状态;继续监听,等待振幅大于有效敲击信号阈值的信号,计振幅大于有效敲击信号阈值的位置为x,设置信号的起始位置为位置X前L的位置,即X-L,优选有效敲击信号阈值为2。在接收目标信号后,等待读取一段连续的振幅小于噪声信号阈值的信号,当出现连续振幅小于噪音信号阈值时,设置信号的结束位置为当前位置,优选信号长度为10个点,噪声信号阈值为0.015。在噪声信号阈值与有效敲击信号阈值之间检测得到的信号片段之后,再增加信号长度与信噪比的约束,优选信号长度L满足37≤L≤60,信号长度满足约束条件后,分别计算滤波后信号前m个点的能量及m个点之后的能量,判断信号是否大于信噪比阈值,大于则判断信号为有效信号,否则认为是噪音信号,信噪比阈值为S10,至此,信号得以被检测出来。
本实施例中,步骤S3对振动信号进行预处理,采用k近邻算法改进后的算法对振动信号进行进一步的分类识别,具体步骤如下:
先对每一个样本的加速度计和陀螺仪的X、Y、Z三轴的振动信号以传感器类别划分的拼接,针对对应传感器的3轴数据进行整体的归一化处理,具体减去数据的均值,再除以数据的方差,然后在初始化训练模型阶段,将归一化处理后的数据作为训练样本存储到数据库中,在实际使用阶段基于k近邻算法改进后的算法对信号进行分类与识别,具体为基于动态时间规整算法,计算测试/输入样本与训练样本之间的距离,根据距离的大小给出分类结果。
其中,动态时间规整算法,是一种基于动态规划的思路,将动态时间规整的对象由从原始的一维的点扩展为三维(三轴)的帧,并计算彼此的距离,可以更准确地衡量两个信号的相似程度,同时,算法允许根据实际的采样频率与需求相应地调整帧长与帧移来降低算法的功耗,从而获得理想的性能。解决由于两个信号之间的时序错位而无法进行比较的问题,并将两者之间的区别进行量化的方法。所述的距离不限于为曼哈顿距离或欧拉距离。
图5是原始动态时间规整算法的信号匹配结果;图6是本发明改进后以帧为单位进行动态时间规整算法的匹配结果(帧移为1,帧长为3);由此可看出动态时间规整算法在增加了帧长帧移的约束之后,信号匹配方式确实会发生改变。
如图3所示,本实施例的步骤S4中,在步骤S2获得分类结果之后,将结果输出至应用中,并且与此同时,将新的样本X以及S3算法中所得到的与训练样本的距离记录下来,监听应用的反馈。在接收到对分类结果的反馈后,根据既定的样本替换策略来对训练样本进行操作,从而获得较高的鲁棒性。具体为:由步骤3得到的分类结果集合后,纠正使用者输入结果,具体通过提供候选键或通过在输入法的联想结果对于实际输入进行纠正;纠正后,对训练样本进行一定程度的修正,从而保持精度的稳定,具体为纠正结果与分类结果一致,无操作;纠正结果与分类结果不一致时,对于训练样本中与分类结果相同类别的样本,删除通过K邻近算法改进后的算法计算得到的距离最大的样本,再将当前的样本替换至被删除样本的位置。
如图4所示,本例的具体实施的结构分为三个模块,信号检测模块、识别分类模块,以及实时反馈模块。信号检测模块检测信号,检测到信号后将信号进行归一化预处理,减去数据的均值再除以数据的方差,作为分类识别模块的输入;分类识别模块的训练(初始化)阶段为单纯的信号存储操作,而在训练完成后投入使用阶段,将执行改进的分类算法。分类结果将传递进入实时反馈模块。
以上内容是结合具体/优选的实施方式对本发明所作的进一步详细说明,不能认定本发明的具体实施只局限于这些说明。对于本发明所属技术领域的普通技术人员来说,在不脱离本发明构思的前提下,其还可以对这些已描述的实施方式做出若干替代或变型,而这些替代或变型方式都应当视为属于本发明的保护范围。
Claims (7)
1.一种智能手表的交互方法,其特征在于,包括以下步骤:
S1、基于人体传播振动信号,采集智能手表加速度计和陀螺仪的X、Y、Z三轴振动信号;
S2、采用异常检测算法识别振动信号;
S3、对振动信号进行预处理,采用k近邻算法改进后的算法利用经训练的模型对振动信号进行进一步的分类识别;
S4、分析使用者对分类识别结果是否进行纠正的反馈来矫正所述模型在训练阶段使用的训练样本,以维持稳定的识别精度;
其中,所述K近邻 算法改进后的算法为:基于动态时间规整算法,将实际信号与训练信号进行以帧为单位的匹配,计算出实际信号和训练信号之间的最短曼哈顿距离,并以所获得的最短曼哈顿距离作为k近邻算法进行分类识别的依据;
其中,步骤S2利用异常检测算法识别振动信号包括:
S21、采集加速度计Z轴数据;
S22、采用高通滤波器对所述加速度计Z轴数据进行滤波;
S23、设置有效敲击信号的阈值及噪音信号阈值;
S24、读取一段振幅小于噪音信号阈值信号作为第一状态;
S25、继续监听,等待读取振幅大于有效敲击信号阈值的信号,计振幅大于有效敲击信号阈值的位置为x,设置信号的起始位置为位置X前L的位置,即X-L;
S26、继续监听,等待读取一段连续且振幅小于噪音信号阈值的信号,当出现连续振幅小于噪音信号阈值时,设置信号的结束位置为当前位置;
S27、通过信号起止位置获取信号数据,判断信号长度是否满足长度区间,如不满足则回到S25,如满足则进入下一步;
S28、对数据进行高通滤波,分别计算滤波后信号前m个点的能量及m个点之后的能量,判断信号是否大于信噪比阈值,大于则判断信号为有效信号,否则认为是噪音信号,返回到S25。
2.根据权利要求1所述的智能手表的交互方法,其特征在于,步骤S3具体为:
S31、对信号进行归一化的预处理,将信号减去均值并除以方差;
S32、在初始化训练模型阶段,将步骤S31处理后的数据作为训练样本存储到数据库中;在实际使用阶段,使用基于k近邻算法改进后的算法对信号进行分类与识别。
3.根据权利要求1所述的智能手表的交互方法,其特征在于,步骤S4包括:
S41、由步骤S3得到的分类结果集合后,纠正使用者输入结果;
S42、纠正后,对训练样本进行一定程度的修正,从而保持精度的稳定。
4.根据权利要求3中所述的智能手表的交互方法,其特征在于,步骤S41中通过提供候选键或通过在输入法的联想结果对于实际输入进行纠正。
5.根据权利要求4中所述的智能手表的交互方法,其特征在于,步骤S42具体为:
S421、纠正结果与分类结果一致,无操作;
S422、纠正结果与分类结果不一致时,对于训练样本中与分类结果相同类别的样本,删除通过K近邻 算法改进后的算法计算得到的距离最大的样本,再将当前的样本替换至被删除样本的位置。
6.一种智能手表的交互系统,其特征在于,包括:
信号检测模块,基于人体传播振动信号,采集智能手表加速度计和陀螺仪的X、Y、Z三轴振动信号;
识别分类模块,采用异常检测算法识别振动信号;对振动信号进行预处理,采用k近邻算法改进后的算法利用经训练的模型对振动信号进行进一步的分类识别;
实时反馈模块,分析使用者对分类识别结果是否进行纠正的反馈来矫正所述模型在训练阶段使用的训练样本,以维持稳定的识别精度;
其中,所述K近邻 算法改进后的算法为:基于动态时间规整算法,将实际信号与训练信号进行以帧为单位的匹配,计算出实际信号和训练信号之间的最短曼哈顿距离,并以所获得的最短曼哈顿距离作为k近邻算法进行分类识别的依据;
其中所述采用异常检测算法识别振动信号包括:
S21、采集加速度计Z轴数据;
S22、采用高通滤波器对所述加速度计Z轴数据进行滤波;
S23、设置有效敲击信号的阈值及噪音信号阈值;
S24、读取一段振幅小于噪音信号阈值信号作为第一状态;
S25、继续监听,等待读取振幅大于有效敲击信号阈值的信号,计振幅大于有效敲击信号阈值的位置为x,设置信号的起始位置为位置X前L的位置,即X-L;
S26、继续监听,等待读取一段连续且振幅小于噪音信号阈值的信号,当出现连续振幅小于噪音信号阈值时,设置信号的结束位置为当前位置;
S27、通过信号起止位置获取信号数据,判断信号长度是否满足长度区间,如不满足则回到S25,如满足则进入下一步;
S28、对数据进行高通滤波,分别计算滤波后信号前m个点的能量及m个点之后的能量,判断信号是否大于信噪比阈值,大于则判断信号为有效信号,否则认为是噪音信号,返回到S25。
7.一种计算机可读存储介质,其上存储有计算机程序,用于执行权利要求1-5任一项所述的智能手表的交互方法。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910013634.3A CN109840480B (zh) | 2019-01-04 | 2019-01-04 | 一种智能手表的交互方法及交互系统 |
NL2022916A NL2022916B1 (en) | 2019-01-04 | 2019-04-10 | Interaction Method and Interaction System of Smart Watch |
FR1904179A FR3091606B1 (fr) | 2019-01-04 | 2019-04-19 | Un procédé d'interaction et un système interactif d’une montre intelligente |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910013634.3A CN109840480B (zh) | 2019-01-04 | 2019-01-04 | 一种智能手表的交互方法及交互系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109840480A CN109840480A (zh) | 2019-06-04 |
CN109840480B true CN109840480B (zh) | 2021-08-13 |
Family
ID=66476790
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910013634.3A Active CN109840480B (zh) | 2019-01-04 | 2019-01-04 | 一种智能手表的交互方法及交互系统 |
Country Status (3)
Country | Link |
---|---|
CN (1) | CN109840480B (zh) |
FR (1) | FR3091606B1 (zh) |
NL (1) | NL2022916B1 (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110169723A (zh) * | 2019-06-27 | 2019-08-27 | 九阳股份有限公司 | 一种食品加工机 |
CN111221420B (zh) * | 2020-01-13 | 2021-07-30 | 深圳大学 | 一种基于智能手表的2d移动轨迹识别方法和系统 |
CN111752388A (zh) * | 2020-06-19 | 2020-10-09 | 深圳振科智能科技有限公司 | 应用控制方法、装置、设备及存储介质 |
CN113741703A (zh) * | 2021-11-08 | 2021-12-03 | 广东粤港澳大湾区硬科技创新研究院 | 一种非接触式智能耳机或眼镜交互方法 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105810214A (zh) * | 2014-12-31 | 2016-07-27 | 展讯通信(上海)有限公司 | 语音激活检测方法及装置 |
CN107300971A (zh) * | 2017-06-09 | 2017-10-27 | 深圳大学 | 基于骨传导振动信号传播的智能输入方法及系统 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3065043A1 (en) * | 2015-03-02 | 2016-09-07 | Nxp B.V. | Mobile device |
-
2019
- 2019-01-04 CN CN201910013634.3A patent/CN109840480B/zh active Active
- 2019-04-10 NL NL2022916A patent/NL2022916B1/en active
- 2019-04-19 FR FR1904179A patent/FR3091606B1/fr active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105810214A (zh) * | 2014-12-31 | 2016-07-27 | 展讯通信(上海)有限公司 | 语音激活检测方法及装置 |
CN107300971A (zh) * | 2017-06-09 | 2017-10-27 | 深圳大学 | 基于骨传导振动信号传播的智能输入方法及系统 |
Non-Patent Citations (2)
Title |
---|
ViType:A Cost Efficient On-body Typing System through Vibration;Wenqiang Chen et al;《2018 15th Annual IEEE International Conference on Sensing, Communication, and Networking (SECON)》;20180628;第1-9页 * |
基于DTW模型的非特定人孤立词语音识别研究;胡洋霞;《中国优秀硕士学位论文全文数据库 信息科技辑》;20180415;论文第4页、第8-14页、第27-31页、第45页 * |
Also Published As
Publication number | Publication date |
---|---|
FR3091606A1 (fr) | 2020-07-10 |
CN109840480A (zh) | 2019-06-04 |
FR3091606B1 (fr) | 2021-09-24 |
NL2022916B1 (en) | 2020-01-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109840480B (zh) | 一种智能手表的交互方法及交互系统 | |
CN105184325B (zh) | 一种移动智能终端 | |
US10353476B2 (en) | Efficient gesture processing | |
US10339371B2 (en) | Method for recognizing a human motion, method for recognizing a user action and smart terminal | |
US11762474B2 (en) | Systems, methods and devices for gesture recognition | |
US20120323521A1 (en) | System and method for recognizing gestures | |
Ward et al. | Activity recognition of assembly tasks using body-worn microphones and accelerometers | |
US9460398B2 (en) | Apparatus and method for recognizing user activity | |
KR102036987B1 (ko) | 생체 및 움직임 정보를 이용한 수면 상태 감지 방법 및 장치 | |
WO2013106143A1 (en) | Activity classification in a multi-axis activity monitor device | |
Ardüser et al. | Recognizing text using motion data from a smartwatch | |
CN108196668B (zh) | 一种便携式手势识别系统及方法 | |
CN111288986B (zh) | 一种运动识别方法及运动识别装置 | |
US10241583B2 (en) | User command determination based on a vibration pattern | |
CN112037929A (zh) | 基于多模态机器学习的分类方法、在线新冠肺炎预警模型训练方法及预警方法 | |
WO2018036023A1 (zh) | 智能手表的文本输入方法及装置 | |
CN109758154B (zh) | 一种运动状态确定方法、装置、设备及存储介质 | |
WO2018014432A1 (zh) | 语音应用触发控制方法、装置及终端 | |
CN111803902B (zh) | 泳姿识别方法、装置、可穿戴设备及存储介质 | |
CN105105757A (zh) | 一种可穿戴人体运动姿态轨迹记录与测评装置 | |
US11270109B2 (en) | Interactive method and interactive system for smart watch | |
US20180353125A1 (en) | Method and apparatus for determining sleep state using biometric information and motion information | |
WO2022111203A1 (zh) | 心率检测方法和装置 | |
Fugini et al. | Gesture recognition using dynamic time warping | |
Pipanmaekaporn et al. | Mining Acceleration Data for Smartphone-based Fall Detection |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |