CN109242981A - 双屏交互的增强现实康复训练系统 - Google Patents
双屏交互的增强现实康复训练系统 Download PDFInfo
- Publication number
- CN109242981A CN109242981A CN201811140392.6A CN201811140392A CN109242981A CN 109242981 A CN109242981 A CN 109242981A CN 201811140392 A CN201811140392 A CN 201811140392A CN 109242981 A CN109242981 A CN 109242981A
- Authority
- CN
- China
- Prior art keywords
- training
- curtain
- rehabilitation training
- module
- rehabilitation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
- G16H20/30—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to physical therapies or activities, e.g. physiotherapy, acupressure or exercising
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Software Systems (AREA)
- Physical Education & Sports Medicine (AREA)
- Computer Hardware Design (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Graphics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Biophysics (AREA)
- General Engineering & Computer Science (AREA)
- Epidemiology (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Primary Health Care (AREA)
- Public Health (AREA)
- Rehabilitation Tools (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明公开了一种双屏交互的增强现实康复训练系统,包括立幕、底幕、摄像头及电脑主机;所述底幕用于显示康复训练背景;所述摄像头用于采集底幕显示的康复训练背景和肢体活动视频;所述立幕用于显示康复训练背景、肢体活动和虚拟三维模型相叠加后形成的虚拟训练场景。本发明采用虚实融合的显示方式提高了患者康复训练的兴趣,系统中集成了若干虚拟模型和场景,无需配备各类实体模型和场景,节约了成本;本发明增加了趣味性,康复过程数据信息更加丰富。本发明通过实时记录和量化康复患者训练数据和难度等级,对康复患者进行评估,明确各类训练场景针对不同患者的有效性和差异性,从而为自适应调整功能提供了临床依据。
Description
技术领域
本发明涉及康复技术领域,特别涉及一种双屏交互的增强现实康复训练系统。
背景技术
随着医疗条件的改善,康复训练的需求和比例越来越大,与此相关的康复训练设备也得到了极大的发展。一般情况下,康复患者使用传统的机械康复训练设备和2D康复训练软件进行康复。
由于训练动作的反复,患者往往会感觉到枯燥和乏味,而且在康复患者康复过程中,通常没有仪器对每天训练内容和效果进行量化分析,患者无法实时认识自己当前的康复阶段。
因此需要通过互动方式提升患者的训练积极性。
发明内容
本发明所要解决的技术问题在于针对上述现有技术中的不足,提供一种双屏交互的增强现实康复训练系统。
为解决上述技术问题,本发明采用的技术方案是:一种双屏交互的增强现实康复训练系统,包括立幕、底幕、摄像头及电脑主机;
所述底幕用于显示康复训练背景,康复训练背景为不同虚拟训练场景的标志物,且康复训练背景可进行切换,康复训练模块针对不同的康复训练背景导入相应的虚拟三维模型和场景;所述立幕和底幕之间形成有肢体活动区,所述摄像头用于采集底幕显示的康复训练背景和肢体活动区的肢体活动视频;所述立幕用于显示康复训练背景、肢体活动和虚拟三维模型相叠加后形成的虚拟训练场景。
优选的是,还包括用于实现所述底幕和立幕之间的开合及角度调节的双幕折叠机构,所述立幕设置在所述双幕折叠机构的一侧,所述底幕设置在所述双幕折叠机构的另一侧。
优选的是,所述底幕为触摸控制屏,所述底幕和双幕折叠机构之间还设置有底幕平移机构,以实现底幕的平移运动。
优选的是,所述电脑主机内嵌有康复训练模块,所述康复训练模块包括康复训练背景模块、训练场景叠加模块及训练教程模块。
优选的是,所述电脑主机还内嵌有训练结果评估模块,以对训练效果进行量化评估。
优选的是,所述摄像头上还设置有用于调节摄像头位置的摄像头调节结构。
优选的是,还包括手势控制模块,用于肢体与虚拟训练场景进行交互。
优选的是,该双屏交互的增强现实康复训练系统的康复训练步骤包括:
1)通过双幕折叠机构打开立幕和底幕,并调节角度使得立幕和患者处于平视;
2)启动电脑主机,通过摄像头调节结构调整摄像头的拍摄区域,使得肢体活动区处于摄像头视角中心;
3)通过底幕平移机构移动底幕,以调节底幕上方的肢体活动区与立幕之间的水平距离至合适范围;
4)运行康复训练模块,康复训练背景模块通过底幕显示各类康复训练背景,患者将肢体置于肢体活动区,摄像头采集底幕显示的康复训练背景和肢体活动视频并传输至康复训练模块;
5)康复训练模块针对不同的康复训练背景导入相应的虚拟三维模型和场景,训练场景叠加模块将虚拟三维模型和场景叠加到摄像头捕捉的训练背景和肢体活动视频中形成虚实融合的虚拟训练场景,训练教程模块通过立幕显示康复训练教程,患者根据康复训练教程与虚拟训练场景进行交互操作,进行康复训练;
6)训练结果评估模块采集交互数据,并结合训练难度等级和患者的完成度,对患者进行量化评估。
优选的是,所述步骤5)中,患者通过具有触摸控制功能的底幕或外置的手势控制模块或软件虚拟按键与立幕显示的虚拟训练场景进行交互。
优选的是,其中,所述步骤6)中,训练结果评估模块通过实时记录和量化康复患者训练数据、难度等级和完成度,对康复患者进行评估,明确各类虚拟训练场景针对不同患者的有效性和差异性;
康复训练模块实时获取训练结果评估模块中的数据,并根据各类虚拟训练场景对于不同患者的有效性和差异性,自适应调整训练内容和难度。
本发明的有益效果是:
1)采用虚实融合的显示方式提高了患者康复训练的兴趣,系统中集成了若干虚拟模型和场景,无需配备各类实体模型和场景,节约了成本;
2)采用软件虚拟按键、底幕触摸屏和外置手势控制等多种方式的人机交互手段与虚拟训练场景进行交互,增加了趣味性,康复过程数据信息更加丰富;
3)通过实时记录康复患者训练时完成度,自适应调整训练内容的难度,提高了患者的康复效率,防止过度康复和康复不足。
4)通过实时记录和量化康复患者训练数据和难度等级,对康复患者进行评估,明确各类训练场景针对不同患者的有效性和差异性,从而为自适应调整功能提供了临床依据。
附图说明
图1为本发明的双屏交互的增强现实康复训练系统的结构示意图;
图2为本发明的一种实施例中的双屏交互的增强现实康复训练系统的进行康复训练的流程示意图。
附图标记说明:
1-立幕;2—底幕;3—摄像头;4—双幕折叠机构;5—底幕平移机构;6—摄像头调节结构;7—肢体活动区;8—手势控制模块;9—电脑主机。
具体实施方式
下面结合实施例对本发明做进一步的详细说明,以令本领域技术人员参照说明书文字能够据以实施。
应当理解,本文所使用的诸如“具有”、“包含”以及“包括”术语并不排除一个或多个其它元件或其组合的存在或添加。
如图1-2所示,本实施例的一种双屏交互的增强现实康复训练系统,包括立幕1、底幕2、摄像头3及电脑主机9;
底幕2用于显示各类康复训练背景,康复训练背景为不同虚拟训练场景的标志物,且康复训练背景可进行切换,康复训练模块针对不同的康复训练背景导入相应的虚拟三维模型和场景;立幕1和底幕2之间形成有肢体活动区7,患者将肢体置于肢体活动区7,与虚拟训练场景进行交互;摄像头3用于采集底幕2显示的康复训练背景和肢体活动区7的肢体活动;立幕1用于显示康复训练背景、肢体活动和虚拟三维模型相叠加后形成的虚拟训练场景,实现虚实融合。
底幕2和立幕1分别安装在双幕折叠机构4的两侧,通过双幕折叠机构4调节底幕2和立幕1的分合及两者间的角度。底幕2为触摸控制屏,底幕2和双幕折叠机构4之间还设置有底幕平移机构5,以实现底幕2的平移运动。
电脑主机9内嵌有康复训练模块,康复训练模块包括康复训练背景模块、训练场景叠加模块及训练教程模块。电脑主机9还内嵌有训练结果评估模块,以对训练效果进行量化评估。
摄像头3上还设置有用于调节摄像头3位置的摄像头调节结构6。
系统还包括手势控制模块8,用于肢体与虚拟训练场景进行交互。
参照图2,在一种实施例中,本发明的双屏交互的增强现实康复训练系统进行康复训练的步骤包括:
1)通过双幕折叠机构4打开立幕1和底幕2,并调节角度使得立幕1和患者处于平视;
2)启动电脑主机9,打开摄像头3软件,通过摄像头调节结构6调整摄像头3的拍摄区域,使得肢体活动区7处于摄像头3视角中心;
3)通过底幕平移机构5移动底幕2,以调节底幕2上方的肢体活动区7与立幕1之间的水平距离至合适范围;
4)运行康复训练模块,康复训练背景模块通过底幕2显示各类康复训练背景,患者将肢体置于肢体活动区7,摄像头3采集底幕2显示的康复训练背景和肢体活动视频并传输至康复训练模块;
5)康复训练模块针对不同的康复训练背景导入相应的虚拟三维模型和场景,训练场景叠加模块将虚拟三维模型和场景叠加到摄像头3捕捉的训练背景和肢体活动视频中形成虚实融合的虚拟训练场景,训练教程模块通过立幕1显示康复训练教程,患者根据康复训练教程与虚拟训练场景进行交互操作,进行康复训练;
6)训练结果评估模块采集交互数据,并结合训练难度等级和患者的完成度,对患者进行量化评估。
其中,步骤5)中,患者可通过具有触摸控制功能的底幕2或外置的手势控制模块8或软件虚拟按键与立幕1显示的虚拟训练场景进行交互;增加了趣味性,康复过程数据信息更加丰富。
其中,步骤6)中,训练结果评估模块通过实时记录和量化康复患者训练数据、难度等级和完成度,对康复患者进行评估,明确各类训练场景针对不同患者的有效性和差异性,从而为自适应调整功能提供了临床依据;
其中,康复训练模块实时获取训练结果评估模块中的数据,可根据各类训练场景对于不同患者的有效性和差异性,自适应调整训练内容和难度,从而提高患者的康复效率。
本发明中,底幕2显示不同的康复训练背景,肢体在底幕2区域内活动,底幕2上方摄像头3对训练背景和肢体进行录制,立幕1显示训练背景、肢体活动和叠加的虚拟场景,实现虚实融合的功能;
本发明中,立幕1显示训练背景、肢体活动和叠加的虚拟场景,肢体与虚拟场景通过软件虚拟按键、底幕2触摸屏和外置手势控制来实现人机交互,实现人机交互的功能;
本发明中,通过实时记录康复患者训练时的完成度,自适应调整训练内容的难度,匹配患者当前的康复状态,实现自适应调整的功能;
本发明中,通过实时记录和量化康复患者训练数据和难度等级,对康复患者进行评估,明确各类训练场景针对不同患者的有效性和差异性,实现量化评估的功能。
尽管本发明的实施方案已公开如上,但其并不仅仅限于说明书和实施方式中所列运用,它完全可以被适用于各种适合本发明的领域,对于熟悉本领域的人员而言,可容易地实现另外的修改,因此在不背离权利要求及等同范围所限定的一般概念下,本发明并不限于特定的细节。
Claims (10)
1.一种双屏交互的增强现实康复训练系统,其特征在于,包括立幕、底幕、摄像头及电脑主机;
所述底幕用于显示康复训练背景;所述立幕和底幕之间形成有肢体活动区,所述摄像头用于采集底幕显示的康复训练背景和肢体活动区的肢体活动视频;所述立幕用于显示康复训练背景、肢体活动和虚拟三维模型相叠加后形成的虚拟训练场景。
2.根据权利要求1所述的双屏交互的增强现实康复训练系统,其特征在于,还包括用于实现所述底幕和立幕之间的开合及角度调节的双幕折叠机构,所述立幕设置在所述双幕折叠机构的一侧,所述底幕设置在所述双幕折叠机构的另一侧。
3.根据权利要求2所述的双屏交互的增强现实康复训练系统,其特征在于,所述底幕为触摸控制屏,所述底幕和双幕折叠机构之间还设置有底幕平移机构,以实现底幕的平移运动。
4.根据权利要求3所述的双屏交互的增强现实康复训练系统,其特征在于,所述电脑主机内嵌有康复训练模块,所述康复训练模块包括康复训练背景模块、训练场景叠加模块及训练教程模块。
5.根据权利要求4所述的双屏交互的增强现实康复训练系统,其特征在于,所述电脑主机还内嵌有训练结果评估模块,以对训练效果进行量化评估。
6.根据权利要求5所述的双屏交互的增强现实康复训练系统,其特征在于,所述摄像头上还设置有用于调节摄像头位置的摄像头调节结构。
7.根据权利要求6所述的双屏交互的增强现实康复训练系统,其特征在于,还包括手势控制模块,用于肢体与虚拟训练场景进行交互。
8.根据权利要求7所述的双屏交互的增强现实康复训练系统,其特征在于,其康复训练步骤包括:
1)通过双幕折叠机构打开立幕和底幕,并调节角度使得立幕和患者处于平视;
2)启动电脑主机,通过摄像头调节结构调整摄像头的拍摄区域,使得肢体活动区处于摄像头视角中心;
3)通过底幕平移机构移动底幕,以调节底幕上方的肢体活动区与立幕之间的水平距离至合适范围;
4)运行康复训练模块,康复训练背景模块通过底幕显示各类康复训练背景,患者将肢体置于肢体活动区,摄像头采集底幕显示的康复训练背景和肢体活动视频并传输至康复训练模块;
5)康复训练模块针对不同的康复训练背景导入相应的虚拟三维模型和场景,训练场景叠加模块将虚拟三维模型和场景叠加到摄像头捕捉的训练背景和肢体活动视频中形成虚实融合的虚拟训练场景,训练教程模块通过立幕显示康复训练教程,患者根据康复训练教程与虚拟训练场景进行交互操作,进行康复训练;
6)训练结果评估模块采集交互数据,并结合训练难度等级和患者的完成度,对患者进行量化评估。
9.根据权利要求8所述的双屏交互的增强现实康复训练系统,其特征在于,所述步骤5)中,患者通过具有触摸控制功能的底幕或外置的手势控制模块或软件虚拟按键与立幕显示的虚拟训练场景进行交互。
10.根据权利要求9所述的双屏交互的增强现实康复训练系统,其特征在于,其中,所述步骤6)中,训练结果评估模块通过实时记录和量化患者训练数据、难度等级和完成度,对患者进行评估,明确各类虚拟训练场景针对不同患者的有效性和差异性;
康复训练模块实时获取训练结果评估模块中的数据,并根据各类训练场景对于不同患者的有效性和差异性,自适应调整训练内容和难度。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811140392.6A CN109242981B (zh) | 2018-09-28 | 2018-09-28 | 双屏交互的增强现实康复训练系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811140392.6A CN109242981B (zh) | 2018-09-28 | 2018-09-28 | 双屏交互的增强现实康复训练系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109242981A true CN109242981A (zh) | 2019-01-18 |
CN109242981B CN109242981B (zh) | 2021-06-18 |
Family
ID=65057516
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811140392.6A Active CN109242981B (zh) | 2018-09-28 | 2018-09-28 | 双屏交互的增强现实康复训练系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109242981B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112116981A (zh) * | 2020-09-02 | 2020-12-22 | 杭州憶盛医疗科技有限公司 | 基于人工智能的康复训练方法、装置、系统及存储介质 |
CN114712801A (zh) * | 2022-04-20 | 2022-07-08 | 广州穗海新峰医疗设备制造股份有限公司 | 基于混合现实视频技术的肢体康复训练方法、系统及设备 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102735100A (zh) * | 2012-06-08 | 2012-10-17 | 重庆邮电大学 | 一种采用增强现实技术的单兵轻武器射击训练的方法和系统 |
CN102945637A (zh) * | 2012-11-29 | 2013-02-27 | 河海大学 | 一种基于增强现实的嵌入式教学模型及其方法 |
CN202855106U (zh) * | 2012-09-06 | 2013-04-03 | 中广核(北京)仿真技术有限公司 | 一种用于仿真核电站备用硬盘台组合的多屏模拟装置 |
US20140002444A1 (en) * | 2012-06-29 | 2014-01-02 | Darren Bennett | Configuring an interaction zone within an augmented reality environment |
US20170264936A1 (en) * | 2016-03-14 | 2017-09-14 | The Directv Group, Inc. | Method and system for viewing sports content within a virtual reality environment |
CN107346561A (zh) * | 2017-06-13 | 2017-11-14 | 深圳市吉亚鲁电子有限公司 | 一种基于ar技术的3d试衣系统 |
CN107583263A (zh) * | 2017-09-04 | 2018-01-16 | 广州达讯网络科技有限公司 | 面向vr技术实现运动社交及健康的方法及其系统 |
CN107961524A (zh) * | 2017-12-29 | 2018-04-27 | 武汉艺术先生数码科技有限公司 | 基于ar的健身游戏与训练系统 |
CN108198247A (zh) * | 2018-01-12 | 2018-06-22 | 福州大学 | 一种基于ar增强现实技术的侧脑室穿刺手术教学工具 |
CN108550190A (zh) * | 2018-04-19 | 2018-09-18 | 腾讯科技(深圳)有限公司 | 增强现实数据处理方法、装置、计算机设备和存储介质 |
-
2018
- 2018-09-28 CN CN201811140392.6A patent/CN109242981B/zh active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102735100A (zh) * | 2012-06-08 | 2012-10-17 | 重庆邮电大学 | 一种采用增强现实技术的单兵轻武器射击训练的方法和系统 |
US20140002444A1 (en) * | 2012-06-29 | 2014-01-02 | Darren Bennett | Configuring an interaction zone within an augmented reality environment |
CN202855106U (zh) * | 2012-09-06 | 2013-04-03 | 中广核(北京)仿真技术有限公司 | 一种用于仿真核电站备用硬盘台组合的多屏模拟装置 |
CN102945637A (zh) * | 2012-11-29 | 2013-02-27 | 河海大学 | 一种基于增强现实的嵌入式教学模型及其方法 |
US20170264936A1 (en) * | 2016-03-14 | 2017-09-14 | The Directv Group, Inc. | Method and system for viewing sports content within a virtual reality environment |
CN107346561A (zh) * | 2017-06-13 | 2017-11-14 | 深圳市吉亚鲁电子有限公司 | 一种基于ar技术的3d试衣系统 |
CN107583263A (zh) * | 2017-09-04 | 2018-01-16 | 广州达讯网络科技有限公司 | 面向vr技术实现运动社交及健康的方法及其系统 |
CN107961524A (zh) * | 2017-12-29 | 2018-04-27 | 武汉艺术先生数码科技有限公司 | 基于ar的健身游戏与训练系统 |
CN108198247A (zh) * | 2018-01-12 | 2018-06-22 | 福州大学 | 一种基于ar增强现实技术的侧脑室穿刺手术教学工具 |
CN108550190A (zh) * | 2018-04-19 | 2018-09-18 | 腾讯科技(深圳)有限公司 | 增强现实数据处理方法、装置、计算机设备和存储介质 |
Non-Patent Citations (1)
Title |
---|
刘佳: "视触觉增强现实技术在上肢康复中的研究进展", 《中国康复理论与实践》 * |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112116981A (zh) * | 2020-09-02 | 2020-12-22 | 杭州憶盛医疗科技有限公司 | 基于人工智能的康复训练方法、装置、系统及存储介质 |
CN112116981B (zh) * | 2020-09-02 | 2023-12-22 | 杭州憶盛医疗科技有限公司 | 基于人工智能的康复训练方法、装置、系统及存储介质 |
CN114712801A (zh) * | 2022-04-20 | 2022-07-08 | 广州穗海新峰医疗设备制造股份有限公司 | 基于混合现实视频技术的肢体康复训练方法、系统及设备 |
Also Published As
Publication number | Publication date |
---|---|
CN109242981B (zh) | 2021-06-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Ofli et al. | Berkeley mhad: A comprehensive multimodal human action database | |
KR102581453B1 (ko) | 헤드 마운티드 디스플레이(Head Mounted Display: HMD) 디바이스를 위한 이미지 처리 | |
Sielhorst et al. | An augmented reality delivery simulator for medical training | |
CN101763762B (zh) | 使用虚拟现实的教育系统和方法 | |
CN208156892U (zh) | 智能精准中医技能培训考核系统 | |
Hwang et al. | A full-body gesture database for automatic gesture recognition | |
CN105511600B (zh) | 一种基于混合现实的多媒体人机交互平台 | |
CN110298286A (zh) | 基于表面肌电与深度图像的虚拟现实康复训练方法及系统 | |
CN109242981A (zh) | 双屏交互的增强现实康复训练系统 | |
CN109613982A (zh) | 头戴式ar显示设备的显示交互方法 | |
CN105653020A (zh) | 穿越时空的方法和装置以及使用其的眼镜或头盔 | |
CN106293099A (zh) | 手势识别方法及系统 | |
CN117204852A (zh) | 认知综合评估与认知障碍康复训练方法、装置及系统 | |
CN109448131A (zh) | 一种基于Kinect的虚拟钢琴弹奏系统的构建方法 | |
LIU et al. | A preliminary study of kinect-based real-time hand gesture interaction systems for touchless visualizations of hepatic structures in surgery | |
CN110841266A (zh) | 一种辅助训练系统及方法 | |
Saggio et al. | Augmented reality for restoration/reconstruction of artefacts with artistic or historical value | |
CN113965737A (zh) | 基于智能升降桌的智能健康监测方法及系统 | |
CN103744511B (zh) | 一种交互式皮影表演系统及操作控制方法 | |
CN202548757U (zh) | 一种虚拟翻书装置 | |
CN109116987A (zh) | 一种基于Kinect手势控制的全息展示系统 | |
CN103258469B (zh) | 肩关节镜模拟打结练习器 | |
CN215231970U (zh) | 一种智能安全健身指导装置 | |
CN205621077U (zh) | 一种基于深度图像的双目视觉重构装置 | |
CN205721737U (zh) | 一种古画立体体验装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |