CN116808567A - 一种基于虚拟现实的模拟行走系统 - Google Patents
一种基于虚拟现实的模拟行走系统 Download PDFInfo
- Publication number
- CN116808567A CN116808567A CN202310806347.4A CN202310806347A CN116808567A CN 116808567 A CN116808567 A CN 116808567A CN 202310806347 A CN202310806347 A CN 202310806347A CN 116808567 A CN116808567 A CN 116808567A
- Authority
- CN
- China
- Prior art keywords
- human body
- module
- data
- walking
- virtual reality
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000004088 simulation Methods 0.000 title claims abstract description 24
- 239000011521 glass Substances 0.000 claims description 12
- 230000006698 induction Effects 0.000 claims description 6
- 230000036544 posture Effects 0.000 claims description 6
- 230000008859 change Effects 0.000 claims description 5
- 208000002173 dizziness Diseases 0.000 abstract description 9
- 238000011065 in-situ storage Methods 0.000 abstract description 2
- 230000033001 locomotion Effects 0.000 description 14
- 230000007246 mechanism Effects 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 230000019771 cognition Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000009191 jumping Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Landscapes
- User Interface Of Digital Computer (AREA)
- Position Input By Displaying (AREA)
Abstract
本发明属于虚拟现实领域,并公开了一种基于虚拟现实的模拟行走系统,包括:感应模块,定位模块和显示模块均与控制分析模块电连接;其中,感应模块设置于人体脚部上方,感应模块用于获取第一行走数据;定位模块设置于人体头部上方且高于人体头部,定位模块用于获取第二行走数据;控制分析模块用于对第一行走数据和第二行走数据进行结合分析,得到实时模拟数据,并将实时模拟数据传输到显示模块中;显示模块穿戴于人体头部上方,显示模块用于接收并显示实时模拟数据。本发明技术方案只需要个人能够原地踏步的空间便可实现人体在VR环境中的行走、跑步等动作,同时克服了人体在虚拟现实环境中眩晕的问题。
Description
技术领域
本发明属于虚拟现实领域,特别是涉及一种基于虚拟现实的模拟行走系统。
背景技术
目前,用于虚拟现实环境涉及动作捕捉的人机交互设备大致分为两种:一种主要由VR头戴式眼镜、左右手操控手柄以及两个定位器构成;另一种为一体机设备,包括VR头戴式眼镜与左右手操控手柄,均依靠光学定位或蓝牙定位。
要实现人体在虚拟现实环境中移动,可以凭借在现实环境中的房间内移动映射到虚拟环境中,也可以通过操控手柄实现人体在虚拟环境中的运动,但此种运动方式易造成人体视觉大脑对运动的认知不同步,产生眩晕感。
现有产品HTCVIVE的VR虚拟现实游戏设备产品的定位方式,采用Outside-intracking(外向内追踪技术),即为通过外置的激光发射器对设备进行定位,该技术通过激光扫描仪发射激光束,对接收器上的反射标记进行定位;其优点是定位精度较高,但设备成本相对较高,而且容易受到环境光线的影响。
ODT万向行动平台Omni-directional treadmill,即可以365度转向、行走、跑跳等做出各种动作,俗称万向跑步机(VR跑步机)。它与VR头部显示器搭配,大幅度改善并增强了虚拟现实在实际使用中的体验。万向跑步机为克服人体眩晕感诞生,依照设计原理大致分为两种,一种万向跑步机底板固定,仅作为感应装置,基于足部追踪读取数据;另一种类似传统跑步机,将跑步机步带(运行方向假设为X方向)分成若干个小跑带,小步带的运行方向为Y方向。
现有万向跑步机存在如下问题:一是占地面积与体积均较大且重量较重,难以进行移动;二是现有万向跑步机的底盘大多制作为中间下凹的形状,人体在跑步机上运动时难以保持平衡,需要腰带固定保持人体平衡;三是若使用时间较长,人体会感到明显的疲惫感,对体力的消耗较大。
发明内容
本发明的目的是提供一种基于虚拟现实的模拟行走系统,以解决上述现有技术存在的问题。
为实现上述目的,本发明提供了一种基于虚拟现实的模拟行走系统,包括:
可选的,感应模块,定位模块,控制分析模块和显示模块;
所述感应模块,定位模块和所述显示模块均与所述控制分析模块电连接;
其中,所述感应模块设置于人体脚部上方,所述感应模块用于获取第一行走数据;
所述定位模块设置于人体头部上方且高于人体头部,所述定位模块用于获取第二行走数据;
所述控制分析模块用于对所述第一行走数据和所述第二行走数据进行结合分析,得到实时模拟数据,并将所述实时模拟数据传输到显示模块中;
所述显示模块穿戴于人体头部上方,所述显示模块用于接收并显示所述实时模拟数据。
可选的,所述感应模块包括:左感应器和右感应器;
所述左感应器和右感应器均采用空间传感器,所述左感应器和右感应器分别固定于人体左、右脚部上方;
通过所述左感应器和右感应器实时追踪人体脚部上下交替抬起的位置和姿态,获取第一行走数据。
可选的,所述定位模块采用激光定位器,所述激光定位器设置有多个,所述多个激光定位器之间对角设置;
通过所述激光定位器对人体脚部上下交替抬起的抬起高度、频率以及方向的改变进行扫描识别,得到第二行走数据。
可选的,所述控制分析模块包括:PC端电脑设备和电源;
所述PC端电脑设备和所述电源依次连接,所述PC端电脑设备内部存储有虚拟环境数据,通过所述PC端电脑设备对所述第一行走数据和所述第二行走数据进行结合分析,并将分析结果与所述虚拟环境数据进行结合分析,得到实时模拟数据。
可选的,所述显示模块采用VR头戴式眼镜,所述VR头戴式眼镜与所述PC端电脑设备连接,通过所述PC端电脑设备将所述实时模拟数据传输到所述VR头戴式眼镜中。
本发明的技术效果为:
本发明提供一种基于虚拟现实的模拟行走系统,包括:所述感应模块,定位模块和所述显示模块均与所述控制分析模块电连接;其中,所述感应模块设置于人体脚部上方,所述感应模块用于获取第一行走数据;所述定位模块设置于人体头部上方且高于人体头部,所述定位模块用于获取第二行走数据;所述控制分析模块用于对所述第一行走数据和所述第二行走数据进行结合分析,得到实时模拟数据,并将所述实时模拟数据传输到显示模块中;所述显示模块穿戴于人体头部上方,所述显示模块用于接收并显示所述实时模拟数据。
本发明提供的模拟行走系统外形小巧、便于携带,易穿戴,易操作;本系统只需要个人能够原地踏步的空间便可实现人体在VR环境中的行走、跑步等动作,本发明提供的模拟行走系统的运动方式更加接近人体自然运动,本系统在使用过程中,双脚抬起即身体处于运动状态,通过抬起高度以及频率映射人体在虚拟环境中的运动。本系统使人体实际运动与使用模拟行走系统时眼睛所见相匹配,能够有效缓解使用者使用现有的虚拟现实设备时使用感受与人体正常行走发力感受差别较大进而导致人体产生眩晕感的问题。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
构成本申请的一部分的附图用来提供对本申请的进一步理解,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
图1为本发明实施例中的模拟行走系统结构示意图;
图2为本发明实施例中的流程图;
标号说明:1-感应模块,2-激光定位器,3-手柄,4-显示模块,5-控制分析模块。
具体实施方式
下面将结合本发明实施例,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例,基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
为了便于理解本发明,下面将参照相关附图对本发明进行更全面的描述,给出了本发明的若干实施例,但是,本发明可以以许多不同的形式来实现,并不限于本文所描述的实施例,相反地,提供这些实施例的目的是使对本发明的公开内容更加透彻全面。
需要说明的是,当元件被称为“固设于”另一个元件,它可以直接在另一个元件上或者也可以存在居中的元件,当一个元件被认为是“连接”另一个元件,它可以是直接连接到另一个元件或者可能同时存在居中元件,本文所使用的术语“垂直的”、“水平的”、“左”、“右”以及类似的表述只是为了说明的目的;
关于本文中所使用的“包含”、“包括”、“具有”、“含有”等等,均为开放性的用语,即意指包含但不限于。
除非另有定义,本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同,本文中在本发明的说明书中所使用的术语只是为了描述具体的实施例的目的,不是旨在于限制本发明,本文所使用的术语“及/或”包括一个或多个相关的所列项目的任意的和所有的组合。
需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。
实施例一
如图1所示,本实施例中提供了一种基于虚拟现实的模拟行走系统,包括:
感应模块1,定位模块,控制分析模块5和显示模块4;
所述感应模块1,定位模块和所述显示模块4均与所述控制分析模块5电连接;
其中,所述感应模块1设置于人体脚部上方,所述感应模块1用于获取第一行走数据;
所述定位模块设置于人体头部上方且高于人体头部,所述定位模块用于获取第二行走数据;
所述控制分析模块5用于对所述第一行走数据和所述第二行走数据进行结合分析,得到实时模拟数据,并将所述实时模拟数据传输到显示模块4中;
所述显示模块4穿戴于人体头部上方,用于接收并显示所述实时模拟数据。
所述控制分析模块5还连接有手柄3,所述手柄设置于人体手中以及手臂上。
所述显示模块4穿戴于人体头部上方,所述显示模块4用于接收并显示所述实时模拟数据。
本实施例提供的基于虚拟现实的模拟行走系统由五部分组成:VR头戴式眼镜、左感应器、右感应器与两个激光定位器2。
在本实施例中,人体在虚拟环境中的脚步模拟移动不依靠手柄实现,而是脚部的上下交替抬起实现。
所述感应模块1包括:左感应器和右感应器;
所述左感应器和右感应器均采用空间传感器,所述左感应器和右感应器分别固定于人体左、右脚部上方;
通过所述左感应器和右感应器实时追踪人体脚部上下交替抬起的位置和姿态,获取第一行走数据。
左、右感应器分别固定于人体左、右的脚面,左感应器与右感应器分别固定有空间位置传感器,以实时追踪人体脚部的位置和姿态,用于感知人体脚部运动。
可实施的,所述定位模块采用激光定位器2,所述激光定位器2可设置为两个或多个,所述多个激光定位器2之间对角设置;
两个激光定位器2位于安装空间对角线位置,高于头部。
通过所述激光定位器2对人体脚部上下交替抬起的抬起高度、频率以及方向的改变进行扫描识别,得到第二行走数据。
所述第一行走数据是垂直方向数据,决定移动速度,第二行走数据获取水平方向数据,决定移动方向。
通过激光定位器2实现脚部位置和姿态追踪时,通过激光扫描定位技术来识别脚部抬起高度、频率以及方向的改变,并结合六自由度(6DoF)传感器来获取脚部位置和姿态具体信息。6DoF传感器可以同时检测物体在三维空间中的平移和旋转,从而实现对脚部方向变化的准确识别。
可实施的,所述控制分析模块5包括:PC端电脑设备和电源;
所述PC端电脑设备和所述电源依次连接,所述PC端电脑设备内部存储有虚拟环境数据,通过所述PC端电脑设备对所述第一行走数据和所述第二行走数据进行结合分析,并将分析结果与所述虚拟环境数据进行结合分析,得到实时模拟数据。
可实施的,所述显示模块采用VR头戴式眼镜,所述VR头戴式眼镜与所述PC端电脑设备连接,通过所述PC端电脑设备将所述实时模拟数据传输到所述VR头戴式眼镜中。VR头戴式眼镜为有线设备,与PC端电脑设备、电源相连接;脚部感应器需要充电使用,定位器连接电源使用。
本实施例提供的虚拟现实行走系统基于HTC VIVE开发,使用激光扫描定位技术,此系统还适用于市面上现有的多种虚拟现实设备,包括基于电磁追踪技术的PICO、基于红外光学定位技术的Oculus Rift以及基于可见光技术的微软MR系列等等。通过本实施例提供的行走系统对现有的虚拟现实设备进行结合改进,能够有效缓解使用者在使用现有的虚拟现实设备时,使用感受与人体正常行走感受差别较大而产生人体眩晕的问题;
在一个具体的实施例中,定位模块利用红外线光学定位技术,采用多个红外发射摄像头及外向内追踪的方式,对室内定位空间进行覆盖。通过在被追踪物体上放置红外反光点,捕捉这些反光点反射回摄像机的图像,确定其在空间中的位置信息。再结合左感应器和右感应器,将实时追踪获取的人体脚部上下交替抬起位置和姿态数据,传输到PC端处理,实现人体在VR环境中的行走、跑步等动作,克服人体在虚拟现实环境中眩晕的问题。
在一个具体的实施例中,定位模块采用摄像头,利用内向外追踪技术,摄像头或感应器位于被跟踪的设备,无需布置繁琐的基站,定位的范围几乎是无限大,能够精准定位以及获取人体脚部上下交替抬起的位置和姿态,解决人体在VR环境中中眩晕的问题。
在一个实施例中,定位模块采用电磁线圈,通过控制分析模块接受电磁线圈产生的可以穿透人体的电磁波信号,再结合左感应器和右感应器实时追踪人体脚部上下交替抬起的位置和姿态,实现人体在VR环境中的行走、跑步等动作,克服人体在虚拟现实环境中眩晕的问题。
本实施例提供的模拟行走系统外形小巧、便于携带,易穿戴,易操作;本系统只需要个人能够原地踏步的空间便可实现人体在VR环境中的行走、跑步等动作,同时克服了人体在虚拟现实环境中眩晕的问题。
本实施例提供的基于虚拟现实的模拟行走系统支持的动作有:行走、奔跑和转向。
行走:原地踏步运动,双脚抬起越高,向前行走迈步越大。
奔跑:原地跑步运动,双脚抬起频率越快,向前跑步速度越快。
本实施例提供的基于虚拟现实的模拟行走系统设置有移动范围限定机制和防误判机制;
移动范围限定机制:可选择开关范围限制,打开时在区域内只识别原地踏步,关闭时可识别其余行走动作。
防误判机制:在进行跳跃、躺下、俯蹲等特殊动作时不会有任何行走误判。
以上所述,仅为本申请较佳的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到的变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应该以权利要求的保护范围为准。
Claims (5)
1.一种基于虚拟现实的模拟行走系统,其特征在于,包括:
感应模块(1),定位模块,控制分析模块(5)和显示模块(4);
所述感应模块(1),定位模块和所述显示模块(4)均与所述控制分析模块(5)电连接;
其中,所述感应模块(1)设置于人体脚部上方,所述感应模块(1)用于获取第一行走数据;
所述定位模块设置于人体头部上方且高于人体头部,所述定位模块用于获取第二行走数据;
所述控制分析模块(5)用于对所述第一行走数据和所述第二行走数据进行结合分析,得到实时模拟数据,并将所述实时模拟数据传输到显示模块(4)中;
所述显示模块(4)穿戴于人体头部上方,用于接收并显示所述实时模拟数据。
2.根据权利要求1所述的一种基于虚拟现实的模拟行走系统,其特征在于,
所述感应模块(1)包括:左感应器和右感应器;
所述左感应器和右感应器均采用空间传感器,所述左感应器和右感应器分别固定于人体左、右脚部上方;
通过所述左感应器和右感应器实时追踪人体脚部上下交替抬起的位置和姿态,获取第一行走数据。
3.根据权利要求1所述的一种基于虚拟现实的模拟行走系统,其特征在于,
所述定位模块采用激光定位器(2),所述激光定位器(2)设置有多个,所述多个激光定位器(2)之间对角设置;
通过所述激光定位器(2)对人体脚部上下交替抬起的抬起高度、频率以及方向的改变进行扫描识别,得到第二行走数据。
4.根据权利要求3所述的一种基于虚拟现实的模拟行走系统,其特征在于,
所述控制分析模块(5)包括:PC端电脑设备和电源;
所述PC端电脑设备和所述电源依次连接,所述PC端电脑设备内部存储有虚拟环境数据,通过所述PC端电脑设备对所述第一行走数据和所述第二行走数据进行结合分析,并将分析结果与所述虚拟环境数据进行结合分析,得到实时模拟数据。
5.根据权利要求4所述的一种基于虚拟现实的模拟行走系统,其特征在于,
所述显示模块(4)采用VR头戴式眼镜,所述VR头戴式眼镜与所述PC端电脑设备连接,通过所述PC端电脑设备将所述实时模拟数据传输到所述VR头戴式眼镜中。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310806347.4A CN116808567B (zh) | 2023-07-03 | 2023-07-03 | 一种基于虚拟现实的模拟行走系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310806347.4A CN116808567B (zh) | 2023-07-03 | 2023-07-03 | 一种基于虚拟现实的模拟行走系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN116808567A true CN116808567A (zh) | 2023-09-29 |
CN116808567B CN116808567B (zh) | 2024-02-06 |
Family
ID=88121893
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310806347.4A Active CN116808567B (zh) | 2023-07-03 | 2023-07-03 | 一种基于虚拟现实的模拟行走系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116808567B (zh) |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103179692A (zh) * | 2011-12-26 | 2013-06-26 | 陈建新 | 基于ZigBee/IEEE802.15.4的人体运动追踪系统 |
CN105183165A (zh) * | 2015-09-15 | 2015-12-23 | 北京国承万通信息科技有限公司 | 可穿戴设备 |
US20160131761A1 (en) * | 2014-11-10 | 2016-05-12 | Valve Corporation | Positional tracking systems and methods |
EP3067783A1 (en) * | 2015-03-11 | 2016-09-14 | ETH Zurich | Method and system to track human locomotion by relative positional tracking of body parts of the human |
US20180005421A1 (en) * | 2016-06-29 | 2018-01-04 | Lg Electronics Inc. | Glasses-type mobile terminal and method of operating the same |
US20180043247A1 (en) * | 2016-08-12 | 2018-02-15 | Zero Latency PTY LTD | Mapping arena movements into a 3-d virtual world |
JP2018175505A (ja) * | 2017-04-14 | 2018-11-15 | 株式会社コロプラ | 情報処理方法、装置、および当該情報処理方法をコンピュータに実行させるためのプログラム |
CN109817048A (zh) * | 2018-12-04 | 2019-05-28 | 广西峰和云启文化投资有限公司 | 一种虚拟仿真环境中角色姿态与行走方向的识别系统 |
US20190251892A1 (en) * | 2018-02-15 | 2019-08-15 | Valve Corporation | Using tracking of display device to control image display |
-
2023
- 2023-07-03 CN CN202310806347.4A patent/CN116808567B/zh active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103179692A (zh) * | 2011-12-26 | 2013-06-26 | 陈建新 | 基于ZigBee/IEEE802.15.4的人体运动追踪系统 |
US20160131761A1 (en) * | 2014-11-10 | 2016-05-12 | Valve Corporation | Positional tracking systems and methods |
EP3067783A1 (en) * | 2015-03-11 | 2016-09-14 | ETH Zurich | Method and system to track human locomotion by relative positional tracking of body parts of the human |
CN105183165A (zh) * | 2015-09-15 | 2015-12-23 | 北京国承万通信息科技有限公司 | 可穿戴设备 |
US20180005421A1 (en) * | 2016-06-29 | 2018-01-04 | Lg Electronics Inc. | Glasses-type mobile terminal and method of operating the same |
US20180043247A1 (en) * | 2016-08-12 | 2018-02-15 | Zero Latency PTY LTD | Mapping arena movements into a 3-d virtual world |
JP2018175505A (ja) * | 2017-04-14 | 2018-11-15 | 株式会社コロプラ | 情報処理方法、装置、および当該情報処理方法をコンピュータに実行させるためのプログラム |
US20190251892A1 (en) * | 2018-02-15 | 2019-08-15 | Valve Corporation | Using tracking of display device to control image display |
CN109817048A (zh) * | 2018-12-04 | 2019-05-28 | 广西峰和云启文化投资有限公司 | 一种虚拟仿真环境中角色姿态与行走方向的识别系统 |
Also Published As
Publication number | Publication date |
---|---|
CN116808567B (zh) | 2024-02-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11262841B2 (en) | Wireless wrist computing and control device and method for 3D imaging, mapping, networking and interfacing | |
US12013979B2 (en) | Lightweight and low power cross reality device with high temporal resolution | |
CN117120962A (zh) | 用于控制虚拟和图形元素的映射手部区域之间的双手交互 | |
CN103347437B (zh) | 3d映射环境中的凝视检测 | |
CN103713737B (zh) | 用于智能眼镜的虚拟键盘系统 | |
US10635179B2 (en) | Apparatus, systems, and methods for facilitating user interaction with electronic devices | |
US20160232715A1 (en) | Virtual reality and augmented reality control with mobile devices | |
US20120262558A1 (en) | Apparatus, systems and methods for providing motion tracking using a personal viewing device | |
WO2020163662A1 (en) | Lightweight cross reality device with passive depth extraction | |
CN102270276A (zh) | 根据身体移动确定卡路里燃烧 | |
CN106200985A (zh) | 桌面型个人沉浸虚拟现实交互设备 | |
Khambadkar et al. | GIST: a gestural interface for remote nonvisual spatial perception | |
Hu et al. | Stereopilot: A wearable target location system for blind and visually impaired using spatial audio rendering | |
US20230256297A1 (en) | Virtual evaluation tools for augmented reality exercise experiences | |
CN206819290U (zh) | 一种虚拟现实多人互动的系统 | |
Grimm et al. | VR/AR input devices and tracking | |
CN116808567B (zh) | 一种基于虚拟现实的模拟行走系统 | |
JP2020525956A (ja) | コンピュータ媒介現実用の表示装置 | |
CN109426336A (zh) | 一种虚拟现实辅助选型设备 | |
US11998798B2 (en) | Virtual guided fitness routines for augmented reality experiences | |
US20240050831A1 (en) | Instructor avatars for augmented reality experiences | |
US20240161332A1 (en) | Glasses device and method for determining a pose | |
NAN | DEVELOPMENT OF A COMPUTER PROGRAM TO ASSIST UPPER LIMB REHABILITATION USING KINECT | |
Bianchi | Exploration of augmented reality technology for surgical training simulators | |
Hernoux et al. | Is a Time-Of-Flight Camera Better than a Mouse for 3D Direct Selection in Virtual Worlds? |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |