CN114159046A - 一种基于视觉识别的呼吸障碍检测装置及方法 - Google Patents

一种基于视觉识别的呼吸障碍检测装置及方法 Download PDF

Info

Publication number
CN114159046A
CN114159046A CN202111465821.9A CN202111465821A CN114159046A CN 114159046 A CN114159046 A CN 114159046A CN 202111465821 A CN202111465821 A CN 202111465821A CN 114159046 A CN114159046 A CN 114159046A
Authority
CN
China
Prior art keywords
visual recognition
shaft assembly
detection sensor
data
control host
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202111465821.9A
Other languages
English (en)
Other versions
CN114159046B (zh
Inventor
蒋显彪
蒋云沙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Haiwen Biotechnology Co ltd
Original Assignee
Shenzhen Haiwen Biotechnology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Haiwen Biotechnology Co ltd filed Critical Shenzhen Haiwen Biotechnology Co ltd
Priority to CN202111465821.9A priority Critical patent/CN114159046B/zh
Publication of CN114159046A publication Critical patent/CN114159046A/zh
Application granted granted Critical
Publication of CN114159046B publication Critical patent/CN114159046B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/08Detecting, measuring or recording devices for evaluating the respiratory organs
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0033Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Veterinary Medicine (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Engineering & Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Public Health (AREA)
  • Physics & Mathematics (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Physiology (AREA)
  • Pulmonology (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本发明涉及基于视觉识别的呼吸障碍检测装置,包括安装支架,安装支架上设置有视觉识别单元、控制主机、鼻气流检测传感器、柔性连接杆、旋转电机、Z轴组件和XY轴组件;控制主机获取多个视觉识别单元间隔一设定时长拍摄画面数据后,对比多个画面数据是否存在差异,若无差异则将其与人体头部形态数据库比对,获取对应的睡姿状态数据,并依据该睡姿状态数据控制旋转电机、Z轴组件以及XY轴组件运行,将鼻气流检测传感器带动至人体鼻部检测气流;通过该种方式,应用现有的视觉识别技术,能够实现不与人体接触但又可以较为精确的检测,保障检测数据的可靠性,整体成本低,且控制难度远小于体征算法的开发难度。

Description

一种基于视觉识别的呼吸障碍检测装置及方法
技术领域
本发明涉及呼吸检测技术领域,更具体地说,涉及一种基于视觉识别的呼吸障碍检测装置及方法。
背景技术
目前对呼吸检测的方式通常有两种,一种是直接由人体佩戴,而且佩戴位置通常在脸部,该种方式体验感较差,影响人们的活动,另一种是依靠对血流、心率等体征进行检测,再依靠设计算法来间接判断呼吸是否存在障碍,该种方式存在较多的干扰因素,判断结果精确度难以掌控,需要一种不与人体接触但又可以较为精确检测的基于视觉识别的呼吸障碍检测装置及方法。
发明内容
本发明要解决的技术问题在于,针对现有技术的上述缺陷,提供一种基于视觉识别的呼吸障碍检测装置及方法。
本发明解决其技术问题所采用的技术方案是:
构造一种基于视觉识别的呼吸障碍检测装置,其中,包括安装支架,所述安装支架上设置有对人体头部形态拍照识别的视觉识别单元、接收并处理所述视觉识别单元数据信号的控制主机、鼻气流检测传感器、连接所述鼻气流检测传感器的柔性连接杆、带动所述柔性连接杆水平转动的旋转电机、带动所述旋转电机升降的Z轴组件和带动所述Z轴组件沿X轴Y轴移动的XY轴组件;所述控制主机获取多个所述视觉识别单元间隔一设定时长拍摄画面数据后,对比多个画面数据是否存在差异,若无差异则将其与人体头部形态数据库比对,获取对应的睡姿状态数据,并依据该睡姿状态数据控制所述旋转电机、所述Z轴组件以及所述XY轴组件运行,将鼻气流检测传感器带动至人体鼻部检测气流。
本发明所述的基于视觉识别的呼吸障碍检测装置,其中,所述视觉识别单元包括分别采集人体头部正上方、左侧和右侧的三个摄像头;所述安装支架上设置有以人体头部为圆心的弧形轨道,左右两侧的所述摄像头均滑动设置在所述弧形轨道上,所述安装支架还包括两组分别带动左右两侧的所述摄像头移动的驱动单元,所述驱动单元与所述控制主机电连接并受其控制。
本发明所述的基于视觉识别的呼吸障碍检测装置,其中,所述驱动单元包括对所述摄像头提供牵引力的弹簧、拉动摄像头的拉绳以及对所述拉绳收放卷的收放卷电机,所述收放卷电机与所述控制主机电连接并受其控制。
本发明所述的基于视觉识别的呼吸障碍检测装置,其中,所述安装支架包括与床头连接的连接座和与所述连接座连接的横向安装框;所述视觉识别单元、所述Z轴组件以及所述XY轴组件均安装在所述横向安装框上。
本发明所述的基于视觉识别的呼吸障碍检测装置,其中,所述弧形轨道设置在所述横向安装框上,且位于所述Z轴组件的上方。
本发明所述的基于视觉识别的呼吸障碍检测装置,其中,所述柔性连接杆内部设置有供所述鼻气流检测传感器走线的走线孔。
本发明所述的基于视觉识别的呼吸障碍检测装置,其中,所述柔性连接杆下端设置有连接所述鼻气流检测传感器的连接头。
一种基于视觉识别的呼吸障碍检测方法,应用于如上述的基于视觉识别的呼吸障碍检测装置,其包括以下步骤:
设置多个检测时间节点,当时间节点到来时,视觉识别单元间隔一设定时长拍摄画面数据来获取多个画面数据,控制主机对比多个画面数据是否存在差异,若无差异则将其与人体头部形态数据库比对,获取对应的睡姿状态数据;
控制主机依据该睡姿状态数据确定检测位置,控制主机调节旋转电机旋转来切换鼻气流检测传感器的水平检测角度,控制XY轴组件运行将鼻气流检测传感器送至检测位置正上方,最后控制主机控制Z轴组件运行将鼻气流检测传感器送至检测位置;
到达位置后视觉识别单元再次拍照进行位置的确定,若有误则依据画面存在的差距进行位置调整后再次确定,重复该调整动作直至位置正确后进行鼻气流检测传感器的数据的获取,若无误则直接进行鼻气流检测传感器的数据的获取,控制主机接收鼻气流检测传感器数据并依据气流大小以及均匀性判断呼吸是否存在障碍。
本发明的有益效果在于:设置多个检测时间节点,当时间节点到来时,视觉识别单元间隔一设定时长拍摄画面数据来获取多个画面数据,控制主机对比多个画面数据是否存在差异,若无差异则将其与人体头部形态数据库比对,获取对应的睡姿状态数据;控制主机依据该睡姿状态数据确定检测位置,控制主机调节旋转电机旋转来切换鼻气流检测传感器的水平检测角度,控制XY轴组件运行将鼻气流检测传感器送至检测位置正上方,最后控制主机控制Z轴组件运行将鼻气流检测传感器送至检测位置;到达位置后视觉识别单元再次拍照进行位置的确定,若有误则依据画面存在的差距进行位置调整后再次确定,重复该调整动作直至位置正确后进行鼻气流检测传感器的数据的获取,若无误则直接进行鼻气流检测传感器的数据的获取,控制主机接收鼻气流检测传感器数据并依据气流大小以及均匀性判断呼吸是否存在障碍;通过该种方式,应用现有的视觉识别技术,能够实现不与人体接触但又可以较为精确的检测,保障检测数据的可靠性,整体成本低,且控制难度远小于体征算法的开发难度。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将结合附图及实施例对本发明作进一步说明,下面描述中的附图仅仅是本发明的部分实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他附图:
图1是本发明较佳实施例的基于视觉识别的呼吸障碍检测装置正视图;
图2是本发明较佳实施例的基于视觉识别的呼吸障碍检测装置原理框图;
图3是本发明较佳实施例的基于视觉识别的呼吸障碍检测方法流程图。
具体实施方式
为了使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的技术方案进行清楚、完整的描述,显然,所描述的实施例是本发明的部分实施例,而不是全部实施例。基于本发明的实施例,本领域普通技术人员在没有付出创造性劳动的前提下所获得的所有其他实施例,都属于本发明的保护范围。
本发明较佳实施例的基于视觉识别的呼吸障碍检测装置,如图1所示,同时参阅图2,包括安装支架1,安装支架1上设置有对人体头部形态拍照识别的视觉识别单元2、接收并处理视觉识别单元数据信号的控制主机3、鼻气流检测传感器4、连接鼻气流检测传感器的柔性连接杆5、带动柔性连接杆水平转动的旋转电机6、带动旋转电机升降的Z轴组件7、带动Z轴组件沿X轴Y轴移动的XY轴组件8;控制主机3获取多个视觉识别单元2间隔一设定时长拍摄画面数据后,对比多个画面数据是否存在差异,若无差异则将其与人体头部形态数据库比对,获取对应的睡姿状态数据,并依据该睡姿状态数据控制旋转电机6、Z轴组件7以及XY轴组件8运行,将鼻气流检测传感器4带动至人体鼻部检测气流;
设置多个检测时间节点,当时间节点到来时,视觉识别单元2间隔一设定时长拍摄画面数据来获取多个画面数据,控制主机3对比多个画面数据是否存在差异,若无差异则将其与人体头部形态数据库比对,获取对应的睡姿状态数据;控制主机3依据该睡姿状态数据确定检测位置,控制主机3调节旋转电机6旋转来切换鼻气流检测传感器4的水平检测角度,控制XY轴组件8运行将鼻气流检测传感器4送至检测位置正上方,最后控制主机控制Z轴组件7运行将鼻气流检测传感器送至检测位置;到达位置后视觉识别单元再次拍照进行位置的确定,若有误则依据画面存在的差距进行位置调整后再次确定,重复该调整动作直至位置正确后进行鼻气流检测传感器的数据的获取,若无误则直接进行鼻气流检测传感器的数据的获取,控制主机接收鼻气流检测传感器数据并依据气流大小以及均匀性判断呼吸是否存在障碍;
通过该种方式,应用现有的视觉识别技术,能够实现不与人体接触但又可以较为精确的检测,保障检测数据的可靠性,整体成本低,且控制难度远小于体征算法的开发难度;相比于现有的技术方式而言,本申请的结构形式更加稳定,且开发成本更低,同时对于人体头部状态稳定性的检测,能够兼顾考虑人体头部翻转、横移情况,同时柔性连接杆的设置能够较好的避免人体头部意外移动硬性接触到鼻气流检测传感器带来伤害的情况。
优选的,视觉识别单元2包括分别采集人体头部正上方、左侧和右侧的三个摄像头20;安装支架1上设置有以人体头部为圆心的弧形轨道10,左右两侧的摄像头20均滑动设置在弧形轨道10上,安装支架1还包括两组分别带动左右两侧的摄像头移动的驱动单元11,驱动单元11与控制主机3电连接并受其控制。
优选的,驱动单元11包括对摄像头20提供牵引力的弹簧110、拉动摄像头20的拉绳111以及对拉绳收放卷的收放卷电机112,收放卷电机112与控制主机3电连接并受其控制;结构简洁,驱动可靠性好,精度易于控制;收放卷电机优选的采用工作噪音较小的电机。
优选的,安装支架1包括与床头连接的连接座和与连接座连接的横向安装框;视觉识别单元、Z轴组件以及XY轴组件均安装在横向安装框上;弧形轨道设置在横向安装框上,且位于Z轴组件的上方;结构合理且紧凑,拆装维护方便。
优选的,柔性连接杆5内部设置有供鼻气流检测传感器走线的走线孔;柔性连接杆下端设置有连接鼻气流检测传感器4的连接头50;便于进行安装连接以及更换鼻气流检测传感器。
一种基于视觉识别的呼吸障碍检测方法,应用于如上述的基于视觉识别的呼吸障碍检测装置,如图3所示,其包括以下步骤:
S01:设置多个检测时间节点,当时间节点到来时,视觉识别单元间隔一设定时长拍摄画面数据来获取多个画面数据,控制主机对比多个画面数据是否存在差异,若无差异则将其与人体头部形态数据库比对,获取对应的睡姿状态数据;
S02:控制主机依据该睡姿状态数据确定检测位置,控制主机调节旋转电机旋转来切换鼻气流检测传感器的水平检测角度,控制XY轴组件运行将鼻气流检测传感器送至检测位置正上方,最后控制主机控制Z轴组件运行将鼻气流检测传感器送至检测位置;
S03:到达位置后视觉识别单元再次拍照进行位置的确定,若有误则依据画面存在的差距进行位置调整后再次确定,重复该调整动作直至位置正确后进行鼻气流检测传感器的数据的获取,若无误则直接进行鼻气流检测传感器的数据的获取,控制主机接收鼻气流检测传感器数据并依据气流大小以及均匀性判断呼吸是否存在障碍;
通过该种方式,应用现有的视觉识别技术,能够实现不与人体接触但又可以较为精确的检测,保障检测数据的可靠性,整体成本低,且控制难度远小于体征算法的开发难度;相比于现有的技术方式而言,本申请的结构形式更加稳定,且开发成本更低,同时对于人体头部状态稳定性的检测,能够兼顾考虑人体头部翻转、横移情况,同时柔性连接杆的设置能够较好的避免人体头部意外移动硬性接触到鼻气流检测传感器带来伤害的情况。
应当理解的是,对本领域普通技术人员来说,可以根据上述说明加以改进或变换,而所有这些改进和变换都应属于本发明所附权利要求的保护范围。

Claims (8)

1.一种基于视觉识别的呼吸障碍检测装置,其特征在于,包括安装支架,所述安装支架上设置有对人体头部形态拍照识别的视觉识别单元、接收并处理所述视觉识别单元数据信号的控制主机、鼻气流检测传感器、连接所述鼻气流检测传感器的柔性连接杆、带动所述柔性连接杆水平转动的旋转电机、带动所述旋转电机升降的Z轴组件和带动所述Z轴组件沿X轴Y轴移动的XY轴组件;所述控制主机获取多个所述视觉识别单元间隔一设定时长拍摄画面数据后,对比多个画面数据是否存在差异,若无差异则将其与人体头部形态数据库比对,获取对应的睡姿状态数据,并依据该睡姿状态数据控制所述旋转电机、所述Z轴组件以及所述XY轴组件运行,将鼻气流检测传感器带动至人体鼻部检测气流。
2.根据权利要求1所述的基于视觉识别的呼吸障碍检测装置,其特征在于,所述视觉识别单元包括分别采集人体头部正上方、左侧和右侧的三个摄像头;所述安装支架上设置有以人体头部为圆心的弧形轨道,左右两侧的所述摄像头均滑动设置在所述弧形轨道上,所述安装支架还包括两组分别带动左右两侧的所述摄像头移动的驱动单元,所述驱动单元与所述控制主机电连接并受其控制。
3.根据权利要求2所述的基于视觉识别的呼吸障碍检测装置,其特征在于,所述驱动单元包括对所述摄像头提供牵引力的弹簧、拉动摄像头的拉绳以及对所述拉绳收放卷的收放卷电机,所述收放卷电机与所述控制主机电连接并受其控制。
4.根据权利要求3所述的基于视觉识别的呼吸障碍检测装置,其特征在于,所述安装支架包括与床头连接的连接座和与所述连接座连接的横向安装框;所述视觉识别单元、所述Z轴组件以及所述XY轴组件均安装在所述横向安装框上。
5.根据权利要求4所述的基于视觉识别的呼吸障碍检测装置,其特征在于,所述弧形轨道设置在所述横向安装框上,且位于所述Z轴组件的上方。
6.根据权利要求1-5任一所述的基于视觉识别的呼吸障碍检测装置,其特征在于,所述柔性连接杆内部设置有供所述鼻气流检测传感器走线的走线孔。
7.根据权利要求1-5任一所述的基于视觉识别的呼吸障碍检测装置,其特征在于,所述柔性连接杆下端设置有连接所述鼻气流检测传感器的连接头。
8.一种基于视觉识别的呼吸障碍检测方法,应用于如权利要求1-7任一所述的基于视觉识别的呼吸障碍检测装置,其特征在于,包括以下步骤:
设置多个检测时间节点,当时间节点到来时,视觉识别单元间隔一设定时长拍摄画面数据来获取多个画面数据,控制主机对比多个画面数据是否存在差异,若无差异则将其与人体头部形态数据库比对,获取对应的睡姿状态数据;
控制主机依据该睡姿状态数据确定检测位置,控制主机调节旋转电机旋转来切换鼻气流检测传感器的水平检测角度,控制XY轴组件运行将鼻气流检测传感器送至检测位置正上方,最后控制主机控制Z轴组件运行将鼻气流检测传感器送至检测位置;
到达位置后视觉识别单元再次拍照进行位置的确定,若有误则依据画面存在的差距进行位置调整后再次确定,重复该调整动作直至位置正确后进行鼻气流检测传感器的数据的获取,若无误则直接进行鼻气流检测传感器的数据的获取,控制主机接收鼻气流检测传感器数据并依据气流大小以及均匀性判断呼吸是否存在障碍。
CN202111465821.9A 2021-12-03 2021-12-03 一种基于视觉识别的呼吸障碍检测装置及方法 Active CN114159046B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111465821.9A CN114159046B (zh) 2021-12-03 2021-12-03 一种基于视觉识别的呼吸障碍检测装置及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111465821.9A CN114159046B (zh) 2021-12-03 2021-12-03 一种基于视觉识别的呼吸障碍检测装置及方法

Publications (2)

Publication Number Publication Date
CN114159046A true CN114159046A (zh) 2022-03-11
CN114159046B CN114159046B (zh) 2024-04-19

Family

ID=80482727

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111465821.9A Active CN114159046B (zh) 2021-12-03 2021-12-03 一种基于视觉识别的呼吸障碍检测装置及方法

Country Status (1)

Country Link
CN (1) CN114159046B (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101070389B1 (ko) * 2010-12-30 2011-10-06 김용중 환자 상태 모니터링 시스템
CN105725993A (zh) * 2016-04-13 2016-07-06 思澜科技(成都)有限公司 便携式睡眠监测设备及其监测方法
WO2020115773A1 (en) * 2018-12-07 2020-06-11 Secretary, Department Of Biotechnology An apparatus and a method for detecting and providing therapeutic treatment for sleep disordered breathing
CN112006830A (zh) * 2019-06-01 2020-12-01 曹可瀚 枕头和使用方法
CN214180398U (zh) * 2020-12-08 2021-09-14 重庆海坤医用仪器有限公司 基于鼻气流和胸腹运动的阻塞性睡眠呼吸筛查设备
KR20210135867A (ko) * 2020-05-06 2021-11-16 서울대학교산학협력단 비접촉식 호흡상태 모니터링 장치 및 방법

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101070389B1 (ko) * 2010-12-30 2011-10-06 김용중 환자 상태 모니터링 시스템
CN105725993A (zh) * 2016-04-13 2016-07-06 思澜科技(成都)有限公司 便携式睡眠监测设备及其监测方法
WO2020115773A1 (en) * 2018-12-07 2020-06-11 Secretary, Department Of Biotechnology An apparatus and a method for detecting and providing therapeutic treatment for sleep disordered breathing
CN112006830A (zh) * 2019-06-01 2020-12-01 曹可瀚 枕头和使用方法
KR20210135867A (ko) * 2020-05-06 2021-11-16 서울대학교산학협력단 비접촉식 호흡상태 모니터링 장치 및 방법
CN214180398U (zh) * 2020-12-08 2021-09-14 重庆海坤医用仪器有限公司 基于鼻气流和胸腹运动的阻塞性睡眠呼吸筛查设备

Also Published As

Publication number Publication date
CN114159046B (zh) 2024-04-19

Similar Documents

Publication Publication Date Title
US11612338B2 (en) Body motion monitor
CN101916496B (zh) 一种司机驾驶姿势检测的系统和方法
US20090292227A1 (en) Fall detection algorithm utilizing a three-axis accelerometer
EP2747651B1 (en) Device and method for monitoring movement and orientation of the device
CN107679468A (zh) 一种嵌入式计算机视觉检测疲劳驾驶方法及装置
CN109654401B (zh) 一种基于机器视觉的坐姿识别台灯系统及识别方法
CN109847168B (zh) 可穿戴式疲劳检测及干预系统
CN114159046A (zh) 一种基于视觉识别的呼吸障碍检测装置及方法
CN212256416U (zh) 一种具有测温功能的人脸识别门禁通道
CN112006830A (zh) 枕头和使用方法
CN102646189B (zh) 一种司机驾驶姿势检测的系统和方法
WO2019109318A1 (zh) 头戴式显示设备及其调节控制方法
CN111642939A (zh) 一种智能镜
CN206312336U (zh) 一种疲劳驾驶检测预警仪
CN107404626B (zh) 一种基于机器人的视频直播系统
CN212569899U (zh) 一种人脸识别闸机
CN116112769A (zh) 一种车外摄像头拍摄控制方法及系统
CN214618613U (zh) 一种智能人脸识别系统
CN109850021A (zh) 一种机器人爬坡的驱动力控制装置
CN114537411A (zh) 一种基于ai监测的智能座舱系统及其监测方法
CN111311805A (zh) 一种人脸识别精度高的安防门
CN113799702A (zh) 基于人脸识别的车辆安全报警系统
CN111982295A (zh) 一种多功能室内定位成像仪及其使用方法
CN114159047B (zh) 一种动态识别呼吸状态检测机构及方法
CN219042895U (zh) 具有振动治疗功能的悬吊康复训练设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant