CN113588176B - 用于挥发性气体监测的红外成像系统 - Google Patents
用于挥发性气体监测的红外成像系统 Download PDFInfo
- Publication number
- CN113588176B CN113588176B CN202110772238.6A CN202110772238A CN113588176B CN 113588176 B CN113588176 B CN 113588176B CN 202110772238 A CN202110772238 A CN 202110772238A CN 113588176 B CN113588176 B CN 113588176B
- Authority
- CN
- China
- Prior art keywords
- infrared
- ultrasonic
- acquisition
- module
- leakage
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003331 infrared imaging Methods 0.000 title claims abstract description 33
- 238000012544 monitoring process Methods 0.000 title claims abstract description 25
- 239000007789 gas Substances 0.000 claims description 36
- 238000012545 processing Methods 0.000 claims description 32
- 238000001514 detection method Methods 0.000 claims description 30
- 238000004458 analytical method Methods 0.000 claims description 24
- 238000004364 calculation method Methods 0.000 claims description 18
- 238000004891 communication Methods 0.000 claims description 13
- 230000000737 periodic effect Effects 0.000 claims description 9
- 230000003321 amplification Effects 0.000 claims description 7
- 238000003199 nucleic acid amplification method Methods 0.000 claims description 7
- 230000003993 interaction Effects 0.000 claims description 3
- 238000000034 method Methods 0.000 claims 1
- 238000004519 manufacturing process Methods 0.000 description 4
- 238000012634 optical imaging Methods 0.000 description 4
- 238000001914 filtration Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 206010000369 Accident Diseases 0.000 description 2
- 238000004880 explosion Methods 0.000 description 2
- 239000002360 explosive Substances 0.000 description 2
- 238000005504 petroleum refining Methods 0.000 description 2
- 238000002485 combustion reaction Methods 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 239000002994 raw material Substances 0.000 description 1
- 238000007789 sealing Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01M—TESTING STATIC OR DYNAMIC BALANCE OF MACHINES OR STRUCTURES; TESTING OF STRUCTURES OR APPARATUS, NOT OTHERWISE PROVIDED FOR
- G01M3/00—Investigating fluid-tightness of structures
- G01M3/02—Investigating fluid-tightness of structures by using fluid or vacuum
- G01M3/04—Investigating fluid-tightness of structures by using fluid or vacuum by detecting the presence of fluid at the leakage point
- G01M3/24—Investigating fluid-tightness of structures by using fluid or vacuum by detecting the presence of fluid at the leakage point using infrasonic, sonic, or ultrasonic vibrations
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/85—Investigating moving fluids or granular solids
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/85—Investigating moving fluids or granular solids
- G01N2021/8578—Gaseous flow
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- Biochemistry (AREA)
- General Health & Medical Sciences (AREA)
- Immunology (AREA)
- Pathology (AREA)
- Examining Or Testing Airtightness (AREA)
- Studio Devices (AREA)
Abstract
本发明公开了一种用于挥发性气体监测的红外成像系统，用于监测挥发性气体，包括红外成像采集模块，所述红外成像采集模块用于对被检测设备周期性的进行包括预采集和正式采集的红外采集，以分别形成第一红外信息和第二红外信息。本发明公开的一种用于挥发性气体监测的红外成像系统，其首先通过超声波采集模块判断气体的泄露位置，再通过红外成像采集模块判断泄露气体的成份以及浓度，从而进行具体的安全措施处理，不仅可以精确监测到气体的泄露位置，还可以监测出具体的类型和浓度，其具有监测精度高、安全性高和使用方便等优点。
Description
技术领域
本发明属于挥发性气体监测技术领域，具体涉及一种用于挥发性气体监测的红外成像系统。
背景技术
石油炼化属于高危行业，石油化工企业的原料或产品多为挥发性易燃易爆物品，再加上其生产工艺较为复杂、生产设备众多，很容易发生易燃易爆气体的泄漏进而造成火灾事故，且石化企业的火灾事故往往伴随着爆炸，有立体性强、易复燃复爆等特点，后果比较严重。因此，石化企业一直是各国家安全生产防范的重点对象，对于安全等级的要求甚高，需要对其生产环境进行实时监控以确保安全。目前，石油炼化企业一般会在危险区域安装可燃气体报警仪，该装备采用网格化点阵布置方式，可以对区域内发生的大规模气体泄漏产生报警。但使，该装置也有一定弊端，就是无法精确定位区域内成百上千个的密封点中哪一个是泄漏源。
并且也无法清楚的了解泄露气体的成份及其浓度，无法掌握好具体的安全措施，往往会造成不同程度的影响。
因此，针对上述问题，予以进一步改进。
发明内容
本发明的主要目的在于提供用于挥发性气体监测的红外成像系统，其首先通过超声波采集模块判断气体的泄露位置，再通过红外成像采集模块判断泄露气体的成份以及浓度，从而进行具体的安全措施处理，不仅可以精确监测到气体的泄露位置，还可以监测出具体的类型和浓度，其具有监测精度高、安全性高和使用方便等优点。
为达到以上目的，本发明提供一种用于挥发性气体监测的红外成像系统，用于监测挥发性气体，包括：
红外成像采集模块，所述红外成像采集模块用于对被检测设备周期性的进行包括预采集和正式采集的红外采集，以分别形成第一红外信息和第二红外信息；
超声波采集模块，所述超声波采集模块用于对被检测设备周期性的进行超声波检测，以形成超声波信息；
处理分析模块，所述处理分析模块接收所述超声波采集模块发送的超声波信息以进行第一处理，并且接收红外采集模块发送的第一红外信息和第二红外信息以进行第二处理；
通信模块，所述红外成像采集模块和所述超声波采集模块分别通过通信模块与所述处理分析模块进行信息交互。
作为上述技术方案的进一步优选的技术方案，所述超声波采集模块包括超声波传感器、超声波放大滤波器和超声波处理器，其中：
所述处理分析模块通过所述通信模块对所述超声波采集模块发送第一检测指令，所述超声波处理器接收到第一检测指令后触发所述超声波传感器进行周期性检测，判断当前初步超声波信号是否为被检测设备发生的气体泄漏超声波；
如果初步超声波信号为检测设备发生的气体泄漏超声波，则将初步超声波信号判断为超声波信号，并且将超声波信号通过通信模块传输到处理分析模块，所述处理分析模块进行第一处理(包括建立坐标系计、补偿和减小误差等计算)后获得气体的泄露位置；
如果初步超声波信号不是检测设备发生的气体泄漏超声波，则触发所述超声波传感器继续进行周期性检测。
作为上述技术方案的进一步优选的技术方案，所述超声波处理器在对初步超声波信号进行分析判断前，所述超声波放大滤波器除了对初步超声波进行放大滤波外还进行第一次均衡解算和第二次均衡解算，其中：
第一次均衡解算是对超声波传感器进行均衡解算，针对超声波传感器的特性进行均衡，补偿超声波传感器带来的误差；
第二次均衡解算是超声波声音特性进行均衡解算，不同大小的泄漏点和不同气压的气流有不同的信号强度，补偿泄漏点大小和泄露气流带来的误差。
作为上述技术方案的进一步优选的技术方案，所述红外成像采集模块包括红外采集传感器(包括镜头、光栅和光学成像器件等)、红外放大滤波器和红外处理器，其中：
所述处理分析模块获得气体的泄露位置后，通过通信模块对所述红外成像采集模块发送第二检测指令，所述红外处理器接收到第二检测指令后触发所述红外采集传感器移动到泄露位置进行周期性检测。
作为上述技术方案的进一步优选的技术方案，所述红外采集传感器对所述泄露位置进行预采集，所述红外采集传感器泄露位置进行采集多张红外图像并且经过红外放大滤波器放大滤波处理后通过偶数术红外处理器选择达到图像稳定和清晰度最低阈值的第一张红外图像作为背景图像，以形成第一红外信息(刚刚移动到泄露位置的红外成像采集模块会造成镜头抖动，从而使得拍摄的照片不够稳定清晰，影响监测结果)；
所述红外采集传感器对所述泄露位置进行正式采集，所述红外采集传感器将背景图像时序上相邻的后若干帧图像作为待检图像，以形成第二红外信息，所述处理分析模块接收第二红外信息后计算泄漏气体的成份和浓度(通过显示器进行显示)。
作为上述技术方案的进一步优选的技术方案，所述红外成像采集模块包括定位模块(例如GPS导航等)和运动模块(包括飞行装置和陆地装置，飞行装置可为无人机，陆地装置为无人小车，以实现在恶劣环境中进行监测，并且实现远距离监测)，所述定位模块用于将的接收处理分析模块获得的泄露位置进行定位，从而通过运动模式移动到泄露位置进行采集。
具体实施方式
以下描述用于揭露本发明以使本领域技术人员能够实现本发明。以下描述中的优选实施例只作为举例，本领域技术人员可以想到其他显而易见的变型。在以下描述中界定的本发明的基本原理可以应用于其他实施方案、变形方案、改进方案、等同方案以及没有背离本发明的精神和范围的其他技术方案。
在本发明的优选实施例中，本领域技术人员应注意，本发明所涉及的镜头、光学成像器件和光栅等可被视为现有技术。
优选实施例。
本发明公开了一种用于挥发性气体监测的红外成像系统，用于监测挥发性气体，包括：
红外成像采集模块，所述红外成像采集模块用于对被检测设备周期性的进行包括预采集和正式采集的红外采集，以分别形成第一红外信息和第二红外信息；
超声波采集模块，所述超声波采集模块用于对被检测设备周期性的进行超声波检测，以形成超声波信息；
处理分析模块，所述处理分析模块接收所述超声波采集模块发送的超声波信息以进行第一处理，并且接收红外采集模块发送的第一红外信息和第二红外信息以进行第二处理；
通信模块，所述红外成像采集模块和所述超声波采集模块分别通过通信模块与所述处理分析模块进行信息交互。
具体的是，所述超声波采集模块包括超声波传感器、超声波放大滤波器和超声波处理器，其中：
所述处理分析模块通过所述通信模块对所述超声波采集模块发送第一检测指令，所述超声波处理器接收到第一检测指令后触发所述超声波传感器进行周期性检测，判断当前初步超声波信号是否为被检测设备发生的气体泄漏超声波；
如果初步超声波信号为检测设备发生的气体泄漏超声波，则将初步超声波信号判断为超声波信号，并且将超声波信号通过通信模块传输到处理分析模块，所述处理分析模块进行第一处理(包括建立坐标系计、补偿和减小误差等计算)后获得气体的泄露位置；
如果初步超声波信号不是检测设备发生的气体泄漏超声波，则触发所述超声波传感器继续进行周期性检测。
更具体的是，所述超声波处理器在对初步超声波信号进行分析判断前，所述超声波放大滤波器除了对初步超声波进行放大滤波外还进行第一次均衡解算和第二次均衡解算，其中：
第一次均衡解算是对超声波传感器进行均衡解算，针对超声波传感器的特性进行均衡，补偿超声波传感器带来的误差；
第二次均衡解算是超声波声音特性进行均衡解算，不同大小的泄漏点和不同气压的气流有不同的信号强度，补偿泄漏点大小和泄露气流带来的误差。
进一步的是，所述红外成像采集模块包括红外采集传感器(包括镜头、光栅和光学成像器件等)、红外放大滤波器和红外处理器，其中：
所述处理分析模块获得气体的泄露位置后，通过通信模块对所述红外成像采集模块发送第二检测指令，所述红外处理器接收到第二检测指令后触发所述红外采集传感器移动到泄露位置进行周期性检测。
5.根据权利要求4所述的一种用于挥发性气体监测的红外成像系统，其特征在于，所述红外采集传感器对所述泄露位置进行预采集，所述红外采集传感器泄露位置进行采集多张红外图像并且经过红外放大滤波器放大滤波处理后通过偶数术红外处理器选择达到图像稳定和清晰度最低阈值的第一张红外图像作为背景图像，以形成第一红外信息(刚刚移动到泄露位置的红外成像采集模块会造成镜头抖动，从而使得拍摄的照片不够稳定清晰，影响监测结果)；
所述红外采集传感器对所述泄露位置进行正式采集，所述红外采集传感器将背景图像时序上相邻的后若干帧图像作为待检图像，以形成第二红外信息，所述处理分析模块接收第二红外信息后计算泄漏气体的成份和浓度(通过显示器进行显示)。
更进一步的是，所述红外成像采集模块包括定位模块(例如GPS导航等)和运动模块(包括飞行装置和陆地装置，飞行装置可为无人机，陆地装置为无人小车，以实现在恶劣环境中进行监测，并且实现远距离监测)，所述定位模块用于将的接收处理分析模块获得的泄露位置进行定位，从而通过运动模式移动到泄露位置进行采集。
值得一提的是，本发明专利申请涉及的镜头、光学成像器件和光栅等技术特征应被视为现有技术，这些技术特征的具体结构、工作原理以及可能涉及到的控制方式、空间布置方式采用本领域的常规选择即可，不应被视为本发明专利的发明点所在，本发明专利不做进一步具体展开详述。
对于本领域的技术人员而言，依然可以对前述各实施例所记载的技术方案进行修改，或对其中部分技术特征进行等同替换，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围。
Claims (2)
1.一种用于挥发性气体监测的红外成像系统，用于监测挥发性气体，其特征在于，包括：
红外成像采集模块，所述红外成像采集模块用于对被检测设备周期性的进行包括预采集和正式采集的红外采集，以分别形成第一红外信息和第二红外信息；
超声波采集模块，所述超声波采集模块用于对被检测设备周期性的进行超声波检测，以形成超声波信息；
处理分析模块，所述处理分析模块接收所述超声波采集模块发送的超声波信息以进行第一处理，并且接收红外采集模块发送的第一红外信息和第二红外信息以进行第二处理；
通信模块，所述红外成像采集模块和所述超声波采集模块分别通过通信模块与所述处理分析模块进行信息交互；
所述超声波采集模块包括超声波传感器、超声波放大滤波器和超声波处理器，其中：
所述处理分析模块通过所述通信模块对所述超声波采集模块发送第一检测指令，所述超声波处理器接收到第一检测指令后触发所述超声波传感器进行周期性检测，判断当前初步超声波信号是否为被检测设备发生的气体泄漏超声波；
如果初步超声波信号为检测设备发生的气体泄漏超声波，则将初步超声波信号判断为超声波信号，并且将超声波信号通过通信模块传输到处理分析模块，所述处理分析模块进行第一处理后获得气体的泄露位置；
如果初步超声波信号不是检测设备发生的气体泄漏超声波，则触发所述超声波传感器继续进行周期性检测；
所述超声波处理器在对初步超声波信号进行分析判断前，所述超声波放大滤波器除了对初步超声波进行放大滤波外还进行第一次均衡解算和第二次均衡解算，其中：
第一次均衡解算是对超声波传感器进行均衡解算，针对超声波传感器的特性进行均衡，补偿超声波传感器带来的误差；
第二次均衡解算是超声波声音特性进行均衡解算，不同大小的泄漏点和不同气压的气流有不同的信号强度，补偿泄漏点大小和泄露气流带来的误差；
所述红外采集传感器对所述泄露位置进行预采集，所述红外采集传感器泄露位置进行采集多张红外图像并且经过红外放大滤波器放大滤波处理后通过偶数术红外处理器选择达到图像稳定和清晰度最低阈值的第一张红外图像作为背景图像，以形成第一红外信息；
所述红外采集传感器对所述泄露位置进行正式采集，所述红外采集传感器将背景图像时序上相邻的后若干帧图像作为待检图像，以形成第二红外信息，所述处理分析模块接收第二红外信息后计算泄漏气体的成分和浓度；
所述红外成像采集模块包括红外采集传感器、红外放大滤波器和红外处理器，其中：
所述处理分析模块获得气体的泄露位置后，通过通信模块对所述红外成像采集模块发送第二检测指令，所述红外处理器接收到第二检测指令后触发所述红外采集传感器移动到泄露位置进行周期性检测。
2.根据权利要求1所述的一种用于挥发性气体监测的红外成像系统，其特征在于，所述红外成像采集模块包括定位模块和运动模块，所述定位模块用于将的接收处理分析模块获得的泄露位置进行定位，从而通过运动模式移动到泄露位置进行采集。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110772238.6A CN113588176B (zh) | 2021-07-08 | 2021-07-08 | 用于挥发性气体监测的红外成像系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110772238.6A CN113588176B (zh) | 2021-07-08 | 2021-07-08 | 用于挥发性气体监测的红外成像系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113588176A CN113588176A (zh) | 2021-11-02 |
| CN113588176B true CN113588176B (zh) | 2024-03-08 |
Family
ID=78246502
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110772238.6A Active CN113588176B (zh) | 2021-07-08 | 2021-07-08 | 用于挥发性气体监测的红外成像系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113588176B (zh) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114486128B (zh) * | 2022-02-18 | 2024-05-03 | 汉威科技集团股份有限公司 | 融合超声波和被动式红外成像的气体泄漏检测装置及方法 |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP0536586A1 (en) * | 1991-10-08 | 1993-04-14 | Osaka Gas Co., Ltd. | Gas visualizing apparatus and gas visualizing method |
| CN1773236A (zh) * | 2004-11-13 | 2006-05-17 | 浙江工业大学 | 煤气泄漏自动检测方法 |
| CN104568323A (zh) * | 2014-06-25 | 2015-04-29 | 贵州电力试验研究院 | 一种sf6气体泄漏在线监测报警系统 |
| WO2016174370A1 (fr) * | 2015-04-30 | 2016-11-03 | Ircamex | Procédé de localisation d'une fuite d'un gaz et de son point de fuite dans une scène industrielle et system de localisation d'une fuite d'un gaz correspondant |
| CN106958744A (zh) * | 2017-04-27 | 2017-07-18 | 西安工程大学 | 喷气织机压缩空气泄漏的检测和定量分析方法及检测装置 |
| CN107705288A (zh) * | 2017-09-04 | 2018-02-16 | 武汉工程大学 | 伪目标运动强干扰下的危险气体泄漏红外视频检测方法 |
| CN108799840A (zh) * | 2018-05-04 | 2018-11-13 | 中国人民解放军92942部队 | 基于红外成像和超声信号的蒸汽管路在线监测系统 |
| CN111141460A (zh) * | 2019-12-25 | 2020-05-12 | 西安交通大学 | 一种基于人工智能感官的装备气体泄漏监测系统及方法 |
-
2021
- 2021-07-08 CN CN202110772238.6A patent/CN113588176B/zh active Active
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP0536586A1 (en) * | 1991-10-08 | 1993-04-14 | Osaka Gas Co., Ltd. | Gas visualizing apparatus and gas visualizing method |
| CN1773236A (zh) * | 2004-11-13 | 2006-05-17 | 浙江工业大学 | 煤气泄漏自动检测方法 |
| CN104568323A (zh) * | 2014-06-25 | 2015-04-29 | 贵州电力试验研究院 | 一种sf6气体泄漏在线监测报警系统 |
| WO2016174370A1 (fr) * | 2015-04-30 | 2016-11-03 | Ircamex | Procédé de localisation d'une fuite d'un gaz et de son point de fuite dans une scène industrielle et system de localisation d'une fuite d'un gaz correspondant |
| CN106958744A (zh) * | 2017-04-27 | 2017-07-18 | 西安工程大学 | 喷气织机压缩空气泄漏的检测和定量分析方法及检测装置 |
| CN107705288A (zh) * | 2017-09-04 | 2018-02-16 | 武汉工程大学 | 伪目标运动强干扰下的危险气体泄漏红外视频检测方法 |
| CN108799840A (zh) * | 2018-05-04 | 2018-11-13 | 中国人民解放军92942部队 | 基于红外成像和超声信号的蒸汽管路在线监测系统 |
| CN111141460A (zh) * | 2019-12-25 | 2020-05-12 | 西安交通大学 | 一种基于人工智能感官的装备气体泄漏监测系统及方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN113588176A (zh) | 2021-11-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN103413395B (zh) | 烟气智能检测预警方法及装置 | |
| CN113588176B (zh) | 用于挥发性气体监测的红外成像系统 | |
| AU2015258535B2 (en) | Electromagnetic radiation detection apparatus for hidden fire danger in mine, and method therefor | |
| CN111830491B (zh) | 一种导航系统中反光体的监测方法、装置及电子设备 | |
| CN103984310A (zh) | 基于多源遥感数据的化工园区环境污染检测方法和装置 | |
| CN111070180A (zh) | 基于ros的灾后救援通道检测机器人 | |
| CN101482623A (zh) | 矿山震动中震源的定位方法 | |
| CN205883456U (zh) | 一种基于输油管道防盗防泄漏的双光谱红外夜视监控系统 | |
| CN106774422A (zh) | 一种无人机识别方法及系统 | |
| CN109581283A (zh) | 一种预警机与无人机协同目标定位方法 | |
| CN202929792U (zh) | 一种森林防火三波段检测系统 | |
| JP2018096827A (ja) | 波浪監視システム | |
| CN113819881A (zh) | 一种侦察巡检机器人用火源距离和地图方位的探测方法 | |
| CN108828050A (zh) | 一种毒气智能监测系统及监测方法 | |
| CN116403359B (zh) | 一种多模态图像识别算法的生产安全预警系统 | |
| CN112145976A (zh) | 基于红外气云成像的探测系统、方法及应用该系统的机器人 | |
| CN109557571B (zh) | 一种燃烧源智能追踪方法 | |
| RU2586076C1 (ru) | Способ обнаружения несанкционированного воздействия на точностные характеристики космических навигационных систем | |
| CN109115731B (zh) | 基于摄像头灰度测量黑烟车不透光度的方法 | |
| CN106382857A (zh) | 一种无人机拦截方法及系统 | |
| CN204963807U (zh) | 隧道变形监测中的激光基准监测装置 | |
| KR20230037075A (ko) | 자율 주행 순찰 차량의 비상정보 감지 및 경보장치 | |
| CN104217520A (zh) | 一种油田防火预警系统及其判定火灾级别的方法 | |
| CN210650700U (zh) | 一种适用于化工防爆巡检机器人 | |
| MXPA05001278A (es) | Metodo y dispositivo para la inspeccion de infraestructuras lineales. |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |