CN114917519B - 一种建筑楼宇智能消防控制系统 - Google Patents
一种建筑楼宇智能消防控制系统 Download PDFInfo
- Publication number
- CN114917519B CN114917519B CN202210429686.0A CN202210429686A CN114917519B CN 114917519 B CN114917519 B CN 114917519B CN 202210429686 A CN202210429686 A CN 202210429686A CN 114917519 B CN114917519 B CN 114917519B
- Authority
- CN
- China
- Prior art keywords
- dangerous case
- determining
- area
- frame
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A62—LIFE-SAVING; FIRE-FIGHTING
- A62C—FIRE-FIGHTING
- A62C37/00—Control of fire-fighting equipment
- A62C37/04—Control of fire-fighting equipment with electrically-controlled release
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B7/00—Signalling systems according to more than one of groups G08B3/00 - G08B6/00; Personal calling systems according to more than one of groups G08B3/00 - G08B6/00
- G08B7/06—Signalling systems according to more than one of groups G08B3/00 - G08B6/00; Personal calling systems according to more than one of groups G08B3/00 - G08B6/00 using electric transmission, e.g. involving audible and visible signalling through the use of sound and light sources
- G08B7/066—Signalling systems according to more than one of groups G08B3/00 - G08B6/00; Personal calling systems according to more than one of groups G08B3/00 - G08B6/00 using electric transmission, e.g. involving audible and visible signalling through the use of sound and light sources guiding along a path, e.g. evacuation path lighting strip
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02B—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO BUILDINGS, e.g. HOUSING, HOUSE APPLIANCES OR RELATED END-USER APPLICATIONS
- Y02B20/00—Energy efficient lighting technologies, e.g. halogen lamps or gas discharge lamps
- Y02B20/40—Control techniques providing energy savings, e.g. smart controller or presence detection
Landscapes
- Health & Medical Sciences (AREA)
- Public Health (AREA)
- Business, Economics & Management (AREA)
- Emergency Management (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Alarm Systems (AREA)
Abstract
本发明提供了一种建筑楼宇智能消防控制系统,包括:监控端,用于实时监测所述建筑楼宇内的险情,获取对应的险情监测信息;获取端,用于基于所述险情监测信息获取所述建筑楼宇内的人员分布信息;生成端,用于基于所述人员分布信息和所述险情监测信息生成对应的逃生路线和救援路线;控制端,用于基于所述逃生路线控制对应的指示灯,同时,将所述救援路线传输至救援人员通信端;用以基于险情现场的情况和人员分布情况智能地生成对应的逃生路线和救援路线,并基于逃生路线和救援路线引导对应的逃生人员和救援人员,进而提高了消防救援和逃生效率,减少人员伤亡。
Description
技术领域
本发明涉及智能消防技术领域,特别涉及一种建筑楼宇智能消防控制系统。
背景技术
目前,随着城市的发展、经济和消费水平的提高,高层建筑一座座拔地而起,大型商场、商业中心与综合性楼宇综合运营的建筑比比皆是,综合性楼宇分别由多个单位管理使用,多交由物业对共用的疏散通道、安全出口、建筑消防设施和消防车通道进行统一管理。综合性楼宇办公、餐饮、商超等营业性场所聚集,人流动量大且成分复杂,易燃物品较多,用电用火频繁,火灾隐患大。因此,保持疏散通道及指示系统、防排烟、防火分隔等消防设施健康,是大型商超、商业中心的消防安全管理重点。
但,现在的建筑楼宇智能消防控制系统在方发生险情时,只能进行统一报警,有时,在险情严重时,现场人员会因紧急情况以及险情损毁导致无法明确正确有效的逃生路线,且无法针对现场的人员分布情况为救援人员提供高效的救援路线,进而导致消防救援效率低,人员伤亡数量多。
因此,本发明提出一种建筑楼宇智能消防控制系统。
发明内容
本发明提供一种建筑楼宇智能消防控制系统,用以基于险情现场的情况和人员分布情况智能地生成对应的逃生路线和救援路线,并基于逃生路线和救援路线引导对应的逃生人员和救援人员,进而提高了消防救援和逃生效率,减少人员伤亡。
本发明提供一种建筑楼宇智能消防控制系统,包括:
监控端,用于实时监测所述建筑楼宇内的险情,获取对应的险情监测信息;
获取端,用于基于所述险情监测信息获取所述建筑楼宇内的人员分布信息;
生成端,用于基于所述人员分布信息和所述险情监测信息生成对应的逃生路线和救援路线;
控制端,用于基于所述逃生路线控制对应的指示灯,同时,将所述救援路线传输至救援人员通信端。
优选的,所述监控端,包括:
第一监控模块,用于基于设置在所述建筑楼宇内的烟雾传感器实时获取所述建筑楼宇内的烟雾浓度分布数据;
第二监控模块,用于基于设置在所述建筑楼宇内的温度传感器实时获取所述建筑楼宇内的温度分布数据;
险情分析模块,用于基于所述烟雾浓度分布数据和所述温度分布数据,实时分析所述建筑楼宇内是否存在险情,若存在,则确定出对应的险情发生位置作为对应的险情监测信息,否则,将所述建筑楼宇内不存在险情作为对应的险情监测信息。
优选的,所述获取端,包括:
视频获取模块,用于当所述险情监测信息为所述建筑楼宇内存在险情时,则获取所述建筑楼宇内的所有监控视频;
视频标记模块,用于在所述监控视频中标记出所有人员的人员区域视频,获得对应的标记视频;
视频分析模块,用于基于所述标记视频确定出所述建筑楼宇内的人员分布信息。
优选的,所述视频标记模块,包括:
分帧处理单元,用于对所述监控视频进行分帧处理,获得对应的监控视频帧,基于所述监控视频帧构建出对应的帧序列;
动态识别单元,用于对比所述帧序列中相邻监控视频帧,确定出所述相邻视频帧中的差异区域,基于所述差异区域确定出所述帧序列中的动态区域序列;
区域跟踪单元,用于对所述动态区域序列进行轨迹跟踪获得对应的位移轨迹;
静态筛选单元,用于在所述帧序列中筛选出所述动态区域序列所属的第一子帧序列,并确定出所述第一子帧序列中除所述动态区域序列以外的静态区域序列;
区域叠加单元,用于对所述静态区域序列中包含的静态区域进行叠加处理,获得对应的叠加图像;
轨迹标记单元,用于将所述位移轨迹标记于所述叠加图像中,获得对应的标记结果;
特征分析单元,用于基于所述标记结果确定出所述位移轨迹在所述叠加图像中对应的像素变化特征;
区域修复单元,用于基于所述像素变化特征对所述动态区域序列进行逆向修复,获得对应的动态修复区域序列;
空帧构建单元,用于将所述修复区域序列中包含的相邻修复区域作为对应的待插帧对,基于所述待插帧对构建出对应的空帧;
范围确定单元,用于将所述待插帧对中包含的待插帧划分为多个子区域,基于所述位移轨迹确定出所述待插帧对中前一待插帧中包含的每个第一子区域对应的匹配范围;
区域匹配单元,用于基于所述匹配范围在所述待插帧对中后一待插帧中筛选出所述第一子区域对应的第二子区域,获得对应的匹配区域对;
向量确定单元,用于基于所述匹配区域对确定出对应的位移向量;
区域确定单元,用于基于所述位移向量的中点在所述空帧中的位置,确定出所述匹配区域对在所述空帧中对应的待插区域;
像素补偿单元,用于基于所述匹配区域对对所述待插区域进行像素补偿,获得对应的补偿区域;
插帧处理单元,用于基于所有补偿区域构建出对应的补偿帧,并将所述补偿帧插入至所述待插帧对,获得对应的动态修复补偿区域序列;
人员筛选单元,用于基于预设人员图像特征在所述动态修复补偿区域序列中筛选出人员区域视频,并所述人员区域视频中包含的人员区域标记于所述监控视频中的对应视频帧,获得对应的标记视频。
优选的,所述视频分析模块,包括:
视频调取单元,用于调取所述建筑楼宇对应的三维地图全景视频;
视频帧匹配单元,用于将所述标记视频中最新确定的人员区域在所述标记视频中所属的标记视频帧与所述三维地图全景视频中包含的全景视频帧进行匹配,确定出所述人员区域对应的三维坐标信息;
坐标标记单元,用于将所述三维坐标信息标记与所述建筑楼宇对应的三维模型中,获得对应的人员分布信息。
优选的,所述生成端,包括:
险情位置确定模块,用于基于所述险情监测信息确定出对应的险情发生位置;
人员位置确定模块,用于基于所述人员分布信息确定出每个人员对应的实时位置;
逃生路线生成模块,用于基于所述实时位置和所述险情发生位置生成对应人员对应的逃生路线;
危险等级确定模块,用于基于逃生路线和所述实时位置生成对应人员的危险系数;
救援路线生成模块,用于基于所述危险系数和对应的实时位置生成对应的救援路线。
优选的,所述危险等级确定模块,包括:
点筛选单元,用于实时获取所述险情发生位置处的险情图像,在所述险情图像中确定出色度值在险情色度范围内且亮度值在险情亮度范围内的险情像素点;
第一确定单元,用于基于所述险情像素点构成对应的第一险情区域,基于所述第一险情区域在所述险情图像中的第一区域占比确定出对应的第一危险度;
第二确定单元,用于确定出所述实时位置和所述险情发生位置之间的第一距离,基于所述第一距离确定出对应人员的第二危险度;
帧提取单元,用于获取所述险情发生位置处的险情视频,基于预设时间间隔在所述险情视频中提取出对应的险情分析帧;
方向确定单元,用于确定出所述险情分析帧中包含的第二险情区域,获得对应的第二险情区域序列,基于所述第二险情序列分析出对应的险情蔓延方向;
序列生成单元,用于确定出所述第二险情区域在对应险情分析帧中的第二区域占比,基于所述第二险情区域序列获得对应的第二区域占比序列;
速率确定单元,用于基于所述第二区域占比序列确定出对应的险情蔓延速率;
轨迹预测单元,用于基于所述险情蔓延速率和所述险情蔓延方向预测出对应的险情预测蔓延轨迹;
距离预测单元,用于基于所述标记视频分析出对应人员的逃生速度,基于所述逃生速度和所述逃生路线以及所述险情预测蔓延轨迹预测出对应人员的实时险情距离;
第三确定单元,用于基于所述实时险情距离计算出对应人员的第三危险度;
第四确定单元,用于基于所述逃生路线的长度确定出对应人员的第四危险度;
第五确定单元,用于将所述第一危险度、所述第二危险度和所述第三危险度以及所述第四危险度的平均值作为对应人员的危险系数。
优选的,所述救援路线生成模块,包括:
系数排序单元,用于将所述危险系数从大到小排序生成对应的危险系数序列;
路线生成单元,用于基于所述危险系数序列和每个人员对应的实时位置生成对应的救援路线。
优选的,所述控制端,包括:
方案生成模块,用于基于所述逃生路线生成对应的指示灯控制方案;
指示灯控制模块,用于基于所述指示灯控制方案控制对应指示灯闪烁发光;
路线传输模块,用于将所述救援路线传输至对应救援人员通信端。
优选的,所述方案生成模块,包括:
颜色确定单元,用于基于所述危险系数序列确定出对应的指示灯闪烁颜色;
方案生成单元,用于基于所述指示灯闪烁颜色和所述逃生路线中包含的指示灯生成对应的指示灯控制方案。
本发明的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例,对本发明的技术方案做进一步的详细描述。
附图说明
附图用来提供对本发明的进一步理解,并且构成说明书的一部分,与本发明的实施例一起用于解释本发明,并不构成对本发明的限制。在附图中:
图1为本发明实施例中一种建筑楼宇智能消防控制系统示意图;
图2为本发明实施例中一种监控端示意图;
图3为本发明实施例中一种获取端示意图;
图4为本发明实施例中一种视频标记模块示意图;
图5为本发明实施例中一种视频分析模块示意图;
图6为本发明实施例中一种生成端示意图;
图7为本发明实施例中一种危险等级确定模块示意图;
图8为本发明实施例中一种救援路线生成模块示意图;
图9为本发明实施例中一种控制端示意图;
图10为本发明实施例中一种方案生成模块示意图。
具体实施方式
以下结合附图对本发明的优选实施例进行说明,应当理解,此处所描述的优选实施例仅用于说明和解释本发明,并不用于限定本发明。
实施例1:
本发明提供了一种建筑楼宇智能消防控制系统,参考图1,包括:
监控端,用于实时监测所述建筑楼宇内的险情,获取对应的险情监测信息;
获取端,用于基于所述险情监测信息获取所述建筑楼宇内的人员分布信息;
生成端,用于基于所述人员分布信息和所述险情监测信息生成对应的逃生路线和救援路线;
控制端,用于基于所述逃生路线控制对应的指示灯,同时,将所述救援路线传输至救援人员通信端。
该实施例中,险情主要指火灾、爆炸等情况。
该实施例中,险情监测信息即为实时监测建筑楼宇内的险情获得的相关信息。
该实施例中,人员分布信息即为人员在建筑楼宇内的分布位置。
该实施例中,逃生路线即为基于人员分布信息和险情监测信息生成的对应人员逃生的路线。
该实施例中,救援路线即为基于人员分布信息和险情监测信息生成的救援人员的救援的路线。
该实施例中,救援人员通信端包括:手机端、电脑端等。
以上技术的有益效果为:基于建筑楼宇内的险情监测信息和人员分布情况智能地生成对应的逃生路线和救援路线,并基于逃生路线和救援路线引导对应的逃生人员和救援人员,进而提高了消防救援和逃生效率,且减少人员伤亡。
实施例2:
在实施例1的基础上,所述监控端,参考图2,包括:
第一监控模块,用于基于设置在所述建筑楼宇内的烟雾传感器实时获取所述建筑楼宇内的烟雾浓度分布数据;
第二监控模块,用于基于设置在所述建筑楼宇内的温度传感器实时获取所述建筑楼宇内的温度分布数据;
险情分析模块,用于基于所述烟雾浓度分布数据和所述温度分布数据,实时分析所述建筑楼宇内是否存在险情,若存在,则确定出对应的险情发生位置作为对应的险情监测信息,否则,将所述建筑楼宇内不存在险情作为对应的险情监测信息。
该实施例中,烟雾浓度分布数据即为基于烟雾传感器获取的建筑楼宇内各个位置处对应的烟雾浓度。
该实施例中,温度传感器即为基于温度传感器获取的建筑楼宇内各个位置出的温度值。
该实施例中,基于所述烟雾浓度分布数据和所述温度分布数据,实时分析所述建筑楼宇内是否存在险情,包括:
当烟雾浓度分布数据中在对应位置处的烟雾浓度大于烟雾浓度阈值(被判定为发生险情的最小烟雾浓度)时且温度分布数据中在对应位置处的温度值大于温度阈值(被判定为发生险情的最小温度值)时,则判定建筑楼宇内发生险情,否则,判定建筑楼宇内未发生险情。
该实施例中,险情发生位置即为险情发生的位置。
以上技术的有益效果为:基于烟雾传感器和温度传感器可以实现基于建筑楼宇内的烟雾分布数据和温度分布数据判断建筑楼宇内是否发生险情,并在发生险情时确定出对应的险情发生位置,进而获得对应的险情监测信息,为后续生成逃生路线和救援路线提供了重要基础。
实施例3:
在实施例2的基础上,所述获取端,参考图3,包括:
视频获取模块,用于当所述险情监测信息为所述建筑楼宇内存在险情时,则获取所述建筑楼宇内的所有监控视频;
视频标记模块,用于在所述监控视频中标记出所有人员的人员区域视频,获得对应的标记视频;
视频分析模块,用于基于所述标记视频确定出所述建筑楼宇内的人员分布信息。
该实施例中,监控视频即为基于设置在建筑楼宇内的摄像机获取的建筑楼宇内的视频。
该实施例中,人员区域视频即为人员在监控视频中对应的图像区域视频。
该实施例中,标记视频即为在监控视频中标记出人员的人员区域视频后获得的视频。
以上技术的有益效果为:当判定建筑楼宇内发生险情时,则在建筑楼宇内的监控视频中标记出人员的人员区域视频,进而获得建筑楼宇内的人员分布情况,为后续生成逃生路线和救援路线提供了重要基础。
实施例4:
在实施例3的基础上,所述视频标记模块,参考图4,包括:
分帧处理单元,用于对所述监控视频进行分帧处理,获得对应的监控视频帧,基于所述监控视频帧构建出对应的帧序列;
动态识别单元,用于对比所述帧序列中相邻监控视频帧,确定出所述相邻视频帧中的差异区域,基于所述差异区域确定出所述帧序列中的动态区域序列;
区域跟踪单元,用于对所述动态区域序列进行轨迹跟踪获得对应的位移轨迹;
静态筛选单元,用于在所述帧序列中筛选出所述动态区域序列所属的第一子帧序列,并确定出所述第一子帧序列中除所述动态区域序列以外的静态区域序列;
区域叠加单元,用于对所述静态区域序列中包含的静态区域进行叠加处理,获得对应的叠加图像;
轨迹标记单元,用于将所述位移轨迹标记于所述叠加图像中,获得对应的标记结果;
特征分析单元,用于基于所述标记结果确定出所述位移轨迹在所述叠加图像中对应的像素变化特征;
区域修复单元,用于基于所述像素变化特征对所述动态区域序列进行逆向修复,获得对应的动态修复区域序列;
空帧构建单元,用于将所述修复区域序列中包含的相邻修复区域作为对应的待插帧对,基于所述待插帧对构建出对应的空帧;
范围确定单元,用于将所述待插帧对中包含的待插帧划分为多个子区域,基于所述位移轨迹确定出所述待插帧对中前一待插帧中包含的每个第一子区域对应的匹配范围;
区域匹配单元,用于基于所述匹配范围在所述待插帧对中后一待插帧中筛选出所述第一子区域对应的第二子区域,获得对应的匹配区域对;
向量确定单元,用于基于所述匹配区域对确定出对应的位移向量;
区域确定单元,用于基于所述位移向量的中点在所述空帧中的位置,确定出所述匹配区域对在所述空帧中对应的待插区域;
像素补偿单元,用于基于所述匹配区域对对所述待插区域进行像素补偿,获得对应的补偿区域;
插帧处理单元,用于基于所有补偿区域构建出对应的补偿帧,并将所述补偿帧插入至所述待插帧对,获得对应的动态修复补偿区域序列;
人员筛选单元,用于基于预设人员图像特征在所述动态修复补偿区域序列中筛选出人员区域视频,并所述人员区域视频中包含的人员区域标记于所述监控视频中的对应视频帧,获得对应的标记视频。
该实施例中,监控视频帧即为对监控视频进行分帧处理后获得的视频帧。
该实施例中,帧序列即为将监控视频帧排序获得的帧的序列。
该实施例中,差异区域即为相邻视频帧中不一样的区域。
该实施例中,动态区域序列即为基于帧序列将差异区域排序后获得的图像区域的序列。
该实施例中,位移轨迹即为对动态区域序列进行轨迹跟踪后获得的轨迹。
该实施例中,第一子帧序列即为在帧序列中筛选出的动态区域序列所属的帧序列。
该实施例中,静态区域序列即为第一子帧序列中除动态区域序列以外的图像区域构成的序列。
该实施例中,叠加图像即为对静态区域序列进行叠加处理后获得的图像。
该实施例中,标记结果即为将位移轨迹标记于所述叠加图像中后获得的结果。
该实施例中,像素变化特征即为基于标记结果确定出的位移轨迹在叠加图像中色度变化特征和灰度变化特征以及亮度变化特征。
该实施例中,动态修复区域序列即为基于像素变化特征对动态区域序列进行逆向修复后获得的动态修复区域的序列,其中,逆向修复是指按照像素变化特征的变化方向的逆方向对动态区域进行校正,例如,第一帧动态区域中对应像素点的亮度值为10,第二帧动态区域中对应像素点的亮度值为20,则将第一帧动态区域中对应相随单的亮度值设置为20。
该实施例中,待插帧对即为修复区域序列中包含的相邻修复区域。
该实施例中,基于所述待插帧对构建出对应的空帧,包括:以待插帧对中包含的待插帧的区域尺寸的并集为帧尺寸构建出空白的帧。
该实施例中,子区域即为待插帧对中包含的待插帧划分获得的区域。
该实施例中,基于所述位移轨迹确定出所述待插帧对中前一待插帧中包含的每个第一子区域对应的匹配范围,包括:基于所述位移轨迹确定出待插帧对中前一待插帧中包含的每个第一子区域在后一待插帧中对应的匹配基准区域,将该匹配基准区域以及与该匹配基准区域相邻的所有子区域构成的范围作为对应第一子区域对应的匹配范围。
该实施例中,基于所述匹配范围在所述待插帧对中后一待插帧中筛选出所述第一子区域对应的第二子区域,获得对应的匹配区域对,包括:
计算出所述待插帧对中后一待插帧中在所述匹配范围内的每个第三子区域与对应第一子区域之间的匹配度:
式中,δ为当前计算的第一子区域与当前计算的第三子区域之间的匹配度,且δ的取值范围为Amax为预设的亮度最大值,Bmax为预设的色度最大值,Cmax为预设的灰度最大值,Amin为预设的亮度最小值,Bmin为预设的色度最小值,Cmin为预设的灰度最小值,j为当前计算的第三子区域中包含的当前计算的像素点,m为当前计算的第一子区域(或第三子区域)中包含的像素点总个数,A1i为当前计算的第一子区域中包含的第i个像素点对应的亮度值,A2i为当前计算的第三子区域中包含的第i个像素点对应的亮度值,B1i为当前计算的第一子区域中包含的第i个像素点对应的色度值,B2i为当前计算的第三子区域中包含的第i个像素点对应的色度值,C1i为当前计算的第一子区域中包含的第i个像素点对应的灰度值,C2i为当前计算的第三子区域中包含的第i个像素点对应的灰度值,e为自然常数且取值为2.72;
例如,当前计算的第一子区域中包含两个像素点,其中第一个像素点的色度值为10、亮度值为10、灰度值为10;
第二个像素点的色度值为20、亮度值为20、灰度值为20;
当前计算的第三子区域中包含两个像素点,其中第一个像素点的色度值为20、亮度值为20、灰度值为20;
第二个像素点的色度值为20、亮度值为20、灰度值为20;
且预设的色度最大值为20、色度最小值为10,亮度最大值为20、亮度最小值为10,灰度最大值为20、灰度最小值为10;
则δ为22025,且δ的取值范围为[0,22026]。
将最大匹配度对应的第三子区域作为对应第一子区域对应的第二子区域。
该实施例中,匹配区域对即为第一子区域和对应的第二子区域匹配成的区域对。
该实施例中,基于所述匹配区域对确定出对应的位移向量,包括:将所述匹配区域对中第一子区域的中心点至对应的第二子区域的中心点的向量作为对应的位移向量。
该实施例中,基于所述位移向量的中点在所述空帧中的位置,确定出所述匹配区域对在所述空帧中对应的待插区域,包括:
将所述位移向量的中点在空帧中的位置作为对应待插区域的中点,进而构建出对应的待插区域。
该实施例中,基于所述匹配区域对对所述待插区域进行像素补偿,获得对应的补偿区域,包括:
将匹配区域对中第一子区域和第二子区域对应像素点的像素特征平均值(像素点亮度平均值、像素点色度平均值、像素点灰度平均值)作为待插区域对应像素点的像素特征值。
该实施例中,补偿帧即为所有补偿区域构建出的帧。
该实施例中,动态修复补偿区域序列即为将补偿帧插入至待插帧对后获得的区域序列。
该实施例中,预设人员图像特征即为预先设置的人员图像区域的图像特征,包括:图像尺寸特征、图像形状特征等。
以上技术的有益效果为:通过对监控视频进行进行静态区域和动态区域的划分,获得对应的动态区域序列和静态区域序列,将静态区域序列进行叠加获得可以表征除人员以外的背景图像,同时对动态区域序列进行轨迹跟踪确定出人员在监控视频中的位移轨迹,分析出位移轨迹在叠加获得的背景图像中的像素变化特征,该像素变化特征表征了背景图像中位移轨迹处的像素变化特征,基于该像素变化特征对动态区域序列进行逆向修复(即像素特征校正),进而修复了动态区域的像素特征,使得动态区域更加清晰,再通过对动态区域序列中相邻动态区域中区域的匹配,实现对动态区域序列的插帧处理,进而提高了动态区域序列的帧率,提高了对应人员区域视频的清晰度,有利于后续基于预设人员图像特征筛选出人员区域视频的准确性。
实施例5:
在实施例4的基础上,所述视频分析模块,参考图5,包括:
视频调取单元,用于调取所述建筑楼宇对应的三维地图全景视频;
视频帧匹配单元,用于将所述标记视频中最新确定的人员区域在所述标记视频中所属的标记视频帧与所述三维地图全景视频中包含的全景视频帧进行匹配,确定出所述人员区域对应的三维坐标信息;
坐标标记单元,用于将所述三维坐标信息标记与所述建筑楼宇对应的三维模型中,获得对应的人员分布信息。
该实施例中,三维地图全景视频即为建筑楼宇内的三维地图对应的全景视频。
该实施例中,标记视频帧即为最新确定的人员区域在标记视频中对应的视频帧。
该实施例中,全景视频帧即为三维地图全景视频中包含的视频帧。
该实施例中,将所述标记视频中最新确定的人员区域在所述标记视频中所属的标记视频帧与所述三维地图全景视频中包含的全景视频帧进行匹配,确定出所述人员区域对应的三维坐标信息,包括:将标记视频中最新确定的人员区域在标记视频中所属的标记视频帧与三维地图全景视频中包含的全景视频帧进行匹配,确定出三维地图全景视频中对应的所处位置帧,调取出所处位置帧对应的位置信息作为对应的三维坐标信息。
以上技术的有益效果为:通过最新确定的人员区域所属的视频帧与建筑楼宇对应的三维全景视频进行匹配,可以准确确定出对应人员当前的实时位置,进而为后续生成逃生路线和救援路线提供了重要的数据基础,并保证了逃生路线和救援路线的实时性和有效性。
实施例6:
在实施例5的基础上,所述生成端,参考图6,包括:
险情位置确定模块,用于基于所述险情监测信息确定出对应的险情发生位置;
人员位置确定模块,用于基于所述人员分布信息确定出每个人员对应的实时位置;
逃生路线生成模块,用于基于所述实时位置和所述险情发生位置生成对应人员对应的逃生路线;
危险等级确定模块,用于基于逃生路线和所述实时位置生成对应人员的危险系数;
救援路线生成模块,用于基于所述危险系数和对应的实时位置生成对应的救援路线。
该实施例中,实时位置即为基于人员分布信息实时确定的建筑楼宇内的人员的位置。
该实施例中,危险系数即为基于逃生路线和实时位置生成的表征对应人员危险程度的系数。
以上技术的有益效果为:用于基于险情发生位置和人员的实时位置生成对应的逃生路线,并确定出对应人员的危险系数,基于危险系数和每个人员对应的实时位置生成对应的救援路线,使得可以针对每个人员的实时位置进行针对性引导逃生,也使得生成的救援路线充分考虑到了人员的危险程度,进而保证了救援路线的合理性。
实施例7:
在实施例6的基础上,所述危险等级确定模块,参考图7,包括:
点筛选单元,用于实时获取所述险情发生位置处的险情图像,在所述险情图像中确定出色度值在险情色度范围内且亮度值在险情亮度范围内的险情像素点;
第一确定单元,用于基于所述险情像素点构成对应的第一险情区域,基于所述第一险情区域在所述险情图像中的第一区域占比确定出对应的第一危险度;
第二确定单元,用于确定出所述实时位置和所述险情发生位置之间的第一距离,基于所述第一距离确定出对应人员的第二危险度;
帧提取单元,用于获取所述险情发生位置处的险情视频,基于预设时间间隔在所述险情视频中提取出对应的险情分析帧;
方向确定单元,用于确定出所述险情分析帧中包含的第二险情区域,获得对应的第二险情区域序列,基于所述第二险情序列分析出对应的险情蔓延方向;
序列生成单元,用于确定出所述第二险情区域在对应险情分析帧中的第二区域占比,基于所述第二险情区域序列获得对应的第二区域占比序列;
速率确定单元,用于基于所述第二区域占比序列确定出对应的险情蔓延速率;
轨迹预测单元,用于基于所述险情蔓延速率和所述险情蔓延方向预测出对应的险情预测蔓延轨迹;
距离预测单元,用于基于所述标记视频分析出对应人员的逃生速度,基于所述逃生速度和所述逃生路线以及所述险情预测蔓延轨迹预测出对应人员的实时险情距离;
第三确定单元,用于基于所述实时险情距离计算出对应人员的第三危险度;
第四确定单元,用于基于所述逃生路线的长度确定出对应人员的第四危险度;
第五确定单元,用于将所述第一危险度、所述第二危险度和所述第三危险度以及所述第四危险度的平均值作为对应人员的危险系数。
该实施例中,险情图像即为险情发生位置处的图像。
该实施例中,险情色度范围即为被判定为险情像素点时对应的像素点色度范围。
该实施例中,险情亮度范围为被判定为险情像素点时对应的像素点亮度范围。
该实施例中,险情像素点即为在险情图像中确定出的色度值在险情色度范围内且亮度值在险情亮度范围内的像素点。
该实施例中,第一险情区域即为基于险情像素点构成的图像区域。
该实施例中,第一区域占比即为第一险情区域在所述险情图像中的区域占比。
该实施例中,第一危险度即为基于第一区域占比确定出的对应人员的危险度。
该实施例中,基于所述第一险情区域在所述险情图像中的第一区域占比确定出对应的第一危险度,包括:
基于第一区域占比和对应的第一换算公式(即为表征第一区域占比和第一危险度之间的对应关系),计算出对应的第一危险度。
该实施例中,第一距离即为实时位置和险情发生位置之间的距离。
该实施例中,基于所述第一距离确定出对应人员的第二危险度,包括:
基于第一距离和对应的第二换算公式(即为表征第一距离和第二危险度之间的对应关系),计算出对应的第二危险度。
该实施例中,第二危险度即为基于第一距离确定出的对应人员的危险度。
该实施例中,险情视频即为险情发生位置处的视频。
该实施例中,险情分析帧即为基于预设时间间隔(例如:10s等)在险情视频中提取出的视频帧。
该实施例中,第二险情区域即为险情分析帧中包含的发生险情的区域该实施例中,第二险情区域序列即为第二险情区域构成的序列。
该实施例中,险情蔓延方向即为第二险情区域序列中险情区域的扩散方向。
该实施例中,第二区域占比即为第二险情区域在对应险情分析帧中的区域占比。
该实施例中,第二区域占比序列即为基于第二险情区域序列将第二区域占比排序后获得的序列。
该实施例中,基于所述第二区域占比序列确定出对应的险情蔓延速率,包括:
式中,V为险情蔓延速率,α为区域占比和险情蔓延速率的换算系数(具体根据实际情况设置),i为第二区域占比序列中当前计算的第二区域占比,n为第二区域占比序列中包含的第二区域占比总个数,bi+1为第二区域占比序列中第(i+1)个第二区域占比,bi为第二区域占比序列中第i个第二区域占比,Δt为第二区域占比序列中相邻第二区域占比对应的帧间隔时间;
例如,第二区域占比序列为:0.1、0.2、0.3、0.4、0.5,α为10,Δt为10,则V为1。
该实施例中,险情预测蔓延轨迹即为基于险情蔓延速率和险情蔓延方向预测出的险情即将蔓延的轨迹。
该实施例中,实时险情距离即为预测的对应人员在逃生过程中的实时位置和险情蔓延的实时位置之间的距离。
该实施例中,基于所述标记视频分析出对应人员的逃生速度,包括:
基于标记视频确定出单位时间内对应人员的实际位移轨迹长度(即单位时间内对应人员在实际三维空间中位移的轨迹长度)确定出对应的逃生速度。
该实施例中,基于所述逃生速度和所述逃生路线以及所述险情预测蔓延轨迹预测出对应人员的实时险情距离,包括:
基于所述逃生速度和所述逃生路线预测出对应人员的逃生实时位置;
基于险情预测蔓延轨迹预测出险情的蔓延实时位置;
将对应时刻对应的逃生实时位置和对应的蔓延实时位置之间的距离作为对应的实时险情距离。
该实施例中,第三危险度即为基于实时险情距离和对应的第三换算公式(即为表征实时险情距离和第三危险度之间的对应关系的公式)换算出的基于实时险情距离确定的对应人员的危险度。
该实施例中,基于所述逃生路线的长度确定出对应人员的第四危险度,包括:
基于所述逃生路线的长度和第四换算公式(即为表征逃生路线的长度和第四换算公式之间的对应关系的公式)换算出对应的第四危险度。
该实施例中,第四危险度即为基于逃生路线的长度确定出的对应人员的危险度。
以上技术的有益效果为:基于对险情发生位置处的险情图像的区域占比、险情蔓延速度、险情发生位置和人员所处位置之间的距离、预测出的逃生实时位置和险情蔓延位置之间的距离、逃生路线长度多方面分析,可以准确地评估出对应人员的危险程度,为后续生成救援路线提供了重要参考依据。
实施例8:
在实施例7的基础上,所述救援路线生成模块,参考图8,包括:
系数排序单元,用于将所述危险系数从大到小排序生成对应的危险系数序列;
路线生成单元,用于基于所述危险系数序列和每个人员对应的实时位置生成对应的救援路线。
该实施例中,危险系数序列即为将危险系数从大到小排序生成的序列。
以上技术的有益效果为:基于人员的危险系数确定对应的救援顺序,进而依次确定出对应的救援路线,为救援人员的救援过程提供了参考,省略了救援人员的判断时间,进而提高了救援效率,减少了人员伤亡。
实施例9:
在实施例8的基础上,所述控制端,参考图9,包括:
方案生成模块,用于基于所述逃生路线生成对应的指示灯控制方案;
指示灯控制模块,用于基于所述指示灯控制方案控制对应指示灯闪烁发光;
路线传输模块,用于将所述救援路线传输至对应救援人员通信端。
该实施例中,指示灯控制方案即为基于逃生路线生成的用于控制指示灯的方案。
以上技术的有益效果为:实现基于生成的逃生路线控制对应指示灯,从而为对应人员提供高效准确的逃生引导信号;将救援路线传输至对应救援人员通信端为救援人员的救援过程提供了参考,省略了救援人员的判断时间,进而提高了救援效率,减少了人员伤亡。
实施例10:
在实施例9的基础上,所述方案生成模块,参考图10,包括:
颜色确定单元,用于基于所述危险系数序列确定出对应的指示灯闪烁颜色;
方案生成单元,用于基于所述指示灯闪烁颜色和所述逃生路线中包含的指示灯生成对应的指示灯控制方案。
该实施例中,基于所述危险系数序列确定出对应的指示灯闪烁颜色,包括:
基于危险系数序列和指示灯闪烁颜色确定列表(即为表征危险系数和对应指示灯闪烁颜色之间对应关系的列表,具体可根据实际情况设置),确定出对应的指示灯闪烁颜色。
该实施例中,指示灯闪烁颜色具体可根据实际情况设置。
以上技术的有益效果为:通过基于危险系数对对应人员赋予不同的指示灯颜色,避免因为多名逃生人员的逃生路线重合或交叉导致出现引导错误的情况,进一步提高了逃生引导的效率,减少了人员伤亡。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
Claims (7)
1.一种建筑楼宇智能消防控制系统,其特征在于,包括:
监控端,用于实时监测所述建筑楼宇内的险情,获取对应的险情监测信息;
获取端,用于基于所述险情监测信息获取所述建筑楼宇内的人员分布信息;
生成端,用于基于所述人员分布信息和所述险情监测信息生成对应的逃生路线和救援路线;
控制端,用于基于所述逃生路线控制对应的指示灯,同时,将所述救援路线传输至救援人员通信端;
所述监控端,包括:
第一监控模块,用于基于设置在所述建筑楼宇内的烟雾传感器实时获取所述建筑楼宇内的烟雾浓度分布数据;
第二监控模块,用于基于设置在所述建筑楼宇内的温度传感器实时获取所述建筑楼宇内的温度分布数据;
险情分析模块,用于基于所述烟雾浓度分布数据和所述温度分布数据,实时分析所述建筑楼宇内是否存在险情,若存在,则确定出对应的险情发生位置作为对应的险情监测信息,否则,将所述建筑楼宇内不存在险情作为对应的险情监测信息;
所述获取端,包括:
视频获取模块,用于当所述险情监测信息为所述建筑楼宇内存在险情时,则获取所述建筑楼宇内的所有监控视频;
视频标记模块,用于在所述监控视频中标记出所有人员的人员区域视频,获得对应的标记视频;
视频分析模块,用于基于所述标记视频确定出所述建筑楼宇内的人员分布信息;
所述视频标记模块,包括:
分帧处理单元,用于对所述监控视频进行分帧处理,获得对应的监控视频帧,基于所述监控视频帧构建出对应的帧序列;
动态识别单元,用于对比所述帧序列中相邻监控视频帧,确定出所述相邻监控 视频帧中的差异区域,基于所述差异区域确定出所述帧序列中的动态区域序列;
区域跟踪单元,用于对所述动态区域序列进行轨迹跟踪获得对应的位移轨迹;
静态筛选单元,用于在所述帧序列中筛选出所述动态区域序列所属的第一子帧序列,并确定出所述第一子帧序列中除所述动态区域序列以外的静态区域序列;
区域叠加单元,用于对所述静态区域序列中包含的静态区域进行叠加处理,获得对应的叠加图像;
轨迹标记单元,用于将所述位移轨迹标记于所述叠加图像中,获得对应的标记结果;
特征分析单元,用于基于所述标记结果确定出所述位移轨迹在所述叠加图像中对应的像素变化特征;
区域修复单元,用于基于所述像素变化特征对所述动态区域序列进行逆向修复,获得对应的动态修复区域序列;
空帧构建单元,用于将所述修复区域序列中包含的相邻修复区域作为对应的待插帧对,基于所述待插帧对构建出对应的空帧;
范围确定单元,用于将所述待插帧对中包含的待插帧划分为多个子区域,基于所述位移轨迹确定出所述待插帧对中前一待插帧中包含的每个第一子区域对应的匹配范围;
区域匹配单元,用于基于所述匹配范围在所述待插帧对中后一待插帧中筛选出所述第一子区域对应的第二子区域,获得对应的匹配区域对;
向量确定单元,用于基于所述匹配区域对确定出对应的位移向量;
区域确定单元,用于基于所述位移向量的中点在所述空帧中的位置,确定出所述匹配区域对在所述空帧中对应的待插区域;
像素补偿单元,用于基于所述匹配区域对对所述待插区域进行像素补偿,获得对应的补偿区域;
插帧处理单元,用于基于所有补偿区域构建出对应的补偿帧,并将所述补偿帧插入至所述待插帧对,获得对应的动态修复补偿区域序列;
人员筛选单元,用于基于预设人员图像特征在所述动态修复补偿区域序列中筛选出人员区域视频,并将所述人员区域视频中包含的人员区域标记于所述监控视频中的对应视频帧,获得对应的标记视频。
2.根据权利要求1所述的一种建筑楼宇智能消防控制系统,其特征在于,所述视频分析模块,包括:
视频调取单元,用于调取所述建筑楼宇对应的三维地图全景视频;
视频帧匹配单元,用于将所述标记视频中最新确定的人员区域在所述标记视频中所属的标记视频帧与所述三维地图全景视频中包含的全景视频帧进行匹配,确定出所述人员区域对应的三维坐标信息;
坐标标记单元,用于将所述三维坐标信息标记于所述建筑楼宇对应的三维模型中,获得对应的人员分布信息。
3.根据权利要求2所述的一种建筑楼宇智能消防控制系统,其特征在于,所述生成端,包括:
险情位置确定模块,用于基于所述险情监测信息确定出对应的险情发生位置;
人员位置确定模块,用于基于所述人员分布信息确定出每个人员对应的实时位置;
逃生路线生成模块,用于基于所述实时位置和所述险情发生位置生成对应人员对应的逃生路线;
危险等级确定模块,用于基于逃生路线和所述实时位置生成对应人员的危险系数;
救援路线生成模块,用于基于所述危险系数和对应的实时位置生成对应的救援路线。
4.根据权利要求3所述的一种建筑楼宇智能消防控制系统,其特征在于,所述危险等级确定模块,包括:
点筛选单元,用于实时获取所述险情发生位置处的险情图像,在所述险情图像中确定出色度值在险情色度范围内且亮度值在险情亮度范围内的险情像素点;
第一确定单元,用于基于所述险情像素点构成对应的第一险情区域,基于所述第一险情区域在所述险情图像中的第一区域占比确定出对应的第一危险度;
第二确定单元,用于确定出所述实时位置和所述险情发生位置之间的第一距离,基于所述第一距离确定出对应人员的第二危险度;
帧提取单元,用于获取所述险情发生位置处的险情视频,基于预设时间间隔在所述险情视频中提取出对应的险情分析帧;
方向确定单元,用于确定出所述险情分析帧中包含的第二险情区域,获得对应的第二险情区域序列,基于所述第二险情区域 序列分析出对应的险情蔓延方向;
序列生成单元,用于确定出所述第二险情区域在对应险情分析帧中的第二区域占比,基于所述第二险情区域序列获得对应的第二区域占比序列;
速率确定单元,用于基于所述第二区域占比序列确定出对应的险情蔓延速率;
轨迹预测单元,用于基于所述险情蔓延速率和所述险情蔓延方向预测出对应的险情预测蔓延轨迹;
距离预测单元,用于基于所述标记视频分析出对应人员的逃生速度,基于所述逃生速度和所述逃生路线以及所述险情预测蔓延轨迹预测出对应人员的实时险情距离;
第三确定单元,用于基于所述实时险情距离计算出对应人员的第三危险度;
第四确定单元,用于基于所述逃生路线的长度确定出对应人员的第四危险度;
第五确定单元,用于将所述第一危险度、所述第二危险度和所述第三危险度以及所述第四危险度的平均值作为对应人员的危险系数。
5.根据权利要求4所述的一种建筑楼宇智能消防控制系统,其特征在于,所述救援路线生成模块,包括:
系数排序单元,用于将所述危险系数从大到小排序生成对应的危险系数序列;
路线生成单元,用于基于所述危险系数序列和每个人员对应的实时位置生成对应的救援路线。
6.根据权利要求5所述的一种建筑楼宇智能消防控制系统,其特征在于,所述控制端,包括:
方案生成模块,用于基于所述逃生路线生成对应的指示灯控制方案;
指示灯控制模块,用于基于所述指示灯控制方案控制对应指示灯闪烁发光;
路线传输模块,用于将所述救援路线传输至对应救援人员通信端。
7.根据权利要求6所述的一种建筑楼宇智能消防控制系统,其特征在于,所述方案生成模块,包括:
颜色确定单元,用于基于所述危险系数序列确定出对应的指示灯闪烁颜色;
方案生成单元,用于基于所述指示灯闪烁颜色和所述逃生路线中包含的指示灯生成对应的指示灯控制方案。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210429686.0A CN114917519B (zh) | 2022-04-22 | 2022-04-22 | 一种建筑楼宇智能消防控制系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210429686.0A CN114917519B (zh) | 2022-04-22 | 2022-04-22 | 一种建筑楼宇智能消防控制系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114917519A CN114917519A (zh) | 2022-08-19 |
CN114917519B true CN114917519B (zh) | 2023-03-14 |
Family
ID=82805886
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210429686.0A Active CN114917519B (zh) | 2022-04-22 | 2022-04-22 | 一种建筑楼宇智能消防控制系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114917519B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115762043B (zh) * | 2023-01-10 | 2023-04-18 | 广东广宇科技发展有限公司 | 一种智能楼宇消防指引系统 |
CN116187105B (zh) * | 2023-04-27 | 2023-09-26 | 广东广宇科技发展有限公司 | 一种基于数字孪生技术的火灾疏散规划方法及系统 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105228100B (zh) * | 2015-08-31 | 2018-11-09 | 湖南汇博电子科技股份有限公司 | 救援系统和方法 |
CN110047240B (zh) * | 2019-03-07 | 2020-10-16 | 吉林建筑大学 | 一种基于物联网的智能消防警示导引系统与方法 |
CN110491048A (zh) * | 2019-07-18 | 2019-11-22 | 张晓伟 | 应急救援方法、系统、可读存储介质及智能设备 |
CN112488401B (zh) * | 2020-12-08 | 2022-12-02 | 武汉理工光科股份有限公司 | 一种火灾逃生路线指引方法及系统 |
CN112927460B (zh) * | 2021-02-03 | 2022-07-22 | 阳江市第四建筑工程有限公司 | 基于bim的火灾定位报警方法及系统 |
-
2022
- 2022-04-22 CN CN202210429686.0A patent/CN114917519B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN114917519A (zh) | 2022-08-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN114917519B (zh) | 一种建筑楼宇智能消防控制系统 | |
CN201936415U (zh) | 森林火情自动识别报警系统 | |
CN109636777A (zh) | 一种交通信号灯的故障检测方法、系统及存储介质 | |
WO2014061964A1 (ko) | 화재 감지 방법 및 장치 | |
CN101419663A (zh) | 电力设备故障指示器指示灯状态实时监测识别方法 | |
CN111931726B (zh) | 交通灯检测的方法、装置、计算机存储介质和路侧设备 | |
CN107749055A (zh) | 一种led交通诱导屏的故障检测方法、系统及装置 | |
CN109903501B (zh) | 一种基于大数据的安防探头分析处理系统 | |
CN102025975A (zh) | 自动监控方法和系统 | |
CN113569956A (zh) | 一种基于ai算法的山火灾害勘查识别方法 | |
CN110853287A (zh) | 一种基于物联网分布式架构的火焰实时监控系统及方法 | |
CN111951390A (zh) | 一种警情显示方法、系统、装置和存储介质 | |
CN108230288B (zh) | 一种确定雾性状况的方法和装置 | |
CN105282542A (zh) | 一种视频图像中异常条纹的检测方法及系统 | |
CN115664006B (zh) | 一种增量配电网智能管控一体化平台 | |
CN116958900A (zh) | 一种消防数据可视化监控系统及其监控方法 | |
CN110826456A (zh) | 一种倒计时牌故障检测方法及系统 | |
CN114140724A (zh) | 一种用于变电站的视频监控系统及方法 | |
CN111988569A (zh) | 一种变电站工业视频监控画面着火现象监控方法及系统 | |
CN112347937A (zh) | 一种基于视觉感知的室内火灾监测系统及方法 | |
CN112909824A (zh) | 一种输电线路悬挂异物的识别方法及装置 | |
CN112347942A (zh) | 一种火焰识别的方法及装置 | |
CN113313907B (zh) | 基于云服务器的应急保护系统 | |
CN108985144A (zh) | 一种高效低成本图像火灾自动识别方法及装置 | |
CN115802295B (zh) | 一种基于5g的隧道广播多播通信系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |