CN106955443A - 一种火灾处理机器人和系统 - Google Patents
一种火灾处理机器人和系统 Download PDFInfo
- Publication number
- CN106955443A CN106955443A CN201710251350.9A CN201710251350A CN106955443A CN 106955443 A CN106955443 A CN 106955443A CN 201710251350 A CN201710251350 A CN 201710251350A CN 106955443 A CN106955443 A CN 106955443A
- Authority
- CN
- China
- Prior art keywords
- fire
- image
- handling machine
- machine people
- condition
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- A—HUMAN NECESSITIES
- A62—LIFE-SAVING; FIRE-FIGHTING
- A62C—FIRE-FIGHTING
- A62C27/00—Fire-fighting land vehicles
-
- A—HUMAN NECESSITIES
- A62—LIFE-SAVING; FIRE-FIGHTING
- A62C—FIRE-FIGHTING
- A62C19/00—Hand fire-extinguishers in which the extinguishing substance is expelled by an explosion; Exploding containers thrown into the fire
Abstract
本发明提供了一种火灾处理机器人和系统,通过在建筑物内设置火灾处理机器人,与相关技术中人工排查火灾隐患相比,可以全天候对建筑物内的火灾进行排查,提高了火灾检测效率,而且可以在出现火灾时,进行灭火操作,处理及时,尽可能降低火灾对建筑物的损害。
Description
技术领域
本发明涉及数据处理技术领域,具体而言,涉及一种火灾处理机器人和系统。
背景技术
当前,城市中各种大型商业综合体建筑物不断增多,在商业圈的这些大型楼宇中,人口密度大,容易出现火灾隐患,因此需要对火灾隐患进行及时处理。
相关技术中,各种大型商业综合体建筑物会安排专门的物业人员对建筑物内的火灾隐患进行排查。
在实现本发明过程中,发明人发现现有技术中至少存在如下问题:
人工排查火灾隐患,效率低下,并在出现火灾时不能及时处理。
发明内容
有鉴于此,本发明实施例的目的在于提供一种火灾处理机器人和系统,以提高火灾检测效率。
第一方面,本发明实施例提供了一种火灾处理机器人,设置在建筑物内,包括:
机器人本体、行走机构、灭火机构和控制机构;所述行走机构安装在所述机器人本体底部,所述控制机构安装在所述机器人本体内部,所述灭火机构安装在所述机器人本体顶部;
所述机器人本体内部还设置有灭火材料容器,所述灭火材料容器与所述灭火机构连接;
所述行走机构,包括履带架及行走电机,履带架上设置有驱动轮、导向轮、若干个支撑轮以及履带;所述驱动轮包括左驱动轮和右驱动轮;所述行走电机用于驱动左驱动轮和右驱动轮转动;所述导向轮具有驱动功能,包括左导向轮和右导向轮;所述左导向轮和所述右导向轮分别在所述行走电机驱动下转动;所述行走机构的履带架上设置有导向轮张紧器,所述导向轮设置所述导向轮张紧器上;
所述控制机构包括:控制模块、无线信号收发模块和定位模块;所述控制模块,分别与所述无线信号收发模块、所述行走机构、所述定位模块和所述灭火机构连接;
所述控制模块根据采集到的火灾检测图像确定有火灾出现时,控制所述火灾处理机器人进行灭火操作;
所述无线信号收发模块,用于根据所述控制模块的控制,使所述火灾处理机器人与外界进行交互;
所述定位模块,设置在所述机器人本体外部,用于向所述控制模块反馈所述火灾处理机器人所在位置信息;
所述灭火机构包括:温度传感器、烟雾传感器、升降旋转平台、灭火装置和图像采集装置;所述温度传感器、所述烟雾传感器、所述灭火装置和所述图像采集装置均设置在所述升降旋转平台上,并分别与所述控制模块连接;
所述温度传感器,用于对所述火灾处理机器人所在区域的温度进行检测;
所述烟雾传感器,用于对所述火灾处理机器人所在区域的烟雾进行检测;
所述灭火装置,用于对出现的火情进行灭火操作;
所述图像采集装置,具有测量与拍摄物体距离功能,用于采集建筑物的火灾检测图像,并将采集到的火灾检测图像发送到所述控制模块,使所述控制模块对所述火灾检测图像进行处理。
结合第一方面,本发明实施例提供了第一方面的第一种可能的实施方式,其中:所述灭火机构,还包括:第一旋转电机、第二旋转电机和升降电机;所述第一旋转电机、所述第二旋转电机和所述升降电机分别与所述控制模块连接;
所述第一旋转电机和所述升降电机设置在所述升降旋转平台底部,用于控制所述升降旋转平台进行旋转升降;
所述灭火装置包括:水炮和与所述水炮并排设置的粉末炮,所述水炮和所述粉末炮在所述升降旋转平台内侧的一端分别通过软管与所述灭火材料容器中的水箱和灭火粉末箱连接,在所述升降旋转平台外侧一端分别设置有射水孔和灭火粉末发射孔,用于对发生火情的区域发射水和灭火粉末;
所述第二旋转电机设置在所述升降旋转平台内,通过转轴与所述水炮和所述粉末炮连接,用于控制所述水炮和所述粉末炮在灭火操作的过程中俯仰,调节所述水炮和所述粉末炮的发射角度;
所述温度传感器、所述烟雾传感器、所述图像采集装置均设置在所述灭火装置上,随着所述灭火装置的旋转升降而被旋转升降;
所述无线信号收发模块设置在所述升降旋转平台顶部。
结合第一方面,本发明实施例提供了第一方面的第二种可能的实施方式,其中:在检测建筑物内火情的过程中,所述控制模块具体用于:
获取当前的时间信息;
当根据获取到的所述时间信息确定距离上一次进行火灾检测的时长达到预设的时间长度时,根据预存的火灾检测位置信息,控制所述行走机构移动,使所述火灾处理机器人移动到预设的火灾检测区域;
获取移动所述行走机构移动时的移动位置信息,并将所述移动位置信息与所述火灾检测位置信息进行对比,得到对比结果;其中,所述对比结果包括相同和不相同;对比结果相同说明所述火灾处理机器人移动到所述火灾检测区域,对比结果不相同说明所述火灾处理机器人未移动到火灾检测区域;
当对比结果相同时,确定所述火灾处理机器人移动到所述火灾检测区域;
进行所述火灾检测区域的火灾检测。
结合第一方面,本发明实施例提供了第一方面的第三种可能的实施方式,其中:所述控制模块进行所述火灾检测区域的火灾检测,包括:
通过所述温度传感器采集所述火灾检测区域的温度数据;
通过所述烟雾传感器采集所述火灾检测区域的烟雾数据;
当确定所述温度数据大于预设的温度阈值或者所述烟雾数据大于预设的烟雾浓度阈值时,向所述图像采集装置发送火灾检测图像获取指令,使得所述图像采集装置获取所述火灾检测区域的火灾检测图像;
获取所述图像采集装置发送的火灾检测图像;
查询出预存的火灾图像;
将所述火灾检测图像分别划分为多个图像区域;
从多个所述图像区域中,分别选择k个图像区域进行拼接,得到多个检测子图像,其中,多个所述图像区域由所述火灾检测图像自上而下平均划分得到,m表示所述火灾检测图像划分的图像区域数量;
对得到的所述多个检测子图像以及所述火灾图像进行深度学习,得到所述火灾检测图像和所述火灾图像的特征差值图;
对得到的所述特征差值图进行深度学习,得到所述火灾检测图像和所述火灾图像的对比结果,所述对比结果包括相似和不相似;
当得到所述火灾检测图像和所述火灾图像相似的对比结果时,确定所述火灾检测区域发生火灾,并控制所述灭火装置对所述火灾检测区域进行灭火操作。
结合第一方面,本发明实施例提供了第一方面的第四种可能的实施方式,其中:所述控制模块对得到的所述多个检测子图像以及所述火灾图像进行深度学习,得到所述火灾检测图像和所述火灾图像的特征差值图,包括:
对多个所述检测子图像和所述火灾图像进行深度学习,得到多个第一火灾图像特征图和第二火灾图像特征图;
以预设的像素点坐标集合中存储的各像素点坐标为特征值区域中心,按照预设的特征值区域尺寸,分别将当前第一火灾图像特征图和所述第二火灾图像特征图划分为多个第一特征值区域和多个第二特征值区域;
从所述多个第一特征值区域和所述多个第二特征值区域中分别获取特征最大值;
计算分别从具有相同特征值区域中心的第一特征值区域和第二特征值区域中获取的特征最大值的差,得到多个特征差值;
以所述多个特征差值为像素值,按照预设的特征差值图尺寸,生成所述当前第一火灾图像特征图和第二火灾图像特征图的特征差值图。
结合第一方面,本发明实施例提供了第一方面的第五种可能的实施方式,其中:所述控制模块对多个所述检测子图像和所述火灾图像进行深度学习,得到多个第一火灾图像特征图和第二火灾图像特征图,包括:
通过第一自卷积神经网络对得到的检测子图像进行深度学习,得到多个所述第一火灾图像特征图;
通过第二自卷积神经网络对从图像库中选择的任一火灾图像进行深度学习,得到所述第二火灾图像特征图,其中,所述第二自卷积神经网络和所述第一自卷积神经网络的结构相同。
结合第一方面,本发明实施例提供了第一方面的第六种可能的实施方式,其中:所述控制模块对得到的所述特征差值图进行深度学习,得到所述火灾检测图像和所述火灾图像的对比结果,包括:
对得到的每个特征差值图进行深度学习,得到每个所述特征差值图对应的检测子图像与所述火灾图像的相似参数;
确定最大的相似参数作为所述火灾检测图像和所述火灾图像的相似度;
当所述相似度大于等于设定的相似度阈值时,得到所述火灾检测图像和所述火灾图像相似的对比结果。
结合第一方面,本发明实施例提供了第一方面的第七种可能的实施方式,其中:所述控制模块控制所述灭火装置对所述火灾检测区域进行灭火操作,包括:
向所述灭火装置发出灭火指令,使得火灾处理机器人行走到发生火情的区域的同时,控制所述图像采集装置采集发生火情的区域的火情图像,并通过所述温度传感器采集火情温度数据;
获取所述图像采集装置采集到的所述火情图像和所述火情温度数据;
通过所述无线信号收发模块向外部发出火灾处理机器人所在位置信息和所述火情图像;
当确定所述火情图像中显示的火焰面积小于等于预设的面积阈值且确定采集到的火情温度数据小于等于预设的温度阈值时,向所述火灾处理机器人发送水炮发射指令,控制所述水炮发射;
当确定所述火情图像中显示的火焰面积大于预设的面积阈值和/或确定采集到的火情温度数据大于预设的温度阈值时,向所述火灾处理机器人发送粉末炮发射指令,控制所述粉末炮发射。
结合第一方面,本发明实施例提供了第一方面的第八种可能的实施方式,其中:在当确定所述火情图像中显示的火焰面积小于等于预设的面积阈值且确定采集到的火情温度数据小于等于预设的温度阈值时,向所述火灾处理机器人发送水炮发射指令,控制所述水炮发射之前,所述控制模块还用于:
从火情图像中获取图像属性信息,所述图像属性信息中记录有拍摄距离;
根据图像属性信息中记录的拍摄距离,从预设的拍摄距离列表中确定所述拍摄距离下的火焰面积的面积阈值;其中,所述拍摄距离,表示获取火情图像时,所述图像采集装置与火焰之间的距离;
计算所述火情图像中火焰面积;
对比计算得到的所述火情图像中火焰面积与预设的面积阈值的大小。
第二方面,本发明实施例还提供一种火灾处理系统,包括:上述的火灾处理机器人和与所述火灾处理机器人交互的火情服务器;所述火情服务器,与建筑物内安装的电梯、报警器、显示装置和供电系统连接;
所述火灾处理机器人,用于获取火灾检测图像,并在根据所述火灾检测图像确定有火灾时,向所述火情服务器发送火灾处理机器人所在位置信息和采集到的火灾检测图像,并在根据采集到的火灾检测图像确定有火灾出现时进行灭火操作;
所述火情服务器,具体用于:
接收所述火灾处理机器人发送的火灾处理机器人所在位置信息和所述灭火机构采集到的火灾检测图像;控制所述电梯停止运行,并控制所述报警器报警;
根据预存的火灾检测区域与位置信息的对应关系表以及所述火灾处理机器人所在位置信息,确定所述火灾处理机器人所在的火灾检测区域的标识;其中,火灾检测区域与位置信息的对应关系表记录有各火灾检测区域的标识与位置信息的对应关系;
根据所述火灾处理机器人所在的火灾检测区域的标识,生成火灾告警信息,并控制上述供电系统停止对火灾处理机器人所在火灾检测区域的电路电线进行供电;
将生成的所述火灾告警信息发送到所述显示装置,使得所述显示装置对火灾告警信息进行展示,以让所述建筑物内的人群离开建筑物。
本发明实施例提供的火灾处理机器人和系统,通过在建筑物内设置火灾处理机器人,与相关技术中人工排查火灾隐患相比,可以全天候对建筑物内的火灾进行排查,提高了火灾检测效率,而且可以在出现火灾时,进行灭火操作,处理及时,尽可能降低火灾对建筑物的损害。
为使本发明的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本发明的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1示出了本发明实施例所提供的一种火灾处理机器人的结构示意图;
图2示出了本发明实施例所提供的火灾处理机器人中,行走机构的具体结构示意图;
图3示出了本发明实施例所提供的火灾处理机器人中,火灾处理机器人检测建筑物内火情的具体方法的流程图;
图4示出了本发明实施例所提供的火灾处理系统的结构示意图。
图标:100-机器人本体;102-行走机构;104-灭火机构;3-履带架;11-履带;12-导向轮;13-支撑轮;14-张紧器;17-驱动轮;400-火灾处理机器人;402-火情服务器。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围,而是仅仅表示本发明的选定实施例。基于本发明的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本发明保护的范围。
目前,各种大型商业综合体建筑物会安排专门的物业人员对建筑物内的火灾隐患进行排查。而人工排查火灾隐患,效率低下,并在出现火灾时不能及时处理基于此,本申请提供的一种火灾处理机器人和系统。
需要注意的是,在本发明的描述中,术语“中心”、“上”、“下”、“左”、“右”、“竖直”、“水平”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。此外,术语“第一”、“第二”、“第三”仅用于描述目的,而不能理解为指示或暗示相对重要性。
另外,在本发明的描述中,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或一体地连接;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通。对于本领域的普通技术人员而言,可以具体情况理解上述术语在本发明中的具体含义。
实施例
本实施例提供一种火灾处理机器人,设置在建筑物内,包括:
机器人本体、行走机构、灭火机构和控制机构;上述行走机构安装在上述机器人本体底部,上述控制机构安装在上述机器人本体内部,上述灭火机构安装在上述机器人本体顶部;
上述机器人本体内部还设置有灭火材料容器,上述灭火材料容器与上述灭火机构连接;
上述行走机构,包括履带架及行走电机,履带架上设置有驱动轮、导向轮、若干个支撑轮以及履带;上述驱动轮包括左驱动轮和右驱动轮;上述行走电机用于驱动左驱动轮和右驱动轮转动;上述导向轮具有驱动功能,包括左导向轮和右导向轮;上述左导向轮和上述右导向轮分别在上述行走电机驱动下转动;上述行走机构的履带架上设置有导向轮张紧器,上述导向轮设置上述导向轮张紧器上;
上述控制机构包括:控制模块、无线信号收发模块和定位模块;上述控制模块,分别与上述无线信号收发模块、上述行走机构、上述定位模块和上述灭火机构连接;
上述控制模块根据采集到的火灾检测图像确定有火灾出现时控制上述火灾处理机器人进行灭火操作;
上述无线信号收发模块,用于根据上述控制模块的控制,使上述火灾处理机器人与外界进行交互;
上述定位模块,设置在上述机器人本体外部,用于向上述控制模块反馈上述火灾处理机器人所在位置信息;
上述灭火机构包括:温度传感器、烟雾传感器、升降旋转平台、灭火装置和图像采集装置;上述温度传感器、上述烟雾传感器、上述灭火装置和上述图像采集装置均设置在上述升降旋转平台上,并分别与上述控制模块连接;
上述温度传感器,用于对上述火灾处理机器人所在区域的温度进行检测;
上述烟雾传感器,用于对上述火灾处理机器人所在区域的烟雾进行检测;
上述灭火装置,用于对出现的火情进行灭火操作;
上述图像采集装置,具有测量与拍摄物体距离功能,用于采集建筑物的火灾检测图像,并将采集到的火灾检测图像发送到上述控制模块,使上述控制模块对上述火灾检测图像进行处理。
参见图1和2为火灾处理机器人的一种实施方式,上述火灾处理机器人包括:机器人本体100、行走机构102和灭火机构104;行走机构102包括履带架3及电机(图中未示出),履带架3上设置有驱动轮17、导向轮12、四个支撑轮13以及履带11。履带架3上设置有导向轮张紧器14,导向轮12设置该导向轮张紧器14上。其中,驱动轮17包括左驱动轮和右驱动轮。火灾处理机器人包括2个相互独立的电机,2个电机分别独立控制左驱动轮和右驱动轮转动。另外,导向轮12也可以带有驱动功能,由此可以设置四个电机分别独立驱动驱动轮17和导向轮12转动,在多个电机独立工作时,即使个别电机发生故障,也不会影响机器人的正常使用。
综上所述,本实施例提供的火灾处理机器人,通过在建筑物内设置火灾处理机器人,与相关技术中人工排查火灾隐患相比,可以全天候对建筑物内的火灾进行排查,提高了火灾检测效率,而且可以在出现火灾时,进行灭火操作,处理及时,尽可能降低火灾对建筑物的损害。
为了增加火灾处理机器人的火灾检测范围,上述火灾处理机器人的灭火机构,还包括:第一旋转电机、第二旋转电机和升降电机;上述第一旋转电机、上述第二旋转电机和上述升降电机分别与上述控制模块连接;
上述第一旋转电机和上述升降电机设置在上述升降旋转平台底部,用于控制上述升降旋转平台进行旋转升降;
上述灭火装置包括:水炮和与上述水炮并排设置的粉末炮,上述水炮和上述粉末炮在上述升降旋转平台内侧的一端分别通过软管与上述灭火材料容器中的水箱和灭火粉末箱连接,在上述升降旋转平台外侧一端分别设置有射水孔和灭火粉末发射孔,用于对发生火情的区域发射水和灭火粉末;
上述第二旋转电机设置在上述升降旋转平台内,通过转轴与上述水炮和上述粉末炮连接,用于控制上述水炮和上述粉末炮在灭火操作的过程中俯仰,调节上述水炮和上述粉末炮的发射角度;
上述温度传感器、上述烟雾传感器、上述图像采集装置均设置在上述灭火装置上,随着上述灭火装置的旋转升降而被旋转升降;
上述无线信号收发模块设置在上述升降旋转平台顶部。
通过以上的描述可以看出,通过在升降旋转平台内设置第一旋转电机、第二旋转电机和升降电机,使得升降旋转平台可以旋转升降且调节图像采集装置的图像采集角度,可以增加火灾处理机器人的火灾检测范围。
参见图3所示的火灾处理机器人在检测建筑物内检测火情的过程中,上述控制模块具体用于执行以下步骤300至步骤308:
步骤300、获取当前的时间信息。
步骤302、当根据获取到的上述时间信息确定距离上一次进行火灾检测的时长达到预设的时间长度时,根据预存的火灾检测位置信息,控制上述行走机构移动,使上述火灾处理机器人移动到预设的火灾检测区域。
其中,有些建筑物的楼层多且面积广,所以需要在建筑物内设置多个火灾处理机器人进行火灾检测。并预先给每个火灾处理机器人设置火灾检测区域,使得每个火灾处理机器人在预设的火灾检测区域内进行火灾检测。
步骤304、获取移动上述行走机构移动时的移动位置信息,并将上述移动位置信息与上述火灾检测位置信息进行对比,得到对比结果。
其中,上述对比结果包括相同和不相同;对比结果相同说明上述火灾处理机器人移动到上述火灾检测区域,对比结果不相同说明上述火灾处理机器人未移动到火灾检测区域;
步骤306、当对比结果相同时,确定上述火灾处理机器人移动到上述火灾检测区域。
步骤308、进行上述火灾检测区域的火灾检测。
进一步地,上述步骤308,包括以下具体步骤:
(1)通过上述温度传感器采集上述火灾检测区域的温度数据;
(2)通过上述烟雾传感器采集上述火灾检测区域的烟雾数据;
(3)当确定上述温度数据大于预设的温度阈值或者上述烟雾数据大于预设的烟雾浓度阈值时,向上述图像采集装置发送火灾检测图像获取指令,使得上述图像采集装置获取上述火灾检测区域的火灾检测图像;
(4)获取上述图像采集装置发送的火灾检测图像;
(5)查询出预存的火灾图像;
(6)将上述火灾检测图像分别划分为多个图像区域;
(7)从多个上述图像区域中,分别选择k个图像区域进行拼接,得到多个检测子图像,其中,多个上述图像区域由上述火灾检测图像自上而下平均划分得到,m表示上述火灾检测图像划分的图像区域数量;
(8)对得到的上述多个检测子图像以及上述火灾图像进行深度学习,得到上述火灾检测图像和上述火灾图像的特征差值图;
(9)对得到的上述特征差值图进行深度学习,得到上述火灾检测图像和上述火灾图像的对比结果,上述对比结果包括相似和不相似;
(10)当得到上述火灾检测图像和上述火灾图像相似的对比结果时,确定上述火灾检测区域发生火灾,并控制上述灭火装置对上述火灾检测区域进行灭火操作。
具体地,上述步骤(8)描述的上述控制模块对得到的上述多个检测子图像以及上述火灾图像进行深度学习,得到上述火灾检测图像和上述火灾图像的特征差值图,包括以下具体步骤:
(81)对多个上述检测子图像和上述火灾图像进行深度学习,得到多个第一火灾图像特征图和第二火灾图像特征图;
(82)以预设的像素点坐标集合中存储的各像素点坐标为特征值区域中心,按照预设的特征值区域尺寸,分别将当前第一火灾图像特征图和上述第二火灾图像特征图划分为多个第一特征值区域和多个第二特征值区域;
(83)从上述多个第一特征值区域和上述多个第二特征值区域中分别获取特征最大值;
(84)计算分别从具有相同特征值区域中心的第一特征值区域和第二特征值区域中获取的特征最大值的差,得到多个特征差值;
(85)以上述多个特征差值为像素值,按照预设的特征差值图尺寸,生成上述当前第一火灾图像特征图和第二火灾图像特征图的特征差值图。
具体地,上述步骤(81)描述的上述控制模块对多个上述检测子图像和上述火灾图像进行深度学习,得到多个第一火灾图像特征图和第二火灾图像特征图,包括:
通过第一自卷积神经网络对得到的检测子图像进行深度学习,得到多个上述第一火灾图像特征图;
通过第二自卷积神经网络对从图像库中选择的任一火灾图像进行深度学习,得到上述第二火灾图像特征图,其中,上述第二自卷积神经网络和上述第一自卷积神经网络的结构相同。
具体地,上述步骤(9)描述的上述控制模块对得到的上述特征差值图进行深度学习,得到上述火灾检测图像和上述火灾图像的对比结果,包括以下具体步骤:
(91)对得到的每个特征差值图进行深度学习,得到每个上述特征差值图对应的检测子图像与上述火灾图像的相似参数;
(92)确定最大的相似参数作为上述火灾检测图像和上述火灾图像的相似度;
(93)当上述相似度大于等于设定的相似度阈值时,得到上述火灾检测图像和上述火灾图像相似的对比结果。
为了根据火情的大小,针对性的进行灭火操作,上述控制模块控制上述灭火装置对上述火灾检测区域进行灭火操作,包括以下步骤(1)至步骤(5):
(1)向上述灭火装置发出灭火指令,使得火灾处理机器人行走到发生火情的区域的同时,控制上述图像采集装置采集发生火情的区域的火情图像,并通过上述温度传感器采集火情温度数据;
(2)获取上述图像采集装置采集到的上述火情图像和上述火情温度数据;
(3)通过上述无线信号收发模块向外部发出火灾处理机器人所在位置信息和上述火情图像;
(4)当确定上述火情图像中显示的火焰面积小于等于预设的面积阈值且确定采集到的火情温度数据小于等于预设的温度阈值时,向上述火灾处理机器人发送水炮发射指令,控制上述水炮发射;
(5)当确定上述火情图像中显示的火焰面积大于预设的面积阈值和/或确定采集到的火情温度数据大于预设的温度阈值时,向上述火灾处理机器人发送粉末炮发射指令,控制上述粉末炮发射。
在上述步骤中,可以采用现有的任何图像处理技术,来计算图像中的火焰面积,这里不再一一赘述。
在上述步骤(4)描述的当确定上述火情图像中显示的火焰面积小于等于预设的面积阈值且确定采集到的火情温度数据小于等于预设的温度阈值时,向上述火灾处理机器人发送水炮发射指令,控制上述水炮发射之前,上述控制模块还用于:
(1)从火情图像中获取图像属性信息,上述图像属性信息中记录有拍摄距离;
(2)根据图像属性信息中记录的拍摄距离,从预设的拍摄距离列表中确定上述拍摄距离下的火焰面积的面积阈值;其中,上述拍摄距离,表示获取火情图像时,上述图像采集装置与火焰之间的距离;
(3)计算上述火情图像中火焰面积;
(4)对比计算得到的上述火情图像中火焰面积与预设的面积阈值的大小。
通过以上的描述可以看出,通过采集到的火情图像和上述火情温度数据确定火情大小,并根据火情大小确定是通过水还是通过灭火粉末进行灭火操作,可以针对性的进行灭火操作,进一步提高灭火效率,而且,通过无线信号收发模块向外部发出火灾处理机器人所在位置信息和上述火情图像,从而对建筑物内发生的火灾进行即时通告,使建筑物内的人群尽快撤离,保证了生命安全。
参见图4所示的系统结构示意图,本实施例还提出一种火灾处理系统,包括:上述的火灾处理机器人400和与上述火灾处理机器人400交互的火情服务器402;上述火情服务器402,与建筑物内安装的电梯、报警器、显示装置和供电系统连接;
上述火灾处理机器人400,用于获取火灾检测图像,并在根据上述火灾检测图像确定有火灾时,向上述火情服务器402发送火灾处理机器人400所在位置信息和采集到的火灾检测图像,并在根据采集到的火灾检测图像确定有火灾出现时进行灭火操作;
上述火情服务器402,具体用于执行以下步骤:
(1)接收上述火灾处理机器人400发送的火灾处理机器人400所在位置信息和上述灭火机构采集到的火灾检测图像;
(2)控制上述电梯停止运行,并控制上述报警器报警;
(3)根据预存的火灾检测区域与位置信息的对应关系表以及上述火灾处理机器人所在位置信息,确定上述火灾处理机器人所在的火灾检测区域的标识;其中,火灾检测区域与位置信息的对应关系表记录有各火灾检测区域的标识与位置信息的对应关系;
(4)根据上述火灾处理机器人所在的火灾检测区域的标识,生成火灾告警信息,并控制供电系统停止对火灾处理机器人所在火灾检测区域的电路电线进行供电;
(5)将生成的上述火灾告警信息发送到上述显示装置,使得上述显示装置对火灾告警信息进行展示,以让上述建筑物内的人群离开建筑物。
在上述步骤(2)中,控制上述电梯停止运行的目的在于:防止撤离的人群通过运行的电梯撤离而造成人身危险。
在上述步骤(4)中,停止供电系统对火灾处理机器人所在火灾检测区域的电路电线进行供电,可以避免火灾点燃火灾检测区域的电路和电线,降低火灾的损害。
上述电路电线,包括但不限于:照明电路、220V市电接口以及电话线路。
通过以上的描述可以看出,通过设置火情服务器对建筑物内发生的火灾进行即时通告,使建筑物内的人群尽快撤离,保证了生命安全。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应所述以权利要求的保护范围为准。
Claims (10)
1.一种火灾处理机器人,设置在建筑物内,其特征在于,包括:
机器人本体、行走机构、灭火机构和控制机构;所述行走机构安装在所述机器人本体底部,所述控制机构安装在所述机器人本体内部,所述灭火机构安装在所述机器人本体顶部;
所述机器人本体内部还设置有灭火材料容器,所述灭火材料容器与所述灭火机构连接;
所述行走机构,包括履带架及行走电机,履带架上设置有驱动轮、导向轮、若干个支撑轮以及履带;所述驱动轮包括左驱动轮和右驱动轮;所述行走电机用于驱动左驱动轮和右驱动轮转动;所述导向轮具有驱动功能,包括左导向轮和右导向轮;所述左导向轮和所述右导向轮分别在所述行走电机驱动下转动;所述行走机构的履带架上设置有导向轮张紧器,所述导向轮设置所述导向轮张紧器上;
所述控制机构包括:控制模块、无线信号收发模块和定位模块;所述控制模块,分别与所述无线信号收发模块、所述行走机构、所述定位模块和所述灭火机构连接;
所述控制模块根据采集到的火灾检测图像确定有火灾出现时,控制所述火灾处理机器人进行灭火操作;
所述无线信号收发模块,用于根据所述控制模块的控制,使所述火灾处理机器人与外界进行交互;
所述定位模块,设置在所述机器人本体外部,用于向所述控制模块反馈所述火灾处理机器人所在位置信息;
所述灭火机构包括:温度传感器、烟雾传感器、升降旋转平台、灭火装置和图像采集装置;所述温度传感器、所述烟雾传感器、所述灭火装置和所述图像采集装置均设置在所述升降旋转平台上,并分别与所述控制模块连接;
所述温度传感器,用于对所述火灾处理机器人所在区域的温度进行检测;
所述烟雾传感器,用于对所述火灾处理机器人所在区域的烟雾进行检测;
所述灭火装置,用于对出现的火情进行灭火操作;
所述图像采集装置,具有测量与拍摄物体距离功能,用于采集建筑物的火灾检测图像,并将采集到的火灾检测图像发送到所述控制模块,使所述控制模块对所述火灾检测图像进行处理。
2.根据权利要求1所述的火灾处理机器人,其特征在于,所述灭火机构,还包括:第一旋转电机、第二旋转电机和升降电机;所述第一旋转电机、所述第二旋转电机和所述升降电机分别与所述控制模块连接;
所述第一旋转电机和所述升降电机设置在所述升降旋转平台底部,用于控制所述升降旋转平台进行旋转升降;
所述灭火装置包括:水炮和与所述水炮并排设置的粉末炮,所述水炮和所述粉末炮在所述升降旋转平台内侧的一端分别通过软管与所述灭火材料容器中的水箱和灭火粉末箱连接,在所述升降旋转平台外侧一端分别设置有射水孔和灭火粉末发射孔,用于对发生火情的区域发射水和灭火粉末;
所述第二旋转电机设置在所述升降旋转平台内,通过转轴与所述水炮和所述粉末炮连接,用于控制所述水炮和所述粉末炮在灭火操作的过程中俯仰,调节所述水炮和所述粉末炮的发射角度;
所述温度传感器、所述烟雾传感器、所述图像采集装置均设置在所述灭火装置上,随着所述灭火装置的旋转升降而被旋转升降;
所述无线信号收发模块设置在所述升降旋转平台顶部。
3.根据权利要求1所述的火灾处理机器人,其特征在于,在检测建筑物内火情的过程中,所述控制模块具体用于:
获取当前的时间信息;
当根据获取到的所述时间信息确定距离上一次进行火灾检测的时长达到预设的时间长度时,根据预存的火灾检测位置信息,控制所述行走机构移动,使所述火灾处理机器人移动到预设的火灾检测区域;
获取移动所述行走机构移动时的移动位置信息,并将所述移动位置信息与所述火灾检测位置信息进行对比,得到对比结果;其中,所述对比结果包括相同和不相同;对比结果相同说明所述火灾处理机器人移动到所述火灾检测区域,对比结果不相同说明所述火灾处理机器人未移动到火灾检测区域;
当对比结果相同时,确定所述火灾处理机器人移动到所述火灾检测区域;
进行所述火灾检测区域的火灾检测。
4.根据权利要求3所述的火灾处理机器人,其特征在于,所述控制模块进行所述火灾检测区域的火灾检测,包括:
通过所述温度传感器采集所述火灾检测区域的温度数据;
通过所述烟雾传感器采集所述火灾检测区域的烟雾数据;
当确定所述温度数据大于预设的温度阈值或者所述烟雾数据大于预设的烟雾浓度阈值时,向所述图像采集装置发送火灾检测图像获取指令,使得所述图像采集装置获取所述火灾检测区域的火灾检测图像;
获取所述图像采集装置发送的火灾检测图像;
查询出预存的火灾图像;
将所述火灾检测图像分别划分为多个图像区域;
从多个所述图像区域中,分别选择k个图像区域进行拼接,得到多个检测子图像,其中,多个所述图像区域由所述火灾检测图像自上而下平均划分得到,m表示所述火灾检测图像划分的图像区域数量;
对得到的所述多个检测子图像以及所述火灾图像进行深度学习,得到所述火灾检测图像和所述火灾图像的特征差值图;
对得到的所述特征差值图进行深度学习,得到所述火灾检测图像和所述火灾图像的对比结果,所述对比结果包括相似和不相似;
当得到所述火灾检测图像和所述火灾图像相似的对比结果时,确定所述火灾检测区域发生火灾,并控制所述灭火装置对所述火灾检测区域进行灭火操作。
5.根据权利要求4所述的火灾处理机器人,其特征在于,所述控制模块对得到的所述多个检测子图像以及所述火灾图像进行深度学习,得到所述火灾检测图像和所述火灾图像的特征差值图,包括:
对多个所述检测子图像和所述火灾图像进行深度学习,得到多个第一火灾图像特征图和第二火灾图像特征图;
以预设的像素点坐标集合中存储的各像素点坐标为特征值区域中心,按照预设的特征值区域尺寸,分别将当前第一火灾图像特征图和所述第二火灾图像特征图划分为多个第一特征值区域和多个第二特征值区域;
从所述多个第一特征值区域和所述多个第二特征值区域中分别获取特征最大值;
计算分别从具有相同特征值区域中心的第一特征值区域和第二特征值区域中获取的特征最大值的差,得到多个特征差值;
以所述多个特征差值为像素值,按照预设的特征差值图尺寸,生成所述当前第一火灾图像特征图和第二火灾图像特征图的特征差值图。
6.根据权利要求5所述的火灾处理机器人,其特征在于,所述控制模块对多个所述检测子图像和所述火灾图像进行深度学习,得到多个第一火灾图像特征图和第二火灾图像特征图,包括:
通过第一自卷积神经网络对得到的检测子图像进行深度学习,得到多个所述第一火灾图像特征图;
通过第二自卷积神经网络对从图像库中选择的任一火灾图像进行深度学习,得到所述第二火灾图像特征图,其中,所述第二自卷积神经网络和所述第一自卷积神经网络的结构相同。
7.根据权利要求4所述的火灾处理机器人,其特征在于,所述控制模块对得到的所述特征差值图进行深度学习,得到所述火灾检测图像和所述火灾图像的对比结果,包括:
对得到的每个特征差值图进行深度学习,得到每个所述特征差值图对应的检测子图像与所述火灾图像的相似参数;
确定最大的相似参数作为所述火灾检测图像和所述火灾图像的相似度;
当所述相似度大于等于设定的相似度阈值时,得到所述火灾检测图像和所述火灾图像相似的对比结果。
8.根据权利要求4所述的火灾处理机器人,其特征在于,所述控制模块控制所述灭火装置对所述火灾检测区域进行灭火操作,包括:
向所述灭火装置发出灭火指令,使得火灾处理机器人行走到发生火情的区域的同时,控制所述图像采集装置采集发生火情的区域的火情图像,并通过所述温度传感器采集火情温度数据;
获取所述图像采集装置采集到的所述火情图像和所述火情温度数据;
通过所述无线信号收发模块向外部发出火灾处理机器人所在位置信息和所述火情图像;
当确定所述火情图像中显示的火焰面积小于等于预设的面积阈值且确定采集到的火情温度数据小于等于预设的温度阈值时,向所述火灾处理机器人发送水炮发射指令,控制所述水炮发射;
当确定所述火情图像中显示的火焰面积大于预设的面积阈值和/或确定采集到的火情温度数据大于预设的温度阈值时,向所述火灾处理机器人发送粉末炮发射指令,控制所述粉末炮发射。
9.根据权利要求8所述的火灾处理机器人,其特征在于,在当确定所述火情图像中显示的火焰面积小于等于预设的面积阈值且确定采集到的火情温度数据小于等于预设的温度阈值时,向所述火灾处理机器人发送水炮发射指令,控制所述水炮发射之前,所述控制模块还用于:
从火情图像中获取图像属性信息,所述图像属性信息中记录有拍摄距离;
根据图像属性信息中记录的拍摄距离,从预设的拍摄距离列表中确定所述拍摄距离下的火焰面积的面积阈值;其中,所述拍摄距离,表示获取火情图像时,所述图像采集装置与火焰之间的距离;
计算所述火情图像中火焰面积;
对比计算得到的所述火情图像中火焰面积与预设的面积阈值的大小。
10.一种火灾处理系统,其特征在于,包括:权利要求1-9任一项所述的火灾处理机器人和与所述火灾处理机器人交互的火情服务器;所述火情服务器,与建筑物内安装的电梯、报警器、显示装置和供电系统连接;
所述火灾处理机器人,用于获取火灾检测图像,并在根据所述火灾检测图像确定有火灾时,向所述火情服务器发送火灾处理机器人所在位置信息和采集到的火灾检测图像,并在根据采集到的火灾检测图像确定有火灾出现时进行灭火操作;
所述火情服务器,具体用于:
接收所述火灾处理机器人发送的火灾处理机器人所在位置信息和所述灭火机构采集到的火灾检测图像;
控制所述电梯停止运行,并控制所述报警器报警;
根据预存的火灾检测区域与位置信息的对应关系表以及所述火灾处理机器人所在位置信息,确定所述火灾处理机器人所在的火灾检测区域的标识;其中,火灾检测区域与位置信息的对应关系表记录有各火灾检测区域的标识与位置信息的对应关系;
根据所述火灾处理机器人所在的火灾检测区域的标识,生成火灾告警信息,并控制上述供电系统停止对火灾处理机器人所在火灾检测区域的电路电线进行供电;
将生成的所述火灾告警信息发送到所述显示装置,使得所述显示装置对火灾告警信息进行展示,以让所述建筑物内的人群离开建筑物。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710251350.9A CN106955443A (zh) | 2017-04-18 | 2017-04-18 | 一种火灾处理机器人和系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710251350.9A CN106955443A (zh) | 2017-04-18 | 2017-04-18 | 一种火灾处理机器人和系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN106955443A true CN106955443A (zh) | 2017-07-18 |
Family
ID=59483685
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710251350.9A Pending CN106955443A (zh) | 2017-04-18 | 2017-04-18 | 一种火灾处理机器人和系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106955443A (zh) |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108261705A (zh) * | 2018-03-01 | 2018-07-10 | 盐城融凡纺织制衣有限公司 | 一种纺织车间用防火装置 |
CN108416963A (zh) * | 2018-05-04 | 2018-08-17 | 湖北民族学院 | 基于深度学习的森林火灾预警方法及系统 |
CN109331389A (zh) * | 2018-11-12 | 2019-02-15 | 重庆知遨科技有限公司 | 一种基于多传感器融合的消防机器人动作实时监测方法 |
CN109985337A (zh) * | 2017-12-29 | 2019-07-09 | 重庆西电普华智能机器人技术有限公司 | 一种用于油库巡检的多功能机器人设备 |
CN110162113A (zh) * | 2018-02-13 | 2019-08-23 | 中国石油化工股份有限公司 | 相邻罐温度控制系统及相邻罐温度控制方法 |
CN110314320A (zh) * | 2019-07-03 | 2019-10-11 | 浙江好得电气有限公司 | 一种智能干粉灭火控制系统 |
CN110910604A (zh) * | 2019-11-21 | 2020-03-24 | 北京都是科技有限公司 | 用于火灾报警的监控方法、系统以及装置 |
CN111202933A (zh) * | 2020-01-09 | 2020-05-29 | 海达建设集团有限公司 | 一种室内自动喷水灭火系统及灭火方法 |
CN111420334A (zh) * | 2020-04-03 | 2020-07-17 | 西华大学 | 基于互联网的家庭用智慧移动消防测控系统及使用方法 |
CN112107812A (zh) * | 2020-05-21 | 2020-12-22 | 西南科技大学 | 一种基于深度卷积神经网络的森林火灾消防方法及系统 |
CN112370694A (zh) * | 2020-11-17 | 2021-02-19 | 宁波鼎翔消防技术有限公司 | 一种基于无人机和机器人的协同灭火方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102078670A (zh) * | 2011-01-25 | 2011-06-01 | 上海市金山区青少年活动中心 | 智能灭火机器人 |
CN103191533A (zh) * | 2013-03-25 | 2013-07-10 | 武汉大学 | 一种智能火灾监控疏散指示系统及方法 |
CN104299351A (zh) * | 2014-10-22 | 2015-01-21 | 常州大学 | 智能预警灭火机器人 |
CN204452091U (zh) * | 2015-01-28 | 2015-07-08 | 蔡乌力吉 | 一种用于电动汽车的履带式充电机器人 |
-
2017
- 2017-04-18 CN CN201710251350.9A patent/CN106955443A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102078670A (zh) * | 2011-01-25 | 2011-06-01 | 上海市金山区青少年活动中心 | 智能灭火机器人 |
CN103191533A (zh) * | 2013-03-25 | 2013-07-10 | 武汉大学 | 一种智能火灾监控疏散指示系统及方法 |
CN104299351A (zh) * | 2014-10-22 | 2015-01-21 | 常州大学 | 智能预警灭火机器人 |
CN204452091U (zh) * | 2015-01-28 | 2015-07-08 | 蔡乌力吉 | 一种用于电动汽车的履带式充电机器人 |
Non-Patent Citations (2)
Title |
---|
吴龙标: "《火灾探测与控制工程》", 30 September 2013, 中国科学技术大学出版社 * |
陈俊周: "基于级联卷积神经网络的视频动态烟雾检测", 《电子科技大学学报》 * |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109985337A (zh) * | 2017-12-29 | 2019-07-09 | 重庆西电普华智能机器人技术有限公司 | 一种用于油库巡检的多功能机器人设备 |
CN110162113A (zh) * | 2018-02-13 | 2019-08-23 | 中国石油化工股份有限公司 | 相邻罐温度控制系统及相邻罐温度控制方法 |
CN108261705A (zh) * | 2018-03-01 | 2018-07-10 | 盐城融凡纺织制衣有限公司 | 一种纺织车间用防火装置 |
CN108416963A (zh) * | 2018-05-04 | 2018-08-17 | 湖北民族学院 | 基于深度学习的森林火灾预警方法及系统 |
CN109331389A (zh) * | 2018-11-12 | 2019-02-15 | 重庆知遨科技有限公司 | 一种基于多传感器融合的消防机器人动作实时监测方法 |
CN110314320B (zh) * | 2019-07-03 | 2021-06-22 | 浙江好得电气有限公司 | 一种智能干粉灭火控制系统 |
CN110314320A (zh) * | 2019-07-03 | 2019-10-11 | 浙江好得电气有限公司 | 一种智能干粉灭火控制系统 |
CN110910604A (zh) * | 2019-11-21 | 2020-03-24 | 北京都是科技有限公司 | 用于火灾报警的监控方法、系统以及装置 |
CN111202933A (zh) * | 2020-01-09 | 2020-05-29 | 海达建设集团有限公司 | 一种室内自动喷水灭火系统及灭火方法 |
CN111420334A (zh) * | 2020-04-03 | 2020-07-17 | 西华大学 | 基于互联网的家庭用智慧移动消防测控系统及使用方法 |
CN112107812A (zh) * | 2020-05-21 | 2020-12-22 | 西南科技大学 | 一种基于深度卷积神经网络的森林火灾消防方法及系统 |
CN112370694A (zh) * | 2020-11-17 | 2021-02-19 | 宁波鼎翔消防技术有限公司 | 一种基于无人机和机器人的协同灭火方法 |
CN112370694B (zh) * | 2020-11-17 | 2022-07-01 | 宁波鼎翔消防技术有限公司 | 一种基于无人机和机器人的协同灭火方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106955443A (zh) | 一种火灾处理机器人和系统 | |
CN108615321B (zh) | 基于雷达侦测及视频图像行为分析的安防预警系统及方法 | |
CN107065932B (zh) | 一种灾情探测四旋翼无人机的控制方法 | |
US10896599B1 (en) | Immersive virtual reality detection and alerting technology | |
CN109240311B (zh) | 基于智能机器人的室外电力场地施工作业监督方法 | |
CN104299351B (zh) | 智能预警灭火机器人 | |
RU2472226C2 (ru) | Устройство контроля за местонахождением лиц | |
CN106485868B (zh) | 火情的监测方法、系统和火情的监测服务器 | |
US11917333B2 (en) | Systems and methods for personnel location at a drilling site | |
US11288936B1 (en) | Emergency incident detection, response, and mitigation using autonomous drones | |
CN107390676A (zh) | 隧道巡检机器人及隧道巡检系统 | |
CN105600693B (zh) | 一种塔式起重机的监控系统 | |
CN110521716A (zh) | 一种有害生物驱赶方法、装置、设备和系统 | |
KR102335994B1 (ko) | 드론 감시를 위한 촬영 감시 장치들의 통합 제어 장치 | |
CN111739252A (zh) | 一种火灾监测及自动灭火系统及其工作方法 | |
CN105708025A (zh) | 一种多功能消防头盔 | |
JP7406746B2 (ja) | 監視装置、監視プログラム、記憶媒体、および、監視方法 | |
US11410519B2 (en) | Systems and methods for generating hazard alerts using quantitative scoring | |
KR101519974B1 (ko) | 주변정보를 감지하는 감시 카메라 및 이를 이용한 지능형 경보 시스템 | |
CN209699082U (zh) | 一种智能巡检机器人 | |
CN109323694A (zh) | 一种基于无人机的室内定位以及搜救系统 | |
CN114913663A (zh) | 异常检测方法、装置、计算机设备和存储介质 | |
CN106815590A (zh) | 一种电缆架和电缆管理系统 | |
CN109785574B (zh) | 一种基于深度学习的火灾检测方法 | |
CN106740177A (zh) | 一种充电桩 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20170718 |