具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述。可以理解的是,此处所描述的具体实施例仅用于解释相关申请,而非对该申请的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与有关申请相关的部分。
本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外,术语“包括”或“具有”及其任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、系统、产品或设备固有的其它步骤或单元。
对于相关领域普通技术人员已知的技术、方法和设备可能不作详细讨论,但在适当情况下,所述技术、方法和设备应当被视为说明书的一部分。
在这里示出和讨论的所有例子中,任何具体值应被解释为仅仅是示例性的,而不是作为限制。因此,示例性实施例的其它例子可以具有不同的值。
应当注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步讨论。
目前在部分建筑中,安装有消防应急广播系统,能够在发生火灾时播报预定的语音信息、或者相关工作人员口述警情、应对方法(如逃生路径)等信息。然而,并不是所有建筑都安装有消防应急广播系统,且广播系统的扬声器只安装在大厅、走廊等公共空间,因此,未安装消防应急广播系统的建筑的被困人员、或者处于房间等空间的被困人员无法得到相应的警情、应对方法;且消防应急广播系统只能输出语音信息,而无法提供诸如视频信息、路径信息等信息。虽然被困人员可以与消防指挥中心取得联系、获得指导,但被困人数较多时,消防工作人员很可能无法及时地对每一个被困人员进行指导。
为了解决上述问题,如图2所示,本申请实施例提供了一种消防救援通信方法,该方法可以由指导终端1000、用户终端2000a(处于警情区域内)或2000b(处于警情区域外)、服务器3000共同实现。在发生火灾后,指导终端1000可以获取并显示警情区域用户位置信息、警情信息,获取指导人员对处于警情区域的一个或多个位置的被困用户的指导信息,通过服务器3000发送给处于警情区域相应位置的用户终端2000a,或在与用户终端建立通信连接后通过通信连接发送给处于警情区域相应位置的用户终端2000a。服务器3000可以在接收到警情信息后获取与警情区域相关的用户的身份信息、位置信息、对应的用户终端2000a或2000b等信息,并发送给指导终端1000;可以建立指导终端1000与用户终端2000a或2000b的通信连接,或者完成指导终端1000与用户终端2000a或2000b的通信信息的中转。用户终端2000a或2000b是与警情区域具有关联关系的用户的用户终端,用户终端2000a在警情发生时处于警情区域内,用户终端2000b在警情发生时不处于警情区域,但至少一个预设位置处于警情区域。用户终端2000a或2000b可以在接收到警情信息后,上报位置信息;可以在接收到指导信息后,输出指导信息。
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述。
本申请的一实施例提供了一种消防救援通信方法,应用于指导终端中。其中,指导终端可以为各种电子设备,包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、个人数字助理(Personal Digital Assistant,PDA)、平板电脑(PAD)、便携式多媒体播放器(Portable MediaPlayer,PMP)、车载电子设备(例如车载导航电子设备)、可穿戴式设备等等的移动电子设备以及诸如数字电视(TV)、台式计算机等等的固定电子设备。可以在各级消防指挥中心以及其他消防救援指挥部门部署指导终端,使得消防救援指挥工作人员可以使用指导终端对警情区域的被困用户进行指导,提高被困用户获救概率。
图1为消防救援通信方法的一实现流程示意图,如图1所示,该方法包括以下步骤:
步骤107、获取目标内容信息以及第一目标特征信息,所述目标内容信息包括第一警情信息、指导内容信息、获取信息指令的至少一种,所述第一目标特征信息包含至少一个目标特征,所述目标特征包括以下至少之一:目标位置特征、目标年龄特征、目标性别特征、目标健康特征、目标关系特征、目标消防设备特征。
步骤108、将所述目标内容信息发送至满足所述第一目标特征信息的全部或部分第一目标用户的用户终端。
指导终端获取目标内容信息以及第一目标特征信息,并将所述目标内容信息发送至满足所述第一目标特征信息的全部或部分第一目标用户的用户终端。例如,指导终端可以向当前处于警情区域某些楼层或某一个区域或某种位置类型(如房间、楼梯、走廊等)的全部或部分用户、某个年龄段或性别或健康状况的全部或部分用户、警情区域用户的关联用户、预备有个人消防设备的全部或部分用户等发送特定的指导内容,如相应位置的警情信息、逃生路径、逃生方法(如逃生时的姿势)等;和/或发送获取信息指令,以从用户终端中获取警情信息、位置信息、年龄信息、性别信息、健康信息、关联用户信息、消防设备信息等的至少一种。
所述第一用户是与警情区域相关的用户,可以包括第二用户、第三用户和/或第四用户。所述第二用户包括警情发生时处于警情区域的用户和/或至少一个预设位置处于警情区域的用户。所述第三用户是所述第二用户的关联用户,或者警情发生时处于警情区域的用户的关联用户。所述第四用户是警情区域外的附近的群众用户,警情发生时处于警情区域的所述第二用户可以在成功逃生后成为所述第四用户。
一个用户的关联用户,是与该用户具有关联关系的用户,关联关系可以包括直系亲属关系、紧急联系人关系(一个用户将另一个用户添加到用户终端的紧急联系人列表中,或者双方互相将对方添加到用户终端的紧急联系人列表中)、监护人与被监护人关系等的至少一种。
指导人员可以从119报警电话等渠道获得警情地点等警情信息,指导终端或服务器可以自动将警情地点的附近区域(如警情地点所属建筑、警情地点一定区域内的所有建筑等)作为警情区域,指导终端可以通过警情区域获取界面等方式获取指导人员人工设置的警情区域。
用户可以通过用户终端的用户信息设置界面填写位置信息(如居住地址、工作地址、学习地址等经常滞留的位置)、身份信息(如姓名、身份证号码等)、手机号码、年龄信息、性别信息、健康信息、关系信息(如直系亲属、紧急联系人、监护人/被监护人等)、消防设备信息(每一个消防设备的消防设备名称、数量、存储位置等)等第一用户信息;在警情发生时用户终端可以通过识别语音、手势等信息,获得室内位置等第四用户信息;在警情发生时,不在警情区域的第三用户可以为具有关联关系的第二用户设置身份信息、健康信息、位置信息等第五用户信息;用户终端在获得用户信息(第一用户信息、第四用户信息和/或第五用户信息)后将用户信息发送给服务器和/或指导终端,服务器和/或指导终端将接收到的用户信息更新到第一用户信息集合(第一用户信息集合可以保存在数据库和/或文件系统)中,使得在警情发生时,指导终端和/或服务器可以根据警情信息以及所述第一用户信息集合确定第一用户集合、第二用户集合、第三用户集合和/或第四用户集合,所述第一用户集合包括当前警情对应的所有所述第一用户,所述第二用户集合包括当前警情对应的所有所述第二用户,所述第三用户集合包括当前警情对应的所有所述第三用户,所述第四用户集合包括当前警情对应的所有所述第四用户。
在步骤107中,所述目标位置特征,可以包括一个或多个目标位置,目标位置可以为警情区域内的目标位置,如发生警情的建筑的特定楼层、区域、位置、位置类型等的至少一种;目标位置也可以为警情区域外的附近区域。一个建筑或建筑的某一个楼层可以分为多个区域,如按地理位置分为东南西北等区域,按功能分为娱乐、住宿、购物等区域;建筑内的一个位置,可以为一个狭小的区域,如一个房间。位置类型可以为房间、走廊、楼梯、电梯等;房间还可以进一步分为卧室、卫生间、客厅、教室、会议室、工作室、商场、餐厅、宿舍、厨房、仓库、厂房等。
所述目标年龄特征,可以包含一个或多个目标年龄段,如每十年一个年龄段,或者分为幼年、壮年、老年等年龄段。
所述目标性别特征,包含男或女性别。
所述目标健康特征,可以包含一个或多个目标健康类别,目标健康类别可以包括健康与行动不便两类,或者包括健康、受伤、怀孕等类别。
所述目标关系特征,可以包含一个或多个目标关系,目标关系可以为直系亲属关系、紧急联系人关系、监护人与被监护人关系等的至少一种。
所述目标消防设备特征,可以包含一个或多个目标消防设备,目标消防设备可以为消防面具、消防绳、灭火毯、干粉灭火器、干冰灭火器、安全锤等消防设备。
所述第一警情信息可以包括警情地点、警情区域、警情等级、起火原因、火灾种类、烟火信息、警情现场语音、图片和/或视频等的至少一种。其中,警情地点表示发生警情的位置,如某幢楼的某个房间。警情区域为警情影响或可能会影响的区域,如某一幢建筑的部分楼层、整幢建筑、包含多幢建筑的区域等。警情等级可以是火灾危险等级,火灾危险等级包含4项8级,分别为轻危险级、中危险级、严重危险级、仓库危险级,也可以是其他人为设定的等级。起火原因可以分为生活火灾、电器火灾、自然火灾、人为纵火。可以根据可燃物将火灾种类分为A类火灾(固体物质火灾)、B类火灾(液体或可熔化的固体物质火灾)、C类火灾(气体火灾)、D类火灾(金属火灾)、E类火灾(带电火灾)、F类火灾(烹饪器具内的烹饪物火灾)。烟火信息可以包括火势大小、火势蔓延速度、火势发展速度、烟雾浓度、烟雾高度、烟雾毒性、烟雾扩散速度、烟雾发展速度等的至少一种;火势大小表示当前的火灾的火势大小,可以分为数个等级,例如,根据火势覆盖的区域大小划分等级,划分为小块区域(如1平米以内)、中小房间、数个房间、一层楼或连续多层楼的部分区域、多层楼、整幢建筑,等等,或者根据火苗覆盖的特定空间的比例来分等级,如火苗覆盖房间的比例作为火苗在该房间的火势大小、火苗覆盖楼层的比例作为火苗在该楼层的火势大小,等等;火势蔓延速度表示火势扩散到未着火区域的速度,火势往不同方向的蔓延速度可能不同;火势发展速度表示一个位置的火势成长速度,如从小火苗成长为大火的速度;烟雾浓度表示烟雾的浓密程度,可以通过可视距离等指标描述烟雾浓度;烟雾高度可以表示为烟雾浓度低于预设阈值的最高的高度,烟雾高度低,则被困用户都要弯腰前进甚至匍匐前进;烟雾毒性表示烟雾对人体的毒害程度,烟雾浓度高、或者某些颜色鲜艳的烟雾毒性高;烟雾扩散速度表示烟雾向低烟雾浓度的区域的扩散速度;烟雾发展速度表示一个位置的烟雾的浓度的变化速度。警情现场语音、图片和/或视频可以为处于警情区域内和/或处于警情区域外的附近用户的用户终端通过语音拾取或摄像头获取的警情现场的语音、图片和/或视频数据。
指导终端可以通过警情设置界面和/或接收用户终端发送的包含现场语音、图片和/或视频等信息的第二警情信息,得到第三警情信息。所述第三警情信息包含整个警情区域的警情信息,如包括各个位置的火势大小、烟雾浓度等信息。所述第三警情信息可以包括自警情发生起至警情结束的多个时刻的警情信息,也可以只包括当前时刻的警情信息。指导终端和/或服务器可以根据警情区域的用户终端发送的所述第二警情信息,自动更新所述第三警情信息,和/或显示所述第二警情信息,并接受指导人员对所述第三警情信息的更改指令,更新所述第三警情信息。工作人员可以通过119火警报警平台等渠道获取警情信息,通过指导终端的警情设置界面将警情信息输入指导终端。可以将所述第三警情信息的全部或部分信息作为所述第一警情信息,如将所述第三警情信息的警情地点、警情区域、警情等级、起火原因、火灾种类,以及一定区域或位置的烟火信息作为所述第一警情信息,例如,对于处于某楼梯的用户,可以只向其发送包含该楼梯的烟火信息的警情信息,而不必发送其他区域的警情信息。
所述指导内容信息,可以包括指导人员对至少一个被困用户的逃生路径、逃生方法(如防烟方法、防热方法、消防设备的使用方法、躲藏方法、移动方法等)等的指导内容。
所述指导内容信息可以为文字信息、语音信息、图片信息、视频信息、地图信息、路径信息、网络链接信息、结构化或半结构化文档等的至少一种。语音信息、视频信息可以为实时语音信息、实时视频信息,可以使用实时传输协议(如RTP协议)实时传输音视频信息,用户终端通过实时传输协议实时接收与播放音视频信息;语音信息、视频信息可以为录制好(在警情时针对警情而录制的、或者警情之前就录制好的,等等)的语音文件、视频文件,指导人员可以录制一段语音或视频,并重复地输出到一个或多个位置的用户终端中。结构化或半结构化文档,如json格式、xml格式等格式的文档,用于存储结构化或半结构化的信息。
所述获取信息指令,可以包括获取位置信息指令、获取警情信息指令、获取健康信息指令、获取身份信息指令等的至少一种,分别用于指示用户终端获取位置信息、警情信息、健康信息、身份信息等信息,并在获得信息后发回给指导终端。例如,指导人员可以向特定位置的用户终端发出获取图像指令,使得用户终端自动获取图像,并发送给指导终端,从而使得指导人员可以方便地获得现场图像,从而了解现场警情、人员情况等,从而更好地进行指导。
指导终端可以在显示界面中显示至少一个目标特征获取控件,以获取所述第一目标特征信息。具体的,指导终端可以在显示界面中显示位置获取控件、年龄获取控件、性别获取控件、健康状况获取控件、关系获取控件、消防设备获取控件等的至少一种,以分别获取所述目标位置特征、所述目标年龄特征、所述目标性别特征、所述目标健康特征、所述目标关系特征、所述目标消防设备特征等信息。
目标特征获取控件可以为列表选择控件(如ListBox控件、DropDownList控件、RadioButton控件、CheckBox控件等),提供多个可选择项供指导人员选择,可选择项可以是技术人员预设的,如年龄、性别、健康状况、关系、消防设备、获取信息指令等;可以是根据警情信息从服务器获取相关信息,得到可选择项,如获得建筑楼层、区域、位置类型等信息作为可选择项;可以通过控件获取可选择项,如指导人员通过控件输入建筑楼层、区域、位置类型等信息。例如,对于位置获取控件,可以显示多个位置选项,使得指导人员通过诸如多选、框选的方法选中一个或多个位置选项,将被选中的位置作为所述目标位置信息。指导终端可以以位置列表的形式显示多个位置选项,指导终端可以显示发生火灾的建筑的全部或部分楼层的楼层列表、全部或部分区域的区域列表、全部或部分位置的位置列表(如房间列表)、全部或部分位置类型的位置类型列表的至少一种,指导人员可以选择列表项中的一个或多个选项对应的位置作为目标位置。
目标特征获取控件还可以为表格控件,指导终端可以根据楼层、区域、位置类型等的全部或部分,多维显示位置选项,例如,指导终端可以按楼层以及区域、楼层以及位置类型等,显示位置表格,指导人员可以选择位置表格中的一个或多个单元格对应的位置作为目标位置。指导终端可以将被困人员根据被困人员的实时位置显示在建筑列表的相应列表项、或建筑表格的相应单元格中,从而使指导人员能够直观地了解每个位置的被困人员情况。
目标特征获取控件还可以为文本输入控件,将文本输入控件获取的文本内容作为第一目标特征信息。例如,对于位置获取控件,“f10-12”表示10至12楼,“f7,f8,f9”表示7、8、9楼,“f9房间”表示9楼的所有房间。
指导终端可以在显示界面中显示至少一个目标内容获取控件,以获取所述目标内容信息。具体的,指导终端可以在显示界面中显示警情信息获取控件、指导内容输入控件、指令输入控件等的至少一种,以分别获取所述第一警情信息、所述指导内容信息、所述获取信息指令等信息。
警情信息获取控件,用于获取警情地点、警情区域、警情等级、起火原因、火灾种类、烟火信息等至少一种警情信息。
指导内容输入控件,用于获取文字、语音、图片、视频等形式的指导内容信息。可以接受指导人员输入文字、语音等信息,或者接受指导人员的拖拽、复制等操作,获取被拖拽、复制的内容作为所述指导内容信息,如指导终端和/或服务器中预存有各种警情的指导内容文件,指导人员可以选择合适的文件,并通过拖拽的方式输入到指导内容输入控件,从而发送给相应的用户终端。
进一步地,指导终端保存有目标特征信息列表,所述目标特征信息列表包含一定数量的第二目标特征信息,指导终端显示所述目标特征信息列表,使得指导人员可以选择所述目标特征信息列表中的至少一个所述第二目标特征信息作为待发送的目标内容信息的所述第一目标特征信息。例如,技术人员或者指导人员可以预先在指导终端中设置多个所述第二目标特征信息,如根据位置类型、年龄、性别等预设多个所述第二目标特征信息;在警情发生时,指导人员可以直接选取其中的一个或多个所述第二目标特征信息作为所述第一目标特征信息,而不必通过操作控件设置目标特征,从而提高操作效率。
进一步地,指导终端可以保存所述第一目标特征信息到所述目标特征信息列表。指导终端可以将每一个获取到的所述第一目标特征信息直接添加到所述目标特征信息列表;指导终端也可以在每一次获取到所述第一目标特征信息时,与所述目标特征信息列表中的每一个所述第二目标特征信息进行匹配,当所述第一目标特征信息与所述目标特征信息列表中的每一个所述第二目标特征信息都不同时,将其添加到所述目标特征信息列表中;指导终端也可以在接收到目标特征信息保存指令(如可以通过检测指导人员对下拉菜单、目标特征信息保存控件、快捷键等的操作获取所述目标特征信息保存指令)后将所述第一目标特征信息添加到所述目标特征信息列表中。指导终端可以按顺序显示所述目标特征信息列表中的所述第二目标特征信息,具体的,可以按指导人员对所述第二目标特征信息第一次发送所述目标内容信息的时间、最近一次发送所述目标内容信息的时间、发送所述目标内容信息次数等的至少一种进行排序。
进一步地,指导终端接收对所述第二目标特征信息的命名指令,获取所述第二目标特征信息的名称,并在显示所述第二目标特征信息时,显示名称。
指导终端和/或服务器中可以预存有多种消防应急处理教程文件(如语音文件、视频文件、富文本文档文件、网络链接等),如各种消防设备的的使用方法的教程文件、防烟方法文件、防热方法文件等;指导终端可以在界面中显示消防应急处理教程文件列表、或者消防应急处理教程文件的获取入口(如提供搜索框,通过搜索框获取关键词,并检索包含关键词的文件),使得指导人员可以通过诸如拖拽、复制等操作将教程文件输入到指导内容信息获取控件中,从而发送给对应的用户终端。指导终端可以只发送文件标识(文件标识与文件具有一一对应的关系)给用户终端,用户终端在接收到文件标识后,向服务器发出查询,获得文件标识对应的文件数据;或者服务器在接收到指导终端发送的消息中的文件标识后,获取文件标识对应的文件的文件数据,直接发送给对应的用户终端。指导终端也可以直接发送文件数据给用户终端。
进一步地,指导终端和/或服务器可以根据火灾场景类型(如每一个警情等级和/或起火原因和/或火灾种类对应一种火灾场景类型)组织存储消防应急处理教程文件,具体的,可以存储消防应急处理教程文件与火灾场景类型的对应关系(一个消防应急处理教程文件可以对应多个火灾场景类型);在警情发生时,获取警情对应的火灾场景类型,并根据火灾场景类型,获取并显示对应的消防应急处理教程文件列表。使得警情发生时,指导人员可以快速地将合适的指导教程发送给相应的用户终端。
进一步地,指导终端和/或服务器可以根据目标特征信息组织存储消防应急处理教程文件,具体的,可以存储消防应急处理教程文件与目标特征信息的对应关系;在确定所述第一目标特征信息后,根据目标特征信息与消防应急处理教程文件的对应关系,获取并显示对应的消防应急处理教程文件列表。
进一步地,指导终端可以获取警情地点和/或警情区域的消防设备,获取并显示消防设备对应的教程文件列表,以供指导人员快速准确地选择合适的教程文件给用户,避免指导人员发送警情区域不包含的消防设备的教程文件给用户。警情地点和/或警情区域的消防设备,可以包含建筑中的消防设备(如灭火器等)、和/或个人的消防设备(如消防面具、消防绳等)。
指导终端可以同时在显示界面中显示所述目标特征获取控件、所述目标内容获取控件,也可以在确定所述第一目标特征信息后,自动显示所述目标内容获取控件,或者在接收到用户指令后显示所述目标内容获取控件。
指导终端也可以在确定所述第一目标特征信息后,通过语音采集单元获取语音信息(可以设计为自动获取语音信息,也可以设计为在接收到指令后获取语音信息),作为所述目标内容信息。指导终端可以通过实时传输协议实时传输语音信息,也可以在接收到停止录制语音指令后发送录制的语音文件。
在步骤108中,指导终端可以在获取目标内容信息以及第一目标特征信息后,将所述目标内容信息发送至满足所述第一目标特征信息的全部或部分第一目标用户的用户终端。指导终端可以在接收到发送指令后,将所述目标内容信息发送至满足所述第一目标特征信息的全部或部分第一目标用户的用户终端。指导终端可以通过检测用户对发送控件的输入、检测预定的发送事件(如基于键盘按键的发送快捷键被触发)获取所述发送指令。指导终端也可以在获取语音数据时,通过实时传输协议自动、实时地将语音信息发送到对应的用户终端。
指导终端可以将所述目标内容信息和所述第一目标特征信息发送给服务器,使得服务器根据所述第一目标特征信息、以及第二用户信息集合(可以从所述第一用户信息集合中获得所述第一用户集合的所有第一用户的用户信息,作为所述第二用户信息集合),获得满足所述第一目标特征信息的第一目标用户的用户终端,并将所述目标内容信息发送给所述第一目标用户的用户终端。
在发生警情后,服务器也可以为指导终端和所述第一用户的用户终端建立通信连接(如socket连接),并获得所述第二用户信息集合(当所述第一用户信息集合保存在服务器中时,服务器可以从所述第一用户信息集合中获取所述第二用户信息集合,并发送给指导终端;当所述第一用户信息集合保存在指导终端中时,指导终端可以直接从所述第一用户信息集合中获取所述第二用户信息集合),使得指导终端可以直接根据所述第一目标特征信息、以及所述第二用户信息集合,获得满足所述第一目标特征信息的第一目标用户的用户终端,并将所述目标内容信息发送给所述第一目标用户的用户终端。
在警情发生时,用户的位置信息等信息可能会发生变化,因此,可以在每次发送所述目标内容信息时,指导终端和/或服务器需要根据所述第一目标特征信息以及最新的用户信息,得到当前满足所述第一目标特征信息的第一目标用户。
本公开实施例中,指导人员可以通过设置目标用户的特征信息,将指导信息等信息发送给对应的用户终端,从而实现对警情现场被困用户的精准指导,避免警情现场被困人员不了解警情、或者因为警情而出现慌乱,导致无法做出正确的应对。通过设置目标位置信息,使得指导人员可以对目标位置的被困用户发送指导信息,如对特定楼层的全部用户、特定区域的全部用户、特定位置类型(如当前处于房间内的用户)的全部用户发送指导信息。例如,10楼发生火灾,指导人员可以对10楼及以下的全部用户发送指导信息,使得他们往下逃生,对10楼以上的全部用户发送指导信息,使得他们往上逃生;火势很大时,指导人员可以向处于房间内的全部用户发送就地躲藏等待救援的指导信息;每个区域的火情不一样、逃生路径不一样,指导人员可以为各个区域的被困用户发送不同的逃生路径等指导信息。
本公开实施例中,不需要预先建立消防广播系统,就可以将指导内容发送给对应位置的用户终端。可以直接将信息输出到用户,而不只是消防广播系统覆盖的公共区域。可以向用户发布语音信息、视频信息、路径信息等多种格式的信息。指导终端可以接受指导人员对目标用户特征的精细设置,既可以向大范围的用户发布通用的信息,也可以向小区域的用户发布精准的信息,从而方便快捷地向被困用户提供更具有针对性的指导内容。将指导内容发送给目标位置的被困人员,即使指导人员没有身处现场,也可以达到一个指导人员在目标位置现场指挥人群逃生的效果。
图3为消防救援通信方法的一实现流程示意图,如图3所示,该方法包括以下步骤:
步骤111、获取第三警情信息,所述第三警情信息包括警情地点、警情区域、警情等级、起火原因、火灾种类、烟火信息、警情现场语音、图片和/或视频等的至少一种。
指导终端可以提供警情设置界面,所述警情设置界面包含警情地点、警情区域、警情等级、起火原因、火灾种类、烟火信息等的至少一种的获取控件,以获取警情地点、警情区域、警情等级、起火原因、火灾种类、烟火信息等警情信息。
工作人员可以通过119火警平台及其他渠道获得警情信息后,通过所述警情设置界面设置所述第三警情信息。
指导终端还可以接收消防报警系统发送的警情位置等警情信息,并将接收到的警情信息更新到所述第三警情信息中(如创建新的第三警情信息,或者在其与现有的某一个第三警情信息匹配时,更新相应的第三警情信息,如将新的警情信息添加到该第三警情信息中,或者保持该第三警情信息不变,等等)。消防报警系统可以通过烟雾传感器、火警传感器等传感器检测是否发生警情,获取警情位置等信息,并发送给指导终端。
指导终端还可以接收用户终端上报的第二警情信息,并根据所述第二警情信息更新所述第三警情信息。所述第二警情信息可以包括警情现场的警情地点、警情区域、起火原因、火灾种类、烟火信息、警情现场语音、图片和/或视频等的至少一种。用户终端可以在接收到报警指令(用户终端可以通过接收用户对报警控件的输入、接收用户语音指令、接收用户对特定按键的预定输入等方式接收报警指令)后,获取所述第二警情信息;可以在接收到指导终端发送的所述获取警情信息指令后,获取所述第二警情信息;用户终端可以在判断设备当前处于警情区域、且设备满足预定条件(如预定条件可以为通过距离传感器检测到设备未被遮挡和/或摄像头拍摄的图像包含有效信息,可以根据图像计算环境亮度,若亮度大于阈值,则包含有效信息)时,获取所述第二警情信息。用户终端可以获取警情现场语音、图片和/或视频信息,并对语音、图片和/或视频信息进行识别处理,得到警情地点、警情区域、起火原因、火灾种类、烟火信息等至少一种警情信息,并将它们发送给服务器和/或指导终端;用户终端可以也可以直接将警情现场语音、图片和/或视频信息发送给服务器和/或指导终端,使得服务器和/或指导终端对警情现场语音、图片和/或视频信息进行识别处理,得到警情地点、警情区域、起火原因、火灾种类、烟火信息等至少一种警情信息。
用户终端可以通过GPS、基站、wifi等方式获得位置信息,将相应位置作为警情地点。进一步地,用户终端、服务器和/或指导终端可以根据用户标识得到预设位置信息,并将位置信息与预设位置信息进行匹配,将匹配的位置作为警情地点。例如,用户终端根据GPS定位,得到用户处于某幢建筑,用户的预设位置信息中包含一个处于该建筑的位置信息,如居住地、工作地、学习地等,则可以将该预设的位置作为警情地点。预设位置一般具体到一个房间,因此具有更高的精度。
在一种实施方式中,使用语音识别算法处理语音信息,得到文字信息;使用分词算法对文字信息进行分词,得到分词序列,分词序列中包含多个分词;将分词序列中的每个分词与预设的关键词库中的关键词进行匹配,根据匹配的关键词,获取警情信息。关键词库可以包含燃烧物关键词(如分为固体燃烧物、液体或可熔化的固体物质燃烧物、气体燃烧物、金属燃烧物、电器燃烧物、烹饪器具燃烧物等)、火势关键词(如“火”、“烧”、“燃烧”等)、烟雾关键词(如“烟”、“烟雾”等)、颜色关键词、程度关键词(如“大”、“快”、“浓”等)等关键词。当某个分词与燃烧物关键词匹配时,根据关键词对应的燃烧物类别信息,得到火灾种类信息;当某个分词与某个火势关键词或烟雾关键词匹配时,从其相邻的分词中(可以将处于同一个句子的分词视为相邻的分词)获取与颜色关键词或程度关键词匹配的关键词,从而得到对应的火势或烟雾的颜色或程度信息。
在另一种实施方式中,使用语音识别算法处理语音信息,得到文字信息;使用分词算法对文字信息进行分词,得到分词序列,分词序列中包含多个分词;将分词序列输入训练好的识别模型,得到模型输出向量;从模型输出向量提取警情信息。识别模型可以为深度学习模型,可以包含embedding层、RNN层(如LSTM、GRU、双向LSTM、双向GRU等)、Attention模块、全连接层等的全部或部分,其中embedding层将分词序列转换成对应的低维稠密的向量序列;RNN层对词序列进行处理,提取关键特征;Attention模块使得模型可以聚焦于重要特征;全连接层对RNN层、Attention模块等模块的输出进行维度转换,得到需要的维度。识别模型可以用于一种或多种警情信息的识别,例如,某个识别模型同时用于识别燃烧物类型、火势大小、烟雾浓度,燃烧物类型包含6个类别,火势大小分为3个类别,烟雾浓度分为3个类别,则模型输出向量的维度为12个维度,模型输出向量的前6个值可以对应燃烧物的6个类别,模型输出向量的第7~9个值可以对应火势大小类别,模型输出向量的最后3个值可以对应烟雾浓度类别。可以使用带标签的句子样本(人工收集训练样本)来训练识别模型,如某个句子样本为“炒菜起火”,标签为燃烧物6。可以使用BCE等作为损失函数。可以先将文字信息分成多个句子,得到每个句子的分词序列,并依次将分词序列输入识别模型,得到警情信息。
在另一种实施方式中,将图像输入图像处理模型,得到模型输出;从模型输出中提取警情信息。图像处理模型可以为图像分类模型,如燃烧物分类、烟雾浓度分类、火势大小分类等。图像处理模型可以为多个模型,如燃烧物分类模型、烟雾浓度分类模型、火势大小分类模型等模型;也可以使用多任务学习的方法,将多个任务集成到一个模型中,如模型同时用于燃烧物分类、烟雾浓度分类、火势大小分类等任务(模型输出向量中的相应元素分别对应燃烧物类别、烟雾浓度类别、火势大小类别),可以使用带标签的图像集训练模型。图像处理模型可以为目标检测模型(如3d目标检测),可以用于检测火苗等目标,得到每个目标的定位框、尺寸等数据,根据火苗尺寸确定火势大小,或者根据火苗与其他目标的相对大小,确定火势大小,如根据火苗覆盖的楼层目标的数量,确定火苗的高度,根据火苗高度确定火势大小,若火苗跨越多个楼层,则可以定义为火势大。图像处理模型可以同时包含分类分支以及目标检测分支,以分别用于分类、检测。图像处理模型可以为深度学习模型,模型可以包括卷积层、残差网络、池化层、全连接层等模块。
指导终端可以在接收到所述第二警情信息后,输出所述第二警情信息(语音输出、显示器显示等),并接收指导人员对所述第三警情信息的更改指令,根据更改指令更新所述第三警情信息。示例性的,指导终端在所述警情设置界面中,可以以可编辑控件的形式显示所述第三警情信息,使得指导人员可以根据警情现场的警情变化情况,随时更新所述第三警情信息。例如,指导终端在接收到用户终端发送的包含位置信息的警情现场的图片后,可以显示图片以及位置信息,使得指导人员通过查看图片以及位置信息,得知该位置的火势、烟雾等警情信息,并通过所述警情设置界面更改相应位置的烟火信息。
进一步地,所述第二警情信息中包含位置信息,用户终端可以通过GPS、语音识别、手势识别等方式获取位置信息,使得服务器和/或指导终端可以根据位置信息以及对应的警情信息,确定相应位置的警情情况。
进一步地,指导终端和/或服务器存储位置、信息获取时间、警情信息的对应关系,信息获取时间可以是用户终端获取警情信息的时间、或者指导终端或服务器接收警情信息的时间;对于警情区域的每一个位置,根据位置、信息获取时间、警情信息的对应关系,获取多个时刻的警情信息,得到该位置对应的警情信息序列;根据警情信息序列,计算火势发展速度和/或烟雾发展速度。可以根据多个警情信息相距的时间、火势大小/烟雾浓度的变化情况,计算火势发展速度和/或烟雾发展速度,如将烟雾浓度等级的差值除以对应的时间间隔,作为相应时刻的烟雾发展速度。
可以根据位置、信息获取时间、警情信息的对应关系,得到每一个时刻火势或烟雾达到条件(如火势大小达到预定等级、烟雾浓度达到预定等级等)的区域大小,根据不同时刻达到条件的区域的变化情况,计算火势蔓延速度和/或烟雾扩散速度。例如,在a时刻,烟雾覆盖第10层走廊,在b时刻,烟雾覆盖9~12层走廊,则可以根据烟雾覆盖区域的变化以及a时刻与b时刻的时间差值,计算烟雾扩散速度(如将烟雾覆盖区域的变化差值或倍数除以时间差值)。
在本公开申请中,警情发生时,可能同时有多个指导人员,各自使用一个指导终端。所述第三警情信息可以同时保存在多个指导终端中,并且在一个指导终端的所述第三警情信息发生更新时,同步到其他指导终端中,使得多个指导终端的所述第三警情信息保持同步;多个指导终端也可以通过服务器保持所述第三警情信息的同步,在一个指导终端的所述第三警情信息发生更新时,将更新同步到服务器,服务器再将更新信息发送到其他指导终端。
步骤112、根据所述第三警情信息,获取第一用户集合,向所述第一用户集合中的每一个第一用户的用户终端发送警情通知信息,所述第一用户集合包含与所述第三警情信息对应的与警情相关的第一用户。
可选的,指导终端在获取所述第三警情信息后,可以根据所述第三警情信息,获取第一用户集合,向所述第一用户集合中的每一个第一用户的用户终端发送警情通知信息。
可以根据所述第三警情信息中的警情区域信息,以及用户的实时位置信息和/或预设位置信息(如居住地址、工作地址、学习地址等位置,用户可以通过用户终端的相应设置界面设置位置信息,如在注册后设置位置信息),确定实时位置和/或至少一个预设位置处于警情区域内的第二用户集合;还可以根据所述第二用户集合中的每个第二用户的关系信息得到的所述第二用户的关联用户形成的第三用户集合;还可以根据所述第三警情信息中的警情区域信息,以及用户的实时位置信息,确定实时位置处于警情区域外的附近的用户,得到第四用户集合。所述第一用户集合可以包括所述第二用户集合、所述第三用户集合、所述第四用户集合的全部或部分。
所述警情通知信息中可以包含所述第三警情信息的全部或部分。用户终端在接收到所述警情通知信息后,可以通过播放预定声音文件、震动、显示器显示提示信息等方式通知用户发生警情。
在另一种实施方式中,指导终端可以将所述第三警情信息发送给服务器,服务器根据所述第三警情信息以及所述第一用户信息集合,确定所述第一用户集合,并向所述第一用户集合中的每一个第一用户的用户终端发送所述警情通知信息。服务器可以通过与用户终端建立的通信连接(如socket连接)发送所述警情通知信息;服务器也可以根据用户的电话号码,通过短信服务器向用户终端发送短信的方式发送所述警情通知信息。
服务器在确定所述第一用户集合后,可以将所述第一用户集合发送给指导终端,使得指导终端可以通过短信等方式将所述警情通知信息发送给对应的用户终端。
步骤113、获取第二用户信息集合,所述第二用户信息集合包含与所述第三警情信息相关的第一用户的所述第一用户信息,所述第一用户信息包括身份信息、图像信息、位置信息、健康信息、关系信息、第一消防设备信息的至少一种。
可选的,指导终端在获取所述第三警情信息后,可以获取第二用户信息集合,所述第二用户信息集合包含与所述第三警情信息相关的第一用户的所述第一用户信息,所述第一用户信息包括身份信息、图像信息、位置信息、健康信息、关系信息、第一消防设备信息的至少一种。
其中,身份信息可以包括用户标识、姓名、年龄、性别、身份证号、电话号码、职业等至少一种信息。用户标识用于能够指示唯一的用户身份。例如,目标用户标识为用户手机号码、身份证号码、服务器在用户注册后分配的用户账号等,此处不做限定。
其中,图像信息可以为用户的头像、全身像等图像。用户可以在用户终端设置个人信息时上传头像信息,从而在警情发生时指导终端和/或服务器可以根据用户标识获取用户头像;指导终端也可以根据身份证号码信息,从户籍部门的身份证数据中获取用户在办理身份证时拍摄的头像。
其中,位置信息包括用户经常滞留的位置、警情时的实时位置、警情时可能出现的位置等的至少一种。用户经常滞留的位置,如用户居住地址、工作地址、学习地址等,用户可以在用户终端的设置页面设置位置信息,用户终端也可以自动上传实时位置信息,以获取用户经常滞留的位置;用户终端可以在接收到警情信息后(如接收到所述警情通知信息后)获取并上报实时位置信息;第三用户可以在接收到警情信息后,可以为具有关联关系的第二用户设置其在警情时的位置或可能出现的位置(服务器可以将从第二用户的用户终端获取的语音、图像、视频、手势等信息发送给对应的第三用户的用户终端,使得第三用户可以在查看这些信息后,设置用户的位置等信息)。位置信息可以为经纬度坐标、地址名称等。
进一步地,位置信息中每个位置还可以包括用户处于该位置的时间时长信息,如用户在一个时间段内(如最近一个月)处于该位置的各个时间段、累计时长、各个时间段的次数等。
其中,健康信息可以包括病史、血型、过敏情况、是否行动方便等的至少一种。
其中,关系信息可以包括与多个其他用户的关系类型及关系对象身份信息,关系类型如紧急联系人、直系亲属、监护人与被监护人等,关系对象身份信息可以为相应对象的用户标识、姓名、身份证号码等的至少一种。
其中,第一消防设备信息可以包含消防设备类别、数量、存放位置等信息,如消防面具、消防绳、灭火器及对应数量等。例如,用户可以在家自备消防面具、消防绳、灭火器等消防设备;公司在办公区域预备消防设备。
用户终端可以包含用户信息设置界面,以获取身份信息、图像信息、位置信息、健康信息、关系信息、第一消防设备信息等至少一种所述第一用户信息,并将获得的用户信息发送给指导终端和/或服务器,指导终端和/或服务器将所述第一用户信息保存到所述第一用户信息集合中,使得指导终端和/或服务器可以在获得所述第三警情信息后,从所述第一用户信息集合获取所述第二用户信息集合(可以在确定所述第一用户集合后,获取所述第一用户集合的每一个第一用户的所述第一用户信息,得到所述第二用户信息集合)。
第二用户的用户终端在接收到警情信息后,可以获取位置数据(可以通过GPS、wifi、基站、蓝牙、从语音中提取位置信息、识别手势等方式获取位置信息)等第四用户信息,并将其与用户标识发送给指导终端和/或服务器;与第二用户具有关联关系的第三用户的用户终端可以获取第二用户的位置或可能出现的位置、身份信息、健康信息等的至少一种作为第五用户信息,并将其发送给指导终端和/或服务器。指导终端和/或服务器可以根据接收到的所述第四用户信息和/或所述第五用户信息更新所述第二用户信息集合中所述第二用户的所述第一用户信息。
用户终端可以将所述第四用户信息和/或所述第五用户信息发送到服务器,服务器将所述第四用户信息和/或所述第五用户信息发送给指导终端,或者服务器根据所述第四用户信息和/或所述第五用户信息更新所述第二用户信息集合中所述第二用户的所述第一用户信息后,将更新信息发送给指导终端,以实现用户信息的同步。
步骤116、输出所述第二用户信息集合、所述第二警情信息、所述第三警情信息的至少一种。
在一种实施方式中,指导终端和/或服务器可以根据位置(如楼层、区域、位置类型等)、性别、年龄、健康、关系、消防设备等至少一种特征,对所述第二用户信息集合计算统计信息,指导终端显示统计信息。示例性的,可以计算警情区域每一个楼层/区域/位置类型的用户数量、每一个楼层/区域/位置类型的身体健康或行动不便的用户数量、警情区域各年龄段的用户数量、警情区域携带或未携带消防面具等消防设备的用户数量,等等。指导终端可以以饼状图、柱状图、表格等方式显示统计信息。指导终端和/或服务器可以在所述第二用户信息集合发生更新时,更新统计信息,指导终端刷新显示统计信息。
在另一种实施方式中,指导终端根据位置、性别、年龄、健康、关系、消防设备等至少一种特征,组织显示所述第二用户信息集合中的第一用户的第二用户信息(如用户姓名、用户头像、用户图标等),将包含一个或多个相同或相似特征的用户的所述第二用户信息显示在同一个区域中;一个区域,可以是列表控件的一个列表项、表格控件的一个单元格、或其他显示界面的区域。
示例性的,指导终端可以根据室内位置中的楼层/区域/位置类型信息,以列表、表格等方式组织显示用户信息,将处于同一个楼层/区域/位置类型的用户显示在一个列表项、单元格等区域中。如图4A所示,图4A以位置列表的方式显示用户信息,根据警情区域用户所在楼层信息,将处于同一个楼层的用户显示在一个列表项中。如图4B所示,图4B以位置表格的方式显示用户信息,根据警情区域用户所在楼层及位置类型(房间、走廊、楼梯、电梯)信息,以表格的方式显示警情区域用户信息,将处于同一楼层且同一位置类型的用户在一个单元格中显示,从图中可以直观地看出各楼层、位置类型的被困用户情况。
进一步地,指导终端对所述第二用户信息集合中的每个第一用户,获取所述第一用户的第三用户信息,所述第三用户信息包含性别、年龄、健康、关系、消防设备等至少一种;获取与所述第三用户信息对应的图标,得到图标集合;根据位置、性别、年龄、健康、关系、消防设备等至少一种特征,组织显示所述图标集合。具体的,技术人员可以为各种特征类型分别设计一个图标,每种特征类型包含至少一个特征的一种取值,如为性别、年龄、健康、消防设备四个特征的特征取值为(男、幼年、健康、无消防设备)设计a图标,a图标可以直观地展现男、幼年、健康、无消防设备特征;为特征取值为(女、壮年、行动不变、消防面具)设计b图标,b图标可以直观地展现女、壮年、行动不变、消防面具特征;存储特征取值与图标的对应关系;对所述第二用户信息集合中的每个第一用户,根据所述第一用户的所述第三用户信息,从特征取值与图标的对应关系中获得对应的图标,得到图标集合;根据位置、性别、年龄、健康、关系、消防设备等至少一种特征,组织显示图标集合。例如,指导终端在根据室内位置以列表或表格形式组织显示当前处于警情区域的用户集合时,可以先根据每个用户的特征取值,获取用户对应的图标;确定每个列表项、或单元格的所有用户;对每个列表项、或单元格,逐个显示属于该列表项或单元格的用户的图标。指导人员可以根据图标直观地获知用户特征。
技术人员也可以为每种特征的每种取值各设计一个图标,对所述第二用户信息集合中的每个第一用户,根据所述第一用户的所述第三用户信息,获取对应的图标,并将它们与用户头像或用户姓名进行合成,得到并显示携带所述第三用户信息的用户头像或姓名信息。例如,技术人员可以为健康或行动不变各设计一个图标,为不同的消防设备各设计一个图标;对每个用户,根据其健康状态,得到对应的健康图标,根据其消防设备,得到消防图标;将该用户的头像与健康图标、消防图标进行合成(如将三者加起来),得到携带用户特征信息的用户头像。
指导终端也可以对每一个用户,依次显示头像、特征对应的图标。例如,先显示头像,再在头像之上,叠加显示该用户的特征取值对应的图标。
进一步地,指导终端根据位置、性别、年龄、健康、关系、消防设备等至少一种特征,组织显示用户信息时,可以将空间距离、关系、特征相似性(如性别、年龄、健康状况等特征的相似性)等的至少一种,控制用户的显示位置,使得空间距离近、关系近和/或特征相似性高的用户的显示位置接近。例如,在图4A中,根据关系信息控制用户的显示位置,属于同一个家庭的用户的头像的位置靠近显示,不同家庭的用户的头像之间具有一个较大的间隔。
指导终端可以只显示所述第二用户信息集合的全部或部分第一用户的用户信息,如可以只显示其中的第二用户(处于警情区域的第一用户)的用户信息。
指导终端可以在不同的显示区域(如不同的标签页)显示不同类型的用户集合,如各用一个标签页显示所有第二用户(处于警情区域的第一用户)的用户信息、所有第三用户(与第二用户具有关联关系的用户)的用户信息、所有第四用户(处于警情区域外的附近群众用户)的用户信息。
指导终端可以在一个显示区域中显示所述第二警情信息和/或所述第三警情信息。示例性的,指导终端可以以表格的方式显示警情地点、警情区域、起火原因、火灾种类、烟火信息等警情信息的至少一种;以表格的方式显示警情现场的图像和/或视频对对应的位置信息,如图5所示,以两行四列显示多个位置的图像/视频,并对每个图像/视频,显示对应的位置信息。
指导终端也可以将所述第二警情信息和/或所述第三警情信息叠加到所述第二用户信息集合的显示区域中。具体的,指导终端可以根据警情信息对应的位置信息,确定显示位置(如以位置列表方式显示用户信息时,确定对应的列表项;以位置表格方式显示用户信息时,确定对应的单元格),在相应的显示位置显示警情现场的图像/视频,或者根据烟火信息控制相应显示位置的背景颜色(如根据烟雾浓度设置背景颜色的深度,烟雾越浓,背景颜色越深),或者根据烟火信息获取对应的烟火图标(技术人员可以为火势大小、火势蔓延速度、火势发展速度、烟雾浓度、烟雾高度、烟雾毒性、烟雾扩散速度、烟雾发展速度等烟火信息的至少一种设计图标,并存储烟火信息与烟火图标的对应关系),并在相应显示位置显示烟火图标。
进一步地,指导终端可以接收显示警情发展过程指令(可以通过检测快捷键、控件、弹出菜单等方式接收指令),获取目标位置;根据目标位置获取目标位置对应的多个时刻的警情信息(如警情现场图片/视频、火势大小、火势蔓延速度、火势发展速度、烟雾浓度、烟雾高度、烟雾毒性、烟雾扩散速度、烟雾发展速度等警情信息),得到警情信息序列;根据时间顺序排列显示警情信息序列。通过显示警情信息序列,可以使得指导人员可以快速直观地了解警情区域某个位置的警情发展过程,从而更好地对警情现场的用户提供指导。
步骤117、获取目标内容信息以及第一目标特征信息,所述目标内容信息包括第一警情信息、指导内容信息、获取信息指令的至少一种,所述第一目标特征信息包含至少一个目标特征,所述目标特征包括以下至少之一:目标位置特征、目标年龄特征、目标性别特征、目标健康特征、目标关系特征、目标消防设备特征。
指导终端可以检测对所述第二用户信息集合的输出控件的用户输入,根据用户输入得到被选择的特征取值,并将所述特征取值作为所述第一目标特征信息。具体的,当以位置列表/位置表格方式显示所述第二用户信息集合时,指导终端可以检测对列表项的点击、多选、框选等选择操作,获取被选择的列表项/单元格对应的位置信息,将该位置信息作为所述第一目标特征信息。例如,当指导人员点击图4B中的五楼、走廊的单元格时,将五楼、走廊作为所述第一目标特征信息。
指导终端也可以步骤107中的方法获取所述目标内容信息以及所述第一目标特征信息,这里不再赘述。
步骤118、将所述目标内容信息发送至满足所述第一目标特征信息的全部或部分第一目标用户的用户终端。
本公开实施例并不限制步骤的执行顺序,技术人员可以以其他合适的顺序实现本实施例。
本公开实施例中,指导终端可以在警情发生过程中,从用户终端中获取警情信息,从而为指导人员提供实时、准确的警情信息。指导终端和/或服务器可以根据警情现场的语音、图像、视频等信息,估计各个位置的火势大小、火势蔓延速度、火势发展速度、烟雾浓度、烟雾高度、烟雾毒性、烟雾扩散速度、烟雾发展速度等警情信息,从而自动获得全面、准确的警情信息。指导终端可以在警情发生过程中,从警情现场被困用户的关联用户获得位置信息、健康信息等信息,从而为指导人员提供更精准的用户信息。指导终端获取并显示警情信息、用户信息、建筑信息,获取目标内容信息以及第一目标特征信息,将目标内容信息发送至第一目标特征信息对应的用户的用户终端,使得指导人员可以直观地了解警情现场情况,使得指导人员对警情现场的被困人员提供精准的指导信息成为可能;指导终端通过获取目标人群的特征信息,将目标内容广播至对应的用户终端,可以简化指导人员的操作,提高效率。
本申请的一实施例提供了一种消防救援通信方法,应用于用户终端中。其中,用户终端可以为各种电子设备,包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、个人数字助理(Personal Digital Assistant,PDA)、平板电脑(PAD)、便携式多媒体播放器(Portable MediaPlayer,PMP)、车载电子设备(例如车载导航电子设备)、可穿戴式设备等等的移动电子设备以及诸如数字电视(TV)、台式计算机等等的固定电子设备。
图6为消防救援通信方法的一实现流程示意图,如图6所示,该方法包括以下步骤:
步骤202、获取第一用户信息,将所述第一用户信息发送给指导终端和/或服务器,所述第一用户信息包括身份信息、图像信息、位置信息、健康信息、关系信息、第一消防设备信息的至少一种。
用户终端可以包含用户信息设置界面,以获取身份信息、图像信息、位置信息、健康信息、关系信息、第一消防设备信息等至少一种第一用户信息,并将所述第一用户信息发送给指导终端和/或服务器,指导终端和/或服务器将所述第一用户信息更新到所述第一用户信息集合中。用户终端可以在用户注册时显示用户信息设置界面,或者在用户终端界面中提供进入信息设置界面的入口。
步骤203、获取第四用户信息,将所述第四用户信息发送给指导终端和/或服务器,其中,所述第四用户信息包括当前登录用户的身份信息、实时位置信息和/或位置数据,其中,所述位置数据包括语音信息、手势信息、操作信息、wifi信息、图像信息、蓝牙信息、陀螺仪和加速度传感器和磁场传感器的传感器信息的至少一种。
用户终端在接收到警情信息后,可以获取位置信息和/或位置数据(可以通过GPS、wifi、基站、蓝牙、从语音中提取位置信息、识别手势等方式获取所述位置信息和/或所述位置数据)等第四用户信息,并将所述第四用户信息发送给指导终端和/或服务器。其中,所述所述位置信息表示一个位置,如GPS坐标、地址名称、室内位置等;所述位置数据为包含有位置信息的数据,如包含有位置信息的语音数据、图像数据、手势数据等,可以对位置数据进行室内位置识别处理,得到位置信息。
所述位置信息可以分为粗略位置、精确位置(室内位置)。
其中,粗略位置表示用户所处位置的大概范围,定位精度较低,可以根据粗略位置大致确定用户是否处于警情区域,可以是使用GPS、基站等定位方法得到粗略位置。
其中,精确位置表示用户处于警情区域的具体位置,如用户所处楼层、房间号、区域、位置类型等,指导人员可以根据被困人员精确位置提供针对性的指导。可以根据语音信息、手势信息、操作信息、wifi信息、图像信息、蓝牙信息、陀螺仪和加速度传感器和磁场传感器的传感器信息至少一种位置数据确定精确位置。
在一种实施方式中,可以录制语音信息,并使用语音识别方法,将录音信息识别成文字信息;再对所述文字信息进行处理,得到位置信息。可以使用分词算法对文字信息进行分词,得到多个分词;将每个分词与位置关键词库中的位置关键词进行匹配,当一个分词与一个位置关键词匹配时,将匹配的关键词、或者该分词相邻的数字以及匹配的关键词作为精确位置。位置关键词可以包括“房间”、“走廊”、“楼梯”、“楼”、“层”、“地下室”等位置词汇,还可以从指导终端中接收位置类别、区域等词汇,添加到位置关键词库中。
示例性的,当用户说出“我在504房间”后,对录音信息进行语音识别以及分词,得到多个分词“我”、“在”、“504”、“房间”。将每个词语与预设的关键字库匹配,得到匹配的关键词为“房间”,以及相邻的数字“504”,则确定用户处于编号“504”的“房间”。
也可以预设多种文本模式,并使用模式匹配的方法,对文字信息进行处理,得到状态信息。例如,设置“在$loc”模式,则将用户说出“在504房间”时,匹配该模型,从而得到位置为编号“504”的“房间”。
用户终端可以在满足预定条件时,持续录音,并自动对录音信息进行处理,得到位置信息;也可以接收用户指令,并根据指令开始或停止录音,并对得到的录音信息进行处理,得到位置信息。所述预定条件,可以是用户终端当前处于警情区域时,或者用户终端检测在警情指令(如用户在听到消防报警系统的报警后,通过用户终端的警情控件等方式发出警情指令)时,等等。用户终端可以通过检测用户对用户终端的操作得到指令信息,如对控件、按键的按压操作,对屏幕的敲击动作,等等。
在另一种实施方式中,用户终端可以通过触控屏获得手势数据,对手势数据进行识别,得到用户位置信息。用户终端可以在屏幕的一定区域中显示手写输入区域,并获得手写输入区域的手势数据;用户终端也可以直接获得整个屏幕区域的手势数据。可以使用训练好的分类模型对手势数据进行处理,得到分类模型输出的类别,并根据类别与字符的对应关系,得到类别对应的字符。可以预定义分类模型可识别的字符,可以包括阿拉伯数字、英文字母、汉语字符、其他语言字符、技术人员设计的表示特定涵义的字符(如分别为房间、走廊、楼梯等设计一个字符,为不同的移动方向设计字符,等等)等的至少一种。可以设计为一次只能输入一个字符(一个字符输入中止后,清空当前屏幕的手势数据,等待获得新的手势数据),并从连续获得的多个字符作为当前位置;也可以设计为一次可以输入多个字符,对包含多个字符的手势数据进行切割后(可以使用投影法切割手势数据),得到多个手势数据,分别对每个手势数据进行处理,得到对应的字符,将这些字符作为当前位置。
在另一种实施方式中,可以获取操作信息,并根据操作信息得到位置信息。例如,可以用用户对声音键的连续按压次数作为楼层数;或者将“+”、“-”声音按键的一次按压分别对应向上、向下一个楼层;或者通过对加速度传感器数据和/或录音数据识别用户对用户终端的敲击动作,并将连续敲击次数作为楼层数。
在另一种实施方式中,可以根据wifi与位置的对应关系,并根据当前检测得到的wifi信号强度信息,得到位置信息。
在另一种实施方式中,可以从摄像头获得图像,并使用图片分类模型来对图像进行分类处理,得到图像的类别信息,并根据类别信息得到类别对应的位置类型信息;或者使用文本检测与识别算法对图像进行处理,得到文字信息,并从文字信息中提取位置信息。图片分类模型的类别可以为走廊、楼梯、客厅、卧室、卫生间、办公室、教室、会议室等,图片的类别与位置类型可以是多对一的关系,如卧室、办公室、会议室等的位置类型可以都对应房间这种位置类型。图片分类模型可以为深度学习模型,可以使用人工标定的图像数据集进行训练。例如,用户在逃生过程中,经过某个房间时,可以将用户终端对准房间的房号牌,拍摄图像,从而使得用户终端可以从图像中提取房号,并使用房号作为位置。
在另一种实施方式中,可以通过蓝牙获取其他蓝牙设备的广播数据,并通过广播数据得到位置信息。具体的,用户终端可以获取安装于建筑多个位置的蓝牙基站(如ibeacon蓝牙信标)的广播数据,并根据广播数据中的位置信息以及信号强度得到位置信息。用户终端也可以在获得录音信息、手势信息、操作信息、wifi信息、图像信息等至少一种位置数据后,通过蓝牙广播数据;其他用户终端通过蓝牙扫描得到至少一个用户终端的广播数据后,将距离最近(可以根据蓝牙信号强度计算距离)且距离低于预设距离阈值(如将距离阈值设置为10m)的用户终端的位置作为当前位置。用户终端通过蓝牙广播数据,可以直接修改广播数据,使得广播数据中包含位置信息,如对于ibeacon协议修改major和/或minor字段;也可以是在广播数据中包含特定数据(例如设备编号),并将这个特定数据发送给服务器,服务器保存它与用户标识和/或用户位置的对应关系,其他用户终端在扫描得到广播数据后将广播数据发送给服务器,使得服务器可以根据广播数据确定对应的位置。用户终端可以只在获得位置信息后的预定时间(如5秒钟)和/或预定距离(如10m,可以使用计步算法确定移动距离)内,广播位置信息,而在超过时间或距离后,停止广播位置信息。例如,用户终端通过识别手势数据得到位置信息后,通过蓝牙广播位置信息,并在5s后停止广播;当用户终端重新通过识别手势数据获得位置信息后,再次广播5s时间的位置信息。
在另一种实施方式中,可以对陀螺仪、加速度传感器、磁场传感器等传感器信息,使用行人航迹推算算法对这些传感器信息进行处理,得到用户的移动步数、步行速度、步行方向等移动信息,并将其与录音信息、手势信息、操作信息、图像信息等的至少一种获得位置信息进行结合,得到实时的位置信息。例如,用户每隔一段时间通过手势向用户终端输入位置信息,用户终端从用户获得最新的位置信息后,将其与移动步数等信息累加,从而确定其他时间用户的位置信息。还可以根据移动信息确定位置类型,例如,当用户步行方向长距离(移动步数达到条件)保存不变时,则用户处于走廊中;当用户步行方向交替变化时,则用户处于楼梯。
用户终端可以直接对所述位置数据(如手势信息、语音信息、图像信息、陀螺仪和加速度传感器和磁场传感器的传感器信息等)进行室内位置识别处理,得到位置信息,并将所述位置信息发送给服务器和/或指导终端;也可以所述位置数据发送给服务器和/或指导终端,使得服务器和/或指导终端对所述位置数据进行室内位置识别处理后,得到所述位置数据对应的用户的位置信息。
用户终端可以在接收到第四警情信息(如接收到警情通知信息)后,获取所述位置信息。可以先通过GPS、wifi、基站等获得粗略位置,判断是否处于警情区域;当处于或可能处于警情区域时,获取精确位置。
进一步地,用户终端还可以在接收到所述第四警情信息后,通过语音、震动、显示提示界面等方式提示用户发生警情。可以设计为只在处于或可能处于警情区域时,输出提示信息;也可以设计为不论是否处于警情区域,都输出提示信息,例如,用户居住位置发生警情时,无法用户是否处于该位置,都输出提示信息。
用户终端也可以在接收到警情指令后,获取位置信息。用户终端在获得位置信息后,还可以向服务器发出查询指令;服务器根据位置信息判断是否包含相应位置的警情信息,若包含相应位置的警情信息,则将该警情信息(第四警情信息)发送给请求方。服务器还可以在接收到查询指令后,根据查询指令中包含的用户标识,得到用户预设的位置信息,并确定是否包含用户预设的位置信息对应的警情信息。例如,用户没有将某个位置添加到个人的位置列表中,从而在该位置发生警情时,服务器无法通知该用户发生警情,用户可能通过建筑中安装的消防报警系统、或者其他用户的用户终端发出的提示信息,得知警情信息,从而操作用户终端发出警情指令。
用户终端可以将所述位置信息发送给服务器和/或指导终端。在警情发生时,可能需要多个指导人员分别对不同位置的被困人员进行指导,服务器可以为每个用户终端与多个指导指导终端建立通信,用户终端在获得位置信息后,可以同时发送给每一个建立通信的指导终端。
进一步地,用户终端在获得所述位置信息后,还可以通过语音的方式输出所述位置信息,并等待获取用户的反馈指令,反馈指令指示位置信息正确或错误;当接收到指示位置信息正确的反馈指令时,向服务器和/或指导终端发送所述位置信息,接收并输出所述位置信息对应的指导内容信息;当接收到指示位置信息错误的反馈指令时,不向服务器以及指导终端发送所述位置信息,或者在接收到所述位置信息对应的指导内容信息时(在获取反馈指令之前,可能已经向服务器或指导终端发送所述位置信息),不输出所述指导内容信息。例如,当通过手势数据识别得到用户处于10楼走廊时,可以使用语音合成方法得到语音信息“当前位置10楼走廊”,并使用音频输出组件(如扬声器)输出位置信息,并并等待获取用户的反馈指令,以确定位置信息是否识别正确。可以设计为当“+”音量键被按压和/或在一段时间内(如输出位置信息结束后的5秒内)未接收到反馈指令时,表示位置信息正确,从而可以获取与位置信息对应的指导内容信息;当“-”音量键被按压时,表示位置信息错误,用户终端可以等待接收新的设置位置指令。也可以通过检测其他事件得到反馈指令,如检测设备是否受到敲击、摇晃,等等。
步骤204、获取与当前登录用户具有关联关系的第二用户的第五用户信息,将所述第五用户信息发送给指导终端和/或服务器,其中,所述第五用户信息包括所述第二用户的身份信息、图像信息、位置信息、健康信息、关系信息、第一消防设备信息的至少一种,所述位置信息包括所述第二用户的可能出现的位置信息或者实时位置信息。
可选的,用户终端可以获取与当前登录用户具有关联关系的第二用户的第五用户信息,将所述第五用户信息发送给指导终端和/或服务器,其中,所述第五用户信息包括所述第二用户的身份信息、图像信息、位置信息、健康信息、关系信息、第一消防设备信息的至少一种,所述位置信息包括所述第二用户的可能出现的位置信息或者实时位置信息。
指导终端和/或服务器在获得所述第三警情信息时,根据所述第一用户信息集合,确定第二用户集合,所述第二用户集合包括多个第二用户,所述第二用户为警情发生时处于警情区域的用户和/或至少一个预设位置处于警情区域的用户;对所述第二用户集合的每个第二用户,根据所述第二用户的关系信息,确定与其具有关联关系的第三用户,向所述第三用户的用户终端发送警情通知信息,所述警情通知信息包含所述第三警情信息的全部或部分信息;所述第三用户的用户终端输出所述警情通知信息,如通过语音、震动、界面显示等方式通知用户发生警情。
所述第三用户的用户终端获取具有关联关系的第二用户的第五用户信息,所述第五用户信息包含所述第二用户的位置或可能出现的位置、身份信息、健康信息等的至少一种,并将其与所述第二用户的用户标识发送给指导终端和/或服务器,使得指导终端和/或服务器可以根据所述第五用户信息更新所述第二用户的所述第一用户信息。当第二用户未在警情前设置身份信息、健康信息等信息时,第三用户也可以通过用户终端及时地设置所述第五用户信息,提高救援人员、医务工作人员的救援效率。所述第三用户的用户终端可以通过用户信息设置界面或其他方法获取所述第二用户的位置信息、身份信息、健康信息等信息。所述第三用户的用户终端可以只在未获得所述第二用户的实时位置时,才获取所述第二用户的位置或可能出现的位置,例如,某个用户的一个预设位置处于警情区域内,但服务器未获得该用户的实时位置(如警情时处于失联状态),则可以从该用户的关联用户获得该用户可能的位置。所述第三用户的用户终端可以设计为只有在本身不处于警情区域时,才获取所述第二用户的位置信息、身份信息、健康信息等信息。
进一步地,指导终端和/或服务器可以在接收到第二用户的用户终端获取的警情现场的语音、图像、视频、用户手势等位置数据后,根据所述第二用户的用户标识,获取所述第二用户的关系信息,得到与所述第二用户具有关联关系的第三用户,并将所述第二用户的用户终端获取的警情现场的语音、图像、视频、用户手势等位置数据发送给所述第三用户的用户终端;所述第三用户的用户终端可以输出接收到的语音、图像、视频、用户手势等位置数据;所述第三用户的用户终端可以通过界面获取所述第二用户的身份信息、图像信息、位置信息、健康信息、第一消防设备信息的至少一种第五用户信息,并将所述第二用户的所述第五用户信息发送给指导终端和/或服务器。例如,第二用户的用户终端可以拍摄警情现场的图片;服务器获得图片后,将图片发送给第二用户对应的第三用户的用户终端;第三用户的用户终端接收到图片后显示图片,第三用户可以通过查看图片,得知第二用户的位置信息;第三用户通过用户终端的设置界面设置第二用户的位置信息;第三用户的用户终端将第二用户的位置信息发送给服务器。用户终端或服务器通过语音、图像等可能难以得到准确的位置信息,或者得到错误的位置信息,通过将语音、图像、视频等信息发送给关联用户,得到关联用户人工设置的位置信息,可以更准确地确定位置信息,避免识别错误或识别不精准。
步骤205、接收与所述第一用户信息对应的目标内容信息,所述目标内容信息包括第一警情信息、指导内容信息、获取信息指令的至少一种。
指导终端可以获取指导人员输入的目标内容信息以及目标特征信息,使得指导终端和/或服务器可以根据所述用户信息确定满足所述目标特征信息的目标用户,并将所述目标内容信息发送给所述目标用户的用户终端;目标用户的用户终端接收所述目标内容信息。
步骤206、输出所述目标内容信息。
用户终端可以以界面显示、语音输出、震动等方式的至少一种输出所述目标内容信息。
用户终端可以以警情信息界面的方式输出所述第一警情信息。具体的,警情信息界面可以以表格控件、文本控件、地图控件、音频播放控件、图像控件、视频控件等方式展示警情地点、警情区域、警情等级、起火原因、火灾种类、烟火信息、警情现场语音、图片和/或视频等的至少一种警情信息。
用户终端可以按照预定格式将所述第一警情信息转换成文字信息(可以将警情地点、警情区域、警情等级、起火原因、火灾种类、烟火信息等至少一种警情信息按预定格式转换成字符串),并使用语音合成方法将文字信息转换成语音信息,并使用音频输出单元播放语音信息。
用户终端可以根据警情等级、起火原因、火灾种类、烟火信息等的至少一种,选择警情提示参数,并根据警情提示参数输出警情提示信息。警情提示信息可以为语音信息,对应的警情提示参数可以为声音频率、播放时长、播放间隔等参数,如警情等级低时,播放低频的语音信息,警情等级高时,播放高频的语音信息;或者周期性地停止与播放预定音频信息,警情等级低时,每次播放音频时间短,警情等级高时,每次播放音频时间长。警情提示信息可以为震动信息,对应的警情提示参数可以为震动时长、震动间隔等参数。
用户终端可以直接播放语音(如录音文件、实时语音)、视频等指导内容信息。用户终端也可以输出提示信息(如播放预定的语音文件、震动等),并在显示器中显示所述指导内容信息,或者显示进入显示所述指导内容信息界面的入口,例如,对于语音文件、视频文件,可以显示语音或视频控件,并在检测在用户点击控件后,播放语音或视频文件;对于网页链接、富文本文档等文件,可以显示进入网页或文档界面的入口。
用户终端可以根据所述获取信息指令的类型,选择对应的提示内容,并输出所述提示内容。所述提示内容可以是音频内容,例如,当所述获取信息指令是获取位置信息指令时,可以播放包含“请上报位置”的音频文件。
进一步地,所述方法还包括:
步骤202b、用户终端在接收到报警指令后,获取警情信息,并将所述警情信息发送给服务器和/或指导终端。
用户终端可以通过接收语音指令、报警控件、通过触控屏获取预定手势、检测按键按压事件、检测终端晃动情况、检测敲击事件等的至少一种获得报警指令。用户终端在接收到报警指令后,可以获得警情地点、警情区域、起火原因、火灾种类、烟火信息、警情现场语音、图片和/或视频等的至少一种警情信息。可以显示警情信息填写页面,以获得火灾原因、火势大小等警情信息;用户终端可以获取警情现场语音、图片和/或视频信息,并对语音、图片和/或视频信息进行识别处理(可以与步骤111的识别处理方法一致,这里不再赘述),得到警情地点、警情区域、起火原因、火灾种类、烟火信息等至少一种警情信息;用户终端可以也可以直接将警情现场语音、图片和/或视频信息发送给服务器和/或指导终端,使得服务器和/或指导终端对警情现场语音、图片和/或视频信息进行识别处理,得到警情地点、警情区域、起火原因、火灾种类、烟火信息等至少一种警情信息。例如,当发生火灾后,用户可以通过用户终端发出报警,从而可以从指导人员获得指导,以正确、快速地灭火,防止火灾蔓延;指导人员在接收到用户发出的报警后,可以根据火灾严重程度,向相应区域的其他用户发出报警,使得他们可以及时地逃生。
本公开实施例中,用户终端获取第一用户信息、第四用户信息、第五用户信息,并发送给指导终端和/或服务器,使得指导终端和/或服务器能够迅速准确地确定警情发生时相关用户的各种用户信息,从而在接收到指导人员的目标内容信息后,能够根据第一目标特征信息以及用户信息,确定第一目标用户,进而将目标内容信息送达第一目标用户的用户终端。
本公开实施例提供语音、手势、蓝牙等方式确定用户的室内位置,可以使警情区域的被困用户更简单地输出位置信息;通过将位置数据发送给关联用户,从关联用户中获得位置信息、健康信息等信息,可以提高用户信息的准确性、多样性,从而使得救援人员可以精准救援。
参照图7,示出了本公开实施例的一种消防救援通信装置的结构框图。
本申请实施例的消防救援通信装置可以设置在指导终端,该消防救援通信装置可以包括第一获取单元301,第一发送单元302,
所述第一获取单元301,用于获取目标内容信息以及第一目标特征信息,所述目标内容信息包括第一警情信息、指导内容信息、获取信息指令的至少一种,所述第一目标特征信息包含至少一个目标特征,所述目标特征包括以下至少之一:目标位置特征、目标年龄特征、目标性别特征、目标健康特征、目标关系特征、目标消防设备特征;
所述第一发送单元302,用于将所述目标内容信息发送至满足所述第一目标特征信息的全部或部分第一目标用户的用户终端。
可选地,本实施例的消防救援通信装置还包括:警情信息获取单元,用于获取第三警情信息,所述第三警情信息包括警情地点、警情区域、警情等级、起火原因、火灾种类、烟火信息、警情现场语音、图片和/或视频等的至少一种。
可选地,本实施例的消防救援通信装置还包括:用户集合获取单元,用于根据所述第三警情信息,获取第一用户集合,向所述第一用户集合中的每一个第一用户的用户终端发送警情通知信息,所述第一用户集合包含与所述第三警情信息对应的与警情相关的第一用户。
可选地,本实施例的消防救援通信装置还包括:用户信息获取单元,用于获取第二用户信息集合,所述第二用户信息集合包含与所述第三警情信息相关的第一用户的所述第一用户信息,所述第一用户信息包括身份信息、图像信息、位置信息、健康信息、关系信息、第一消防设备信息的至少一种。
可选地,本实施例的消防救援通信装置还包括:信息输出单元,用于输出所述第二用户信息集合、所述第三警情信息的至少一种。
本实施例的消防救援通信装置用于实现前述多个方法实施例中相应的指导终端侧的消防救援通信方法,并具有相应方法实施例的有益效果,在此不再赘述。此外,本实施例的消防救援通信装置因用于对应实现前述消防救援通信方法,因此描述比较简单,相关部分可参照前述方法实施例中相应部分的描述,在此不再赘述。
参照图8,示出了本公开实施例的一种消防救援通信装置的结构框图。
本申请实施例的消防救援通信装置可以设置在用户终端,该消防救援通信装置可以包括第二获取单元401,内容接收单元402,内容输出单元403,
所述第二获取单元401,用于获取第一用户信息,将所述第一用户信息发送给指导终端和/或服务器,所述第一用户信息包括身份信息、图像信息、位置信息、健康信息、关系信息、第一消防设备信息的至少一种;
所述内容接收单元402,用于接收与所述第一用户信息对应的目标内容信息,所述目标内容信息包括第一警情信息、指导内容信息、获取信息指令的至少一种;
所述内容输出单元403,用于输出所述目标内容信息。
可选的,本实施例的消防救援通信装置还包括:第三获取单元,用于获取第四用户信息,将所述第四用户信息发送给指导终端和/或服务器,其中,所述第四用户信息包括当前登录用户的身份信息、实时位置信息和/或位置数据,其中,所述位置数据包括语音信息、手势信息、操作信息、wifi信息、图像信息、蓝牙信息、陀螺仪和加速度传感器和磁场传感器的传感器信息的至少一种。
可选的,本实施例的消防救援通信装置还包括:第四获取单元,用于获取与当前登录用户具有关联关系的第二用户的第五用户信息,将所述第五用户信息发送给指导终端和/或服务器,其中,所述第五用户信息包括所述第二用户的身份信息、图像信息、位置信息、健康信息、关系信息、第一消防设备信息的至少一种,所述位置信息包括所述第二用户的可能出现的位置信息或者实时位置信息。
本实施例的消防救援通信装置用于实现前述多个方法实施例中相应的指导终端侧的消防救援通信方法,并具有相应方法实施例的有益效果,在此不再赘述。此外,本实施例的消防救援通信装置因用于对应实现前述消防救援通信方法,因此描述比较简单,相关部分可参照前述方法实施例中相应部分的描述,在此不再赘述。
图9示出了本发明一个示例性实施例提供的指导终端1000的结构框图。该终端1000可以是:智能手机、平板电脑、MP3播放器(Moving Picture Experts Group AudioLayerIII,动态影像专家压缩标准音频层面3)、MP4(Moving Picture Experts GroupAudio Layer IV,动态影像专家压缩标准音频层面4)播放器、笔记本电脑或台式电脑。终端1000还可能被称为用户设备、便携式终端、膝上型终端、台式终端等其他名称,可以是上述指导终端。
通常,终端1000包括有:处理器1001和存储器1002。
处理器1001可以包括一个或多个处理核心,比如4核心处理器、8核心处理器等。处理器1001可以采用DSP(Digital Signal Processing,数字信号处理)、FPGA(Field-Programmable Gate Array,现场可编程门阵列)、PLA(Programmable Logic Array,可编程逻辑阵列)中的至少一种硬件形式来实现。处理器1001也可以包括主处理器和协处理器,主处理器是用于对在唤醒状态下的数据进行处理的处理器,也称CPU(Central ProcessingUnit,中央处理器);协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中,处理器1001可以在集成有GPU(Graphics Processing Unit,图像处理器),GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中,处理器1001还可以包括AI(Artificial Intelligence,人工智能)处理器,该AI处理器用于处理有关机器学习的计算操作。
存储器1002可以包括一个或多个计算机可读存储介质,该计算机可读存储介质可以是非暂态的。存储器1002还可包括高速随机存取存储器,以及非易失性存储器,比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中,存储器1002中的非暂态的计算机可读存储介质用于存储至少一个指令,该至少一个指令用于被处理器1001所执行以实现本申请中方法实施例提供的消防救援通信的方法。
在一些实施例中,终端1000还可选包括有:外围设备接口1003和至少一个外围设备。处理器1001、存储器1002和外围设备接口1003之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口1003相连。具体地,外围设备包括:通信组件1004、显示屏1005、摄像头组件1006、音频电路1007、其他输入组件1008和电源1009中的至少一种。
外围设备接口1003可被用于将I/O(Input/Output,输入/输出)相关的至少一个外围设备连接到处理器1001和存储器1002。在一些实施例中,处理器1001、存储器1002和外围设备接口1003被集成在同一芯片或电路板上;在一些其他实施例中,处理器1001、存储器和外围设备接口1003中的任意一个或两个可以在单独的芯片或电路板上实现,本实施例对此不加以限定。
通信组件1004被配置为便于装置1000和其他设备之间有线或无线方式的通信。装
置1000可以通过至少一种无线通信协议来与其它终端进行通信。该无线通信协议包括但不限于:城域网、各代移动通信网络(2G、3G、4G及5G)、无线局域网和/或WiFi(Wireless Fidelity,无线保真)网络。在一个示例性实施例中,通信组件1004经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件1004还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。射频电路用于接收和发射RF(Radio Frequency,射频)信号,也称电磁信号。
显示屏1005用于显示UI(UserInterface,用户界面)。该UI可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏1005是触摸显示屏时,显示屏1005还具有采集在显示屏1005的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器1001进行处理。此时,显示屏1005还可以用于提供虚拟按钮和/或虚拟键盘,也称软按钮和/或软键盘。在一些实施例中,显示屏1005可以为一个,设置终端1000的前面板;在另一些实施例中,显示屏1005可以为至少两个,分别设置在终端1000的不同表面或呈折叠设计;在再一些实施例中,显示屏1005可以是柔性显示屏,设置在终端1000的弯曲表面上或折叠面上。甚至,显示屏1005还可以设置成非矩形的不规则图形,也即异形屏。显示屏1005可以采用LCD(Liquid Crystal Display,液晶显示屏)、OLED(Organic Light-Emitting Diode ,有机发光二极管)等材质制备。
摄像头组件1006用于采集图像或视频。可选地,摄像头组件1006包括前置摄像头和后置摄像头。通常,前置摄像头设置在终端的前面板,后置摄像头设置在终端的背面。在一些实施例中,后置摄像头为至少两个,分别为主摄像头、景深摄像头、广角摄像头、长焦摄像头中的任意一种,以实现主摄像头和景深摄像头融合实现背景虚化功能、主摄像头和广角摄像头融合实现全景拍摄以及VR(VirtualReality,虚拟现实)拍摄功能或者其它融合拍摄功能。在一些实施例中,摄像头组件1006还可以包括闪光灯。闪光灯可以是单色温闪光灯,也可以是双色温闪光灯。双色温闪光灯是指暖光闪光灯和冷光闪光灯的组合,可以用于不同色温下的光线补偿。
音频电路1007可以包括麦克风和扬声器。麦克风用于采集用户及环境的声波,并将声波转换为电信号输入至处理器1001进行处理,或者输入至通信组件1004以实现语音通信。出于立体声采集或降噪的目的,麦克风可以为多个,分别设置在终端1000的不同部位。麦克风还可以是阵列麦克风或全向采集型麦克风。扬声器则用于将来自处理器1001或通信组件1004的电信号转换为声波。扬声器可以是传统的薄膜扬声器,也可以是压电陶瓷扬声器。当扬声器是压电陶瓷扬声器时,不仅可以将电信号转换为人类可听见的声波,也可以将电信号转换为人类听不见的声波以进行测距等用途。在一些实施例中,音频电路1007还可以包括耳机插孔。
其他输入组件1008可以包括物理键盘、鼠标、按钮等。这些按钮可包括但不限于:音量按钮、启动按钮。
电源1009用于为终端1000中的各个组件进行供电。电源1009可以是交流电、直流电、一次性电池或可充电电池。当电源1009包括可充电电池时,该可充电电池可以支持有线充电或无线充电。该可充电电池还可以用于支持快充技术。
本领域技术人员可以理解,图9中示出的结构并不构成对终端1000的限定,可以包括比图示更多或更少的组件,或者组合某些组件,或者采用不同的组件布置。
图10示出了本发明一个示例性实施例提供的用户终端2000的结构框图。该终端2000可以是:智能手机、平板电脑、MP3播放器(Moving Picture Experts Group AudioLayerIII,动态影像专家压缩标准音频层面3)、MP4(Moving Picture Experts GroupAudio Layer IV,动态影像专家压缩标准音频层面4)播放器、笔记本电脑或台式电脑。终端1000还可能被称为用户设备、便携式终端、膝上型终端、台式终端等其他名称,可以是上述用户终端。
通常,终端2000包括有:处理器2001和存储器2002。
处理器2001可以包括一个或多个处理核心,比如4核心处理器、8核心处理器等。处理器2001可以采用DSP(Digital Signal Processing,数字信号处理)、FPGA(Field-Programmable Gate Array,现场可编程门阵列)、PLA(Programmable Logic Array,可编程逻辑阵列)中的至少一种硬件形式来实现。处理器2001也可以包括主处理器和协处理器,主处理器是用于对在唤醒状态下的数据进行处理的处理器,也称CPU(Central ProcessingUnit,中央处理器);协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中,处理器20001可以在集成有GPU(Graphics Processing Unit,图像处理器),GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中,处理器20001还可以包括AI(Artificial Intelligence,人工智能)处理器,该AI处理器用于处理有关机器学习的计算操作。
存储器2002可以包括一个或多个计算机可读存储介质,该计算机可读存储介质可以是非暂态的。存储器2002还可包括高速随机存取存储器,以及非易失性存储器,比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中,存储器2002中的非暂态的计算机可读存储介质用于存储至少一个指令,该至少一个指令用于被处理器2001所执行以实现本申请中方法实施例提供的消防救援通信的方法。
在一些实施例中,终端2000还可选包括有:外围设备接口2003和至少一个外围设备。处理器2001、存储器2002和外围设备接口2003之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口2003相连。具体地,外围设备包括:射频电路2004、显示屏2005、摄像头2006、音频电路2007、定位组件2008、电源2009、其他输入组件2010中的至少一种。
外围设备接口2003可被用于将I/O(Input/Output,输入/输出)相关的至少一个外围设备连接到处理器2001和存储器2002。在一些实施例中,处理器2001、存储器2002和外围设备接口2003被集成在同一芯片或电路板上;在一些其他实施例中,处理器2001、存储器和外围设备接口2003中的任意一个或两个可以在单独的芯片或电路板上实现,本实施例对此不加以限定。
射频电路2004用于接收和发射RF(RadioFrequency,射频)信号,也称电磁信号。射频电路2004通过电磁信号与通信网络以及其他通信设备进行通信。射频电路2004将电信号转换为电磁信号进行发送,或者,将接收到的电磁信号转换为电信号。可选地,射频电路2004包括:天线系统、RF收发器、一个或多个放大器、调谐器、振荡器、数字信号处理器、编解码芯片组、用户身份模块卡等等。射频电路2004可以通过至少一种无线通信协议来与其它终端进行通信。该无线通信协议包括但不限于:城域网、各代移动通信网络(2G、3G、4G及5G)、无线局域网和/或WiFi(Wireless Fidelity,无线保真)网络。在一些实施例中,射频电路2004还可以包括NFC(Near Field Communication,近距离无线通信)有关的电路,本申请对此不加以限定。
显示屏2005用于显示UI(UserInterface,用户界面)。该UI可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏2005是触摸显示屏时,显示屏2005还具有采集在显示屏2005的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器2001进行处理。此时,显示屏2005还可以用于提供虚拟按钮和/或虚拟键盘,也称软按钮和/或软键盘。在一些实施例中,显示屏2005可以为一个,设置终端2000的前面板;在另一些实施例中,显示屏2005可以为至少两个,分别设置在终端2000的不同表面或呈折叠设计;在再一些实施例中,显示屏2005可以是柔性显示屏,设置在终端2000的弯曲表面上或折叠面上。甚至,显示屏2005还可以设置成非矩形的不规则图形,也即异形屏。显示屏2005可以采用LCD(Liquid Crystal Display,液晶显示屏)、OLED(Organic Light-Emitting Diode ,有机发光二极管)等材质制备。
摄像头组件2006用于采集图像或视频。可选地,摄像头组件2006包括前置摄像头和后置摄像头。通常,前置摄像头设置在终端的前面板,后置摄像头设置在终端的背面。在一些实施例中,后置摄像头为至少两个,分别为主摄像头、景深摄像头、广角摄像头、长焦摄像头、红外摄像头中的任意一种,以实现主摄像头和景深摄像头融合实现背景虚化功能、主摄像头和广角摄像头融合实现全景拍摄以及VR(VirtualReality,虚拟现实)拍摄功能或者其它融合拍摄功能。在一些实施例中,摄像头组件2006还可以包括闪光灯。闪光灯可以是单色温闪光灯,也可以是双色温闪光灯。双色温闪光灯是指暖光闪光灯和冷光闪光灯的组合,可以用于不同色温下的光线补偿。
音频电路2007可以包括麦克风和扬声器。麦克风用于采集用户及环境的声波,并将声波转换为电信号输入至处理器2001进行处理,或者输入至射频电路2004以实现语音通信。出于立体声采集或降噪的目的,麦克风可以为多个,分别设置在终端2000的不同部位。麦克风还可以是阵列麦克风或全向采集型麦克风。扬声器则用于将来自处理器2001或射频电路2004的电信号转换为声波。扬声器可以是传统的薄膜扬声器,也可以是压电陶瓷扬声器。当扬声器是压电陶瓷扬声器时,不仅可以将电信号转换为人类可听见的声波,也可以将电信号转换为人类听不见的声波以进行测距等用途。在一些实施例中,音频电路2007还可以包括耳机插孔。
定位组件2008用于定位终端2000的当前地理位置,以实现导航或LBS(LocationBased Service ,基于位置的服务)。定位组件2008可以是基于美国的GPS (GlobalPositioning System,全球定位系统)、中国的北斗系统、俄罗斯的格雷纳斯系统或欧盟的伽利略系统的定位组件。
电源2009用于为终端2000中的各个组件进行供电。电源2009可以是交流电、直流电、一次性电池或可充电电池。当电源2009包括可充电电池时,该可充电电池可以支持有线充电或无线充电。该可充电电池还可以用于支持快充技术。
其他输入组件2010可以包括物理键盘、鼠标、按钮等。这些按钮可包括但不限于:音量按钮、启动按钮。
在一些实施例中,终端2000还包括有一个或多个传感器2017。该一个或多个传感器2017包括但不限于:加速度传感器2011、陀螺仪传感器2012、压力传感器2013、磁场传感器2014、光学传感器2015以及接近传感器2016。
加速度传感器2011可以检测以终端2000建立的坐标系的三个坐标轴上的加速度大小。比如,加速度传感器2011可以用于检测重力加速度在三个坐标轴上的分量。处理器2001可以根据加速度传感器2011采集的重力加速度信号,控制触摸显示屏2005以横向视图或纵向视图进行用户界面的显示、检测用户对终端2000的敲击动作。加速度传感器2011还可以用于游戏或者用户的运动数据的采集。
陀螺仪传感器2012可以检测终端2000的机体方向及转动角度,陀螺仪传感器2012可以与加速度传感器2011协同采集用户对终端2000的3D动作。处理器2001根据陀螺仪传感器2012采集的数据,可以实现如下功能:动作感应(比如根据用户的倾斜操作来改变UI)、拍摄时的图像稳定、游戏控制以及惯性导航。
压力传感器2013可以设置在终端2000的侧边框和/或触摸显示屏2005的下层。当压力传感器2013设置在终端2000的侧边框时,可以检测用户对终端2000的握持信号,由处理器2001根据压力传感器2013采集的握持信号进行左右手识别或快捷操作。当压力传感器2013设置在触摸显示屏2005的下层时,由处理器2001根据用户对触摸显示屏2005的压力操作,实现对UI界面上的可操作性控件进行控制。可操作性控件包括按钮控件、滚动条控件、图标控件、菜单控件中的至少一种。
磁场传感器2014用于采集磁场数据。处理器2001根据磁场传感器2014采集的磁场数据确定方向。处理器2001可以根据磁场传感器2014、加速度传感器2011、陀螺仪传感器2012的传感器数据计算运动数据,实现室内导航功能。
光学传感器2015用于采集环境光强度。在一个实施例中,处理器2001可以根据光学传感器2015采集的环境光强度,控制触摸显示屏2005的显示亮度。具体地,当环境光强度较高时,调高触摸显示屏2005的显示亮度;当环境光强度较低时,调低触摸显示屏2005的显示亮度。在另一个实施例中,处理器2001还可以根据光学传感器2015采集的环境光强度,动态调整摄像头组件2006的拍摄参数。
接近传感器2016,也称距离传感器,通常设置在终端2000的前面板。接近传感器2016用于采集用户与终端2000的正面之间的距离。在一个实施例中,当接近传感器2016检测到用户与终端2000的正面之间的距离逐渐变小时,由处理器2001控制触摸显示屏2005从亮屏状态切换为息屏状态;当接近传感器2016检测到用户与终端2000的正面之间的距离逐渐变大时,由处理器2001控制触摸显示屏2005从息屏状态切换为亮屏状态。
本领域技术人员可以理解,图10中示出的结构并不构成对终端2000的限定,可以包括比图示更多或更少的组件,或者组合某些组件,或者采用不同的组件布置。
需要指出,根据实施的需要,可将本发明实施例中描述的各个部件/步骤拆分为更多部件/步骤,也可将两个或多个部件/步骤或者部件/步骤的部分操作组合成新的部件/步骤,以实现本发明实施例的目的。
上述根据本发明实施例的方法可在硬件、固件中实现,或者被实现为可存储在记录介质(诸如CD ROM、RAM、软盘、硬盘或磁光盘)中的软件或计算机代码,或者被实现通过网络下载的原始存储在远程记录介质或非暂时机器可读介质中并将被存储在本地记录介质中的计算机代码,从而在此描述的方法可被存储在使用通用计算机、专用处理器或者可编程或专用硬件(诸如ASIC或FPGA)的记录介质上的这样的软件处理。可以理解, 计算机、处理器、微处理器控制器或可编程硬件包括可存储或接收软件或计算机代码的存储组件(例如,RAM、 ROM、闪存等),当所述软件或计算机代码被计算机、处理器或硬件访问且执行时,实现在此描述的搜索方法。此外,当通用计算机访问用于实现在此示出的搜索方法的代码时,代码的执行将通用计算机转换为用于执行在此示出的搜索方法的专用计算机。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及方法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明实施例的范围。
以上实施方式仅用于说明本发明实施例,而并非对本发明实施例的限制,有关技术领域的普通技术人员,在不脱离本发明实施例的精神和范围的情况下,还可以做出各种变化和变型,因此所有等同的技术方案也属于本发明实施例的范畴。