CN114466121A - 一种基于ar的空地可视化指挥系统和工作方法 - Google Patents

一种基于ar的空地可视化指挥系统和工作方法 Download PDF

Info

Publication number
CN114466121A
CN114466121A CN202210073987.4A CN202210073987A CN114466121A CN 114466121 A CN114466121 A CN 114466121A CN 202210073987 A CN202210073987 A CN 202210073987A CN 114466121 A CN114466121 A CN 114466121A
Authority
CN
China
Prior art keywords
video
gateway
area
platform
intelligent
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210073987.4A
Other languages
English (en)
Inventor
周逸凡
张强强
周泽文
陈爽
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
709th Research Institute of CSIC
Original Assignee
709th Research Institute of CSIC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 709th Research Institute of CSIC filed Critical 709th Research Institute of CSIC
Priority to CN202210073987.4A priority Critical patent/CN114466121A/zh
Publication of CN114466121A publication Critical patent/CN114466121A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/66Arrangements for connecting between networks having differing types of switching systems, e.g. gateways
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/02Network architectures or network communication protocols for network security for separating internal from external traffic, e.g. firewalls
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Hardware Design (AREA)
  • Computer Security & Cryptography (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Alarm Systems (AREA)

Abstract

本发明提供了一种基于AR的空地可视化指挥系统和工作方法,属于AR可视化技术领域,包括智能采取区、标准化协议及前置应用区、安全隔离区和后台应用区;智能采取区包括AR眼镜、无人机、固定摄像头;标准化协议及前置应用区包括视频智能网关,以及与视频智能网关电连接的指挥调度平台;安全隔离区包括增强级防火墙网关和物理隔离网闸,且增强级防火墙网关、物理隔离网闸连接;后台应用区包括数据对比脱敏网关、车牌人像大数据平台、国际视频监控平台。本发明还提供了以上系统的工作方法。本发明中系统的建设与应用,不仅能够在警卫安保等特勤工作中发挥很好的实战效果,也能有效对城市重点区域进行整体治安情况的可视化感知。

Description

一种基于AR的空地可视化指挥系统和工作方法
技术领域
本发明属于AR可视化技术领域,更具体地,涉及一种基于AR的空地可视化指挥系统和工作方法。
背景技术
在传统视频监控体系中,监控中心大屏的指挥和调度地位不容低估,目前的监控中心大屏对于支撑实战指挥仍有较大提升空间,主要表现在三个方面。首先,展示画面以单屏单画面、单屏多画面组合、多屏拼接大画面的方式为主,画面之间相对隔离,并且在调用不同画面时需要人工切换,信息情报的联动性不高。其次,战术统计信息虽然可以通过大数据平台和图墙展示方式呈现在监控大屏上,但多数报表信息只能展示全局或者指定范围的统计数据,对于战术微观层面的辅助指挥和实战调度支撑不足。再次,监控大屏所使用的地图系统虽然健全,但基于传统的二维电子地图,其实战指挥信息的呈现仍然显得不够直观、全面、真实,在特勤警务环境下辅助指挥和辅助调度作用仍有提升必要。
AR视频现实增强技术是AR与安防应用结合的产物,主要实现将实时视频的“现实”与虚拟的“增强”信息结合起来。普通摄像机反映的是“现实”,这种现实由于缺少附加性信息,给监控画面的安保人员带来了极大困惑。为了解决这些问题,需要在“现实”的基础上进行“增强”,给实时监控画面添加名称、经纬度、方位角、距离、位置、历史案例描述、联系方式等信息,这些辅助信息能帮助屏幕前的安保人员及时有效地处理视频画面捕捉到的异常、突发情况。
此外,AR技术在其他众多领域的也有大量应用,如下所述:
公开号为CN113240249A中国专利申请公开了基于无人机增强现实的城市工程质量智能评价方法及其系统,包括:S1城市工程地分布模型的获取,以及搭载AR装置的无人机巡检路径规划;S2无人机按照规划的巡检路径飞行,根据接收到工程数据形成巡检图像;S3城市工程质量智能评价模型的建立;S4 控制所述无人机飞抵待巡检的城市工程地,获得巡检图像,代入模型得到当前工程质量的评价预测结果,并通过步骤S1获取的城市工程地分布模型形成城市工程质量评价分布结果。其从七大工程数据的实时获取全面对工程质量给予整体评价。借助无人机AR技术做到巡检的可视化与城市工程质量评价空间化分布,从而找到工程负责主体在至少一处工程地施工中可能存在的普遍问题或受地区化影响产生的问题。
公开号为CN109325478A的中国专利申请公开了基于BIM技术的无人机 AR现场观测方法,采用BIM技术在计算机中产生与规划设计一致的BIM建筑和施工模型,测绘无人机通过在现场提前布置好的GPS模块精确在现场上方航拍现场及周边的影响以及测绘其数据,无人机通过无线传输模块将航拍和测绘的信息发送到计算机上,技术人员用计算机将BIM模型通过无人机传输的测绘信息以及GPS信息定位到航拍影像中,技术人员用AR软件中通过AR算法合成,将真实的现场与虚拟BIM模型结合最终在显示屏上呈现出一个三维的实时 AR影像,观测是否达到预期效果和发现问题和漏洞。该发明能解决图纸设计和施工组织设计与施工现场存在脱节和最终竣工建筑达不到预期的问题。
公开号为CN109325478A中国专利申请公开了基于AR技术的无人机智能侦察处理系统及方法,所述无人机智能侦察处理系统包括无人机侦察设备、地面采集控制设备和AR显控设备。该发明通过无人机搭载云台和光电探测器进行远距离的实时图像采集,加大的了单兵侦察的范围;在采用AR显控设备对实时传输的图像进行显示的同时,通过操作人员的头部转动,手势截获实现对无人机、云台的控制以及对目标的截获和跟踪,增强了单兵侦查的可视化与智能化能力;使用的设备体积小易于携带,使用时人机交互感强、操作便捷,增强了单兵侦查的便携性与灵活性。
此外,公告号为US9070289(B2)的美国专利申请公开了一种用于测量地面车辆速度的方法和系统,包括移动平台,该移动平台包括位于道路附近的无人机(UAV),UAV在UAV控制单元的控制和导航下运行,UAV还携带摄像机和监控设备,摄像机和监控设备包括车载计算系统、带广角镜头的摄像机和带远摄镜头的摄像机,摄像机安装在摇摄/倾斜设备上。车载计算系统操作的算法用于检测和跟踪在道路上行驶的车辆。安装在摇摄/倾斜设备上的摄像机在计算机视觉算法的指导下移动,以使检测到的移动车辆中的目标车辆保持在视野内,并测量目标车辆的速度。
在AR技术基础上,针对现有技术的缺陷,本发明开发一种新型的空地可视化指挥系统,以能提供直观、全面、真实、适时视频监控,能对大屏指挥端与前线警员进行信息互通。
发明内容
针对现有技术的缺陷,本发明的目的在于提供一种基于AR的空地可视化指挥系统和工作方法,通过将智能采取区、标准化协议及前置应用区、安全隔离区和后台应用区进行巧妙连接,获得空地可视化指挥系统,以能提供直观、全面、真实、适时视频监控,能对大屏指挥端与前线警员进行信息互通。
为实现上述目的,本发明提供了一种基于AR的空地可视化指挥系统,其包括智能采取区、标准化协议及前置应用区、安全隔离区和后台应用区,其中,
智能采取区包括AR眼镜、无人机和固定摄像头,AR眼镜、无人机和固定摄像头相互独立,
标准化协议及前置应用区包括视频智能网关和与视频智能网关相连接的指挥调度平台,智能采取区与视频智能网关相连接,视频智能网关采用AR方式接收智能采集区上传的图片和视频,
安全隔离区包括专用网络安全边界子系统,专用网络安全边界子系统由增强级防火墙网关与物理隔离网闸组成,增强级防火墙网关与物理隔离网闸相互连接,视频智能网关与增强级防火墙网关相连接,
后台应用区包括数据对比脱敏网关、车牌人像大数据平台、国际视频监控平台,数据对比脱敏网关、车牌人像大数据平台和国际视频监控平台相互独立,且均与物理隔离网闸相连接。
进一步的,智能采取区还包括警务通和AR高点摄像机,警务通和AR眼镜相连,AR高点摄像机设置在被监控区高点位置,以能拍摄到被监控区的全景视频。
进一步的,AR眼镜、无人机以及固定摄像头均内嵌深度学习算法模块,深度学习算法模块用于负责人脸识别过程的90%运算,人脸识别过程的运算包括人像的自动采集、预处理和结构化从而获得人像图片。
进一步的,专用网络安全边界子系统的物理隔离网闸为物理隔离型,专用网络安全边界子系统用于接受来自于经过认证的AR眼镜采集的图片和视频,对来自于经过认证的AR眼镜采集的图片及视频数据严格扫描并进行格式判别,确认图片及视频数据安全后单向导入后台监控区。
进一步的,视频智能网关还用于将人像图片通过专用网络安全边界子系统推送到外界安防人像平台库进行1:N比对,专用网络安全边界子系统用于解析从外界的安防人像平台库返回的结果,并将解析后的结果传输至后台监控区的数据对比脱敏网关,通过数据对比脱敏网关将敏感数据处理后,再通过专用网络安全边界子系统将脱敏后的数据返回给视频智能网关。
进一步的,视频智能网关还用于将返回的结果和实时视频进行叠加处理,生成实时融合视频,并将融合视频推送给指挥调度平台和AR眼镜显示,同时也能将融合视频通过专用网络安全边界子系统同时推送给国际视频监控平台。
按照本发明的第二个方面,还提供一种如上所述的基于AR的空地可视化指挥系统进行工作的方法,
首先,通过智能采集区采集图片和视频,
接着,将智能采集区采集的图片和视频输入至视频智能网关,通过视频智能网关进行数据处理后,将处理后的图片和视频传输给指挥调度平台和安全隔离区,
然后,完全隔离区确认图片和视频安全后,进一步传输至后台监控区,进行数据比对或者脱敏,
最后,经过数据比对和脱敏后信息进一步通过完全隔离区和视频智能网关回传至AR眼镜和指挥调度平台,指挥调度平台根据获取的信息进行布控。
进一步的,指挥调度平台根据获取的信息进行布控包括如下工作内容:
指挥调度平台在图片或者视屏上进行实时标注,并在地图上选取AR智能眼镜,直接与对应警员发送实时语音、文字、图片、现场实时视频,
地面民警通过AR智能眼镜获取指挥调度平台推送的视频或者图片,指挥调度平台中心实时查看任意警员的第一视角直播视频画面,进行实时监控,通过指挥调度平台进行多人多地实时布控和协同作战,实现扁平化指挥和调度。
具体的,指挥调度平台实时监控与指挥调度一线警员佩戴的AR眼镜回传的实时执勤执法画面,通过视频智能网关推送到指挥调度平台,指挥调度平台可以通过实时画面了解现场情况,如遇突发事件可以根据实时画面,实时指挥调度现场执勤人员。指挥调度平台可以查看佩戴AR眼镜前线警员、无人机的定位信息以及巡逻执勤情况,在后台进行动态标注、前端实时显示,前线信息,实时回传,定制战术指示,传达前线人员,迅速执行任务。在无人机拍摄的实景图中,通过叠加的方式显示地面警员位置,还可以在图片上添加路线指引,并推送给AR眼镜,使战术更加直观易懂,警员能更高效的抵达事发现场。
总体而言,通过本发明所构思的以上技术方案与现有技术相比,具有以下有益效果:
本发明设计了基于AR的空地可视化指挥系统,包括智能采取区、标准化协议及前置应用区、安全隔离区和后台应用区,智能采集区包括AR眼镜、无人机和固定摄像头,标准化协议及前置应用区包括视频智能网关和与视频智能网关相连接的指挥调度平台,安全隔离区包括增强级防火墙网关与物理隔离网闸,后台应用区包括数据对比脱敏网关、车牌人像大数据平台、国际视频监控平台,将以上各个部分有机连接成一体,形成了AR视频现实增强。这样的系统能够在警卫安保等特勤工作中发挥很好的实战效果,在日常勤务工作中也能有效对城市重点区域进行整体治安情况的可视化感知,对警力资源分布、辖区内各单位联防信息、人员分布及嫌疑车辆、嫌疑人员流动状况都能实时全面掌控,发挥了科技强警的优势。
AR眼镜、无人机以及固定摄像头均内嵌深度学习算法模块,将AR与Al 结合,变被动监控为主动监控,采用Al安防深度智能化前端(包括AR眼镜和固定摄像头)自动感知人、车、事件等信息,并将信息实时推送给AR眼镜和指挥调度平台,AR眼镜通过数字标签以画中画的方式直观呈现数据信息,并实现人、车、事件的预警信息由被动通知到主动发现,彻底改变过去只能通过指挥中心进行人工监测的方案。
以上设计能实现AR与环境结合,具体的,在安保区域综合管控中,能够通过重点区域的高点AR全景视频监控,再通过添加标签标识关联附近相关资源,实现对安保区域的立体化综合管控,即只需一台AR高点摄像机就能够将视场内所有资源进行统一融合、调度、管理,及时掌控周边情形态势,有针对性地提前进行警力布置、执行安保相关预案。
本发明系统和方法可根据重点管控目标有针对性地设置管控区域、对象,在特定安保区域(如禁行/停区域、禁止人员进入等区域),可通过区域标签进行可视化标注,一旦该区域出现异常情况,检测到的异常目标即以画中画方式显示到全景监控画面中,方便安保指挥中心快速定位事件、处置事件,达到高效、直观的可视化管控的目标。
附图说明
图1是本发明实施例提供的基于AR的空地可视化指挥系统的组成结构示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
图1是本发明实施例提供的基于AR的空地可视化指挥系统的组成结构示意图,由图可知,其包括智能采取区、标准化协议及前置应用区、安全隔离区和后台应用区,其中,智能采取区包括AR眼镜、无人机和固定摄像头,AR眼镜、无人机和固定摄像头相互独立,标准化协议及前置应用区包括视频智能网关和与视频智能网关相连接的指挥调度平台,智能采取区与视频智能网关相连接,视频智能网关采用AR方式接收智能采集区上传的图片和视频,安全隔离区包括专用网络安全边界子系统,专用网络安全边界子系统由增强级防火墙网关与物理隔离网闸组成,增强级防火墙网关与物理隔离网闸相互连接,视频智能网关与增强级防火墙网关相连接,后台应用区包括数据对比脱敏网关、车牌人像大数据平台、国际视频监控平台,数据对比脱敏网关、车牌人像大数据平台和国际视频监控平台相互独立,且均与物理隔离网闸相连接。
其中,智能采取区还包括警务通和AR高点摄像机,警务通和AR眼镜相连,AR高点摄像机设置在被监控区高点位置,以能拍摄到被监控区的全景视频。AR眼镜、无人机以及固定摄像头均内嵌深度学习算法模块,深度学习算法模块用于负责人脸识别过程的90%运算,人脸识别过程的运算包括人像的自动采集、预处理和结构化从而获得人像图片。
专用网络安全边界子系统的物理隔离网闸为物理隔离型,专用网络安全边界子系统用于接受来自于经过认证的AR眼镜采集的图片和视频,对来自于经过认证的AR眼镜采集的图片及视频数据严格扫描并进行格式判别,确认图片及视频数据安全后单向导入后台监控区。
视频智能网关还用于将人像图片通过专用网络安全边界子系统推送到外界安防人像平台库进行1:N比对,专用网络安全边界子系统用于解析从外界的安防人像平台库返回的结果,并将解析后的结果传输至后台监控区的数据对比脱敏网关,通过数据对比脱敏网关将敏感数据处理后,再通过专用网络安全边界子系统将脱敏后的数据返回给视频智能网关。视频智能网关还用于将返回的结果和实时视频进行叠加处理,生成实时融合视频,并将融合视频推送给指挥调度平台和AR眼镜显示,同时也能将融合视频通过专用网络安全边界子系统同时推送给国际视频监控平台。
如上所述的基于AR的空地可视化指挥系统进行工作的方法,包括如下步骤:
首先,通过智能采集区采集图片和视频,接着,将智能采集区采集的图片和视频输入至视频智能网关,通过视频智能网关进行数据处理后,将处理后的图片和视频传输给指挥调度平台和安全隔离区,然后,完全隔离区确认图片和视频安全后,进一步传输至后台监控区,进行数据比对或者脱敏,最后,经过数据比对和脱敏后信息进一步通过完全隔离区和视频智能网关回传至AR眼镜和指挥调度平台,指挥调度平台根据获取的信息进行布控。
指挥调度平台根据获取的信息进行布控包括如下工作内容:
指挥调度平台在图片或者视屏上进行实时标注,并在地图上选取AR智能眼镜,直接与对应警员发送实时语音、文字、图片、现场实时视频。地面民警通过AR智能眼镜获取指挥调度平台推送的视频或者图片,指挥调度平台中心实时查看任意警员的第一视角直播视频画面,进行实时监控,通过指挥调度平台进行多人多地实时布控和协同作战,实现扁平化指挥和调度。
本发明采用了AI边缘计算,具体为,AR眼镜内部集成了Intel人工智能的 VPU芯片,人脸识别的90%计算工作可以在眼镜端完成,人脸识别的计算主要包括人脸检测、人脸去重和择优、人脸识别,以上全部的计算采用AI边缘计算完成。智能采集区的AR眼镜、无人机和固定摄像头只向视频智能网关传输大约20~40KB的人脸图片,这样既能减少传输带宽的成本,同时也能减轻后台服务器的压力。
本发明的AR眼镜采用了AR视频融合:AR眼镜能即时将人脸识别和车牌识别的结果直观的融合到实时图像的目标中,醒目并清晰提示AR眼镜可视区域内的重点目标,同时支持融合的实时视频的中心推送功能。AR眼镜内嵌
Figure RE-GDA0003546189120000091
视觉处理器
Figure RE-GDA0003546189120000092
用传统处理器1/5的功耗,实现10倍的处理性能,具有超强性能和续航能力,同时集成在AR眼镜上的还有九轴传感器、双降噪麦克风和扬声器。
视频智能网关是专门为AR眼镜优化设计的音视频流媒体和数据汇聚的指挥调度服务设备,是一款软硬一体化设计的对前端AR眼镜视频流媒体采集、双向流媒体调度、反向信令数据推送、图片数据GA/T1400汇聚转码、视频流媒体国标GB/T28181汇聚转码的网关服务设备。此外,视频智能网关支持与各监控平台采用国标GB/T28181协议进行平滑无缝对接,快速实现指挥调度平台的AR指挥调度、人脸车牌的无感识别和AR眼镜端基于流媒体交互的视频双向推送,同时视频智能网关支持多上级平台同步推送,实现多上级平台各自独立的共享AR眼镜的视频回传,使不同的上级平台可同步接收带有人脸、车牌等识别判断信息叠加的实时融合视频。
增强级防火墙网关为VC-SS6200增强级防火墙网关。VC-SS6200增强级防火墙网关和物理隔离网闸是广泛用于政府、企业、安防等部门既需要对网络进行隔离又需要进行数据库、图片、视频流以及其它网络数据交换的场所,增强级防火墙网关用于部署在不同网络安全域之间,实现了不同网络安全域之间“安全隔离、数据交换”的安全可靠的通信要求,这样的设计,符合安防信息通讯网边界接入平台安全规范(试行)视频接入部分要求。
数据对比脱敏网关支持Onvif透传、国标GB/T28181透传、部标GA/T1400 透传,支持SIP协议和视频流RTSP协议,支持RTP封装的Mpeg2、Mpeg4、 H264、H265等流媒体数据和GIF、BMP、JPEG等多种图片格式的数据快速识别、校验的数据交换工作模式,实现网络间安全隔离后的数据传输访问,支持对视频控制协议端口访问过滤,支持源地址、目标地址及端口过滤控制,还支持视频及图片数据单向导入,防止逆向泄密。
视频智能网关采用AR方式接受互联网上传的图片和视频,视频智能网关将人像图片通过专用网络安全边界子系统推送到安防人像平台库进行1:N比对,解析返回结果,通过数据对比,脱敏网关将敏感数据处理后,通过专用网络安全边界子系统,将脱敏后的数据返回给视频智能网关,视频智能网关将返回的结果和实时视频进行叠加处理,生成实时融合视频,并将融合视频推送给指挥调度平台和AR眼镜显示,同时也可以将融合视频通过专用网络安全边界子系统同时推送给国际视频监控平台,专用网络安全边界子系统由增强级防火墙网关和物理隔离网闸组成,且物理隔离网闸是物理隔离的网络隔离型,专用网络安全边界子系统仅接受经过认证的AR智能眼镜采集的图片和视频,对图片及视频数据严格扫描并进行格式判别,确认数据安全后单向导入后台监控区。
采用如上基于AR的空地可视化指挥系统进行工作的方法,比如为如下工作方式:
对于执法过程,治安民警、铁路民警、地铁民警、公交民警、巡特警等在执法过程中,对临时需要关注的人员或者临时抓捕的人员随时进行动态布控。
对于突发事件处理,当某地发生突发事件时,无人机起飞到事发地,当无人机发现嫌疑建筑物或者可疑目标时,飞手操作无人机飞往嫌疑目标上方,并将其定位信息通过视频智能网关传回给指挥调度平台,结合智能采集区的AR 眼镜或者固定摄像头采集的视频资源,侦查人员可通过人工对嫌疑目标进行研判分析,分析完成后,可将研判分析信息以文字、图片、视频等形式实时发布、共享给指挥调度平台,并通过指挥调度平台下发给事发地附近的巡逻民警。同时,在无人机拍摄的实景图上进行布控,根据巡逻民警的不同位置,在实景图上生成赶往事发现场的路径规划,推送给现场佩戴AR眼镜民警的眼前,对临时需要布控抓捕的人员,或者固定摄像头告警的重点人员,通过把目标人员照片推送到警务终端。现场执法警力佩戴AR眼镜可以进行人脸识别/车牌识别等身份核查工作,AR眼镜可以实时识别出目标人员或目标车辆并进行声音告警,同时在眼前的显示器上显示红色警示框。因此,可以省去低头看照片、人工比对的过程,确认嫌疑人身份后可以通过一键语音对讲联通指挥中心,同时利用指挥调度平台点击现场执法人员(现场执法人员佩戴AR眼镜)图标,接通后可以实时查看现场执法人员的第一视角现场直播并执行基于音视频的实时指挥调度。
本发明提供了一种基于AR的空地可视化指挥系统,能实现基于AR智能眼镜的人脸识别、实时视频推送的功能。通过AR眼镜后台与外界的安防人像平台库对接,民警在佩戴AR眼镜巡逻时,可随时随地对过往人员进行人脸识别,实时识别人员的身份,并对在逃、重点人员实时预警,进而大幅度提升民警工作效率。同时民警佩戴的AR眼镜中的移动视野叠加比对结果的视频能实时在安防指挥调度平台上进行显示,指挥人员通过现场AR眼镜移动视野身临其境进行远程指挥,协同作战。本发明运用AR+AI技术,可实现可视化、智能化的天地一体融合指挥协同作战模式。
本领域的技术人员容易理解,以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。

Claims (8)

1.一种基于AR的空地可视化指挥系统,其特征在于,其包括智能采取区、标准化协议及前置应用区、安全隔离区和后台应用区,其中,
智能采取区包括AR眼镜、无人机和固定摄像头,AR眼镜、无人机和固定摄像头相互独立,
标准化协议及前置应用区包括视频智能网关和与视频智能网关相连接的指挥调度平台,智能采取区与视频智能网关相连接,视频智能网关采用AR方式接收智能采集区上传的图片和视频,
安全隔离区包括专用网络安全边界子系统,专用网络安全边界子系统由增强级防火墙网关与物理隔离网闸组成,增强级防火墙网关与物理隔离网闸相互连接,视频智能网关与增强级防火墙网关相连接,
后台应用区包括数据对比脱敏网关、车牌人像大数据平台、国际视频监控平台,数据对比脱敏网关、车牌人像大数据平台和国际视频监控平台相互独立,且均与物理隔离网闸相连接。
2.如权利要求1所述的一种基于AR的空地可视化指挥系统,其特征在于,智能采取区还包括警务通和AR高点摄像机,警务通和AR眼镜相连,AR高点摄像机设置在被监控区高点位置,以能拍摄到被监控区的全景视频。
3.如权利要求2所述的一种基于AR的空地可视化指挥系统,其特征在于,AR眼镜、无人机以及固定摄像头均内嵌深度学习算法模块,深度学习算法模块用于负责人脸识别过程的90%运算,人脸识别过程的运算包括人像的自动采集、预处理和结构化从而获得人像图片。
4.如权利要求3所述的一种基于AR的空地可视化指挥系统,其特征在于,专用网络安全边界子系统的物理隔离网闸为物理隔离型,专用网络安全边界子系统用于接受来自于经过认证的AR眼镜采集的图片和视频,对来自于经过认证的AR眼镜采集的图片及视频数据严格扫描并进行格式判别,确认图片及视频数据安全后单向导入后台监控区。
5.如权利要求4所述的一种基于AR的空地可视化指挥系统,其特征在于,视频智能网关还用于将人像图片通过专用网络安全边界子系统推送到外界安防人像平台库进行1:N比对,专用网络安全边界子系统用于解析从外界的安防人像平台库返回的结果,并将解析后的结果传输至后台监控区的数据对比脱敏网关,通过数据对比脱敏网关将敏感数据处理后,再通过专用网络安全边界子系统将脱敏后的数据返回给视频智能网关。
6.如权利要求5所述的一种基于AR的空地可视化指挥系统,其特征在于,视频智能网关还用于将返回的结果和实时视频进行叠加处理,生成实时融合视频,并将融合视频推送给指挥调度平台和AR眼镜显示,同时也能将融合视频通过专用网络安全边界子系统同时推送给国际视频监控平台。
7.如权利要求1-6之一所述的基于AR的空地可视化指挥系统进行工作的方法,其特征在于,
首先,通过智能采集区采集图片和视频,
接着,将智能采集区采集的图片和视频输入至视频智能网关,通过视频智能网关进行数据处理后,将处理后的图片和视频传输给指挥调度平台和安全隔离区,
然后,完全隔离区确认图片和视频安全后,进一步传输至后台监控区,进行数据比对或者脱敏,
最后,经过数据比对和脱敏后信息进一步通过完全隔离区和视频智能网关回传至AR眼镜和指挥调度平台,指挥调度平台根据获取的信息进行布控。
8.如权利要求7所述的基于AR的空地可视化指挥系统进行工作的方法,其特征在于,指挥调度平台根据获取的信息进行布控包括如下工作内容:
指挥调度平台在图片或者视屏上进行实时标注,并在地图上选取AR智能眼镜,直接与对应警员发送实时语音、文字、图片、现场实时视频,
地面民警通过AR智能眼镜获取指挥调度平台推送的视频或者图片,指挥调度平台中心实时查看任意警员的第一视角直播视频画面,进行实时监控,通过指挥调度平台进行多人多地实时布控和协同作战,实现扁平化指挥和调度。
CN202210073987.4A 2022-01-21 2022-01-21 一种基于ar的空地可视化指挥系统和工作方法 Pending CN114466121A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210073987.4A CN114466121A (zh) 2022-01-21 2022-01-21 一种基于ar的空地可视化指挥系统和工作方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210073987.4A CN114466121A (zh) 2022-01-21 2022-01-21 一种基于ar的空地可视化指挥系统和工作方法

Publications (1)

Publication Number Publication Date
CN114466121A true CN114466121A (zh) 2022-05-10

Family

ID=81411779

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210073987.4A Pending CN114466121A (zh) 2022-01-21 2022-01-21 一种基于ar的空地可视化指挥系统和工作方法

Country Status (1)

Country Link
CN (1) CN114466121A (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140254866A1 (en) * 2013-03-08 2014-09-11 Next Level Security Systems, Inc. Predictive analysis using vehicle license plate recognition
CN107067159A (zh) * 2017-03-09 2017-08-18 深圳华博高科光电技术有限公司 智慧城市管理调度平台系统
CN208433010U (zh) * 2018-01-29 2019-01-25 东莞市芯萌慧显电子科技有限公司 基于人脸识别的警用ar显示系统
US20190244425A1 (en) * 2018-02-06 2019-08-08 Servicenow, Inc. Augmented Reality Assistant
US20190394230A1 (en) * 2019-07-30 2019-12-26 Lg Electronics Inc. Security method for vehicle network, firewall for the same, and computer-readable recording medium recording the same
CN110958218A (zh) * 2019-10-16 2020-04-03 平安国际智慧城市科技股份有限公司 基于多网通信的数据传输方法及相关设备
KR102146264B1 (ko) * 2020-01-08 2020-08-20 제이에스씨(주) 5g 네트워크 기반 증강현실을 이용한 통합 지휘통제 플랫폼 시스템

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140254866A1 (en) * 2013-03-08 2014-09-11 Next Level Security Systems, Inc. Predictive analysis using vehicle license plate recognition
CN107067159A (zh) * 2017-03-09 2017-08-18 深圳华博高科光电技术有限公司 智慧城市管理调度平台系统
CN208433010U (zh) * 2018-01-29 2019-01-25 东莞市芯萌慧显电子科技有限公司 基于人脸识别的警用ar显示系统
US20190244425A1 (en) * 2018-02-06 2019-08-08 Servicenow, Inc. Augmented Reality Assistant
US20190394230A1 (en) * 2019-07-30 2019-12-26 Lg Electronics Inc. Security method for vehicle network, firewall for the same, and computer-readable recording medium recording the same
CN110958218A (zh) * 2019-10-16 2020-04-03 平安国际智慧城市科技股份有限公司 基于多网通信的数据传输方法及相关设备
KR102146264B1 (ko) * 2020-01-08 2020-08-20 제이에스씨(주) 5g 네트워크 기반 증강현실을 이용한 통합 지휘통제 플랫폼 시스템

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
刘明洁,熊建平: "《城市道路交通拥堵问题研究 以南昌市为视角》", 中国人民公安大学出版社, pages: 50 - 55 *
宋俊强: "《多媒体大屏幕加固显示与人机交互技术研究》", 《舰船电子工程》, pages 127 - 130 *
杨伟涛, 杨康才, 杨思凌等: "《智慧警务5G+初》", 《警察技术》, no. 2, pages 9 - 10 *
马良海: "《AR视频现实增强技术在警卫安保中的建设与应用》", 《警察技术》, no. 4, pages 109 - 112 *

Similar Documents

Publication Publication Date Title
CN111770266B (zh) 一种智能视觉感知系统
CN102724482B (zh) 基于gps和gis的智能视觉传感网络运动目标接力跟踪系统
CN103295396B (zh) 交通事故非现场快速取证方法及系统
CN115348247A (zh) 基于天空地一体化技术的森林火灾检测预警及决策系统
CN107483889A (zh) 智慧工地管控平台的隧道监控系统
US11253736B2 (en) Dispatching UAVs for wildfire surveillance
CN105391975A (zh) 一种场面监视中的视频处理方法、装置及场面监视系统
CN104200671A (zh) 一种基于大数据平台的虚拟卡口管理方法及系统
US20170280107A1 (en) Site sentinel systems and methods
CN112449093A (zh) 一种三维全景视频融合监控平台
CN104581081A (zh) 基于视频信息的客流分析方法
CN110650322A (zh) 一种基于云服务、物联网和ar安防眼镜的安防系统
CN115248880A (zh) 一种智慧城市安防监控系统
CN112185121A (zh) 一种基于5g的交通精准执法方法及设备
CN105611253A (zh) 一种基于智能视频分析技术的态势感知系统
CN110351528A (zh) 一种基于ar化实景聚合的指挥平台
CN103576691A (zh) 3g警务无人机管控系统
CN103607543B (zh) 视频浓缩方法、系统以及视频监控方法和系统
EP3965085A1 (en) Real-time crime center solution with dispatch directed digital media payloads
CN111163288A (zh) 一种智能移动警务系统及警务办公方法
WO2020211593A1 (zh) 交通道路的数字化重建方法、装置和系统
CN107045805B (zh) 一种用于小型航空器和空飘物的监测方法及系统
RU2693926C1 (ru) Система контроля и воздействия на объекты, представляющие интерес, и выполняемые ими процессы и соответствующий способ
CN114466121A (zh) 一种基于ar的空地可视化指挥系统和工作方法
CN107357936A (zh) 一种自动融合多源图像以提供增强的情境感知系统及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination