CN110188238A - 一种智慧公安视频检索系统 - Google Patents
一种智慧公安视频检索系统 Download PDFInfo
- Publication number
- CN110188238A CN110188238A CN201910407098.5A CN201910407098A CN110188238A CN 110188238 A CN110188238 A CN 110188238A CN 201910407098 A CN201910407098 A CN 201910407098A CN 110188238 A CN110188238 A CN 110188238A
- Authority
- CN
- China
- Prior art keywords
- video
- target
- data
- module
- video frequency
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/73—Querying
- G06F16/732—Query formulation
- G06F16/7335—Graphical querying, e.g. query-by-region, query-by-sketch, query-by-trajectory, GUIs for designating a person/face/object as a query predicate
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Computational Linguistics (AREA)
- Mathematical Physics (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
本发明公开了一种智慧公安视频检索系统,包括:视频获取终端、视频摘要服务器、视频处理服务器、视频存储数据库和应用管理终端;该系统可与警综平台、视频基础平台进行数据的关联与共享;通过数据处理并减轻了海量非结构化数据存储时间不长、占用空间较大的问题;为今后的数据分析比对、线索挖掘奠定坚实的数据基础;且具备分析能力可解决基层实战民警处理海量视频数据时,难度大、效率低的问题;可对实战民警所采集的视频数据进行即时的处理,将自动提取图像内的人物特征、车辆特征和其他移动物体特征,与其他的涉案视频、卡口过往车辆视频等数据按照以图搜图的原理进行比对分析,从而实现案件的串并、车辆识别等。
Description
技术领域
本发明涉及视频侦查技术领域,特别涉及一种智慧公安视频检索系统。
背景技术
从侦查技术趋势来说,视频侦查已经成为继刑事技术、技术侦查、网络侦查之后的第四大侦查技术手段,随着基础监控设施的不断完善,前端建设规模的持续扩大,原始视频采集的问题已经得到有效解决,但基于这些视频如何进行深度应用,成了摆在现实面前的第二个问题。从视频资源角度说,要想发挥其价值,首先要对视频进行有效存储,有效存储并不是全部存储,这需要视频分析和检索等相关算法从海量的原始视频中甄别出有价值的视频片段进行保管,这些视频资源就可作为视频侦查链条的最顶端。然后的工作就是对视频进行结构化,使视频从无序状态变为有序状态,通过数据的结构化清洗,进一步将数据仓库聚焦,形成视频侦查体系运行的数据基础。数据地基打好,最后的动作就是在数据的基础上衍生各类深度应用。借此,实现数据的真正价值。
视频侦查作为一种的新兴手段,虽然发挥了重要作用,但其发展还不成熟,特别是在分析工具、结构化处理、资源共享、深度研判、应用考核等方面缺乏体系化的建设。表现问题如下:
1、缺乏智能化分析工具
在侦查过程中,民警经常需要对海量的视频、图片信息进行分析,从中查找嫌疑目标,针对此类,通常都是采用人工浏览方式进行,效率较低,负荷较大。
2、涉案视频图像采集率低
视频在案件侦查过程中作用率高,但涉案视频图像采集率偏低,较国内平均水平还有不小差距。
3、专业视频研判员少
因为缺乏成体系化的视频侦查建设,导致视频研判专业人才缺乏,此种现象在基础所队尤甚。
4、信息挖掘能力不足
随着前端监控设备建设规模的持续扩展,每天会产生大量的视频数据,思考如何利用视频结构化手段对此类海量信息进行分析处理,再利用模式识别技术实现在海量数据中查找特定目标则成为解决视频侦查领域对信息资源进行深度关联和价值挖掘的重要解决办法。
5、配套机制不完善
虽在市局有专业的视频侦查机构,但尚未建立规范化的视频侦查体系,缺少相关业务流程规范和绩效考核等相关机制的支撑,故不能对基层实战单位进行视频侦查工作指导。
发明内容
本发明的目的在于,为促进视频侦查实战和研判体系的规范化、标准化建设,充分挖掘侦查过程中产生的涉案视频图像数据,找到案件之间关联的规律,实现大数据碰撞,产生特定范围内的串并战果,提供了智慧公安视频检索系统。
本发明实施例提供一种智慧公安视频检索系统,包括:视频获取终端、视频摘要服务器、视频处理服务器、视频存储数据库和应用管理终端;
所述视频获取终端,包括:VMS、采集摄像头、第一数据库、web客户端和管理员应用;用于通过摄像头获取待分析视频源或用于获取离线上传的待分析视频源,并存储;
所述视频摘要服务器与所述视频获取终端连接,用于获取所述第一数据库的数据或上传的数据,对单分析视频源提供网络、视频流、数据分析、聚合服务、元数据数据库、视频文件存储、负载平衡、VMS插件和用户管理服务;
所述视频处理服务器与所述视频摘要服务器连接,包括至少一个GPU,用于提供视频解码、渲染、对象提取和分类服务;
所述视频存储数据库对所述视频处理服务器处理之后的数据进行统一集中存储;
所述应用管理终端支持web客户端登陆,随时查看视频处理进展;并对多客户端、摄像头进行管理设置。
在一个实施例中,所述视频摘要服务器,包括:
负载平衡模块,用于借助nginx实现系统软集群和负载均衡处理。
在一个实施例中,所述视频摘要服务器,还包括:
视频摘要模块,用于从VMS和基于文件的源分析视频,将原始视频档案中的所有移动物体检索分离出来,并重建和叠加回原始场景,在同一画面上显示不同时间出现的移动物体。
在一个实施例中,所述视频处理服务器,包括:
视频检索模块,用于根据选择多个检索条件叠加使用,显示检索结果;
统计模块,用于在视频范围内通过颜色的深浅来显示移动目标的流量差异或单独显示有移动目标逗留的区域。
在一个实施例中,所述视频检索模块包括:
时间范围单元,用于将搜索条件限制在特定的时间范围内;
视频源单元,用于将对象限制到特定的摄像头或文件;使用外观和运动过滤器,在多个视频源上快速定位感兴趣的人和车辆;
类别单元,用于根据移动目标的类别进行筛选;
区域检索单元,用于通过划定一个或多个三边或四边多边形区域关注区或排出区,缩小在视频中关注的范围;
大小单元,用于通过调节阀值滚动条来筛选视频中的移动目标的大小;
判断单元,用于按照行径速度、方向进行检索;通过阀值滚动条的调节删选速度差别的移动目标;
颜色分类单元,用于根据颜色作为条件在视频中进行筛选及识别对象;
标定路径单元,用于根据获取的路径进行筛选;
面部识别单元,用于人脸筛选,查找出现在一个或多个视频中的相似人脸。
在一个实施例中,所述统计模块,包括:
综合检索单元,用于获取被点击视频中的某一目标,将这一目标作为检索条件,在整个视频中查找与之相似的所有目标;
热点统计单元,用于在整个视频范围内通过颜色的深浅来显示移动目标的流量,移动目标较少的区域颜色浅,移动目标流量越大的区域颜色越红;统计移动目标的移动方向,根据颜色的深浅来区分不同方向上的流量区别;
逗留统计单元,用于显示出在视频范围内移动目标逗留的区域。
在一个实施例中,所述视频处理服务器,还包括:
调取模块,用于将视频中的移动对象分离排列出来,回放目标所在原始视频中这一目标的完整片段;
标签设置模块,用于对所有目标设置成标签,并收藏在标签栏;
逐帧播放模块,用于通过控制键盘方向键来逐帧播放视频,或者通过获取鼠标点击某一个移动目标并通过滚轮滚动来单独逐帧播放这一目标的移动情况;
图像放大模块,用于将视频放大或缩小查看,以鼠标停留的点为中心放大;
视频导出模块,用于将整段视频以图片或者视频形式导出;
视频管理模块,用于显示视频的详细信息和管理同一案件的视频归类;
案例管理模块,用于在单个视频组中组织调查的所有视频资产、感兴趣的书签对象,并在输出报告中总结案例发现。
本发明的优点在于,与现有技术相比,本发明提出的一种智慧公安视频检索系统,可与警综平台、视频基础平台进行数据的关联与共享;通过数据处理并减轻了海量非结构化数据存储时间不长、占用空间较大的问题;为今后的数据分析比对、线索挖掘奠定坚实的数据基础;且具备分析能力可解决基层实战民警处理海量视频数据时,难度大、效率低的问题;可对实战民警所采集的视频数据进行即时的处理,将自动提取图像内的人物特征、车辆特征和其他移动物体特征,与其他的涉案视频、卡口过往车辆视频等数据按照以图搜图的原理进行比对分析,从而实现案件的串并、车辆识别等。
本发明的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例,对本发明的技术方案做进一步的详细描述。
附图说明
附图用来提供对本发明的进一步理解,并且构成说明书的一部分,与本发明的实施例一起用于解释本发明,并不构成对本发明的限制。在附图中:
图1为本发明实施例提供的智慧公安视频检索系统的结构示意图。
图2为本发明实施例提供的视频摘要服务器2的结构框图。
图3为本发明实施例提供的视频处理服务器3的结构框图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
参照图1所示,本发明实施例提供的智慧公安视频检索系统,包括视频获取终端1、视频摘要服务器2、视频处理服务器3、视频存储数据库4和应用管理终端5;
其中,上述视频获取终端1,包括:采集摄像头与第一数据库;还可以包括,VMS(管理视频监控系统的软件)、web客户端、管理员应用;比如通过摄像头获取待分析视频源存储到第一数据库、或通过VMS软件存储到第一数据库、或将存储介质中的视频通过web客户端上传、或通过管理员应用获取离线上传的待分析视频源,并存储;
上述视频摘要服务器2与上述视频获取终端1连接,用于获取所述第一数据库的数据或通过web客户端/管理员应用上传的数据,对单分析视频源提供网络、视频流、数据分析、聚合服务、元数据数据库、视频文件存储、负载平衡、VMS插件和用户管理服务;
上述视频处理服务器3与上述视频摘要服务器2连接,包括至少一个GPU,用于提供视频解码、渲染、对象提取和分类服务;
上述视频存储数据库4对视频处理服务器3处理之后的数据进行统一集中存储;
应用管理终端5支持web客户端登陆,随时查看视频处理进展;并对多客户端、摄像头进行管理设置。
本实施例中,该智慧公安视频检索系统由如下几个模块组成。
第一部分:基础资源部分。支持通过和监控平台对接获取待分析视频源;支持摄像头直接上传待分析视频源;支持离线上传视频作为待分析视频源。
第二部分:视频摘要部分。负责网络、视频流、数据分析和聚合服务、元数据数据库、视频文件存储、负载平衡、VMS插件和用户管理。
第三部分:视频处理部分。负责视频解码、渲染、对象提取和分类。由单一或多个GPU卡组成。根据视频处理要求,可以在每个站点部署多个服务器。借助于人车分类、车辆识别、视图结构化,对视频中的目标进行特征提取。利用视频检索技术实现从海量视频中快速定位目标。利用视频摘要技术对视频进行时空压缩处理,实现快速浏览视频。实现对视频数据的统一解析。基础视频或图片经过处理层处理后的数据交由大数据存储引擎进行存储:存放对视频中的运动目标(人、车、物)进行结构化之后的数据;存放在海量视频中经过视频分析手段查找到并被确认为线索的目标快照。
第四部分:视频存储部分。对处理之后的数据进行统一集中存储。
第五部分:应用管理部分。支持web客户端登陆,随时查看视频处理进展。管理员可对多客户端、摄像头等进行管理设置。
该智慧公安视频检索系统可与警综平台、视频基础平台进行数据的关联与共享;通过数据处理并减轻了海量非结构化数据存储时间不长、占用空间较大的问题;为今后的数据分析比对、线索挖掘奠定坚实的数据基础;且具备分析能力可解决基层实战民警处理海量视频数据时,难度大、效率低的问题;可对实战民警所采集的视频数据进行即时的处理,将自动提取图像内的人物特征、车辆特征和其他移动物体特征,与其他的涉案视频、卡口过往车辆视频等数据按照以图搜图的原理进行比对分析,从而实现案件的串并、车辆识别等。
具体实施时,比如可采用最先进的构建大型网络系统的J2EE平台架构,采用易于业务整合的SOA面向服务的系统框架,采用模块化、框架化设计,采用中间件及WebService等先进技术,大大增强了系统的灵活性和可重用性,方便各应用系统间的集成,同时,先进的技术架构带来系统良好的健壮性、扩展性及安全性,保证系统具备支撑海量接入和大并发量访问的能力。
在一个实施例中,视频摘要服务器2包括负载平衡模块21和视频摘要模块22,如图2所示。
其中,负载平衡模块21用于借助nginx实现系统软集群和负载均衡处理。确保用户连接时转移至空闲节点进行处理,有效分担单节点压力的同时,确保计算资源的最大化利用,避免单点故障,提升系统可靠性。
该智慧公安视频检索系统,具有强大的实战应用功能,以公安业务需求为导向,以提升公安案事件侦察效能为立足点,实现视频流、信息流和工作流的紧密结合,案事件、资源、人、任务的有效整合,构建大视频侦查体系架构,能够综合治安监控、卡口电警业务等,大大提高视频在视频侦查处理中应发挥的重要作用。
还具有快速的业务融合能力,系统基于电子业务流引擎的开发模式,提供应用快速交付能力,可以根据用户不同阶段的应用需求与特殊使用需求,快速融入新的业务应用功能,而无需更改平台原有架构,能够根据用户个性化的需求而进行快速的业务开发及业务功能调整工作。平台定义标准接口,支持多层次的集成,数据集成、能力集成与应用集成,将原本独立运行、信息屏蔽的诸多子系统进行横向协同,实现视侦垂直类系统集成业务的综合应用,平台强大的应用集成能力使应用平台更富有生命力。
视频摘要模块22,用于从VMS和基于文件的源分析视频,将原始视频档案中的所有移动物体检索分离出来,并重建和叠加回原始场景,在同一画面上显示不同时间出现的移动物体。
可从VMS和基于文件的源分析视频,将原始视频档案中的所有移动物体检索分离出来,并有效地重建和叠加回原始场景,在同一画面上显示不同时间出现的移动物体,达到浓缩摘要的效果。每个移动目标都有时间标记及事件框,可以添加或取消。要求可以调节检索灵敏度,可以调节移动目标显示的密度,可以调节视频播放的速度。
在一个实施例中,上述视频处理服务器3,包括:
视频检索模块31,用于根据选择多个检索条件叠加使用,显示检索结果;
统计模块32,用于在视频范围内通过颜色的深浅来显示移动目标的流量差异或单独显示有移动目标逗留的区域。
其中,视频检索模块31中的多个检索条件如下:
(1)将搜索条件限制在特定的时间范围内。
(2)将对象限制到特定的摄像头或文件。使用外观和运动过滤器,在多个视频源上快速定位感兴趣的人和车辆。
(3)根据移动目标的类别进行筛选。可对视频中的车分离为自行车、摩托车、汽车、皮卡、厢式货车、卡车、公共汽车、火车、飞机和船类;对视频中的人分离为男人和女人、男孩和女孩;动物分离为狗、猫、鸟和马。再通过选择人物属性以进一步优化搜索,可以选择背背包的人、提手提袋的人、戴帽子的人、没有戴帽子的人;还可以通过上下身穿着颜色、长、短/无袖上装、长、短下装,更精确检索,根据需要快速锁定目标。
(4)可以设置区域检索。通过划定一个或多个三边或四边多边形区域关注区或排出区可以缩小在视频中关注的范围,从而进一步缩短需要查看的视频时长。关注区或排除区的数量没有限制,可以多个区域重叠选取。
(5)按大小区别进行检索。通过调节阀值滚动条来筛选视频中的移动目标的大小,可以将车辆与行人区分开。
(6)按照行径速度、方向进行检索。通过阀值滚动条的调节来删选有明显速度差别的移动目标,通过灵活的360度都可以选取的方向圆盘按钮来筛选出某一行径方向的目标,可以显著减少需要关注的移动目标。
(7)通过颜色进行分类。有12种主要颜色可作为条件在视频中进行筛选,根据棕色、红色、橙色、黄色、绿色、石灰、青色、紫色、粉色、白色、灰色和黑色的任何组合来识别对象,并且根据准确程度从最接近检索颜色的移动目标开始进行视频播放,可以快速地锁定目标。
(8)根据自由画出的路径进行筛选。可以用鼠标画任意的行径线路来筛选出来经过这个路径的所有移动目标,并且这个路径是带方向的,以这个轨迹移动的目标才会被选出来并通过视频播放。可以试用于所有复杂环境中的移动轨迹查询。要求可以画多个路径作为叠加条件进行检索。
(9)根据移动目标在视频中的停留时间进行筛选。可选取的停留时间有5秒、10秒、30秒、60秒4个时长,并且可以同时调节精确度(低、中、高),将在视频中逗留、徘徊的移动目标都智能检索出来。
以上多种检索条件可以根据选择多个叠加使用,添加任意一个检索条件立即显示检索结果,无需再次处理视频。可以单个取消某个检索条件,或一键清除所有检索条件;也可以保留设置过的检索条件,再次点击视频时可以立即返回到之前检索后的视频,无需重新设置。可保存过滤器状态以供以后参考和检索所有模块。
(10)外观相似性:通过搜索相似外观的物体来立即定位人、车辆和感兴趣的物品,可识别外观相似的人和外观相似的车辆。
(11)面部识别:查看在一个案例中检测到的所有人脸,通过人脸筛选,查找出现在一个或多个视频中的相似人脸。
在一个实施例中,上述统计模块32,在视频范围内通过颜色的深浅来显示移动目标的流量差异,也可以单独显示有移动目标逗留的区域。
包括:
(1)综合检索条件,可以点击视频中的某一目标,将这一目标作为检索条件,在整个视频中查找与之相似的所有目标,并且按照相似度由最相似的开始播放。
(2)热点统计功能,可以在整个视频范围内通过颜色的深浅来显示移动目标的流量,移动目标较少的区域颜色浅,移动目标流量越大的区域颜色越红,可以统计移动目标的移动方向,根据颜色的深浅来区分不同方向上的流量区别。
(3)逗留统计功能,显示出在视频范围内哪里是曾经有移动目标逗留的,通过红色区域色块来标注,可以很明显地在一个画面中显示所有有逗留情况出现的区域,进行全局预览。
进一步地,上述视频处理服务器3还包括:
调取模块33,用于将视频中的移动对象分离排列出来,回放目标所在原始视频中这一目标的完整片段;
标签设置模块34,用于对所有目标设置成标签,并收藏在标签栏;
逐帧播放模块35,用于通过控制键盘方向键来逐帧播放视频,或者通过获取鼠标点击某一个移动目标并通过滚轮滚动来单独逐帧播放这一目标的移动情况;
图像放大模块36,用于将视频放大或缩小查看,以鼠标停留的点为中心放大;
视频导出模块37,用于将整段视频以图片或者视频形式导出;
视频管理模块38,用于显示视频的详细信息和管理同一案件的视频归类;
案例管理模块39,用于在单个视频组中组织调查的所有视频资产、感兴趣的书签对象,并在输出报告中总结案例发现。
具体地,调取模块33可调取原始视频片段,可将视频中的移动对象分离排列出来,方便清晰地寻找想要的目标,选择找到的目标,即可回放目标所在原始视频中这一目标的完整片段。
标签设置模块34,对所有目标都可以设置成标签,并收藏在标签栏,便于快速查看点击回放。某一移动目标可以单独逐帧播放。
逐帧播放模块35,可以通过控制键盘方向键来逐帧播放视频,或者通过鼠标点击某一个移动目标并通过滚轮滚动来单独逐帧播放这一目标的移动情况。
图像放大模块36,用于图像放大功能,可以将视频放大或缩小查看,以鼠标停留的这一点为中心放大。
视频导出模块37,摘要或检索后的整段视频可以以图片或者视频形式导出,某一移动的视频片段也可以以图片或者视频形式导出。在某一视频片段中可以再截取一段最需要的部分进行导出。
视频管理模块38,视频通过以下几种方式显示和管理。
按照视频播放的先后顺序排列视频。
在列表的排列模式中可以显示视频的详细信息,例:名称、长度、描述、开始及结束时间等。
可以实时看到视频的处理进度,以百分比形式显示。
同一案件的视频可以设置同一组将其归类整理,方便检索。
案例管理模块39,在单个视频组中组织调查的所有视频资产、感兴趣的书签对象,并在可输出报告中总结案例发现(包括所有相关显示)。
还比如包括:综合商业智能平台,从提取的视频对象及其分类得到动态可视化的关键性能指标。
趋势分析,比较访客、行人和交通模式的任何时间框架,即日、月、年,以发现趋势、异常值和洞察力。
自定义维度,定义特定于摄像机的维度,以实现KPI的高级、详细分析:
a、区域检索:量化进入一个或多个用户定义的三或四边多边形区域的对象数量,支持包含或排除区域。
b、路径检索:量化沿着一个或多个用户定义的路径行进的对象的数量。
c、多个视频检索:量化在用户定义的一系列区域之间的对象数量。
d、停留时间检索:在一个区域内或沿着路径量化用户定义的时间段所停留的对象数量。
图表面板库:打开即用,可扩展的垂直特定指示板库,可快速方便地安装。直观的界面,可快速针对特定人物和案例定制和创建有洞察力的新图表面板。为任何VMS视频源排定连续的、每日的、每周的、每月的或一次性的图表面板生成。
安全警报,积极主动地应对重大事件,提高安全防护性。
I、可定制警报:可根据任何支持的搜索和筛选条件生成接近实时的警报。
II、警报报告:可在简短的视频概要中总结每日警报。
III、浏览器通知:可向谷歌浏览器发送通知。
IV、VMS集成:可将警报发送到VMS警报区域。
系统管理,灵活管理系统部署和性能选择。包括:
1)、VMS插件:添加和删除无限数量的VMS插件。
2)、相机管理:添加和查看激活的相机。
3)、用户管理:添加和删除用户。
4)、活动目录:将许可证分配给活动目录用户。
5)、处理任务:显示和管理当前和以前的处理任务和队列。
本发明实施例提供的智慧公安视频检索系统,其中视频摘要服务器2、视频处理服务器3的系统配置,比如可参照如下:
操作系统:Windows server 2016
处理器:Intel Xeon gold 61463.2Hz核心12核
内存容量:128G
硬盘:256G SSD*2+4TB SAS*8
显卡:NVIDIATESLAP4深度学习显卡
技术规范如下:
行政管理规范如下:
本实施例中,智慧公安视频检索系统,能提供功能实用的视频检索技术,用于从海量的视频资料中快捷获取目标信息。最大程度缩小寻找范围,从而快速地找到目标。平台引入了跨平台无缝集成模块的突破性新功能,支持快速视频检索,定量的视频洞察,以及智能预警,显著缩短了视频查看以及事件处理时间,同时提高了安全性。操作界面简便,配合视频管理,让从海量视频中找寻一个目标不再是难事,大大提高工作效率。
系统特点:
1.软件界面清晰,结构明朗,易于使用。
2.优秀的视频处理引擎,有出色的视频处理速度,处理后的视频展示明确,易于查看。
3.视频经过一次处理以后,添加任意检索条件无需花费第二次处理时间,立即生成结果。真正做到高效地排查视频。
4.每个功能的处理效果精准到位,个性化的细节设置可以保留操作习惯。
5.便捷的视频标签和视频管理,让案件信息的归纳与总结易如反掌。
另外,本发明实施例提供的智慧公安视频检索系统,具有新型视频侦查的三化作战模式。
即时----体化作战模式:
通过与基础监控平台互联,实现联网视频实时观看,人工审查过程中如发现嫌疑目标可快速进行一键搜索、一键分析等操作,通过整合人/车/脸系统资源可即时定位目标轨迹、详情信息等。
追踪----流程化作战模式:
基于PGIS作战+以图搜图技术打造的视频接力追踪流程;可灵活设置追踪半径、追踪角度、追踪方向,对接视频基础平台,实现录像自动下载,自动以图搜图检索,通过指定嫌疑目标和多次追踪刻画目标轨迹,采集目标快照,实现案件取证。
解析-规模化作战模式:
基于视频结构化技术对重点区域、重点点位进行指定时段的实时视频解析处理;构造平台的解析中心;通过大规模覆盖,实现对重点区域/点位的巡防布控;实现对防区内嫌疑目标的极速检索。
为促进视频侦查实战和研判体系的规范化、标准化建设,充分挖掘侦查过程中产生的涉案视频图像数据,找到案件之间关联的规律,实现大数据碰撞,产生特定范围内的串并战果,因此,特设计了智慧公安视频检索系统建设方案。
智慧公安视频检索系统,建设方案结合视频结构化、视频检索、大数据处理三项核心技术对城市视频中涉及到的“行人、机动车、人骑车”三类实战元素进行特征提取、标注解析处理,将结构化之后的海量数据与大数据处理系统结合在一起为智慧公安提供贴合实战和社会管理职能目标的综合性解决方案。
最后所应说明的是,以上实施例仅用以说明本发明的技术方案而非限制。尽管参照实施例对本发明进行了详细说明,本领域的普通技术人员应当理解,对本发明的技术方案进行修改或者等同替换,都不脱离本发明技术方案的精神和范围,其均应涵盖在本发明的权利要求范围当中。
Claims (7)
1.一种智慧公安视频检索系统,其特征在于,包括:视频获取终端(1)、视频摘要服务器(2)、视频处理服务器(3)、视频存储数据库(4)和应用管理终端(5);
所述视频获取终端(1),包括:VMS、采集摄像头、第一数据库、web客户端和管理员应用;用于通过摄像头获取待分析视频源或用于获取离线上传的待分析视频源,并存储;
所述视频摘要服务器(2)与所述视频获取终端(1)连接,用于获取所述第一数据库的数据或上传的数据,对单分析视频源提供网络、视频流、数据分析、聚合服务、元数据数据库、视频文件存储、负载平衡、VMS插件和用户管理服务;
所述视频处理服务器(3)与所述视频摘要服务器(2)连接,包括至少一个GPU,用于提供视频解码、渲染、对象提取和分类服务;
所述视频存储数据库(4)对所述视频处理服务器(3)处理之后的数据进行统一集中存储;
所述应用管理终端(5)支持web客户端登陆,随时查看视频处理进展;并对多客户端、摄像头进行管理设置。
2.根据权利要求1所述的一种智慧公安视频检索系统,其特征在于,所述视频摘要服务器(2),包括:
负载平衡模块,用于借助nginx实现系统软集群和负载均衡处理。
3.根据权利要求2所述的一种智慧公安视频检索系统,其特征在于,所述视频摘要服务器(2),还包括:
视频摘要模块,用于从VMS和基于文件的源分析视频,将原始视频档案中的所有移动物体检索分离出来,并重建和叠加回原始场景,在同一画面上显示不同时间出现的移动物体。
4.根据权利要求1所述的一种智慧公安视频检索系统,其特征在于,所述视频处理服务器(3),包括:
视频检索模块,用于根据选择多个检索条件叠加使用,显示检索结果;
统计模块,用于在视频范围内通过颜色的深浅来显示移动目标的流量差异或单独显示有移动目标逗留的区域。
5.根据权利要求4所述的一种智慧公安视频检索系统,其特征在于,所述视频检索模块包括:
时间范围单元,用于将搜索条件限制在特定的时间范围内;
视频源单元,用于将对象限制到特定的摄像头或文件;使用外观和运动过滤器,在多个视频源上快速定位感兴趣的人和车辆;
类别单元,用于根据移动目标的类别进行筛选;
区域检索单元,用于通过划定一个或多个三边或四边多边形区域关注区或排出区,缩小在视频中关注的范围;
大小单元,用于通过调节阀值滚动条来筛选视频中的移动目标的大小;
判断单元,用于按照行径速度、方向进行检索;通过阀值滚动条的调节删选速度差别的移动目标;
颜色分类单元,用于根据颜色作为条件在视频中进行筛选及识别对象;
标定路径单元,用于根据获取的路径进行筛选;
面部识别单元,用于人脸筛选,查找出现在一个或多个视频中的相似人脸。
6.根据权利要求4所述的一种智慧公安视频检索系统,其特征在于,所述统计模块,包括:
综合检索单元,用于获取被点击视频中的某一目标,将这一目标作为检索条件,在整个视频中查找与之相似的所有目标;
热点统计单元,用于在整个视频范围内通过颜色的深浅来显示移动目标的流量,移动目标较少的区域颜色浅,移动目标流量越大的区域颜色越红;统计移动目标的移动方向,根据颜色的深浅来区分不同方向上的流量区别;
逗留统计单元,用于显示出在视频范围内移动目标逗留的区域。
7.根据权利要求4所述的一种智慧公安视频检索系统,其特征在于,所述视频处理服务器(3),还包括:
调取模块,用于将视频中的移动对象分离排列出来,回放目标所在原始视频中这一目标的完整片段;
标签设置模块,用于对所有目标设置成标签,并收藏在标签栏;
逐帧播放模块,用于通过控制键盘方向键来逐帧播放视频,或者通过获取鼠标点击某一个移动目标并通过滚轮滚动来单独逐帧播放这一目标的移动情况;
图像放大模块,用于将视频放大或缩小查看,以鼠标停留的点为中心放大;
视频导出模块,用于将整段视频以图片或者视频形式导出;
视频管理模块,用于显示视频的详细信息和管理同一案件的视频归类;
案例管理模块,用于在单个视频组中组织调查的所有视频资产、感兴趣的书签对象,并在输出报告中总结案例发现。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910407098.5A CN110188238A (zh) | 2019-05-15 | 2019-05-15 | 一种智慧公安视频检索系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910407098.5A CN110188238A (zh) | 2019-05-15 | 2019-05-15 | 一种智慧公安视频检索系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110188238A true CN110188238A (zh) | 2019-08-30 |
Family
ID=67716555
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910407098.5A Pending CN110188238A (zh) | 2019-05-15 | 2019-05-15 | 一种智慧公安视频检索系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110188238A (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111026909A (zh) * | 2019-11-30 | 2020-04-17 | 杭州亿圣信息技术有限公司 | 一种基于自拍抖音视图补充公安侦查数据集的方法 |
CN111428081A (zh) * | 2020-04-30 | 2020-07-17 | 苏州金螳螂怡和科技有限公司 | 一种视频数据智能分析系统及方法 |
CN112069258A (zh) * | 2020-09-08 | 2020-12-11 | 北京金山云网络技术有限公司 | 事务进度的管理方法、装置及分布式数据库 |
CN113255477A (zh) * | 2021-05-08 | 2021-08-13 | 深圳市安软科技股份有限公司 | 一种行人视频图像的综合管理系统及方法 |
CN113420183A (zh) * | 2021-06-21 | 2021-09-21 | 成都神州数码索贝科技有限公司 | 一种在视频侦查系统中跨视频目标检索及碰撞方法及系统 |
CN114363344A (zh) * | 2022-01-04 | 2022-04-15 | 保利和悦生活科技服务有限公司 | 一种基于云计算的智能化社区服务管理方法及系统 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101702771A (zh) * | 2009-11-06 | 2010-05-05 | 中国电信股份有限公司 | 网络视频智能监控系统及方法 |
CN103778159A (zh) * | 2012-10-26 | 2014-05-07 | 苏州千视通信科技有限公司 | 一种基于视频摘要和视频检索的视频侦查流程 |
US20170078767A1 (en) * | 2015-09-14 | 2017-03-16 | Logitech Europe S.A. | Video searching for filtered and tagged motion |
CN109257621A (zh) * | 2018-11-09 | 2019-01-22 | 惠州学院 | 一种基于云计算技术的图像视频检索系统 |
-
2019
- 2019-05-15 CN CN201910407098.5A patent/CN110188238A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101702771A (zh) * | 2009-11-06 | 2010-05-05 | 中国电信股份有限公司 | 网络视频智能监控系统及方法 |
CN103778159A (zh) * | 2012-10-26 | 2014-05-07 | 苏州千视通信科技有限公司 | 一种基于视频摘要和视频检索的视频侦查流程 |
US20170078767A1 (en) * | 2015-09-14 | 2017-03-16 | Logitech Europe S.A. | Video searching for filtered and tagged motion |
CN109257621A (zh) * | 2018-11-09 | 2019-01-22 | 惠州学院 | 一种基于云计算技术的图像视频检索系统 |
Non-Patent Citations (2)
Title |
---|
徐鹏: "《监狱智能化安全防范关键技术研究》", 31 July 2017, 武汉大学出版社 * |
范春晓 等: "《异构物联网互操作关键技术及解决方案》", 31 October 2015, 北京邮电大学出版社 * |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111026909A (zh) * | 2019-11-30 | 2020-04-17 | 杭州亿圣信息技术有限公司 | 一种基于自拍抖音视图补充公安侦查数据集的方法 |
CN111026909B (zh) * | 2019-11-30 | 2023-04-28 | 杭州亿圣信息技术有限公司 | 一种基于自拍抖音视图补充公安侦查数据集的方法 |
CN111428081A (zh) * | 2020-04-30 | 2020-07-17 | 苏州金螳螂怡和科技有限公司 | 一种视频数据智能分析系统及方法 |
CN112069258A (zh) * | 2020-09-08 | 2020-12-11 | 北京金山云网络技术有限公司 | 事务进度的管理方法、装置及分布式数据库 |
CN112069258B (zh) * | 2020-09-08 | 2024-04-19 | 北京金山云网络技术有限公司 | 事务进度的管理方法、装置及分布式数据库 |
CN113255477A (zh) * | 2021-05-08 | 2021-08-13 | 深圳市安软科技股份有限公司 | 一种行人视频图像的综合管理系统及方法 |
CN113420183A (zh) * | 2021-06-21 | 2021-09-21 | 成都神州数码索贝科技有限公司 | 一种在视频侦查系统中跨视频目标检索及碰撞方法及系统 |
CN114363344A (zh) * | 2022-01-04 | 2022-04-15 | 保利和悦生活科技服务有限公司 | 一种基于云计算的智能化社区服务管理方法及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110188238A (zh) | 一种智慧公安视频检索系统 | |
CN108388888B (zh) | 一种车辆识别方法、装置和存储介质 | |
Bylinskii et al. | Where should saliency models look next? | |
US10152858B2 (en) | Systems, apparatuses and methods for triggering actions based on data capture and characterization | |
Thomee et al. | Yfcc100m: The new data in multimedia research | |
US9129179B1 (en) | Image-based object location | |
US8401252B2 (en) | Video retrieval system for human face content | |
Kaneko et al. | Event photo mining from twitter using keyword bursts and image clustering | |
Chandrakar et al. | Animal detection based on deep convolutional neural networks with genetic segmentation | |
KR20190026738A (ko) | 비디오 레코딩 내에 존재하는 동일한 사람 또는 물건을 대화형으로 식별하기 위한 방법, 시스템 및 컴퓨터 프로그램 제품 | |
KR20140095956A (ko) | 크라우드 소싱기반 영상 지식 콘텐츠 생성 시스템 및 방법 | |
Zhu et al. | Spatio-temporal sentiment hotspot detection using geotagged photos | |
CN109241349A (zh) | 一种基于深度学习的监控视频多目标分类检索方法及系统 | |
CN108229323A (zh) | 布控方法和装置、电子设备、计算机存储介质 | |
US20210089784A1 (en) | System and Method for Processing Video Data from Archive | |
Hinz et al. | Online multi-object tracking-by-clustering for intelligent transportation system with neuromorphic vision sensor | |
Adams et al. | Extraction of social context and application to personal multimedia exploration | |
CN113255477A (zh) | 一种行人视频图像的综合管理系统及方法 | |
Battiato et al. | The social picture | |
KR102375145B1 (ko) | 비디오 데이터 통합 분석 및 관리 시스템 | |
CN106657069A (zh) | 一种图像数据处理系统 | |
Ghoniem et al. | Newslab: Exploratory broadcast news video analysis | |
CN110414745A (zh) | 基于云计算的图书馆大数据分析和决策支持平台 | |
Jamonnak et al. | VisualCommunity: a platform for archiving and studying communities | |
Ma | Improvement of table tennis technology based on data mining in the environment of wireless sensor networks |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190830 |