CN103020275A - 基于视频摘要、视频检索的视频分析方法 - Google Patents

基于视频摘要、视频检索的视频分析方法 Download PDF

Info

Publication number
CN103020275A
CN103020275A CN2012105788765A CN201210578876A CN103020275A CN 103020275 A CN103020275 A CN 103020275A CN 2012105788765 A CN2012105788765 A CN 2012105788765A CN 201210578876 A CN201210578876 A CN 201210578876A CN 103020275 A CN103020275 A CN 103020275A
Authority
CN
China
Prior art keywords
video
retrieval
concentrated
carry out
video frequency
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2012105788765A
Other languages
English (en)
Inventor
姚领众
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SUZHOU QIANSHI COMMUNICATION TECHNOLOGY Co Ltd
Original Assignee
SUZHOU QIANSHI COMMUNICATION TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SUZHOU QIANSHI COMMUNICATION TECHNOLOGY Co Ltd filed Critical SUZHOU QIANSHI COMMUNICATION TECHNOLOGY Co Ltd
Priority to CN2012105788765A priority Critical patent/CN103020275A/zh
Publication of CN103020275A publication Critical patent/CN103020275A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种基于视频摘要、视频检索的视频分析方法,其包括以下步骤:步骤1)原始视频导入;步骤2)判断原始视频是否需要进行视频浓缩处理;步骤3)视频浓缩处理;步骤4)视频检索处理;步骤5)判断是否需要进行图像增强处理;步骤6)图像增强处理;步骤7)人像侦查处理。该视频分析方法能提高了海量视频侦查的效率,减少目标遗漏的可能。

Description

基于视频摘要、视频检索的视频分析方法
技术领域
本发明属于视频处理技术领域,涉及一种视频分析方法,具体而言涉及一种基于视频摘要、视频检索,进而自动获取人的几个关键特征的方法。
背景技术
随着视频监控网络的发展,利用监控视频作为破案线索的视频侦查已成为公安刑侦侦查的重要手段,极大程度地打击了违法份子的犯罪行为。
但是,目前的视频侦查主要通过肉眼查看视频来进行,效率低下而且很容易遗漏目标。即使得到了嫌疑目标如人的照片和视频片段,其进一步应用也只能通过人工侦查方式进行,对细节信息的获取停留在经验层面,没有流程保障。
发明内容
为克服现有技术中的缺点,本发明的目的在于提供一种基于视频摘要、视频检索的视频分析方法,该视频分析方法能提高视频侦查尤其是嫌疑目标是人的侦查效率。
为实现上述技术目的,达到上述技术效果,本发明通过以下技术方案实现:
一种基于视频摘要、视频检索的视频分析方法,其包括以下步骤:
步骤1)原始视频导入
从视频监控平台获取或本地存储介质拷贝获取原始视频,将原始视频从视频浓缩检索客户端上传到视频浓缩检索服务器;
步骤2)判断原始视频是否需要进行视频浓缩处理
在视频浓缩检索客户端上根据实际需要判断原始视频是否需要进行视频浓缩处理,如果需要则进入步骤3,否则,直接则进入步骤4;
步骤3)视频浓缩处理
首先,通过视频浓缩检索服务器进行视频浓缩处理,得到包括所有运动目标的视频摘要和所有运动目标的全快照;
然后,根据所得的视频摘要和全快照进行视频检索处理;
步骤4)视频检索处理
通过视频浓缩检索服务器进行视频检索处理,得到按特征相似度排列的运动目标的目标快照;
步骤5)判断是否需要进行图像增强处理
如果嫌疑目标的快照或视频片段不够清晰则进入步骤6,否则,直接进入步骤7;
步骤6)图像增强处理
首先,调用图像增强系统进行图像增强处理,并进行局部区域的放大;所述图像增强系统的图像去模糊的过程,主要是通过模糊内核对模糊图像解卷积实现;
然后,进行人像侦查处理;
步骤7)人像侦查处理
在视频浓缩检索客户端上调用人像侦查系统进行人像侦查,人像侦查系统可自动输出人的几个明显特征,包括人脸特写、上衣、手部、鞋子及背包特写照片;
步骤8)所述的特写照片可以直接作为线索,也可以作为特征输入视频浓缩检索系统中以图搜图,进一步检索获取更多信息;
步骤9)将得到的人脸特写结合公安现有的户籍管理系统或违法犯罪信息资源查询系统等进行进一步侦查。
优选的,在步骤1中,通过硬盘快速拷贝方法进行快速拷贝实现原始视频的导入。
进一步的,视频浓缩检索服务器处理时包括以下步骤:
首先,采用了动态纹理建模方法,精确处理视频背景变化,进行背景建模;
然后,视频的边界检测,找出视频中的突变和渐变变化,挨帧进行视频的分割,提取运动目标对象,将获取的运动目标相关信息如大小、颜色或运动方向存入数据库;
最后,根据数据库的内容得到检索结果,或者列出所有运动目标的照片,或者进行视频拼接,将运动目标拼接回背景中形成时间大为缩短的浓缩视频。
进一步的,在步骤5之间还包括以下步骤:通过人工对视频摘要、全快照或目标照片的侦查,找到嫌疑目标的快照及对应的视频片段。
本发明的有益效果是:
1、提高海量视频侦查的效率,减少目标遗漏的可能;
2、采用了图像增强处理,提高运动模糊、散焦模糊等不良图像的质量;
3、如果嫌疑目标是人,能自动获取人的几个关键特征,包括脸部特写,上衣尤其是logo,手部特写,鞋子、背包的照片,使视频智能分析的结果应用更智能。
上述说明仅是本发明技术方案的概述,为了能够更清楚了解本发明的技术手段,并可依照说明书的内容予以实施,以下以本发明的较佳实施例并配合附图详细说明如后。本发明的具体实施方式由以下实施例及其附图详细给出。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1本发明的基于视频摘要、视频检索的视频分析方法的流程示意图。
具体实施方式
下面将参考附图并结合实施例,来详细说明本发明。
参见图1所示,一种基于视频摘要、视频检索的视频分析方法,其包括以下步骤:
步骤1)原始视频导入
从视频监控平台获取或本地存储介质拷贝获取原始视频,将原始视频从视频浓缩检索客户端上传到视频浓缩检索服务器;
步骤2)判断原始视频是否需要进行视频浓缩处理
在视频浓缩检索客户端上根据实际需要判断原始视频是否需要进行视频浓缩处理,如果需要则进入步骤3,否则,直接则进入步骤4;
步骤3)视频浓缩处理
首先,通过视频浓缩检索服务器进行视频浓缩处理,得到包括所有运动目标的视频摘要和所有运动目标的全快照;
然后,根据所得的视频摘要和全快照进行视频检索处理;
步骤4)视频检索处理
通过视频浓缩检索服务器进行视频检索处理,得到按特征相似度排列的运动目标的目标快照;
步骤5)判断是否需要进行图像增强处理
如果嫌疑目标的快照或视频片段不够清晰则进入步骤6,否则,直接进入步骤7;
步骤6)图像增强处理首先,调用图像增强系统进行图像增强处理,并进行局部区域的放大;
然后,进行人像侦查处理;
步骤7)人像侦查处理
在视频浓缩检索客户端上调用人像侦查系统进行人像侦查,人像侦查系统可自动输出人的几个明显特征,包括人脸特写、上衣、手部、鞋子及背包特写照片;
步骤8)所述的特写照片可以直接作为线索,也可以作为特征输入视频浓缩检索系统中以图搜图,进一步检索获取更多信息;
步骤9)将得到的人脸特写结合公安现有的户籍管理系统或违法犯罪信息资源查询系统进行进一步侦查。
实施例1:
如果某地发生重大抢劫伤人案,从伪装和逃窜等方式来看,这是一起经过精心谋划的作案。其他侦查方式未果后转向视频侦查,准备从嫌犯踩点作为突破口。但问题是需要查看的视频数量过大。通常需要查看的视频包括案发前一个月的视频。周围虽然只有5个强相关的摄像头,但昼夜录像,视频总量为3600小时。即使10个人每天看12小时,也需要看一个月,工作量太大,且很容易遗漏目标。那通过这本实施例的基于视频摘要、视频检索的视频分析方法会是怎样处理呢?
1:从监控平台或本地存储介质中拷贝原始视频,将原始视频从视频浓缩检索客户端上传到视频浓缩检索服务器。如果本地服务器资源紧张,还可以通过公安专网,调用其他地方的服务器。
2:需要处理的视频中有白天的视频也有黑夜的视频,且目标特征未知,先将原始视频提交浓缩分析即进行视频浓缩处理;
3:视频浓缩检索服务器进行视频浓缩处理,得到包括所有运动目标的视频摘要和所有活动目标的全快照。通常情况下,夜晚视频的浓缩比例能超过30倍,白天视频浓缩比例也能达到10倍。这样通过视频浓缩处理后,查看视频所需时间将会大为减少,而且还有快照作为辅助;
4:观看上述步骤中产生的视频摘要,结合人工侦查,找到嫌疑人的目标快照及对应的视频片段。一旦找到有用信息,则可以根据这个信息的特征,对其他视频进行检索操作,获取更多嫌疑人的活动状况视频和快照;
5:有部分嫌疑人的目标快照和视频片段由于对焦模糊等原因不够清晰,调用图像增强系统进行去模糊处理,局部区域需要进行放大;
6:在视频浓缩检索客户端上用人像侦查系统对嫌疑人进行人像侦查,自动获取嫌疑人的几个明显特征,包括脸部特写,上衣尤其是logo,手部特写,鞋子、背包的照片,以流程来保证嫌疑人的信息能被充分收集。根据这些信息,确定嫌疑人的可能就大大增加;
7:至此视频侦查工作已经完成,如果需要,可以将所述的人像明显特征,结合公安现有的户籍管理系统、违法犯罪信息资源查询等系统进行进一步侦查;
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (7)

1.基于视频摘要、视频检索的视频分析方法,其特征在于,包括以下步骤:
步骤1)原始视频导入
从视频监控平台获取或本地存储介质拷贝获取原始视频,将原始视频从视频浓缩检索客户端上传到视频浓缩检索服务器;
步骤2)判断原始视频是否需要进行视频浓缩处理
在视频浓缩检索客户端上根据实际需要判断原始视频是否需要进行视频浓缩处理,如果需要则进入步骤3,否则,直接则进入步骤4;
步骤3)视频浓缩处理
首先,通过视频浓缩检索服务器进行视频浓缩处理,得到包括所有运动目标的视频摘要和所有运动目标的全快照;
然后,根据所得的视频摘要和全快照进行视频检索处理;
步骤4)视频检索处理
通过视频浓缩检索服务器进行视频检索处理,得到按特征相似度排列的运动目标的目标快照;
步骤5)判断是否需要进行图像增强处理
如果嫌疑目标的快照或视频片段不够清晰则进入步骤6,否则,直接进入步骤7;
步骤6)图像增强处理
首先,调用图像增强系统进行图像增强处理,并进行局部区域的放大;
然后,进行人像侦查处理;
步骤7)人像侦查处理
在视频浓缩检索客户端上调用人像侦查系统进行人像侦查,人像侦查系统可自动输出人的几个明显特征,包括人脸特写、上衣、手部、鞋子及背包特写照片。
2.根据权利要求1所述的基于视频摘要及检索的视频分析方法,其特征在于,还包括:步骤8)所述的特写照片可以直接作为线索,也可以作为特征输入视频浓缩检索系统中以图搜图,进一步检索获取更多信息。
3.根据权利要求1所述的基于视频摘要及检索的视频分析方法,其特征在于,还包括:步骤9)将得到的人脸特写结合公安现有的户籍管理系统或违法犯罪信息资源查询等系统进行进一步侦查。
4.根据权利要求1所述的基于视频摘要及检索的视频分析方法,其特征在于:步骤1中,通过硬盘快速拷贝方法进行快速拷贝实现原始视频的导入。
5.根据权利要求1所述的基于视频摘要及检索的视频分析方法,其特征在于:所述图像增强系统的图像去模糊的过程,主要是通过模糊内核对模糊图像解卷积实现。
6.根据权利要求1、2、3、4或5所述的基于视频摘要及检索的视频分析方法,其特征在于,视频浓缩检索服务器处理时包括以下步骤:
首先,采用了动态纹理建模方法,精确处理视频背景变化,进行背景建模;
然后,视频的边界检测,找出视频中的突变和渐变变化,挨帧进行视频的分割,提取运动目标对象,将获取的运动目标相关信息如大小、颜色或运动方向存入数据库;
最后,根据数据库的内容得到检索结果,或者列出所有运动目标的照片,或者进行视频拼接,将运动目标拼接回背景中形成时间大为缩短的浓缩视频。
7.根据权利1、2、3、4或5所述的基于视频摘要及检索的视频分析方法,其特征在于,在步骤5之间还包括以下步骤:通过人工对视频摘要、全快照或目标照片的侦查,找到嫌疑目标的快照及对应的视频片段。
CN2012105788765A 2012-12-28 2012-12-28 基于视频摘要、视频检索的视频分析方法 Pending CN103020275A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2012105788765A CN103020275A (zh) 2012-12-28 2012-12-28 基于视频摘要、视频检索的视频分析方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2012105788765A CN103020275A (zh) 2012-12-28 2012-12-28 基于视频摘要、视频检索的视频分析方法

Publications (1)

Publication Number Publication Date
CN103020275A true CN103020275A (zh) 2013-04-03

Family

ID=47968878

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2012105788765A Pending CN103020275A (zh) 2012-12-28 2012-12-28 基于视频摘要、视频检索的视频分析方法

Country Status (1)

Country Link
CN (1) CN103020275A (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103260010A (zh) * 2013-04-23 2013-08-21 四川天翼网络服务有限公司 智慧天网视频快速检索系统
CN103279481A (zh) * 2013-04-23 2013-09-04 四川天翼网络服务有限公司 智慧天网情报图侦系统
CN103279493A (zh) * 2013-05-03 2013-09-04 吴军 智能化海量监控视频录像分析系统
CN103605786A (zh) * 2013-11-27 2014-02-26 姚领众 一种基于样本视频片段进行海量视频检索的方法
CN103605652A (zh) * 2013-08-30 2014-02-26 北京桓润世嘉科技有限公司 基于对象标志位的视频检索和浏览的方法和装置
CN104038705A (zh) * 2014-05-30 2014-09-10 无锡天脉聚源传媒科技有限公司 视频制作方法和装置
CN105323657A (zh) * 2014-07-07 2016-02-10 韩华泰科株式会社 提供视频摘要的成像设备和方法
CN105872452A (zh) * 2015-02-10 2016-08-17 韩华泰科株式会社 浏览摘要图像的系统及方法
CN106126680A (zh) * 2016-06-29 2016-11-16 北京互信互通信息技术有限公司 一种视频图像侦察方法及系统
CN107944371A (zh) * 2017-11-17 2018-04-20 辽宁公安司法管理干部学院 一种基于数据挖掘的公安视频监控图像处理方法
CN107979778A (zh) * 2016-10-25 2018-05-01 杭州海康威视数字技术股份有限公司 一种视频分析方法、装置及系统
CN109803112A (zh) * 2017-11-16 2019-05-24 中兴通讯股份有限公司 基于大数据的视频分析管理方法、装置及系统、存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7227893B1 (en) * 2002-08-22 2007-06-05 Xlabs Holdings, Llc Application-specific object-based segmentation and recognition system
CN101354787A (zh) * 2008-08-18 2009-01-28 浙江大学 一种智能视觉监控检索中提取目标运动轨迹特征的方法
CN102156707A (zh) * 2011-02-01 2011-08-17 刘中华 一种视频摘要形成和搜索的方法、系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7227893B1 (en) * 2002-08-22 2007-06-05 Xlabs Holdings, Llc Application-specific object-based segmentation and recognition system
CN101354787A (zh) * 2008-08-18 2009-01-28 浙江大学 一种智能视觉监控检索中提取目标运动轨迹特征的方法
CN102156707A (zh) * 2011-02-01 2011-08-17 刘中华 一种视频摘要形成和搜索的方法、系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
何莎,费树岷: "动态纹理背景的建模", 《计算机应用》 *

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103279481A (zh) * 2013-04-23 2013-09-04 四川天翼网络服务有限公司 智慧天网情报图侦系统
CN103279481B (zh) * 2013-04-23 2016-08-03 四川天翼网络服务有限公司 智慧天网情报图侦系统
CN103260010A (zh) * 2013-04-23 2013-08-21 四川天翼网络服务有限公司 智慧天网视频快速检索系统
CN103260010B (zh) * 2013-04-23 2017-02-08 四川天翼网络服务有限公司 智慧天网视频快速检索系统
CN103279493A (zh) * 2013-05-03 2013-09-04 吴军 智能化海量监控视频录像分析系统
CN103605652B (zh) * 2013-08-30 2017-11-07 北京桓润世嘉科技有限公司 基于对象标志位的视频检索和浏览的方法和装置
CN103605652A (zh) * 2013-08-30 2014-02-26 北京桓润世嘉科技有限公司 基于对象标志位的视频检索和浏览的方法和装置
CN103605786A (zh) * 2013-11-27 2014-02-26 姚领众 一种基于样本视频片段进行海量视频检索的方法
CN104038705A (zh) * 2014-05-30 2014-09-10 无锡天脉聚源传媒科技有限公司 视频制作方法和装置
CN105323657A (zh) * 2014-07-07 2016-02-10 韩华泰科株式会社 提供视频摘要的成像设备和方法
CN105323657B (zh) * 2014-07-07 2021-03-16 韩华泰科株式会社 提供视频摘要的成像设备和方法
CN105872452A (zh) * 2015-02-10 2016-08-17 韩华泰科株式会社 浏览摘要图像的系统及方法
CN105872452B (zh) * 2015-02-10 2020-05-15 韩华泰科株式会社 浏览摘要图像的系统及方法
CN106126680A (zh) * 2016-06-29 2016-11-16 北京互信互通信息技术有限公司 一种视频图像侦察方法及系统
CN107979778A (zh) * 2016-10-25 2018-05-01 杭州海康威视数字技术股份有限公司 一种视频分析方法、装置及系统
CN107979778B (zh) * 2016-10-25 2020-04-17 杭州海康威视数字技术股份有限公司 一种视频分析方法、装置及系统
CN109803112A (zh) * 2017-11-16 2019-05-24 中兴通讯股份有限公司 基于大数据的视频分析管理方法、装置及系统、存储介质
CN107944371A (zh) * 2017-11-17 2018-04-20 辽宁公安司法管理干部学院 一种基于数据挖掘的公安视频监控图像处理方法

Similar Documents

Publication Publication Date Title
CN103020275A (zh) 基于视频摘要、视频检索的视频分析方法
AU2017250159B2 (en) Video recording method, server, system, and storage medium
CN110084103A (zh) 一种基于人脸识别技术的同行人分析方法及系统
CN108197565A (zh) 基于人脸识别的目标寻踪方法及系统
CN104200671A (zh) 一种基于大数据平台的虚拟卡口管理方法及系统
CN101655860A (zh) 一种刑侦破案视频辅助分析方法及系统
CN110177255B (zh) 一种基于案件调度的视频信息发布方法及系统
CN105185121A (zh) 一种虚拟卡口并行识别车牌的方法
CN105608464A (zh) 人脸识别移动终端解决系统及解决方法
CN103778159A (zh) 一种基于视频摘要和视频检索的视频侦查流程
CN113065026A (zh) 基于安全微服务架构的异常事件智能检测系统、方法及介质
CN103279481A (zh) 智慧天网情报图侦系统
Li et al. Forensic analysis of digital images over smart devices and online social networks
Singleton et al. Gun identification using tensorflow
CN114387548A (zh) 视频及活体检测方法、系统、设备、存储介质及程序产品
CN105320703A (zh) 相似车辆检索中的查询扩展方法及装置
Aparicio-Díaz et al. Temporal copy-move forgery detection and localization using block correlation matrix
CN112383751A (zh) 一种监控视频数据处理方法、装置、终端设备和存储介质
CN110457998B (zh) 影像数据关联方法和设备、数据处理设备及介质
Justicia et al. Analysis of forensic video in storage data using tampering method
CN114140674B (zh) 结合图像处理及数据挖掘技术的电子证据可用性鉴别方法
CN114090909A (zh) 一种图码联侦关联方法、装置、计算机设备及存储介质
CN210983509U (zh) 入境重点人群布控系统
CN112449155A (zh) 一种保护人员隐私的视频监控方法和系统
Nixon et al. Spn dash-fast detection of adversarial attacks on mobile via sensor pattern noise fingerprinting

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20130403