CN109344286A - 一种结构化索引超压缩蓝光存储系统 - Google Patents
一种结构化索引超压缩蓝光存储系统 Download PDFInfo
- Publication number
- CN109344286A CN109344286A CN201811095440.4A CN201811095440A CN109344286A CN 109344286 A CN109344286 A CN 109344286A CN 201811095440 A CN201811095440 A CN 201811095440A CN 109344286 A CN109344286 A CN 109344286A
- Authority
- CN
- China
- Prior art keywords
- structuring
- video
- video data
- server
- result
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B7/00—Recording or reproducing by optical means, e.g. recording using a thermal beam of optical radiation by modifying optical properties or the physical structure, reproducing using an optical beam at lower power by sensing optical properties; Record carriers therefor
- G11B7/004—Recording, reproducing or erasing methods; Read, write or erase circuits therefor
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明公开了一种结构化索引超压缩蓝光存储系统，包括：视频管理平台接入视频数据，并向结构化服务器发送视频数据和配置需求；结构化服务器根据配置需求对视频数据进行处理，当视频数据为重要视频数据时，结构化服务器对视频数据进行全量结构化处理和编码压缩，得到处理结果和属性信息；当视频数据为一般重要视频数据时，结构化服务器对视频数据进行抽帧、结构化处理和编码压缩，得到处理结果和属性信息；结构化服务器将处理结果和属性信息一起回交至视频管理平台；视频管理平台将处理结果和属性信息通过光磁管理服务器缓冲写入到蓝光系统，对一般视频数据进行抽帧、结构化处理和压缩处理，大大提高单机处理量，降低计算资源成本。
Description
技术领域
本发明涉及视频数据处理技术领域，更具体的说是涉及一种结构化索引超压缩蓝光存储系统。
背景技术
海量的视频图像数据是公共安全部门信息化建设中积累的重要数据，通过对视频内容的分析和处理，快速准确的发现有效线索，能够充分发挥视频资源的作用。
然而，在公安信息化建设深入开展的背景下，现有视频资源缺乏深度应用的模式，其应用的瓶颈是视频信息如何高效提取，如何同其他信息系统进行标准数据交换、互联互通及语义互操作。解决这一问题的核心技术即是视频结构化描述的技术。但是作为一项视频处理的核心技术，结构化描述技术在实现上仍有部分瓶颈需要突破。视频结构化对计算资源的消耗巨大，每路视频进行完全结构化需要的计算资源的投入很大，一块TESLA P4GPU处理卡基本能够处理8路1080P视频结构化，所需要的计算资源成本达到约3000元。
因此，如何让结构化内容不丢失，并且大大降低计算资源成本是本领域技术人员亟需解决的问题。
发明内容
有鉴于此，本发明提供了一种结构化索引超压缩蓝光存储系统，对一般重要的视频数据进行抽帧处理，之后再进行结构化处理和压缩，大大提高单机处理量，降低计算资源成本。
为了实现上述目的，本发明采用如下技术方案：
一种结构化索引超压缩蓝光存储系统，包括：视频管理平台、结构化服务器、光磁管理服务器和蓝光系统；
所述视频管理平台接入视频数据，并向所述结构化服务器发送视频数据和所述视频数据对应的配置需求；
所述结构化服务器根据所述配置需求进行处理，其中，所述配置需求中携带有视频数据的重要等级和相应的处理方式；当所述视频数据为重要视频数据时，所述结构化服务器对所述视频数据进行全量结构化处理和编码压缩，得到处理结果和属性信息；当所述视频数据为一般重要视频数据时，所述结构化服务器对所述视频数据进行抽帧处理，之后进行结构化处理、编码压缩，得到处理结果和属性信息；所述结构化服务器将所述处理结果和属性信息一起回交至所述所述视频管理平台；
所述视频管理平台将所述处理结果和属性信息通过所述光磁管理服务器缓冲写入到所述蓝光系统。
优选的，还包括：特征搜索服务器；
所述结构化服务器对所述处理结果进行特征提取和人脸图像提取，并将特征提取结果和人脸图像提取结果发送给所述特征搜索服务器；
所述视频管理平台向所述特征搜索服务器发送特征搜索请求；
所述特征搜索服务器基于所述特征搜索请求、所述特征提取结果和所述人脸图像提取结果进行搜索，得到特征搜索结果，并将所述特征搜索结果反馈至所述视频管理平台；
所述视频管理平台基于所述特征搜索结果调度出相应的视频数据进行显示。
优选的，所述抽帧处理的具体方法为：保留I帧，剔除掉P帧。
优选的，所述特征搜索服务器根据自身存储余量通过所述光磁管理服务器将所述特征提取结果和所述人脸图像提取结果存入所述蓝光系统。
优选的，所述编码压缩采用H.264或H.265视频编码方法进行压缩。
经由上述的技术方案可知，与现有技术相比，本发明公开提供了一种结构化索引超压缩蓝光存储系统，对一般重要的视频数据进行抽帧处理，之后再进行结构化处理和压缩，大大提高单机处理量，降低计算资源成本。
由于视频图像的I帧中含有视频最全面的信息，采用仅保留视频流I帧的方式，在不用耗费资源解码的情况下得到视频包含的全面的信息，其处理量变成了现有视频结构化1/10左右。
而剔除P帧后的视频I帧序列的数据量基本占总数据量的70％，然后再利用视频压缩技术对I帧进行编码，数据量会降低到1/4以下，总数据量会降低到1/5以下。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1附图为本发明提供的结构化索引超压缩蓝光存储系统的示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
参见附图1，本发明实施例公开了一种结构化索引超压缩蓝光存储系统，包括：视频管理平台1、结构化服务器2、光磁管理服务器3和蓝光系统4；
视频管理平台1接入视频数据，并向结构化服务器2发送视频数据和视频数据对应的配置需求；
结构化服务器2根据配置需求进行处理，其中，配置需求中携带有视频数据的重要等级和相应的处理方式；当视频数据为重要视频数据时，结构化服务器2对视频数据进行全量结构化处理和编码压缩，得到处理结果和属性信息；当视频数据为一般重要视频数据时，结构化服务器2先对视频数据进行抽帧处理，之后进行结构化处理、编码压缩，得到处理结果和属性信息；结构化服务器2将处理结果和属性信息一起回交至视频管理平台1；
视频管理平台1将处理结果和属性信息通过光磁管理服务器3缓冲写入到蓝光系统4。
本发明提供的方案将图像中的I帧信息提取出来，将I帧上的人、车、物进行结构化处理，而且只对抽帧后的信息进行结构化处理，将结构化的任务减少到原任务的1/10，能够大大提升单机处理量。
对抽帧后的数据进行图像压缩处理，能够将数据量再减少80％，提升了存储利用率，从而用很小的空间即可将结构化后的数据能够保存起来。
为了进一步优化上述技术方案，本发明提供的结构化索引超压缩蓝光存储系统还包括：特征搜索服务器5；
结构化服务器2对处理结果进行特征提取和人脸图像提取，并将特征提取结果和人脸图像提取结果发送给特征搜索服务器5；
视频管理平台1向特征搜索服务器5发送特征搜索请求；
特征搜索服务器5基于特征搜索请求、特征提取结果和人脸图像提取结果进行搜索，得到特征搜索结果，并将特征搜索结果反馈至视频管理平台1；
视频管理平台1基于特征搜索结果调度出相应的视频数据进行显示。
对结构化处理后的数据进行特征提取和人脸图像提取，以便有价值的数据信息能够被快速检索出来。
为了进一步优化上述技术方案，抽帧处理的具体方法为：保留I帧，剔除掉P帧。
为了进一步优化上述技术方案，特征搜索服务器5根据自身存储余量通过光磁管理服务器3将特征提取结果和人脸图像提取结果存入蓝光系统4。
在具体实现时，可以设定一个存储阈值，例如：当存储的数据占用的空间超过60％的时候，将时间相对较久的特征信息存储至蓝光系统。
为了进一步优化上述技术方案，编码压缩采用H.264或H.265视频编码方法进行压缩。
此外，还需要说明的是，在本发明中，视频结构化和视频压缩由同一个设备处理，可采用8块英伟达1080Ti卡组成的服务器单机处理不少于1000路图像结构化和视频压缩(不含特征提取，含特征提取的话降低到500路)，单路视频结构化硬件成本是现有技术的1/10；单路1080P视频压缩后的数据存储量与压缩前相比低于20％。
本发明为了解决目前市场上单一的视频联网平台或视频结构化产品或数据压缩产品不能满足从视频的采集、联网、结构化、压缩、存储整条数据链路的高效处理要求，单独的产品无法解决在海量视频数据中高效的检索到有价值的信息这一迫切需求，通过抽取关键帧和超级压缩技术降低结构化计算资源消耗成本和存储成本，通过特征提取、结构化处理，并将结构化信息和属性信息相关联等技术处理，以光磁一体的存储技术将有价值的数据长期存储。
本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。
对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (5)
1.一种结构化索引超压缩蓝光存储系统，其特征在于，包括：视频管理平台、结构化服务器、光磁管理服务器和蓝光系统；
所述视频管理平台接入视频数据，并向所述结构化服务器发送视频数据和所述视频数据对应的配置需求；
所述结构化服务器根据所述配置需求进行处理，其中，所述配置需求中携带有视频数据的重要等级和相应的处理方式；当所述视频数据为重要视频数据时，所述结构化服务器对所述视频数据进行全量结构化处理和编码压缩，得到处理结果和属性信息；当所述视频数据为一般重要视频数据时，所述结构化服务器对所述视频数据进行抽帧处理，之后进行结构化处理、编码压缩，得到处理结果和属性信息；所述结构化服务器将所述处理结果和属性信息一起回交至所述所述视频管理平台；
所述视频管理平台将所述处理结果和属性信息通过所述光磁管理服务器缓冲写入到所述蓝光系统。
2.根据权利要求1所述的一种结构化索引超压缩蓝光存储系统，其特征在于，还包括：特征搜索服务器；
所述结构化服务器对所述处理结果进行特征提取和人脸图像提取，并将特征提取结果和人脸图像提取结果发送给所述特征搜索服务器；
所述视频管理平台向所述特征搜索服务器发送特征搜索请求；
所述特征搜索服务器基于所述特征搜索请求、所述特征提取结果和所述人脸图像提取结果进行搜索，得到特征搜索结果，并将所述特征搜索结果反馈至所述视频管理平台；
所述视频管理平台基于所述特征搜索结果调度出相应的视频数据进行显示。
3.根据权利要求1所述的一种结构化索引超压缩蓝光存储系统，其特征在于，所述抽帧处理的具体方法为：保留I帧，剔除掉P帧。
4.根据权利要求2所述的一种结构化索引超压缩蓝光存储系统，其特征在于，所述特征搜索服务器根据自身存储余量，通过所述光磁管理服务器将所述特征提取结果和所述人脸图像提取结果存入所述蓝光系统。
5.根据权利要求1所述的一种结构化索引超压缩蓝光存储系统，其特征在于，所述编码压缩采用H.264或H.265视频编码方法进行压缩。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811095440.4A CN109344286A (zh) | 2018-09-19 | 2018-09-19 | 一种结构化索引超压缩蓝光存储系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811095440.4A CN109344286A (zh) | 2018-09-19 | 2018-09-19 | 一种结构化索引超压缩蓝光存储系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN109344286A true CN109344286A (zh) | 2019-02-15 |
Family
ID=65305984
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201811095440.4A Pending CN109344286A (zh) | 2018-09-19 | 2018-09-19 | 一种结构化索引超压缩蓝光存储系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109344286A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110401847A (zh) * | 2019-07-17 | 2019-11-01 | 咪咕文化科技有限公司 | 云dvr视频的压缩存储方法、电子设备及系统 |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101778260A (zh) * | 2009-12-29 | 2010-07-14 | 公安部第三研究所 | 一种基于结构化描述的视频监控管理方法及系统 |
| CN102572357A (zh) * | 2011-12-31 | 2012-07-11 | 中兴通讯股份有限公司 | 一种视频监控前端的存储方法及视频监控系统 |
| CN102999640A (zh) * | 2013-01-09 | 2013-03-27 | 公安部第三研究所 | 基于语义推理和结构化描述的视频与图像检索系统及方法 |
| CN103634552A (zh) * | 2012-08-28 | 2014-03-12 | 华为技术有限公司 | 一种监控视频存储方法、系统和中心管理服务器 |
| CN105528417A (zh) * | 2015-12-07 | 2016-04-27 | 北京航空航天大学 | 一种基于本体的社区监控视频语义模型的应用系统和方法 |
| CN107547941A (zh) * | 2016-06-24 | 2018-01-05 | 杭州海康威视数字技术股份有限公司 | 媒体数据的存储方法、装置和系统 |
| CN108377399A (zh) * | 2018-03-07 | 2018-08-07 | 广州图普网络科技有限公司 | 实时视频流转码方法、装置及计算机可读存储介质 |
-
2018
- 2018-09-19 CN CN201811095440.4A patent/CN109344286A/zh active Pending
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101778260A (zh) * | 2009-12-29 | 2010-07-14 | 公安部第三研究所 | 一种基于结构化描述的视频监控管理方法及系统 |
| CN102572357A (zh) * | 2011-12-31 | 2012-07-11 | 中兴通讯股份有限公司 | 一种视频监控前端的存储方法及视频监控系统 |
| CN103634552A (zh) * | 2012-08-28 | 2014-03-12 | 华为技术有限公司 | 一种监控视频存储方法、系统和中心管理服务器 |
| CN102999640A (zh) * | 2013-01-09 | 2013-03-27 | 公安部第三研究所 | 基于语义推理和结构化描述的视频与图像检索系统及方法 |
| CN105528417A (zh) * | 2015-12-07 | 2016-04-27 | 北京航空航天大学 | 一种基于本体的社区监控视频语义模型的应用系统和方法 |
| CN107547941A (zh) * | 2016-06-24 | 2018-01-05 | 杭州海康威视数字技术股份有限公司 | 媒体数据的存储方法、装置和系统 |
| CN108377399A (zh) * | 2018-03-07 | 2018-08-07 | 广州图普网络科技有限公司 | 实时视频流转码方法、装置及计算机可读存储介质 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110401847A (zh) * | 2019-07-17 | 2019-11-01 | 咪咕文化科技有限公司 | 云dvr视频的压缩存储方法、电子设备及系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| WO2017005149A1 (zh) | 一种游戏加速方法和装置 | |
| CN106470323B (zh) | 视频数据的存储方法及设备 | |
| CN107730759A (zh) | 一种基于人脸识别技术的智能快递柜取件系统 | |
| CN105791431A (zh) | 一种在线分布式监控视频处理任务调度方法及装置 | |
| CN110968279B (zh) | 一种消息的降级方法及相关装置 | |
| CN103634552A (zh) | 一种监控视频存储方法、系统和中心管理服务器 | |
| CN107613314A (zh) | 一种检测直播中刷人气行为的方法及装置 | |
| CN104168434A (zh) | 视频文件的存储、播放和管理方法 | |
| CN109241325A (zh) | 一种基于深度特征的大规模人脸检索方法和设备 | |
| CN109344286A (zh) | 一种结构化索引超压缩蓝光存储系统 | |
| CN104394415A (zh) | 一种视频大数据分布式解码的方法 | |
| CN104536780A (zh) | 一种电子游戏资源高效加载方法及系统 | |
| CN103187083A (zh) | 一种基于时域视频融合的存储方法及其系统 | |
| CN104580804B (zh) | 一种图片压缩上传的方法和系统 | |
| CN104021178B (zh) | 多媒体信息过滤方法和装置 | |
| CN108540822A (zh) | 一种基于OpenCL的视频关键帧提取加速系统及其提取方法 | |
| CN105872552A (zh) | 延长视频监控系统录像存储时间的智能处理方法 | |
| CN108897756A (zh) | 跨数据中心的数据查询分析方法及存储介质 | |
| CN109240599A (zh) | 一种大数据储存系统集成 | |
| CN107861979A (zh) | 一种基于人脸识别的伴随人员获取方法及系统 | |
| CN109657098B (zh) | 一种视频指纹提取方法及装置 | |
| CN111191612B (zh) | 视频图像匹配方法、装置、终端设备及可读存储介质 | |
| CN113132754A (zh) | 一种基于5gmec的运动视频剪辑方法及系统 | |
| Satrio et al. | Hiding Document Format Files Using Video Steganography Techniques with Least Significant Bit Method | |
| CN110266526A (zh) | 一种设备树的加载方法及设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| TA01 | Transfer of patent application right |
Effective date of registration: 20190327 Address after: 102488 Yancun Town, Fangshan District, Beijing 210m west of Yanfu Road Island Applicant after: BEIJING SUNRISING-TECH Co.,Ltd. Address before: Building 42, Beijing Internet Financial Security Demonstration Industrial Park, Fangshan District, Beijing Applicant before: Luo Sisheng |
|
| TA01 | Transfer of patent application right | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190215 |
|
| RJ01 | Rejection of invention patent application after publication |