CN104113735B - 一种分布式视频监控存储系统及其方法 - Google Patents

一种分布式视频监控存储系统及其方法 Download PDF

Info

Publication number
CN104113735B
CN104113735B CN201410369141.0A CN201410369141A CN104113735B CN 104113735 B CN104113735 B CN 104113735B CN 201410369141 A CN201410369141 A CN 201410369141A CN 104113735 B CN104113735 B CN 104113735B
Authority
CN
China
Prior art keywords
video
memory node
video memory
recording
video monitoring
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410369141.0A
Other languages
English (en)
Other versions
CN104113735A (zh
Inventor
梅业龙
王刚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuhan Fiberhome Digtal Technology Co Ltd
Original Assignee
Wuhan Fiberhome Digtal Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuhan Fiberhome Digtal Technology Co Ltd filed Critical Wuhan Fiberhome Digtal Technology Co Ltd
Priority to CN201410369141.0A priority Critical patent/CN104113735B/zh
Publication of CN104113735A publication Critical patent/CN104113735A/zh
Application granted granted Critical
Publication of CN104113735B publication Critical patent/CN104113735B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Television Signal Processing For Recording (AREA)

Abstract

本发明公开了一种分布式视频监控存储系统及其方法,涉及分布式存储技术及视频监控技术。本系统包括本域单元(000)、第1它域单元(100)、第2它域单元(200)……和第N它域单元(N00),相互之间通过其内的网络单元连通;本域单元(000)和它域单元结构相同;所述的本域单元(000)包括视频监控前端(010)、网络单元(020)、视频监控平台(030)和视频存储节点(040);视频监控前端(010)、视频监控平台(030)和视频存储节点(040)分别与网络单元(020)连接。本发明提高了视频存储和读取性能;保证了区域单元内视频存储节点的存储空间及业务均衡性,提高了分布式存储系统的可用性及性能。

Description

一种分布式视频监控存储系统及其方法
技术领域
本发明涉及分布式存储技术及视频监控技术,尤其涉及一种分布式视频监控存储系统及其方法。
背景技术
分布式存储技术共同面临的一个问题是:当数据下发到多个存储节点时,需要考虑各存储节点数据空间的均衡性和负载均衡性。针对分布式海量数据的存储,存储节点可能位于不同的位置或地域,数据存储方法直接影响到系统的可用性、可靠性和业务性能。
现有分布式多节点存储方法通常使用分布式一致性hash算法,将数据分布存储到多个节点,该方法存在两个问题:1、当存储节点比较少时,通过配置虚拟节点的方法并不能保证数据均衡下发到不同的物理存储节点上;2、当存储节点位于不同地域时,数据存储过于分散,不能保证数据高效实时存储和回放。
分布式监控系统存储也同样存在上述技术难题;并且,分布式视频监控系统中视频监控前端设备录像时长、码流大小、视频存储节点临时上线及掉线等因素都可导致各视频存储节点间数据空间容量及业务处理不均衡。
发明内容
本发明的目的就在于克服现有技术存在的问题和不足,提供一种分布式视频监控存储系统及其方法,以解决存储空间及性能的均衡性问题。
本发明的目的是这样实现的:
一、一种分布式视频监控存储系统(简称系统)
本系统包括本域单元、第1它域单元、第2它域单元……和第N它域单元,相互之间通过其内的网络单元连通;
本域单元和它域单元结构相同;
所述的本域单元包括视频监控前端、网络单元、视频监控平台和视频存储节点;
视频监控前端、视频监控平台和视频存储节点分别与网络单元连接;
所述的视频监控前端包括第1视频监控前端、第2视频监控前端……和第n视频监控前端;
所述的视频存储节点包括第1视频存储节点、第2视频存储节点……和第m视频存储节点。
二、一种分布式视频监控存储方法(简称方法)
本方法包括视频监控前端优先默认将录像数据存储到本区域单元内的视频存储节点内及同一视频监控前端录像数据优先默认存储在同一视频存储节点内。进一步,视频监控平台根据备份策略或者视频存储节点容量和负载情况可将视频前端录像请求及存储视频流转发给其它区域单元内视频监控平台进行处理;更进一步,其它区域单元视频监控平台分配其区域单元内视频存储节点进行录像存储,所述分配视频存储节点方法在不同的区域单元中处理相同。
具体地说,本方法是:
0、开始;
①视频监控平台选择本域单元或者它域单元;
②从新上线视频存储节点信息列表中分配当前视频存储节点;
③判断是否有满足条件的视频存储节点,是则进入步骤⑥,否则进入步骤④;
④从视频存储节点注册信息列表中分配视频存储节点;
⑤判断是否有满足条件的视频存储节点,是则进入步骤⑥,否则跳转到步骤①;
⑥视频存储节点内录像存储处理。
本发明有如下优点和积极效果:
①针对分布式存储及视频流存储特点,通过视频监控平台分配视频存储节点的管理方式及默认优先将视频监控前端录像数据存储到本域单元,尽量将同一视频监控前端不同时间段的录像数据存储到同一视频存储节点同一区域的相邻存储位置,并且通过视频监控平台定时记录存储位置,提高了视频存储和读取性能;
②根据视频监控前端特点,视频存储节点在线录像通道数及视频监控前端码流大小是影响视频存储节点数据空间均衡性及业务负载的主要因素,通过分配算法(包括节点掉线、新节点上线及备份数据的处理方式)将前端视频流数据分发到区域单元内各个视频存储节点,保证了区域单元内视频存储节点的存储空间及业务均衡性,提高了分布式存储系统的可用性及性能。
附图说明
图1是本系统的结构方框图;
图2是本域单元的结构方框图;
图3是本方法的步骤流程图;
图4是本方法步骤2新上线视频存储节点信息列表中分配当前视频存储节点的子流程图;
图5是本方法步骤5视频存储节点内录像存储处理的子流程图;
图6是视频存储节点间还原录像备份处理的流程图。
图中:
000—本域单元,
010—视频监控前端,
011—第1视频监控前端, 012—第2视频监控前端,
…… 01n—第n视频监控前端;
n是自然数,1≤n≤2000;
020—网络单元;
030—视频监控平台;
040—视频存储节点,
041—第1视频存储节点, 042—第2视频存储节点,
…… 04m—第n视频存储节点;
m是自然数,1≤m≤100;
100—第1它域单元,
200—第2它域单元,……
N00—第N它域单元,
N是自然数,1≤N≤1000。
具体实施方式
下面结合附图和实施例详细说明:
一、系统
1、总体
如图1,本系统包括本域单元000、第1它域单元100、第2它域单元200……和第N它域单元N00,相互之间通过其内的网络单元连通;
本域单元000和它域单元结构相同;
(本域单元000和它域单元统称区域单元)
如图2,所述的本域单元000包括视频监控前端010、网络单元020、视频监控平台030和视频存储节点040;
视频监控前端010、视频监控平台030和视频存储节点040分别与网络单元020连接;
所述的视频监控前端010包括第1视频监控前端011、第2视频监控前端012……和第n视频监控前端01n;
所述的视频存储节点040包括第1视频存储节点041、第2视频存储节点042……和第m视频存储节点04m。
2、功能部件
1)视频监控前端010(简称监控前端)
是指视频监控领域枪机和球机等设备;负责对视频监控数据的采集,并存储到视频存储节点040中;
2)网络单元020
是指交换机和路由器等设备;提供区域单元设备间及区域单元之间数据转发及路由访问使用。
3)视频监控平台030(简称监控平台)
是指专用的刀片服务器,包含携带硬盘等存储介质;
视频监控平台030其软件包含必备的配置模块、注册模块、元数据模块、存储模块、分发转发模块和回放模块。
*配置模块完成对所述视频监控前端010参数及录像策略进行配置;
*注册模块负责本域单元000内视频存储节点的注册;
*元数据模块负责对视频监控前端010录像数据的存储信息,包含设备是否在线,录像视频存储节点及视频存储节点内存储位置进行记录、查询;
*存储模块、分发转发模块及回放模块分别负责对视频监控前端010录像数据进行存储、中转及回放。
4)视频存储节点040(简称存储节点)
是指专用的存储服务器,服务器内部硬盘磁盘介质可组成rai d及非rai d方式;所述视频存储节点负责将视频监控前端010录像数据存储到本地存储介质中;包括必要的注册模块、空间分配模块、存储模块、读取模块和同步模块。其中:
视频存储节点存储空间在配置阶段根据视频监控前端不同的码流大小、覆盖策略划分不同大小的存储区域;
存储区域划分举例说明:视频监控前端码流为5Mb/s,录像覆盖策略是3个月,针对视频存储节点内非RAID存储方式,经过空间容量计算在配置阶段预分配5T的存储空间或者此大小的块设备,以保证满足录像覆盖策略同时,同一视频监控前端的视频录像顺序存储在同一存储区域内,以此提高录像存储及读取性能;
并且,从视频存储节点同步存储位置信息到视频监控平台后,将同一存储区域的相邻存储位置记录进行合并,减少记录存储空间位置信息的空间大小和方便录像查询使用。
*注册模块主要完成向视频监控平台进行注册;
*空间分配模块主要完成录像存储位置的分配和记录;
*同步模块主要完成将设备信息:包含视频存储节点ID、视频存储节点IP、视频监控前端ID及存储位置信息同步到视频监控平台进行保存;
*存储模块和回放模块分别负责录像数据的存储和读取。
3、工作原理
根据网络规划及视频监控平台规格,分布式视频监控存储系统划分一个或多个区域单元;按照就近存储和网络路由优先原则,默认将视频监控前端录像视频存储在就近的区域本域单元中;
系统加载完成后,视频监控前端、视频存储节点向本域单元视频监控平台注册,视频存储节点达到容量和负载门限后向该视频监控平台上报;视频监控平台记录视频监控前端和视频存储节点的在线状态;视频监控平台按照先后顺序记录及保存为视频存储节点信息列表;视频监控平台按照优先顺序记录及保存临时加入的新上线视频存储节点信息列表;视频监控平台记录视频存储节点录像存储位置信息和负载状态;
优先从新上线视频存储节点信息列表中顺序分配当前视频存储节点;其次从视频存储节点注册信息列表中顺序分配视频存储节点作为当前视频存储节点;所选择的视频存储节点必须满足当前在线存储录像通道数不高于区域单元内平均录像通道数、不超过容量和负载门限值;
视频监控平台根据备份策略或者视频存储节点容量和负载情况可将视频前端录像请求及存储视频流转发给其它区域单元内视频监控平台进行处理;进一步,其它区域单元视频监控平台分配其区域单元内视频存储节点进行录像存储,所述分配视频存储节点方法在不同的区域单元中处理相同。
二、方法
1、本方法包括下列步骤:
如图3,
0、开始-300
开始条件:视频监控平台完成视频存储节点注册和录像策略配置,配置模块下发录像请求;
*所述的录像策略配置包括视频监控前端录像码流大小、视频监控前端位置信息、启动录像时间、录像时长、存储区域单元、存储份数、备份是否同步冗余方式和备份是否存储到不同的区域单元;
*所述的录像请求是指视频监控前端向视频监控平台注册后,该视频监控平台配置模块下发录像存储请求,包括正常的录像存储请求及还原录像备份的录像请求;
所述的还原录像备份是指当视频存储节点掉线时,其它视频存储节点存在该视频存储节点的录像备份数据,为了保持系统录像备份数据的份数,需要将存在录像备份数据的视频存储节点的备份数据拷贝到其它在线视频存储节点;
①视频监控平台选择本域单元或者它域单元-301
视频监控平台优先根据录像策略选择区域单元,默认选择本域单元;
②从新上线视频存储节点信息列表中分配当前视频存储节点-302;
如图4,子流程:
0、开始-400
系统加载成功后,所述监控平台根据存储节点临时加入事件保存为新上线视频存储节点信息列表;
所述新上线视频存储节点信息包括:视频存储节点ID、视频存储节点IP、视频存储节点录像通道数、总存储容量和空闲容量信息;
A、判断新上线视频存储节点信息列表是否为空-401,是则跳转到步骤G,否则进入步骤B;
B、判断是否存在历史视频存储节点并且满足容量和负载要求-402,是则记录视频存储节点信息,返回分配成功-409,否则进入步骤C;
所述的存在历史视频存储节点是指同一视频监控前端及监控位置信息存在对应的录像存储位置信息记录在该视频监控平台上;
所述的容量和负载要求是指视频存储节点满足本视频存储节点预先指定的存储容量门限和负载门限值,负载门限包括当前录像通道数、录像回放通道数、cpu占用率和内存使用率;
C、从新上线视频存储节点信息列表中获取上一次分配的视频存储节点的下一个视频存储节点信息-403
所述的上一次分配的视频存储节点指上次录像请求分配的视频存储节点;
D、判断该视频存储节点录像通道数是否大于或等于区域单元视频存储节点平均录像通道数-404,是则将该视频存储节点信息加入到视频存储节点注册信息列表上一次分配的视频存储节点的前一个位置,并且从原列表中删除该视频存储节点信息,特殊的,如果视频存储节点注册信息列表中上一次分配的视频存储节点为第一个视频存储节点,则将新加入的视频存储节点放置到列表最后位置-408,否则进入步骤E;
所述的区域单元视频存储节点平均录像通道数=区域单元录像通道总数/区域单元视频存储节点总数;
所述的区域单元录像通道总数包括区域单元内各视频存储节点录像通道数和还原录像备份的录像通道数;
所述的区域单元视频存储节点总数=新加入视频存储节点列表大小+视频存储节点注册列表大小;
E、判断该视频存储节点是否在线及满足容量和负载要求-405,是则记录存储节点信息,返回分配成功-409,否则进入步骤F;
所述的容量和负载要求是指视频存储节点满足本视频存储节点预先指定的存储容量门限和负载门限值,负载门限包括当前录像通道数、录像回放通道数、cpu占用率和内存使用率;
F、判断获取列表中下一个视频存储节点信息是否成功-406,是则跳转到步骤D,否则进入步骤G;
G、返回视频存储节点分配失败-407;
③判断是否有满足条件的视频存储节点-303,是则进入步骤⑥,否则进入步骤④;
④从视频存储节点注册信息列表中分配视频存储节点-304
子流程:
A、首先查询视频监控前端是否存在对应的录像存储位置信息,如果有并且满足当前视频存储节点条件,则分配该视频存储节点;
B、其次从视频存储节点注册信息列表中顺序分配视频存储节点,并且判断是否满足当前视频存储节点条件;
所述的当前视频存储节点条件包括:视频存储节点在线、达到容量和负载要求及视频存储节点在线录像通道数小于区域单元平均录像通道数量;
所述的容量和负载要求是指视频存储节点满足本视频存储节点预先指定的存储容量门限和负载门限值,负载门限包括当前录像通道数、录像回放通道数、cpu占用率和内存使用率;
⑤判断是否有满足条件的视频存储节点-305,是则进入步骤⑥,否则跳转到步骤①;
⑥视频存储节点内录像存储处理-306。
子流程:
0、开始-500
开始条件:所述监控平台已接收录像策略配置和已分配监控前端对应的当前存储节点;
A、视频监控平台请求当前视频存储节点查找最优的录像存储位置信息-501;
所述查找最优的录像存储位置信息遵从原则如下:
a、根据视频监控前端码流大小,覆盖策略查找满足存储空间容量大小的区域;
b、查找该视频监控前端在同一位置区域是否存在历史录像,优先选择该视频监控前端对应的原视频存储节点,并且优先选择最后时间段存储地址临近的存储位置;
B、视频监控平台通知视频监控前端发起录像存储请求-502;
C、视频监控前端与该视频存储节点建立录像请求通信-503;
该流程可选择:视频监控平台配置录像策略后,视频监控平台通知视频监控前端发起向视频存储节点发送录像存储请求,后续存储流通过i scs i协议进行传输;
该流程可选择:视频监控平台配置录像策略后,视频监控平台通知该视频存储节点向视频监控前端发起录像请求,后续存储流通过RTP协议进行传输;
D、录像存储过程中,视频存储节点录像通道数加1记录在本地并同步到所属视频监控平台和存储位置信息实时记录在本地并定时更新到所属视频监控平台-504;
所述的所属视频监控平台指视频存储节点所注册的视频监控平台;
E、存储结束,视频存储节点录像通道数减1和录像存储位置信息记录到本地,并且同步到所属视频监控平台-505;
该存储位置信息包含:视频监控前端ID、视频存储节点ID、视频存储节点IP、起始存储时间、同步时间、存储区域ID或者块设备号、该录像数据的总份数、该录像数据的存储份数编号、存储起始位置和存储长度信息;
定时是指根据视频存储节点缓存大小,刷盘策略确定不同频率的同步更新时间,可设置30分钟至1小时,防止更新频率过高影响视频监控平台的性能。
所述的所属视频监控平台指视频存储节点所注册的视频监控平台。
2、视频存储节点间还原录像备份处理流程
如图6,视频存储节点间还原录像备份处理流程是:
0、开始-600
开始条件:视频监控平台根据检测到节点掉线事件或者其它配置触发还原录像备份操作;
A、区域单元所述监控平台查找视频存储节点录像备份信息,根据新的备份策略分配备份端存储节点-601;
所述的区域单元是指视频存储节点掉线所在的区域单元或者触发还原备份操作所在的区域单元;
所述的视频存储节点录像备份信息是指分配视频存储节点阶段根据录像策略配置分配的两个或者多个视频存储节点信息;
视频存储节点备份信息包括:录像备份份数、录像备份的份数编号、视频存储节点所在的区域ID、视频存储节点ID、视频存储节点IP、存储起始位置和存储长度信息,分配目的端视频存储节点信息和视频存储节点是否在线;
备份策略是指确定需要还原录像备份份数和选择在本域单元或者它域单元进行录像备份存储;
B、源存储节点向备份端存储节点发起还原备份录像请求-602;
C、存储节点间进行录像备份,备份端存储节点录像通道数加1并同步到所属视频监控平台和存储位置信息记录到本地并定时更新到所属视频监控平台-603;
所述的所属视频监控平台指视频存储节点所注册的视频监控平台;
D、备份结束后,备份端视频存储节点录像通道数减1并同步到所属视频监控平台及录像存储位置记录到本地并更新到所属视频监控平台-604;
所述的所属视频监控平台指视频存储节点所注册的视频监控平台。
三、举例说明
视频监控前端录像数据存储在本域单元的视频存储节点分配方法:
在网络配置阶段,本系统包括一个区域单元,视频监控平台先后完成6个视频存储节点A、B、C、D、E、F的注册;
当第1视频监控前端接入系统并触发录像请求时,第一次默认分配视频存储节点A作为当前视频存储节点;当第2视频监控前端接入系统并触发录像请求时,分配对应的视频存储节点为B;在一段时间内,新上线视频存储节点信息列表为空(即未有新视频存储节点临时加入),新的视频监控前端陆续接入系统后,默认依次分配对应的视频存储节点C、D、E、F、A、B、C……;
如果分配的视频存储节点D不满足容量和负载要求,则分配下一个视频存储节点E作为当前视频存储节点;
如果第2视频监控前端接入系统并触发录像请求,分配的视频存储节点为B,此时,新上线视频存储节点G、H、I,当第3-N(N数量由视频存储节点容量和负载门限值决定,例如:当视频存储节点达到128路录像存储通道数为负载门限,此时N=128)视频监控前端接入系统并触发录像请求,选择新上线的视频存储节点G作为当前视频存储节点;当前N+1视频监控前端及更多的视频监控前端加入到系统并陆续触发录像请求,依次选择视频存储节点H、I;
如果G录像通道数达到本域单元平均录像通道数或者本视频存储节点容量或负载门限,G加入到视频存储节点注册信息列表中,并且从新上线存储节点信息列表中删除,此时,视频存储节点注册信息列表位置排列如下:A、G(新加入视频存储节点)、B(上一次分配的视频存储节点)、C、D、E、F,同样,当H、I加入到视频存储节点注册信息列表后,该列表排列为:A、G、H、I、B、C、D、E、F,此时新上线视频存储节点列表为空,下次录像请求优先分配视频存储节点C作为当前视频存储节点,后续依次为D、E、F、A、G、H、I、B、C、D……。

Claims (2)

1.一种基于分布式视频监控存储系统的分布式视频监控存储方法,
此系统包括本域单元(000)、第1它域单元(100)、第2它域单元(200)……和第N它域单元(N00),相互之间通过其内的网络单元连通;
本域单元(000)和它域单元结构相同;
所述的本域单元(000)包括视频监控前端(010)、网络单元(020)、视频监控平台(030)和视频存储节点(040);
视频监控前端(010)、视频监控平台(030)和视频存储节点(040)分别与网络单元(020)连接;
所述的视频监控前端(010)包括第1视频监控前端(011)、第2视频监控前端(012)……和第n视频监控前端(01n);
所述的视频存储节点(040)包括第1视频存储节点(041)、第2视频存储节点(042)……和第m视频存储节点(04m);
其特征在于:
0、开始-300
开始条件:视频监控平台完成视频存储节点注册和录像策略配置,配置模块下发录像请求;
*所述的录像策略配置包括视频监控前端录像码流大小、视频监控前端位置信息、启动录像时间、录像时长、存储区域单元、存储份数、备份是否同步冗余方式和备份是否存储到不同的区域单元;
*所述的录像请求是指视频监控前端向视频监控平台注册后,该视频监控平台配置模块下发录像存储请求,包括正常的录像存储请求及还原录像备份的录像请求;
所述的还原录像备份是指当视频存储节点掉线时,其它视频存储节点存在该视频存储节点的录像备份数据,为了保持系统录像备份数据的份数,需要将存在录像备份数据的视频存储节点的备份数据拷贝到其它在线视频存储节点;
①视频监控平台选择本域单元或者它域单元(301)
视频监控平台优先根据录像策略选择区域单元,默认选择本域单元;
②从新上线视频存储节点信息列表中分配当前视频存储节点(302);
子流程:
0、开始(400)
系统加载成功后,所述监控平台根据存储节点临时加入事件保存为新上线视频存储节点信息列表;
所述新上线视频存储节点信息包括:视频存储节点ID、视频存储节点IP、视频存储节点录像通道数、总存储容量和空闲容量信息;
A、判断新上线视频存储节点信息列表是否为空(401),是则跳转到步骤G,否则进入步骤B;
B、判断是否存在历史视频存储节点并且满足容量和负载要求-402,是则记录视频存储节点信息,返回分配成功(409),否则进入步骤C;
所述的存在历史视频存储节点是指同一视频监控前端及监控位置信息存在对应的录像存储位置信息记录在该视频监控平台上;
所述的容量和负载要求是指视频存储节点满足本视频存储节点预先指定的存储容量门限和负载门限值,负载门限包括当前录像通道数、录像回放通道数、cpu占用率和内存使用率;
C、从新上线视频存储节点信息列表中获取上一次分配的视频存储节点的下一个视频存储节点信息(403)
所述的上一次分配的视频存储节点指上次录像请求分配的视频存储节点;
D、判断该视频存储节点录像通道数是否大于或等于区域单元视频存储节点平均录像通道数-404,是则将该视频存储节点信息加入到视频存储节点注册信息列表上一次分配的视频存储节点的前一个位置,并且从原列表中删除该视频存储节点信息,特殊的,如果视频存储节点注册信息列表中上一次分配的视频存储节点为第一个视频存储节点,则将新加入的视频存储节点放置到列表最后位置(408),否则进入步骤E;
所述的区域单元视频存储节点平均录像通道数=区域单元录像通道总数/区域单元视频存储节点总数;
所述的区域单元录像通道总数包括区域单元内各视频存储节点录像通道数 和还原录像备份的录像通道数;
所述的区域单元视频存储节点总数=新加入视频存储节点列表大小+视频存储节点注册列表大小;
E、判断该视频存储节点是否在线及满足容量和负载要求(405),是则记录存储节点信息,返回分配成功(409),否则进入步骤F;
所述的容量和负载要求是指视频存储节点满足本视频存储节点预先指定的存储容量门限和负载门限值,负载门限包括当前录像通道数、录像回放通道数、cpu占用率和内存使用率;
F、判断获取列表中下一个视频存储节点信息是否成功(406),是则跳转到步骤D,否则进入步骤G;
G、返回视频存储节点分配失败(407);
③判断是否有满足条件的视频存储节点(303),是则进入步骤⑥,否则进入步骤④;
④从视频存储节点注册信息列表中分配视频存储节点(304)
子流程:
A、首先查询视频监控前端是否存在对应的录像存储位置信息,如果有并且满足当前视频存储节点条件,则分配该视频存储节点;
B、其次从视频存储节点注册信息列表中顺序分配视频存储节点,并且判断是否满足当前视频存储节点条件;
所述的当前视频存储节点条件包括:视频存储节点在线、达到容量和负载要求及视频存储节点在线录像通道数小于区域单元平均录像通道数量;
所述的容量和负载要求是指视频存储节点满足本视频存储节点预先指定的存储容量门限和负载门限值,负载门限包括当前录像通道数、录像回放通道数、cpu占用率和内存使用率;
⑤判断是否有满足条件的视频存储节点(305),是则进入步骤⑥,否则跳转到步骤①;
⑥视频存储节点内录像存储处理(306);
子流程:
0、开始(500)
开始条件:所述监控平台已接收录像策略配置和已分配监控前端对应的当前存储节点;
A、视频监控平台请求当前视频存储节点查找最优的录像存储位置信息(501);
所述查找最优的录像存储位置信息遵从原则如下:
a、根据视频监控前端码流大小,覆盖策略查找满足存储空间容量大小的区域;
b、查找该视频监控前端在同一位置区域是否存在历史录像,优先选择该视频监控前端对应的原视频存储节点,并且优先选择最后时间段存储地址临近的存储位置;
B、视频监控平台通知视频监控前端发起录像存储请求(502);
C、视频监控前端与该视频存储节点建立录像请求通信(503);
该流程可选择:视频监控平台配置录像策略后,视频监控平台通知视频监控前端发起向视频存储节点发送录像存储请求,后续存储流通过iscsi协议进行传输;
该流程可选择:视频监控平台配置录像策略后,视频监控平台通知该视频存储节点向视频监控前端发起录像请求,后续存储流通过RTP协议进行传输;
D、录像存储过程中,视频存储节点录像通道数加1记录在本地并同步到所属视频监控平台和存储位置信息实时记录在本地并定时更新到所属视频监控平台(504);
所述的所属视频监控平台指视频存储节点所注册的视频监控平台;
E、存储结束,视频存储节点录像通道数减1和录像存储位置信息记录到本地,并且同步到所属视频监控平台(505);
该存储位置信息包含:视频监控前端ID、视频存储节点ID、视频存储节点IP、起始存储时间、同步时间、存储区域ID或者块设备号、该录像数据的总份数、该录像数据的存储份数编号、存储起始位置和存储长度信息;
定时是指根据视频存储节点缓存大小,刷盘策略确定不同频率的同步更新时间,可设置30分钟至1小时,防止更新频率过高影响视频监控平台的性能;
所述的所属视频监控平台指视频存储节点所注册的视频监控平台。
2.按权利要求1所述的分布式视频监控存储方法,其特征在于包括下列步骤:
0、开始(600)
开始条件:视频监控平台根据检测到节点掉线事件或者其它配置触发还原录像备份操作;
A、区域单元所述监控平台查找视频存储节点录像备份信息,根据新的备份策略分配备份端存储节点(601);
所述的区域单元是指视频存储节点掉线所在的区域单元或者触发还原备份操作所在的区域单元;
所述的视频存储节点录像备份信息是指分配视频存储节点阶段根据录像策略配置分配的两个或者多个视频存储节点信息;
视频存储节点备份信息包括:录像备份份数、录像备份的份数编号、视频存储节点所在的区域ID、视频存储节点ID、视频存储节点IP、存储起始位置和存储长度信息,分配目的端视频存储节点信息和视频存储节点是否在线;
备份策略是指确定需要还原录像备份份数和选择在本域单元或者它域单元进行录像备份存储;
B、源存储节点向备份端存储节点发起还原备份录像请求(602);
C、存储节点间进行录像备份,备份端存储节点录像通道数加1并同步到所属视频监控平台和存储位置信息记录到本地并定时更新到所属视频监控平台(603);
所述的所属视频监控平台指视频存储节点所注册的视频监控平台;
D、备份结束后,备份端视频存储节点录像通道数减1并同步到所属视频监控平台及录像存储位置记录到本地并更新到所属视频监控平台(604);
所述的所属视频监控平台指视频存储节点所注册的视频监控平台。
CN201410369141.0A 2014-07-30 2014-07-30 一种分布式视频监控存储系统及其方法 Active CN104113735B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410369141.0A CN104113735B (zh) 2014-07-30 2014-07-30 一种分布式视频监控存储系统及其方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410369141.0A CN104113735B (zh) 2014-07-30 2014-07-30 一种分布式视频监控存储系统及其方法

Publications (2)

Publication Number Publication Date
CN104113735A CN104113735A (zh) 2014-10-22
CN104113735B true CN104113735B (zh) 2017-05-17

Family

ID=51710355

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410369141.0A Active CN104113735B (zh) 2014-07-30 2014-07-30 一种分布式视频监控存储系统及其方法

Country Status (1)

Country Link
CN (1) CN104113735B (zh)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104394382A (zh) * 2014-12-09 2015-03-04 浙江省公众信息产业有限公司 视频监控录像的存储方法、设备和系统
CN104469310A (zh) * 2014-12-12 2015-03-25 浙江省公众信息产业有限公司 录像数据的网络存储方法和系统、视频监控平台
CN104581073B (zh) * 2015-01-12 2017-06-23 中国地质大学(武汉) 基于sla分类的云视频监控数据低能耗存储系统及方法
CN106162219B (zh) 2015-04-21 2019-08-16 杭州海康威视系统技术有限公司 视频云存储方法及系统
CN104837029B (zh) * 2015-05-08 2018-07-03 厦门大学 一种高清视频点播系统的资源硬盘的存储和访问方法
CN105357504A (zh) * 2015-12-17 2016-02-24 深圳市科漫达智能管理科技有限公司 一种视频流数据的录像与回放方法及装置
CN107959812B (zh) * 2016-10-18 2020-09-22 杭州萤石网络有限公司 监控数据的存储方法、装置、系统与路由设备
CN106507215A (zh) * 2016-11-25 2017-03-15 上海熙菱信息技术有限公司 一种采用域服务支持网状结构的视频流传输方法
CN107124583B (zh) * 2017-04-21 2020-06-23 宁波公众信息产业有限公司 一种快速获取视频监控信息的监控系统
CN110062199B (zh) * 2018-01-19 2020-07-10 杭州海康威视系统技术有限公司 负载均衡方法、装置及计算机可读存储介质
CN110069210B (zh) * 2018-01-23 2021-09-28 杭州海康威视系统技术有限公司 一种存储系统、存储资源的分配方法及装置
CN110868564B (zh) * 2018-08-28 2021-06-04 杭州海康威视系统技术有限公司 一种存储任务分配方法、云存储系统及电子设备
CN111050103A (zh) * 2019-12-13 2020-04-21 北京科东电力控制系统有限责任公司 一种视频分布式存储与集中管理系统
CN111625421B (zh) * 2020-05-26 2021-07-16 云和恩墨(北京)信息技术有限公司 监控分布式存储系统的方法及装置、存储介质和处理器
CN116107760B (zh) * 2023-04-07 2023-07-14 浪潮电子信息产业股份有限公司 一种负载均衡方法、装置、设备及介质
CN116301660B (zh) * 2023-05-10 2023-08-22 深圳创新科技术有限公司 一种基于raid的录像写入方法、装置、设备及介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101094391A (zh) * 2007-06-26 2007-12-26 南京联创网络科技有限公司 多种视频交换路由方式的瘦资源视频绑定策略方法
CN101102205A (zh) * 2006-11-08 2008-01-09 中兴通讯股份有限公司 Ims网中基于分布式dns系统实现号码携带的网络结构及方法
KR20080026677A (ko) * 2006-09-20 2008-03-26 (주)아이디스 원격 영상 감시 시스템 및 원격 영상 감시 방법
CN102543108A (zh) * 2011-08-16 2012-07-04 北京友友天宇系统技术有限公司 基于分布式存储的视频冗余策略优化方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080026677A (ko) * 2006-09-20 2008-03-26 (주)아이디스 원격 영상 감시 시스템 및 원격 영상 감시 방법
CN101102205A (zh) * 2006-11-08 2008-01-09 中兴通讯股份有限公司 Ims网中基于分布式dns系统实现号码携带的网络结构及方法
CN101094391A (zh) * 2007-06-26 2007-12-26 南京联创网络科技有限公司 多种视频交换路由方式的瘦资源视频绑定策略方法
CN102543108A (zh) * 2011-08-16 2012-07-04 北京友友天宇系统技术有限公司 基于分布式存储的视频冗余策略优化方法

Also Published As

Publication number Publication date
CN104113735A (zh) 2014-10-22

Similar Documents

Publication Publication Date Title
CN104113735B (zh) 一种分布式视频监控存储系统及其方法
CN107231395A (zh) 数据存储方法、装置和系统
CN101257396B (zh) 一种基于p2p技术的多域内容分发系统及相应的方法
CN104811493B (zh) 一种网络感知的虚拟机镜像存储系统及读写请求处理方法
US8396936B2 (en) Computer system with cooperative cache
CN104050249B (zh) 分布式查询引擎系统和方法及元数据服务器
CN102782670B (zh) 存储器高速缓存数据中心
US20120198096A1 (en) Method, Apparatus, System for Address Management
JPH07200380A (ja) ビデオ・ファイル配布システムおよび方法
CN101335706B (zh) 对路由表进行空间管理的方法、装置、交换机及路由器
CN102438020A (zh) 内容分发网络中内容分发的方法、设备和网络系统
CN101026744A (zh) 分布式流媒体分发系统及流媒体内存缓冲及调度分发方法
CN104967873A (zh) 流媒体直播调度方法、系统和调度服务器
CN108829720A (zh) 数据处理方法及装置
CN105554121A (zh) 实现分布式缓存系统负载均衡的方法及系统
CN104317669A (zh) 一种云端异构存储系统及其数据副本管理方法
CN102117287A (zh) 分布式文件系统访问方法、元数据服务器及客户端
CN106201919A (zh) 缓存一致性
US11016688B1 (en) Real-time localized data access in a distributed data storage system
CN117008818A (zh) 数据处理方法、装置、计算机设备和计算机可读存储介质
CN106406764A (zh) 一种分布式san块存储的高效能数据访问系统及方法
CN101344882B (zh) 数据查询方法、插入方法及删除方法
JP2003122658A (ja) データ配送方法
CN104683374A (zh) 一种分布式存储的缓存更新方法及分布式存储系统
CN106973091B (zh) 分布式内存数据重分布方法及系统、主控服务器

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant