CN113259689A - 一种分布式视频存储方法、装置及电子设备 - Google Patents
一种分布式视频存储方法、装置及电子设备 Download PDFInfo
- Publication number
- CN113259689A CN113259689A CN202110525284.6A CN202110525284A CN113259689A CN 113259689 A CN113259689 A CN 113259689A CN 202110525284 A CN202110525284 A CN 202110525284A CN 113259689 A CN113259689 A CN 113259689A
- Authority
- CN
- China
- Prior art keywords
- video
- file
- error correction
- storage
- blocks
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 48
- 238000012937 correction Methods 0.000 claims abstract description 91
- 239000012634 fragment Substances 0.000 claims abstract description 43
- 239000013598 vector Substances 0.000 claims abstract description 38
- 239000011159 matrix material Substances 0.000 claims abstract description 36
- 238000001514 detection method Methods 0.000 claims description 4
- 238000012545 processing Methods 0.000 claims description 4
- 230000002441 reversible effect Effects 0.000 claims description 3
- 238000004422 calculation algorithm Methods 0.000 claims description 2
- 230000000977 initiatory effect Effects 0.000 claims description 2
- 230000011218 segmentation Effects 0.000 claims description 2
- 230000005540 biological transmission Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 238000012806 monitoring device Methods 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/2181—Source of audio or video content, e.g. local disk arrays comprising remotely distributed storage units, e.g. when movies are replicated over a plurality of video servers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明公开了一种分布式视频存储方法，所述方法包括：接收第一设备发送的视频文件；获取所述视频文件的256比特哈希值作为所述视频文件的寻址地址；将所述视频文件定长切分获得多个第一视频分片，将所述多个第一视频分片数据按照时序从0开始编号；所述多个第一视频分片使用N+M冗余度生成M个视频纠错码；根据所述多个第一视频分片的编号按照第一长度进行分组获得N个第二视频分片；从所述N个第二视频分片中依次取出一个字节作为N个输入向量D与编码矩阵B进行矩阵运算获得N+M个纠错码向量C；将所述N+M个纠错码向量C依次放入N+M个视频纠错片中获得N+M块视频纠错块；将所述N+M块视频纠错块发送给N+M个第一设备进行存储。
Description
技术领域
本申请涉及视频存储领域，尤其涉及一种分布式视频存储方法、装置及电子设备。
背景技术
第五代移动通信技术（5th generation mobile networks或5th generationwireless systems、5th-Generation，简称5G或5G技术）是最新一代蜂窝移动通信技术，也是继4G（LTE-A、WiMax）、3G（UMTS、LTE）和2G（GSM）系统之后的延伸。5G的性能目标是高数据速率、减少延迟、节省能源、降低成本、提高系统容量和大规模设备连接。
5G网络增强临近传输，减少时延，同时增加传输带宽，目前的终端设备例如执法记录仪、监控设备等单个存储空间有限，难以适应5G时代大规模视频存储需求，且存储的视频内也容易被篡改。
发明内容
本申请要解决的技术问题，在于提供一种分布式视频存储方法、装置及电子设备，以解决目前的终端设备例如执法记录仪、监控设备等单个存储空间有限，难以适应5G时代大规模视频存储需求，且存储的视频内也容易被篡改的技术问题。
为实现上述目的，本申请采用下述技术方案：
第一方面，本申请提供一种分布式视频存储方法，所述方法包括：
接收第一设备发送的视频文件；
获取所述视频文件的256比特哈希值作为所述视频文件的寻址地址；
将所述视频文件定长切分获得多个第一视频分片，将所述多个第一视频分片数据按照时序从0开始编号；
所述多个第一视频分片使用N+M冗余度生成M个视频纠错码；
根据所述多个第一视频分片的编号按照第一长度进行分组获得N个第二视频分片；
从所述N个第二视频分片中依次取出一个字节作为N个输入向量D与编码矩阵B进行矩阵运算获得N+M个纠错码向量C，其中，所述编码矩阵B为非零值(N+M)*N整数矩阵；
将所述N+M个纠错码向量C依次放入N+M个视频纠错片中获得N+M块视频纠错块；
将所述N+M块视频纠错块发送给N+M个第一设备进行存储。
第二方面，本申请提供一种分布式视频存储装置，所述装置包括：
第一接收单元，用于接收第一设备发送的视频文件；
第一获取单元，用于获取所述视频文件的256比特哈希值作为所述视频文件的寻址地址；
第一切分单元，用于将所述视频文件定长切分获得多个第一视频分片，将所述多个第一视频分片数据按照时序从0开始编号；
第一生成单元，用于所述多个第一视频分片使用N+M冗余度生成M个视频纠错码；
第一分组单元，用于根据所述多个第一视频分片的编号按照第一长度进行分组获得N个第二视频分片；
第一运算单元，用于从所述N个第二视频分片中依次取出一个字节作为N个输入向量D与编码矩阵B进行矩阵运算获得N+M个纠错码向量C，其中，所述编码矩阵B为非零值(N+M)*N整数矩阵；
第二获取单元，用于将所述N+M个纠错码向量C依次放入N+M个视频纠错片中获得N+M块视频纠错块；
第一发送单元，用于将所述N+M块视频纠错块发送给N+M个第一设备进行存储。
第三方面，本申请提供一种电子设备，所述电子设备包括处理器和存储器，所述存储器中存储有至少一条指令、至少一段程序、待码集或指令集，所述至少一条指令、所述至少一段程序、所述待码集或指令集由所述处理器执行以实现如上述第一方面所述的分布式视频存储方法。
第四方面，本申请提供一种计算机可读存储介质，所述计算机可读存储介质中存储有至少一条指令、至少一段程序、待码集或指令集，所述至少一条指令、所述至少一段程序、所述待码集或指令集由处理器执行以实现如上述第一方面所述的分布式视频存储方法。
本申请的有益效果是：本申请提供一种分布式视频存储方法、装置及电子设备，提高每个终端设备存储空间的利用率，使用N+M冗余生成M个视频纠错码，使用编码矩阵实现全输出交织的视频纠错片数据，在N+M冗余同时实现加密。通过视频文件的哈希值作为寻址地址，实现视频纠错片的路由查看的同时，实现视频文件防篡改。
附图说明
图1为本申请一个实施例提供的一种分布式视频存储方法的流程示意图；
图2为本申请一个实施例提供的一种视频文件寻址地址与设备绑定方法的流程示意图；
图3为本申请一个实施例提供的一种N+M视频片分布式存储方法的流程示意图；
图4为本申请一个实施例提供的一种下载视频纠错片方法的流程示意图；
图5为本申请一个实施例提供的一种验证视频文件方法的流程示意图；
图6为本申请一个实施例提供的一种分布式视频存储装置的结构示意图；
图7为本申请一个实施例提供的一种电子设备的结构示意图。
具体实施方式
下面通过具体实施例，并结合附图，对本申请的技术方案作进一步的具体描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
本申请提供一种分布式视频存储方法、装置及电子设备，以解决目前的终端设备例如执法记录仪、监控设备等单个存储空间有限，难以适应5G时代大规模视频存储需求，且存储的视频内也容易被篡改的技术问题。
以下结合附图，详细说明本申请中各实施例提供的技术方案。
请参阅附图1，其示出了本申请一个实施例提供的一种分布式视频存储方法的流程示意图，所述方法包括：
S101，接收第一设备发送的视频文件；
针对步骤S101，第一设备可以是终端设备，例如执法记录仪、监控设备等。
S102，获取所述视频文件的256比特哈希值作为所述视频文件的寻址地址；
针对步骤S102，在一个实施例中，获取视频文件后，对视频文件的数据进行国密SM3的哈希处理，得到视频文件的256比特哈希值。256比特哈希值代表视频文件的数据内容，只要视频文件其中一个字节发生变化，256比特哈希值就发生剧变，这样视频文件的寻址地址就可以防止视频文件在传输、存储中间过程被篡改。
S103，将所述视频文件定长切分获得多个第一视频分片，将所述多个第一视频分片数据按照时序从0开始编号；
针对步骤S103，第一视频分片大小可以采用64K字节或128K字节或其它大小，最后一个第一视频分片的大小可以采用余数或使用空白内容填充至预设的大小。
S104，所述多个第一视频分片使用N+M冗余度生成M个视频纠错码；
S105，根据所述多个第一视频分片的编号按照第一长度进行分组获得N个第二视频分片；
S106，从所述N个第二视频分片中依次取出一个字节作为N个输入向量D与编码矩阵B进行矩阵运算获得N+M个纠错码向量C，其中，所述编码矩阵B为非零值(N+M)*N整数矩阵；
针对步骤S106，从所述N个第二视频分片中依次取出一个字节作为N个输入向量DD=(D1，D2，..., Dn），输入向量D与编码矩阵B进行矩阵运算得纠错码向量C=（C1，C2，..,Cm+n），编码矩阵B采用非零值(N+M)*N整数矩阵，实现矩阵多项式可逆计算，即输入向量D与纠错码向量C最多容许M个数据被丢弃时，仍然可以通过矩阵多项式计算恢复丢失的数据，因为需要(N+M)*M编码矩阵B的具体参考，才有还原输入向量D，从而实现对原始视频文件的加密。
S107，将所述N+M个纠错码向量C依次放入N+M个视频纠错片中获得N+M块视频纠错块；
S108，将所述N+M块视频纠错块发送给N+M个第一设备进行存储。
针对步骤S108，在一个实施例中，将所述N+M块视频纠错块发送给N+M个第一设备进行存储包括：
向所有在线的所述第一设备发送网络延时探测，选择网络延时最小的N+M个第一设备作为存储设备清单，将所述N+M块视频纠错块发送给N+M个第一设备进行存储。
把M+M块视频纠错块发送给N+M个第一设备进行存储，当其中M台第一设备出现异常，仍然可以恢复视频数据。
在一个实施例中，请参阅附图2，其示出了本申请一个实施例提供的一种视频文件寻址地址与设备绑定方法的流程示意图，所述方法包括：
S201，接收所述视频文件的寻址地址、文件大小；
S202，获取每个所述第一设备的空闲存储块数量；
S203，选择N+M个第一设备中在线且空闲存储块数量最高的所述第一设备作为所述视频文件的存储客户端且绑定所述视频文件的寻址地址。
可以理解，选择在线且空闲存储块最高的第一设备作为视频文件的存储设备，用于其它第一设备需求时下载。
在一个实施例中，请参阅附图3，其示出了本申请一个实施例提供的一种N+M视频片分布式存储方法的流程示意图，所述方法包括：
S301，根据所述第二视频分片大小对每一所述第一设备的存储空间进行文件格式化，生成所述第二视频分片大小整数倍的多个文件存储块；
S302，将排序前2的所述文件存储块作为文件索引块；
其中，所述文件索引块用于保存所述视频文件的寻址地址、所述N+M个视频纠错片的N+M个分片编号、所述多个文件存储块的编号以及空闲的文件存储块数量。
S303，将所述N+M个视频纠错片保存至空闲的文件存储块中，并将所述文件存储块的编号和所述视频文件的寻址地址写入文件索引块中。
在一个实施例中，请参阅附图4，其示出了本申请一个实施例提供的一种下载视频纠错片方法的流程示意图，所述方法包括：
S401，创建缓存指令，所述缓存指令携带参数文件大小与寻址地址；
S402，根据所述视频文件的寻址地址获取存储所述视频文件的第一设备清单；
S403，获取所述视频文件在任一第一设备中的所述N+M个视频纠错片的分片编号清单；
S404，获取所述视频文件在存储客户端中的所述N+M个视频纠错片的分片编号清单；
S405，向所有存储客户端和所有第一设备发起网络延时探测，根据网络延时从小到大获得候选设备清单；
S406，对所述N+M个视频纠错片按照N+M长度进行分组，对每一个视频纠错片分组，根据候选设备清单的顺序判断候选设备是否包含该分组的分片编号，如果有，下载该视频纠错片，并携带视频文件的寻址地址，视频纠错片的分片编号以及下载网络地址与端口。
可以理解，每一个视频纠错片分组只要通知N个视频纠错片，N个视频纠错片可以恢复视频文件，所以按照这种方法是挑选出小于等于N个设备来下载，如果一个第一设备A已经下载视频文件全部或部分视频纠错片，而在第一设备A附近另一个第一设备B如果也下载该视频文件，第一设备B可以直接从第一设备A获取视频纠错片数据，这样就会大大提高下载速度，同时减轻传输压力。
针对步骤S406，对每一个视频纠错片分组下载N个视频纠错片，将每一视频纠错片的数据存放至对应的分组缓存块中，更新缓存索引文件。
在一个实施例中，接收所述缓存指令，根据寻址地址创建缓存索引文件与缓存数据文件；
通过所述参数文件大小计算出视频纠错片数，将所述参数文件大小除以N*分片大小得到视频纠错片数，所述参数文件大小除以N*分片大小取余得到余数，如果余数非零，视频纠错片数加N。
在一个实施例中，请参阅附图5，其示出了本申请一个实施例提供的一种验证视频文件方法的流程示意图，所述方法包括：
S501，接收缓存索引文件、缓存数据文件、视频文件的寻址地址和文件大小；
S502，根据视频纠错片的分片序号以N+M长度为一分组，每组根据缓存索引文件与缓存数据文件取出N个视频纠错片的数据；
S503，把N个视频纠错片依次取出一个字节，生成纠错码向量C1，使用ReedSolomon算法的编码矩阵B进行逆向运算得到原始输入向量D；
S504，遍历视频文件的所有分片数据，进行国密SM3的哈希处理，得到256比特哈希值，将256比特哈希值与寻址地址比较，如果相同则视频文件的数据完整。
在一个实施例中，遍历视频文件的分片数据确定完整后，对视频文件进行展示。
请参阅附图6，其示出了本申请一个实施例提供的一种分布式视频存储装置的结构示意图，所述装置包括：
第一接收单元601，用于接收第一设备发送的视频文件；
第一获取单元602，用于获取所述视频文件的256比特哈希值作为所述视频文件的寻址地址；
第一切分单元603，用于将所述视频文件定长切分获得多个第一视频分片，将所述多个第一视频分片数据按照时序从0开始编号；
第一生成单元604，用于所述多个第一视频分片使用N+M冗余度生成M个视频纠错码；
第一分组单元605，用于根据所述多个第一视频分片的编号按照第一长度进行分组获得N个第二视频分片；
第一运算单元606，用于从所述N个第二视频分片中依次取出一个字节作为N个输入向量D与编码矩阵B进行矩阵运算获得N+M个纠错码向量C，其中，所述编码矩阵B为非零值(N+M)*N整数矩阵；
第二获取单元607，用于将所述N+M个纠错码向量C依次放入N+M个视频纠错片中获得N+M块视频纠错块；
第一发送单元608，用于将所述N+M块视频纠错块发送给N+M个第一设备进行存储。
请参阅附图7，其示出了本申请一个实施例提供的一种电子设备的结构示意图，可以包括：至少一个网络接口702、存储器703和至少一个处理器701。电子设备中的各个组件通过总线系统704耦合在一起。可以理解，总线系统304用于实现这些组件之间的连接通信。总线系统704除包括数据总线之外，还包括电源总线、控制总线和状态信号总线，但是为了清楚说明起见，在附图7中将各种总线都标为总线系统704。
在一些实施方式中，存储器703存储了如下的元素，可执行模块或者数据结构，或者他们的子集，或者他们的扩展集：操作系统7031和应用程序7032。
其中，操作系统7031，包含各种系统程序，例如框架层、核心库层、驱动层等，用于实现各种寄出业务以及处理基于硬件的任务。应用程序7032，包含各种应用程序，例如媒体播放器（Media Player）、浏览器（Browser）等，用于实现各种应用业务。实现本申请实施例方法的程序可以包含在应用程序中。
在上述实施例中，电子设备还包括：存储在存储器703上的至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或指令集可由处理器701执行实现本申请实施例中所述任一分布式视频存储方法的步骤。
在一个实施例中，本申请还提供了一种计算机可读存储介质，计算机可读存储介质中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或指令集由处理器执行时实现本申请实施例中所述任一分布式视频存储方法的步骤。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的至少一条指令、至少一段程序、代码集或指令集可存储于一非易失性计算机可读取存储介质中，所述的至少一条指令、至少一段程序、代码集或指令集在执行时，可实现本申请实施例中所述任一地图绘制方法的步骤。其中，本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
上面结合附图对本申请的实施例进行了描述，但是本申请并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的；同时，对于本领域的一般技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，这些均属于本申请的保护范围之内。
Claims (11)
1.一种分布式视频存储方法，其特征是，所述方法包括：
接收第一设备发送的视频文件；
获取所述视频文件的256比特哈希值作为所述视频文件的寻址地址；
将所述视频文件定长切分获得多个第一视频分片，将所述多个第一视频分片
数据按照时序从0开始编号；
所述多个第一视频分片使用N+M冗余度生成M个视频纠错码；
根据所述多个第一视频分片的编号按照第一长度进行分组获得N个第二视频分片；
从所述N个第二视频分片中依次取出一个字节作为N个输入向量D与编码矩阵B进行矩阵运算获得N+M个纠错码向量C，其中，所述编码矩阵B为非零值(N+M)*N整数矩阵；
将所述N+M个纠错码向量C依次放入N+M个视频纠错片中获得N+M块视频纠错块；
将所述N+M块视频纠错块发送给N+M个第一设备进行存储。
2.根据权利要求1所述的一种分布式视频存储方法，其特征是，所述方法还包括：
接收所述视频文件的寻址地址、文件大小；
获取每个所述第一设备的空闲存储块数量；
选择在线且空闲存储块数量最高的所述第一设备作为所述视频文件的存储客户端且绑定所述视频文件的寻址地址。
3.根据权利要求2所述的一种分布式视频存储方法，其特征是，将所述N+M块视频纠错块发送给N+M个第一设备进行存储包括：
向所有在线的所述第一设备发送网络延时探测，选择网络延时最小的N+M个第一设备作为存储设备清单，将所述N+M块视频纠错块发送给N+M个第一设备进行存储。
4.根据权利要求3所述的一种分布式视频存储方法，其特征是，所述方法还包括：
根据所述第二视频分片大小对每一所述第一设备的存储空间进行文件格式化，生成所述第二视频分片大小整数倍的多个文件存储块；
将排序前2的所述文件存储块作为文件索引块，其中，所述文件索引块用于保存所述视频文件的寻址地址、所述N+M个视频纠错片的N+M个分片编号、所述多个文件存储块的编号以及空闲的文件存储块数量；
将所述N+M个视频纠错片保存至空闲的文件存储块中，并将所述文件存储块的编号和所述视频文件的寻址地址写入文件索引块中。
5.根据权利要求4所述的一种分布式视频存储方法，其特征是，所述方法还包括：
创建缓存指令，所述缓存指令携带参数文件大小与寻址地址；
根据所述视频文件的寻址地址获取存储所述视频文件的第一设备清单；
获取所述视频文件在任一第一设备中的所述N+M个视频纠错片的分片编号清单；
获取所述视频文件在存储客户端中的所述N+M个视频纠错片的分片编号清单；
向所有存储客户端和所有第一设备发起网络延时探测，根据网络延时从小到大获得候选设备清单；
对所述N+M个视频纠错片按照N+M长度进行分组，对每一个视频纠错片分组，根据候选设备清单的顺序判断候选设备是否包含该分组的分片编号，如果有，下载该视频纠错片，并携带视频文件的寻址地址，视频纠错片的分片编号以及下载网络地址与端口。
6.根据权利要求5所述的一种分布式视频存储方法，其特征是，所述方法还包括：
接收所述缓存指令，根据寻址地址创建缓存索引文件与缓存数据文件；
通过所述参数文件大小计算出视频纠错片数，将所述参数文件大小除以N*分
片大小得到视频纠错片数，所述参数文件大小除以N*分片大小取余得到余数，如果余数非零，视频纠错片数加N。
7.根据权利要求6所述的一种分布式视频存储方法，其特征是，对每一个视频纠错片分组下载N个视频纠错片，将每一视频纠错片的数据存放至对应的分组缓存块中，更新缓存索引文件。
8.根据权利要求6所述的一种分布式视频存储方法，其特征是，所述方法还包括：
接收缓存索引文件、缓存数据文件、视频文件的寻址地址和文件大小；
根据视频纠错片的分片序号以N+M长度为一分组，每组根据缓存索引文件与缓存数据文件取出N个视频纠错片的数据；
把N个视频纠错片依次取出一个字节，生成纠错码向量C1，使用ReedSolomon
算法的编码矩阵B进行逆向运算得到原始输入向量D；
遍历视频文件的所有分片数据，进行国密SM3的哈希处理，得到256比特哈希值，将256比特哈希值与寻址地址比较，如果相同则视频文件的数据完整。
9.一种分布式视频存储装置，其特征是，所述装置包括：
第一接收单元，用于接收第一设备发送的视频文件；
第一获取单元，用于获取所述视频文件的256比特哈希值作为所述视频文件的寻址地址；
第一切分单元，用于将所述视频文件定长切分获得多个第一视频分片，将所述多个第一视频分片数据按照时序从0开始编号；
第一生成单元，用于所述多个第一视频分片使用N+M冗余度生成M个视频纠错码；
第一分组单元，用于根据所述多个第一视频分片的编号按照第一长度进行分组获得N个第二视频分片；
第一运算单元，用于从所述N个第二视频分片中依次取出一个字节作为N个输入向量D与编码矩阵B进行矩阵运算获得N+M个纠错码向量C，其中，所述编码矩阵B为非零值(N+M)*N整数矩阵；
第二获取单元，用于将所述N+M个纠错码向量C依次放入N+M个视频纠错片中获得N+M块视频纠错块；
第一发送单元，用于将所述N+M块视频纠错块发送给N+M个第一设备进行存储。
10.一种电子设备，其特征是，所述电子设备包括处理器和存储器，所述存储器中存储有至少一条指令、至少一段程序、待码集或指令集，所述至少一条指令、所述至少一段程序、所述待码集或指令集由所述处理器执行以实现如权利要求1-8任一项权利要求所述的分布式视频存储方法。
11.一种计算机可读存储介质，其特征是，所述计算机可读存储介质中存储有至少一条指令、至少一段程序、待码集或指令集，所述至少一条指令、所述至少一段程序、所述待码集或指令集由处理器执行以实现如权利要求1-8任一项权利要求所述的分布式视频存储方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110525284.6A CN113259689A (zh) | 2021-05-10 | 2021-05-10 | 一种分布式视频存储方法、装置及电子设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110525284.6A CN113259689A (zh) | 2021-05-10 | 2021-05-10 | 一种分布式视频存储方法、装置及电子设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113259689A true CN113259689A (zh) | 2021-08-13 |
Family
ID=77181890
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110525284.6A Pending CN113259689A (zh) | 2021-05-10 | 2021-05-10 | 一种分布式视频存储方法、装置及电子设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113259689A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115061640A (zh) * | 2022-08-11 | 2022-09-16 | 深圳云豹智能有限公司 | 一种容错分布存储系统、方法、电子设备及介质 |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101419828A (zh) * | 2008-11-20 | 2009-04-29 | 杭州海康威视数字技术股份有限公司 | 一种模拟磁带串行模式的硬盘视频记录及检索方法 |
| US20120078931A1 (en) * | 2010-09-29 | 2012-03-29 | International Business Machines Corporation | Methods for managing ownership of redundant data and systems thereof |
| CN103354097A (zh) * | 2013-07-03 | 2013-10-16 | 深圳市华威世纪科技股份有限公司 | 基于磁盘的视频数据存储方法和系统 |
| CN105338035A (zh) * | 2014-08-07 | 2016-02-17 | 苏宁云商集团股份有限公司 | 基于rs纠删码的安全存储方法和装置 |
| CN109542842A (zh) * | 2018-11-02 | 2019-03-29 | 安徽创世科技股份有限公司 | 一种兼容fat32文件系统的视频顺序存储和查询方法及其装置 |
| CN110826461A (zh) * | 2019-10-31 | 2020-02-21 | 深圳市网心科技有限公司 | 视频内容识别方法、装置、电子设备及存储介质 |
| CN111240597A (zh) * | 2020-01-15 | 2020-06-05 | 书生星际(北京)科技有限公司 | 存储数据的方法、装置、设备和计算机可读存储介质 |
-
2021
- 2021-05-10 CN CN202110525284.6A patent/CN113259689A/zh active Pending
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101419828A (zh) * | 2008-11-20 | 2009-04-29 | 杭州海康威视数字技术股份有限公司 | 一种模拟磁带串行模式的硬盘视频记录及检索方法 |
| US20120078931A1 (en) * | 2010-09-29 | 2012-03-29 | International Business Machines Corporation | Methods for managing ownership of redundant data and systems thereof |
| CN103354097A (zh) * | 2013-07-03 | 2013-10-16 | 深圳市华威世纪科技股份有限公司 | 基于磁盘的视频数据存储方法和系统 |
| CN105338035A (zh) * | 2014-08-07 | 2016-02-17 | 苏宁云商集团股份有限公司 | 基于rs纠删码的安全存储方法和装置 |
| CN109542842A (zh) * | 2018-11-02 | 2019-03-29 | 安徽创世科技股份有限公司 | 一种兼容fat32文件系统的视频顺序存储和查询方法及其装置 |
| CN110826461A (zh) * | 2019-10-31 | 2020-02-21 | 深圳市网心科技有限公司 | 视频内容识别方法、装置、电子设备及存储介质 |
| CN111240597A (zh) * | 2020-01-15 | 2020-06-05 | 书生星际(北京)科技有限公司 | 存储数据的方法、装置、设备和计算机可读存储介质 |
Non-Patent Citations (3)
| Title |
|---|
| IPFSKING: "分布式存储之纠删码", 《CSDN博客》 * |
| 中国计算机用户协会（政务信息化分会）赵进延: "《数字政府 服务社会》", 31 December 2019, 北京：知识产权出版社 * |
| 折纸鹤: "RS纠删码原理", 《CSDN博客》 * |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115061640A (zh) * | 2022-08-11 | 2022-09-16 | 深圳云豹智能有限公司 | 一种容错分布存储系统、方法、电子设备及介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US9337871B2 (en) | Method and apparatus for processing data | |
| US10270468B2 (en) | Method for file updating and version control for linear erasure coded and network coded storage | |
| WO2017193716A1 (zh) | 一种极化码的编码和速率匹配方法、装置及设备 | |
| CN111262876B (zh) | 基于区块链的数据处理方法、装置、设备以及存储介质 | |
| CN105740088B (zh) | 闪存数据纠错方法及装置 | |
| US11342945B2 (en) | Method and apparatus for processing rate matching of polar codes | |
| US20070022225A1 (en) | Memory DMA interface with checksum | |
| AU2018328362A1 (en) | Encoding method and apparatus | |
| CN105743610A (zh) | 用于多网络分组操作的数据完整性的技术 | |
| CN113541856A (zh) | 数据恢复方法及装置 | |
| CN113259689A (zh) | 一种分布式视频存储方法、装置及电子设备 | |
| CN113242109A (zh) | 用于校验报文数据的方法、装置和设备 | |
| CN106293542B (zh) | 一种文件解压缩的方法及装置 | |
| CN110704232B (zh) | 一种分布式系统中失效节点的修复方法、装置和设备 | |
| CN113055455A (zh) | 文件上传方法及设备 | |
| CN102685810B (zh) | 一种用于用户信息动态缓存的方法及系统 | |
| CN113037295A (zh) | 一种ldpc码基础矩阵剪裁方法及装置 | |
| CN111355793A (zh) | 一种基于HTML5和Python的大文件上传方法 | |
| CN107395772B (zh) | 一种重复数据的管理方法及管理系统 | |
| CN113518113B (zh) | 一种基于区块链和里德-所罗门码的文件存储方法、计算机设备及存储介质 | |
| EP2621121A2 (en) | Supercharged codes | |
| CN111061682B (zh) | 一种数据缓存方法、读取方法、电子设备及存储介质 | |
| CN112688905B (zh) | 数据传输方法、装置、客户端、服务器及存储介质 | |
| CN113612579A (zh) | 基于qc_ldpc码的数据处理方法、通信装置、设备和存储介质 | |
| CN113900990A (zh) | 文件分片存储方法、装置、设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210813 |
|
| RJ01 | Rejection of invention patent application after publication |