CN109412755B - 一种多媒体数据处理方法、装置及存储介质 - Google Patents

一种多媒体数据处理方法、装置及存储介质 Download PDF

Info

Publication number
CN109412755B
CN109412755B CN201811307753.1A CN201811307753A CN109412755B CN 109412755 B CN109412755 B CN 109412755B CN 201811307753 A CN201811307753 A CN 201811307753A CN 109412755 B CN109412755 B CN 109412755B
Authority
CN
China
Prior art keywords
target
data
original
multimedia data
storage medium
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811307753.1A
Other languages
English (en)
Other versions
CN109412755A (zh
Inventor
张炯奎
余洋洋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Netposa Technologies Ltd
Original Assignee
Netposa Technologies Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Netposa Technologies Ltd filed Critical Netposa Technologies Ltd
Priority to CN201811307753.1A priority Critical patent/CN109412755B/zh
Publication of CN109412755A publication Critical patent/CN109412755A/zh
Application granted granted Critical
Publication of CN109412755B publication Critical patent/CN109412755B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/0001Systems modifying transmission characteristics according to link quality, e.g. power backoff
    • H04L1/0006Systems modifying transmission characteristics according to link quality, e.g. power backoff by adapting the transmission format
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/004Arrangements for detecting or preventing errors in the information received by using forward error control
    • H04L1/0056Systems characterized by the type of code used
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Quality & Reliability (AREA)
  • Multimedia (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本申请提供了一种多媒体数据处理方法、装置及存储介质,涉及数据存储技术领域,包括接收采集终端发送的原始多媒体数据;对原始多媒体数据进行切片处理,得到多个原始切片数据块;任一原始切片数据块的大小均大于原始多媒体数据中任一关键帧图像的大小;基于纠删码EC算法对多个原始切片数据块进行编码,得到冗余数据块;将多个原始切片数据块和冗余数据块写入对应的存储介质。这样,在存储介质中损坏的数据块的数量超过设定阈值的情况下,仍然能够读取未损坏的数据块并播放对应未损坏的数据块对应的多媒体数据,提供了稳定可靠的多媒体数据存储和还原机制,解决了现有技术中由于丢失数据块数量多而导致的原始多媒体数据无法访问及播放的问题。

Description

一种多媒体数据处理方法、装置及存储介质
技术领域
本申请涉及数据存储技术领域,具体而言,涉及一种多媒体数据处理方法、装置及存储介质。
背景技术
视频监控系统广泛应用于公共场所,视频监控系统在采集到原始视频数据后,将原始视频数据进行存储,以备后续调用查看该原始视频数据。
目前,视频监控系统对原始视频数据进行存储的方法如下:在采集到原始视频数据后,对该原始视频数据进行切片,得到多份原始视频数据块,然后将得到的多份原始视频数据块存储到磁盘中。其中,在上述存储方法中,切片得到的原始视频数据块较小,这样,能够便于对原始视频数据块进行存储和还原过程中的计算处理。
但是,上述视频数据的存储方法,在由于磁盘损坏进而导致该磁盘中损坏的数据块数量超过设定阈值的情况下,无法恢复磁盘中存储的原始视频数据块。由于切分后的原始视频数据块较小,进而导致用户终端无法访问磁盘中的原始视频数据。
发明内容
有鉴于此,本申请实施例的目的在于提供一种多媒体数据处理方法、装置及存储介质,在存储介质中损坏的数据块数量超过设定阈值的情况下,能够读取未损坏的数据块并播放对应的多媒体数据,解决了数据块丢失而导致的原始多媒体数据无法访问并播放的问题。
第一方面,本申请实施例提供了一种多媒体数据处理方法,所述方法包括:
接收采集终端发送的原始多媒体数据;
对所述原始多媒体数据进行切片处理,得到多个原始切片数据块;其中,任一所述原始切片数据块的大小均大于所述原始多媒体数据中任一关键帧图像的大小;
基于纠删码EC算法对所述多个原始切片数据块进行编码,得到冗余数据块;
将所述多个原始切片数据块和所述冗余数据块写入对应的存储介质。
结合第一方面,本申请实施例提供了第一方面的第一种可能的实施方式,其中,所述将所述多个原始切片数据块和所述冗余数据块写入对应的存储介质之后,所述方法还包括:
接收用户终端发送的访问请求,所述访问请求携带有目标原始多媒体数据的标识信息;
根据所述访问请求中的标识信息,从所述存储介质中查找与所述目标原始多媒体数据对应的目标数据块;其中,所述目标数据块包括目标原始切片数据块和目标冗余数据块;
若所述存储介质中损坏的目标数据块的数量大于所述目标数据块中目标冗余数据块的数量,则读取未损坏的目标数据块;其中,未损坏的目标数据块至少包括目标原始切片数据块;
将所述未损坏的目标数据块发送给用户终端,以使所述用户终端播放所述未损坏的目标数据块对应的关键帧图像。
结合第一方面的第一种可能的实施方式,本申请实施例提供了第一方面的第二种可能的实施方式,其中,所述将所述多个原始切片数据块和所述冗余数据块写入对应的存储介质之后,所述方法还包括:
若所述存储介质中损坏的目标数据块的数量小于等于所述目标数据块中目标冗余数据块的数量,则读取未损坏的目标数据块;其中,损坏的目标数据块和未损坏的目标数据块均至少包括目标原始切片数据块;
利用EC算法对所述未损坏的目标数据块进行还原处理,得到所述目标原始多媒体数据对应的目标原始切片数据块;
对所述目标原始切片数据块进行重构,得到所述目标原始多媒体数据;
将所述目标原始多媒体数据发送给用户终端,以使所述用户终端播放所述目标原始多媒体数据。
结合第一方面的第一种可能的实施方式,本申请实施例提供了第一方面的第三种可能的实施方式,其中,所述将所述多个原始切片数据块和所述冗余数据块写入对应的存储介质之后,所述方法还包括:
若所述存储介质中损坏的目标数据块均为目标冗余数据块,则读取未损坏的目标原始切片数据块;
对所述目标原始切片数据块进行重构,得到所述目标原始多媒体数据;
将所述目标原始多媒体数据发送给用户终端,以使所述用户终端播放所述目标原始多媒体数据。
结合第一方面的第二种可能的实施方式,本申请实施例提供了第一方面的第四种可能的实施方式,其中,所述将所述多个原始切片数据块和所述冗余数据块写入对应的存储介质之后,所述方法还包括:
若所述存储介质中不存在损坏的目标数据块,则读取所述存储介质中的目标原始切片数据块;
对所述目标原始切片数据块进行重构,得到所述目标原始多媒体数据;
将所述目标原始多媒体数据发送给用户终端,以使所述用户终端播放所述目标原始多媒体数据。
结合第一方面,本申请实施例提供了第一方面的第五种可能的实施方式,其中,所述将所述多个原始切片数据块和所述冗余数据块写入对应的存储介质之后,所述方法还包括:
接收采集终端发送的新多媒体数据;
为所述新多媒体数据分配对应的目标存储介质;
将所述新多媒体数据写入分配的所述目标存储介质。
结合第一方面的第五种可能的实施方式,本申请实施例提供了第一方面的第六种可能的实施方式,其中,所述为所述新多媒体数据分配对应的目标存储介质之后,所述方法还包括:
若分配的所述目标存储介质故障,则从除故障的所述目标存储介质之外的其他运行正常的存储介质中,选择所述新多媒体数据对应的临时存储介质;
将所述新多媒体数据写入所述临时存储介质;
若所述目标存储介质恢复正常,则将所述新多媒体数据迁移到恢复正常的所述目标存储介质中。
第二方面,本申请实施例还提供了一种多媒体数据处理装置,包括:
接收模块,用于接收采集终端发送的原始多媒体数据;
切片模块,用于对所述原始多媒体数据进行切片处理,得到多个原始切片数据块;其中,任一所述原始切片数据块的大小均大于所述原始多媒体数据中任一关键帧图像的大小;
编码模块,用于基于纠删码EC算法对所述多个原始切片数据块进行编码,得到冗余数据块;
存储模块,用于将所述多个原始切片数据块和所述冗余数据块写入对应的存储介质。
结合第二方面,本申请实施例提供了第二方面的第一种可能的实施方式,其中,所述装置还包括:
接收模块,用于接收用户终端发送的访问请求,所述访问请求携带有目标原始多媒体数据的标识信息;
查找模块,用于根据所述访问请求中的标识信息,从所述存储介质中查找与所述目标原始多媒体数据对应的目标数据块;其中,所述目标数据块包括目标原始切片数据块和目标冗余数据块;
读取模块,用于在所述存储介质中损坏的目标数据块的数量大于所述目标数据块中目标冗余数据块的数量时,读取未损坏的目标数据块;其中,未损坏的目标数据块至少包括目标原始切片数据块;
发送模块,用于将所述未损坏的目标数据块发送给用户终端,以使所述用户终端播放所述未损坏的目标数据块对应的关键帧图像。
第三方面,本申请实施例还提供了一种计算机存储介质,所述计算机存储介质存储有计算机可执行指令,该计算机可执行指令可执行第一方面任一项所述的多媒体数据处理方法。
本申请实施例提供的一种多媒体数据处理方法、装置及存储介质,采用对接收到的原始多媒体数据进行切片处理,切片后的每一个原始切片数据块的大小均大于原始多媒体数据中任一关键帧图像的大小,然后,基于纠删码EC算法对切片后的原始切片数据块进行编码,得到冗余数据块;最后,将多个原始切片数据块和冗余数据块写入对应的存储介质中。这样,在存储介质中损坏的数据块的数量超过设定阈值的情况下,仍然能够读取未损坏的数据块并播放对应未损坏的数据块对应的多媒体数据,提供了稳定可靠的多媒体数据存储和还原机制,解决了现有技术中由于丢失数据块数量多而导致的原始多媒体数据无法访问及播放的问题。
为使本申请的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本申请的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1示出了本申请实施例所提供的一种多媒体数据处理系统的结构示意图。
图2示出了本申请实施例所提供的一种多媒体数据处理方法的流程图。
图3示出了本申请实施例所提供的另一种多媒体数据处理方法的流程图。
图4示出了本申请实施例所提供的另一种多媒体数据处理方法的流程图。
图5示出了本申请实施例所提供的另一种多媒体数据处理方法的流程图。
图6示出了本申请实施例所提供的另一种多媒体数据处理方法的流程图。
图7示出了本申请实施例所提供的另一种多媒体数据处理方法的流程图。
图8示出了本申请实施例所提供的另一种多媒体数据处理方法的流程图。
图9示出了本申请实施例所提供的多媒体数据存储过程的结构图。
图10示出了本申请实施例所提供的M(以M为3为例进行说明)以内硬盘故障数据恢复的结构图。
图11示出了本申请实施例所提供的切片大小小于I帧大小的结构图。
图12示出了本申请实施例所提供的切片大小大于I帧大小的结构图。
图13示出了本申请实施例所提供的调大图12中的切片大小的结构图。
图14示出了本申请实施例所提供的一种多媒体数据处理装置的结构示意图。
图15示出了本申请一实施例所提供的计算机设备40的结构示意图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围,而是仅仅表示本申请的选定实施例。基于本申请的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本申请保护的范围。
图1示出了本申请实施例提供的多媒体数据处理系统的结构示意图。如图1所示,上述多媒体数据处理系统包括:采集终端21、服务器集群和用户终端23;其中,服务器集群包括多台服务器22;上述采集终端21和用户终端23均能够与服务器集群中的服务器22进行通信。上述采集终端用于采集原始多媒体数据,并将原始多媒体数据发送给服务器集群中的服务器22,由服务器22存储上述原始多媒体数据。当用户终端23想要访问原始多媒体数据时,用户终端23向服务器22发送目标原始多媒体数据的访问请求,服务器22在接收到访问请求后,从存储的原始多媒体数据中查找用户终端23请求的目标原始多媒体数据,然后,将目标原始多媒体数据返回给用户终端23,以便用户终端23播放目标原始多媒体数据。
其中,上述采集终端21和用户终端23可以为智能手机、平板电脑、个人计算机(personal computer,PC)等电子设备。
下面基于上述结合实施例对本申请实施例提供的一种多媒体数据处理方法、装置及存储介质进行说明。
如图2所示,本申请实施例提供的一种多媒体数据处理方法,应用于服务器集群中的服务器,所述方法包括:
S101、接收采集终端发送的原始多媒体数据。
作为一种可选的实施方式,采集终端为摄像机,摄像机安装在公共场所,摄像机实时采集公共场所的原始多媒体数据,并将采集的原始多媒体数据发送给服务器。其中,原始多媒体数据携带有标识信息。这里,标识信息包括但不限于以下信息中的一种或多种:公共场所名称、原始多媒体数据名称和时间信息等。
S102、对所述原始多媒体数据进行切片处理,得到多个原始切片数据块;其中,任一所述原始切片数据块的大小均大于所述原始多媒体数据中任一关键帧图像的大小。
本申请实施例中,服务器中设置有分片算法,服务器在接收到原始多媒体数据后,按基于上述分片算法将原始多媒体数据分成大小相等的K份(d1,d2,…,dk)原始切片数据。其中,分片算法是按照预设切片大小对原始多媒体数据进行分片。这里,上述预设切片大小大于原始多媒体数据中任一关键帧图像的大小。
实际中,原始多媒体数据中不同的关键帧图像的大小是不同的,上述关键帧图像的大小对应一个范围,上述预设切片大小大于上述范围的最大值。作为一种可选的实施方式,上述预设切片大小是关键帧的2倍~15倍,比如,为关键帧的10倍。
S103、基于纠删码EC算法对所述多个原始切片数据块进行编码,得到冗余数据块。
本申请实施例中,服务器基于上述K份原始切片数据,利用纠删码(erasurecoding,EC)算法对K份(d1,d2,…,dk)原始切片数据进行编码,得到M份冗余数据(dk+1,dk+2,…,dk+m);其中,M<=(K+1)/2。
通过计算上述多个原始切片数据的冗余数据块,可以保证在原始切片数据损坏数量较少时,利用冗余数据块使损坏的原始切片数据得以恢复,从而保障了原始多媒体数据的安全性和存储的可靠性。这里,损坏数量较少指的是损坏数量小于冗余数据块的数量。
S104、将所述多个原始切片数据块和所述冗余数据块写入对应的存储介质。
本申请实施例中,服务器将原始多媒体数据对应的原始切片数据块、冗余数据和标识信息均写入对应的存储介质中。其中,上述存储介质是预先分配好的。
作为一种具体实施方式,服务器将K份原始切片数据和M份冗余数据均写入到目标存储介质中。其中,上述存储介质可以为磁盘、磁盘阵列(Redundant Arrays ofIndependent Drives,RAID)、存储节点或者其它地理位置。其中,图3示出了通过EC算法进行原始切片数据块的视频存储的应用。
本申请实施例提供的一种多媒体数据处理方法,采用对接收到的原始多媒体数据进行切片处理,切片后的每一个原始切片数据块的大小均大于原始多媒体数据中任一关键帧图像的大小,然后,基于纠删码EC算法对切片后的原始切片数据块进行编码,得到冗余数据块;最后,将多个原始切片数据块和冗余数据块写入对应的存储介质中。这样,在存储介质中损坏的数据块的数量超过设定阈值的情况下,仍然能够读取未损坏的数据块并播放对应未损坏的数据块对应的多媒体数据,提供了稳定可靠的多媒体数据存储和还原机制,解决了现有技术中由于丢失数据块数量多而导致的原始多媒体数据无法访问及播放的问题。
进一步的,如图3所示,本申请实施例提供的多媒体数据处理方法中,步骤104之后,所述将所述多个原始切片数据块和所述冗余数据块写入对应的存储介质之后,所述方法还包括:
S201、接收用户终端发送的访问请求,所述访问请求携带有目标原始多媒体数据的标识信息。
本申请实施例中,目标原始切片数据块的标识信息包括但不限于以下信息中的一种或多种:公共场所名称、原始多媒体数据名称和时间信息等。
S202、根据所述访问请求中的标识信息,从所述存储介质中查找与所述目标原始多媒体数据对应的目标数据块;其中,所述目标数据块包括目标原始切片数据块和目标冗余数据块。
本申请实施例中,服务器在接收到访问请求后,提取访问请求中的标识信息,并从存储介质中查找与该标识信息标识的目标原始多媒体数据对应的目标数据块。
S203、若所述存储介质中损坏的目标数据块的数量大于所述目标数据块中目标冗余数据块的数量,则读取未损坏的目标数据块;其中,未损坏的目标数据块至少包括目标原始切片数据块。
其中,服务器在存储介质中查找到目标数据块后,读取目标数据块,若检测到存在损坏的目标数据块,则判断损坏的目标数据块的数量是否超过该目标数据块包括的目标冗余数据块的数量,若是,则读取未损坏的目标数据块。
其中,上述损坏的目标数据块至少包括目标原始切片数据块。对应的,在一种情况下,损坏的目标数据块只包括目标原始切片数据块;在另一种情况下,损坏的目标数据块同时包括目标原始切片数据块和目标冗余数据块。
这里,未损坏的目标数据块至少包括目标原始切片数据块,这样,服务器在将目标数据块发送给用户终端,用户终端才能解析并播放目标原始切片数据块对应的原始多媒体数据的关键帧图像。
S204、将所述未损坏的目标数据块发送给用户终端,以使所述用户终端播放所述未损坏的目标数据块对应的关键帧图像。
本申请实施例中,用户终端在接收到未损坏的目标数据块时,提取未损坏的目标数据块中的目标原始切片数据块,读取目标原始切片数据块,并播放目标原始切片数据块对应的关键帧图像。
进一步的,如图4所示,本申请实施例提供的多媒体数据处理方法中,步骤104,所述将所述多个原始切片数据块和所述冗余数据块写入对应的存储介质之后,所述方法还包括:
S301、若所述存储介质中损坏的目标数据块的数量小于等于所述目标数据块中目标冗余数据块的数量,则读取未损坏的目标数据块;其中,损坏的目标数据块和未损坏的目标数据块均至少包括目标原始切片数据块;
其中,服务器在存储介质中查找到目标数据块后,读取目标数据块,若检测到存在损坏的目标数据块,则判断损坏的目标数据块的数量是否超过该目标数据块包括的目标冗余数据块的数量,若否,则读取未损坏的目标数据块。
作为第一种具体实施方式,损坏的目标数据块只包括目标原始切片数据块。作为第二种具体实施方式,损坏的目标数据块只包括目标冗余数据块。作为第三种具体实施方式,损坏的目标数据块同时包括目标原始切片数据块和目标冗余数据块。
这里,设置了冗余数据的数量M<=(原始切片数据数量K+1)/2,因此,在损坏的目标数据块的数量小于等于该目标数据块包括的目标冗余数据块的数量时,使得未损坏的目标数据块至少包括目标原始切片数据块。
S302、利用EC算法对所述未损坏的目标数据块进行还原处理,得到所述目标原始多媒体数据对应的目标原始切片数据块。
本申请实施例中,利用EC算法对未损坏的目标数据块进行还原处理,能够还原出目标原始多媒体数据对应的目标原始切片数据块。
S303、对所述目标原始切片数据块进行重构,得到所述目标原始多媒体数据。
本申请实施例中,服务器在还原出来目标原始切片数据块之后,通过对应的重构算法对目标原始切片数据块进行恢复,得到目标原始多媒体数据。
S304、将所述目标原始多媒体数据发送给用户终端,以使所述用户终端播放所述目标原始多媒体数据。
本申请实施例中,用户终端在接收到目标原始多媒体数据后,对目标原始多媒体数据进行解码,并播放对应的目标原始多媒体数据。
进一步的,如图5所示,本申请实施例提供的多媒体数据处理方法中,步骤104,所述将所述多个原始切片数据块和所述冗余数据块写入对应的存储介质之后,所述方法还包括:
S401、若所述存储介质中损坏的目标数据块均为目标冗余数据块,则读取未损坏的目标原始切片数据块。
本申请实施例中,若所述存储介质中损坏的目标数据块均为目标冗余数据块,而没有目标原始切片数据块损坏,在这种情况下,对应,存储介质中损坏的目标数据块的数量小于等于所述目标数据块中目标冗余数据块的数量,此时,服务器读取未损坏的目标原始切片数据块。
S402、对所述目标原始切片数据块进行重构,得到所述目标原始多媒体数据。
本申请实施例中,服务器在还原出来目标原始切片数据块之后,通过对应的重构算法对目标原始切片数据块进行恢复,得到目标原始多媒体数据。
S403、将所述目标原始多媒体数据发送给用户终端,以使所述用户终端播放所述目标原始多媒体数据。
本申请实施例中,用户终端在接收到目标原始多媒体数据后,播放对应的目标原始多媒体数据。
进一步的,如图6所示,本申请实施例提供的多媒体数据处理方法中,步骤104,所述将所述多个原始切片数据块和所述冗余数据块写入对应的存储介质之后,所述方法还包括:
S501、若所述存储介质中不存在损坏的目标数据块,则读取所述存储介质中的目标原始切片数据块。
S502、对所述目标原始切片数据块进行重构,得到所述目标原始多媒体数据。
S503、将所述目标原始多媒体数据发送给用户终端,以使所述用户终端播放所述目标原始多媒体数据。
结合步骤501至步骤503,服务器在确定若存储介质中不存在损坏的目标数据块时,读取未损坏的目标原始切片数据块。通过对应的重构算法对目标原始切片数据块进行恢复,得到目标原始多媒体数据,并发送给用户终端,用户终端在接收到目标原始多媒体数据后,播放对应的目标原始多媒体数据。
进一步的,如图7所示,本申请实施例提供的多媒体数据处理方法中,步骤104,所述将所述多个原始切片数据块和所述冗余数据块写入对应的存储介质之后,所述方法还包括:
S601、接收采集终端发送的新多媒体数据。
本申请实施例中,采集终端为摄像机,摄像机安装在公共场所,摄像机实时采集公共场所的新多媒体数据,并将采集的新多媒体数据发送给服务器。其中,新多媒体数据携带有标识信息。这里,标识信息包括但不限于以下信息中的一种或多种:公共场所名称、原始多媒体数据名称和时间信息等。
S602、为所述新多媒体数据分配对应的目标存储介质。
本申请实施例中,为新多媒体数据分配的目标存储介质是用户预先为新多媒体数据分配好的。
S603、将所述新多媒体数据写入分配的所述目标存储介质。
进一步的,如图8所示,本申请实施例提供的多媒体数据处理方法中,步骤104,所述为所述新多媒体数据分配对应的目标存储介质之后,所述方法还包括:
S701、若分配的所述目标存储介质故障,则从除故障的所述目标存储介质之外的其他运行正常的存储介质中,选择所述新多媒体数据对应的临时存储介质。
这里,服务器获取除故障的所述目标存储介质之外的其他运行正常的存储介质的资源占用信息,然后,根据上述存储介质的资源占用信息,从上述存储介质中选择资源占用最小的目标存储介质作为所述新多媒体数据对应的临时存储介质。
S702、将所述新多媒体数据写入所述临时存储介质。
S703、若所述目标存储介质恢复正常,则将所述新多媒体数据迁移到恢复正常的所述目标存储介质。
通过上述方式,保证了在目标存储介质故障时,新多媒体数据能够继续存储,同时,在目标存储介质恢复正常时,将新多媒体数据迁移到恢复正常的目标存储介质中,这样,数据存储的均衡分配。
本申请实施例结合多媒体数据的格式和特点,实现了EC技术在多媒体数据处理应用时,即使一个原始多媒体数据的EC组失效(即一个损坏的目标数据块的数量大于所述目标数据块中目标冗余数据块的数量),依然能够得到未损坏数据元素上的视频数据,并且支持部分存储介质损坏数据持续存储。
图9示出了本申请实施例提供的多媒体数据处理方法,服务器在接收到原始切片数据后,将原始多媒体数据分成大小相等的K份(d1,d2,…,dk)原始切片数据。其中,任一所述原始切片数据块的大小均大于原始多媒体数据中任一关键帧图像的大小,然后,利用纠删码(erasure coding,EC)算法对K份(d1,d2,…,dk)原始切片数据进行编码,得到M份冗余数据(dk+1,dk+2,…,dk+m),然后将切片数据和冗余数据存储到对应的存储介质中(比如磁盘、存储节点或者其它地理位置),其原理图7所示。
一个EC组内任意M块以内数据(包含原始切片数据和冗余数据块)损坏时,如图10所示,假如损坏了d2、dk和dk+2这三份数据(此处假设M大于3),可根据剩余的有效数据,利用对应的EC算法恢复完整的K份切片数据,然后利用对应的重构算法得到原始的视频数据,部分数据损坏的恢复过程是数据存储的逆过程。
在原始多媒体数据处理应用场景下,一个EC组内数据损坏超过M份以上时,仍然可以部分读取原始数据,新数据可持续存储。
因为本申请实施例结合了原始多媒体数据存储的特点而出现的,以原始多媒体数据为视频数据为例,在本申请实施例中,视频数据是利用人眼视觉暂留的原理,通过播放一系列的图片,使人眼产生运动的感觉。单纯传输视频画面,视频量非常大,对现有的网络和存储来说是不可接受的。为了能够使视频便于传输和存储,将视频中大量重复的信息在发送端去掉,在接收端恢复出来,这样就大大减少了视频数据的文件,因此有了H.264视频压缩标准。
在H.264压缩标准中I帧、P帧、B帧用于表示传输的视频画面。
I帧又称帧内编码帧,是一种自带全部信息的独立帧,无需参考其他图像便可独立进行解码,可以简单理解为一张静态画面。视频序列中的第一个帧始终都是I帧,因为它是关键帧。P帧又称帧间预测编码帧,需要参考前面的I帧才能进行编码。表示的是当前帧画面与前一帧(前一帧可能是I帧也可能是P帧)的差别。解码时需要用之前缓存的画面叠加上本帧定义的差别,生成最终画面。与I帧相比,P帧通常占用更少的数据位,但不足是,由于P帧对前面的P和I参考帧有着复杂的依耐性,因此对传输错误非常敏感。
B帧又称双向预测编码帧,也就是B帧记录的是本帧与前后帧的差别。也就是说要解码B帧,不仅要取得之前的缓存画面,还要解码之后的画面,通过前后画面的与本帧数据的叠加取得最终的画面。B帧压缩率高,但是对解码性能要求较高。
视频监控系统中预览的视频画面是实时的,对画面的流畅性要求较高。采用I帧、P帧进行视频传输可以提高网络的适应能力,且能降低解码成本所以现阶段的视频解码都只采用I帧和P帧进行传输。
基于此,在视频解码的时候,只要存在I帧,就可以得到一个完整的画面,如果得到多个连续的I帧,就能拼成一段完整的视频。
本申请实施例中,在一段视频存储的过程中首先会将这段视频分割成K个切片,这K个切片包含了全部的视频数据。当一个EC组内损坏的数据量超过M后,虽然无法得到完整的原始视频,但是还会存在原始视频的部分切片,本申请实施例中,通过调大切片的大小,保证尽可能多的I帧被完整的存储。其原理如下:
假如一段视频产生的都是I帧,那么一段视频中包含多个I帧:I1、I2、I3等,如果切片的大小小于一个I帧的大小,那么每个切片(S1、S2、S3等)都不能包含一个完整的I帧,示例如图11所示。
如果调大切片大小大于一个I帧大小的话,那么切片中就会包含部分完整的I帧,示例如图12所示,I1和I5可完整的存储到切片S1和S4中,当一个EC组失效后,那么可以得到I1和I5等关键帧,从而可以播放部分视频画面。
当继续调大切片的大小,那么落在切片数据上关键帧就会越多,EC组失效后,能够恢复的视频数据也就越多,与上图12对比图13同样是I1到I8这8个关键帧,调大切片大小后,此次有I1、I2、I4、I6、I8等5个完整的关键帧落到切片上,那么EC组失效后,能够恢复的录像就会更多。
如果导致EC组失效的原因为存储介质损坏,那么后续新的数据就无法继续存储此介质中,本申请实施例中,如果指定的存储的数据的介质是损坏的情况下,本申请实施例提出将实际的数据存储在正常的介质中,保证数据可持续存储。
如图14所示,本申请第二实施例提供了一种多媒体数据处理装置,所述装置用于执行多媒体数据的处理方法,所述方法包括:
第一接收模块11,用于接收采集终端发送的原始多媒体数据;
切片模块12,用于对所述原始多媒体数据进行切片处理,得到多个原始切片数据块;其中,任一所述原始切片数据块的大小均大于所述原始多媒体数据中任一关键帧图像的大小;
编码模块13,用于基于纠删码EC算法对所述多个原始切片数据块进行编码,得到冗余数据块;
存储模块14,用于将所述多个原始切片数据块和所述冗余数据块写入对应的存储介质。
进一步的,本申请实施例提供的多媒体数据处理装置中,所述装置还包括:
第二接收模块,用于接收用户终端发送的访问请求,所述访问请求携带有目标原始多媒体数据的标识信息;
查找模块,用于根据所述访问请求中的标识信息,从所述存储介质中查找与所述目标原始多媒体数据对应的目标数据块;其中,所述目标数据块包括目标原始切片数据块和目标冗余数据块;
读取模块,用于在所述存储介质中损坏的目标数据块的数量大于所述目标数据块中目标冗余数据块的数量时,读取未损坏的目标数据块;其中,未损坏的目标数据块至少包括目标原始切片数据块;
发送模块,用于将所述未损坏的目标数据块发送给用户终端,以使所述用户终端播放所述未损坏的目标数据块对应的关键帧图像。
进一步的,本申请实施例提供的多媒体数据处理装置中,所述装置还包括还原模块;
读取模块,还用于在所述存储介质中损坏的目标数据块的数量小于等于所述目标数据块中目标冗余数据块的数量时,读取未损坏的目标数据块;其中,损坏的目标数据块和未损坏的目标数据块均至少包括目标原始切片数据块;
所述还原模块,用于利用EC算法对所述未损坏的目标数据块进行还原处理,得到所述目标原始多媒体数据对应的目标原始切片数据块;
切片重构模块,用于对所述目标原始切片数据块进行重构,得到所述目标原始多媒体数据;
发送模块,还用于将所述目标原始多媒体数据发送给用户终端,以使所述用户终端播放所述目标原始多媒体数据。
进一步的,本申请实施例提供的多媒体数据处理装置中,
读取模块,还用于在所述存储介质中损坏的目标数据块均为目标冗余数据块时,读取未损坏的目标原始切片数据块;
切片重构模块,还用于对所述目标原始切片数据块进行重构,得到所述目标原始多媒体数据;
发送模块,还用于将所述目标原始多媒体数据发送给用户终端,以使所述用户终端播放所述目标原始多媒体数据。
进一步的,本申请实施例提供的多媒体数据处理装置中,
读取模块,还用于在所述存储介质中不存在损坏的目标数据块时,读取所述存储介质中的目标原始切片数据块;
切片重构模块,还用于对所述目标原始切片数据块进行重构,得到所述目标原始多媒体数据;
发送模块,还用于将所述目标原始多媒体数据发送给用户终端,以使所述用户终端播放所述目标原始多媒体数据。
进一步的,本申请实施例提供的多媒体数据处理装置,还包括分配模块;
第三接收模块,还用于接收采集终端发送的新多媒体数据;
分配模块,用于为所述新多媒体数据分配对应的目标存储介质;
所述存储模块,还用于将所述新多媒体数据写入分配的所述目标存储介质。
进一步的,本申请实施例提供的多媒体数据处理装置,所述装置还包括:
选择模块,用于在分配的所述目标存储介质故障时,从除故障的所述目标存储介质之外的其他运行正常的存储介质中,选择所述新多媒体数据对应的临时存储介质;
存储模块,还用于将所述新多媒体数据写入所述临时存储介质;
迁移模块,用于在所述目标存储介质恢复正常时,将所述新多媒体数据迁移到恢复正常的所述目标存储介质中。
本申请实施例提供的一种多媒体数据处理装置,采用对接收到的原始多媒体数据进行切片处理,切片后的每一个原始切片数据块的大小均大于原始多媒体数据中任一关键帧图像的大小,然后,基于纠删码EC算法对切片后的原始切片数据块进行编码,得到冗余数据块;最后,将多个原始切片数据块和冗余数据块写入对应的存储介质中。这样,在存储介质中损坏的数据块的数量超过设定阈值的情况下,仍然能够读取未损坏的数据块并播放对应未损坏的数据块对应的多媒体数据,提供了稳定可靠的多媒体数据存储和还原机制,解决了现有技术中由于丢失数据块数量多而导致的原始多媒体数据无法访问及播放的问题。
图15为本申请一实施例提供的计算机设备40的结构示意图,如图15所示,用于执行多媒体数据处理方法,该设备包括存储器401、处理器402及存储在该存储器401上并可在该处理器402上运行的计算机程序,其中,上述处理器402执行上述计算机程序时实现上述多媒体数据处理方法的步骤。
具体地,上述存储器401和处理器402能够为通用的存储器和处理器,这里不做具体限定,当处理器402运行存储器401存储的计算机程序时,能够执行上述多媒体数据处理方法。
对应于多媒体数据处理方法,本申请实施例还提供了一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行上述多媒体数据处理方法的步骤。
具体地,该存储介质能够为通用的存储介质,如移动磁盘、硬盘等,该存储介质上的计算机程序被运行时,能够执行上述多媒体数据处理方法。
本申请实施例所提供的多媒体数据处理装置可以为设备上的特定硬件或者安装于设备上的软件或固件等。本申请实施例所提供的装置,其实现原理及产生的技术效果和前述方法实施例相同,为简要描述,装置实施例部分未提及之处,可参考前述方法实施例中相应内容。所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,前述描述的系统、装置和单元的具体工作过程,均可以参考上述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的实施例中,应该理解到,所揭露装置和方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请提供的实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释,此外,术语“第一”、“第二”、“第三”等仅用于区分描述,而不能理解为指示或暗示相对重要性。
最后应说明的是:以上所述实施例,仅为本申请的具体实施方式,用以说明本申请的技术方案,而非对其限制,本申请的保护范围并不局限于此,尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化,或者对其中部分技术特征进行等同替换;而这些修改、变化或者替换,并不使相应技术方案的本质脱离本申请实施例技术方案的精神和范围。都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准。

Claims (10)

1.一种多媒体数据处理方法,其特征在于,所述方法包括:
接收采集终端发送的原始多媒体数据;
对所述原始多媒体数据进行切片处理,得到多个原始切片数据块;其中,任一所述原始切片数据块的大小均大于所述原始多媒体数据中任一关键帧图像的大小;
基于纠删码EC算法对所述多个原始切片数据块进行编码,得到冗余数据块;
将所述多个原始切片数据块和所述冗余数据块写入对应的存储介质;
基于用户终端发送的访问请求,从所述存储介质中查找与目标原始多媒体数据对应的目标数据块;其中,所述目标数据块包括目标原始切片数据块和目标冗余数据块;
若所述存储介质中损坏的目标数据块的数量大于所述目标数据块中目标冗余数据块的数量,则读取未损坏的目标数据块;其中,未损坏的目标数据块至少包括目标原始切片数据块;
将所述未损坏的目标数据块发送给用户终端,以使所述用户终端播放所述未损坏的目标数据块对应的关键帧图像。
2.根据权利要求1所述的多媒体数据处理方法,其特征在于,基于用户终端发送的访问请求,从所述存储介质中查找与目标原始多媒体数据对应的目标数据块,包括:
接收用户终端发送的访问请求,所述访问请求携带有目标原始多媒体数据的标识信息;
根据所述访问请求中的标识信息,从所述存储介质中查找与所述目标原始多媒体数据对应的目标数据块。
3.根据权利要求2所述的多媒体数据处理方法,其特征在于,所述将所述多个原始切片数据块和所述冗余数据块写入对应的存储介质之后,所述方法还包括:
若所述存储介质中损坏的目标数据块的数量小于等于所述目标数据块中目标冗余数据块的数量,则读取未损坏的目标数据块;其中,损坏的目标数据块和未损坏的目标数据块均至少包括目标原始切片数据块;
利用EC算法对所述未损坏的目标数据块进行还原处理,得到所述目标原始多媒体数据对应的目标原始切片数据块;
对所述目标原始切片数据块进行重构,得到所述目标原始多媒体数据;
将所述目标原始多媒体数据发送给用户终端,以使所述用户终端播放所述目标原始多媒体数据。
4.根据权利要求2所述的多媒体数据处理方法,其特征在于,所述将所述多个原始切片数据块和所述冗余数据块写入对应的存储介质之后,所述方法还包括:
若所述存储介质中损坏的目标数据块均为目标冗余数据块,则读取未损坏的目标原始切片数据块;
对所述目标原始切片数据块进行重构,得到所述目标原始多媒体数据;
将所述目标原始多媒体数据发送给用户终端,以使所述用户终端播放所述目标原始多媒体数据。
5.根据权利要求2所述的多媒体数据处理方法,其特征在于,所述将所述多个原始切片数据块和所述冗余数据块写入对应的存储介质之后,所述方法还包括:
若所述存储介质中不存在损坏的目标数据块,则读取所述存储介质中的目标原始切片数据块;
对所述目标原始切片数据块进行重构,得到所述目标原始多媒体数据;
将所述目标原始多媒体数据发送给用户终端,以使所述用户终端播放所述目标原始多媒体数据。
6.根据权利要求1所述的多媒体数据处理方法,其特征在于,所述将所述多个原始切片数据块和所述冗余数据块写入对应的存储介质之后,所述方法还包括:
接收采集终端发送的新多媒体数据;
为所述新多媒体数据分配对应的目标存储介质;
将所述新多媒体数据写入分配的所述目标存储介质。
7.根据权利要求6所述的多媒体数据处理方法,其特征在于,所述为所述新多媒体数据分配对应的目标存储介质之后,所述方法还包括:
若分配的所述目标存储介质故障,则从除故障的所述目标存储介质之外的其他运行正常的存储介质中,选择所述新多媒体数据对应的临时存储介质;
将所述新多媒体数据写入所述临时存储介质;
若所述目标存储介质恢复正常,则将所述新多媒体数据迁移到恢复正常的所述目标存储介质中。
8.一种多媒体数据处理装置,其特征在于,包括:
接收模块,用于接收采集终端发送的原始多媒体数据;
切片模块,用于对所述原始多媒体数据进行切片处理,得到多个原始切片数据块;其中,任一所述原始切片数据块的大小均大于所述原始多媒体数据中任一关键帧图像的大小;
编码模块,用于基于纠删码EC算法对所述多个原始切片数据块进行编码,得到冗余数据块;
存储模块,用于将所述多个原始切片数据块和所述冗余数据块写入对应的存储介质;
查找模块,用于基于用户终端发送的访问请求,从所述存储介质中查找与目标原始多媒体数据对应的目标数据块;其中,所述目标数据块包括目标原始切片数据块和目标冗余数据块;
读取模块,用于在所述存储介质中损坏的目标数据块的数量大于所述目标数据块中目标冗余数据块的数量时,读取未损坏的目标数据块;其中,未损坏的目标数据块至少包括目标原始切片数据块;
发送模块,用于将所述未损坏的目标数据块发送给用户终端,以使所述用户终端播放所述未损坏的目标数据块对应的关键帧图像。
9.根据权利要求8所述的多媒体数据处理装置,其特征在于,所述查找模块,还用于:
接收用户终端发送的访问请求,所述访问请求携带有目标原始多媒体数据的标识信息;
根据所述访问请求中的标识信息,从所述存储介质中查找与所述目标原始多媒体数据对应的目标数据块。
10.一种计算机存储介质,其特征在于,所述计算机存储介质存储有计算机可执行指令,该计算机可执行指令可执行权利要求1至7任一项所述的多媒体数据处理方法。
CN201811307753.1A 2018-11-05 2018-11-05 一种多媒体数据处理方法、装置及存储介质 Active CN109412755B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811307753.1A CN109412755B (zh) 2018-11-05 2018-11-05 一种多媒体数据处理方法、装置及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811307753.1A CN109412755B (zh) 2018-11-05 2018-11-05 一种多媒体数据处理方法、装置及存储介质

Publications (2)

Publication Number Publication Date
CN109412755A CN109412755A (zh) 2019-03-01
CN109412755B true CN109412755B (zh) 2021-11-23

Family

ID=65471569

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811307753.1A Active CN109412755B (zh) 2018-11-05 2018-11-05 一种多媒体数据处理方法、装置及存储介质

Country Status (1)

Country Link
CN (1) CN109412755B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111026580A (zh) * 2019-11-29 2020-04-17 浪潮电子信息产业股份有限公司 一种数据读取方法、装置、设备及存储介质
CN111064727B (zh) * 2019-12-18 2022-02-11 电信科学技术第五研究所有限公司 一种帧格式流式信号数据高性能软件解析方法
CN111143580B (zh) * 2019-12-26 2024-04-09 惠州Tcl移动通信有限公司 多媒体数据存储方法、装置、存储介质及电子设备
CN113452480A (zh) * 2021-06-21 2021-09-28 青岛海尔科技有限公司 数据传输方法和装置、数据接收方法和装置
CN114301575B (zh) * 2021-12-21 2024-03-29 阿里巴巴(中国)有限公司 数据处理方法、系统、设备及介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010033644A1 (en) * 2008-09-16 2010-03-25 File System Labs Llc Matrix-based error correction and erasure code methods and apparatus and applications thereof
CN102546755A (zh) * 2011-12-12 2012-07-04 华中科技大学 云存储系统的数据存储方法
CN102801784A (zh) * 2012-07-03 2012-11-28 华为技术有限公司 一种分布式数据存储方法及设备
CN108334419A (zh) * 2017-12-25 2018-07-27 华为技术有限公司 一种数据恢复的方法和装置
CN108631947A (zh) * 2018-05-21 2018-10-09 南京大学 一种基于纠删码的rdma网络数据传输方法
CN108664351A (zh) * 2017-03-31 2018-10-16 杭州海康威视数字技术股份有限公司 一种数据存储、重构、清理方法、装置及数据处理系统

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012014471A1 (ja) * 2010-07-30 2012-02-02 パナソニック株式会社 画像復号化装置、画像復号化方法、画像符号化装置および画像符号化方法
US9063968B2 (en) * 2010-08-02 2015-06-23 Cleversafe, Inc. Identifying a compromised encoded data slice
US9842222B2 (en) * 2010-08-25 2017-12-12 International Business Machines Corporation Securely rebuilding an encoded data slice
CN102662609B (zh) * 2012-04-16 2016-03-30 华为软件技术有限公司 视频访问的方法及装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010033644A1 (en) * 2008-09-16 2010-03-25 File System Labs Llc Matrix-based error correction and erasure code methods and apparatus and applications thereof
CN102546755A (zh) * 2011-12-12 2012-07-04 华中科技大学 云存储系统的数据存储方法
CN102801784A (zh) * 2012-07-03 2012-11-28 华为技术有限公司 一种分布式数据存储方法及设备
CN108664351A (zh) * 2017-03-31 2018-10-16 杭州海康威视数字技术股份有限公司 一种数据存储、重构、清理方法、装置及数据处理系统
CN108334419A (zh) * 2017-12-25 2018-07-27 华为技术有限公司 一种数据恢复的方法和装置
CN108631947A (zh) * 2018-05-21 2018-10-09 南京大学 一种基于纠删码的rdma网络数据传输方法

Also Published As

Publication number Publication date
CN109412755A (zh) 2019-03-01

Similar Documents

Publication Publication Date Title
CN109412755B (zh) 一种多媒体数据处理方法、装置及存储介质
CN105404469B (zh) 一种视频数据的存储方法和系统
CN107885612B (zh) 数据处理方法和系统及装置
EP2908254A1 (en) Data redundancy implementation method and device
US9170884B2 (en) Utilizing cached encoded data slices in a dispersed storage network
US9411690B2 (en) Security surveillance apparatus with networking and video recording functions and failure detecting and repairing method for storage device thereof
US8942543B1 (en) Systems, methods, and software for improved video data recovery effectiveness
US11025965B2 (en) Pre-fetching content among DVRs
US10540240B2 (en) Method and apparatus for data backup in storage system
US10268374B2 (en) Redundant array of independent discs and dispersed storage network system re-director
US10585600B2 (en) Data access method and apparatus
CN112019788B (zh) 数据存储方法、装置、系统及存储介质
CN110389715B (zh) 数据存储方法、存储服务器及云存储系统
CN109672544B (zh) 一种数据处理方法、装置及分布式存储系统
CN109597566B (zh) 一种数据读取、存储方法及装置
US10033930B2 (en) Method of reducing a video file size for surveillance
CN102314322B (zh) 一种基于raid阵列的数据处理方法和设备
CN107885615B (zh) 分布式存储数据的复原方法与系统
US20180365261A1 (en) Fingerprinting data for more aggressive de-duplication
CN111279694A (zh) Gdr码流编码方法、终端设备、机器可读存储介质
US10567509B2 (en) Rebuilding derived content
KR101181445B1 (ko) 네트워크 기반 비디오 레코더의 저장 장치
CN112988461B (zh) 数据备份方法、边缘节点、数据中心及计算机存储介质
US20240244248A1 (en) Encoding and decoding methods, encoder, decoder and storage medium
CN110515761B (zh) 一种数据获取方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
PP01 Preservation of patent right

Effective date of registration: 20220726

Granted publication date: 20211123

PP01 Preservation of patent right