CN112235599B - 一种视频处理方法及系统 - Google Patents
一种视频处理方法及系统 Download PDFInfo
- Publication number
- CN112235599B CN112235599B CN202011098429.0A CN202011098429A CN112235599B CN 112235599 B CN112235599 B CN 112235599B CN 202011098429 A CN202011098429 A CN 202011098429A CN 112235599 B CN112235599 B CN 112235599B
- Authority
- CN
- China
- Prior art keywords
- video
- repeated
- topic
- clip
- duplication
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/232—Content retrieval operation locally within server, e.g. reading video streams from disk arrays
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
- H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8455—Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
Abstract
本申请属于计算机技术领域,具体涉及一种视频处理方法计系统,包括:获取视频专题的预设标签,在媒资库中获取预设标签关联的视频;在视频专题开启检测去重功能时,基于二重特征比对算法,对关联的视频进行检测去重;在应用上展示检测去重后的视频专题。通过本发明不仅可以进行重复视频排重,特征提取后也可以在媒资库新入库视频时,根据当前视频特征,相同的视频可以秒上传,完全重复的视频上传时,只需要将媒资库内的视频文件指针指向上传目录,即可完成秒传,从而节省时间成本较,提高工作效率。
Description
技术领域
本申请属于计算机技术领域,具体涉及一种视频处理方法及系统。
背景技术
大屏短视频应用会聚合多家CP内容,如搜狐,西瓜视频等,不同CP提供的视频会存在相同视频内容,视频内容完全相同,标签相同,只是标题名称不同,在聚合类大屏短视频应用时,因无法进行区分,会在应用内同一个专题内展示多家提供的同一个视频,给用户带来的体验是用户观看当前专题,看了一个视频,又出现了完全一样的视频,导致用户理解应用有“bug”造成,用户观看体验极差。
目前现有技术中,运营人员在媒资库视频入库时,查看每一个视频内容并记录,相同视频内容“审核不通过”或“媒资库删除”方式,避免出现同质化的视频内容。但因对及时性的内容,如娱乐八卦等,多家CP必然出现相同的视频,运营筛选检查时间成本较高,运营压力增大,且人力成本浪费较为严重。
因此,目前需要本领域技术人员迫切解决的一个技术问题就是:如何在视频资源入库的时候,检测视频资源与资源库中的视频是否重复,从而节省时间成本较,提高工作效率。
发明内容
为至少在一定程度上克服相关技术中,解决在视频资源入库的时候,检测视频资源与资源库中的视频是否重复的问题,本申请提供以下技术方案,
第一方面,一种视频处理方法,包括:
获取视频专题的预设标签,在媒资库中获取所述预设标签关联的视频;
在所述视频专题开启检测去重功能时,基于二重特征比对算法,对所述关联的视频进行检测去重;
在应用上展示检测去重后的视频专题。
进一步地,所述基于二重特征比对算法,对所述关联的视频进行检测去重,包括:
对所述关联的视频进行两两比对,获取两两比对时的第一视频的视频片段的视频特征和第二视频的视频片段的视频特征,基于所述视频特征进行视频片段比对,所述视频片段包括:前视频片段、中间视频片段和后视频片段,所述前视频片段是从视频起始点开始的预设大小的视频片段,所述后视频片段是直至视频结束点的预设大小的视频片段,所述中间视频片段是视频中间时间部分的片段;
若所述第一视频的前视频片段和所述第二视频的前视频片段的相似度小于预设值,则确定所述第一视频和所述第二视频不重复;或者,
若所述第一视频的前视频片段和所述第二视频的前视频片段的相似度大于或等于预设值,则进一步比对所述第一视频的中间视频和所述第二视频的中间视频,若所述第一视频的中间视频和所述第二视频的中间视频的相似度小于预设值,则确定所述第一视频和所述第二视频不重复,否则,确定所述第一视频和所述第二视频重复;
若确定所述第一视频和所述第二视频不重复,则将所述第一视频和所述第二视频均记录在所述视频专题中;
若确定所述第一视频和所述第二视频重复,则去掉所述第一视频和所述第二视频中后获取的视频。
进一步地,在媒资库中获取所述预设标签关联的视频之前,所述方法还包括:
获取上传的视频,提取所述视频的视频片段的特征信息,在提取特征信息后将所述视频存储到媒资库中,并自动调整所述视频的状态为审核通过。
进一步地,基于所述视频特征进行视频片段比对之后,所述方法还包括:
若确定所述第一视频和所述第二视频重复,则在媒体库中将重复视频的状态调整为审核不通过。
进一步地,所述提取所述视频的视频片段的特征信息,包括:
基于C3D模型,提取所述视频的视频片段的C3D特征信息。
进一步地,所述将所述视频存储到媒资库中,包括:
若根据所述特征信息确定所述媒资库中已存在与所述视频重复的视频,则将所述媒资库内的与所述视频重复的视频的文件指针指向上传目录后进行上传。
进一步地,其特征在于,所述对所述关联的视频进行检测去重,包括:
在所述视频专题中的增量视频的数量达到预设值后,对所述关联的视频进行检测去重。
进一步地,所述对所述关联的视频进行检测去重,包括:
对应每个预设标签,对同一个预设标签关联的视频进行检测去重。
进一步地,其特征在于,所述在应用上展示检测去重后的视频专题,包括:
对新建的视频专题,在所述视频专题检测去重后,将所述视频专题展示在应用上;
对已有的视频专题,将所述视频专题实时展示在应用上,并在检测到重复视频后,在所述视频专题中去掉所述重复视频。
第二方面,一种视频处理系统,包括:
存储器,用于存储计算机程序;
处理器,用于读取并运行所述存储器中存储的计算机程序,以执行如上任一项所述的方法。
本发明的有益效果是:
本发明所提供的一种视频处理方法,通过获取视频专题的预设标签,在媒资库中获取预设标签关联的视频;在视频专题开启检测去重功能时,基于二重特征比对算法,对关联的视频进行检测去重;在应用上展示检测去重后的视频专题。通过本发明不仅可以进行重复视频排重,特征提取后也可以在媒资库新入库视频时,根据当前视频特征,相同的视频可以秒上传。完全重复的视频上传时,只需要将媒资库内的视频文件指针指向上传目录,即可完成秒传,从而节省时间成本较,提高工作效率。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本申请。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本申请的实施例,并与说明书一起用于解释本申请的原理。
图1为本申请一个实施例中一种视频处理方法步骤图。
图2为本申请另一个实施例中一种视频处理方法步骤图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚,下面将对本申请的技术方案进行详细的描述。显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所得到的所有其它实施方式,都属于本申请所保护的范围。
为实现以上目的,本发明采用如下技术方案:
如图1所示,为本申请一个实施例中一种视频处理方法步骤图,
包括:
步骤S101、获取视频专题的预设标签,在媒资库中获取预设标签关联的视频;
具体地,在获取到当前视频专题的预设标签后,完成视频专题的创建,当前视频专题自动根据设置标签获取媒资库视频到当前视频专题内。
步骤S102、在视频专题开启检测去重功能时,基于二重特征比对算法,对关联的视频进行检测去重;
步骤S103、在应用上展示检测去重后的视频专题。
本发明所提供的一种视频处理方法,通过获取视频专题的预设标签,在媒资库中获取预设标签关联的视频;在视频专题开启检测去重功能时,基于二重特征比对算法,对关联的视频进行检测去重;在应用上展示检测去重后的视频专题。通过本发明在视频资源入库的时候,检测视频资源与媒资库中的视频是否重复,从而节省时间成本较,提高工作效率。
作为优选的,为更好地实现本发明,在上述实施例的基础上进一步优化,在基于二重特征比对算法,对关联的视频进行检测去重中,特别采用如下述步骤,包括:
对关联的视频进行两两比对,获取两两比对时的第一视频的视频片段的视频特征和第二视频的视频片段的视频特征,基于视频特征进行视频片段比对,视频片段包括:前视频片段、中间视频片段和后视频片段,前视频片段是从视频起始点开始的预设大小的视频片段,后视频片段是直至视频结束点的预设大小的视频片段,中间视频片段是视频中间时间部分的片段;
若第一视频的前视频片段和第二视频的前视频片段的相似度小于预设值,则确定第一视频和第二视频不重复;或者,
若第一视频的前视频片段和第二视频的前视频片段的相似度大于或等于预设值,则进一步比对第一视频的中间视频和第二视频的中间视频,若第一视频的中间视频和第二视频的中间视频的相似度小于预设值,则确定第一视频和第二视频不重复,否则,确定第一视频和第二视频重复;
若确定第一视频和第二视频不重复,则将第一视频和第二视频均记录在视频专题中;
若确定第一视频和第二视频重复,则去掉第一视频和第二视频中后获取的视频。
作为一种可选的实施方试,若确定第一视频和第二视频重复,则在媒体库中将重复视频的状态调整为审核不通过。
在一个实施例中,比如,获取视频专题的预设标签,在媒资库中获取预设标签关联的视频;在视频专题开启检测去重功能时,基于二重特征比对算法,对关联的视频进行检测去重,可以选取前100K,和后100K视频片段特征比对。特征比对结果小于99.99%的视频认为是不重复视频。对前后对比特征满足>99.99%的视频进行第二重特征对比,即选取中间100K视频特征对比,特征比对结果小于99.99%的视频认为是不重复视频,特征值大于99.99%,认为是重复视频,媒资库标记审核不通过,在应用内自动下架。当前视频专题内视频标题每增量更新10条,重新执行检测去重功能,排除重复视频。
需要说明的是,开启检测去重,不影响专题展示在应用上,视频随着检测随着处理,所有检测完成,重复视频全部自动标记审核不通过后下架,随着视频更新,始终循环当前功能流程进行去重。当前视频专题内视频标题每增量更新10条,重新执行检测去重功能,排除重复视频。
本发明所提供的一种视频处理方法,通过在视频专题开启检测去重功能时,基于二重特征比对算法,对关联的视频进行检测去重;在应用上展示检测去重后的视频专题。通过本发明可以进行重复视频排重,从而节省时间成本较,提高工作效率。
作为上述实施例的进一步改进,如图2所示,为本申请另一个实施例中一种视频处理方法步骤图,
步骤S201、获取上传的视频,提取视频的视频片段的特征信息,在提取特征信息后将视频存储到媒资库中,并自动调整视频的状态为审核通过。
在一个实施例中,在将视频存储到媒资库中时,若根据特征信息确定媒资库中已存在与视频重复的视频,则将媒资库内的与视频重复的视频的文件指针指向上传目录后进行上传。
其中,提取视频的视频片段的特征信息是基于C3D模型,提取视频的视频片段的C3D特征信息。
步骤S202、在媒资库中获取预设标签关联的视频。
步骤S203、在视频专题开启检测去重功能时,基于二重特征比对算法,对关联的视频进行检测去重;
具体地,在视频专题中的增量视频的数量达到预设值后,对关联的视频进行检测去重。对应每个预设标签,对同一个预设标签关联的视频进行检测去重。
步骤S204、在应用上展示检测去重后的视频专题。
具体地,应用上展示检测去重后的视频专题包括,对新建的视频专题,在视频专题检测去重后,将视频专题展示在应用上;以及,对已有的视频专题,将视频专题实时展示在应用上,并在检测到重复视频后,在视频专题中去掉重复视频。
本发明所提供的一种视频处理方法,通过获取视频专题的预设标签,在媒资库中获取预设标签关联的视频;在视频专题开启检测去重功能时,基于二重特征比对算法,对关联的视频进行检测去重;在应用上展示检测去重后的视频专题。通过本发明不仅可以进行重复视频排重,特征提取后也可以在媒资库新入库视频时,根据当前视频特征,相同的视频可以秒上传。完全重复的视频上传时,只需要将媒资库内的视频文件指针指向上传目录,即可完成秒传,从而节省时间成本较,提高工作效率。
作为上述实施例的进一步改进,本申请还提供了一种视频处理系统,
包括:
存储器,用于存储计算机程序;
处理器,用于读取并运行存储器中存储的计算机程序,以执行如上任一项视频处理方法。
可以理解的是,上述各实施例中相同或相似部分可以相互参考,在一些实施例中未详细说明的内容可以参见其他实施例中相同或相似的内容。
需要说明的是,在本申请的描述中,术语“第一”、“第二”等仅用于描述目的,而不能理解为指示或暗示相对重要性。此外,在本申请的描述中,除非另有说明,“多个”的含义是指至少两个。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本申请的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本申请的实施例所属技术领域的技术人员所理解。
应当理解,本申请的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如,如果用硬件来实现,和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本申请各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能组件的形式实现。所述集成的模块如果以软件功能组件的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本申请的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
尽管上面已经示出和描述了本申请的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本申请的限制,本领域的普通技术人员在本申请的范围内可以对上述实施例进行变化、修改、替换和变型。
需要说明的是,本发明不局限于上述最佳实施方式,本领域技术人员在本发明的启示下都可得出其他各种形式的产品,但不论在其形状或结构上作任何变化,凡是具有与本申请相同或相近似的技术方案,均落在本发明的保护范围之内。
Claims (9)
1.一种视频处理方法,其特征在于,包括:
获取视频专题的预设标签,在媒资库中获取所述预设标签关联的视频;
在所述视频专题开启检测去重功能时,基于二重特征比对算法,对所述关联的视频进行检测去重;
在应用上展示检测去重后的视频专题;
所述基于二重特征比对算法,对所述关联的视频进行检测去重,包括:
对所述关联的视频进行两两比对,获取两两比对时的第一视频的视频片段的视频特征和第二视频的视频片段的视频特征,基于所述视频特征进行视频片段比对,所述视频片段包括:前视频片段、中间视频片段和后视频片段,所述前视频片段是从视频起始点开始的预设大小的视频片段,所述后视频片段是直至视频结束点的预设大小的视频片段,所述中间视频片段是视频中间时间部分的片段;
若所述第一视频的前视频片段和所述第二视频的前视频片段的相似度小于预设值,则确定所述第一视频和所述第二视频不重复;或者,
若所述第一视频的前视频片段和所述第二视频的前视频片段的相似度大于或等于预设值,则进一步比对所述第一视频的中间视频和所述第二视频的中间视频,若所述第一视频的中间视频和所述第二视频的中间视频的相似度小于预设值,则确定所述第一视频和所述第二视频不重复,否则,确定所述第一视频和所述第二视频重复;
若确定所述第一视频和所述第二视频不重复,则将所述第一视频和所述第二视频均记录在所述视频专题中;
若确定所述第一视频和所述第二视频重复,则去掉所述第一视频和所述第二视频中后获取的视频。
2.根据权利要求1所述的方法,其特征在于,在媒资库中获取所述预设标签关联的视频之前,所述方法还包括:
获取上传的视频,提取所述视频的视频片段的特征信息,在提取特征信息后将所述视频存储到媒资库中,并自动调整所述视频的状态为审核通过。
3.根据权利要求2所述的方法,其特征在于,基于所述视频特征进行视频片段比对之后,所述方法还包括:
若确定所述第一视频和所述第二视频重复,则在媒体库中将重复视频的状态调整为审核不通过。
4.根据权利要求2所述的方法,其特征在于,所述提取所述视频的视频片段的特征信息,包括:
基于C3D模型,提取所述视频的视频片段的C3D特征信息。
5.根据权利要求2所述的方法,其特征在于,所述将所述视频存储到媒资库中,包括:
若根据所述特征信息确定所述媒资库中已存在与所述视频重复的视频,则将所述媒资库内的与所述视频重复的视频的文件指针指向上传目录后进行上传。
6.根据权利要求1-5任一项所述的方法,其特征在于,所述对所述关联的视频进行检测去重,包括:
在所述视频专题中的增量视频的数量达到预设值后,对所述关联的视频进行检测去重。
7.根据权利要求1-5任一项所述的方法,其特征在于,所述
对所述关联的视频进行检测去重,包括:
对应每个预设标签,对同一个预设标签关联的视频进行检测去重。
8.根据权利要求1-5任一项所述的方法,其特征在于,所述在应用上展示检测去重后的视频专题,包括:
对新建的视频专题,在所述视频专题检测去重后,将所述视频专题展示在应用上;
对已有的视频专题,将所述视频专题实时展示在应用上,并在检测到重复视频后,在所述视频专题中去掉所述重复视频。
9.一种视频处理系统,其特征在于,包括:
存储器,用于存储计算机程序;
处理器,用于读取并运行所述存储器中存储的计算机程序,以执行如权利要求1-8任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011098429.0A CN112235599B (zh) | 2020-10-14 | 2020-10-14 | 一种视频处理方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011098429.0A CN112235599B (zh) | 2020-10-14 | 2020-10-14 | 一种视频处理方法及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112235599A CN112235599A (zh) | 2021-01-15 |
CN112235599B true CN112235599B (zh) | 2022-05-27 |
Family
ID=74112846
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011098429.0A Active CN112235599B (zh) | 2020-10-14 | 2020-10-14 | 一种视频处理方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112235599B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113810737B (zh) * | 2021-09-30 | 2024-03-12 | 深圳市雷鸟网络传媒有限公司 | 一种视频处理方法、装置、电子设备和存储介质 |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090064005A1 (en) * | 2007-08-29 | 2009-03-05 | Yahoo! Inc. | In-place upload and editing application for editing media assets |
US8898575B2 (en) * | 2009-09-02 | 2014-11-25 | Yahoo! Inc. | Indicating unavailability of an uploaded video file that is being bitrate encoded |
US20120002884A1 (en) * | 2010-06-30 | 2012-01-05 | Alcatel-Lucent Usa Inc. | Method and apparatus for managing video content |
CN102172035A (zh) * | 2011-04-26 | 2011-08-31 | 华为技术有限公司 | 视频专题制作方法和系统 |
CN102984585B (zh) * | 2011-09-20 | 2015-09-23 | 北京鹏润鸿途科技有限公司 | 一种确定广告视频的方法及装置 |
CN102332031B (zh) * | 2011-10-18 | 2013-03-27 | 中国科学院自动化研究所 | 一种基于视频集合层级主题结构的检索结果聚类方法 |
CN102880674A (zh) * | 2012-09-10 | 2013-01-16 | 杭州电子科技大学 | 基于视频网站的主题类视频自动采集方法 |
CN103617233B (zh) * | 2013-11-26 | 2017-05-17 | 烟台中科网络技术研究所 | 一种基于语义内容多层表示的重复视频检测方法与装置 |
CN103986898B (zh) * | 2014-06-03 | 2017-02-01 | 四川效率源信息安全技术股份有限公司 | 一种提取dvr硬盘中残余视频和被删除视频的方法 |
CN106034240A (zh) * | 2015-03-13 | 2016-10-19 | 小米科技有限责任公司 | 视频检测方法及装置 |
CN105069121A (zh) * | 2015-08-12 | 2015-11-18 | 北京暴风科技股份有限公司 | 基于视频主题相似度的视频推送方法 |
CN107070923B (zh) * | 2017-04-18 | 2020-07-28 | 上海云熵网络科技有限公司 | 减少编码片段重复的p2p直播系统及方法 |
CN110019964A (zh) * | 2018-01-02 | 2019-07-16 | 北京小度互娱科技有限公司 | 视频去重方法及装置 |
CN112182289B (zh) * | 2020-10-10 | 2023-04-28 | 武汉中科通达高新技术股份有限公司 | 一种基于Flink框架的数据去重方法及装置 |
-
2020
- 2020-10-14 CN CN202011098429.0A patent/CN112235599B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN112235599A (zh) | 2021-01-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN100478946C (zh) | 用于文件系统快照持久性的方法和装置 | |
US8250033B1 (en) | Replication of a data set using differential snapshots | |
US8676770B2 (en) | Displaying changes to versioned files | |
US11119978B2 (en) | Snapshot version control | |
US8818952B2 (en) | Storage apparatus and duplicate data detection method | |
CN103761165B (zh) | 日志备份方法及装置 | |
CN106844102B (zh) | 数据恢复方法和装置 | |
US20150149415A1 (en) | Rollback Mechanism for Linear Tape File Systems | |
CN103810060A (zh) | 基于分布式数据库的数据备份方法及其系统 | |
CN112235599B (zh) | 一种视频处理方法及系统 | |
CN111651127A (zh) | 一种基于叠瓦式磁记录盘的监控数据存储方法及装置 | |
CN109496292A (zh) | 一种磁盘管理方法、磁盘管理装置及电子设备 | |
CN111367926A (zh) | 分布式系统的数据处理方法和装置 | |
US10423580B2 (en) | Storage and compression of an aggregation file | |
US8219858B2 (en) | Method for testing hard disks under an extensible firmware interface | |
CN108459925B (zh) | 私有云设备及其数据库的修复方法、具有存储功能的装置 | |
EP2750020B1 (en) | Systems and methods for managing files in a computer system by segmenting files | |
CN110798748A (zh) | 一种音视频预加载方法和装置及电子设备 | |
WO2021163856A1 (zh) | 内容推送方法、装置、服务器及存储介质 | |
CN114924914A (zh) | 磁盘分区表信息备份、恢复方法及系统 | |
CN110489432B (zh) | 基于模型的数据库自动同步方法、介质、设备及装置 | |
CN113625952A (zh) | 一种对象存储方法、装置、设备及存储介质 | |
CN105808052A (zh) | 一种文件的打开方法及系统 | |
CN110543452A (zh) | 一种数据采集的方法及设备 | |
CN105893394B (zh) | 一种大文件模拟方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |