CN112463026A - 分布式对象存储系统中追加数据的重复删除的方法和设备 - Google Patents
分布式对象存储系统中追加数据的重复删除的方法和设备 Download PDFInfo
- Publication number
- CN112463026A CN112463026A CN202011179344.5A CN202011179344A CN112463026A CN 112463026 A CN112463026 A CN 112463026A CN 202011179344 A CN202011179344 A CN 202011179344A CN 112463026 A CN112463026 A CN 112463026A
- Authority
- CN
- China
- Prior art keywords
- data
- size
- storage system
- additional
- last
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000000034 method Methods 0.000 title claims abstract description 26
- 230000000153 supplemental effect Effects 0.000 title claims description 7
- 230000004044 response Effects 0.000 claims abstract description 12
- 238000004364 calculation method Methods 0.000 claims description 3
- 230000006870 function Effects 0.000 abstract description 12
- 238000004590 computer program Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 3
- 238000012217 deletion Methods 0.000 description 2
- 230000037430 deletion Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0638—Organizing or formatting or addressing of data
- G06F3/064—Management of blocks
- G06F3/0641—De-duplication techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
Abstract
本发明提供了一种分布式对象存储系统中追加数据的重复删除的方法和设备,该方法包括:响应于接收到上传追加数据的请求,判断追加数据是否为首次追加数据;响应于追加数据不是首次追加数据,计算目标文件最后一个尾对象的数据大小;响应于目标文件最后一个尾对象的数据大小在阈值范围内,将最后一个尾对象数据读到内存中;从追加数据中获取数据并追加到最后一个尾对象中以形成阈值大小的数据块并存储至存储系统中;将目标文件的最后一个标识信息替换成阈值大小的数据块的标识信息并将追加数据中的其他数据依次写入到存储系统中并在需要时做重删。通过使用本发明的方案,能够解决当前重删方案不支持追加上传数据的问题,扩展了重删功能的兼容性。
Description
技术领域
本领域涉及计算机领域,并且更具体地涉及一种分布式对象存储系统中追加数据的重复删除的方法和设备。
背景技术
当前的分布式对象存储系统中,针对普通上传操作已经实现了数据的重复删除技术,大大提高了数据存取速度,节省了存储空间。但是现有的重删功能不支持追加上传数据的操作。
发明内容
有鉴于此,本发明实施例的目的在于提出一种分布式对象存储系统中追加数据的重复删除的方法和设备,通过使用本发明的方法,能够解决当前重删方案中不支持追加上传数据的问题,扩展了重删功能的兼容性,提高了对象存储中追加上传的效率,给客户带来了良好的用户体验,同时丰富了对象存储的功能,提高了分布式对象产品的市场竞争力。
基于上述目的,本发明的实施例的一个方面提供了一种分布式对象存储系统中追加数据的重复删除的方法,包括以下步骤:
响应于接收到上传追加数据的请求,判断追加数据是否为首次追加数据;
响应于追加数据不是首次追加数据,计算目标文件最后一个尾对象的数据大小;
响应于目标文件最后一个尾对象的数据大小在阈值范围内,将最后一个尾对象数据读到内存中;
从追加数据中获取数据并追加到最后一个尾对象中以形成阈值大小的数据块并存储至存储系统中;
将目标文件的最后一个标识信息替换成阈值大小的数据块的标识信息并将追加数据中的其他数据依次写入到存储系统中并在需要时做重删。
根据本发明的一个实施例,从追加数据中获取数据并追加到最后一个尾对象中以形成阈值大小的数据块并存储至存储系统中包括:
计算阈值大小的数据块与最后一个尾对象的数据大小的差值;
在追加数据中获取差值大小的数据并将获取的数据拼接到最后一个尾对象后以形成新的数据块;
将新的数据块存储到最后一个尾对象的原位置处。
根据本发明的一个实施例,将目标文件的最后一个标识信息替换成阈值大小的数据块的标识信息并将追加数据中的其他数据依次写入到存储系统中并在需要时做重删包括:
获取阈值大小的数据块的指纹信息以作为阈值大小的数据块的标志信息;
将目标文件的数据结构中的最后一个标识信息删除;
将指纹信息写入到数据结构中;
将追加数据中的其他数据以预设大小划分成若干个数据块,将若干个数据块依次写入到存储系统中;
判断追加数据是否需要进行重删操作;
响应于追加数据需要进行重删操作,将追加数据进行重删。
根据本发明的一个实施例,阈值范围为数据大小大于0且小于4兆。
根据本发明的一个实施例,阈值大小的数据块的标识信息为阈值大小的数据块的指纹信息。
根据本发明的一个实施例,阈值大小为4兆。
本发明的实施例的另一个方面,还提供了一种分布式对象存储系统中追加数据的重复删除的设备,设备包括:
判断模块,判断模块配置为响应于接收到上传追加数据的请求,判断追加数据是否为首次追加数据;
计算模块,计算模块配置为响应于追加数据不是首次追加数据,计算目标文件最后一个尾对象的数据大小;
读取模块,读取模块配置为响应于目标文件最后一个尾对象的数据大小在阈值范围内,将最后一个尾对象数据读到内存中;
追加模块,追加模块配置为从追加数据中获取数据并追加到最后一个尾对象中以形成阈值大小的数据块并存储至存储系统中;
写入模块,写入模块配置为将目标文件的最后一个标识信息替换成阈值大小的数据块的标识信息并将追加数据中的其他数据依次写入到存储系统中并在需要时做重删。
根据本发明的一个实施例,追加模块还配置为:
计算阈值大小的数据块与最后一个尾对象的数据大小的差值;
在追加数据中获取差值大小的数据并将获取的数据拼接到最后一个尾对象后以形成新的数据块;
将新的数据块存储到最后一个尾对象的原位置处。
根据本发明的一个实施例,写入模块还配置为:
获取阈值大小的数据块的指纹信息以作为阈值大小的数据块的标志信息;
将目标文件的数据结构中的最后一个标识信息删除;
将指纹信息写入到数据结构中;
将追加数据中的其他数据以预设大小划分成若干个数据块,将若干个数据块依次写入到存储系统中;
判断追加数据是否需要进行重删操作;
响应于追加数据需要进行重删操作,将追加数据进行重删。
根据本发明的一个实施例,阈值范围为数据大小大于0且小于4兆。
本发明具有以下有益技术效果:本发明实施例提供的分布式对象存储系统中追加数据的重复删除的方法,通过响应于接收到上传追加数据的请求,判断追加数据是否为首次追加数据;响应于追加数据不是首次追加数据,计算目标文件最后一个尾对象的数据大小;响应于目标文件最后一个尾对象的数据大小在阈值范围内,将最后一个尾对象数据读到内存中;从追加数据中获取数据并追加到最后一个尾对象中以形成阈值大小的数据块并存储至存储系统中;将目标文件的最后一个标识信息替换成阈值大小的数据块的标识信息并将追加数据中的其他数据依次写入到存储系统中并在需要时做重删的技术方案,能够解决当前重删方案中不支持追加上传数据的问题,扩展了重删功能的兼容性,提高了对象存储中追加上传的效率,给客户带来了良好的用户体验,同时丰富了对象存储的功能,提高了分布式对象产品的市场竞争力。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的实施例。
图1为根据本发明一个实施例的分布式对象存储系统中追加数据的重复删除的方法的示意性流程图;
图2为根据本发明一个实施例的分布式对象存储系统中追加数据的重复删除的设备的示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚明白,以下结合具体实施例,并参照附图,对本发明实施例进一步详细说明。
基于上述目的,本发明的实施例的第一个方面,提出了一种分布式对象存储系统中追加数据的重复删除的方法的一个实施例。图1示出的是该方法的示意性流程图。
如图1中所示,该方法可以包括以下步骤:
S1响应于接收到上传追加数据的请求,判断追加数据是否为首次追加数据,可以查看系统的历史记录来判断目标文件是否已经有其他的追加数据;
S2响应于追加数据不是首次追加数据,计算目标文件最后一个尾对象的数据大小,目标文件中有很多个尾对象,其他尾对象不需要进行任何操作,只针对最后一个尾对象做数据处理;
S3响应于目标文件最后一个尾对象的数据大小在阈值范围内,将最后一个尾对象数据读到内存中,在该分布式存储系统中,每个尾对象的大小例如为4M,最后一个尾对象的数据大小可能小于4兆,如果最后一个尾对象的数据大小大于0且小于4兆,则先将该尾对象数据读出以做处理;
S4从追加数据中获取数据并追加到最后一个尾对象中以形成阈值大小的数据块并存储至存储系统中,需要追加的数据会从最后一个尾对象后开始追加,将追加数据中的部分数据读取出来,该数据的大小为与最后一个尾对象拼接后刚好形成阈值大小的数据库,例如,最后一个尾对象的数据大小为1兆,阈值大小为4兆,则从追加数据中读取3兆的数据追加到最后一个尾对象的后面形成4兆大小的数据块;
S5将目标文件的最后一个标识信息替换成阈值大小的数据块的标识信息并将追加数据中的其他数据依次写入到存储系统中并在需要时做重删,每个尾对象都有一个对象的唯一标识,将目标文件中最后一个尾对象的唯一标识删除,将追加形成的新的数据块的唯一标识作为目标文件的最后一个标识信息存储到数据结构中,然后将追加数据中的其他数据按照尾对象的大小切分成若干个数据块,将这些数据块依次写入到存储系统中目标文件的后面,然后按照正常流程判断是否需要做数据的重删操作。
通过本发明的技术方案,能够解决当前重删方案中不支持追加上传数据的问题,扩展了重删功能的兼容性,提高了对象存储中追加上传的效率,给客户带来了良好的用户体验,同时丰富了对象存储的功能,提高了分布式对象产品的市场竞争力。
在本发明的一个优选实施例中,从追加数据中获取数据并追加到最后一个尾对象中以形成阈值大小的数据块并存储至存储系统中包括:
计算阈值大小的数据块与最后一个尾对象的数据大小的差值;
在追加数据中获取差值大小的数据并将获取的数据拼接到最后一个尾对象后以形成新的数据块;
将新的数据块存储到最后一个尾对象的原位置处。根据存储系统中数据存储的尾对象的大小预设阈值大小,如果尾对象的大小为4兆,则在追加数据中取出数据的大小以能将差值补齐4兆为准,将取出的数据追加到最后一个尾对象数据后面形成新的数据块。
在本发明的一个优选实施例中,将目标文件的最后一个标识信息替换成阈值大小的数据块的标识信息并将追加数据中的其他数据依次写入到存储系统中并在需要时做重删包括:
获取阈值大小的数据块的指纹信息以作为阈值大小的数据块的标志信息;
将目标文件的数据结构中的最后一个标识信息删除;
将指纹信息写入到数据结构中;
将追加数据中的其他数据以预设大小(可以为4兆)划分成若干个数据块,将若干个数据块依次写入到存储系统中;
判断追加数据是否需要进行重删操作;
响应于追加数据需要进行重删操作,将追加数据进行重删。重删功能是对每一个对象根据内容生成指纹信息作为oid(对象的唯一标识),然后使用该oid查询对象元数据中的引用计数属性,如果能查询到,表示该对象已存储过,此时将该对象元数据中的引用计数属性加1,并将oid加入到对象的manifest(存储系统中定义的一种数据结构,作用是管理应用对象和rados对象的对应关系,下载对象时,通过读取头对象中manifest信息,可下载完整的应用对象)中。如果不存在,则保存该对象,并在该对象的元数据中添加引用计数属性,同时将该值设置为1,并将oid添加到对象的manifest中。
在本发明的一个优选实施例中,阈值范围为数据大小大于0且小于4兆。该阈值范围可以根据存储系统中存储数据的尾对象的大小进行设定。如存储系统尾对象的大小为4兆,则阈值范围为数据大小大于0且小于4兆。
在本发明的一个优选实施例中,阈值大小的数据块的标识信息为阈值大小的数据块的指纹信息。
在本发明的一个优选实施例中,阈值大小为4兆。
通过本发明的技术方案,能够解决当前重删方案中不支持追加上传数据的问题,扩展了重删功能的兼容性,提高了对象存储中追加上传的效率,给客户带来了良好的用户体验,同时丰富了对象存储的功能,提高了分布式对象产品的市场竞争力。
需要说明的是,本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,可以通过计算机程序来指令相关硬件来完成,上述的程序可存储于计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中存储介质可为磁碟、光盘、只读存储器(Read-Only Memory,ROM)或随机存取存储器(Random AccessMemory,RAM)等。上述计算机程序的实施例,可以达到与之对应的前述任意方法实施例相同或者相类似的效果。
此外,根据本发明实施例公开的方法还可以被实现为由CPU执行的计算机程序,该计算机程序可以存储在计算机可读存储介质中。在该计算机程序被CPU执行时,执行本发明实施例公开的方法中限定的上述功能。
基于上述目的,本发明的实施例的第二个方面,提出了一种分布式对象存储系统中追加数据的重复删除的设备,如图2所示,设备200包括:
判断模块,判断模块配置为响应于接收到上传追加数据的请求,判断追加数据是否为首次追加数据;
计算模块,计算模块配置为响应于追加数据不是首次追加数据,计算目标文件最后一个尾对象的数据大小;
读取模块,读取模块配置为响应于目标文件最后一个尾对象的数据大小在阈值范围内,将最后一个尾对象数据读到内存中;
追加模块,追加模块配置为从追加数据中获取数据并追加到最后一个尾对象中以形成阈值大小的数据块并存储至存储系统中;
写入模块,写入模块配置为将目标文件的最后一个标识信息替换成阈值大小的数据块的标识信息并将追加数据中的其他数据依次写入到存储系统中并在需要时做重删。
在本发明的一个优选实施例中,追加模块还配置为:
计算阈值大小的数据块与最后一个尾对象的数据大小的差值;
在追加数据中获取差值大小的数据并将获取的数据拼接到最后一个尾对象后以形成新的数据块;
将新的数据块存储到最后一个尾对象的原位置处。
在本发明的一个优选实施例中,写入模块还配置为:
获取阈值大小的数据块的指纹信息以作为阈值大小的数据块的标志信息;
将目标文件的数据结构中的最后一个标识信息删除;
将指纹信息写入到数据结构中;
将追加数据中的其他数据以预设大小划分成若干个数据块,将若干个数据块依次写入到存储系统中;
判断追加数据是否需要进行重删操作;
响应于追加数据需要进行重删操作,将追加数据进行重删。
在本发明的一个优选实施例中,阈值范围为数据大小大于0且小于4兆。
上述实施例,特别是任何“优选”实施例是实现的可能示例,并且仅为了清楚地理解本发明的原理而提出。可以在不脱离本文所描述的技术的精神和原理的情况下对上述实施例进行许多变化和修改。所有修改旨在被包括在本公开的范围内并且由所附权利要求保护。
Claims (10)
1.一种分布式对象存储系统中追加数据的重复删除的方法,其特征在于,包括以下步骤:
响应于接收到上传追加数据的请求,判断所述追加数据是否为首次追加数据;
响应于所述追加数据不是首次追加数据,计算目标文件最后一个尾对象的数据大小;
响应于所述目标文件最后一个尾对象的数据大小在阈值范围内,将所述最后一个尾对象数据读到内存中;
从所述追加数据中获取数据并追加到所述最后一个尾对象中以形成阈值大小的数据块并存储至存储系统中;
将所述目标文件的最后一个标识信息替换成所述阈值大小的数据块的标识信息并将所述追加数据中的其他数据依次写入到所述存储系统中并在需要时做重删。
2.根据权利要求1所述的方法,其特征在于,从所述追加数据中获取数据并追加到所述最后一个尾对象中以形成阈值大小的数据块并存储至存储系统中包括:
计算所述阈值大小的数据块与所述最后一个尾对象的数据大小的差值;
在所述追加数据中获取所述差值大小的数据并将获取的所述数据拼接到所述最后一个尾对象后以形成新的数据块;
将所述新的数据块存储到所述最后一个尾对象的原位置处。
3.根据权利要求1所述的方法,其特征在于,将所述目标文件的最后一个标识信息替换成所述阈值大小的数据块的标识信息并将所述追加数据中的其他数据依次写入到所述存储系统中并在需要时做重删包括:
获取所述阈值大小的数据块的指纹信息以作为所述阈值大小的数据块的标志信息;
将所述目标文件的数据结构中的最后一个标识信息删除;
将所述指纹信息写入到所述数据结构中;
将所述追加数据中的其他数据以预设大小划分成若干个数据块,将所述若干个数据块依次写入到所述存储系统中;
判断所述追加数据是否需要进行重删操作;
响应于所述追加数据需要进行重删操作,将所述追加数据进行重删。
4.根据权利要求1所述的方法,其特征在于,所述阈值范围为数据大小大于0且小于4兆。
5.根据权利要求1所述的方法,其特征在于,所述阈值大小的数据块的标识信息为阈值大小的数据块的指纹信息。
6.根据权利要求1所述的方法,其特征在于,所述阈值大小为4兆。
7.一种分布式对象存储系统中追加数据的重复删除的设备,其特征在于,所述设备包括:
判断模块,所述判断模块配置为响应于接收到上传追加数据的请求,判断所述追加数据是否为首次追加数据;
计算模块,所述计算模块配置为响应于所述追加数据不是首次追加数据,计算目标文件最后一个尾对象的数据大小;
读取模块,所述读取模块配置为响应于所述目标文件最后一个尾对象的数据大小在阈值范围内,将所述最后一个尾对象数据读到内存中;
追加模块,所述追加模块配置为从所述追加数据中获取数据并追加到所述最后一个尾对象中以形成阈值大小的数据块并存储至存储系统中;
写入模块,所述写入模块配置为将所述目标文件的最后一个标识信息替换成所述阈值大小的数据块的标识信息并将所述追加数据中的其他数据依次写入到所述存储系统中并在需要时做重删。
8.根据权利要求7所述的设备,其特征在于,所述追加模块还配置为:
计算所述阈值大小的数据块与所述最后一个尾对象的数据大小的差值;
在所述追加数据中获取所述差值大小的数据并将获取的所述数据拼接到所述最后一个尾对象后以形成新的数据块;
将所述新的数据块存储到所述最后一个尾对象的原位置处。
9.根据权利要求7所述的设备,其特征在于,所述写入模块还配置为:
获取所述阈值大小的数据块的指纹信息以作为所述阈值大小的数据块的标志信息;
将所述目标文件的数据结构中的最后一个标识信息删除;
将所述指纹信息写入到所述数据结构中;
将所述追加数据中的其他数据以预设大小划分成若干个数据块,将所述若干个数据块依次写入到所述存储系统中;
判断所述追加数据是否需要进行重删操作;
响应于所述追加数据需要进行重删操作,将所述追加数据进行重删。
10.根据权利要求7所述的设备,其特征在于,所述阈值范围为数据大小大于0且小于4兆。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011179344.5A CN112463026A (zh) | 2020-10-29 | 2020-10-29 | 分布式对象存储系统中追加数据的重复删除的方法和设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011179344.5A CN112463026A (zh) | 2020-10-29 | 2020-10-29 | 分布式对象存储系统中追加数据的重复删除的方法和设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112463026A true CN112463026A (zh) | 2021-03-09 |
Family
ID=74834658
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011179344.5A Withdrawn CN112463026A (zh) | 2020-10-29 | 2020-10-29 | 分布式对象存储系统中追加数据的重复删除的方法和设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112463026A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112925753A (zh) * | 2021-03-25 | 2021-06-08 | 平安科技(深圳)有限公司 | 文件追加写入方法、装置、电子设备及存储介质 |
CN113126923A (zh) * | 2021-04-21 | 2021-07-16 | 山东英信计算机技术有限公司 | 分布式对象存储的追加上传方法、系统、设备及存储介质 |
CN114333251A (zh) * | 2021-12-29 | 2022-04-12 | 成都中科慧源科技有限公司 | 一种智能报警器、方法、系统、设备和存储介质 |
-
2020
- 2020-10-29 CN CN202011179344.5A patent/CN112463026A/zh not_active Withdrawn
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112925753A (zh) * | 2021-03-25 | 2021-06-08 | 平安科技(深圳)有限公司 | 文件追加写入方法、装置、电子设备及存储介质 |
CN112925753B (zh) * | 2021-03-25 | 2023-11-07 | 平安科技(深圳)有限公司 | 文件追加写入方法、装置、电子设备及存储介质 |
CN113126923A (zh) * | 2021-04-21 | 2021-07-16 | 山东英信计算机技术有限公司 | 分布式对象存储的追加上传方法、系统、设备及存储介质 |
CN114333251A (zh) * | 2021-12-29 | 2022-04-12 | 成都中科慧源科技有限公司 | 一种智能报警器、方法、系统、设备和存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112463026A (zh) | 分布式对象存储系统中追加数据的重复删除的方法和设备 | |
CN107229420B (zh) | 数据存储方法、读取方法、删除方法和数据操作系统 | |
CN106201771B (zh) | 数据存储系统和数据读写方法 | |
CN107911461B (zh) | 云存储系统中的对象处理方法、存储服务器及云存储系统 | |
CN109710455B (zh) | 基于fat32文件系统的删除文件恢复方法及系统 | |
US10572335B2 (en) | Metadata recovery method and apparatus | |
CN111309687A (zh) | 一种对象存储小文件处理方法、装置、设备及存储介质 | |
CN109885577B (zh) | 数据处理方法、装置、终端及存储介质 | |
CN112714359B (zh) | 视频推荐方法、装置、计算机设备及存储介质 | |
CN106980680B (zh) | 数据存储方法及存储设备 | |
CN110716965B (zh) | 一种块链式账本中的查询方法、装置及设备 | |
CN104281717A (zh) | 一种建立海量id映射关系的方法 | |
US11093453B1 (en) | System and method for asynchronous cleaning of data objects on cloud partition in a file system with deduplication | |
CN112734982A (zh) | 无人车驾驶行为数据的存储方法和系统 | |
CN110673800A (zh) | 文件系统的数据操作方法、装置、设备及可读存储介质 | |
CN112925759A (zh) | 数据文件的处理方法和装置、存储介质、电子装置 | |
CN115840731A (zh) | 文件处理方法、计算设备及计算机存储介质 | |
CN108304144B (zh) | 数据写入、读取方法与系统、数据读写系统 | |
US11461269B2 (en) | Metadata separated container format | |
CN107220146B (zh) | 一种文件扫描恢复方法及装置 | |
CN113448946A (zh) | 数据迁移方法及装置、电子设备 | |
CN110019056B (zh) | 用于云层的容器元数据分离 | |
CN108021562B (zh) | 应用于分布式文件系统的存盘方法、装置及分布式文件系统 | |
CN115858471A (zh) | 业务数据变更记录方法、装置、计算机设备及介质 | |
CN109241011B (zh) | 一种虚拟机文件处理方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WW01 | Invention patent application withdrawn after publication |
Application publication date: 20210309 |
|
WW01 | Invention patent application withdrawn after publication |