CN108984342B - 改进的基于虚拟磁盘文件的流式增量备份方法及装置 - Google Patents

改进的基于虚拟磁盘文件的流式增量备份方法及装置 Download PDF

Info

Publication number
CN108984342B
CN108984342B CN201810736138.6A CN201810736138A CN108984342B CN 108984342 B CN108984342 B CN 108984342B CN 201810736138 A CN201810736138 A CN 201810736138A CN 108984342 B CN108984342 B CN 108984342B
Authority
CN
China
Prior art keywords
metadata
virtual disk
disk files
offset
group
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810736138.6A
Other languages
English (en)
Other versions
CN108984342A (zh
Inventor
许广彬
谭瑞忠
濮天晖
张银滨
郭晓
张欢
刘庆
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huayun data holding group Co., Ltd
Original Assignee
Wuxi Huayun Data Technology Service Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuxi Huayun Data Technology Service Co Ltd filed Critical Wuxi Huayun Data Technology Service Co Ltd
Priority to CN201810736138.6A priority Critical patent/CN108984342B/zh
Publication of CN108984342A publication Critical patent/CN108984342A/zh
Application granted granted Critical
Publication of CN108984342B publication Critical patent/CN108984342B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14—Error detection or correction of the data by redundancy in operation
    • G06F11/1402—Saving, restoring, recovering or retrying
    • G06F11/1446—Point-in-time backing up or restoration of persistent data
    • G06F11/1448—Management of the data involved in backup or backup restore
    • G06F11/1451—Management of the data involved in backup or backup restore by selection of backup contents
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0604—Improving or facilitating administration, e.g. storage management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638—Organizing or formatting or addressing of data
    • G06F3/064—Management of blocks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0673—Single storage device
    • G06F3/0674—Disk device

Abstract

本发明公开了改进的基于虚拟磁盘文件的流式增量备份方法及装置，扫描增量文件链中虚拟磁盘文件元数据，提前计算好差异数据量，以确定每个元数据在整个输出的虚拟磁盘文件流的偏移量；在内存中开辟一块连续区域用以存放某一组元数据；输出差异数据时并不输出该组元数据，只更新内存中的该组元数据，在该组元数据相应的若干数据块完成差异数据输出后输出内存中的该组元数据。本发明不通过文件系统中转，以流的方式直接上传，因此可以解决现有的文件系统中转带来的文件系统本身的不可靠、容量占用大、性能不高的问题；由于开辟的连续区域用于存放某一组元数据而非全部元数据，因此可以減少内存占用，尤其在大文件、元数据量比较大时比较有价值。

Description

改进的基于虚拟磁盘文件的流式增量备份方法及装置
技术领域
本发明涉及云计算、虚拟化、增量备份、灾备的技术领域，尤其涉及改进的基于虚拟磁盘文件的流式增量备份方法及装置。
背景技术
虚拟磁盘文件通常由元数据和数据部分构成，元数据以块为单位管理数据，通常一个元数据单位可以管理多个数据块。
增量备份是指在一次全备份或上一次增量备份后，以后每次的备份只需备份与前一次相比增加或者被修改的数据，现在的导致增量技术通常在识别到第一个差异数据块分配并输出一个元数据单位，之后如果再属于这个元数据单位管理的数据块时，输出这个数据块的同时修改之前已经输出的元数据单位，这就要求输出的目标端需要有随机写入的特性，通常是文件系统。
但如果输出的目标端是流式(比如对象存储，通过http网络协议访问)，不具备随机写，只有追加写的功能时，就无法满足；或者只能先完整输出到文件系统后，再以流式上传。
现有技术方案通过先完整输出到文件系统，之后再流式上传，其缺点是，文件系统会成为可靠性、性能以及容量的瓶颈，尤其在并发量大的情况更为严重。
发明内容
为了克服现有技术的不足，本发明的目的在于提供改进的基于虚拟磁盘文件的流式增量备份方法及装置，旨在解决现有的文件系统中转带来的文件系统本身的不可靠、容量占用大、性能不高的问题。。
本发明的目的采用以下技术方案实现：
一种改进的基于虚拟磁盘文件的流式增量备份方法，包括：
确定步骤，扫描需要备份的增量文件链中虚拟磁盘文件元数据，计算出差异数据量，并根据差异数据量确定元数据偏移量；所述增量文件链为具有链式关系的增量虚拟磁盘文件；所述元数据偏移量包括每个元数据在最终输出的虚拟磁盘文件流的偏移量，每个元数据对应若干数据块；
存放步骤，将元数据分为若干组，每组元数据中包含一个、两个或多个元数据；在内存中开辟一块连续区域用以存放某一组元数据；
输出步骤，扫描内存中的该组元数据，如果该组元数据显示数据有差异，则根据该组元数据信息读取差异数据并输出到虚拟磁盘文件流，且输出差异数据时并不输出该组元数据，只更新内存中的该组元数据；在与该组元数据相应的若干数据块完成差异数据输出后，根据元数据偏移量，输出内存中的该组元数据到虚拟磁盘文件流。
在上述实施例的基础上，优选的，所述确定步骤后，还包括：
头部步骤，输出增量文件链的头部到虚拟磁盘文件流，所输出的头部包含元数据偏移量。
在上述任意实施例的基础上，优选的，所述存放步骤，还包括：
将所开辟的连续区域初始化为零。
在上述任意实施例的基础上，优选的，所述确定步骤中，元数据偏移量满足：使元数据位于最终输出的虚拟磁盘文件流的末端。
或者，优选的，所述确定步骤中，元数据偏移量满足：使每个元数据位于最终输出的虚拟磁盘文件流中，且位于该元数据相应的若干数据块之后。
一种改进的基于虚拟磁盘文件的流式增量备份装置，包括：
确定模块，用于扫描需要备份的增量文件链中虚拟磁盘文件元数据，计算出差异数据量，并根据差异数据量确定元数据偏移量；所述增量文件链为具有链式关系的增量虚拟磁盘文件；所述元数据偏移量包括每个元数据在最终输出的虚拟磁盘文件流的偏移量，每个元数据对应若干数据块；
存放模块，用于将元数据分为若干组，每组元数据中包含一个、两个或多个元数据；在内存中开辟一块连续区域用以存放某一组元数据；
输出模块，用于扫描内存中的该组元数据，如果该组元数据显示数据有差异，则根据该组元数据信息读取差异数据并输出到虚拟磁盘文件流，且输出差异数据时并不输出该组元数据，只更新内存中的该组元数据；在与该组元数据相应的若干数据块完成差异数据输出后，根据元数据偏移量，输出内存中的该组元数据到虚拟磁盘文件流。
在上述实施例的基础上，优选的，还包括：
头部模块，用于输出增量文件链的头部到虚拟磁盘文件流，所输出的头部包含元数据偏移量。
在上述任意实施例的基础上，优选的，所述存放模块还用于：
将所开辟的连续区域初始化为零。
在上述任意实施例的基础上，优选的，元数据偏移量满足：使元数据位于最终输出的虚拟磁盘文件流的末端。
或者，优选的，元数据偏移量满足：使每个元数据位于最终输出的虚拟磁盘文件流中，且位于该元数据相应的若干数据块之后。
相比现有技术，本发明的有益效果在于：
本发明公开了改进的基于虚拟磁盘文件的流式增量备份方法及装置，扫描增量文件链中虚拟磁盘文件元数据，提前计算好差异数据量，以确定每个元数据在整个输出的虚拟磁盘文件流的偏移量；在内存中开辟一块连续区域用以存放某一组元数据；输出差异数据时并不输出该组元数据，只更新内存中的该组元数据，在该组元数据相应的若干数据块完成差异数据输出后输出内存中的该组元数据，优选的，该元数据在虚拟磁盘文件流中的位置在与之相应的若干数据块之后。本发明不通过文件系统中转，以流的方式直接上传，因此可以解决现有的文件系统中转带来的文件系统本身的不可靠、容量占用大、性能不高的问题；由于开辟的连续区域用于存放某一组元数据而非全部元数据，因此可以減少内存占用，尤其在大文件、元数据量比较大时比较有价值。
附图说明
下面结合附图和实施例对本发明进一步说明。
图1示出了本发明实施例提供的一种改进的基于虚拟磁盘文件的流式增量备份方法的流程示意图；
图2示出了本发明实施例提供的一种改进的基于虚拟磁盘文件的流式增量备份方法的应用场景示意图；
图3示出了本发明实施例提供的一种改进的基于虚拟磁盘文件的流式增量备份装置的结构示意图。
具体实施方式
下面，结合附图以及具体实施方式，对本发明做进一步描述，需要说明的是，在不相冲突的前提下，以下描述的各实施例之间或各技术特征之间可以任意组合形成新的实施例。
具体实施例一
如图1所示，本发明实施例提供了一种改进的基于虚拟磁盘文件的流式增量备份方法，包括：
确定步骤S101，扫描需要备份的增量文件链中虚拟磁盘文件元数据，计算出差异数据量，并根据差异数据量确定元数据偏移量；所述增量文件链为具有链式关系的增量虚拟磁盘文件；所述元数据偏移量包括每个元数据在最终输出的虚拟磁盘文件流的偏移量，每个元数据对应若干数据块；
存放步骤S102，将元数据分为若干组，每组元数据中包含一个、两个或多个元数据；在内存中开辟一块连续区域用以存放某一组元数据；
输出步骤S103，扫描内存中的该组元数据，如果该组元数据显示数据有差异，则根据该组元数据信息读取差异数据并输出到虚拟磁盘文件流，且输出差异数据时并不输出该组元数据，只更新内存中的该组元数据；在与该组元数据相应的若干数据块完成差异数据输出后，根据元数据偏移量，输出内存中的该组元数据到虚拟磁盘文件流。
本发明实施例首先扫描增量文件链中虚拟磁盘文件元数据，提前计算好差异数据量，以确定每个元数据在整个输出的虚拟磁盘文件流的偏移量；在内存中开辟一块连续区域用以存放某一组元数据；输出差异数据时并不输出该组元数据，只更新内存中的该组元数据，在该组元数据相应的若干数据块完成差异数据输出后输出内存中的该组元数据。本发明实施例不通过文件系统中转，以流的方式直接上传，因此可以解决现有的文件系统中转带来的文件系统本身的不可靠、容量占用大、性能不高的问题；由于开辟的连续区域用于存放某一组元数据而非全部元数据，因此可以減少内存占用，尤其在大文件、元数据量比较大时比较有价值。
优选的，所述确定步骤S101后，还可以包括：头部步骤，输出增量文件链的头部到虚拟磁盘文件流，所输出的头部包含元数据偏移量。这样做的好处是，输出文件头时预先输出元数据偏移量。
优选的，所述存放步骤S102，还可以包括：将所开辟的连续区域初始化为零。这样做的好处是，能够防止其他数据污染增量虚拟磁盘文件数据。
本发明实施例对元数据偏移量不做限定，优选的，所述确定步骤S101中，元数据偏移量可以满足：使全部元数据位于最终输出的虚拟磁盘文件流的末端。
或者，元数据偏移量可以满足：使每个元数据位于最终输出的虚拟磁盘文件流中，且位于该元数据相应的若干数据块之后的任意位置；每个元数据的位置可以紧随在与该元数据相应的若干数据块之后，也可以在相应的若干数据块后一段距离，也可以在整个虚拟磁盘文件流的末端。这样做的好处是，使每个输出的元数据在虚拟磁盘文件流中的位置在与之相应的若干数据块之后。
如图2所示，本发明实施例的一个应用场景可以是：云平台中计算节点中有一虚拟机0，本地磁盘D，对应计算节点中的Qcow2Active文件(一种虚拟磁盘文件格式)，在虚拟磁盘文件的链中，存在多个增量文件以及上次备份点(全量文件)，按照本发明实施例中的流式增量备份方法实施增量备份，并不通过文件系统上传到对象存储。
在上述的具体实施例一中，提供了改进的基于虚拟磁盘文件的流式增量备份方法，与之相对应的，本申请还提供改进的基于虚拟磁盘文件的流式增量备份装置。由于装置实施例基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。下述描述的装置实施例仅仅是示意性的。
具体实施例二
如图3所示，本发明实施例提供了一种改进的基于虚拟磁盘文件的流式增量备份装置，包括：
确定模块201，用于扫描需要备份的增量文件链中虚拟磁盘文件元数据，计算出差异数据量，并根据差异数据量确定元数据偏移量；所述增量文件链为具有链式关系的增量虚拟磁盘文件；所述元数据偏移量包括每个元数据在最终输出的虚拟磁盘文件流的偏移量，每个元数据对应若干数据块；
存放模块202，用于将元数据分为若干组，每组元数据中包含一个、两个或多个元数据；在内存中开辟一块连续区域用以存放某一组元数据；
输出模块203，用于扫描内存中的该组元数据，如果该组元数据显示数据有差异，则根据该组元数据信息读取差异数据并输出到虚拟磁盘文件流，且输出差异数据时并不输出该组元数据，只更新内存中的该组元数据；在与该组元数据相应的若干数据块完成差异数据输出后，根据元数据偏移量，输出内存中的该组元数据到虚拟磁盘文件流。
本发明实施例首先扫描增量文件链中虚拟磁盘文件元数据，提前计算好差异数据量，以确定每个元数据在整个输出的虚拟磁盘文件流的偏移量；在内存中开辟一块连续区域用以存放某一组元数据；输出差异数据时并不输出该组元数据，只更新内存中的该组元数据，在该组元数据相应的若干数据块完成差异数据输出后输出内存中的该组元数据。本发明实施例不通过文件系统中转，以流的方式直接上传，因此可以解决现有的文件系统中转带来的文件系统本身的不可靠、容量占用大、性能不高的问题；由于开辟的连续区域用于存放某一组元数据而非全部元数据，因此可以減少内存占用，尤其在大文件、元数据量比较大时比较有价值。
优选的，本发明实施例还可以包括：头部模块，用于输出增量文件链的头部到虚拟磁盘文件流，所输出的头部包含元数据偏移量。
优选的，所述存放模块202还可以用于：将所开辟的连续区域初始化为零。
本发明实施例对元数据偏移量不做限定，优选的，元数据偏移量满足：使元数据位于最终输出的虚拟磁盘文件流的末端。
或者，元数据偏移量满足：使每个元数据位于最终输出的虚拟磁盘文件流中，且位于该元数据相应的若干数据块之后。
本发明从使用目的上，效能上，进步及新颖性等观点进行阐述，其具有的实用进步性，己符合专利法所强调的功能增进及使用要件，本发明以上的说明及附图，仅为本发明的较佳实施例而己，并非以此局限本发明，因此，凡一切与本发明构造，装置，待征等近似、雷同的，即凡依本发明专利申请范围所作的等同替换或修饰等，皆应属本发明的专利申请保护的范围之内。
需要说明的是，在不冲突的情况下，本发明中的实施例及实施例中的特征可以相互组合。尽管本发明已进行了一定程度的描述，明显地，在不脱离本发明的精神和范围的条件下，可进行各个条件的适当变化。可以理解，本发明不限于所述实施方案，而归于权利要求的范围，其包括所述每个因素的等同替换。对本领域的技术人员来说，可根据以上描述的技术方案以及构思，做出其它各种相应的改变以及形变，而所有的这些改变以及形变都应该属于本发明权利要求的保护范围之内。

Claims (10)

1.一种改进的基于虚拟磁盘文件的流式增量备份方法，其特征在于，包括：
确定步骤，扫描需要备份的增量文件链中虚拟磁盘文件元数据，计算出差异数据量，并根据差异数据量确定元数据偏移量；所述增量文件链为具有链式关系的增量虚拟磁盘文件；所述元数据偏移量包括每个元数据在最终输出的虚拟磁盘文件流的偏移量，每个元数据对应若干数据块；
存放步骤，将元数据分为若干组，每组元数据中包含一个、两个或多个元数据；在内存中开辟一块连续区域用以存放某一组元数据；
输出步骤，扫描内存中的该组元数据，如果该组元数据显示数据有差异，则根据该组元数据信息读取差异数据并输出到虚拟磁盘文件流，且输出差异数据时并不输出该组元数据，只更新内存中的该组元数据；在与该组元数据相应的若干数据块完成差异数据输出后，根据元数据偏移量，输出内存中的该组元数据到虚拟磁盘文件流。
2.根据权利要求1所述的改进的基于虚拟磁盘文件的流式增量备份方法，其特征在于，所述确定步骤后，还包括：
头部步骤，输出增量文件链的头部到虚拟磁盘文件流，所输出的头部包含元数据偏移量。
3.根据权利要求1或2所述的改进的基于虚拟磁盘文件的流式增量备份方法，其特征在于，所述存放步骤，还包括：
将所开辟的连续区域初始化为零。
4.根据权利要求1或2所述的改进的基于虚拟磁盘文件的流式增量备份方法，其特征在于，所述确定步骤中，元数据偏移量满足：使元数据位于最终输出的虚拟磁盘文件流的末端。
5.根据权利要求1或2所述的改进的基于虚拟磁盘文件的流式增量备份方法，其特征在于，所述确定步骤中，元数据偏移量满足：使每个元数据位于最终输出的虚拟磁盘文件流中，且位于该元数据相应的若干数据块之后。
6.一种改进的基于虚拟磁盘文件的流式增量备份装置，其特征在于，包括：
确定模块，用于扫描需要备份的增量文件链中虚拟磁盘文件元数据，计算出差异数据量，并根据差异数据量确定元数据偏移量；所述增量文件链为具有链式关系的增量虚拟磁盘文件；所述元数据偏移量包括每个元数据在最终输出的虚拟磁盘文件流的偏移量，每个元数据对应若干数据块；
存放模块，用于将元数据分为若干组，每组元数据中包含一个、两个或多个元数据；在内存中开辟一块连续区域用以存放某一组元数据；
输出模块，用于扫描内存中的该组元数据，如果该组元数据显示数据有差异，则根据该组元数据信息读取差异数据并输出到虚拟磁盘文件流，且输出差异数据时并不输出该组元数据，只更新内存中的该组元数据；在与该组元数据相应的若干数据块完成差异数据输出后，根据元数据偏移量，输出内存中的该组元数据到虚拟磁盘文件流。
7.根据权利要求6所述的改进的基于虚拟磁盘文件的流式增量备份装置，其特征在于，还包括：
头部模块，用于输出增量文件链的头部到虚拟磁盘文件流，所输出的头部包含元数据偏移量。
8.根据权利要求6或7所述的改进的基于虚拟磁盘文件的流式增量备份装置，其特征在于，所述存放模块还用于：
将所开辟的连续区域初始化为零。
9.根据权利要求6或7所述的改进的基于虚拟磁盘文件的流式增量备份装置，其特征在于，元数据偏移量满足：使元数据位于最终输出的虚拟磁盘文件流的末端。
10.根据权利要求6或7所述的改进的基于虚拟磁盘文件的流式增量备份装置，其特征在于，元数据偏移量满足：使每个元数据位于最终输出的虚拟磁盘文件流中，且位于该元数据相应的若干数据块之后。
CN201810736138.6A 2018-07-06 2018-07-06 改进的基于虚拟磁盘文件的流式增量备份方法及装置 Active CN108984342B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810736138.6A CN108984342B (zh) 2018-07-06 2018-07-06 改进的基于虚拟磁盘文件的流式增量备份方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810736138.6A CN108984342B (zh) 2018-07-06 2018-07-06 改进的基于虚拟磁盘文件的流式增量备份方法及装置

Publications (2)

Publication Number Publication Date
CN108984342A CN108984342A (zh) 2018-12-11
CN108984342B true CN108984342B (zh) 2019-07-19

Family

ID=64536324

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810736138.6A Active CN108984342B (zh) 2018-07-06 2018-07-06 改进的基于虚拟磁盘文件的流式增量备份方法及装置

Country Status (1)

Country Link
CN (1) CN108984342B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1567262A (zh) * 2003-06-10 2005-01-19 联想(北京)有限公司 基于数据卷快照的在线数据备份方法
CN101495970A (zh) * 2005-06-24 2009-07-29 信科索尔特公司 用于高性能企业数据保护的系统和方法
US8099572B1 (en) * 2008-09-30 2012-01-17 Emc Corporation Efficient backup and restore of storage objects in a version set
CN104572357A (zh) * 2014-12-30 2015-04-29 清华大学 一种用于hdfs系统的备份和恢复方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106445529A (zh) * 2016-09-27 2017-02-22 乐视控股（北京）有限公司 持续集成服务器的配置信息的备份方法及系统
CN108038201B (zh) * 2017-12-12 2019-05-21 无锡华云数据技术服务有限公司 一种数据整合系统及其分布式数据整合系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1567262A (zh) * 2003-06-10 2005-01-19 联想(北京)有限公司 基于数据卷快照的在线数据备份方法
CN101495970A (zh) * 2005-06-24 2009-07-29 信科索尔特公司 用于高性能企业数据保护的系统和方法
US8099572B1 (en) * 2008-09-30 2012-01-17 Emc Corporation Efficient backup and restore of storage objects in a version set
CN104572357A (zh) * 2014-12-30 2015-04-29 清华大学 一种用于hdfs系统的备份和恢复方法

Also Published As

Publication number Publication date
CN108984342A (zh) 2018-12-11

Similar Documents

Publication Publication Date Title
CN104408091B (zh) 分布式文件系统的数据存储方法及系统
CN106201771B (zh) 数据存储系统和数据读写方法
CN109543455B (zh) 一种区块链的数据归档方法及装置
CN102629247B (zh) 一种数据处理方法、装置和系统
CN109669709A (zh) 一种区块链升级的数据迁移方法及数据迁移系统
CN102982151B (zh) 多个物理文件合并为一个逻辑文件的方法
CN106446159B (zh) 一种存储文件的方法、第一虚拟机及名称节点
CN102622407B (zh) 日志文件操作系统及日志文件管理方法
CN103647850B (zh) 一种分布式版本控制系统的数据处理方法、设备及系统
CN105868286A (zh) 基于分布式文件系统小文件合并的并行追加方法及系统
CN105787012B (zh) 一种提高存储系统处理小文件的方法以及存储系统
CN105955845A (zh) 一种数据恢复方法及装置
CN103942301B (zh) 一种面向多数据类型访问应用的分布式文件系统
CN104156381A (zh) Hadoop分布式文件系统的副本存取方法、装置和Hadoop分布式文件系统
CN107357920A (zh) 一种增量式的多副本数据同步方法及系统
CN109542861A (zh) 一种文件管理方法、装置和系统
US20220374407A1 (en) Multi-tenant partitioning in a time-series database
CN106686095A (zh) 一种基于纠删码技术的数据存储方法及装置
CN104281717A (zh) 一种建立海量id映射关系的方法
CN103473258A (zh) 云存储文件系统
CN104216908A (zh) 互联网数据管理系统及其读写方法
CN108595589A (zh) 一种海量科学数据图片高效存取方法
CN107506466A (zh) 一种小文件存储方法及系统
CN113448946B (zh) 数据迁移方法及装置、电子设备
CN108984342B (zh) 改进的基于虚拟磁盘文件的流式增量备份方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder

Address after: 214000, science and software park, Binhu District, Jiangsu, Wuxi 6

Patentee after: Huayun data holding group Co., Ltd

Address before: 214000, science and software park, Binhu District, Jiangsu, Wuxi 6

Patentee before: WUXI CHINAC DATA TECHNICAL SERVICE Co.,Ltd.

CP01 Change in the name or title of a patent holder