CN105608235B - Oracle数据库中备份数据块的重复数据删除方法及系统 - Google Patents

Oracle数据库中备份数据块的重复数据删除方法及系统 Download PDF

Info

Publication number
CN105608235B
CN105608235B CN201610177319.0A CN201610177319A CN105608235B CN 105608235 B CN105608235 B CN 105608235B CN 201610177319 A CN201610177319 A CN 201610177319A CN 105608235 B CN105608235 B CN 105608235B
Authority
CN
China
Prior art keywords
data
cache information
build
block
fingerprint
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610177319.0A
Other languages
English (en)
Other versions
CN105608235A (zh
Inventor
董倩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Eisoo Information Technology Co Ltd
Original Assignee
Shanghai Eisoo Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Eisoo Information Technology Co Ltd filed Critical Shanghai Eisoo Information Technology Co Ltd
Priority to CN201610177319.0A priority Critical patent/CN105608235B/zh
Publication of CN105608235A publication Critical patent/CN105608235A/zh
Application granted granted Critical
Publication of CN105608235B publication Critical patent/CN105608235B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/28Databases characterised by their database models, e.g. relational or object models
    • G06F16/284Relational databases
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21Design, administration or maintenance of databases
    • G06F16/215Improving data quality; Data cleansing, e.g. de-duplication, removing invalid entries or correcting typographical errors

Abstract

本发明提供一种Oracle数据库中备份数据块的重复数据删除方法及系统,包括将初始备份数据块拆分为块头和数据体;生成拼接块头缓存信息,存储拼接块头的数据和缓存信息;生成数据体缓存信息,并存储数据体的指纹和缓存信息;当Oracle数据库的数据文件和日志文件发生变化时,生成再次备份数据块;将再次备份数据块拆分为块头和数据体;生成并存储拼接块头缓存信息;将每个数据体的指纹与已存储的指纹进行比对;若比对成功,则获取并存储所对应的数据体缓存信息;否则生成数据体缓存信息,并存储数据体数据块的指纹和缓存信息。本发明的Oracle数据库中备份数据块的重复数据删除方法及系统可将重复数据块只保留一个副本,从而缩减了磁盘上存储的数据。

Description

Oracle数据库中备份数据块的重复数据删除方法及系统
技术领域
本发明涉及Oracle数据库的技术领域,特别是涉及一种Oracle数据库中备份数据块的重复数据删除方法及系统。
背景技术
随着计算机的不断发展,计算机需要存储的数据量也在迅速增加,数据所占用的物理空间越来越多。
Oracle数据库,又名Oracle RDBMS,是甲骨文公司的一款关系数据库管理系统,其具有系统可移植性好、使用方便、功能强等优点,适用于各类大、中、小、微机环境。故作为大型数据库管理系统,Oracle数据库近年来一直占有世界上高端数据库的最大份额,在保险、银行、电信等众多企业中得到广泛应用。
RMAN(Recovery Manager)是一种用于备份(backup)、还原(restore)和恢复(recover)数据库的Oracle工具。它能够备份整个数据库或数据库部件,如表空间、数据文件、控制文件、归档文件以及Spfile参数文件。RMAN只能用于Oracle8或更高的版本中。
目前,很多企业和用户都会选择RMAN进行数据的备份。RMAN会对Oracle数据块进行相关操作;在数据改变后,每次备份数据都不同。因此,进行多次备份后,会存在多个副本。这就造成了存储空间的浪费,占用了网络带宽。
针对上述情况,需要在最大程度的获取到RMAN数据块后提取出RMAN数据块中相同的数据,并将这些数据只保留一份,以降低磁盘占用空间,减少网络传输。
发明内容
鉴于以上所述现有技术的缺点,本发明的目的在于提供一种Oracle数据库中备份数据块的重复数据删除方法及系统,不依赖于脚本即可提取出Oracle数据库中备份数据块中的重复数据,从数据块级层面保证增量数据最大程度的相似性,通过删除重复数据来减少磁盘上冗余数据,从而降低磁盘占用空间,减少网络传输。
为实现上述目的及其他相关目的,本发明提供一种Oracle数据库中备份数据块的重复数据删除方法,包括以下步骤:步骤S1、导出初始Oracle数据文件和日志文件,生成初始备份数据块;步骤S2、将初始备份数据块拆分为块头和数据体;步骤S3、将所有块头拼接起来得到拼接块头,生成拼接块头缓存信息,并存储拼接块头的数据和缓存信息;计算拆分后的每个数据体的指纹,生成数据体缓存信息,并存储数据体的指纹和缓存信息;步骤S4、当Oracle数据库的数据文件和日志文件发生变化时,导出Oracle数据文件和日志文件,生成再次备份数据块;步骤S5、将再次备份数据块拆分为块头和数据体;步骤S6、将所有块头拼接起来得到拼接块头,生成并存储拼接块头缓存信息;计算拆分后的每个数据体的指纹,并与已存储的指纹进行比对;若比对成功,则获取并存储已存储的指纹所对应的数据体缓存信息;若比对不成功,则生成数据体缓存信息,并存储数据体数据块的指纹和缓存信息。
根据上述的Oracle数据库中备份数据块的重复数据删除方法,其中:通过RMAN脚本导出Oracle数据文件和日志文件。
根据上述的Oracle数据库中备份数据块的重复数据删除方法,其中:拼接块头时,将拆分后获取的所有块头按照先后顺序依次进行拼接,得到拼接块头。
根据上述的Oracle数据库中备份数据块的重复数据删除方法,其中:所述拼接块头缓存信息包括拼接块头的大小、块头的个数和存储位置等;所述数据体缓存信息包括数据体的存储位置和大小。
根据上述的Oracle数据库中备份数据块的重复数据删除方法,其中:采用MD5算法计
算数据体的指纹。
同时,本发明还提供一种Oracle数据库中备份数据块的重复数据删除系统,包括初始导出模块、初始拆分模块、初始备份模块、再次导出模块、再次拆分模块和再次备份模块;
初始导出模块用于导出初始Oracle数据文件和日志文件,生成初始备份数据块;
初始拆分模块用于将初始备份数据块拆分为块头和数据体;
初始备份模块用于将所有块头拼接起来得到拼接块头,生成拼接块头缓存信息,并存储拼接块头的数据和缓存信息;计算拆分后的每个数据体的指纹,生成数据体缓存信息,并存储数据体的指纹和缓存信息;
再次导出模块用于在Oracle数据库的数据文件和日志文件发生变化时,导出Oracle数据文件和日志文件,生成再次备份数据块;
再次导出模块用于将再次备份数据块拆分为块头和数据体;
再次备份模块用于将所有块头拼接起来得到拼接块头,生成并存储拼接块头缓存信息;计算拆分后的每个数据体的指纹,并与已存储的指纹进行比对;若比对成功,则获取并存储已存储的指纹所对应的数据体缓存信息;若比对不成功,则生成数据体缓存信息,并存储数据体数据块的指纹和缓存信息。
根据上述的Oracle数据库中备份数据块的重复数据删除系统,其中:通过RMAN脚本导出Oracle数据文件和日志文件。
根据上述的Oracle数据库中备份数据块的重复数据删除系统,其中:拼接块头时,将拆分后获取的所有块头按照先后顺序依次进行拼接,得到拼接块头。
根据上述的Oracle数据库中备份数据块的重复数据删除系统,其中:所述拼接块头缓存信息包括拼接块头的大小、块头的个数和存储位置等;所述数据体缓存信息包括数据体的存储位置和大小。
根据上述的Oracle数据库中备份数据块的重复数据删除系统,其中:采用MD5算法计算数据体的指纹。
如上所述,本发明的Oracle数据库中备份数据块的重复数据删除方法及系统,具有以下有益效果:
(1)不依赖于备份脚本;
(2)对导出的RMAN数据块进行分割,将相同数据和不相同数据分割开后分别进行识别,使得切分的数据块只有一半的指纹数,减少了指纹存储占据的空间;
(3)对于重复数据块只保留一个副本,以提高了重删率,缩减磁盘上存储的数据;
(4)减少磁盘使用空间和数据传输时间,节省了更多的人力物力。
附图说明
图1显示为本发明的Oracle数据库中备份数据块的重复数据删除方法的流程图;
图2显示为RMAN数据块的结构示意图;
图3显示为RMAN数据块拆分及归类的示意图;
图4显示为本发明的Oracle数据库中备份数据块的重复数据删除系统的结构示意图。
元件标号说明
1 初始导出模块
2 初始拆分模块
3 初始备份模块
4 再次导出模块
5 再次拆分模块
6 再次备份模块
具体实施方式
以下通过特定的具体实例说明本发明的实施方式,本领域技术人员可由本说明书所揭露的内容轻易地了解本发明的其他优点与功效。本发明还可以通过另外不同的具体实施方式加以实施或应用,本说明书中的各项细节也可以基于不同观点与应用,在没有背离本发明的精神下进行各种修饰或改变。
需要说明的是,本实施例中所提供的图示仅以示意方式说明本发明的基本构想,遂图式中仅显示与本发明中有关的组件而非按照实际实施时的组件数目、形状及尺寸绘制,其实际实施时各组件的型态、数量及比例可为一种随意的改变,且其组件布局型态也可能更为复杂。
本发明的Oracle数据库中备份数据块的重复数据删除方法及系统,无需依赖于脚本即可提取出Oracle数据库中备份数据块中的重复数据,从数据块级层面保证增量数据最大程度的相似性,通过删除重复数据来减少磁盘上冗余数据,从而降低了磁盘占用空间,减少了网络传输。
如图1所示,本发明的Oracle数据库中备份数据块的重复数据删除方法包括以下步骤:
步骤S1、导出初始Oracle数据文件和日志文件,生成初始备份数据块。
具体地,通过RMAN脚本导出Oracle数据文件和日志文件,生成RMAN数据块。RMAN能够备份整个数据库或数据库部件,如表空间、数据文件、控制文件、归档文件以及Spfile参数文件等等。
步骤S2、将初始备份数据块拆分为块头和数据体。
其中,拆分是指将数据块进行切片的过程。如图2所示,将每个RMAN数据块可以拆分为块头(head块)和数据体(body块)两部分。
步骤S3、将所有head块拼接起来得到拼接head块,生成拼接head块缓存信息,并存储拼接head块的数据和缓存信息;计算拆分后的每个body块的指纹,生成body块缓存信息,并存储body块的指纹和缓存信息。
其中,拼接head块缓存信息包括拼接head块的大小、head块的个数、存储位置等。body块缓存信息包括body块的存储位置、大小等。优选地,body块的指纹是指标识body块的唯一ID。
如图3所示,对RMAN数据块进行拆分后,将拆分后获取的所有head块按照先后顺序依次进行拼接,得到拼接head块。后续将在拼接head块的基础上生成拼接head块缓存信息。
具体地,采用MD5算法计算body块的唯一ID,即指纹。
步骤S4、当Oracle数据库的数据文件和日志文件发生变化时,导出Oracle数据文件和日志文件,生成再次备份数据块。
步骤S5、将再次备份数据块拆分为head块和body块。
步骤S6、将所有head块拼接起来得到拼接head块,生成并存储拼接head块缓存信息;计算拆分后的每个body块的指纹,并与已存储的指纹进行比对;若比对成功,则获取并存储已存储的指纹所对应的body块缓存信息;若比对不成功,则生成body块缓存信息,并存储body数据块的指纹和缓存信息。
若比对成功,则说明为重复body块,只需获取并存储已存储的指纹所对应的body块缓存信息;若比对不成功,则说明为不重复body块,生成body块缓存信息,并存储body数据块的指纹和缓存信息。
因此,本发明的Oracle数据库中备份数据块的重复数据删除方法对导出的RMAN数据块进行分割,将相同数据和不相同数据分割开后分别进行识别;对于重复数据块只保留一个副本,从而实现了备份数据块的重删率,缩减磁盘上存储的数据。
下面通过具体实施例来阐述本发明的Oracle数据库中备份数据块的重复数据删除方法。其中,该实施例采用的操作系统为RedHat Enterprise 5,Oracle 11gR2,需要备份100G Oracle数据文件以及操作产生的日志文件。
利用本发明的Oracle数据库中备份数据块的重复数据删除方法进行重复数据删除时,包括以下步骤:
1)通过RMAN脚本备份数据文件和日志文件,得到RMAN数据块。
2)将RMAN数据块分离为head块和body块。
3)将head块进行拼接组合,生成拼接head块缓存信息,并将拼接head块的数据和缓存信息进行存储;对拆分后的每个body块进行计算生成指纹,生成body块缓存信息,并存储body的指纹及缓存信息。
4)当Oracle数据库新增10G数据时,通过RMAN脚本备份数据文件和日志文件,得到再次RMAN数据块。
5)将再次RMAN数据块分离为head块和body块。
6)对head块进行拼接组合,生成head块缓存信息进行存储;计算拆分后的每个body块的指纹,并与已存储的指纹进行比对;若比对成功,则获取已存储的指纹所对应的body块缓存信息;若比对不成功,则生成body块缓存信息,并存储body类数据块的指纹和缓存信息。
如图4所示,本发明的Oracle数据库中备份数据块的重复数据删除系统包括初始导出模块1、初始拆分模块2、初始备份模块3、再次导出模块4、再次拆分模块5和再次备份模块6。
初始导出模块1用于导出初始Oracle数据文件和日志文件,生成初始备份数据块。
具体地,通过RMAN脚本导出Oracle数据文件和日志文件,生成RMAN数据块。RMAN能够备份整个数据库或数据库部件,如表空间、数据文件、控制文件、归档文件以及Spfile参数文件等等。
初始拆分模块2用于将初始备份数据块拆分为块头和数据体。
其中,拆分是指将数据块进行切片的过程。如图2所示,将每个RMAN数据块可以拆分为块头(head块)和数据体(body块)两部分。
具体地,将每个RMAN数据块可以拆分为块头(head块)和数据体(body块)两部分。
初始备份模块3用于将所有head块拼接起来得到拼接head块,生成拼接head块缓存信息,并存储拼接head块的数据和缓存信息;计算每个body块的指纹,生成body块缓存信息,并存储body块的指纹和缓存信息。
其中,拼接head块缓存信息包括拼接head块的大小、head块的个数、存储位置等。body块缓存信息包括body块的存储位置、大小等。优选地,body块的指纹是指标识body块的唯一ID。
其中,对RMAN数据块进行拆分后,将拆分后获取的所有head块按照先后顺序依次进行拼接,得到拼接head块。后续将在拼接head块的基础上生成拼接head块缓存信息。
具体地,采用MD5算法计算body块的指纹。
再次导出模块4用于在Oracle数据库的数据文件和日志文件发生变化时,导出Oracle数据文件和日志文件,生成再次备份数据块。
再次拆分模块5用于将再次备份数据块拆分为head块和body块。
再次备份模块6与初始备份模块3相连,用于将所有head块拼接起来得到拼接head块,生成并存储拼接head块缓存信息;计算拆分后的每个body块的指纹,并与已存储的指纹进行比对;若比对成功,则获取并存储已存储的指纹所对应的body块缓存信息;若比对不成功,则生成body块缓存信息,并存储body数据块的指纹和缓存信息。
若比对成功,则说明为重复body块,只需获取并存储已存储的指纹所对应的body块缓存信息;若比对不成功,则说明为不重复body块,生成body块缓存信息,并存储body数据块的指纹和缓存信息。
优选地,初始导出模块和再次导出模块可以集成为一个功能模块,用于导出Oracle数据文件和日志文件。同样的,初始拆分模块和再次拆分模块也可以集成为一个功能模块,用于拆分备份数据为块头和数据体。
因此,本发明的Oracle数据库中备份数据块的重复数据删除系统对导出的RMAN数据块进行分割,将相同数据和不相同数据分割开后分别进行识别;对于重复数据块只保留一个副本,从而实现了备份数据块的重删率,缩减磁盘上存储的数据。
综上所述,本发明的Oracle数据库中备份数据块的重复数据删除方法及系统不依赖于备份脚本;对导出的RMAN数据块进行分割,将相同数据和不相同数据分割开后分别进行识别,使得切分的数据块只有一半的指纹数,减少了指纹存储占据的空间;对于重复数据块只保留一个副本,以提高了重删率,缩减磁盘上存储的数据;减少磁盘使用空间和数据传输时间,节省了更多的人力物力。所以,本发明有效克服了现有技术中的种种缺点而具高度产业利用价值。
上述实施例仅例示性说明本发明的原理及其功效,而非用于限制本发明。任何熟悉此技术的人士皆可在不违背本发明的精神及范畴下,对上述实施例进行修饰或改变。因此,举凡所属技术领域中具有通常知识者在未脱离本发明所揭示的精神与技术思想下所完成的一切等效修饰或改变,仍应由本发明的权利要求所涵盖。

Claims (10)

1.一种Oracle数据库中备份数据块的重复数据删除方法,其特征在于:包括以下步骤:
步骤S1、导出初始Oracle数据文件和日志文件,生成初始备份数据块;
步骤S2、将初始备份数据块拆分为块头和数据体;
步骤S3、将所有块头拼接起来得到拼接块头,生成拼接块头缓存信息,并存储拼接块头的数据和缓存信息;计算拆分后的每个数据体的指纹,生成数据体缓存信息,并存储数据体的指纹和缓存信息;
步骤S4、当Oracle数据库的数据文件和日志文件发生变化时,导出Oracle数据文件和日志文件,生成再次备份数据块;
步骤S5、将再次备份数据块拆分为块头和数据体;
步骤S6、将所有块头拼接起来得到拼接块头,生成并存储拼接块头缓存信息;计算拆分后的每个数据体的指纹,并与已存储的指纹进行比对;若比对成功,则获取并存储已存储的指纹所对应的数据体缓存信息;若比对不成功,则生成数据体缓存信息,并存储数据体数据块的指纹和缓存信息。
2.根据权利要求1所述的Oracle数据库中备份数据块的重复数据删除方法,其特征在于:通过RMAN脚本导出Oracle数据文件和日志文件。
3.根据权利要求1所述的Oracle数据库中备份数据块的重复数据删除方法,其特征在于:拼接块头时,将拆分后获取的所有块头按照先后顺序依次进行拼接,得到拼接块头。
4.根据权利要求1所述的Oracle数据库中备份数据块的重复数据删除方法,其特征在于:所述拼接块头缓存信息包括拼接块头的大小、块头的个数和存储位置;所述数据体缓存信息包括数据体的存储位置和大小。
5.根据权利要求1所述的Oracle数据库中备份数据块的重复数据删除方法,其特征在于:采用MD5算法计算数据体的指纹。
6.一种Oracle数据库中备份数据块的重复数据删除系统,其特征在于:包括初始导出模块、初始拆分模块、初始备份模块、再次导出模块、再次拆分模块和再次备份模块;
初始导出模块用于导出初始Oracle数据文件和日志文件,生成初始备份数据块;
初始拆分模块用于将初始备份数据块拆分为块头和数据体;
初始备份模块用于将所有块头拼接起来得到拼接块头,生成拼接块头缓存信息,并存储拼接块头的数据和缓存信息;计算拆分后的每个数据体的指纹,生成数据体缓存信息,并存储数据体的指纹和缓存信息;
再次导出模块用于在Oracle数据库的数据文件和日志文件发生变化时,导出Oracle数据文件和日志文件,生成再次备份数据块;
再次导出模块用于将再次备份数据块拆分为块头和数据体;
再次备份模块用于将所有块头拼接起来得到拼接块头,生成并存储拼接块头缓存信息;计算拆分后的每个数据体的指纹,并与已存储的指纹进行比对;若比对成功,则获取并存储已存储的指纹所对应的数据体缓存信息;若比对不成功,则生成数据体缓存信息,并存储数据体数据块的指纹和缓存信息。
7.根据权利要求6所述的Oracle数据库中备份数据块的重复数据删除系统,其特征在于:通过RMAN脚本导出Oracle数据文件和日志文件。
8.根据权利要求6所述的Oracle数据库中备份数据块的重复数据删除系统,其特征在于:拼接块头时,将拆分后获取的所有块头按照先后顺序依次进行拼接,得到拼接块头。
9.根据权利要求6所述的Oracle数据库中备份数据块的重复数据删除系统,其特征在于:所述拼接块头缓存信息包括拼接块头的大小、块头的个数和存储位置;所述数据体缓存信息包括数据体的存储位置和大小。
10.根据权利要求6所述的Oracle数据库中备份数据块的重复数据删除系统,其特征在于:采用MD5算法计算数据体的指纹。
CN201610177319.0A 2016-03-25 2016-03-25 Oracle数据库中备份数据块的重复数据删除方法及系统 Active CN105608235B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610177319.0A CN105608235B (zh) 2016-03-25 2016-03-25 Oracle数据库中备份数据块的重复数据删除方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610177319.0A CN105608235B (zh) 2016-03-25 2016-03-25 Oracle数据库中备份数据块的重复数据删除方法及系统

Publications (2)

Publication Number Publication Date
CN105608235A CN105608235A (zh) 2016-05-25
CN105608235B true CN105608235B (zh) 2018-12-14

Family

ID=55988174

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610177319.0A Active CN105608235B (zh) 2016-03-25 2016-03-25 Oracle数据库中备份数据块的重复数据删除方法及系统

Country Status (1)

Country Link
CN (1) CN105608235B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109144773A (zh) * 2017-06-27 2019-01-04 华为技术有限公司 数据备份的方法、装置及设备
CN108664593A (zh) * 2018-05-08 2018-10-16 东软集团股份有限公司 数据一致性校验方法、装置、存储介质及电子设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7539710B1 (en) * 2008-04-11 2009-05-26 International Business Machines Corporation Method of and system for deduplicating backed up data in a client-server environment
CN102156727A (zh) * 2011-04-01 2011-08-17 华中科技大学 一种采用双指纹哈希校验的重复数据删除方法
CN102915278A (zh) * 2012-09-19 2013-02-06 浪潮(北京)电子信息产业有限公司 重复数据删除方法
CN105335530A (zh) * 2015-12-11 2016-02-17 上海爱数信息技术股份有限公司 一种提升大数据块重复数据删除性能的方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8315984B2 (en) * 2007-05-22 2012-11-20 Netapp, Inc. System and method for on-the-fly elimination of redundant data

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7539710B1 (en) * 2008-04-11 2009-05-26 International Business Machines Corporation Method of and system for deduplicating backed up data in a client-server environment
CN102156727A (zh) * 2011-04-01 2011-08-17 华中科技大学 一种采用双指纹哈希校验的重复数据删除方法
CN102915278A (zh) * 2012-09-19 2013-02-06 浪潮(北京)电子信息产业有限公司 重复数据删除方法
CN105335530A (zh) * 2015-12-11 2016-02-17 上海爱数信息技术股份有限公司 一种提升大数据块重复数据删除性能的方法

Also Published As

Publication number Publication date
CN105608235A (zh) 2016-05-25

Similar Documents

Publication Publication Date Title
CN103034659B (zh) 一种重复数据删除的方法和系统
CN107391306B (zh) 一种异构数据库备份文件恢复方法
Meister et al. A study on data deduplication in HPC storage systems
CN105302668B (zh) 一种优化对象存储系统中块设备数据访问性能的方法
CN103345616B (zh) 基于行为分析的指纹存储比对的系统
CN102436408B (zh) 基于Map/Dedup的数据存储云化和云备份方法
CN106021031B (zh) 一种btrfs文件系统的删除数据恢复方法和装置
CN104239443B (zh) 一种序列化数据操作日志的存储方法
CN105205105A (zh) 一种基于storm的数据ETL系统及处理方法
CN102339321A (zh) 具有版本控制的网络文件系统及方法
CN103955530A (zh) 一种在线重复数据删除系统的数据重建优化方法
CN107340971B (zh) 一种数据存储与恢复架构与方法
CN106547641A (zh) 一种基于卷的cdp备份方法
CN105302922B (zh) 一种分布式文件系统快照实现方法
CN109558213A (zh) 管理OpenStack平台的虚拟机快照的方法和装置
CN106844089A (zh) 一种用于恢复树形数据存储的方法与设备
CN106155838B (zh) 一种数据库备份数据恢复方法及装置
CN105608235B (zh) Oracle数据库中备份数据块的重复数据删除方法及系统
CN107315763A (zh) 一种针对Oracle数据库跨平台数据迁移方法
CN109298978A (zh) 一种指定位置的数据库集群的恢复方法及系统
CN105306581A (zh) 一种基于路由器和云盘数据同步的方法
CN110597821B (zh) 数据仓库表结构变更方法及装置
Macko et al. Tracking back references in a write-anywhere file system
CN104820625B (zh) 一种面向信息管理系统的数据记录、备份及恢复方法
CN105787090A (zh) 一种电力数据的olap系统的索引建立方法和系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant