CN101989305A - 数据增量备份方法和系统 - Google Patents
数据增量备份方法和系统 Download PDFInfo
- Publication number
- CN101989305A CN101989305A CN 201010538255 CN201010538255A CN101989305A CN 101989305 A CN101989305 A CN 101989305A CN 201010538255 CN201010538255 CN 201010538255 CN 201010538255 A CN201010538255 A CN 201010538255A CN 101989305 A CN101989305 A CN 101989305A
- Authority
- CN
- China
- Prior art keywords
- data
- backup
- directly
- tables
- file
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种数据增量备份方法和系统，所述方法包括：对所需要备份的数据表进行自定义，直接把数据表的表名填写到业务数据表文件中，同时注明该业务表的数据是增加的还是更新；自定义好所述的所需要备份数据表后，连接所要备份数据库，根据所说自定义好的数据表进行存储过程分析，最终生成可以直接执行的用于插入更新的结构化查询语言SQL脚本语句集；对所生成的SQL脚本语句集进行打包，得到数据恢复文件。本发明可以实现高效、灵活的数据增量备份。
Description
技术领域
本发明涉及数据备份技术领域，特别是涉及数据增量备份方法和系统。
背景技术
数字信息化管理是信息时代的重要技术力量，社会上普遍利用数据库来存储企业信息数据。传统的数据库备份、恢复一般都是利用数据库本身提供的完全备份、差异备份、日志备份等等备份模式。
但是，现有的数据库备份很难实现数据的增量备份或业务数据的选择性备份，难以实现高效的数据备份和恢复。
2009年3月25日公开的中国发明专利申请第200710201769.X号揭露了一种图档缩容备份系统及方法，该方法包括如下步骤：
从模具设计系统中获取需备份图档的名称和该图档的图档数据库；删除该图档数据库中的绘图环境参数，得到新的图档数据库；
1)从该新的图档数据库中获取所有图形的图形信息；
2)从该新的图档数据库中获取所有图形的属性信息；
3)从所述图形的属性信息中获取图形关联信息；
4)获取备份数据库的地址，将备份数据库与模具设计系统建立连接；
5)在该备份数据库中建立一个数据表，该数据表的名称为该图档的名称；及
6)将所获取的图形信息、属性信息及图形关联信息保存至该数据表中。
上述专利申请技术是现代企业为适应本企业特定需要而设计的一种数据备份方法，但是，对于目前日益增长的企业管理需要，仍迫切希望能提供另一种更高效的、可选择、更安全的数据增量备份及恢复方案。
发明内容
本发明主要解决的技术问题是提供一种高效、灵活的数据增量备份方法和系统。
为解决上述技术问题，本发明采用的一个技术方案是：提供一种数据增量备份方法，包括：对所需要备份的数据表进行自定义，直接把数据表的表名填写到业务数据表文件中，同时注明该业务表的数据是增加的还是更新；自定义好所述的所需要备份数据表后，连接所要备份数据库，根据所说自定义好的数据表进行存储过程分析，最终生成可以直接执行的用于插入更新的结构化查询语言SQL脚本语句集；对所生成的SQL脚本语句集进行打包，得到数据恢复文件。
其中，在得到数据恢复文件的步骤之后，在进行数据导入恢复时，包括：连接所要恢复的数据库，读取所述数据恢复文件；解析出所述读取得到的数据恢复文件内容，直接执行数据恢复文件里面的SQL脚本语句集。
其中，所述生成可以直接执行的用于插入更新的SQL脚本语句集的步骤包括：生成可以直接执行的包括插入insert、更新update在内的插入更新的数据源脚本语句。
为解决上述技术问题，本发明采用的另一个技术方案是：提供一种数据增量备份系统，包括：数据表进行自定义单元，用于对所需要备份的数据表进行自定义，直接把数据表的表名填写到业务数据表文件中，同时注明该业务表的数据是增加的还是更新；备份数据格式转化单元，用于在自定义好所述的所需要备份数据表后，连接所要备份数据库，根据所说自定义好的数据表进行存储过程分析，最终生成可以直接执行的用于插入更新的结构化查询语言SQL脚本语句集；数据恢复文件生成单元，用于对所生成的SQL脚本语句集进行打包，得到数据恢复文件。
其中，包括：数据恢复导入单元，用于连接所要恢复的数据库，读取所述数据恢复文件，并解析出所述读取得到的数据恢复文件内容，直接执行数据恢复文件里面的SQL脚本语句集。
其中，所述数据表进行自定义单元和备份数据格式转化单元设置于备份数据库服务器内，所述数据恢复文件生成单元和数据恢复导入单元设置于恢复数据库服务器内。
其中，所述数据表进行自定义单元具体用于通过企业数据分析对所需要备份的数据表进行自定义。
本发明的有益效果是：区别于现有技术数据增量备份及恢复方法效率低、灵活性不足的情况，本技术方案通过备份数据的自定义和数据源的格式转化、数据的增量恢复等一系列的控制，提供了一种易于实现的数据库增量恢复、备份思路，在需要恢复时，直接执行经格式转化的SQL脚本语句集，即可以实现数据库的高效恢复，提高整个数据库的恢复、备份效率，满足企业的信息化管理；并且，由于是对所需要备份的数据表进行自定义，因此企业用户可以根据自己企业的需要，针对性地对数据进行选择性备份、恢复，排除掉不需要备份的数据，因此可进一步实现高效率的数据备份恢复。
具体上，可以通过企业数据分析自定义数据库备份数据表、通过算法把所要备份的原始数据源加工、分析转化成标准的SQL语句集，实现高效、灵活的数据备份、恢复等操作。
附图说明
图1是本发明数据增量备份方法实施例的流程图；
图2是实现图1中方法的其中一种软件架构；
图3是本发明数据增量备份系统实施例的原理框图；
具体实施方式
一起参阅图1和图2，本发明数据增量备份方法实施例包括：
步骤101：预处理，对所需要备份的数据表进行自定义，直接把数据表的表名填写到业务数据表文件中，同时注明该业务表的数据是增加的还是更新；
步骤102：增量备份，即自定义好所述的所需要备份数据表后，连接所要备份数据库，根据所说自定义好的数据表进行存储过程分析，最终生成可以直接执行的用于插入更新的结构化查询语言SQL脚本语句集；
步骤103：制作恢复文件，即对所生成的SQL脚本语句集进行打包，得到数据恢复文件。
上述实施例，通过备份数据的自定义和数据源的格式转化、数据的增量恢复等一系列的控制，提供了一种易于实现的数据库增量恢复、备份思路，在需要恢复时，直接执行经格式转化的SQL脚本语句集，即可以实现数据库的高效恢复，提高整个数据库的恢复、备份效率，满足企业的信息化管理；并且，由于是对所需要备份的数据表进行自定义，因此企业用户可以根据自己企业的需要，针对性地对数据进行选择性备份、恢复，排除掉不需要备份的数据，因此可进一步实现高效率的数据备份恢复。
所述的存储过程分析，本领域技术人员可以理解，可以是业务表主键解析、业务表字段解析、业务表数据记录转化等。
在另一个实施例中，在得到数据恢复文件的步骤之后，在需要进行数据导入恢复时，进一步包括如下步骤：
1)连接所要恢复的数据库，读取所述数据恢复文件；
2)解析出所述读取得到的数据恢复文件内容，直接执行数据恢复文件里面的SQL脚本语句集。
具体操作中，所述生成可以直接执行的用于插入更新的SQL脚本语句集的步骤包括：生成可以直接执行的包括插入insert、更新update在内的插入更新的数据源脚本语句。
图2是实现上述方法的其中一种系统软件结构示意框图。采用软件模式实现，包含几个软件模块1.自定义业务数据表文件2.备份数据的格式转化3.生成备份文件的打包4.备份文件的数据导入恢复。各个软件模块的作用如下：
1.自定义业务数据表文件：根据系统的数据业务特点，可以对所需要备份的数据表进行自定义，也就是说哪些业务数据表需要备份，直接把数据表的表名填写到文件中，同时注明该业务表的数据是增加的还是更新。这个模块可以过滤掉一些系统无需每一次都备份的系统数据表，提高备份跟后期的恢复效率。
2.备份数据的格式转化：先连接所要备份数据库，再根据模块1自定义的数据表；通过一系列的存储过程分析，最终生成可以直接执行的SQL脚本语句集如：insert、update等插入更新的数据源脚本语句。
3.备份文件的打包：根据模块2所生成的SQL脚本语句集进行打包，打包成数据恢复文件，提供恢复。
4.备份文件的数据导入恢复：连接所要恢复的数据库，读取模块3的文件；解析出文件内容，直接执行文件里面的SQL语句集，实现备份数据库高效的、增量的恢复。
参阅图3，在本发明精神下，还提供一种数据增量备份系统实施例，包括：
数据表进行自定义单元，用于对所需要备份的数据表进行自定义，直接把数据表的表名填写到业务数据表文件中，同时注明该业务表的数据是增加的还是更新；
备份数据格式转化单元，用于在自定义好所述的所需要备份数据表后，连接所要备份数据库，根据所说自定义好的数据表进行存储过程分析，最终生成可以直接执行的用于插入更新的结构化查询语言SQL脚本语句集；
数据恢复文件生成单元，用于对所生成的SQL脚本语句集进行打包，得到数据恢复文件。
上述各个单元互相配合，简单高效地实现企业需要的数据备份，由企业自己决定的数据备份。
在更完善的系统中，可以包括数据恢复导入单元，用于连接所要恢复的数据库，读取所述数据恢复文件，并解析出所述读取得到的数据恢复文件内容，直接执行数据恢复文件里面的SQL脚本语句集。
在一个示例性的实施例中，所述数据表进行自定义单元和备份数据格式转化单元设置于备份数据库服务器内，所述数据恢复文件生成单元和数据恢复导入单元设置于恢复数据库服务器内。
在另一个实施例中，所述数据表进行自定义单元具体用于通过企业数据分析对所需要备份的数据表进行自定义。
以上所述仅为本发明的实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。
Claims (7)
1.一种数据增量备份方法，其特征在于，包括：
对所需要备份的数据表进行自定义，直接把数据表的表名填写到业务数据表文件中，同时注明该业务表的数据是增加的还是更新；
自定义好所述的所需要备份数据表后，连接所要备份数据库，根据所说自定义好的数据表进行存储过程分析，最终生成可以直接执行的用于插入更新的结构化查询语言SQL脚本语句集；
对所生成的SQL脚本语句集进行打包，得到数据恢复文件。
2.根据权利要求1所述的数据增量备份方法，其特征在于，得到数据恢复文件的步骤之后，在进行数据导入恢复时，包括：
连接所要恢复的数据库，读取所述数据恢复文件；
解析出所述读取得到的数据恢复文件内容，直接执行数据恢复文件里面的SQL脚本语句集。
3.根据权利要求1所述的数据增量备份方法，其特征在于，所述生成可以直接执行的用于插入更新的SQL脚本语句集的步骤包括：生成可以直接执行的包括插入insert、更新update在内的插入更新的数据源脚本语句。
4.一种数据增量备份系统，其特征在于，包括：
数据表进行自定义单元，用于对所需要备份的数据表进行自定义，直接把数据表的表名填写到业务数据表文件中，同时注明该业务表的数据是增加的还是更新；
备份数据格式转化单元，用于在自定义好所述的所需要备份数据表后，连接所要备份数据库，根据所说自定义好的数据表进行存储过程分析，最终生成可以直接执行的用于插入更新的结构化查询语言SQL脚本语句集；
数据恢复文件生成单元，用于对所生成的SQL脚本语句集进行打包，得到数据恢复文件。
5.根据权利要求4所述的数据增量备份系统，其特征在于，包括：
数据恢复导入单元，用于连接所要恢复的数据库，读取所述数据恢复文件，并解析出所述读取得到的数据恢复文件内容，直接执行数据恢复文件里面的SQL脚本语句集。
6.根据权利要求5所述的数据增量备份系统，其特征在于，所述数据表进行自定义单元和备份数据格式转化单元设置于备份数据库服务器内，所述数据恢复文件生成单元和数据恢复导入单元设置于恢复数据库服务器内。
7.根据权利要求4所述的数据增量备份系统，其特征在于，所述数据表进行自定义单元具体用于通过企业数据分析对所需要备份的数据表进行自定义。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN 201010538255 CN101989305A (zh) | 2010-11-09 | 2010-11-09 | 数据增量备份方法和系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN 201010538255 CN101989305A (zh) | 2010-11-09 | 2010-11-09 | 数据增量备份方法和系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN101989305A true CN101989305A (zh) | 2011-03-23 |
Family
ID=43745840
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN 201010538255 Pending CN101989305A (zh) | 2010-11-09 | 2010-11-09 | 数据增量备份方法和系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN101989305A (zh) |
Cited By (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102393860A (zh) * | 2011-12-06 | 2012-03-28 | 方正国际软件有限公司 | 数据库数据迁移系统 |
| CN103179158A (zh) * | 2011-12-22 | 2013-06-26 | 中国银联股份有限公司 | 一种参数批量同步方法和系统 |
| CN103312743A (zh) * | 2012-03-09 | 2013-09-18 | 盛乐信息技术（上海）有限公司 | 一种数据同步装置和方法 |
| CN103678396A (zh) * | 2012-09-20 | 2014-03-26 | 阿里巴巴集团控股有限公司 | 一种基于数据模型的数据备份方法和装置 |
| CN104166605A (zh) * | 2014-08-18 | 2014-11-26 | 四川航天系统工程研究所 | 基于增量数据文件的数据备份方法及系统 |
| CN104820625A (zh) * | 2015-05-19 | 2015-08-05 | 重庆大学 | 一种面向信息管理系统的数据记录、备份及恢复方法 |
| CN105989162A (zh) * | 2015-03-04 | 2016-10-05 | 银联商务有限公司 | 一种上线数据抽取方法及装置 |
| CN106484560A (zh) * | 2015-08-25 | 2017-03-08 | 阿里巴巴集团控股有限公司 | 数据同步方法及装置 |
| CN106681865A (zh) * | 2017-01-16 | 2017-05-17 | 北京腾凌科技有限公司 | 业务恢复方法及装置 |
| CN108241700A (zh) * | 2016-12-23 | 2018-07-03 | 南京壹进制信息技术股份有限公司 | 一种基于数据重整的快速恢复MySQL逻辑备份的方法 |
| CN108776622A (zh) * | 2018-06-06 | 2018-11-09 | 北京达佳互联信息技术有限公司 | 数据同步方法、装置、计算机设备及存储介质 |
| CN109828865A (zh) * | 2019-01-24 | 2019-05-31 | 北京三快在线科技有限公司 | 数据恢复方法、装置及电子设备 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1517918A (zh) * | 2003-01-17 | 2004-08-04 | 深圳市中兴通讯股分有限公司 | 一种备份和恢复重要数据的方法 |
| EP1715425A2 (en) * | 2005-04-14 | 2006-10-25 | Rajesh Kapur | Method and system for preserving access to a system in case of a disaster |
| CN101719165A (zh) * | 2010-01-12 | 2010-06-02 | 山东高效能服务器和存储研究院 | 一种实现数据库高效快速备份的方法 |
-
2010
- 2010-11-09 CN CN 201010538255 patent/CN101989305A/zh active Pending
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1517918A (zh) * | 2003-01-17 | 2004-08-04 | 深圳市中兴通讯股分有限公司 | 一种备份和恢复重要数据的方法 |
| EP1715425A2 (en) * | 2005-04-14 | 2006-10-25 | Rajesh Kapur | Method and system for preserving access to a system in case of a disaster |
| CN101719165A (zh) * | 2010-01-12 | 2010-06-02 | 山东高效能服务器和存储研究院 | 一种实现数据库高效快速备份的方法 |
Cited By (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102393860A (zh) * | 2011-12-06 | 2012-03-28 | 方正国际软件有限公司 | 数据库数据迁移系统 |
| CN103179158A (zh) * | 2011-12-22 | 2013-06-26 | 中国银联股份有限公司 | 一种参数批量同步方法和系统 |
| CN103179158B (zh) * | 2011-12-22 | 2017-03-01 | 中国银联股份有限公司 | 一种参数批量同步方法和系统 |
| CN103312743A (zh) * | 2012-03-09 | 2013-09-18 | 盛乐信息技术（上海）有限公司 | 一种数据同步装置和方法 |
| CN103678396B (zh) * | 2012-09-20 | 2017-06-13 | 阿里巴巴集团控股有限公司 | 一种基于数据模型的数据备份方法和装置 |
| CN103678396A (zh) * | 2012-09-20 | 2014-03-26 | 阿里巴巴集团控股有限公司 | 一种基于数据模型的数据备份方法和装置 |
| CN104166605A (zh) * | 2014-08-18 | 2014-11-26 | 四川航天系统工程研究所 | 基于增量数据文件的数据备份方法及系统 |
| CN104166605B (zh) * | 2014-08-18 | 2017-04-12 | 四川航天系统工程研究所 | 基于增量数据文件的数据备份方法及系统 |
| CN105989162A (zh) * | 2015-03-04 | 2016-10-05 | 银联商务有限公司 | 一种上线数据抽取方法及装置 |
| CN105989162B (zh) * | 2015-03-04 | 2020-01-31 | 银联商务有限公司 | 一种上线数据抽取方法及装置 |
| CN104820625A (zh) * | 2015-05-19 | 2015-08-05 | 重庆大学 | 一种面向信息管理系统的数据记录、备份及恢复方法 |
| CN106484560A (zh) * | 2015-08-25 | 2017-03-08 | 阿里巴巴集团控股有限公司 | 数据同步方法及装置 |
| CN106484560B (zh) * | 2015-08-25 | 2019-01-15 | 阿里巴巴集团控股有限公司 | 数据同步方法及装置 |
| CN108241700A (zh) * | 2016-12-23 | 2018-07-03 | 南京壹进制信息技术股份有限公司 | 一种基于数据重整的快速恢复MySQL逻辑备份的方法 |
| CN108241700B (zh) * | 2016-12-23 | 2020-04-24 | 南京壹进制信息科技有限公司 | 一种基于数据重整的快速恢复MySQL逻辑备份的方法 |
| CN106681865A (zh) * | 2017-01-16 | 2017-05-17 | 北京腾凌科技有限公司 | 业务恢复方法及装置 |
| CN106681865B (zh) * | 2017-01-16 | 2020-07-07 | 北京腾凌科技有限公司 | 业务恢复方法及装置 |
| CN108776622A (zh) * | 2018-06-06 | 2018-11-09 | 北京达佳互联信息技术有限公司 | 数据同步方法、装置、计算机设备及存储介质 |
| CN109828865A (zh) * | 2019-01-24 | 2019-05-31 | 北京三快在线科技有限公司 | 数据恢复方法、装置及电子设备 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN101989305A (zh) | 数据增量备份方法和系统 | |
| CN102541694B (zh) | 一种数据库备份的方法及装置 | |
| CN103559217B (zh) | 一种面向异构数据库的海量组播数据入库实现方法 | |
| CN102663103B (zh) | 可配置的自动化生成数据库和数据访问的方法 | |
| CN102830995B (zh) | 一种保留用户数据的Android平台软件升级方法 | |
| US8949799B2 (en) | Program log record optimization | |
| CN105138501A (zh) | 一种可配置的动态报表生成方法及系统 | |
| CN104317800A (zh) | 一种海量智能用电数据混合存储系统及方法 | |
| CN111078702B (zh) | 一种sql语句分类管理及统一查询方法和装置 | |
| CN101901265B (zh) | 一种虚拟试验数据对象化管理系统 | |
| CN103823797A (zh) | 基于ftp协议的行业数据库数据实时同步系统 | |
| CN103268270B (zh) | 快照的管理方法和装置 | |
| CN102393860A (zh) | 数据库数据迁移系统 | |
| CN112182001A (zh) | 数据库增量同步至动态es索引库的方法、装置和介质 | |
| CN111367975A (zh) | 一种多协议数据转换处理方法及装置 | |
| CN102779138A (zh) | 实时数据的硬盘存取方法 | |
| CN103699557A (zh) | 报表处理方法及系统 | |
| CN104657387A (zh) | 一种数据查询方法及装置 | |
| CN103106200A (zh) | 非关系型数据库同步系统及双写同步方法 | |
| CN110134646B (zh) | 知识平台服务数据存储与集成方法及系统 | |
| CN103207916B (zh) | 元数据处理的方法和装置 | |
| CN109902070B (zh) | 一种面向WiFi日志数据的解析存储搜索方法 | |
| CN103605766A (zh) | 变电数据接入实时/历史数据库的方法及装置 | |
| CN102752138A (zh) | 异步配置管理方法和网络设备 | |
| CN105630783A (zh) | 一种数据库数据迁移系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C12 | Rejection of a patent application after its publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20110323 |