CN103425551B - 数据库分布式备份集中管理方法 - Google Patents
数据库分布式备份集中管理方法 Download PDFInfo
- Publication number
- CN103425551B CN103425551B CN201310328016.0A CN201310328016A CN103425551B CN 103425551 B CN103425551 B CN 103425551B CN 201310328016 A CN201310328016 A CN 201310328016A CN 103425551 B CN103425551 B CN 103425551B
- Authority
- CN
- China
- Prior art keywords
- backup
- database
- logic
- physical
- tasks
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
一种数据库分布式备份集中管理方法,该方法包括:在数据库所在的数据库服务器上挂接备份共享单元存储区;在数据库服务器上挂接备份任务单元存储区;在数据库服务器中执行备份共享单元中的初始化程序,完成数据库分布式备份的自动初始化工作,在挂接的备份任务单元存储区中生成针对所述数据库的备份任务单元;若需要对数据库实施物理备份,则在生成的备份任务单元中设定数据库的物理备份策略,根据设定后的备份任务单元执行物理备份任务;及若需要对数据库实施逻辑备份,则在生成的备份任务单元中设定数据库的逻辑备份策略,根据设定后的逻辑任务模块执行逻辑备份任务。本发明能够方便地实现不同类型数据库的分布式备份集中管理。
Description
技术领域
本发明涉及一种数据库管理系统及方法,尤其涉及一种数据库分布式备份集中管理方法。
背景技术
随着信息时代的来临,确保数据库数据的安全是每个企业及管理者的一项重要职责。保障数据库安全最可靠的手段就是对数据库进行有效的备份。虽然数据库产品一般都带有备份工具,然而,管理众多不同类型数据库的备份,进行灵活的数据交换是相当复杂和困难的。
发明内容
鉴于以上内容,有必要提供一种数据库分布式备份集中管理方法,能够方便地实现不同类型数据库的分布式备份集中管理。
一种数据库分布式备份集中管理方法,应用于大型数据中心数据库服务器和备份管理机中,,该方法包括步骤:在数据库服务器上挂接备份共享单元存储区,该备份共享单元存储区中存储备份共享单元,该备份共享单元提供各种类型数据库的物理备份、逻辑备份所需的备份程序及模板,以及提供自动初始化工作所需的初始化程序;在数据库服务器上挂接备份任务单元存储区,在挂接时,该备份任务单元存储区的内容为空;在数据库服务器中执行备份共享单元中的初始化程序,完成数据库分布式备份的自动初始化工作,在挂接的备份任务单元存储区中生成针对所述数据库的备份任务单元;若需要对数据库实施物理备份,则在生成的备份任务单元中设定数据库的物理备份策略,根据设定后的备份任务单元执行物理备份任务;及若需要对数据库实施逻辑备份,则在生成的备份任务单元中设定数据库的逻辑备份策略,根据设定后的逻辑任务模块执行逻辑备份任务。
本发明采用统一备份模块开放式管理不同类型数据库系统的数据库备份,实现数据库自动全库及增量物理备份、自动不同级别(全库、用户、表等)逻辑备份,同时提供备份策略定制,实现物理备份及逻辑备份数据的自动管理。同时,数据库备份方案如需变动,只需在备份管理机改动一次,所有数据库备份随之自动变更,无需分别变更和部署。本发明为多异构数据库分布式备份集中管理提供了一种新的管理思路,大大降低了管理成本,方便各种数据库间的数据交换。
附图说明
图1是本发明数据库分布式备份集中管理方法较佳实施例的应用环境示意图。
图2是本发明数据库分布式备份集中管理方法较佳实施例的流程图。
图3是备份共享单元的整体架构图。
图4是备份任务单元的整体架构图。
图5是备份任务单元的物理任务模块的细化架构图。
图6是备份任务单元的逻辑任务模块的细化架构图。
主要元件符号说明
备份管理机 | 1 |
数据库服务器 | 2 |
网络 | 3 |
分布式备份程序 | 10 |
存储设备 | 11 |
处理器 | 12 |
如下具体实施方式将结合上述附图进一步说明本发明。
具体实施方式
参阅图1所示,是本发明数据库分布式备份集中管理方法较佳实施例的应用环境示意图。所述数据库分布式备份集中管理方法应用于备份管理机1中。所述备份管理机1通过网络3与多个数据库服务器2相连。所述数据库服务器2中存储不同类型的数据库(例如Oracle、MySQL、SQLServer等,图上未示出)。每个数据库服务器2安装有至少一个数据库。所述备份管理机1是一台数据处理设备(例如服务器),其包括分布式备份程序10、存储设备11及处理器12。所述存储设备11存储分布式备份程序10的程序代码及运行过程中所需的数据。所述处理器12执行所述分布式备份程序10的程序代码以实现所述数据库分布式备份方法,对数据库服务器2中不同类型的数据库进行分布式备份集中管理。
参阅图2所示,是本发明数据库分布式备份集中管理方法较佳实施例的流程图。
步骤S201,在数据库所在的数据库服务器2上挂接备份共享单元存储区。该备份共享单元存储区中存储备份共享单元,该备份共享单元提供各种类型数据库的物理备份、逻辑备份所需的备份程序及模板,以及提供自动初始化工作所需的初始化程序。
图3示出了备份共享单元的整体架构图。所述备份共享单元包括分布式备份初始化模块、物理备份模块及逻辑备份模块。所述分布式备份初始化模块提供所述初始化程序,用于完成数据库分布式备份的自动初始化工作,生成针对所述数据库的备份任务单元(参见图4)。所述物理备份模块包括物理备份子模块及物理备份模板,分别提供用于对数据库进行物理备份的物理备份程序及备份模板。所述逻辑备份模块包括逻辑备份子模块、检查子模块及维护子模块,分别提供用于对数据库进行逻辑备份的逻辑备份程序、对逻辑备份进行检查的检查程序及对逻辑备份进行维护的维护程序。
备份共享单元是数据库集中管理的控制部分,任一数据库需要进行数据库分布式备份时,需要挂接该备份共享单元。
在本实施例中,在数据库服务器2上以只读的方式挂接备份共享单元存储区。数据库服务器2对备份共享单元有只读权限,只能读取备份共享单元的内容,而不能对备份共享单元中的内容进行修改。备份共享单元仅在备份管理机1上有读写权限,备份管理机1可以对备份共享单元中的内容进行设计和修改。上述对备份共享单元的权限设置保证了针对某一类型数据库的备份方案只能被备份管理机1修改,实现了各种数据库的统一备份管理。备份共享单元一经改动,所有数据库备份随之自动变更,无需分别变更和部署。
步骤S202,在数据库服务器2上挂接备份任务单元存储区。在挂接时,该备份任务单元存储区的内容为空,通过下述步骤S203进行初始化。在本实施例中,在数据库服务器2上以读写的方式挂接备份任务单元存储区。
步骤S203,在数据库服务器2中执行备份共享单元的分布式备份初始化模块,完成数据库分布式备份的自动初始化工作,在挂接的备份任务单元存储区中生成针对所述数据库的备份任务单元。在本实施例中,在执行挂接的备份共享单元中的分布式备份初始化模块时,需要输入数据库名及数据库服务器2的IP地址,根据数据库名确定数据库的类型,从而在挂接的备份任务单元存储区中生成针对该类型数据库的备份任务单元。所述自动初始化工作包括:自动生成备份任务单元的各级相应权限的文件夹,自动生成链接文件,自动提取所述数据库的环境变量,及自动生成针对所述数据库的备份程序、检查程序及维护程序等。所述链接文件用于调用挂接的备份共享单元存储区中的备份程序。
图4示出了备份任务单元的整体架构图。所述备份任务单元包括备份任务初始化模块、工作区模块、物理任务模块及逻辑任务模块。
所述备份任务初始化模块用于初始化物理目录的创建,根据备份共享单元提供的备份程序生成备份任务需要的备份模板及初始化环境变量。在本实施例中,所述备份任务初始化模块包括物理目录、备份模板及环境变量三个文件夹,分别用于存储数据库备份的物理目录、备份模板及环境变量。
所述工作区模块用于在对数据库实施物理备份和逻辑备份时存储临时数据。所述临时数据包括临时数据文件、临时日志文件等。在本实施例中,所述工作区模块包括物理备份及逻辑备份两个文件夹,分别用于存储物理备份和逻辑备份的临时数据。
所述物理任务模块是备份任务单元中一个重要的模块,图5示出了物理任务模块的细化架构图。在本实施例中,所述物理任务模块包括物理任务本地化子模块、物理任务数据存储子模块和物理任务日志存储子模块。
所述物理任务本地化子模块针对备份共享单元的使用,补充物理备份中需要的本地参数和变量,使物理备份程序正常运行。在本实施例中,物理任务本地化子模块包括全库备份设置、增量备份设置及归档备份设置,分别用于补充全库备份、增量备份和归档备份所需的本地参数和变量。
所述物理任务数据存储子模块存储各种物理备份数据。在本实施例中,所述物理任务数据存储子模块包括控制文件数据存储、全库备份数据存储、增量备份数据存储及归档备份数据存储,分别用于存储实施物理备份所产生的控制文件数据、全库备份数据、增量备份数据及归档备份数据。
所述物理任务日志存储子模块存储实施物理备份所产生的各种日志。在本实施例中,物理任务日志存储子模块包括物理任务备份日志存储及物理任务检查日志存储,分别用于存储物理备份的备份日志及检查日志。所述物理备份的检查日志可用于自动报警,当物理备份发生异常时自动发出警报。
所述逻辑任务模块是备份任务单元中另一个重要的模块,图6示出了逻辑任务模块的细化架构图。在本实施例中,逻辑任务模块的架构和物理任务模块类似,包括逻辑任务本地化子模块、逻辑任务数据存储子模块和逻辑任务日志存储子模块。
所述逻辑任务本地化子模块是针对备份共享单元的使用,补充逻辑备份中需要的本地参数和变量,使逻辑备份程序正常运行。在本实施例中,逻辑任务本地化子模块包括备份策略设置、维护策略设置及检查策略设置,分别用于补充备份策略、维护策略及检查策略所需的本地参数和变量。
所述逻辑任务数据存储子模块存储各种逻辑备份数据。在本实施例中,逻辑任务数据存储子模块包括全库备份数据存储、用户备份数据存储、组用户备份数据存储、特殊要求备份数据存储及其他备份数据存储,分别用于存储实施逻辑备份所产生的全库备份数据、用户备份数据、组用户备份数据、特殊要求备份数据及其他备份数据。
所述逻辑任务日志存储子模块存储实施物理备份所产生的各种日志。在本实施例中,逻辑任务日志存储子模块包括逻辑任务备份日志存储、逻辑任务维护日志存储及逻辑任务检查日志存储,分别用于存储逻辑备份的备份日志、维护日志及检查日志。所述逻辑备份的检查日志可用于自动报警,当逻辑备份发生异常时自动发出警报。
步骤S204,判断需要对数据库实施物理备份还是逻辑备份。
若需要对数据库实施物理备份,则步骤S205,在生成的备份任务单元的物理任务模块中设定数据库的物理备份策略,根据设定后的物理任务模块执行物理备份任务。所述物理备份策略的设定可以设定物理备份的方式,例如全库备份、增量备份或归档备份,可以设定实施物理备份的时间,例如以指定时间间隔备份或在每天/每周指定的时间备份。所述物理备份策略的设定还可以设定对物理备份进行检查与维护,以及对物理备份异常进行自动报警。在本实施例中,所述物理任务模块包括物理任务本地化子模块,在该物理任务本地化子模块中设定所述物理备份策略。数据库服务器2根据设定后的物理任务模块自动执行物理备份任务,将物理备份数据及物理备份过程产生的各种日志存储在指定的存储目录下。如前所述,所述物理任务数据存储子模块包括控制文件数据存储、全库备份数据存储、增量备份数据存储及归档备份数据存储,分别用于存储控制文件数据、全库备份数据、增量备份数据及归档备份数据。所述物理任务日志存储子模块包括物理任务备份日志存储及物理任务检查日志存储,分别用于存储物理备份的备份日志及检查日志。因此,在数据库服务器2执行物理备份任务后,可以从物理任务数据存储子模块查看物理备份数据,从物理任务日志存储子模块查看物理备份的备份日志及检查日志。
若需要对数据库实施逻辑备份,则步骤S206,在生成的备份任务单元的逻辑任务模块中设定数据库的逻辑备份策略,根据设定后的逻辑任务模块执行逻辑备份任务。所述逻辑备份策略的设定可以设定逻辑备份的方式,例如全库备份、用户备份或表备份,可以设定实施逻辑备份的时间,例如以指定时间间隔备份或在每天/每周指定的时间备份。所述逻辑备份策略的设定还可以设定对逻辑备份进行检查与维护,以及对逻辑备份异常进行自动报警。在本实施例中,所述逻辑任务模块包括逻辑任务本地化子模块,在该逻辑任务本地化子模块中设定所述逻辑备份策略。数据库服务器2根据设定后的逻辑任务模块自动执行逻辑备份任务,将逻辑备份数据及逻辑备份过程产生的各种日志存储在指定的存储目录下。如前所述,所述逻辑任务数据存储子模块包括全库备份数据存储、用户备份数据存储、组用户备份数据存储、特殊要求备份数据存储及其他备份数据存储,分别用于存储全库备份数据、用户备份数据、组用户备份数据、特殊要求备份数据及其他备份数据。所述逻辑任务日志存储子模块包括逻辑任务备份日志存储、逻辑任务维护日志存储及逻辑任务检查日志存储,分别用于存储逻辑备份的备份日志、维护日志及检查日志。因此,在数据库服务器2执行逻辑备份任务后,可以从逻辑任务数据存储子模块查看逻辑备份数据,从逻辑任务日志存储子模块查看逻辑备份的备份日志、维护日志及检查日志。
本发明采用统一备份模块开放式管理不同类型数据库系统的数据库备份,实现数据库自动全库及增量物理备份、自动不同级别(全库、用户、表等)逻辑备份,同时提供备份策略定制,实现物理备份及逻辑备份数据的自动管理。同时,数据库备份方案如需变动,只需在备份管理机1改动一次,所有数据库备份随之自动变更,无需分别变更和部署。本发明为多异构数据库分布式备份集中管理提供了一种新的管理思路,大大降低了管理成本,方便各种数据库间的数据交换。
Claims (8)
1.一种数据库分布式备份集中管理方法,应用于大型数据中心的数据库服务器和备份管理机中,所述数据库服务器中安装有数据库,其特征在于,该方法包括步骤:
在数据库服务器上挂接备份共享单元存储区,该备份共享单元存储区中存储备份共享单元,该备份共享单元提供各种类型数据库的物理备份、逻辑备份所需的备份程序及模板,以及提供自动初始化工作所需的初始化程序;
在数据库服务器上挂接备份任务单元存储区,在挂接时,该备份任务单元存储区的内容为空;
在数据库服务器中执行备份共享单元中的初始化程序,完成数据库分布式备份的自动初始化工作,在挂接的备份任务单元存储区中生成针对所述数据库的备份任务单元,在执行挂接的备份共享单元中的初始化程序时输入数据库名及数据库服务器的IP地址,根据数据库名确定数据库的类型,从而在挂接的备份任务单元存储区中生成针对该类型数据库的备份任务单元,所述自动初始化工作包括:自动生成备份任务单元的各级相应权限的文件夹,自动生成链接文件,自动提取所述数据库的环境变量,及自动生成针对所述数据库的备份程序、检查程序及维护程序,所述链接文件用于调用挂接的备份共享单元存储区中的备份程序;
若需要对数据库实施物理备份,则在生成的备份任务单元中设定数据库的物理备份策略,使得所述数据库服务器根据设定后的备份任务单元执行物理备份任务;及
若需要对数据库实施逻辑备份,则在生成的备份任务单元中设定数据库的逻辑备份策略,使得所述数据库服务器根据设定后的逻辑任务模块执行逻辑备份任务。
2.如权利要求1所述的数据库分布式备份集中管理方法,其特征在于,在数据库服务器上以只读的方式挂接备份共享单元存储区,数据库服务器对备份共享单元有只读权限,备份管理机对备份共享单元有读写权限。
3.如权利要求1所述的数据库分布式备份集中管理方法,其特征在于,在数据库服务器上以读写的方式挂接备份任务单元存储区。
4.如权利要求1所述的数据库分布式备份集中管理方法,其特征在于,所述备份共享单元包括分布式备份初始化模块,所述分布式备份初始化模块提供所述初始化程序。
5.如权利要求1所述的数据库分布式备份集中管理方法,其特征在于,所述备份任务单元包括备份任务初始化模块,用于初始化物理目录的创建,根据备份共享单元提供的备份程序生成备份任务需要的备份模板及初始化环境变量。
6.如权利要求1所述的数据库分布式备份集中管理方法,其特征在于,所述备份任务单元包括工作区模块,用于在对数据库实施物理备份和逻辑备份时存储临时数据。
7.如权利要求1所述的数据库分布式备份集中管理方法,其特征在于,所述备份任务单元包括物理任务模块,当需要对数据库实施物理备份时,在生成的备份任务单元的物理任务模块中设定数据库的物理备份策略。
8.如权利要求1所述的数据库分布式备份集中管理方法,其特征在于,所述备份任务单元包括逻辑任务模块,当需要对数据库实施逻辑备份时,在生成的备份任务单元的逻辑任务模块中设定数据库的逻辑备份策略。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310328016.0A CN103425551B (zh) | 2013-07-31 | 2013-07-31 | 数据库分布式备份集中管理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310328016.0A CN103425551B (zh) | 2013-07-31 | 2013-07-31 | 数据库分布式备份集中管理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103425551A CN103425551A (zh) | 2013-12-04 |
CN103425551B true CN103425551B (zh) | 2016-04-27 |
Family
ID=49650338
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310328016.0A Active CN103425551B (zh) | 2013-07-31 | 2013-07-31 | 数据库分布式备份集中管理方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103425551B (zh) |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103761169B (zh) * | 2014-01-27 | 2017-09-01 | 中国石油天然气股份有限公司 | 石油地质软件数据库的热备份方法及装置 |
CN104809033B (zh) * | 2014-01-27 | 2018-09-07 | 中国移动通信集团河南有限公司 | 一种备份方法及系统 |
CN103929480A (zh) * | 2014-04-11 | 2014-07-16 | 北京智谷睿拓技术服务有限公司 | 基于任务的数据备份方法及数据备份装置 |
CN104899116B (zh) * | 2015-06-11 | 2019-06-04 | 北京京东尚科信息技术有限公司 | 数据备份的方法、源服务器、目标服务器及系统 |
US11030045B2 (en) * | 2015-07-28 | 2021-06-08 | Futurewei Technologies, Inc. | Apparatus and method for utilizing different data storage types to store primary and replicated database directories |
CN105159943A (zh) * | 2015-08-07 | 2015-12-16 | 北京思特奇信息技术股份有限公司 | 一种分布式数据库自动化备份方法及系统 |
CN106547834A (zh) * | 2016-10-11 | 2017-03-29 | 曙光信息产业(北京)有限公司 | 归档映射系统 |
CN109782609A (zh) * | 2017-11-13 | 2019-05-21 | 广东工业大学 | 一种智能家居控制系统 |
CN108446346B (zh) * | 2018-03-07 | 2022-04-15 | 鞍钢集团矿业有限公司 | 一种数据集中备份系统及方法 |
CN108959548B (zh) * | 2018-07-02 | 2023-04-18 | 创新先进技术有限公司 | 业务请求的处理方法及装置 |
CN109086170A (zh) * | 2018-08-15 | 2018-12-25 | 郑州云海信息技术有限公司 | 一种数据库备份恢复方法与装置 |
CN109388525A (zh) * | 2018-10-10 | 2019-02-26 | 国网安徽省电力有限公司信息通信分公司 | 一种数据库备份系统 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0537903A2 (en) * | 1991-10-02 | 1993-04-21 | International Business Machines Corporation | Distributed control system |
CN101667181B (zh) * | 2008-09-05 | 2011-12-21 | 华为技术有限公司 | 一种数据容灾的方法、装置及系统 |
CN101719165B (zh) * | 2010-01-12 | 2014-12-17 | 浪潮电子信息产业股份有限公司 | 一种实现数据库高效快速备份的方法 |
CN102063491A (zh) * | 2010-12-30 | 2011-05-18 | 浪潮集团山东通用软件有限公司 | 可实现跨不同类型数据库数据备份恢复的数据结构和实现方法 |
CN102346784A (zh) * | 2011-11-14 | 2012-02-08 | 苏州阔地网络科技有限公司 | 一种数据库备份的方法及系统 |
CN103020242B (zh) * | 2012-12-19 | 2015-11-25 | 中国人民解放军第二炮兵装备研究院第四研究所 | 基于oracle数据库的数据同步方法 |
-
2013
- 2013-07-31 CN CN201310328016.0A patent/CN103425551B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN103425551A (zh) | 2013-12-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103425551B (zh) | 数据库分布式备份集中管理方法 | |
CN107958057B (zh) | 一种用于异构数据库中数据迁移的代码生成方法及装置 | |
CN108491422B (zh) | 数据库自动化运维管理方法、服务器及存储介质 | |
CN109032824A (zh) | 数据库校验方法、装置、计算机设备和存储介质 | |
CN107391758B (zh) | 数据库切换方法、装置及设备 | |
CN108073146B (zh) | 使用架构表示的要求的自动化处理控制硬件工程规划 | |
CN107315814B (zh) | 一种kdb数据库数据迁移后数据一致性验证方法及系统 | |
CN102236672A (zh) | 一种数据导入方法及装置 | |
Goss et al. | Heading towards big data building a better data warehouse for more data, more speed, and more users | |
CN111124474A (zh) | 一种api版本控制方法及装置 | |
CN109460439A (zh) | 一种数据处理方法、装置、介质和电子设备 | |
CN102306355A (zh) | 一种it运维配置管理系统 | |
CN100492994C (zh) | 一种设备配置参数创建方法及基站单板配置系统 | |
KR20140115108A (ko) | 전력 계통 운영 시스템의 화면 생성 방법 | |
CN108108478B (zh) | 数据格式转换方法、系统及电子设备 | |
CN105139296A (zh) | 一种电网业务数据全生命周期质量管理系统 | |
CN108536822A (zh) | 数据迁移方法、装置、系统及存储介质 | |
JP2006268661A (ja) | データインポート方法およびデータインポート装置 | |
US10228879B1 (en) | System and method for backup and restore of offline disks in mainframe computers | |
US20110029582A1 (en) | Method and device for storing data belonging to an alarm or event message containing multiple attributes | |
CN105426780A (zh) | 应用于操作行为审计系统的分类审计方法及系统 | |
US10305740B2 (en) | System and method for performing mass renaming of list of items at run-time with variable differentiation factor | |
CN116150236A (zh) | 数据同步方法及装置、电子设备、计算机可读存储介质 | |
CN114221935A (zh) | Dns管理系统 | |
CN109271431A (zh) | 数据抽取方法、装置、计算机设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |