CN112800031A - 一种数据库备份及文件的定期管理的系统 - Google Patents

一种数据库备份及文件的定期管理的系统 Download PDF

Info

Publication number
CN112800031A
CN112800031A CN202110182080.7A CN202110182080A CN112800031A CN 112800031 A CN112800031 A CN 112800031A CN 202110182080 A CN202110182080 A CN 202110182080A CN 112800031 A CN112800031 A CN 112800031A
Authority
CN
China
Prior art keywords
module
backup
file
database
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110182080.7A
Other languages
English (en)
Inventor
彭寿
邢宝山
官敏
王建青
张贇
丁海彬
潘路华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Kasen Lang Kun Information Technology Ltd By Share Ltd
Original Assignee
Shanghai Kasen Lang Kun Information Technology Ltd By Share Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Kasen Lang Kun Information Technology Ltd By Share Ltd filed Critical Shanghai Kasen Lang Kun Information Technology Ltd By Share Ltd
Priority to CN202110182080.7A priority Critical patent/CN112800031A/zh
Publication of CN112800031A publication Critical patent/CN112800031A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21—Design, administration or maintenance of databases
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14—Error detection or correction of the data by redundancy in operation
    • G06F11/1402—Saving, restoring, recovering or retrying
    • G06F11/1446—Point-in-time backing up or restoration of persistent data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/18—File system types
    • G06F16/182—Distributed file systems
    • G06F16/184—Distributed file systems implemented as replicated file system
    • G06F16/1844—Management specifically adapted to replicated file systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Quality & Reliability (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

一种数据库备份及文件的定期管理的系统，它涉及数据库备份技术领域，它包括数据备份模块、文件存储模块，数据库模块连接数据备份模块，数据备份模块与文件存储模块相连接，数据库连接模块连接备份模块，备份模块通过文件缓存模块与文件验证模块连接，本发明有益效果为：可以针对不同种类、不同版本的数据库设置不同的备份方式，集成多种数据库的备份工具，可以一套系统应用于企业内部的各种数据库的备份，本系统的文件管理模块可以转储临时备份文件，已经过期备份文件的删除，本系统体积小，操作简单，界面清爽，一套系统就能应对众多企业的备份任务。

Description

一种数据库备份及文件的定期管理的系统
技术领域
本发明涉及数据库备份技术领域，具体涉及一种数据库备份及文件的定期管理的系统。
背景技术
数据库是“按照数据结构来组织、存储和管理数据的仓库”。是一个长期存储在计算机内的、有组织的、可共享的、统一管理的大量数据的集合，信息技术的发展和电子商务范围的急剧扩张，几乎所有的企业都面临了一个困境，公司的使用的数据库种类越来越多，数据库的版本也是各不相同，使得对数据库的备份还原等操作变得异常困难，往往需要人工挨个备份或者需要运行多个备份软件，但是各软件厂商的功能往往良莠不齐，很难做到统一管理。对于备份的数据，也无法确定其完整性。
备份文件的管理也是诸多企业需要面对的问题，往往一次完全备份都要占用到几十或者上百个G的容量，一般的文件服务器的容量也就几个TB而已，很容易空间不够而导致的备份失败。而且这些备份动作一旦失败，也很少能够第一时间通知运维人员，往往信息滞后的很严重，当运维人员发现备份失败的时候，往往已经是几天以后了，如果这个期间发生数据丢失等情况，所造成的损失将是非常严重的。
发明内容
本发明的目的在于针对现有技术中不足与缺点，提供一种数据库备份及文件的定期管理的系统，可以针对不同种类、不同版本的数据库设置不同的备份方式，集成多种数据库的备份工具，可以一套系统应用于企业内部的各种数据库的备份，本系统的文件管理模块可以转储临时备份文件，已经过期备份文件的删除，本系统体积小，操作简单，界面清爽，一套系统就能应对众多企业的备份任务。
为实现上述目的，本发明采用以下技术方案是：一种数据库备份及文件的定期管理的系统，它包括数据备份模块2、文件存储模块3，所述数据库模块1连接数据备份模块2，所述数据备份模块2与文件存储模块3相连接，所述数据备份模块2包括了数据库连接模块21、定时任务模块22、备份模块23、文件管理模块24、日志模块25、文件缓存模块26、文件传输模块27、文件验证模块28、邮件模块29，所述数据库连接模块21连接备份模块23，所述备份模块23通过文件缓存模块26与文件验证模块28连接，所述文件验证模块28连接至邮件模块29，所述备份模块23与定时任务模块22连接，所述日志模块25连接文件缓存模块26，所述文件缓存模块26与文件传输模块27连接，所述备份模块23与文件管理模块24相互连接。
更为优化的，所述数据库模块1包括了Oracle数据库模块11、Mysql数据库模块12、其他数据库模块13，所述Oracle数据库模块11、Mysql数据库模块12及其他数据库模块13连接数据备份模块2。
更为优化的，所述日志模块25连接定时任务模块22、备份模块23、文件缓存模块26、文件验证模块28及邮件模块29。
更为优化的，所述数据库模块1通过数据库连接模块21与备份模块23进行连接。
更为优化的，所述文件缓存模块26通过文件传输模块27连接文件存储模块3。
更为优化的，所述数据库模块1与数据备份模块2通过TCP协议连接。
更为优化的，所述数据备份模块2与文件存储模块3为WiFi无线连接。
更为优化的，所述文件存储模块3上设有存储软件模块301，存储软件模块301可将存储以共享盘的方式挂载都备份系统的服务器上，方便备份系统便捷的处理备份文件。
本发明的工作原理：通过定时任务模块22，可以设定备份任务，定时任务模块22通过内置的时间模块选择需要备份的时间，数据库连接模块21可以远程连接到数据库模块1，查询需要备份的数据库信息，即Oracle数据库模块11、Mysql数据库模块12与其他数据库模块13，在选择需要备份的数据库保存即可，而到了备份时间时，定时任务模块22将会自动触发备份模块23，备份模块23需调用数据库连接模块21，通过使用数据库密码的方式，远程登录数据库，然后导出数据库，通过文件缓存模块26，将数据存在本地上，当备份完成之后，文件传输模块27会将备份在本地的缓存文件通过TCP的方式传输到文件存储模块3上。当文件传输完成，文件验证模块28会验证文件的完整性，两边机器的MD5值是否变动，此时邮件模块29会自动发送备份成功的邮件到管理员邮箱，其中，所有的操作都会通过日志模块25记录在本地文件中，而存储软件模块301可将存储以共享盘的方式挂载都备份系统的服务器上，方便备份系统便捷的处理备份文件。
采用上述技术方案后，本发明有益效果为：可以针对不同种类、不同版本的数据库设置不同的备份方式，集成多种数据库的备份工具，可以一套系统应用于企业内部的各种数据库的备份，本系统的文件管理模块可以转储临时备份文件，已经过期备份文件的删除，本系统体积小，操作简单，界面清爽，一套系统就能应对众多企业的备份任务。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1是本发明的结构示意图。
附图标记说明：数据库模块1、数据备份模块2、文件存储模块3、Oracle数据库模块11、Mysql数据库模块12、其他数据库模块13、数据库连接模块21、定时任务模块22、备份模块23、文件管理模块24、日志模块25、文件缓存模块26、文件传输模块27、文件验证模块28、邮件模块29、存储软件模块301。
具体实施方式
参看图1所示，本具体实施方式采用的技术方案是：它包括数据备份模块2、文件存储模块3，所述数据库模块1连接数据备份模块2，所述数据备份模块2与文件存储模块3相连接，所述数据备份模块2包括了数据库连接模块21、定时任务模块22、备份模块23、文件管理模块24、日志模块25、文件缓存模块26、文件传输模块27、文件验证模块28、邮件模块29，所述数据库连接模块21连接备份模块23，所述备份模块23通过文件缓存模块26与文件验证模块28连接，所述文件验证模块28连接至邮件模块29，所述备份模块23与定时任务模块22连接，所述日志模块25连接文件缓存模块26，所述文件缓存模块26与文件传输模块27连接，所述备份模块23与文件管理模块24相互连接。
所述数据库模块1包括了Oracle数据库模块11、Mysql数据库模块12、其他数据库模块13，所述Oracle数据库模块11、Mysql数据库模块12及其他数据库模块13连接数据备份模块2，所述日志模块25连接定时任务模块22、备份模块23、文件缓存模块26、文件验证模块28及邮件模块29，所述数据库模块1通过数据库连接模块21与备份模块23进行连接，所述文件缓存模块26通过文件传输模块27连接文件存储模块3，所述数据库模块1与数据备份模块2通过TCP协议连接，所述数据备份模块2与文件存储模块3为WiFi无线连接，所述文件存储模块3上设有存储软件模块301，存储软件模块301可将存储以共享盘的方式挂载都备份系统的服务器上，方便备份系统便捷的处理备份文件。
本发明的工作原理：通过定时任务模块22，可以设定备份任务，定时任务模块22通过内置的时间模块选择需要备份的时间，数据库连接模块21可以远程连接到数据库模块1，查询需要备份的数据库信息，即Oracle数据库模块11、Mysql数据库模块12与其他数据库模块13，在选择需要备份的数据库保存即可，而到了备份时间时，定时任务模块22将会自动触发备份模块23，备份模块23需调用数据库连接模块21，通过使用数据库密码的方式，远程登录数据库，然后导出数据库，通过文件缓存模块26，将数据存在本地上，当备份完成之后，文件传输模块27会将备份在本地的缓存文件通过TCP的方式传输到文件存储模块3上。当文件传输完成，文件验证模块28会验证文件的完整性，两边机器的MD5值是否变动，此时邮件模块29会自动发送备份成功的邮件到管理员邮箱，其中，所有的操作都会通过日志模块25记录在本地文件中，而存储软件模块301可将存储以共享盘的方式挂载都备份系统的服务器上，方便备份系统便捷的处理备份文件。
以上所述，仅用以说明本发明的技术方案而非限制，本领域普通技术人员对本发明的技术方案所做的其它修改或者等同替换，只要不脱离本发明技术方案的精神和范围，均应涵盖在本发明的权利要求范围当中。

Claims (8)

1.一种数据库备份及文件的定期管理的系统，其特征在于：它包括数据备份模块(2)、文件存储模块(3)，所述数据库模块(1)连接数据备份模块(2)，所述数据备份模块(2)与文件存储模块(3)相连接，所述数据备份模块(2)包括了数据库连接模块(21)、定时任务模块(22)、备份模块(23)、文件管理模块(24)、日志模块(25)、文件缓存模块(26)、文件传输模块(27)、文件验证模块(28)、邮件模块(29)，所述数据库连接模块(21)连接备份模块(23)，所述备份模块(23)通过文件缓存模块(26)与文件验证模块(28)连接，所述文件验证模块(28)连接至邮件模块(29)，所述备份模块(23)与定时任务模块(22)连接，所述日志模块(25)连接文件缓存模块(26)，所述文件缓存模块(26)与文件传输模块(27)连接，所述备份模块(23)与文件管理模块(24)相互连接。
2.根据权利要求1所述的一种数据库备份及文件的定期管理的系统，其特征在于：所述数据库模块(1)包括了Oracle数据库模块(11)、Mysql数据库模块(12)、其他数据库模块(13)，所述Oracle数据库模块(11)、Mysql数据库模块(12)及其他数据库模块(13)连接数据备份模块(2)。
3.根据权利要求1所述的一种数据库备份及文件的定期管理的系统，其特征在于：所述日志模块(25)连接定时任务模块(22)、备份模块(23)、文件缓存模块(26)、文件验证模块(28)及邮件模块(29)。
4.根据权利要求1所述的一种数据库备份及文件的定期管理的系统，其特征在于：所述数据库模块(1)通过数据库连接模块(21)与备份模块(23)进行连接。
5.根据权利要求1所述的一种数据库备份及文件的定期管理的系统，其特征在于：所述文件缓存模块(26)通过文件传输模块(27)连接文件存储模块(3)。
6.根据权利要求1所述的一种数据库备份及文件的定期管理的系统，其特征在于：所述数据库模块(1)与数据备份模块(2)通过TCP协议连接。
7.根据权利要求1所述的一种数据库备份及文件的定期管理的系统，其特征在于：所述数据备份模块(2)与文件存储模块(3)为WiFi无线连接。
8.根据权利要求1所述的一种数据库备份及文件的定期管理的系统，其特征在于：所述文件存储模块(3)上设有存储软件模块(301)。
CN202110182080.7A 2021-02-08 2021-02-08 一种数据库备份及文件的定期管理的系统 Pending CN112800031A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110182080.7A CN112800031A (zh) 2021-02-08 2021-02-08 一种数据库备份及文件的定期管理的系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110182080.7A CN112800031A (zh) 2021-02-08 2021-02-08 一种数据库备份及文件的定期管理的系统

Publications (1)

Publication Number Publication Date
CN112800031A true CN112800031A (zh) 2021-05-14

Family

ID=75815061

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110182080.7A Pending CN112800031A (zh) 2021-02-08 2021-02-08 一种数据库备份及文件的定期管理的系统

Country Status (1)

Country Link
CN (1) CN112800031A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113220506A (zh) * 2021-05-28 2021-08-06 中国工商银行股份有限公司 一种终端设备的数据处理方法及装置
CN117519031A (zh) * 2023-11-22 2024-02-06 河北燃气有限公司 一种scada系统实时数据转储方法和系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105930228A (zh) * 2016-04-06 2016-09-07 广州唯品会信息科技有限公司 数据备份方法及系统
CN108446346A (zh) * 2018-03-07 2018-08-24 鞍钢集团矿业有限公司 一种数据集中备份系统及方法
CN109325075A (zh) * 2018-08-30 2019-02-12 黄疆 一种基于定时备份的Oracle及时挂载恢复系统及方法
CN110309226A (zh) * 2018-03-16 2019-10-08 厦门靠谱云股份有限公司 一种云数据库统一备份与恢复系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105930228A (zh) * 2016-04-06 2016-09-07 广州唯品会信息科技有限公司 数据备份方法及系统
CN108446346A (zh) * 2018-03-07 2018-08-24 鞍钢集团矿业有限公司 一种数据集中备份系统及方法
CN110309226A (zh) * 2018-03-16 2019-10-08 厦门靠谱云股份有限公司 一种云数据库统一备份与恢复系统
CN109325075A (zh) * 2018-08-30 2019-02-12 黄疆 一种基于定时备份的Oracle及时挂载恢复系统及方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113220506A (zh) * 2021-05-28 2021-08-06 中国工商银行股份有限公司 一种终端设备的数据处理方法及装置
CN117519031A (zh) * 2023-11-22 2024-02-06 河北燃气有限公司 一种scada系统实时数据转储方法和系统

Similar Documents

Publication Publication Date Title
CN102955720B (zh) 一种提高ext文件系统稳定性的方法
USRE47106E1 (en) High-performance log-based processing
US7389314B2 (en) Database backup, refresh and cloning system and method
US7539703B2 (en) Setup method for disaster recovery system
US7865678B2 (en) Remote copy system maintaining consistency
CN112800031A (zh) 一种数据库备份及文件的定期管理的系统
CN105930228B (zh) 数据备份方法及系统
WO2019047479A1 (zh) 一种普适多源异构大规模数据同步系统
US20150074052A1 (en) Method and system of stateless data replication in a distributed database system
CN110442535B (zh) 提高分布式固态盘键值缓存系统可靠性的方法及系统
US10747465B2 (en) Preserving replication to a storage object on a storage node
CN102033786A (zh) 一种对象存储系统中修复副本一致性的方法
CN110609813A (zh) 一种数据存储系统及方法
WO2021109777A1 (zh) 一种数据文件的导入方法及装置
CN113961546A (zh) 一种支持在线分析统计的实时查询库设计方法
CN104156369A (zh) 一种数据库镜像制作方法和一种数据库
WO2020094063A1 (zh) 存储数据的方法、装置、存储介质及电子装置
CN103942123A (zh) 一种反向数据抓取实现云容灾备份的方法及系统
CN110311817B (zh) 用于Kubernetes集群的容器日志处理系统
US7089446B2 (en) Method, system, and article of manufacture for creating a consistent copy
CN116416085A (zh) 换电站的云管理方法、系统、服务器及存储介质
CN111914032A (zh) 应用于交通工具自动监控系统的数据处理装置和方法
CN101799780A (zh) 配置信息文件处理方法、系统及服务器、虚拟磁带库设备
CN111143280B (zh) 一种数据调度方法、系统、装置及存储介质
CN210244340U (zh) 一种数据库异地备份系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20210514

RJ01 Rejection of invention patent application after publication