CN111897680B - 一种大楼数据中心平台搭建远程容灾备份系统 - Google Patents
一种大楼数据中心平台搭建远程容灾备份系统 Download PDFInfo
- Publication number
- CN111897680B CN111897680B CN202011051538.7A CN202011051538A CN111897680B CN 111897680 B CN111897680 B CN 111897680B CN 202011051538 A CN202011051538 A CN 202011051538A CN 111897680 B CN111897680 B CN 111897680B
- Authority
- CN
- China
- Prior art keywords
- data
- backup
- unit
- storage
- data center
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1448—Management of the data involved in backup or backup restore
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/60—Protecting data
- G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
- G06F21/6218—Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
- G06F21/6272—Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database by registering files or documents with a third party
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Bioethics (AREA)
- Computer Security & Cryptography (AREA)
- Software Systems (AREA)
- Computer Hardware Design (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Databases & Information Systems (AREA)
- Quality & Reliability (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明属于信息安全技术领域,尤其涉及一种大楼数据中心平台搭建远程容灾备份系统,包括存储与路径选择单元、数据压缩存储单元和数据交互平台建立单元,存储与路径选择单元包括备份存储位置选择评估单元和数据存储路径记录单元,数据压缩存储单元用于对需要备份的数据进行压缩存储,数据交互平台建立单元用于对备份数据进行解压建立新的大数据中心数据交互平台。将数据进行压缩传输存储在远程容灾备份大数据中心中,在大数据中心出现故障损坏导致数据丢失平台崩溃时,远程容灾备份大数据中心将备份的压缩数据进行解压,并且快速的建立新的大数据中心平台。
Description
技术领域
本发明属于信息安全技术领域,具体为一种大楼数据中心平台搭建远程容灾备份系统。
背景技术
大数据通常用来形容一个公司创造的大量非结构化数据和半结构化数据, 这些数据在下载到关系型数据库用于分析时会花费过多时间和金钱。大数据分析常和云计算联系到一起。大数据需要持殊的技术,以有效地处理大量的容忍经过时间内的数据。适用于大数据的技术,包括大规模并行处理数据库、数据挖掘、分布式文件系统、分布式数据库、云计算平台、互联网和可扩展的存储系统。大数据技术的战略意义不在于掌握庞大的数据信息,而在于对这些含有意义的数据进行专业化处理。
但是大数据在存储的时候不仅对大数据中心等级有对应的要求,还会对数据安全存储有着很高的要求。现有的大数据中心用于数据保护的容灾系统多是利用大数据中心本地设备对数据进行存储保护,这样任然容易导致数据丢失,也难以处理大数据中心故障导致的数据丢失,同样在现有的容灾备份系统中没有对容灾备份数据进行及时的保护,任然存在极高的风险。
发明内容
本发明的目的在于提供一种大楼数据中心平台搭建远程容灾备份系统,以解决上述背景技术中提出的问题。
为实现上述目的,本发明提供如下技术方案:
一种大楼数据中心平台搭建远程容灾备份系统,包括存储与路径选择单元、数据压缩存储单元和数据交互平台建立单元,所述存储与路径选择单元包括备份存储位置选择评估单元和数据存储路径记录单元,所述数据压缩存储单元用于对需要备份的数据进行压缩存储,所述数据交互平台建立单元用于对备份数据进行解压建立新的大数据中心数据交互平台,所述备份存储位置选择评估单元用于评估选择备份存储位置,所述数据存储路径记录单元用于记录数据传输路径与存储位置。
优选的,所述备份存储位置选择评估单元包括数据传输存储速度预测评估模块和合理备份大数据中心评估模块,所述数据传输存储速度预测评估模块计算公式为:
其中,是第m号传输节点计算资源第k次预测执行速度, 为第k次预测时的系统负载程度,指第m号传输节点计算第k次实际的执行速度, 是在不同云环境中调节经验值和预制值的比重的一个调节参数, 是第m号传输节点计算资源第k+1次预测执行速度。
优选的,所述合理备份大数据中心评估模块计算用于数据备份的大数据中心合理参数ρ′的计算公式为:
优选的,所述数据存储路径记录单元设有存储单元,所述存储单元存储数据的发送位置信息、接受位置信息和传输路径节点位置信息。
优选的,所述存储与路径选择单元的工作步骤为:
步骤S1:接收到上传数据,计算可用于合理备份数据的大数据中心参数ρ′;
步骤S2:选取参数ρ′数值最大值对应的大数据中心作为用于合理备份的大数据中心;
步骤S3:将数据的发送位置信息、接受位置信息和传输路径节点位置信息记录在数据存储路径记录单元中的存储单元内。
优选的,所述数据压缩存储单元采用哈夫曼编码方式对数据进行无损压缩。
优选的,所述数据压缩存储单元的工作流程为:
步骤S4:统计备份数据中各个字符出现的频率,建立备份数据哈夫曼树;
步骤S5:将哈夫曼树存入备份数据并且重新编码;
步骤S6:将重新编码的压缩数据存储到用于备份的大数据中心。
优选的,所述数据交互平台建立单元包括数据解压单元、备份数据平台建立单元和数据交互通道恢复单元,所述数据解压单元用于解压压缩的备份数据,所述备份数据平台建立单元用于将解压的备份数据集中建库形成备份数据平台,所述数据交互通道恢复单元获取存储单元存储的数据的发送位置信息、接受位置信息和传输路径节点位置信息并建立新的数据通道。
优选的,所述存储与路径选择单元在备份数据解码过程为解码备份数据评估选择备份大数据中心。
与现有技术相比,本发明的有益效果是:本发明在使用时通过存储与路径选择单元对远距离大数据中心进行评估选择,选取匹配度高安全程度强便于数据传输备份的备份大数据中心作为现有大数据中心的远程容灾备份大数据中心,对数据进行压缩传输存储在远程容灾备份大数据中心中,在大数据中心出现故障损坏导致数据丢失平台崩溃时,远程容灾备份大数据中心将备份的压缩数据进行解压,并且快速的建立新的大数据中心平台,建立新的数据传输通道方便数据交互,同时对远程容灾大数据中心平台数据再次选取再次的远程容灾大数据中心进行备份存储。
附图说明
图1为本发明大数据中心平台远程容灾备份系统结构示意图;
图2为本发明存储与路径选择单元结构示意图;
图3为本发明备份存储位置选择单元结构示意图:
图4为本发明数据存储单元工作流程示意图:
图5为本发明存储与路径选择单元工作流程示意图;
图6为本发明数据交互平台建立单元结构示意图。
图中:1存储与路径选择单元、101备份存储位置选择评估单元、1011数据传输存储速度预测评估模块、1012合理备份大数据中心评估模块、102数据存储路径记录单元、1021存储单元、2数据压缩存储单元、3数据交互平台建立单元、301数据解压单元、302备份数据平台建立单元、303数据交互通道恢复单元。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1-6,本发明提供一种技术方案:
一种大楼数据中心平台搭建远程容灾备份系统,包括存储与路径选择单元1、数据压缩存储单元2和数据交互平台建立单元3,存储与路径选择单元1包括备份存储位置选择评估单元101和数据存储路径记录单元102,数据压缩存储单元2用于对需要备份的数据进行压缩存储,数据交互平台建立单元3用于对备份数据进行解压建立新的大数据中心数据交互平台,备份存储位置选择评估单元101用于评估选择备份存储位置,数据存储路径记录单元102用于记录数据传输路径与存储位置。
备份存储位置选择评估单元101包括数据传输存储速度预测评估模块1011和合理备份大数据中心评估模块1012,数据传输存储速度预测评估模块1011计算公式为:
其中, 是第m号传输节点计算资源第k次预测执行速度, 为第k次预测时的系统负载程度, 指第m号传输节点计算第k次实际的执行速度, 是在不同云环境中调节经验值和预制值的比重的一个调节参数, 是第m号传输节点计算资源第k+1次预测执行速度。预测节点对于数据传输的速度,来选择一个合适的备份容灾大数据中心来存储备份压缩数据,同时结合大数据中心的安全等级判定参数 和大数据中心的数据容纳能力s能够直观反映出用于备份容灾的大数据中心的适合程度。
合理备份大数据中心评估模块1012计算用于数据备份的大数据中心合理参数ρ′的计算公式为:
数据存储路径记录单元102设有存储单元1021,存储单元1021存储数据的发送位置信息、接受位置信息和传输路径节点位置信息。存储与路径选择单元1在备份数据解码过程为解码备份数据评估选择备份大数据中心。存储与路径选择单元1的工作步骤为:
步骤S1:接收到上传数据,计算可用于合理备份数据的大数据中心参数ρ′;
步骤S2:选取参数ρ′数值最大值对应的大数据中心作为用于合理备份的大数据中心;
步骤S3:将数据的发送位置信息、接受位置信息和传输路径节点位置信息记录在数据存储路径记录单元102中的存储单元1021内。
数据压缩存储单元2采用哈夫曼编码方式对数据进行无损压缩。数据压缩存储单元2的工作流程为:
步骤S4:统计备份数据中各个字符出现的频率,建立备份数据哈夫曼树;
步骤S5:将哈夫曼树存入备份数据并且重新编码;
步骤S6:将重新编码的压缩数据存储到用于备份的大数据中心。
数据交互平台建立单元3包括数据解压单元301、备份数据平台建立单元302和数据交互通道恢复单元303,数据解压单元301用于解压压缩的备份数据,备份数据平台建立单元302用于将解压的备份数据集中建库形成备份数据平台,数据交互通道恢复单元303获取存储单元1021存储的数据的发送位置信息、接受位置信息和传输路径节点位置信息并建立新的数据通道。
本发明的具体工作流程为:使用时通过存储与路径选择单元1对远距离大数据中心进行评估选择,选取匹配度高安全程度强便于数据传输备份的备份大数据中心作为现有大数据中心的远程容灾备份大数据中心,对数据进行压缩传输存储在远程容灾备份大数据中心中,在大数据中心出现故障损坏导致数据丢失平台崩溃时,远程容灾备份大数据中心将备份的压缩数据进行解压,并且快速的建立新的大数据中心平台,建立新的数据传输通道方便数据交互,同时对远程容灾大数据中心平台数据再次选取再次的远程容灾大数据中心进行备份存储。用于备份容灾的大数据中心能够在第一顺序实用的大数据中心出现故障时将自身快速调节成大数据中心平台,直接用于恢复数据通道与平台使用。
尽管已经示出和描述了本发明的实施例,对于本领域的普通技术人员而言,可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由所附权利要求及其等同物限定。
Claims (7)
1.一种大楼数据中心平台搭建远程容灾备份系统,包括存储与路径选择单元(1)、数据压缩存储单元(2)和数据交互平台建立单元(3),其特征在于:所述存储与路径选择单元(1)包括备份存储位置选择评估单元(101)和数据存储路径记录单元(102),所述数据压缩存储单元(2)用于对需要备份的数据进行压缩存储,所述数据交互平台建立单元(3)用于对备份数据进行解压建立新的大数据中心数据交互平台,所述备份存储位置选择评估单元(101)用于评估选择备份存储位置,所述数据存储路径记录单元(102)用于记录数据传输路径与存储位置;所述备份存储位置选择评估单元(101)包括数据传输存储速度预测评估模块(1011)和合理备份大数据中心评估模块(1012),所述数据传输存储速度预测评估模块(1011)用于数据传输存储速度的预测评估,所述数据传输存储速度预测评估模块(1011)计算公式为:
其中,是第m号传输节点计算资源第k次预测执行速度,ak为第k次预测时的系统负载程度,指第m号传输节点计算第k次实际的执行速度,ρ是在不同云环境中调节经验值和预制值的比重的一个调节参数,是第m号传输节点计算资源第k+1次预测执行速度;所述合理备份大数据中心评估模块(1012)计算用于数据备份的大数据中心合理参数ρ′,大数据中心合理参数ρ′的计算公式为:
其中,T1ρ1为添加影响大数据中心安全等级的项目1的完成度与对应权重值乘积,n为有n个添加影响大数据中心安全等级的项目。
2.根据权利要求1所述的大楼数据中心平台搭建远程容灾备份系统,其特征在于:所述数据存储路径记录单元(102)设有存储单元(1021),所述存储单元(1021)存储数据的发送位置信息、接受位置信息和传输路径节点位置信息。
3.根据权利要求1所述的大楼数据中心平台搭建远程容灾备份系统,其特征在于:所述存储与路径选择单元(1)的工作步骤为:
步骤S1:接收到上传数据,计算可用于合理备份数据的大数据中心参数ρ′;
步骤S2:选取参数ρ′数值最大值对应的大数据中心作为用于合理备份的大数据中心;
步骤S3:将数据的发送位置信息、接受位置信息和传输路径节点位置信息记录在数据存储路径记录单元(102)中的存储单元(1021)内。
4.根据权利要求1所述的大楼数据中心平台搭建远程容灾备份系统,其特征在于:所述数据压缩存储单元(2)采用哈夫曼编码方式对数据进行无损压缩。
5.根据权利要求1所述的大楼数据中心平台搭建远程容灾备份系统,其特征在于:所述数据压缩存储单元(2)的工作流程为:
步骤S4:统计备份数据中各个字符出现的频率,建立备份数据哈夫曼树;
步骤S5:将哈夫曼树存入备份数据并且重新编码;
步骤S6:将重新编码的压缩数据存储到用于备份的大数据中心。
6.根据权利要求1所述的大楼数据中心平台搭建远程容灾备份系统,其特征在于:所述数据交互平台建立单元(3)包括数据解压单元(301)、备份数据平台建立单元(302)和数据交互通道恢复单元(303),所述数据解压单元(301)用于解压压缩的备份数据,所述备份数据平台建立单元(302)用于将解压的备份数据集中建库形成备份数据平台,所述数据交互通道恢复单元(303)获取存储单元(1021)存储的数据的发送位置信息、接受位置信息和传输路径节点位置信息并建立新的数据通道。
7.根据权利要求1所述的大楼数据中心平台搭建远程容灾备份系统,其特征在于:所述存储与路径选择单元(1)在备份数据解码过程为解码备份数据评估选择备份大数据中心。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011051538.7A CN111897680B (zh) | 2020-09-29 | 2020-09-29 | 一种大楼数据中心平台搭建远程容灾备份系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011051538.7A CN111897680B (zh) | 2020-09-29 | 2020-09-29 | 一种大楼数据中心平台搭建远程容灾备份系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111897680A CN111897680A (zh) | 2020-11-06 |
CN111897680B true CN111897680B (zh) | 2021-06-22 |
Family
ID=73223986
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011051538.7A Active CN111897680B (zh) | 2020-09-29 | 2020-09-29 | 一种大楼数据中心平台搭建远程容灾备份系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111897680B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116192346B (zh) * | 2023-02-23 | 2023-10-27 | 武汉思创云科技有限公司 | 一种具有备用通道的计算机数据传输系统 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106911522A (zh) * | 2017-04-20 | 2017-06-30 | 广东浪潮大数据研究有限公司 | 一种基于云环境的故障处理方法及系统 |
CN108733516A (zh) * | 2018-05-25 | 2018-11-02 | 浙江工商大学 | 多云安全存储动态平衡备份方法及系统 |
US20190243722A1 (en) * | 2016-07-08 | 2019-08-08 | International Business Machines Corporation | Automated storage target selection for data backup |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110058966B (zh) * | 2018-01-18 | 2023-11-14 | 伊姆西Ip控股有限责任公司 | 用于数据备份的方法、设备和计算机程序产品 |
-
2020
- 2020-09-29 CN CN202011051538.7A patent/CN111897680B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20190243722A1 (en) * | 2016-07-08 | 2019-08-08 | International Business Machines Corporation | Automated storage target selection for data backup |
CN106911522A (zh) * | 2017-04-20 | 2017-06-30 | 广东浪潮大数据研究有限公司 | 一种基于云环境的故障处理方法及系统 |
CN108733516A (zh) * | 2018-05-25 | 2018-11-02 | 浙江工商大学 | 多云安全存储动态平衡备份方法及系统 |
Non-Patent Citations (3)
Title |
---|
云计算环境下网络用户信息资源优化调度;罗南超;《计算机仿真》;20180331;全文 * |
基于多维评价模型及改进蚁群优化算法的云计算资源调度策略;蒋华 等;《计算机测量与控制》;20150725;全文 * |
浅析吉林移动经营分析多租户系统资源调度算法;张若峰 等;《营销界》;20190630;全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN111897680A (zh) | 2020-11-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111897680B (zh) | 一种大楼数据中心平台搭建远程容灾备份系统 | |
CN101430657B (zh) | 一种连续数据保护方法 | |
CN102156727A (zh) | 一种采用双指纹哈希校验的重复数据删除方法 | |
CN107040406B (zh) | 一种端云协同计算系统及其容错方法 | |
CN111191872B (zh) | 一种电网多维度韧性评估系统及方法 | |
CN109034580B (zh) | 一种基于大数据分析的信息系统整体健康度评估方法 | |
CN103428494A (zh) | 基于云计算平台的图像序列编码及恢复方法 | |
CN101751440A (zh) | 一种数据压缩/解压缩方法及其装置 | |
CN109683825B (zh) | 一种存储系统在线数据压缩方法、装置及设备 | |
CN113078649A (zh) | 基于灵敏度分析和设备故障率的电网事故事件等级预判系统和方法 | |
CN109704199B (zh) | 一种多线程桥式起重机数据采集处理系统及方法 | |
CN108182198A (zh) | 存储先进控制器运行数据的控制装置和读取方法 | |
CN113900431A (zh) | 远程控制信息处理方法、装置、电子设备及自动驾驶车辆 | |
CN113742174A (zh) | 云手机应用监控方法、装置、电子设备和存储介质 | |
CN110413237B (zh) | 分布式存储方法、装置、终端设备及存储介质 | |
CN116760661A (zh) | 数据存储方法、装置、计算机设备、存储介质和程序产品 | |
CN106033377B (zh) | 数据容灾方法及容灾服务器 | |
CN114879905A (zh) | 一种数据存储方法、装置、电子设备及存储介质 | |
CN113179450B (zh) | 一种用于大数据环境下分析城市运营管理的工作方法 | |
CN109033235A (zh) | 一种数据存储双活架构构建方法、系统、介质和电子设备 | |
CN113312238A (zh) | 一种资源池监控方法及其相关设备 | |
CN111935237B (zh) | 日志处理方法及系统、电子设备及存储介质 | |
US11687053B2 (en) | Intelligent safety motor control center (ISMCC) | |
CN112817925A (zh) | 一种计算机数据传输压缩系统 | |
CN210244340U (zh) | 一种数据库异地备份系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |