CN104252397A - 支持云平台用户文件自动备份的实现方法 - Google Patents
支持云平台用户文件自动备份的实现方法 Download PDFInfo
- Publication number
- CN104252397A CN104252397A CN201310265148.3A CN201310265148A CN104252397A CN 104252397 A CN104252397 A CN 104252397A CN 201310265148 A CN201310265148 A CN 201310265148A CN 104252397 A CN104252397 A CN 104252397A
- Authority
- CN
- China
- Prior art keywords
- file
- server
- backup
- described file
- cloud platform
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 21
- 238000004891 communication Methods 0.000 claims abstract description 5
- 238000009434 installation Methods 0.000 claims description 6
- 230000001360 synchronised effect Effects 0.000 claims description 3
- 238000013475 authorization Methods 0.000 abstract 4
- 238000005516 engineering process Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 206010021703 Indifference Diseases 0.000 description 3
- 239000012141 concentrate Substances 0.000 description 3
- 239000000463 material Substances 0.000 description 3
- 238000004321 preservation Methods 0.000 description 3
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 241001269238 Data Species 0.000 description 1
- 238000007792 addition Methods 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000006185 dispersion Substances 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种支持云平台用户文件自动备份的实现方法，包括安装文件源服务器，配置IP地址、文件服务目录、文件操作权限、用户权限、用户组、文件源目录；安装文件备份服务器，配置IP地址、文件服务目录、文件操作权限、用户权限、用户组、文件备份目录；安装同步服务器，配置文件同步服务；文件备份服务器与文件同步服务器之间通过设置守护线程，启动文件同步服务；文件源服务器配置密码文件，并设置通信端口；文件源服务器启动守护线程；文件源服务器编写同步脚本，设置文件源服务器定时服务；启动定时服务，文件同步服务扫描文件，找寻发生变化的文件；将发生变化的文件复制并转成二进制文件流，并传送到文件备份服务器中的文件备份目录中。
Description
技术领域
本发明涉及计算机通信技术领域，具体地说，涉及一种用于云平台处理文件备份任务的方法和系统。
背景技术
随着云计算技术的不断发展，凭借成本低、易维护等优势，越来越多的企业开始使用云服务来替代传统的由IT部门自主运维的IT基础设施。云平台基于虚拟化技术构建，通过搭建云计算集群，能够在访问高峰时提供各种应用所需的资源，并能够在访问低峰时自动回收资源，实现计算、存储和网络资源的弹性伸缩。
目前国内主流的云平台，主要只实现镜像或者虚拟服务器或者硬盘级别的数据文件备份，即将虚拟服务器中的操作系统与用户个人数据进行无差别备份。目前技术通常按照如下步骤来完成云平台的文件备份：首先利用虚拟化服务，在平台下创建多台配置相同的虚拟服务器；然后配置云平台的备份服务；接着启动云平台，备份服务根据配置的策略运行；最后备份服务根据所配置的策略对虚拟服务器或者磁盘进行备份。
现有技术的原理是使用Hadoop分布式文件系统(HDFS)将整个云平台的物理硬盘进行无差别备份，将平台的运行数据与用户的业务数据分片切割，然后分布式存储到一个或多个备份磁盘中。用户无法直接使用这些备份数据，也无法确切知道自己的数据放到哪一个磁盘上，不方便用户对文件进行精细管理与使用，同时保存文件需要占用大量存储资源，而且很多备份文件并不是用户所关心的，浪费资源，操作时也需人工介入，增加了出错几率。
发明内容
本发明的目的在于提供一种支持云平台用户文件自动备份的实现方法，只将用户所关心的文件进行备份并集中保存，提高效率，减少资源浪费，节省人力物力。
为了实现上述目的，本发明所采用的技术方案如下：
一种支持云平台用户文件自动备份的实现方法，包括以下步骤：步骤一：安装文件源服务器，配置IP地址、文件服务目录、文件操作权限、用户权限、用户组、文件源目录；步骤二：安装文件备份服务器，配置IP地址、文件服务目录、文件操作权限、用户权限、用户组、文件备份目录；步骤三：安装同步服务器，所述同步服务器配置文件同步服务；步骤四：所述文件备份服务器与所述文件同步服务器之间通过设置守护线程，启动所述文件同步服务；步骤五：所述文件源服务器配置密码文件，并设置通信端口；步骤六：所述文件源服务器启动所述守护线程；步骤七：所述文件源服务器编写同步脚本，设置所述文件源服务器定时服务；步骤八：启动所述定时服务，所述文件同步服务扫描所述文件源目录中的文件，找寻发生变化的文件；步骤九：所述文件同步服务将发生变化的文件复制并转成二进制文件流，并传送到所述文件备份服务器中的所述文件备份目录中。
进一步，也可以在所述文件备份服务器中配置所述文件同步服务。
进一步，所述文件备份服务器可以选择unison配置所述文件同步服务。
进一步，所述文件备份服务器可以选择rsync配置所述文件同步服务。
进一步，所述文件备份服务器可以选择自编shell脚本配置所述文件同步服务。
进一步，所述文件同步服务对用户操作权限、文件状态、文件基本属性进行同步。
进一步，所述文件源服务器与所述文件备份服务器均是基于云平台的虚拟机，二者皆运行于所述云平台中。
进一步，所述文件备份目录是所述文件备份服务器中的文件夹，用于保存备份文件。
进一步，所述文件源目录是所述文件源服务器中的用户文件夹，主要用来存储用户文件。
进一步，可以加载文件扫描服务，对文件进行实时备份。
与现有技术相比，本发明只将用户所关心的文件进行备份并集中保存，可以避免整个平台或者整台服务器进行备份操作，提高效率，减少资源浪费，同时在现有云平台中就能进行改良配置，不需要投入大量的硬件和外围设施，节省人力物力。
附图说明
图1为本发明的虚拟化服务与服务器的结构关系示意图；
图2为本发明的文件备份流程示意图；
图3为本发明的一对多单源头文件备份模式结构示意图；
图4为本发明的单向环形文件备份模式结构示意图；
图5为本发明的双向三角文件备份模式结构示意图。
具体实施方式
下面结合附图和具体实施例对本发明支持云平台用户文件自动备份的实现方法作进一步说明。
请参阅图1和图2，本发明引入了文件源服务器、文件备份服务器、文件同步服务、文件备份目录、文件源目录。所述文件源服务器与所述文件备份服务器均是基于云平台的虚拟化服务所创建的虚拟机，二者皆运行于所述云平台中。所述文件备份目录是所述文件备份服务器中的文件夹，用于保存备份过来的文件。所述文件源目录是所述文件源服务器中的用户文件夹，主要存储的是用户的文件。
本发明支持云平台用户文件自动备份的实现方法，包括以下步骤：
步骤一：安装文件源服务器，配置IP地址、文件服务目录、文件操作权限、用户权限、用户组、文件源目录。具体过程与设置普通家用PC机一样。
步骤二：安装文件备份服务器，配置IP地址、文件服务目录、文件操作权限、用户权限、用户组、文件备份目录。本实施例中，可以安装一台或多台所述文件备份服务器。
步骤三：安装同步服务器，所述同步服务器配置文件同步服务。
所述文件同步服务对用户操作权限、文件状态、文件基本属性进行同步。所述文件备份服务器可以选择unison（Unison File Synchronizer）配置所述文件同步服务，也可以选择rsync（remote sync）配置所述文件同步服务，还可以选择自编shell（在计算机科学中，Shell俗称壳）脚本配置所述文件同步服务。本实施例中，所述文件备份服务器选择rsync配置所述文件同步服务。本发明并不限于此，当然，在其他实施例中，也可以在所述文件备份服务器中配置所述文件同步服务。
步骤四：所述文件备份服务器与所述文件同步服务器之间通过设置守护线程，启动所述文件同步服务。
步骤五：所述文件源服务器配置密码文件，并设置通信端口。
步骤六：所述文件源服务器启动所述守护线程。
步骤七：所述文件源服务器编写同步脚本，设置所述文件源服务器定时服务。
步骤八：启动所述定时服务，所述文件同步服务扫描所述文件源目录中的文件，找寻发生变化的文件。
步骤九：所述文件同步服务将发生变化的文件复制并转成二进制文件流，并传送到所述文件备份服务器中的所述文件备份目录中。
所述文件源服务器中的所述定时服务启动后，每隔一段时间（例如一分钟）访问所述文件同步服务，所述文件同步服务将扫描所述文件源目录中的文件，并找出哪些文件发生了变化，将发生了变化的文件复制并转成二进制文件流，通过指定的传输协议（SSH协议）将发生变化的文件传递到所述文件备份服务器，所述备份服务器的所述文件同步服务将文件存储到文件夹所述文件备份目录中，至此，实现了云平台用户文件的自动备份。
由于在配置所述文件同步服务时，不采用压缩存储，文件的整个状态都可以得到保存。例如，文件夹所述文件源目录中的abc.txt文件，保存到文件夹所述文件备份目录中的时候，也是abc.txt文件，而不会变成其他文件格式。用户将文件夹所述文件备份目录中的文件拷贝出来后可以直接使用，避免了现有技术中无差别分散压缩存储所带来的问题。
通过所述定时服务执行文件备份操作时，有一定的时间差，可以加载文件扫描服务，对文件进行实时备份。当有文件发生变化（增删改）的时候，立即触发备份操作。这样，所有的所述备份服务器上的文件会与所述源文件服务器上的文件保持一致。
请参阅图3、图4和图5，本发明可以采用一对多单源头文件备份模式、单向环形文件备份模式、双向三角备份模式实现支持云平台用户文件的自动备份。一对多单源头文件备份模式，使用一台所述文件服务器作为源头，备份到一台或多台的所述备份服务器，适合应用于多点灾备，在各个地方都有用户保留的数据备份。单向环形文件备份模式，每台服务器都保留特定的数据文件，定向备份到特定的服务器，形成备份链，适合逐级增量备份的情景。双向三角文件备份模式，每台服务器都有两台备份，并形成备份集群，可靠性高。
本发明只将用户所关心的文件进行备份并集中保存，可以避免整个平台或者整台服务器进行备份操作，提高效率，减少资源浪费，同时在现有云平台中就能进行改良配置，不需要投入大量的硬件和外围设施，节省人力物力。
以上详细描述了本发明的较佳具体实施例，应当理解，本领域的普通技术人员无需创造性劳动就可以根据本发明的构思做出诸多修改和变化。因此，凡本技术领域中技术人员依本发明构思在现有技术基础上通过逻辑分析、推理或者根据有限的实验可以得到的技术方案，均应该在由本权利要求书所确定的保护范围之中。
Claims (10)
1.一种支持云平台用户文件自动备份的实现方法，其特征在于，包括以下步骤：
步骤一：安装文件源服务器，配置IP地址、文件服务目录、文件操作权限、用户权限、用户组、文件源目录；
步骤二：安装文件备份服务器，配置IP地址、文件服务目录、文件操作权限、用户权限、用户组、文件备份目录；
步骤三：安装同步服务器，所述同步服务器配置文件同步服务；
步骤四：所述文件备份服务器与所述文件同步服务器之间通过设置守护线程，启动所述文件同步服务；
步骤五：所述文件源服务器配置密码文件，并设置通信端口；
步骤六：所述文件源服务器启动所述守护线程；
步骤七：所述文件源服务器编写同步脚本，设置所述文件源服务器定时服务；
步骤八：启动所述定时服务，所述文件同步服务扫描所述文件源目录中的文件，找寻发生变化的文件；
步骤九：所述文件同步服务将发生变化的文件复制并转成二进制文件流，并传送到所述文件备份服务器中的所述文件备份目录中。
2.如权利要求1所述的支持云平台用户文件自动备份的实现方法，其特征在于：也可以在所述文件备份服务器中配置所述文件同步服务。
3.如权利要求2所述的支持云平台用户文件自动备份的实现方法，其特征在于：所述文件备份服务器可以选择unison配置所述文件同步服务。
4.如权利要求2所述的支持云平台用户文件自动备份的实现方法，其特征在于：所述文件备份服务器可以选择rsync配置所述文件同步服务。
5.如权利要求2所述的支持云平台用户文件自动备份的实现方法，其特征在于：所述文件备份服务器可以选择自编shell脚本配置所述文件同步服务。
6.如权利要求1所述的支持云平台用户文件自动备份的实现方法，其特征在于：所述文件同步服务对用户操作权限、文件状态、文件基本属性进行同步。
7.如权利要求1所述的支持云平台用户文件自动备份的实现方法，其特征在于：所述文件源服务器与所述文件备份服务器均是基于云平台的虚拟机，二者皆运行于所述云平台中。
8.如权利要求1所述的支持云平台用户文件自动备份的实现方法，其特征在于：所述文件备份目录是所述文件备份服务器中的文件夹，用于保存备份文件。
9.如权利要求1所述的支持云平台用户文件自动备份的实现方法，其特征在于：所述文件源目录是所述文件源服务器中的用户文件夹，主要用来存储用户文件。
10.如权利要求1所述的支持云平台用户文件自动备份的实现方法，其特征在于：可以加载文件扫描服务，对文件进行实时备份。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201310265148.3A CN104252397A (zh) | 2013-06-27 | 2013-06-27 | 支持云平台用户文件自动备份的实现方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201310265148.3A CN104252397A (zh) | 2013-06-27 | 2013-06-27 | 支持云平台用户文件自动备份的实现方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN104252397A true CN104252397A (zh) | 2014-12-31 |
Family
ID=52187328
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201310265148.3A Pending CN104252397A (zh) | 2013-06-27 | 2013-06-27 | 支持云平台用户文件自动备份的实现方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN104252397A (zh) |
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105159797A (zh) * | 2015-08-28 | 2015-12-16 | 浪潮通用软件有限公司 | 一种基于oracle数据库备份及恢复的方法 |
| CN105208075A (zh) * | 2015-08-12 | 2015-12-30 | 新华通讯社 | 一种基于高分散哈希算法的数据采集策略方法及装置 |
| CN107403001A (zh) * | 2017-07-07 | 2017-11-28 | 齐鲁工业大学 | 一种基于人工智能设计的计算机管理装置 |
| CN107438102A (zh) * | 2017-07-31 | 2017-12-05 | 国云科技股份有限公司 | 一种云平台镜像制作系统及其方法 |
| CN107770262A (zh) * | 2017-10-13 | 2018-03-06 | 中国人民解放军海军工程大学 | 一种专用数据传输方法 |
| CN108959660A (zh) * | 2018-08-15 | 2018-12-07 | 东北大学 | 一种基于hdfs分布式文件系统的存储方法及使用方法 |
| CN109787808A (zh) * | 2019-04-03 | 2019-05-21 | 中国电子科技集团公司第二十八研究所 | 一种适应广域部署的多数据中心抗毁接替方法 |
| CN112035297A (zh) * | 2020-08-28 | 2020-12-04 | 浪潮云信息技术股份公司 | 一种基于备份任务的自动执行云备份方法 |
| WO2021139224A1 (zh) * | 2020-07-28 | 2021-07-15 | 平安科技（深圳）有限公司 | 云场景下的文件备份方法、装置、介质、电子设备 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102169453A (zh) * | 2011-03-08 | 2011-08-31 | 杭州电子科技大学 | 一种文件在线备份方法 |
| CN102882923A (zh) * | 2012-07-25 | 2013-01-16 | 北京亿赛通科技发展有限责任公司 | 移动终端安全存储系统及方法 |
| CN103023996A (zh) * | 2012-11-30 | 2013-04-03 | 江苏乐买到网络科技有限公司 | 一种云数据存储系统 |
-
2013
- 2013-06-27 CN CN201310265148.3A patent/CN104252397A/zh active Pending
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102169453A (zh) * | 2011-03-08 | 2011-08-31 | 杭州电子科技大学 | 一种文件在线备份方法 |
| CN102882923A (zh) * | 2012-07-25 | 2013-01-16 | 北京亿赛通科技发展有限责任公司 | 移动终端安全存储系统及方法 |
| CN103023996A (zh) * | 2012-11-30 | 2013-04-03 | 江苏乐买到网络科技有限公司 | 一种云数据存储系统 |
Cited By (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105208075B (zh) * | 2015-08-12 | 2018-07-31 | 新华通讯社 | 一种基于高分散哈希算法的数据采集策略方法及装置 |
| CN105208075A (zh) * | 2015-08-12 | 2015-12-30 | 新华通讯社 | 一种基于高分散哈希算法的数据采集策略方法及装置 |
| CN105159797A (zh) * | 2015-08-28 | 2015-12-16 | 浪潮通用软件有限公司 | 一种基于oracle数据库备份及恢复的方法 |
| CN105159797B (zh) * | 2015-08-28 | 2017-12-15 | 浪潮通用软件有限公司 | 一种基于oracle数据库备份及恢复的方法 |
| CN107403001A (zh) * | 2017-07-07 | 2017-11-28 | 齐鲁工业大学 | 一种基于人工智能设计的计算机管理装置 |
| CN107438102A (zh) * | 2017-07-31 | 2017-12-05 | 国云科技股份有限公司 | 一种云平台镜像制作系统及其方法 |
| WO2019024122A1 (zh) * | 2017-07-31 | 2019-02-07 | 国云科技股份有限公司 | 云平台镜像制作系统及其实现方法 |
| CN107438102B (zh) * | 2017-07-31 | 2020-04-03 | 国云科技股份有限公司 | 一种云平台镜像制作系统及其实现方法 |
| CN107770262A (zh) * | 2017-10-13 | 2018-03-06 | 中国人民解放军海军工程大学 | 一种专用数据传输方法 |
| CN108959660A (zh) * | 2018-08-15 | 2018-12-07 | 东北大学 | 一种基于hdfs分布式文件系统的存储方法及使用方法 |
| CN108959660B (zh) * | 2018-08-15 | 2021-07-27 | 东北大学 | 一种基于hdfs分布式文件系统的存储方法及使用方法 |
| CN109787808A (zh) * | 2019-04-03 | 2019-05-21 | 中国电子科技集团公司第二十八研究所 | 一种适应广域部署的多数据中心抗毁接替方法 |
| WO2021139224A1 (zh) * | 2020-07-28 | 2021-07-15 | 平安科技（深圳）有限公司 | 云场景下的文件备份方法、装置、介质、电子设备 |
| CN112035297A (zh) * | 2020-08-28 | 2020-12-04 | 浪潮云信息技术股份公司 | 一种基于备份任务的自动执行云备份方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN104252397A (zh) | 支持云平台用户文件自动备份的实现方法 | |
| US11074143B2 (en) | Data backup and disaster recovery between environments | |
| US11829263B2 (en) | In-place cloud instance restore | |
| US10073747B2 (en) | Reducing recovery time in disaster recovery/replication setup with multitier backend storage | |
| US11016935B2 (en) | Centralized multi-cloud workload protection with platform agnostic centralized file browse and file retrieval time machine | |
| US9176786B2 (en) | Dynamic and automatic colocation and combining of service providers and service clients in a grid of resources for performing a data backup function | |
| US9934107B1 (en) | Designating backup nodes and backing up in parallel in a high-availability environment | |
| US10084858B2 (en) | Managing continuous priority workload availability and general workload availability between sites at unlimited distances for products and services | |
| US10482104B2 (en) | Zero-data loss recovery for active-active sites configurations | |
| WO2018049983A1 (zh) | 数据同步方法、系统、同步获取方法及装置 | |
| WO2017167100A1 (zh) | 一种数据迁移方法和装置 | |
| JP2016525244A (ja) | コンピューティングセッションの管理 | |
| US11474910B2 (en) | Method, device and computer program product to backup data | |
| CN105242990A (zh) | 基于云平台的数据备份方法和装置 | |
| WO2016177231A1 (zh) | 基于双主控的主备倒换方法及装置 | |
| US9690676B2 (en) | Assigning network device subnets to perform network activities using network device information | |
| US20240054054A1 (en) | Data Backup Method and System, and Related Device | |
| CN110972497A (zh) | 虚拟化平台的容灾方法及装置 | |
| CN112035062B (zh) | 云计算的本地存储的迁移方法、计算机设备及存储介质 | |
| CN109947599B (zh) | 多集群管理方法及装置、集群内管理方法及装置 | |
| CN107623705B (zh) | 基于视频云存储系统的存储模式升级方法、装置和系统 | |
| CN110958287B (zh) | 操作对象数据同步方法、装置及系统 | |
| CN114281600A (zh) | 一种容灾备份和容灾恢复方法、装置、设备及存储介质 | |
| US9798633B2 (en) | Access point controller failover system | |
| CN106844058B (zh) | 一种虚拟化资源的管理方法和装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20141231 |