CN116610498B - 基于对象存储的数据备份恢复方法、系统、设备及介质 - Google Patents
基于对象存储的数据备份恢复方法、系统、设备及介质 Download PDFInfo
- Publication number
- CN116610498B CN116610498B CN202310867287.7A CN202310867287A CN116610498B CN 116610498 B CN116610498 B CN 116610498B CN 202310867287 A CN202310867287 A CN 202310867287A CN 116610498 B CN116610498 B CN 116610498B
- Authority
- CN
- China
- Prior art keywords
- data
- backup
- virtual machine
- recovered
- writing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003860 storage Methods 0.000 title claims abstract description 111
- 238000000034 method Methods 0.000 title claims abstract description 45
- 238000011084 recovery Methods 0.000 title claims description 55
- 230000000977 initiatory effect Effects 0.000 claims abstract description 11
- 238000004590 computer program Methods 0.000 claims description 17
- 238000012545 processing Methods 0.000 claims description 8
- 230000008569 process Effects 0.000 abstract description 10
- 230000006870 function Effects 0.000 description 12
- 238000010586 diagram Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 4
- 238000011161 development Methods 0.000 description 3
- 238000002955 isolation Methods 0.000 description 3
- 230000005012 migration Effects 0.000 description 3
- 238000013508 migration Methods 0.000 description 3
- 238000013500 data storage Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000004321 preservation Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1448—Management of the data involved in backup or backup restore
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1458—Management of the backup or restore process
- G06F11/1464—Management of the backup or restore process for networked environments
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1458—Management of the backup or restore process
- G06F11/1469—Backup restoration techniques
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Abstract
本申请公开了一种基于对象存储的数据备份恢复方法、系统、设备及介质,其中,该基于对象存储的数据备份恢复方法包括:获取业务数据,并通过备份系统向云虚拟机发起备份请求;基于备份请求,将业务数据中的备份数据写入指定的对象存储的第一指定位置;基于获得的元数据,将备份数据从对象存储中进行提取并写入至备份系统;和/或,将备份数据写入到对象存储的第二指定位置,并获取备份数据中的待恢复数据;将待恢复数据写入到云虚拟机。本申请将对象存储作为业务数据从云虚拟机到备份系统的中间站,在整个备份过程中,仅需要申请对象存储的读写权限即可,不需要直接操作云虚拟机,提高了数据的安全性和可靠性。
Description
技术领域
本发明涉及互联网技术和数据存储技术领域,尤其涉及一种基于对象存储的数据备份恢复方法、系统、设备及介质。
背景技术
随着互联网IDC(互联网数据中心,Internet Data Center)事业的发展,云平台逐渐成为互联网事业发展的核心,从大数据平台,到各种云服务中心,延伸至各大网络巨头的云服务器。对于企业来讲,企业的内部业务数据常常是企业发展的重要资产,并且相对小的数据损失或数据中断也可能具有显著的影响。目前,大部分企业利用云平台,通过在虚拟机上安装Agent,将业务数据备份到备份系统上。即,在需要保护的虚拟机上安装代理程序Agent,利用虚拟机的快照机制,监控和捕捉数据块的变化,再利用Agent 把虚拟机的变化数据导出到备份设备上,在做数据恢复时,把备份设备上的数据传到Agent 上,再恢复到虚拟机上。
但是,在使用虚拟机内安装代理程序作为备份方案时,不仅会引入安全性的问题,造成云虚拟机上运行程序的故障风险,并且,可能存在受网络约束无法使用的情况。比如,在需要保护的虚拟机内安装代理程序,用户的敏感数据也将暴露,并且,因为引入了代理程序,需要增加待备份虚拟机与备份软件的网络数据传输交互,也将会增加数据暴露以及虚拟机被劫持或侵入的风险。此外,该方案还会影响云平台的正常使用,甚至会导致整个云平台的崩溃。并且,在一些网络权限管理严格的场景下,备份设备要部署在运维网络中,无法直接与生产环境上云虚拟机建立网络连接。
因此,上述技术问题亟待解决。
发明内容
本申请实施例提供一种基于对象存储的数据备份恢复方法、系统、设备及介质,以解决或部分解决在使用虚拟机内安装代理程序作为备份方案时,不仅会引入安全性的问题,造成云虚拟机上运行程序的故障风险,并且,可能存在受网络约束无法使用的情况的问题。
一种基于对象存储的数据备份恢复方法,包括:
获取业务数据,并通过备份系统向云虚拟机发起备份请求;
基于备份请求,将业务数据中的备份数据写入指定的对象存储的第一指定位置,用于获得元数据;
基于元数据,将备份数据从对象存储中进行提取并写入至备份系统,用于完成对备份数据的备份;和/或
将备份数据写入到对象存储的第二指定位置,并获取备份数据中的待恢复数据,将待恢复数据写入到云虚拟机,用于完成对待恢复数据的恢复。
本申请在一较佳示例中可以进一步配置为:通过备份系统向云虚拟机发起备份请求,包括:
通过备份系统调用云虚拟机的API,基于API向云虚拟机发起备份请求,获得备份请求结果。
本申请在一较佳示例中可以进一步配置为:基于元数据,将备份数据从对象存储中进行提取并写入至备份系统,包括:
基于读取权限和元数据,读取备份数据;
对备份数据进行数据处理,将处理后的备份数据记录到本地存储中,用于完成对备份数据的备份。
本申请在一较佳示例中可以进一步配置为:将待恢复数据写入到云虚拟机,包括:
获取待恢复数据的恢复策略,并获取云虚拟机的磁盘类型;
基于磁盘类型和恢复策略,将待恢复数据写入到云虚拟机,用于完成对待恢复数据的恢复。
本申请在一较佳示例中可以进一步配置为:基于磁盘类型和恢复策略,将待恢复数据写入到云虚拟机,包括:
若磁盘类型为系统盘,则将待恢复数据建成虚拟机镜像,用于将待恢复数据写入到云虚拟机。
本申请在一较佳示例中可以进一步配置为:基于磁盘类型和恢复策略,将待恢复数据写入到云虚拟机,包括:
若磁盘类型为数据盘,则将待恢复数据直接写入云虚拟机。
本申请在一较佳示例中可以进一步配置为:获得元数据,包括:
获取备份数据的备份记录信息和虚拟机配置信息;
根据备份记录信息和虚拟机配置信息,得到各个备份数据的元数据。
本申请目的二是提供一种基于对象存储的数据备份恢复系统。
本申请的上述申请目的二是通过以下技术方案得以实现的:
一种基于对象存储的数据备份恢复系统,包括:
业务数据获取模块,用于获取业务数据,并通过备份系统向云虚拟机发起备份请求;
元数据获取模块,用于基于备份请求,将业务数据中的备份数据写入指定的对象存储的第一指定位置,用于获得元数据;
数据备份模块,用于基于元数据,将备份数据从对象存储中进行提取并写入至备份系统,用于完成对备份数据的备份;和/或
数据恢复模块,用于将备份数据写入到对象存储的第二指定位置,并获取备份数据中的待恢复数据,将待恢复数据写入到云虚拟机,用于完成对待恢复数据的恢复。
本申请目的三是提供一种电子设备。
本申请的上述申请目的三是通过以下技术方案得以实现的:
一种电子设备,包括存储器、处理器以及存储在存储器中并可在处理器上运行的计算机程序,处理器执行计算机程序时实现上述基于对象存储的数据备份恢复方法。
一种计算机可读存储介质,计算机可读存储介质存储有计算机程序,计算机程序被处理器执行时实现上述基于对象存储的数据备份恢复方法。
综上,本申请包括以下有益技术效果:
上述基于对象存储的数据备份恢复方法,从用户数据库中获取业务数据,并通过备份系统向云虚拟机发起备份请求。云虚拟机接收到备份系统发送的备份请求,然后通过使用云厂商提供的存储系统,对需要保护的云虚拟机打了快照之后,利用云平台提供的快照数据迁移功能,将快照后的业务数据中需要备份的备份数据写入指定的对象存储中,利用对象存储提供的权限控制、存储隔离以及限流等功能,减少了备份任务过程中对云平台以及正常业务系统的影响,还提高了业务数据在该对象存储的位置的可靠性。然后将备份数据从对象存储提取并写入至备份系统,完成对备份数据的备份;和/或,将备份数据写入到对象存储的指定位置,获取备份数据中的待恢复数据,将待恢复数据写入到云虚拟机,完成对待恢复数据的恢复。在整个过程中,该方法不需要安装Agent,并且,降低了对原有系统恶意侵入的风险,通过对象存储作为中间站,避免了对云平台的管理权限进行修改,从而造成云虚拟机数据泄露的风险。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对本申请实施例的描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1绘示本申请一实施例中基于对象存储的数据备份恢复方法的流程图;
图2绘示了本申请一实施例中基于对象存储的数据备份恢复方法的场景示意图;
图3绘示本申请第一实施例中基于对象存储的数据备份恢复方法的整体流程图;
图4绘示本申请一实施例中基于对象存储的数据备份恢复系统的示意图;
图5绘示本申请一实施例中基于对象存储的数据备份恢复系统的整体示意图;
图6绘示本申请一实施例中电子设备的示意图。
具体实施方式
为使本申请的上述目的、特征和优点能够更加明显易懂,下面结合附图对本申请的具体实施方式做详细的说明。在下面的描述中阐述了很多具体细节以便于充分理解本申请。但是本申请能够以很多不同于在此描述的其他方式来实施,本领域技术人员可以在不违背本申请内涵的情况下做类似改进,因此本申请不受下面公开的具体实施例的限制。
本申请以下实施例中所使用的术语只是为了描述特定实施例的目的,而并非旨在作为对本申请的限制。如在本申请的说明书和所附权利要求书中所使用的那样,单数表达形式“一个”、“一种”、“所述”、“上述”、“该”和“这一”旨在也包括复数表达形式,除非其上下文中明确地有相反指示。还应当理解,本申请中使用的术语“和/或”是指并包含一个或多个所列出项目的任何或所有可能组合。
以下,术语“第一”、“第二”仅用于描述目的,而不能理解为暗示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征,在本申请实施例的描述中,除非另有说明,“多个”的含义是两个或两个以上。
为了便于理解,下面先对本申请实施例涉及的相关术语及相关概念进行介绍。
对象存储又称为基于对象的存储,是用来描述解决和处理离散单元的方法的通用术语,这些离散单元被称作为对象。就像文件一样,对象包含数据,但是和文件不同的是,对象在一个层结构中不会再有层级结构。每个对象都在一个被称作存储池的扁平地址空间的同一级别里,一个对象不会属于另一个对象的下一级。
桶(Bucket)是对象存储服务中存储对象的容器,对象存储提供了基于桶和对象的扁平化存储方式,桶中的所有对象都处于同一逻辑层级,去除了文件系统中的多层级树形目录结构。每个桶都有自己的存储类别、访问权限、所属区域等属性,用户可以在不同区域(下文会详细介绍)创建不同存储类别和访问权限的桶,并配置更多高级属性来满足不同场景的存储诉求。
在对象存储服务中,桶名是全局唯一的且不能修改,即用户创建的桶不能与自己已创建的其他桶名称相同,也不能与其他用户创建的桶名称相同。桶所属的区域在创建后也不能修改。每个桶在创建时都会生成默认的桶访问列表ACL(Access Control List) ,ACL列表的每项包含了对被授权租户授予什么样的权限,如读取权限、写入权限等。用户只有对桶有相应的权限,才可以对桶进行操作,如创建、删除、显示、设置桶ACL等。
本申请实施例提供一种基于对象存储的数据备份恢复方法,方法的主要流程描述如下:
参照图1和图2,S10、获取业务数据,并通过备份系统向云虚拟机发起备份请求。
具体地,本实施例可以从用户数据库中获取业务数据,然后通过备份系统向云虚拟机发起备份请求,以使云虚拟机接收到备份请求并通过后执行下一操作。
其中,用户数据库是存储业务数据的存储空间集。通常用户数据库中的业务数据依其重要性可分为非关键性数据和关键性数据。非关键性数据通常能够很容易从其他来源重新创建,可以不备份;关键性数据则是企业的重要数据,不易甚至不能重新创建,对其需进行完善的备份。
其中,云虚拟机具有高度可用的云架构,可将站点的业务数据存放于云存储当中。云虚拟机同时运行在服务器集群的每一个成员节点服务器上,也就是说在每一个节点服务器上都可以找到一个一模一样的站点,并且不同节点服务器上的同一个站点的配置以及数据都是一致的。
步骤S10的作用在于通过备份系统向云虚拟机发起备份请求,提高了系统运行质量,并且,云虚拟机接收备份请求并通过后执行下一步骤,可有效抵挡恶意攻击。
S20、基于备份请求,将业务数据中的备份数据写入指定的对象存储的第一指定位置,用于获得元数据。
其中,文件和对象都有与它们所包含的数据相关的元数据,但是对象是以扩展元数据为特征的。每个对象都被分配一个唯一的标识符,允许一个服务器或者最终用户来检索对象,而不必知道数据的物理地址。这种方法对于在云计算环境中自动化和简化数据存储有帮助。可以将对象存储比作在一家高级餐厅代客停车。当一个顾客需要代客停车时,该顾客把钥匙交给别人,换来一张收据。这个顾客不用知道他的车被停在哪,也不用知道在他用餐时服务员会把他的车移动多少次。在这个比喻中,一个存储对象的唯一标识符就代表顾客的收据,即本实施例中的第一指定位置。
具体地,本实施例中云虚拟机接收到备份系统发送的备份请求,然后通过使用云厂商提供的存储系统,对需要保护的云虚拟机打了快照之后,利用云平台提供的快照数据迁移功能,将快照后的业务数据中需要备份的备份数据写入到指定的对象存储的第一位置的桶中,使得该业务数据具有相应的位置信息等元数据。
具体到实施例中,云平台可以是用户的私有云,备份系统和对象存储均部署于该云平台上,用户通过备份系统发起备份任务,备份系统将业务数据备份至云虚拟机上,以满足私有云场景下云虚拟机以及云盘的备份需求。
在另一实施例中,云平台可以是用户的公有云,备份系统将业务数据备份至云虚拟机上,包括同一云服务商的不同公有云,也包括不同云服务商的不同数据中心,以满足在公有云场景下云虚拟机以及云盘的备份需求。
进一步地,在其他一些实施例中,云平台还可以是用户的混合云。例如第一云平台为公有云,第二云平台为私有云,用户同时接入了同一云服务商的不同类型的云平台或者不同云服务商的不同类型的云平台。对于混合云场景,可以把备份系统部署在公有云上,实现私有云数据到公有云的无代理备份;或者把备份系统部署在私有云上,实现公有云数据到公有云的无代理备份。
进一步地,在其他一些实施例中,云平台还可以是多个公有云。对于用户数据分布在多个公有云上的场景,可以把备份系统部署在特定的公有云上,实现其他公有云数据跨云无代理备份的模式,提高数据可靠性。
其中,元数据可以简单地理解成最小的数据单位。元数据可以为数据说明其元素或属性(名称、大小、数据类型等)或其结构(长度、字段、数据列等),或其相关数据(位于何处、如何联系、拥有者等)。
步骤S20的作用在于将业务数据中的备份数据写入指定的对象存储中,利用对象存储提供的权限控制、存储隔离、限流等功能,减少了备份任务过程中对云平台以及正常业务系统的影响,还提高了业务数据在该对象存储的位置的唯一性。
S30、基于元数据,将备份数据从对象存储中进行提取并写入至备份系统,用于完成对备份数据的备份。
具体地,本实施例根据云虚拟机中备份数据的位置信息等元数据,通过该位置信息等元数据将备份数据从对象存储中下载并写入到备份系统中,使得备份系统对该备份数据进行备份存储,在整个备份过程中,本实施例对云平台以及需要保护的云虚拟机无任何侵入性动作。
步骤S30的作用在于提高了基于对象存储的数据备份的效率、准确性和可靠性。
S40、将备份数据写入到对象存储的第二指定位置,并获取备份数据中的待恢复数据,将待恢复数据写入到云虚拟机,用于完成对待恢复数据的恢复。
具体地,本实施例在备份系统上发起恢复任务,备份系统根据该恢复任务检索出需要恢复的待恢复数据,将该待恢复数据写入到对象存储的指定位置,再利用云平台提供的备份数据恢复功能,然后将待恢复数据从该指定位置中提取并写入到云虚拟机中,进而完成待恢复数据的恢复。
步骤S40的作用在于整个过程不需要安装Agent,并且,降低了对原有系统恶意侵入的风险,通过对象存储作为中间站,避免了对云设备的管理权限进行修改,从而造成数据泄露的风险。
参考图3,在一些可能的实施例中,步骤S10,即通过备份系统向云虚拟机发起备份请求,包括:
S11、通过备份系统调用云虚拟机的API,基于API向云虚拟机发起备份请求,获得备份请求结果。
具体地,本实施例通过备份系统调用云虚拟机的API(Application ProgramInterface,应用程序接口),并向云虚拟机发起备份请求,云虚拟机接收到备份请求,得到通过该备份请求的备份请求结果,若该备份请求结果为通过备份请求,则通过该API可创建多个桶,将备份数据对应的元数据写入指定的对象存储的桶中。若该备份请求结果为未通过备份请求,则拒绝将备份数据写入指定的对象存储。
其中,每个桶中存放的元数据的数量和大小总和没有限制,用户不需要考虑数据的可扩展性云应用,通过云API,可以在一个私有云当中接入多个不同地方的计算资源池,包括不同架构的计算资源,并通过各自的服务自动化体系去进行服务交互。
在一些可能的实施例中,步骤S20,即获得元数据,包括:
S21、获取备份数据的备份记录信息和虚拟机配置信息。
S22、根据备份记录信息和虚拟机配置信息,得到各个备份数据的元数据。
其中,备份记录信息包括备份频率、备份时间、各备份时间对应的备份数据、数据的存储类别以及磁盘等。虚拟机配置信息包括桶的存储类别、磁盘数量、磁盘规格以及磁盘类型等。其中,在上传备份数据时,本实施例可以指定数据的存储类别,若不指定,默认该备份数据与桶的存储类别一致。本实施例根据备份记录信息和虚拟机配置信息,得到各个桶中写入的元数据。
在一些可能的实施例中,步骤S30,即基于元数据,将备份数据从对象存储中进行提取并写入至备份系统,包括:
S31、基于读取权限和元数据,读取备份数据。
S32、对备份数据进行数据处理,将处理后的备份数据记录到本地存储中,用于完成对备份数据的备份。
其中,本实施例中的读取权限是根据对象存储提供的权限控制中备份任务需要的最小粒度的权限,即备份存储桶的只读权限。
具体地,在快照数据迁移到备份存储桶完成时,备份系统申请该存储桶的只读权限,然后根据开放的权限读取备份数据。然后,对备份数据进行数据切片处理,得到数据块,本实施例中,出于数据安全的考虑,记录存储到备份系统的数据是进行加密处理的,具体的加密过程在此不再赘述。此处需对备份数据进行解密,并整合小文件,然后将备份数据以数据块的形式记录到本地存储中,得到完整的磁盘文件。
其中,数据块是一种数据保存的单位。数据切片处理是在逻辑上对输入数据的切片,将备份数据切分为1MB大小的数据块,应知道的是,该数据块的大小可根据不同任务需求进行调整,此处数据块的大小仅为一个示例。
在一些可能的实施例中,步骤S40,即将待恢复数据写入到云虚拟机,包括:
S41、获取待恢复数据的恢复策略,并确定云虚拟机的磁盘类型。
S42、基于磁盘类型和恢复策略,将待恢复数据写入到云虚拟机,用于完成对待恢复数据的恢复。
其中,恢复策略是预先存储至系统数据库中的数据,恢复策略包括若磁盘类型为系统盘,则将待恢复数据建成虚拟机镜像;若磁盘类型为数据盘,则将待恢复数据直接写入云虚拟机。
具体地,本实施例直接获取待恢复数据的恢复策略,并根据API获取完成备份任务时记录的磁盘数量、磁盘规格以及磁盘类型等信息,然后根据这些信息将待恢复数据写入到云虚拟机,以使完成待恢复数据的恢复任务。
在一些可能的实施例中,步骤S42,即基于磁盘类型和恢复策略,将待恢复数据写入到云虚拟机,包括:
S421、若磁盘类型为系统盘,则将待恢复数据建成虚拟机镜像,用于将待恢复数据写入到云虚拟机。
具体地,本实施例上传待恢复数据到对象存储中,并获取到磁盘地址,再通过上传到对象存储中的待恢复数据,调用API将系统盘数据创建为系统镜像,然后利用该系统镜像创建一台同规格的虚拟机,进而完成系统盘的恢复。
在一些可能的实施例中,步骤S42,即基于磁盘类型和恢复策略,将待恢复数据写入到云虚拟机,包括:
S422、若磁盘类型为数据盘,则将待恢复数据直接写入云虚拟机。
上述基于对象存储的数据备份恢复方法,从用户数据库中获取业务数据,并通过备份系统向云虚拟机发起备份请求。云虚拟机接收到备份系统发送的备份请求,然后通过使用云厂商提供的存储系统,对需要保护的云虚拟机打了快照之后,利用云平台提供的快照数据迁移功能,将快照后的业务数据中需要备份的备份数据写入指定的对象存储中,利用对象存储提供的权限控制、存储隔离、限流等功能,减少了备份任务过程中对云平台以及正常业务系统的影响,还提高了业务数据在该对象存储的位置的唯一性。然后将备份数据从对象存储提取并写入至备份系统,完成对备份数据的备份;和/或,将备份数据写入到对象存储的指定位置,获取备份数据中的待恢复数据,将待恢复数据写入到云虚拟机,完成对待恢复数据的恢复。在整个过程中,该方法不需要安装Agent,并且,降低了对原有系统恶意侵入的风险,通过对象存储作为中间站,避免了对云设备的管理权限进行修改,从而造成云虚拟机数据泄露的风险。
本申请另一实施例,公开了一种基于对象存储的数据备份恢复系统。
参照图4,基于对象存储的数据备份恢复系统包括:
业务数据获取模块10,用于获取业务数据,并通过备份系统向云虚拟机发起备份请求。
元数据获取模块20,用于基于备份请求,将业务数据中的备份数据写入指定的对象存储的第一指定位置,用于获得元数据。
数据备份模块30,用于基于元数据,将备份数据从对象存储中进行提取并写入至备份系统,用于完成对备份数据的备份。
数据恢复模块40,用于将备份数据写入到对象存储的第二指定位置,并获取备份数据中的待恢复数据,将待恢复数据写入到云虚拟机,用于完成对待恢复数据的恢复。
进一步地,如图5所示,业务数据获取模块10,包括:
备份请求结果获得子模块11,用于通过备份系统调用云虚拟机的API,基于API向云虚拟机发起备份请求,获得备份请求结果。
进一步地,如图5所示,元数据获取模块20,包括:
信息获取子模块21,用于获取备份数据的备份记录信息和虚拟机配置信息。
元数据获得子模块22,用于根据备份记录信息和虚拟机配置信息,得到各个备份数据的元数据。
进一步地,如图5所示,数据备份模块30,包括:
备份数据读取子模块31,用于基于读取权限和元数据,读取备份数据。
备份数据记录子模块32,用于对备份数据进行数据处理,将处理后的备份数据记录到本地存储中,用于完成对备份数据的备份。
进一步地,如图5所示,数据恢复模块40,包括:
恢复策略获取子模块41,用于获取待恢复数据的恢复策略,并获取云虚拟机的磁盘类型。
恢复数据写入子模块42,用于基于磁盘类型和恢复策略,将待恢复数据写入到云虚拟机,用于完成对待恢复数据的恢复。
进一步地,如图5所示,恢复数据写入子模块42,包括:
虚拟机镜像建成单元421,用于若磁盘类型为系统盘,则将待恢复数据建成虚拟机镜像,用于将待恢复数据写入到云虚拟机。
进一步地,如图5所示,恢复数据写入子模块42,包括:
待恢复数据直接写入单元422,用于若磁盘类型为数据盘,则将待恢复数据直接写入云虚拟机。
本实施例提供的基于对象存储的数据备份恢复系统,由于其各模块本身的功能及彼此之间的逻辑连接,能实现前述实施例的各个步骤,因此能够达到与前述实施例相同的技术效果,原理分析可参见前述基于对象存储的数据备份恢复方法的步骤的相关描述,在此不再赘述。
关于基于对象存储的数据备份恢复系统的具体限定可以参见上文中对于基于对象存储的数据备份恢复方法的限定,在此不再赘述。上述基于对象存储的数据备份恢复系统中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于设备中的处理器中,也可以以软件形式存储于设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一实施例中,提供一种电子设备,该电子设备可以是监控终端,其内部结构图可以如图6所示。该电子设备包括通过系统总线连接的处理器、存储器、网络接口和数据库。其中,该电子设备的处理器用于提供计算和控制能力。该电子设备的存储器包括非易失性介质、内存储器。该非易失性介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性介质中的操作系统和计算机程序的运行提供环境。该电子设备的数据库用于存储基于对象存储的数据备份恢复方法中需保存的数据。该电子设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种基于对象存储的数据备份恢复方法。
在一实施例中,提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行计算机程序时实现上述实施例基于对象存储的数据备份恢复方法,例如图1所示步骤S10至步骤S40。或者,处理器执行计算机程序时实现上述实施例中基于对象存储的数据备份恢复系统的各模块/单元的功能,例如图4所示模块10至模块40的功能。为避免重复,此处不再赘述。
在一实施例中,提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,计算机程序被处理器执行时实现上述实施例基于对象存储的数据备份恢复方法,或者,该计算机程序被处理器执行时实现上述系统实施例中基于对象存储的数据备份恢复系统中各模块/单元的功能。为避免重复,此处不再赘述。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,该计算机程序可存储于一非易失性计算机可读取介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其他介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM),以及存储器总线动态RAM(RDRAM)等。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将系统的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。
以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围,均应包含在本申请的保护范围之内。
Claims (7)
1.一种基于对象存储的数据备份恢复方法,其特征在于,包括:
获取业务数据,并通过备份系统向云虚拟机发起备份请求;
基于所述备份请求,对所述云虚拟机进行快照处理,将所述业务数据中的备份数据写入指定的对象存储的第一指定位置,用于获得元数据;
基于所述元数据,将所述备份数据从所述对象存储中进行提取并写入至备份系统,用于完成对所述备份数据的备份;
将所述备份数据写入到所述对象存储的第二指定位置,并获取所述备份数据中的待恢复数据,将所述待恢复数据写入到云虚拟机,用于完成对所述待恢复数据的恢复;
所述将所述待恢复数据写入到云虚拟机包括:
获取所述待恢复数据的恢复策略,并获取所述云虚拟机的磁盘类型;
基于所述磁盘类型和所述恢复策略,将所述待恢复数据写入到所述云虚拟机,用于完成对所述待恢复数据的恢复;
所述基于所述磁盘类型和所述恢复策略,将所述待恢复数据写入到所述云虚拟机,包括:
若所述磁盘类型为系统盘,则将所述待恢复数据建成虚拟机镜像,用于将所述待恢复数据写入到所述云虚拟机;
若所述磁盘类型为数据盘,则将所述待恢复数据直接写入所述云虚拟机。
2.根据权利要求1所述的一种基于对象存储的数据备份恢复方法,其特征在于,所述通过备份系统向云虚拟机发起备份请求,包括:
通过所述备份系统调用所述云虚拟机的API,基于所述API向所述云虚拟机发起所述备份请求,获得备份请求结果。
3.根据权利要求1所述的一种基于对象存储的数据备份恢复方法,其特征在于,所述基于所述元数据,将所述备份数据从所述对象存储中进行提取并写入至备份系统,包括:
基于读取权限和所述元数据,读取所述备份数据;
对所述备份数据进行数据处理,将处理后的备份数据记录到本地存储中,用于完成对所述备份数据的备份。
4.根据权利要求1所述的一种基于对象存储的数据备份恢复方法,其特征在于,所述获得元数据,包括:
获取所述备份数据的备份记录信息和虚拟机配置信息;
根据所述备份记录信息和所述虚拟机配置信息,得到各个所述备份数据的元数据。
5.一种基于对象存储的数据备份恢复系统,其特征在于,包括:
业务数据获取模块,用于获取业务数据,并通过备份系统向云虚拟机发起备份请求;
元数据获取模块,用于基于所述备份请求,对所述云虚拟机进行快照处理,将所述业务数据中的备份数据写入指定的对象存储的第一指定位置,用于获得元数据;
数据备份模块,用于基于所述元数据,将所述备份数据从所述对象存储中进行提取并写入至备份系统,用于完成对所述备份数据的备份;
数据恢复模块,用于将所述备份数据写入到所述对象存储的第二指定位置,并获取所述备份数据中的待恢复数据,将所述待恢复数据写入到云虚拟机,用于完成对所述待恢复数据的恢复;
所述将所述待恢复数据写入到云虚拟机包括:
获取恢复策略和磁盘类型模块,用于获取所述待恢复数据的恢复策略,并获取所述云虚拟机的磁盘类型;
待恢复数据写入模块,用于基于所述磁盘类型和所述恢复策略,将所述待恢复数据写入到所述云虚拟机,用于完成对所述待恢复数据的恢复;
所述基于所述磁盘类型和所述恢复策略,将所述待恢复数据写入到所述云虚拟机,包括:
建成虚拟机镜像模块,用于若所述磁盘类型为系统盘,则将所述待恢复数据建成虚拟机镜像,用于将所述待恢复数据写入到所述云虚拟机;
待恢复数据直接写入模块,用于若所述磁盘类型为数据盘,则将所述待恢复数据直接写入所述云虚拟机。
6.一种电子设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至4任一项所述基于对象存储的数据备份恢复方法。
7.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至4任一项所述基于对象存储的数据备份恢复方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310867287.7A CN116610498B (zh) | 2023-07-14 | 2023-07-14 | 基于对象存储的数据备份恢复方法、系统、设备及介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310867287.7A CN116610498B (zh) | 2023-07-14 | 2023-07-14 | 基于对象存储的数据备份恢复方法、系统、设备及介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN116610498A CN116610498A (zh) | 2023-08-18 |
CN116610498B true CN116610498B (zh) | 2024-04-09 |
Family
ID=87678491
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310867287.7A Active CN116610498B (zh) | 2023-07-14 | 2023-07-14 | 基于对象存储的数据备份恢复方法、系统、设备及介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116610498B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117370080B (zh) * | 2023-12-04 | 2024-04-09 | 深圳市木浪云科技有限公司 | 用于Hive的数据备份和数据恢复方法、系统、设备及介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106844005A (zh) * | 2016-12-29 | 2017-06-13 | 北京瑞星信息技术股份有限公司 | 基于虚拟化环境下的数据恢复方法及系统 |
CN108984343A (zh) * | 2018-07-10 | 2018-12-11 | 西北工业大学 | 一种基于内容分析的虚拟机备份及存储管理方法 |
CN111625401A (zh) * | 2020-05-29 | 2020-09-04 | 浪潮电子信息产业股份有限公司 | 基于集群文件系统的数据备份方法、装置及可读存储介质 |
CN112506616A (zh) * | 2020-12-16 | 2021-03-16 | 航天壹进制(南京)数据科技有限公司 | 一种基于云平台卷实现虚拟机跨云快速恢复的系统及方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105446826A (zh) * | 2014-06-30 | 2016-03-30 | 国际商业机器公司 | 虚拟机备份、恢复的方法及设备 |
-
2023
- 2023-07-14 CN CN202310867287.7A patent/CN116610498B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106844005A (zh) * | 2016-12-29 | 2017-06-13 | 北京瑞星信息技术股份有限公司 | 基于虚拟化环境下的数据恢复方法及系统 |
CN108984343A (zh) * | 2018-07-10 | 2018-12-11 | 西北工业大学 | 一种基于内容分析的虚拟机备份及存储管理方法 |
CN111625401A (zh) * | 2020-05-29 | 2020-09-04 | 浪潮电子信息产业股份有限公司 | 基于集群文件系统的数据备份方法、装置及可读存储介质 |
CN112506616A (zh) * | 2020-12-16 | 2021-03-16 | 航天壹进制(南京)数据科技有限公司 | 一种基于云平台卷实现虚拟机跨云快速恢复的系统及方法 |
Non-Patent Citations (1)
Title |
---|
面向虚拟平台的备份系统设计;韩同欣 等;《电脑知识与技术》;第11卷(第20期);第18-19页 * |
Also Published As
Publication number | Publication date |
---|---|
CN116610498A (zh) | 2023-08-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20150081644A1 (en) | Method and system for backing up and restoring a virtual file system | |
US9560026B1 (en) | Secure computer operations | |
US10216583B1 (en) | Systems and methods for data protection using cloud-based snapshots | |
CN108038384B (zh) | 一种高安全的集群共享存储虚拟化方法 | |
US10489066B1 (en) | Systems and methods for ensuring right-to-erasure compliance during data recovery | |
US9235584B2 (en) | Self-removal of enterprise app data | |
CN116610498B (zh) | 基于对象存储的数据备份恢复方法、系统、设备及介质 | |
US11328064B2 (en) | Automatic ransomware detection with an on-demand file system lock down and automatic repair function | |
CN110661831A (zh) | 一种基于可信第三方的大数据试验场安全初始化方法 | |
CN107870802B (zh) | 一种虚拟机迁移方法和装置 | |
US11341230B1 (en) | Maintaining dual-party authentication requirements for data retention compliance | |
WO2014150339A2 (en) | Method and system for enabling communications between unrelated applications | |
US9952802B2 (en) | Volatile memory erasure by controlling refreshment of stored data | |
CN114222990A (zh) | 具有按需文件系统锁定和自动修复功能的自动勒索软件检测 | |
CN105183799B (zh) | 一种权限管理的方法及客户端 | |
WO2021188716A1 (en) | Systems and methods for protecting a folder from unauthorized file modification | |
US11113152B1 (en) | Systems and methods for managing file backup | |
US11341245B1 (en) | Secure delivery of software updates to an isolated recovery environment | |
CN111683091A (zh) | 一种访问云主机控制台方法、装置、设备及存储介质 | |
CN114254346A (zh) | 一种数据存储的处理方法、系统、设备及介质 | |
US10936225B1 (en) | Version history of files inside a backup | |
CN105574425A (zh) | 访问存储数据的方法及装置 | |
CN115277232B (zh) | 安全策略回收方法和装置 | |
US20230021672A1 (en) | Database rapid restore after media failure | |
US9852200B1 (en) | Systems and methods for restoring data files |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |