CN116166473A - 一种数据处理方法、装置、电子设备及存储介质 - Google Patents
一种数据处理方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN116166473A CN116166473A CN202310207817.5A CN202310207817A CN116166473A CN 116166473 A CN116166473 A CN 116166473A CN 202310207817 A CN202310207817 A CN 202310207817A CN 116166473 A CN116166473 A CN 116166473A
- Authority
- CN
- China
- Prior art keywords
- target
- storage system
- container
- backup
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003860 storage Methods 0.000 title claims abstract description 84
- 238000003672 processing method Methods 0.000 title claims abstract description 17
- 238000004519 manufacturing process Methods 0.000 claims abstract description 59
- 238000011084 recovery Methods 0.000 claims abstract description 46
- 238000000034 method Methods 0.000 claims abstract description 24
- 238000013507 mapping Methods 0.000 claims description 6
- 238000004590 computer program Methods 0.000 claims description 2
- 238000002955 isolation Methods 0.000 abstract description 9
- 230000015654 memory Effects 0.000 description 14
- 238000010586 diagram Methods 0.000 description 7
- 238000013515 script Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 238000004220 aggregation Methods 0.000 description 1
- 230000002776 aggregation Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1448—Management of the data involved in backup or backup restore
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/60—Software deployment
- G06F8/61—Installation
- G06F8/63—Image based installation; Cloning; Build to order
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- Quality & Reliability (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请提供了一种数据处理方法、装置、电子设备及存储介质,该方法包括:创建目标镜像,基于所述目标镜像,对所述目标镜像进行定制处理,得到目标容器,基于所述目标容器,对所述生产环境下的所述存储系统执行目标操作。本申请能够通过用于隔离的容器运行备份及恢复操作,将生产环境和备份及恢复操作的环境有效隔离开,降低误操作成本。
Description
技术领域
本申请涉及数据处理技术领域,尤其涉及一种数据处理方法、装置、电子设备及存储介质。
背景技术
ETCD是使用Go语言开发的一个开源的、高可用的分布式key-value存储系统。ETCD的高可用性,可用于避免硬件的单点故障或网络问题。ETCD支持HTTP/JSON API,使用简单,使用Raft算法保证强一致性让用户易于理解。
ETCD集群的数据可通过命令行的etcdctl snapshot save指令实现数据备份。防止数据的意外丢失造成的损失。ETCD集群的数据可通过命令行的etcdctl snapshotrestore指令实现数据恢复,用于紧急情况下(如:数据意外丢失)的抢救性操作。但是,直接在ETCD环境使用命令行容易跟环境内的其他操作混淆,误操作率较高。
发明内容
有鉴于此,本申请实施例提供了一种数据处理方法、装置、电子设备及存储介质,能够通过用于隔离的容器运行备份及恢复操作,将生产环境和备份及恢复操作的环境有效隔离开,降低误操作成本。
本申请实施例的技术方案是这样实现的:
第一方面,本申请实施例提供一种数据处理方法,包括以下步骤:
创建目标镜像,其中,所述目标镜像为基础镜像;
基于所述目标镜像,对所述目标镜像进行定制处理,得到目标容器,其中,所述目标容器中安装了与生产环境下存储系统版本相同的目标存储系统;
基于所述目标容器,对所述生产环境下的所述存储系统执行目标操作。
在一种可能的实施方式中,所述创建目标镜像,包括:
通过目标软件创建所述目标镜像,其中,所述目标软件包括Alpine或Docker。在一种可能的实施方式中,所述方法还包括:
在一种可能的实施方式中,所述存储系统为ETCD,所述基于所述目标镜像,对所述目标镜像进行定制处理,得到目标容器,包括:
在所述目标镜像中安装与所述ETCD相同版本的目标ETCD,以及安装命令行客户端etcdctl;
创建用于创建目标容器的Dockerfile文件;
基于所述Dockerfile文件,对所述目标镜像进行编译处理,得到所述目标容器。
在一种可能的实施方式中,所述基于所述目标容器,对所述生产环境下的所述存储系统执行目标操作,包括:
基于所述目标容器,对所述生产环境下的所述存储系统执行备份操作或者恢复操作。
在一种可能的实施方式中,对所述生产环境下的所述存储系统执行备份操作,包括:
运行所述目标容器;
将所述目标容器映射至所述生产系统的所述存储系统的备份目录;
在所述目标容器中基于所述命令行客户端etcdctl运行备份命令,将待备份数据备份至所述备份目录。
在一种可能的实施方式中,对所述生产环境下的所述存储系统执行恢复操作,包括:
运行所述目标容器;
将所述目标容器映射至所述生产系统的所述存储系统的备份目录;
在所述目标容器中基于所述命令行客户端etcdctl运行恢复命令,将已备份数据进行数据恢复。
在一种可能的实施方式中,所述方法还包括:
当所述目标操作为备份操作时,在备份完成后,对已备份数据的完整性进行确认;
当所述目标操作为恢复操作时,在恢复完成后,对已恢复数据的完整性和可用性进行校验。
第二方面,本申请实施例还提供一种数据处理装置,所述装置包括:
创建模块,用于创建目标镜像,其中,所述目标镜像为基础镜像;
处理模块,用于基于所述目标镜像,对所述目标镜像进行定制处理,得到目标容器,其中,所述目标容器中安装了与生产环境下存储系统版本相同的目标存储系统;
执行模块,用于基于所述目标容器,对所述生产环境下的所述存储系统执行目标操作。
第三方面,本申请实施例还提供一种电子设备,包括:处理器、存储介质和总线,所述存储介质存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储介质之间通过总线通信,所述处理器执行所述机器可读指令,以执行第一方面任一项所述的数据处理方法。
第四方面,本申请实施例还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器运行时执行第一方面任一项所述的数据处理方法。
本申请实施例具有以下有益效果:
通过创建目标镜像,然后基于所述目标镜像,对目标镜像进行定制处理,得到目标容器,最后基于所述目标容器,对所述生产环境下的所述存储系统执行目标操作,这样,能够通过容器实现备份和恢复操作与生产环境的ETCD(宿主机)隔离,增强安全性并最大化降低操作的混淆度;并且本方法所使用的alpine基础镜像制作备份和恢复用的操作镜像,alpine作为基础镜像能最大程度的降低编译后的镜像尺寸。极小的镜像尺寸能快速执行备份和恢复操作,在安全隔离的同时有效提高容器运行速度,提高备份和恢复的操作效率。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本申请的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1是本申请实施例提供的步骤S101-S103的流程示意图;
图2是本申请实施例提供的步骤S1021-S1023的流程示意图;
图3是本申请实施例提供的步骤S201-S203的流程示意图;
图4是本申请实施例提供的步骤S301-S303的流程示意图;
图5是本申请实施例提供的数据处理装置的结构示意图;
图6是本申请实施例提供的电子设备的组成结构示意图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,应当理解,本申请中附图仅起到说明和描述的目的,并不用于限定本申请的保护范围。另外,应当理解,示意性的附图并未按实物比例绘制。本申请中使用的流程图示出了根据本申请的一些实施例实现的操作。应该理解,流程图的操作可以不按顺序实现,没有逻辑的上下文关系的步骤可以反转顺序或者同时实施。此外,本领域技术人员在本申请内容的指引下,可以向流程图添加一个或多个其他操作,也可以从流程图中移除一个或多个操作。
在以下的描述中,涉及到“一些实施例”,其描述了所有可能实施例的子集,但是可以理解,“一些实施例”可以是所有可能实施例的相同子集或不同子集,并且可以在不冲突的情况下相互结合。
另外,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围,而是仅仅表示本申请的选定实施例。基于本申请的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本申请保护的范围。
在以下的描述中,所涉及的术语“第一\第二\第三”仅仅是区别类似的对象,不代表针对对象的特定排序,可以理解地,“第一\第二\第三”在允许的情况下可以互换特定的顺序或先后次序,以使这里描述的本申请实施例能够以除了在这里图示或描述的以外的顺序实施。
需要说明的是,本申请实施例中将会用到术语“包括”,用于指出其后所声明的特征的存在,但并不排除增加其它的特征。
除非另有定义,本文所使用的所有的技术和科学术语与属于本申请的技术领域的技术人员通常理解的含义相同。本文中所使用的术语是为了描述本申请实施例的目的,不是在限制本申请。
参见图1,图1是本申请实施例提供的数据处理方法步骤S101-S103的流程示意图,将结合图1示出的步骤S101-S103进行说明。
步骤S101,创建目标镜像,其中,所述目标镜像为基础镜像;
步骤S102,基于所述目标镜像,对所述目标镜像进行定制处理,得到目标容器,其中,所述目标容器中安装了与生产环境下存储系统版本相同的目标存储系统;
步骤S103,基于所述目标容器,对所述生产环境下的所述存储系统执行目标操作。
上述数据处理方法,通过创建目标镜像,然后基于所述目标镜像,对目标镜像进行定制处理,得到目标容器,最后基于所述目标容器,对所述生产环境下的所述存储系统执行目标操作,这样,能够通过容器实现备份和恢复操作与生产环境的ETCD(宿主机)隔离,增强安全性并最大化降低操作的混淆度;并且本方法所使用的alpine基础镜像制作备份和恢复用的操作镜像,alpine作为基础镜像能最大程度的降低编译后的镜像尺寸。极小的镜像尺寸能快速执行备份和恢复操作,在安全隔离的同时有效提高容器运行速度,提高备份和恢复的操作效率。
下面分别对本申请实施例的上述示例性的各步骤进行说明。
在步骤S101中,创建目标镜像,其中,所述目标镜像为基础镜像。
在一些实施例中,所述创建目标镜像,包括:
通过目标软件创建所述目标镜像,其中,所述目标软件包括Alpine或Docker。
这里,用于隔离的容器镜像是通过alpine基础镜像制作而成,alpine基础镜像以小巧轻便著称,编译后的alpine-etcdctl镜像(也即目标容器)体积也极其小巧。小体积的镜像保障了容器运行速度的高效。
在步骤S102中,基于所述目标镜像,对所述目标镜像进行定制处理,得到目标容器,其中,所述目标容器中安装了与生产环境下存储系统版本相同的目标存储系统。
在一些实施例中,参见图2,图2是本申请实施例提供的步骤S1021-S1023的流程示意图,图1示出的步骤S102可以通过步骤S1021-S1023实现,将结合各步骤进行说明。
在步骤S1021中,在所述目标镜像中安装与所述ETCD相同版本的目标ETCD,以及安装命令行客户端etcdctl。
在步骤S1022中,创建用于创建目标容器的Dockerfile文件;
在步骤S1023中,基于所述Dockerfile文件,对所述目标镜像进行编译处理,得到所述目标容器。
这里,首先需要将已经创建好的目标镜像(alpine基础镜像)的repositories源修改为阿里云源,以便于从对应的仓库中下载对应的资源。
然后,由于创建好的目标镜像(alpine基础镜像)本质上是Linux操作系统,需要安装对应的软件从而与生产环境保持一致,因此,需要在目标镜像中安装与生产环境相同版本的ETCD和安装命令行客户端etcdctl,安装命令行客户端etcdctl用于直接和ETCD服务交互,对ETCD中的键值对进行增删改查。
接着,创建Dockerfile文件,Dockerfile文件是用来构建Docker镜像的文本文件,文本内容包含了一条条构建镜像所需的指令、参数和说明。即:Dockerfile仅仅是用来制作镜像的源码文件,也可以说成是一个脚本文件。
最后,可以基于创建好的Dockerfile文件,来编译得到alpine-etcdctl镜像,也即本申请实施例中所提到的目标容器。
在步骤S103中,基于所述目标容器,对所述生产环境下的所述存储系统执行目标操作。
在一些实施例中,所述基于所述目标容器,对所述生产环境下的所述存储系统执行目标操作,包括:
基于所述目标容器,对所述生产环境下的所述存储系统执行备份操作或者恢复操作。
这里,由于直接在ETCD环境使用命令行容易跟环境内的其他操作混淆,误操作率较高,且备份操作或者恢复操作误操作后的误操作成本较高,因此,可以将这两种操作转移至容器中进行操作,从而与宿主机的ETCD环境隔离。
在一些实施例中,参见图3,图3是本申请实施例提供的步骤S201-S203的流程示意图,对所述生产环境下的所述存储系统执行备份操作,可以通过步骤S201-S203实现,将集合各步骤进行说明。
在步骤S201中,运行所述目标容器。
在步骤S202中,将所述目标容器映射至所述生产系统的所述存储系统的备份目录。
在步骤S203中,在所述目标容器中基于所述命令行客户端etcdctl运行备份命令,将待备份数据备份至所述备份目录。
这里,在目标容器中进行备份操作之前,需要先运行目标容器,并在在运行命令后添加rm参数,运行后退出,这里加rm参数的意义在于制作完成后删除临时容器。
然后,通过-v参数挂载宿主机备份目录,也即生产系统的存储系统的备份目录。
最后,通过脚本执行etcdctl snapshot save命令实现ETCD数据备份至宿主机ETCD备份目录。
在一些实施例中,参见图4,图4是本申请实施例提供的步骤S301-S303的流程示意图,对所述生产环境下的所述存储系统执行恢复操作,可以通过步骤S301-S303实现,将集合各步骤进行说明。
在步骤S301中,运行所述目标容器。
在步骤S302中,将所述目标容器映射至所述生产系统的所述存储系统的备份目录。
在步骤S303中,在所述目标容器中基于所述命令行客户端etcdctl运行恢复命令,将已备份数据进行数据恢复。
这里,与备份的操作流程类似,首先在目标容器中进行恢复操作之前,也需要先运行目标容器,并在在运行命令后添加rm参数,运行后退出,这里加rm参数的意义在于制作完成后删除临时容器。
然后,通过-v参数挂载宿主机备份目录,也即生产系统的存储系统的备份目录。
最后,通过脚本执行etcdctl snapshot restore命令实现ETCD数据恢复。
在本申请实施例中,所采用的方法的原理为:
备份或恢复脚本是在容器里执行的,相当于在容器里一个相对干净的环境里去执行操作,备份的文件仍然被备份或恢复至宿主机的备份目录,恢复也是基于宿主机的备份目录进行恢复,相当于提供了一个隔离环境去执行操作,从而降低误操作成本。
在一些实施例中,所述方法还包括:
当所述目标操作为备份操作时,在备份完成后,对已备份数据的完整性进行确认;
当所述目标操作为恢复操作时,在恢复完成后,对已恢复数据的完整性和可用性进行校验。
这里,若执行了备份操作,则在备份完成后,还需要对已备份数据的完整性进行确认,确认是否有丢失数据或有错误数据。
若执行了恢复操作,除了对已恢复数据的完整性进行校验,还需要对已恢复数据的可用性进行校验,以防止后续出错。
综上所述,通过本申请实施例具有以下有益效果:
通过创建目标镜像,然后基于所述目标镜像,对目标镜像进行定制处理,得到目标容器,最后基于所述目标容器,对所述生产环境下的所述存储系统执行目标操作,这样,能够通过容器实现备份和恢复操作与生产环境的ETCD(宿主机)隔离,增强安全性并最大化降低操作的混淆度;并且本方法所使用的alpine基础镜像制作备份和恢复用的操作镜像,alpine作为基础镜像能最大程度的降低编译后的镜像尺寸。极小的镜像尺寸能快速执行备份和恢复操作,在安全隔离的同时有效提高容器运行速度,提高备份和恢复的操作效率。
基于同一发明构思,本申请实施例中还提供了与第一实施例中数据处理方法对应的数据处理装置,由于本申请实施例中的装置解决问题的原理与上述数据处理方法相似,因此装置的实施可以参见方法的实施,重复之处不再赘述。
如图5所示,图5是本申请实施例提供的数据处理装置500的结构示意图。数据处理装置500包括:
创建模块501,用于创建目标镜像,其中,所述目标镜像为基础镜像;
处理模块502,用于基于所述目标镜像,对所述目标镜像进行定制处理,得到目标容器,其中,所述目标容器中安装了与生产环境下存储系统版本相同的目标存储系统;
执行模块503,用于基于所述目标容器,对所述生产环境下的所述存储系统执行目标操作。
本领域技术人员应当理解,图5所示的数据处理装置500中的各单元的实现功能可参照前述数据处理方法的相关描述而理解。图5所示的数据处理装置500中的各单元的功能可通过运行于处理器上的程序而实现,也可通过具体的逻辑电路而实现。
在一种可能的实施方式中,创建模块501创建目标镜像,包括:
通过目标软件创建所述目标镜像,其中,所述目标软件包括Alpine或Docker。
在一种可能的实施方式中,所述存储系统为ETCD,处理模块502基于所述目标镜像,对所述目标镜像进行定制处理,得到目标容器,包括:
在所述目标镜像中安装与所述ETCD相同版本的目标ETCD,以及安装命令行客户端etcdctl;
创建用于创建目标容器的Dockerfile文件;
基于所述Dockerfile文件,对所述目标镜像进行编译处理,得到所述目标容器。
在一种可能的实施方式中,执行模块503基于所述目标容器,对所述生产环境下的所述存储系统执行目标操作,包括:
基于所述目标容器,对所述生产环境下的所述存储系统执行备份操作或者恢复操作。
在一种可能的实施方式中,执行模块503对所述生产环境下的所述存储系统执行备份操作,包括:
运行所述目标容器;
将所述目标容器映射至所述生产系统的所述存储系统的备份目录;
在所述目标容器中基于所述命令行客户端etcdctl运行备份命令,将待备份数据备份至所述备份目录。
在一种可能的实施方式中,执行模块503对所述生产环境下的所述存储系统执行恢复操作,包括:
运行所述目标容器;
将所述目标容器映射至所述生产系统的所述存储系统的备份目录;
在所述目标容器中基于所述命令行客户端etcdctl运行恢复命令,将已备份数据进行数据恢复。
在一种可能的实施方式中,执行模块503还包括当所述目标操作为备份操作时,在备份完成后,对已备份数据的完整性进行确认;
当所述目标操作为恢复操作时,在恢复完成后,对已恢复数据的完整性和可用性进行校验。
上述数据处理装置通过创建目标镜像,然后基于所述目标镜像,对目标镜像进行定制处理,得到目标容器,最后基于所述目标容器,对所述生产环境下的所述存储系统执行目标操作,这样,能够通过容器实现备份和恢复操作与生产环境的ETCD(宿主机)隔离,增强安全性并最大化降低操作的混淆度;并且本方法所使用的alpine基础镜像制作备份和恢复用的操作镜像,alpine作为基础镜像能最大程度的降低编译后的镜像尺寸。极小的镜像尺寸能快速执行备份和恢复操作,在安全隔离的同时有效提高容器运行速度,提高备份和恢复的操作效率。
如图6所示,图6为本申请实施例提供的电子设备600的组成结构示意图,所述电子设备600,包括:
处理器601、存储介质602和总线603,所述存储介质602存储有所述处理器601可执行的机器可读指令,当电子设备600运行时,所述处理器601与所述存储介质602之间通过总线603通信,所述处理器601执行所述机器可读指令,以执行本申请实施例所述的数据处理方法的步骤。
实际应用时,所述电子设备600中的各个组件通过总线603耦合在一起。可理解,总线603用于实现这些组件之间的连接通信。总线603除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见,在图6中将各种总线都标为总线603。
上述电子设备通过创建目标镜像,然后基于所述目标镜像,对目标镜像进行定制处理,得到目标容器,最后基于所述目标容器,对所述生产环境下的所述存储系统执行目标操作,这样,能够通过容器实现备份和恢复操作与生产环境的ETCD(宿主机)隔离,增强安全性并最大化降低操作的混淆度;并且本方法所使用的alpine基础镜像制作备份和恢复用的操作镜像,alpine作为基础镜像能最大程度的降低编译后的镜像尺寸。极小的镜像尺寸能快速执行备份和恢复操作,在安全隔离的同时有效提高容器运行速度,提高备份和恢复的操作效率。
本申请实施例还提供了一种计算机可读存储介质,所述存储介质存储有可执行指令,当所述可执行指令被至少一个处理器601执行时,实现本申请实施例所述的数据处理方法。
在一些实施例中,存储介质可以是磁性随机存取存储器(FRAM,FerromagneticRandom Access Memory)、只读存储器(ROM,Read Only Memory)、可编程只读存储器(PROM,Programmable Read Only Memory)、可擦除可编程只读存储器(EPROM,ErasableProgrammable Read Only Memory)、电可擦除可编程只读存储器(EEPROM,ElectricallyErasable Programmable Read Only Memory)、快闪存储器(Flash Memory)、磁表面存储器、光盘、或只读光盘(CD ROM,Compact Disc Read Only Memory)等存储器;也可以是包括上述存储器之一或任意组合的各种设备。
在一些实施例中,可执行指令可以采用程序、软件、软件模块、脚本或代码的形式,按任意形式的编程语言(包括编译或解释语言,或者声明性或过程性语言)来编写,并且其可按任意形式部署,包括被部署为独立的程序或者被部署为模块、组件、子例程或者适合在计算环境中使用的其它单元。
作为示例,可执行指令可以但不一定对应于文件系统中的文件,可以被存储在保存其它程序或数据的文件的一部分,例如,存储在超文本标记语言(HTML,HyperTextMarkupLanguage)文档中的一个或多个脚本中,存储在专用于所讨论的程序的单个文件中,或者,存储在多个协同文件(例如,存储一个或多个模块、子程序或代码部分的文件)中。
作为示例,可执行指令可被部署为在一个计算设备上执行,或者在位于一个地点的多个计算设备上执行,又或者,在分布在多个地点且通过通信网络互连的多个计算设备上执行。
上述计算机可读存储介质通过创建目标镜像,然后基于所述目标镜像,对目标镜像进行定制处理,得到目标容器,最后基于所述目标容器,对所述生产环境下的所述存储系统执行目标操作,这样,能够通过容器实现备份和恢复操作与生产环境的ETCD(宿主机)隔离,增强安全性并最大化降低操作的混淆度;并且本方法所使用的alpine基础镜像制作备份和恢复用的操作镜像,alpine作为基础镜像能最大程度的降低编译后的镜像尺寸。极小的镜像尺寸能快速执行备份和恢复操作,在安全隔离的同时有效提高容器运行速度,提高备份和恢复的操作效率。
在本申请所提供的几个实施例中,应该理解到,所揭露的方法和电子设备,可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,如:多个单元或组件可以结合,或可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口,设备或单元的间接耦合或通信连接,可以是电性的、机械的或其它形式的。
所述作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,平台服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
以上仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以权利要求的保护范围为准。
Claims (10)
1.一种数据处理方法,其特征在于,包括以下步骤:
创建目标镜像,其中,所述目标镜像为基础镜像;
基于所述目标镜像,对所述目标镜像进行定制处理,得到目标容器,其中,所述目标容器中安装了与生产环境下存储系统版本相同的目标存储系统;
基于所述目标容器,对所述生产环境下的所述存储系统执行目标操作。
2.根据权利要求1所述的方法,其特征在于,所述创建目标镜像,包括:
通过目标软件创建所述目标镜像,其中,所述目标软件包括Alpine或Docker。
3.根据权利要求1所述的方法,其特征在于,所述存储系统为ETCD,所述基于所述目标镜像,对所述目标镜像进行定制处理,得到目标容器,包括:
在所述目标镜像中安装与所述ETCD相同版本的目标ETCD,以及安装命令行客户端etcdctl;
创建用于创建目标容器的Dockerfile文件;
基于所述Dockerfile文件,对所述目标镜像进行编译处理,得到所述目标容器。
4.根据权利要求1所述的方法,其特征在于,所述基于所述目标容器,对所述生产环境下的所述存储系统执行目标操作,包括:
基于所述目标容器,对所述生产环境下的所述存储系统执行备份操作或者恢复操作。
5.根据权利要求4所述的方法,其特征在于,对所述生产环境下的所述存储系统执行备份操作,包括:
运行所述目标容器;
将所述目标容器映射至所述生产系统的所述存储系统的备份目录;
在所述目标容器中基于所述命令行客户端etcdctl运行备份命令,将待备份数据备份至所述备份目录。
6.根据权利要求4所述的方法,其特征在于,对所述生产环境下的所述存储系统执行恢复操作,包括:
运行所述目标容器;
将所述目标容器映射至所述生产系统的所述存储系统的备份目录;
在所述目标容器中基于所述命令行客户端etcdctl运行恢复命令,将已备份数据进行数据恢复。
7.根据权利要求1所述的方法,其特征在于,所述方法还包括:
当所述目标操作为备份操作时,在备份完成后,对已备份数据的完整性进行确认;
当所述目标操作为恢复操作时,在恢复完成后,对已恢复数据的完整性和可用性进行校验。
8.一种数据处理装置,其特征在于,所述装置包括:
创建模块,用于创建目标镜像,其中,所述目标镜像为基础镜像;
处理模块,用于基于所述目标镜像,对所述目标镜像进行定制处理,得到目标容器,其中,所述目标容器中安装了与生产环境下存储系统版本相同的目标存储系统;
执行模块,用于基于所述目标容器,对所述生产环境下的所述存储系统执行目标操作。
9.一种电子设备,其特征在于,包括:处理器、存储介质和总线,所述存储介质存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储介质之间通过总线通信,所述处理器执行所述机器可读指令,以执行如权利要求1至7任一项所述的数据处理方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器运行时执行如权利要求1至7任一项所述的数据处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310207817.5A CN116166473A (zh) | 2023-02-27 | 2023-02-27 | 一种数据处理方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310207817.5A CN116166473A (zh) | 2023-02-27 | 2023-02-27 | 一种数据处理方法、装置、电子设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116166473A true CN116166473A (zh) | 2023-05-26 |
Family
ID=86418233
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310207817.5A Pending CN116166473A (zh) | 2023-02-27 | 2023-02-27 | 一种数据处理方法、装置、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116166473A (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109669808A (zh) * | 2017-10-17 | 2019-04-23 | 中移(苏州)软件技术有限公司 | 一种系统备份的方法及设备 |
CN110109649A (zh) * | 2018-02-01 | 2019-08-09 | 中国电信股份有限公司 | 针对Web服务的容器控制方法、装置和容器系统 |
CN110673923A (zh) * | 2019-09-06 | 2020-01-10 | 中国平安财产保险股份有限公司 | Xwiki系统配置方法、系统及计算机设备 |
CN111984274A (zh) * | 2020-07-03 | 2020-11-24 | 新浪网技术(中国)有限公司 | 一种一键自动化部署etcd集群的方法及装置 |
CN112799688A (zh) * | 2021-01-18 | 2021-05-14 | 中国银联股份有限公司 | 容器应用内软件包安装方法、装置、计算机设备及介质 |
-
2023
- 2023-02-27 CN CN202310207817.5A patent/CN116166473A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109669808A (zh) * | 2017-10-17 | 2019-04-23 | 中移(苏州)软件技术有限公司 | 一种系统备份的方法及设备 |
CN110109649A (zh) * | 2018-02-01 | 2019-08-09 | 中国电信股份有限公司 | 针对Web服务的容器控制方法、装置和容器系统 |
CN110673923A (zh) * | 2019-09-06 | 2020-01-10 | 中国平安财产保险股份有限公司 | Xwiki系统配置方法、系统及计算机设备 |
CN111984274A (zh) * | 2020-07-03 | 2020-11-24 | 新浪网技术(中国)有限公司 | 一种一键自动化部署etcd集群的方法及装置 |
CN112799688A (zh) * | 2021-01-18 | 2021-05-14 | 中国银联股份有限公司 | 容器应用内软件包安装方法、装置、计算机设备及介质 |
Non-Patent Citations (1)
Title |
---|
魏新宇 等,著: "金融级IT架构与运维 云原生 分布式与安全", vol. 2022, 31 January 2022, 机械工业出版社, pages: 97 - 100 * |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10621029B2 (en) | Restoring an application from a system dump file | |
US11392461B2 (en) | Method and apparatus for processing information | |
US9665469B2 (en) | System and method of runtime downloading of debug code and diagnostics tools in an already deployed baseboard management controller (BMC) devices | |
CN107491329B (zh) | Docker镜像构建方法、设备、存储介质以及电子装置 | |
CN102830990A (zh) | 一种计算机系统启动方法及计算机终端 | |
US9696988B2 (en) | Upgrade processing method, apparatus and system for CPLD | |
US8458510B2 (en) | LPAR creation and repair for automated error recovery | |
US20200341752A1 (en) | Electronic apparatus and method for controlling thereof | |
CN107797887B (zh) | 数据备份及恢复方法、装置、存储介质和电子设备 | |
CN114398145A (zh) | 基于X86平台的Jailhouse运行non-root Linux的方法 | |
CN104346206A (zh) | 一种已卸载软件恢复安装的方法和系统 | |
CN116166473A (zh) | 一种数据处理方法、装置、电子设备及存储介质 | |
CN106970865B (zh) | 作为微云环境中的服务的软件的监视和管理 | |
CN103713952A (zh) | 一种基于ufs的虚拟磁盘分布式存储方法 | |
US10733065B2 (en) | Recovery of local resource | |
CN114116330B (zh) | 服务器性能测试方法、系统、终端及存储介质 | |
US11334419B1 (en) | Information handling system fault analysis with remote remediation file system | |
CN114706622A (zh) | 启动模型服务的方法、装置、设备、介质及产品 | |
CN104636574A (zh) | 终端设备升级方法及终端设备 | |
WO2022050938A1 (en) | Firmware event recovery | |
CN112379973A (zh) | 重载方法和装置 | |
CN111752600A (zh) | 代码异常检测方法、装置、计算机设备及存储介质 | |
CN104572350A (zh) | 一种元数据处理方法及装置 | |
CN111209139B (zh) | 基于版本控制管理系统的容灾方法及装置 | |
KR102057524B1 (ko) | 위성 관제 시스템이 수행하는 실행 시점 복원 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |