CN114356504A - 集群中数据迁移方法、装置、电子设备和存储介质 - Google Patents

集群中数据迁移方法、装置、电子设备和存储介质 Download PDF

Info

Publication number
CN114356504A
CN114356504A CN202210001751.XA CN202210001751A CN114356504A CN 114356504 A CN114356504 A CN 114356504A CN 202210001751 A CN202210001751 A CN 202210001751A CN 114356504 A CN114356504 A CN 114356504A
Authority
CN
China
Prior art keywords
new
data volume
storage data
cluster
original
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210001751.XA
Other languages
English (en)
Inventor
赵育丰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Kingsoft Cloud Network Technology Co Ltd
Original Assignee
Beijing Kingsoft Cloud Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Kingsoft Cloud Network Technology Co Ltd filed Critical Beijing Kingsoft Cloud Network Technology Co Ltd
Priority to CN202210001751.XA priority Critical patent/CN114356504A/zh
Publication of CN114356504A publication Critical patent/CN114356504A/zh
Pending legal-status Critical Current

Links

Images

Abstract

本申请涉及一种集群中数据迁移方法、装置、电子设备和存储介质,应用于数据处理技术领域,其中,方法包括:在监测到对集群中目标节点包括的原始存储数据卷的数据迁移指令后,获取新的创建插件,目标节点为集群中的任一节点;获取创建原始存储数据卷时使用的原始创建配置信息;根据原始创建配置信息和新的创建插件,创建新存储数据卷;将原始存储数据卷中的存储数据,转存到新存储数据卷。以解决现有技术中,数据备份导入过程中,由于数据量较大,数据备份时间较长,需要对外停止提供服务,业务端会由于暂停服务,而导致不能正常使用,造成一定的影响的问题。

Description

集群中数据迁移方法、装置、电子设备和存储介质
技术领域
本申请涉及数据处理技术领域,尤其涉及一种集群中数据迁移方法、装置、电子设备和存储介质。
背景技术
随着互联网应用的发展,用户量的激增,为了能够满足用户使用需求,通常将服务存储于服务器集群中各服务器,以对外提供服务。然而,实际应用过程中,不可避免地涉及服务迁移,例如,线上某个服务器集群需要下线,某个服务器的存储内存被占满,或者机房维护搬迁的时候,都会面临服务迁移的任务,需要将老服务器集群的服务迁移到新服务器集群中,以继续提供服务。
相关技术的集群迁移方法,采用将需要迁移的租户的数据进行拷贝打包,然后将当前用户集群(旧有集群)服务停掉后删除当前集群,然后新建一个与之前删掉集群同名的集群,然后将打包的数据直接拷贝到当前新建的集群,并重启服务。
但是,现有技术中的集群迁移方法,在数据备份导入过程中,由于数据量较大,数据备份时间较长,需要对外停止提供服务,业务端会由于暂停服务,而导致不能正常使用,造成一定的影响。
发明内容
本申请提供了一种集群中数据迁移方法、装置、电子设备和存储介质,用以解决现有技术中,数据备份导入过程中,由于数据量较大,数据备份时间较长,需要对外停止提供服务,业务端会由于暂停服务,而导致不能正常使用,造成一定的影响的问题。
第一方面,本申请实施例提供了一种集群中数据迁移方法,包括:
在监测到对集群中目标节点包括的原始存储数据卷的数据迁移指令后,获取新的创建插件,所述目标节点为所述集群中的任一节点;
获取创建所述原始存储数据卷时使用的原始创建配置信息;
根据所述原始创建配置信息和所述新的创建插件,创建新存储数据卷;
将所述原始存储数据卷中的存储数据,转存到所述新存储数据卷。
可选的,所述根据所述原始创建配置信息和所述新的创建插件,创建新存储数据卷,包括:
将所述原始创建配置信息绑定所述新的创建插件;
运行所述新的创建插件,得到所述新存储数据卷。
可选的,所述方法还包括:
删除所述集群中的目标节点;
创建新的节点,并将所述新的节点绑定所述新存储数据卷。
可选的,所述将所述新的节点绑定所述新存储数据卷,包括:
创建新的持久化存储声明;
将所述持久化存储声明绑定所述原始创建配置信息,所述原始创建配置信息绑定所述新的创建插件。
可选的,所述将所述原始存储数据卷中的数据,转存到所述新存储数据卷之后,还包括:
将所述新的节点接入所述集群;
获取所述集群中的其他节点发送的增量数据,所述增量数据为所述其他节点包括的存储数据卷中的数据与所述新的节点包括的所述新存储数据卷中的数据之间的差异数据,所述其他节点为所述集群中除所述新的节点外的节点。
可选的,所述在监测到对集群中目标节点对应数据的数据迁移指令时,获取新的创建插件之前,还包括:
获取所述集群中,各节点包括的存储数据卷中数据的数据量;
将每个所述存储数据卷中数据的数据量与所述存储数据卷各自的预设值进行比较;
若所述数据量大于或等于所述预设值,确定包括所述存储数据卷的节点为所述目标节点,并生成所述数据迁移指令。
可选的,所述预设值小于所述存储数据卷的存储空间。
第二方面,本申请实施例提供了一种集群中数据迁移装置,包括:
第一获取模块,用于在监测到对集群中目标节点包括的原始存储数据卷的数据迁移指令后,获取新的创建插件,所述目标节点为所述集群中的任一节点;
第二获取模块,用于获取创建所述原始存储数据卷时使用的原始创建配置信息;
创建模块,用于根据所述原始创建配置信息和所述新的创建插件,创建新存储数据卷;
转存模块,用于将所述原始存储数据卷中的存储数据,转存到所述新存储数据卷。
第三方面,本申请实施例提供了一种电子设备,包括:处理器、通信接口、存储器和通信总线,其中,处理器、通信接口和存储器通过通信总线完成相互间的通信;
所述存储器,用于存储计算机程序;
所述处理器,用于执行所述存储器中所存储的程序,实现第一方面所述的集群中数据迁移方法。
第四方面,本申请实施例提供了一种计算机可读存储介质,存储有计算机程序,所述计算机程序被处理器执行时实现第一方面所述的集群中数据迁移方法。
本申请实施例提供的上述技术方案与现有技术相比具有如下优点:本申请实施例提供的该方法,通过在监测到对集群中目标节点包括的原始存储数据卷的数据迁移指令后,获取新的创建插件,目标节点为集群中的任一节点;获取创建原始存储数据卷时使用的原始创建配置信息;根据原始创建配置信息和新的创建插件,创建新存储数据卷;将原始存储数据卷中的存储数据,转存到新存储数据卷。如此,通过获取新的创建插件,替换创建配置信息中的创建插件,从而能够生成与集群中存在的原始存储数据卷不同的新存储数据卷,进而,通过将原始存储数据卷中的数据转存到新存储数据卷,使原始存储数据卷中的数据快速备份,由于集群中的其他节点在正常运行,因此,在数据迁移过程中,无需暂停服务,保证了集群中数据在迁移过程中的正常调用,提高了用户的使用体验。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本发明的实施例,并与说明书一起用于解释本发明的原理。
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本申请一实施例提供的集群中数据迁移方法的应用场景图;
图2为本申请一实施例提供的集群中数据迁移方法的流程图;
图3为本申请一实施例提供的集群中数据迁移方法中数据迁移前后的图;
图4为本申请一实施例提供的集群中数据迁移装置的结构图;
图5为本申请一实施例提供的电子设备的结构图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请的一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本申请保护的范围。
在对本发明实施例进行进一步详细说明之前,对本发明实施例中涉及的名词和术语进行说明,本发明实施例中涉及的名词和术语适用于如下的解释。
容器集群管理系统(Kubernetes):是一个开源的,用于管理云平台中多个主机上的容器化的应用,容器集群管理系统的目标是让部署容器化的应用简单并且高效,容器集群管理系统提供了应用部署,规划,更新,维护的一种机制。在容器集群管理系统中,可以创建多个容器,每个容器里面运行一个应用实例,然后通过内置的负载均衡策略,实现对这一组应用实例的管理、发现、访问。
部署单位(Pod):Pod是容器集群管理系统创建或部署的最小/最简单的基本单位,一个Pod代表集群上正在运行的一个进程。一个Pod封装一个应用容器(也可以有多个容器),存储资源、一个独立的网络IP以及管理控制容器运行方式的策略选项。Pod代表部署的一个单位:Kubernetes中单个应用的实例,它可能由单个容器或多个容器共享组成的资源。
数据存储节点(mysql):部署在部署单位Pod中。
持久化存储声明(Persistent Volume Claim,PVC),用于描述Pod想要使用的持久化属性,比如存储大小、读写权限等。
存储数据卷(Persistent Volume,PV):持久化存储数据卷,用于描述一个具体的Volume属性,比如Volume的类型、挂载目录、远程存储服务器地址等。
Kubernetes控制器(Statefulset):使用Pod模板创建Pod的时候,对它们进行编号,并且按照编号顺序逐一完成创建工作。而当StatefulSet的“控制循环”发现Pod的“实际状态”与“期望状态”不一致,需要新建或者删除Pod进行“调谐”的时候,它会严格按照这些Pod编号的顺序,逐一完成这些操作。
创建配置信息(StorageClass):用于自动创建存储数据卷;包含有两个重要部分:存储数据卷属性(比如,存储类型,文件集(Volume)的大小等)和创建此存储数据卷所需要的插件。
创建插件(Provisoner),用来创建存储数据卷。
集群:计算机集群的简称,是一种计算机系统,它通过一组松散集成的计算机软件(和/或)硬件连接起来高度紧密地协作完成计算工作。在某种意义上,他们可以被看作是一台计算机。集群系统中的单个计算机通常称为节点,通常通过局域网连接,但也有其它的可能连接方式。每个集群节点都是运行其自己进程的一个独立服务器。当集群中的任意一个节点失效的情况下,节点上的所有任务自动转移到其他正常的节点上,并且此过程不影响整个集群的运行,不影响业务的提供。类似是集群中运行着两个或两个以上的一样的节点,当某个主节点出现故障的时候,那么其他作为从节点的节点就会接替主节点上面的任务。从节点可以接管主节点的资源(IP地址,架构身份等),此时用户不会发现提供服务的对象从主节点转移到从节点,用户端无感知。
根据本申请一实施例提供了一种集群中数据迁移方法。可选地,在本申请实施例中,上述集群中数据迁移方法可以应用于如图1所示的由终端101和服务器集群102所构成的硬件环境中。如图1所示,服务器集群102通过网络与终端101进行连接,可用于为终端或终端上安装的客户端提供服务(如视频服务、应用服务等),服务器集群102中包括多个提供服务的服务节点,通过每个服务节点与终端进行数据对接,并在每个服务节点中完成数据的读写,在每个服务节点中设置有对应的数据库,用于为服务器集群102提供数据存储服务,上述网络包括但不限于:广域网、城域网或局域网,终端101并不限定于PC、手机、平板电脑等。
本申请实施例的集群中数据迁移方法可以由管理服务器集群102的总控服务器来执行,或者由集群管理系统的服务器来执行。
以总控服务器执行本申请实施例的集群中数据迁移方法为例,图2是根据本申请实施例的一种可选的集群中数据迁移方法的流程示意图,如图2所示,该方法的流程可以包括以下步骤:
步骤201、在监测到对集群中目标节点包括的原始存储数据卷的数据迁移指令后,获取新的创建插件,目标节点为集群中的任一节点。
一些实施例中,创建插件是用于创建存储数据卷的插件,在监测到数据迁移指令后,便会调用已存储的新的创建插件,从而获取到该新的创建插件。
其中,该新的创建插件可以存储在总控服务器的数据库中,在使用时直接从总控服务器中调用创建插件;或者在每个服务节点的数据库中均存储创建插件,在监测到目标节点的数据迁移指令后,可以从目标节点的数据库中调用创建插件。
可以理解的是,创建插件可以根据不同服务器的类型进行创建不同类型的存储数据卷。在集群中不同节点对应的服务器不同时,创建插件能够根据目标节点对应的服务器的类型,创建出对应类型的存储数据卷。
可以理解的是,确定的目标节点的数量可以是一个也可以是两个以上。在目标节点为一个时,该目标节点对应的服务器为一个,在调用到创建插件之后,创建插件便能够根据该目标节点的服务器的类型创建对应类型的存储数据卷;在目标节点为两个以上时,各目标节点对应的服务器类型可能不同,对于每个目标节点对应的服务器在调用到创建插件后,创建插件能够自动根据当前目标节点的服务器的类型创建对应类型的存储数据卷。
一些实施例中,监测到数据迁移指令的方式有多种,例如,可以是用户在使用过程中,有相关数据迁移需求时,通过在集群管理系统中选择对目标节点包括的原始存储数据卷后,对集群管理系统显示界面中的迁移按钮进行触发后,由集群管理系统的服务器检测到该触发操作后监测到的;也可以是通过获取集群中各节点包括的原始存储数据卷的数据量,将每个存储数据卷中数据的数据量与存储数据卷各自的预设值进行比较;若数据量大于或等于预设值,确定包括存储数据卷的节点为目标节点。
其中,各存储数据卷的预设值可以相同也可以不同。由于在不同节点包括的存储数据卷的空间容量不同,因此,可以每个存储数据卷设置各自的预设值。
其中,预设值小于存储数据卷的存储空间。示例性的,存储数据卷的存储空间为10G,预设值可以为9.8G。
在获取到节点包括的存储数据卷的数据量,将该数据量与预设值进行比较,若该数据量以达到预设值,则表示该节点包括的原始存储数据卷的存储空间的剩余量较少,从而将该节点作为目标节点,并生成数据迁移指令,进而,将目标节点包括的原始存储数据卷中的数据进行迁移。
进一步的,在目标节点为两个以上时,为避免后续创建新的节点后不能准确绑定对应的新的存储数据卷,可以先根据每个目标节点对应的数据的数据量的多少进行排序,按照数据量由大到小的顺序,依次对每个目标节点创建对应类型的存储数据卷。或者,根据各目标节点包括的原始存储数据卷的存储空间的剩余量的多少进行排序,按照剩余量从小到大的顺序,依次对每个目标节点创建对应类型的存储数据卷。
需要说明的是,在创建出新的存储数据卷后,需要先将新的存储数据卷接入到集群之后,再创建下一新的存储数据卷。
需要说明的是,在集群中通常包括多个节点,每个节点都包括各自的存储数据卷,在数据的读写过程中,每个节点写入的数据不同,在写入新的数据后,集群中各节点包括的存储数据卷之间会将最新写入的数据进行同步。
在监测到目标节点包括的原始存储数据卷的数据迁移指令后,为保证获取数据迁移指令后的数据能够不发生变化,先将目标节点包括的存储数据卷暂停读写,在后续生成新的存储数据卷并完成数据迁移后,在利用新存储数据卷进行读写数据。
其中,迁移的数据可以是客户端在运行过程中产生的用户数据、交易数据等。
步骤202、获取创建原始存储数据卷时使用的原始创建配置信息。
一些实施例中,在集群建立时,通常根据节点的数量,通过配置好的原始创建配置信息,创建与节点数量一致的存储数据卷,并保存该原始创建配置信息。各节点与创建配置信息之间存在对应关系,因此,可以直接通过目标节点,确定对应的原始创建配置信息。
可以理解的是,在监测到数据迁移指令后,获取新的创建插件与获取原始创建配置信息的顺序不分先后,也可以先获取原始创建配置信息再获取新的创建插件,或者二者同时获取。
步骤203、根据原始创建配置信息和新的创建插件,创建新存储数据卷。
一些实施例中,由于原始创建配置信息中包括存储数据卷属性和创建此存储数据卷所需的插件(即原始创建插件),在获取到新的创建插件后,在后续创建存储数据卷时,将新的创建插件替换原始创建插件进行创建,从而能够创建出与原始存储数据卷不同的新的存储数据卷。
在一个可选实施例中,根据原始创建配置信息和新的创建插件,创建新存储数据卷,具体包括:
将原始创建配置信息绑定新的创建插件;运行新的创建插件,得到新存储数据卷。
一些实施例中,通过将原始创建配置信息绑定新的创建插件后,便能够将新的创建插件替代原始创建配置信息中的原始创建插件,其中,创建配置信息中的存储数据卷属性不变,从而,能够依据存储数据卷属性,运行该新的创建插件,创建出新的存储数据卷。
步骤204、将原始存储数据卷中的存储数据,转存到新存储数据卷。
一些实施例中,在创建出新的存储数据卷之后,便可以对目标节点包括的原始存储数据卷中的存储数据进行迁移。具体的通过将原始存储数据卷中的数据转存到新的存储数据卷中,实现了原始存储数据卷中的数据快速迁移至新存储数据卷的效果。
其中,转存的方式有多种,例如,可以但不限于为转储(dump),通过转储的方式对存储数据进行迁移,相较与相关技术中对数据进行备份的方式,速度更快,能够降低迁移节点的服务停服时间。
相关技术中,在进行数据迁移,创建新的存储数据卷采用的是创建原始存储数据卷时利用的原始创建配置信息,因此,采用原始的创建配置信息再次创建的存储数据卷,与集群中已存在的存储数据卷相同,因此,在数据迁移时,需要对集群服务暂时停止,以避免在数据读取时,从新的存储数据卷中读取无法读取到的问题。本申请中,通过获取新的创建插件,利用新的创建插件替换原始创建配置信息中的创建插件,使得创建的新的存储数据卷不同与原始的存储数据卷,从而,在对某一目标节点进行数据迁移时,可以先将该目标节点暂停服务,将其他节点包括的存储数据卷继续服务,由于集群中的存储数据卷的数据相互同步,因此,在目标节点暂停服务时,发生数据的读写均可以从其他节点中得到,从而,可以在不暂停服务的情况下,对目标节点包括的原始存储数据卷的数据进行迁移。
在一个可选实施例中,为使新的存储数据卷能够接入集群中,继续进行数据的读写,在创建新的存储数据卷后,删除集群中的目标节点;创建新的节点,并将新的节点绑定新存储数据卷。
一些实施例中,节点部署在部署单位中的,节点中包括的存储数据卷中存储数据,因此,若将新的存储数据卷接入集群中,需要将原始存储数据卷中的目标节点删除(即将原始存储数据卷中的进程删除),再重新启动才能绑定新的存储数据卷。由于集群中的副本数是一定的,在删除后会自动建一个新的节点,将新的节点绑定新存储数据卷,从而完成新的存储数据卷接入集群。
在一个可选实施例中,将目标节点绑定新存储数据卷,包括:
创建新的持久化存储声明;将持久化存储声明绑定原始创建配置信息,原始创建配置信息绑定新的创建插件。
一些实施例中,在创建新的节点后,还需要创建新的持久化存储声明,通过将新的持久化存储声明绑定原始创建配置信息后,便可以将持久化存储声明与原始创建配置信息进行匹配,由于原始创建配置信息绑定新的存储数据卷,因此,实现了新的节点与新的存储数据卷建立新的读写进程,便于后续通过新的节点进行读写。
在一个可选实施例中,将原始存储数据卷中的数据,转存到新存储数据卷之后,还包括:
将新的节点接入集群;获取集群中的其他节点发送的增量数据,增量数据为其他节点的存储数据卷中的数据与新存储数据卷中的数据之间的差异数据,其他节点为集群中除新的节点外的节点。
一些实施例中,在目标节点在数据迁移时会先暂停服务,由集群中的其他节点提供读写服务,在原始存储数据卷中的数据dump到新的存储数据卷,新的节点建立并最终绑定新的存储数据卷后,便可以将新的节点接入集群,在新的节点接入集群后,由于在目标节点暂停过程中,还会有新的数据写入而存入其他节点包括的原始存储数据卷,因此会产生增量数据,通过将该增量数据同步到新的存储数据卷中,实现了新的存储数据卷与其他节点包括的原始存储数据卷中的数据的一致性。
在一个具体实施例中,本申请的集群中数据迁移方法,参见图3,包括:
在监测到数据迁移指令后,创建新的创建插件,将原始创建配置信息绑定新的创建插件;删除目标节点的部署单位与持久化存储声明;重新启动部署单位,创建新的持久化存储声明绑定原始创建配置信息,并最终绑定新的存储数据卷;进行数据迁移,将原始存储数据卷中的数据转储到新的存储数据卷,数据迁移完毕后再将目标节点接入集群,恢复增量数据。
其中,图3中MySQL0、MySQL1、MySQL2表示不同的节点。对MySQL2包括的原始存储数据卷中的数据进行迁移,其中,MySQL2的两条支路中,虚线表示为MySQL2节点创建原始存储数据卷的过程,实线表示MySQL2节点创建新的存储数据卷的过程,以及将原始存储数据卷中的存储数据转储到新的存储数据卷的过程。
可以理解的是,在目标节点按照上述方法完成对应数据的迁移以及增量数据恢复后,可以按照上述方法,对集群中的其他节点进行逐个数据迁移。
另外,本申请可以登录到集群查看需要迁移的数据有哪些,查看需要迁移的数据。
本申请的集群中数据迁移方法,实现了基于容器内MySQL集群迁移不停服务的迁移,能够在不停服的情况下完成数据的迁移,不会对业务端产生影响,在数据迁移过程中,客户端无感知,不会影响客户端的使用,提高了用户体验。
一些实施例中,集群中的存储数据卷放置在同一文件存储(CFS,Cloud FileStorage)实例中,实现了对共享的文件存储实例的数据成功迁出,每个用户拥有专属的文件存储实例,可以实现动态存储,达到对接文件存储池化功能,对后期的维护与扩缩容提供便利。
基于同一构思,本申请实施例中提供了一种集群中数据迁移装置,该装置的具体实施可参见方法实施例部分的描述,重复之处不再赘述,如图4所示,该装置主要包括:
第一获取模块401,用于在监测到对集群中目标节点包括的原始存储数据卷的数据迁移指令后,获取新的创建插件,目标节点为集群中的任一节点;
第二获取模块402,用于获取创建原始存储数据卷时使用的原始创建配置信息;
创建模块403,用于根据原始创建配置信息和新的创建插件,创建新存储数据卷;
转存模块404,用于将原始存储数据卷中的存储数据,转存到新存储数据卷
基于同一构思,本申请实施例中还提供了一种电子设备,如图5所示,该电子设备主要包括:处理器501、存储器502和通信总线503,其中,处理器501和存储器502通过通信总线503完成相互间的通信。其中,存储器502中存储有可被至处理器501执行的程序,处理器501执行存储器502中存储的程序,实现如下步骤:
在监测到对集群中目标节点包括的原始存储数据卷的数据迁移指令后,获取新的创建插件,目标节点为集群中的任一节点;
获取创建原始存储数据卷时使用的原始创建配置信息;
根据原始创建配置信息和新的创建插件,创建新存储数据卷;
将原始存储数据卷中的存储数据,转存到新存储数据卷。
上述电子设备中提到的通信总线503可以时外设部件互连标准(PeripheralComponent Interconnect,简称PCI)总线或扩展工业标准结构(Extended IndustryStandard Architecture,简称EISA)总线等。该通信总线503可以分为地址总线、数据总线、控制总线等。为便于表示,图5中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
存储器502可以包括随机存取存储器(Random Access Memory,简称RAM),也可以包括非易失性存储器(non-volatile memory),例如至少一个磁盘存储器。可选地,存储器还可以是至少一个位于远离前述处理器501的存储装置。
上述的处理器501可以是通用处理器,包括中央处理器(Central ProcessingUnit,简称CPU)、网络处理器(Network Processor,简称NP)等,还可以是数字信号处理器(Digital Signal Processing,简称DSP)、专用集成电路(Application SpecificIntegrated Circuit,简称ASIC)、现场可编程门阵列(Field-Programmable Gate Array,简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本申请的又一实施例中,还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有计算机程序,当该计算机程序在计算机上运行时,使得计算机执行上述实施例中所描述的集群中数据迁移方法。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。该计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行该计算机指令时,全部或部分地产生按照本申请实施例所述的流程或功能。该计算机可以是通用计算机、专用计算机、计算机网络或者其他可编程装置。该计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,计算机指令从一个网站站点、计算机、服务器或者数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、微波等)方式向另外一个网站站点、计算机、服务器或数据中心进行传输。该计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。该可用介质可以是磁性介质(例如软盘、硬盘、磁带等)、光介质(例如DVD)或者半导体介质(例如固态硬盘)等。
需要说明的是,在本文中,诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上所述仅是本发明的具体实施方式,使本领域技术人员能够理解或实现本发明。对这些实施例的多种修改对本领域的技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所申请的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种集群中数据迁移方法,其特征在于,包括:
在监测到对集群中目标节点包括的原始存储数据卷的数据迁移指令后,获取新的创建插件,所述目标节点为所述集群中的任一节点;
获取创建所述原始存储数据卷时使用的原始创建配置信息;
根据所述原始创建配置信息和所述新的创建插件,创建新存储数据卷;
将所述原始存储数据卷中的存储数据,转存到所述新存储数据卷。
2.根据权利要求1所述的集群中数据迁移方法,其特征在于,所述根据所述原始创建配置信息和所述新的创建插件,创建新存储数据卷,包括:
将所述原始创建配置信息绑定所述新的创建插件;
运行所述新的创建插件,得到所述新存储数据卷。
3.根据权利要求1或2所述的集群中数据迁移方法,其特征在于,所述方法还包括:
删除所述集群中的目标节点;
创建新的节点,并将所述新的节点绑定所述新存储数据卷。
4.根据权利要求3所述的集群中数据迁移方法,其特征在于,所述将所述新的节点绑定所述新存储数据卷,包括:
创建新的持久化存储声明;
将所述持久化存储声明绑定所述原始创建配置信息,所述原始创建配置信息绑定所述新的创建插件。
5.根据权利要求3所述的集群中数据迁移方法,其特征在于,所述将所述原始存储数据卷中的数据,转存到所述新存储数据卷之后,还包括:
将所述新的节点接入所述集群;
获取所述集群中的其他节点发送的增量数据,所述增量数据为所述其他节点包括的存储数据卷中的数据与所述新的节点包括的所述新存储数据卷中的数据之间的差异数据,所述其他节点为所述集群中除所述新的节点外的节点。
6.根据权利要求1所述的集群中数据迁移方法,其特征在于,所述在监测到对集群中目标节点对应数据的数据迁移指令时,获取新的创建插件之前,还包括:
获取所述集群中,各节点包括的存储数据卷中数据的数据量;
将每个所述存储数据卷中数据的数据量与所述存储数据卷各自的预设值进行比较;
若所述数据量大于或等于所述预设值,确定包括所述存储数据卷的节点为所述目标节点,并生成所述数据迁移指令。
7.根据权利要求6所述的集群中数据迁移方法,其特征在于,所述预设值小于所述存储数据卷的存储空间。
8.一种集群中数据迁移装置,其特征在于,包括:
第一获取模块,用于在监测到对集群中目标节点包括的原始存储数据卷的数据迁移指令后,获取新的创建插件,所述目标节点为所述集群中的任一节点;
第二获取模块,用于获取创建所述原始存储数据卷时使用的原始创建配置信息;
创建模块,用于根据所述原始创建配置信息和所述新的创建插件,创建新存储数据卷;
转存模块,用于将所述原始存储数据卷中的存储数据,转存到所述新存储数据卷。
9.一种电子设备,其特征在于,包括:处理器、通信接口、存储器和通信总线,其中,处理器、通信接口和存储器通过通信总线完成相互间的通信;
所述存储器,用于存储计算机程序;
所述处理器,用于执行所述存储器中所存储的程序,实现权利要求1-7任一项所述的集群中数据迁移方法。
10.一种计算机可读存储介质,存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1-7任一项所述的集群中数据迁移方法。
CN202210001751.XA 2022-01-04 2022-01-04 集群中数据迁移方法、装置、电子设备和存储介质 Pending CN114356504A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210001751.XA CN114356504A (zh) 2022-01-04 2022-01-04 集群中数据迁移方法、装置、电子设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210001751.XA CN114356504A (zh) 2022-01-04 2022-01-04 集群中数据迁移方法、装置、电子设备和存储介质

Publications (1)

Publication Number Publication Date
CN114356504A true CN114356504A (zh) 2022-04-15

Family

ID=81104492

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210001751.XA Pending CN114356504A (zh) 2022-01-04 2022-01-04 集群中数据迁移方法、装置、电子设备和存储介质

Country Status (1)

Country Link
CN (1) CN114356504A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114860390A (zh) * 2022-07-07 2022-08-05 中航金网(北京)电子商务有限公司 容器数据管理方法、装置、程序产品、介质及电子设备
CN116166204A (zh) * 2023-04-19 2023-05-26 安元科技股份有限公司 一种多版本加密存储的迁移方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114860390A (zh) * 2022-07-07 2022-08-05 中航金网(北京)电子商务有限公司 容器数据管理方法、装置、程序产品、介质及电子设备
CN114860390B (zh) * 2022-07-07 2023-01-17 中航金网(北京)电子商务有限公司 容器数据管理方法、装置、程序产品、介质及电子设备
CN116166204A (zh) * 2023-04-19 2023-05-26 安元科技股份有限公司 一种多版本加密存储的迁移方法

Similar Documents

Publication Publication Date Title
CN107515776B (zh) 业务不间断升级方法、待升级节点和可读存储介质
US8433948B2 (en) Method and apparatus for realizing application high availability
CN108616599B (zh) 应用服务注册、更新的方法及装置
JP2017123188A (ja) テナント移行にわたるテナント・データのリカバリ
US10795688B2 (en) System and method for performing an image-based update
CN114356504A (zh) 集群中数据迁移方法、装置、电子设备和存储介质
US20130227085A1 (en) Terminal and method for using cloud services
US11336588B2 (en) Metadata driven static determination of controller availability
CN111782339A (zh) 一种容器创建方法、装置、电子设备及存储介质
CN112083889A (zh) 数据迁移方法、装置、设备及可读存储介质
US10992746B2 (en) Automatic system response to external field-replaceable unit (FRU) process
US20200097195A1 (en) Immutable blob storage for cloud service providers
CN110659259A (zh) 数据库迁移方法、服务器以及计算机存储介质
CN104268089B (zh) 一种信息更新的方法、装置及系统
US9092292B2 (en) Shared application binary storage
US11977559B2 (en) Providing instant and distributed access to a source blob via copy-on-read blobs and link blobs
CN112262378A (zh) 脱水文件的层级的水合
CN114996955A (zh) 一种云原生混沌工程实验的靶场环境构建方法及装置
CN114816470A (zh) 元数据库的管理方法、装置、电子设备和介质
CN114756293A (zh) 业务处理方法、装置、计算机设备和存储介质
CN114615263A (zh) 集群在线迁移方法、装置、设备及存储介质
AU2021240195A1 (en) Data processing method, apparatus, system and device and computer-readable storage medium
US20240037017A1 (en) Verification of core file debugging resources
US10776036B2 (en) System and method for efficient restore
CN113868679B (zh) 一种集群的加密方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination