CN111984395A - 一种数据迁移方法和系统，及计算机可读存储介质 - Google Patents

Abstract

本发明实施例公开了一种数据迁移方法和系统，及计算机可读存储介质，上述数据迁移方法包括：接收迁移指令；其中，迁移指令携带身份信息、源存储对象对应的第一标识、目标存储对象对应的第二标识以及迁移数据对应的数据参数；根据身份信息、第一标识、第二标识以及数据参数，获得预设任务列表；其中，预设任务列表中存储与身份信息对应的迁移任务；获取负载参数，并根据负载参数和预设任务列表执行迁移任务，以将迁移数据从源存储对象迁移至目标存储对象；其中，负载参数用于对数据迁移的执行节点对应的负载状态进行确定，从而实现对数据迁移的全局调度，有效提高数据迁移的迁移效率，提升智能性。

Description

一种数据迁移方法和系统，及计算机可读存储介质

技术领域

本发明涉及计算机领域，尤其涉及一种数据迁移方法和系统，及计算机可读存储介质。

背景技术

随着云计算技术的兴起和普及，分布式存储对象越来越受到业界的关注。在分布式存储对象的运维中，常常需要对数据进行迁移。目前，在实现不同存储对象之间的数据迁移时，针对特定的多种存储对象，分别配置源存储对象信息和目的存储对象信息，然后按照源存储对象信息和目的存储对象信息生成迁移任务列表，并根据该迁移任务列表依次进行数据的迁移。

然而，现有的数据迁移方式为单一运行，在多用户、多类型迁移任务的复杂场景下不能对数据迁移进行全局调度，数据迁移效率低、智能性差。

发明内容

为解决上述技术问题，本发明实施例期望提供一种数据迁移方法和系统，及计算机可读存储介质，可以有效提高数据迁移的迁移效率，提升智能性。

为达到上述目的，本发明实施例的技术方案是这样实现的：

本发明实施例提供了一种数据迁移方法，所述方法包括：

接收迁移指令；其中，所述迁移指令携带身份信息、源存储对象对应的第一标识、目标存储对象对应的第二标识以及迁移数据对应的数据参数；

根据所述身份信息、所述第一标识、所述第二标识以及所述数据参数，获得预设任务列表；其中，所述预设任务列表中存储与所述身份信息对应的迁移任务；

获取负载参数，并根据所述负载参数和所述预设任务列表执行所述迁移任务，以将所述迁移数据从所述源存储对象迁移至所述目标存储对象；其中，所述负载参数用于对数据迁移的执行节点对应的负载状态进行确定。

在上述方案中，所述根据所述身份信息、所述第一标识、所述第二标识以及所述数据参数，获得预设任务列表，包括：

根据所述第一标识、所述第二标识以及所述数据参数，生成所述迁移指令对应的所述迁移任务；

根据所述身份信息和所述迁移任务，获得所述预设任务列表。

在上述方案中，所述根据所述第一标识、所述第二标识以及所述数据参数，生成所述迁移指令对应的所述迁移任务，包括：

根据所述第一标识和所述第二标识，确定协议类型、地址信息以及口令参数；

根据所述协议类型、所述地址信息、所述口令参数以及所述数据参数，生成所述迁移任务。

在上述方案中，所述根据所述身份信息和所述迁移任务，获得所述预设任务列表，包括：

根据所述身份信息和所述迁移任务的对应关系，将所述迁移任务存储至所述预设任务列表中。

在上述方案中，所述根据所述负载参数和所述预设任务列表执行所述迁移任务，包括：

根据所述负载参数确定所述执行节点对应的迁移参数；

按照所述迁移参数，对所述预设任务列表中的所述迁移任务进行调度，以通过所述执行节点执行所述迁移任务。

在上述方案中，所述通过所述执行节点执行所述迁移任务，包括：

所述执行节点根据所述协议类型、所述地址信息以及所述口令参数，从所述源存储对象中获取所述迁移数据；

所述执行节点根据所述协议类型、所述地址信息以及所述口令参数，将所述迁移数据写入所述目标存储对象。

本发明实施例提出了一种数据迁移系统，所述数据迁移系统包括：接收单元，获取单元以及执行单元，

所述接收单元，用于接收迁移指令；其中，所述迁移指令携带身份信息、源存储对象对应的第一标识、目标存储对象对应的第二标识以及迁移数据对应的数据参数；

所述获取单元，用于根据所述身份信息、所述第一标识、所述第二标识以及所述数据参数，获得预设任务列表；其中，所述预设任务列表中存储与所述身份信息对应的迁移任务；

所述获取单元，还用于获取负载参数；

所述执行单元，用于根据所述负载参数和所述预设任务列表执行所述迁移任务，以将所述迁移数据从所述源存储对象迁移至所述目标存储对象；其中，所述负载参数用于对数据迁移的执行节点对应的负载状态进行确定。

在上述方案中，所述获取单元，具体用于根据所述第一标识、所述第二标识以及所述数据参数，生成所述迁移指令对应的所述迁移任务；以及根据所述身份信息和所述迁移任务，获得所述预设任务列表。

在上述方案中，所述获取单元，还具体用于根据所述第一标识和所述第二标识，确定协议类型、地址信息以及口令参数；以及根据所述协议类型、所述地址信息、所述口令参数以及所述数据参数，生成所述迁移任务。

在上述方案中，所述获取单元，还具体用于根据所述身份信息和所述迁移任务的对应关系，将所述迁移任务存储至所述预设任务列表中。

在上述方案中，所述执行单元，具体用于根据所述负载参数确定所述执行节点对应的迁移参数；以及按照所述迁移参数，对所述预设任务列表中的所述迁移任务进行调度，以通过所述执行节点执行所述迁移任务。

在上述方案中，所述执行单元，还具体用于所述执行节点根据所述协议类型、所述地址信息以及所述口令参数，从所述源存储对象中获取所述迁移数据；以及所述执行节点根据所述协议类型、所述地址信息以及所述口令参数，将所述迁移数据写入所述目标存储对象。

本发明实施例提出了一种数据迁移系统，所述数据迁移系统包括处理器、存储有所述处理器可执行指令的存储器、通信接口，和用于连接所述处理器、所述存储器以及所述通信接口的总线，当所述指令被所述处理器执行时，实现如上所述的数据迁移方法。

本发明实施例提出了一种计算机可读存储介质，其上存储有程序，应用于数据迁移系统中，所述程序被处理器执行时，实现如上所述的数据迁移方法。

本发明实施例提出的一种数据迁移方法和系统，及计算机可读存储介质，数据迁移系统接收迁移指令；其中，迁移指令携带身份信息、源存储对象对应的第一标识、目标存储对象对应的第二标识以及迁移数据对应的数据参数；根据身份信息、第一标识、第二标识以及数据参数，获得预设任务列表；其中，预设任务列表中存储与身份信息对应的迁移任务；获取负载参数，并根据负载参数和预设任务列表执行迁移任务，以将迁移数据从源存储对象迁移至目标存储对象；其中，负载参数用于对数据迁移的执行节点对应的负载状态进行确定。由此可见，本申请提出的数据迁移方法，数据迁移系统可以根据接收到的迁移指令中所携带的源存储对象的第一标识、目标存储对象的第二标识、用户的身份信息以及迁移数据的数据参数，生成相应的迁移任务，并存储至预设任务列表中，然后可以根据执行节点的负载参数对预设任务列表中的迁移任务进行调度，可以保证各个执行节点进行数据迁移时的工作负载相对均衡，从而在多用户、多类型迁移任务的复杂场景下，实现数据迁移的全局调度，有效提高数据迁移的迁移效率，提升智能性，并且，实现起来简单方便，便于普及，适用范围更广。

附图说明

图1为本申请实施例提出的一种数据迁移方法的实现流程示意图一；

图2为本申请实施例提出的数据迁移系统的示意图；

图3为本申请实施例提出的一种数据迁移方法的实现流程示意图二；

图4为本申请实施例提出的一种数据迁移方法的实现流程示意图三；

图5为本申请实施例提出的一种数据迁移方法的实现流程示意图四；

图6为本申请实施例提出的数据迁移示意图；

图7为本申请实施例提出的数据迁移系统的组成结构示意图一；

图8为本申请实施例提出的数据迁移系统的组成结构示意图二。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述。可以理解的是，此处所描述的具体实施例仅仅用于解释相关申请，而非对该申请的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与有关申请相关的部分。

目前的数据迁移方法在实现不同存储对象之间的数据迁移时，先针对特定的两种或多种存储对象分别配置源存储对象和目标存储对象的信息，然后根据源存储对象和目标存储对象的信息进行数据的迁移。具体地，数据迁移系统可以先根据源存储对象和目标存储对象的信息生成迁移任务列表，然后对迁移任务列表中的迁移任务依次进行迁移，在完成一个迁移任务之后，可以将迁移任务列表中的该迁移任务删除。其中，在进行数据迁移时，数据迁移系统运行单一类型的数据迁移任务。

进一步地，现有的数据迁移方法，一方面，由于数据迁移系统是按照迁移任务列表中的顺序对迁移任务依次执行的，缺乏迁移任务的分布式、多节点执行机制，因此数据迁移的效率比较低；另一方面，数据迁移系统在进行数据迁移时，无法同时进行多种类型的数据迁移，从而在多用户、多存储对象的复杂场景下无法进行高效的数据迁移。

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述。

实施例一

本发明实施例提出了一种数据迁移方法，图1为本申请实施例提出的一种数据迁移方法的实现流程示意图一，如图1所示，在本发明的实施例中，数据迁移系统进行数据迁移的方法可以包括以下步骤：

步骤101、接收迁移指令；其中，迁移指令携带身份信息、源存储对象对应的第一标识、目标存储对象对应的第二标识以及迁移数据对应的数据参数。

在本申请的实施例中，数据迁移系统可以先接收迁移指令。其中，迁移指令可以为根据用户的操作生成的，因此迁移指令中携带有身份信息，身份信息用于进行用户身份的确定。

进一步地，在本申请的实施例中，迁移指令可以由与身份信息对应的用户生成，也就是说，数据迁移系统可以在接收迁移指令之前，先对不同的用户按照对应的身份信息进行注册，从而可以在接收到不同的用户发送的迁移指令之后，按照相应的身份信息进行迁移处理。也就是说，在本申请的实施例中，数据迁移系统中存储有至少一个用户对应的至少一个身份信息，进一步地，不同用户，均可向数据迁移系统发送迁移指令。

需要说明的是，在本申请的实施例中，不同的迁移指令中携带的源存储对象和目标存储对象可以不相同，相应地，不同的迁移指令可以对应不同的数据迁移类型。具体地，数据迁移系统可以支持多种不同类型的存储系统，也就是说，源存储对象和目标存储对象都可以包括多种不同的存储系统，如文件系统、对象存储系统等，从而可以实现任意两种存储系统之间的数据迁移，以支持不同的数据迁移类型。

进一步地，在本申请的实施例中，数据迁移系统可以提供插件式的存储接入支持，从而可以灵活的添加新的存储系统或协议。

需要说明的是，在本申请的实施例中，图2为本申请实施例提出的数据迁移系统的示意图，如图2所示，数据迁移系统可以包括控制节点和执行节点。具体地，控制节点可以用于数据迁移任务的生成和调度；执行节点可以用于数据迁移任务的执行。

进一步地，在本申请的实施例中，基于上述图2，控制节点可以包括接口模块、解析模块以及调度模块。其中，接口模块用于接收迁移指令，解析模块用于对迁移指令进行解析，获得对应的迁移任务，调度模块用于根据负载参数对迁移任务进行全局调度。

进一步地，在本申请的实施例中，基于上述图2，执行节点可以包括执行模块。其中，执行模块用于执行迁移任务，具体地，执行模块可以根据迁移任务中所携带的源存储对象对应的第一标识、目的存储对象对应的第二标识，进行迁移数据的读取及传输。具体地，迁移数据即为迁移指令指示的、存储在源存储对象中的待迁移的数据。其中，执行节点中可以包括至少一个执行模块，例如，执行模块1、执行模块2……执行模块n，其中，n为大于2的整数。

需要说明的是，在本申请的实施例中，数据迁移系统中的控制节点和执行节点，可以认为是一个连接点，表示一个再分发点或一个通信端点。一个物理网络节点是一个连接到网络的有源电子设备，能够通过通信通道发送、接收或转发信息。具体地，在数据通信中，一个物理网络节点可以是数据电路端接设备，如调制解调器、集线器、桥接器或交换机；也可以是一个数据终端设备，如数字手机，打印机或主机。

需要说明的是，在本申请的实施例中，迁移指令中携带有源存储对象对应的第一标识和目标存储对象对应的第二标识。其中，源存储对象可以为存储有迁移数据的具体存储系统，第一标识可以用于表征源存储对象对应的访问地址和口令；目标存储对象可以为将迁移数据进行迁移的目的存储系统，第二标识可以用于表征目标存储对象对应的访问地址和口令。

进一步地，在本申请的实施例中，迁移指令中还携带有迁移数据对应的数据参数，具体地，数据参数可以用于表征迁移数据对应的数据大小、数据类型等具体参数。

步骤102、根据身份信息、第一标识、第二标识以及数据参数，获得预设任务列表；其中，预设任务列表中存储与身份信息对应的迁移任务。

在本申请的实施例中，数据迁移系统在接收迁移指令之后，可以根据迁移指令携带的身份信息、源存储对象对应的第一标识、目标存储对象对应的第二标识以及迁移数据对应的数据参数，获得预设任务列表。

进一步地，在本申请的实施例中，预设任务列表中存储有身份信息对应的迁移任务。其中，预设任务列表中存储有不同身份信息对应的不同迁移任务，具体地，在预设任务列表中，对于同一身份信息的用户可以存储有不同的迁移任务。

需要说明的是，在本申请的实施例中，数据迁移系统在接收到迁移指令之后，可以先根据从迁移指令中获取的第一标识、第二标识以及数据参数，进行迁移任务的生成，然后可以根据身份信息和迁移任务之间的对应关系，将迁移任务存储至预设任务列表中。

进一步地，在本申请的实施例中，预设任务列表中可以存储有至少一个迁移任务，预设任务列表中可以存储有不同身份信息对应的迁移任务，例如，预设任务列表中存储与用户A的身份信息a对应的迁移任务1和迁移任务2，还存储与用户B的身份信息b对应的迁移任务3。

需要说明的是，在本申请的实施例中，对于不同的迁移任务，源存储对象、目标存储对象以及迁移数据可能并不相同，例如，迁移任务1的源存储对象为存储系统1，目标存储对象为存储系统2，而迁移任务的源存储对象为存储系统2，目标存储对象为存储系统3。也就是说，预设任务列表中存储的不同的迁移任务可以为不同类型或者不同协议的任务。

步骤103、获取负载参数，并根据负载参数和预设任务列表执行迁移任务，以将迁移数据从源存储对象迁移至目标存储对象；其中，负载参数用于对数据迁移的执行节点对应的负载状态进行确定。

在本申请的实施例中，数据迁移系统在根据身份信息、第一标识、第二标识以及数据参数，获得预设任务列表之后，可以继续获取负载参数，然后根据负载参数和预设任务列表执行迁移任务，从而可以将迁移数据从源存储对象迁移至目标存储对象中。

需要说明的是，在本申请的实施中，数据迁移系统可以先获取用于进行数据迁移的全部迁移节点的状态，即获取负载参数，也就是说，负载参数用于对执行节点的状态进行确定。其中，一个执行节点对应一个负载参数。

进一步地，在本申请的实施例中，数据迁移系统在获取负载参数时，可以通过执行节点按照预设时间间隔周期性的上报来获得各个执行节点对应的负载参数。

需要说明的是，在本申请的实施中，负载参数可以包括执行节点对应的中央处理器的使用率、内存的占用率、正在执行的任务数量等具体参数。

需要说明的是，在本申请的实施例中，数据迁移系统在获得负载参数之后，在根据负载参数和预设任务列表执行迁移任务时，可以按照负载参数对预设任务列表中的迁移任务进行执行节点的分配，从而可以通过分配的执行节点将迁移数据从源存储对象迁移至目标存储对象。

进一步地，在本申请的实施中，数据迁移系统按照不同的执行节点对应的不同的负载参数，对预设任务列表中的不同迁移任务进行执行节点的同一调度，可以保证各个执行节点进行数据迁移时的工作负载相对均衡，从而提升数据迁移的效率。

需要说明的是，在本申请的实施例中，数据迁移系统在将迁移数据从源存储对象迁移至目标存储对象时，数据迁移系统中的执行节点可以根据迁移任务中的协议类型、地址信息以及口令参数，从源存储对象中获取迁移数据；数据迁移系统中的执行节点在获取迁移数据之后，便可以继续根据迁移任务中的协议类型、地址信息以及口令参数，将迁移数据写入目标存储对象，从而完成数据迁移。

进一步地，在本申请的实施中，数据迁移系统中的执行节点在根据迁移任务对迁移数据进行获取操作和上载操作时，同一个执行节点可以同时执行多个不同类型或协议的迁移任务，相应地，不同用户的发送的迁移指令对应的迁移任务在执行时也互不影响。

本申请实施例提出了一种数据迁移方法，数据迁移系统接收迁移指令；其中，迁移指令携带身份信息、源存储对象对应的第一标识、目标存储对象对应的第二标识以及迁移数据对应的数据参数；根据身份信息、第一标识、第二标识以及数据参数，获得预设任务列表；其中，预设任务列表中存储与身份信息对应的迁移任务；获取负载参数，并根据负载参数和预设任务列表执行迁移任务，以将迁移数据从源存储对象迁移至目标存储对象；其中，负载参数用于对数据迁移的执行节点对应的负载状态进行确定。由此可见，本申请提出的数据迁移方法，数据迁移系统可以根据接收到的迁移指令中所携带的源存储对象的第一标识、目标存储对象的第二标识、用户的身份信息以及迁移数据的数据参数，生成相应的迁移任务，并存储至预设任务列表中，然后可以根据执行节点的负载参数对预设任务列表中的迁移任务进行调度，可以保证各个执行节点进行数据迁移时的工作负载相对均衡，从而在多用户、多类型迁移任务的复杂场景下，实现数据迁移的全局调度，有效提高数据迁移的迁移效率，提升智能性，并且，实现起来简单方便，便于普及，适用范围更广。

实施例二

基于上述实施例一，本发明实施例提出了一种数据迁移方法，图3为本申请实施例提出的一种数据迁移方法的实现流程示意图二，如图3所示，在本发明的实施例中，数据迁移系统根据身份信息、第一标识、第二标识以及数据参数，获得预设任务列表的方法可以包括以下步骤：

步骤102a、根据第一标识、第二标识以及数据参数，生成迁移指令对应的迁移任务。

在本申请的实施例中，数据迁移系统在接收迁移指令之后，可以根据迁移指令中携带的第一标识、第二标识以及数据参数，生成与迁移指令对应的迁移任务。

需要说明的是，在本申请的实施例中，迁移指令中携带的第一标识可以包括源存储对象对应的访问地址、协议以及口令，相应地，迁移指令中携带的第一标识还可以包括目标存储对象对应的访问地址、协议以及口令。

需要说明的是，在本申请的实施例中，数据参数可以包括迁移数据对应的数据大小、数据格式等具体信息。

进一步地，在本申请的实施例中，数据迁移系统可以根据第一标识和第二标识中的访问地址、协议以及口令，结合迁移数据对应的数据参数，便可以生成与迁移指令对应的迁移任务。

步骤102b、根据身份信息和迁移任务，获得预设任务列表。

在本申请的实施例中，数据迁移系统在根据第一标识、第二标识以及数据参数，生成迁移指令对应的迁移任务之后，可以根据身份信息和迁移任务，获得预设任务列表。

需要说明的是，在本申请的实施中，数据迁移系统在进行预设任务列表的获取时，可以根据身份信息和迁移任务的对应关系，将迁移任务存储至预设任务列表中。也就是说，在本申请的实施例中，数据迁移系统根据迁移任务生成的预设任务列表中，任意一个迁移任务都可以与其对应的身份信息进行对应存储。

在本申请的实施例中，进一步地，图4为本申请实施例提出的一种数据迁移方法的实现流程示意图三，如图4所示，在本发明的实施例中，数据迁移系统根据第一标识、第二标识以及数据参数，生成迁移指令对应的迁移任务的方法可以包括以下步骤：

步骤201、根据第一标识和第二标识，确定协议类型、地址信息以及口令参数。

在本申请的实施例中，数据迁移系统在获取迁移指令中的第一标识和第二标识之后，可以先根据第一标识和第二标识对协议类型、地址信息以及口令参数进行确定。

需要说明的是，在本申请的实施中，数据迁移系统在对迁移任务进行确定时，可以根据源存储对象对应的访问地址和目标存储对象对应的访问地址生成地址信息；还可以根据源存储对象对应的协议和目标存储对象对应的协议生成协议类型；也可以根据源存储对象对应的口令和目标存储对象对应的口令生成口令参数。

步骤202、根据协议类型、地址信息、口令参数以及数据参数，生成迁移任务。

在本申请的实施例中，数据迁移系统在根据第一标识和第二标识，确定协议类型、地址信息以及口令参数之后，可以继续根据协议类型、地址信息、口令参数以及数据参数，生成迁移指令对应的迁移任务。

需要说明的是，在本申请的实施例中，迁移任务中可以包括有迁移数据对应的数据参数，还可以包括有进行数据迁移时的源地址和目的访问地址，同时还可以包括源存储对象和目标存储对象之间的口令参数和协议类型。

在本申请的实施例中，进一步地，图5为本申请实施例提出的一种数据迁移方法的实现流程示意图四，如图5所示，在本发明的实施例中，数据迁移系统根据负载参数和预设任务列表执行迁移任务的方法可以包括以下步骤：

步骤301、根据负载参数确定执行节点对应的迁移参数。

在本申请的实施例中，数据迁移系统在获取执行节点对应的负载参数之后，可以根据负载参数确定出执行节点对应的迁移参数。

进一步地，在本申请的实施例中，迁移参数可以表征在当前的负载状态下执行节点进行数据迁移的执行能力。其中，一个执行节点对应一个迁移参数。

需要说明的是，在本申请的实施例中，负载参数可以包括执行节点对应的中央处理器的使用率、内存的占用率、正在执行的任务数量等具体参数，相应地，数据迁移系统根据负载参数确定出的迁移参数可以包括执行节点对应的可执行的迁移任务数量、文件大小分布、可使用内存以及可使用带宽等具体参数。

步骤302、按照迁移参数，对预设任务列表中的迁移任务进行调度，以通过执行节点执行迁移任务。

在本申请的实施例中，数据迁移系统在根据负载参数确定出执行节点对应的迁移参数之后，可以按照迁移参数，对预设任务列表中的迁移任务进行调度，从而可以通过执行节点执行迁移任务。

需要说明的是，在本申请的实施例中，不同的执行节点对应的迁移参数可能不同，即不同的执行节点进行数据迁移的能力并不相同，因此，数据迁移系统可以按照执行节点对应迁移参数对预设任务列表中的迁移任务进行统一调度，即按照迁移参数将预设任务列表中的不同的迁移任务分配至不同的执行节点，从而保证各个执行节点进行数据迁移时的工作负载相对均衡，提高数据迁移的执行效率。

本申请实施例提出了一种数据迁移方法，数据迁移系统接收迁移指令；其中，迁移指令携带身份信息、源存储对象对应的第一标识、目标存储对象对应的第二标识以及迁移数据对应的数据参数；根据身份信息、第一标识、第二标识以及数据参数，获得预设任务列表；其中，预设任务列表中存储与身份信息对应的迁移任务；获取负载参数，并根据负载参数和预设任务列表执行迁移任务，以将迁移数据从源存储对象迁移至目标存储对象；其中，负载参数用于对数据迁移的执行节点对应的负载状态进行确定。由此可见，本申请提出的数据迁移方法，数据迁移系统可以根据接收到的迁移指令中所携带的源存储对象的第一标识、目标存储对象的第二标识、用户的身份信息以及迁移数据的数据参数，生成相应的迁移任务，并存储至预设任务列表中，然后可以根据执行节点的负载参数对预设任务列表中的迁移任务进行调度，可以保证各个执行节点进行数据迁移时的工作负载相对均衡，从而在多用户、多类型迁移任务的复杂场景下，实现数据迁移的全局调度，有效提高数据迁移的迁移效率，提升智能性，并且，实现起来简单方便，便于普及，适用范围更广。

实施例三

基于上述实施例一和实施例二，基于上述图2，图6为本申请实施例提出的数据迁移示意图，如图6所示，在本发明的实施例中，在数据迁移系统，控制节点中的接口模块接收到根据用户操作生成的迁移指令，其中，迁移指令对应的源存储对象为存储系统1，目标存储对象为存储系统2，具体地，迁移指令中携带有存储系统1对应的访问地址、口令以及协议等第一标识，迁移指令中还携带有存储系统2对应的访问地址、口令以及协议等第二标识，进一步地，迁移指令中还携带表征迁移数据对应的数据大小和数据类型的数据参数，以及用户对应的身份信息；控制节点中的解析模块根据迁移指令中的第一标识、第二标识以及数据参数，生成迁移任务，然后按照身份信息将迁移任务存储至预设任务列表中，其中，数据迁移系统可以将预设任务列表存储至数据库中。

进一步地，在本申请的实施例中，数据迁移系统中执行节点的至少一个执行模块可以按照预设时间间隔向控制节点中的调度模块周期性地上报负载参数，其中，负载参数可以包括执行节点对应的中央处理器的使用率、内存的占用率、正在执行的任务数量等具体参数，调度模块可以根据执行节点的负载参数确定出各个执行节点对应的迁移参数，其中，执行节点对应的可执行的迁移任务数量、文件大小分布、可使用内存以及可使用带宽等具体参数，调度模块便可以根据迁移参数对至预设任务列表中的迁移任务进行统一调度，从而可以将迁移任务分别发送至执行模块中进行数据迁移的执行。例如，调度执行模块1进行迁移任务的处理，则执行模块1可以根据迁移任务中的协议类型、地址信息以及口令参数，从所述源存储对象，即存储系统1中获取所述迁移数据，再将所述迁移数据写入所述目标存储对象，即存储系统2中，从而完成数据迁移。

进一步地，在本申请的实施例中，数据迁移系统可以在接收迁移指令之前，先对不同的用户按照对应的身份信息进行注册，从而可以在接收到不同的用户发送的迁移指令之后，按照相应的身份信息进行迁移处理。也就是说，数据迁移系统可以将数据迁移服务化，使得不同的用户可以自助配置或启动数据迁移的任务，从而降低了用户迁移操作、实施难度。且数据迁移系统同时支持多用户、多个存储类型，执行节点在根据迁移任务对迁移数据进行获取操作和上载操作时，同一个执行节点可以同时执行多个不同类型或协议的迁移任务，相应地，不同用户的发送的迁移指令对应的迁移任务在执行时也互不影响，与现有技术中同时只能进行同一个用户的同一种类型的迁移任务相比，具备更强的实用性和灵活性。

进一步地，在本申请的实施例中，数据迁移系统可以根据各个执行节点对应的负载参数对预设任务列表中的迁移任务进行调度，进而可以按照执行节点对应的迁移参数和迁移任务的特点，进行全局调度，可以保证各个执行节点进行数据迁移时的工作负载相对均衡，从而提升数据迁移的效率。

本申请实施例提出了一种数据迁移方法，数据迁移系统接收迁移指令；其中，迁移指令携带身份信息、源存储对象对应的第一标识、目标存储对象对应的第二标识以及迁移数据对应的数据参数；根据身份信息、第一标识、第二标识以及数据参数，获得预设任务列表；其中，预设任务列表中存储与身份信息对应的迁移任务；获取负载参数，并根据负载参数和预设任务列表执行迁移任务，以将迁移数据从源存储对象迁移至目标存储对象；其中，负载参数用于对数据迁移的执行节点对应的负载状态进行确定。由此可见，本申请提出的数据迁移方法，数据迁移系统可以根据接收到的迁移指令中所携带的源存储对象的第一标识、目标存储对象的第二标识、用户的身份信息以及迁移数据的数据参数，生成相应的迁移任务，并存储至预设任务列表中，然后可以根据执行节点的负载参数对预设任务列表中的迁移任务进行调度，可以保证各个执行节点进行数据迁移时的工作负载相对均衡，从而在多用户、多类型迁移任务的复杂场景下，实现数据迁移的全局调度，有效提高数据迁移的迁移效率，提升智能性，并且，实现起来简单方便，便于普及，适用范围更广。

实施例四

基于上述实施例一至实施例三，图7为本申请实施例提出的数据迁移系统的组成结构示意图一，如图7所示，在本发明的实施例中，数据迁移系统1包括接收单元11，获取单元12以及执行单元13，

所述接收单元11，用于接收迁移指令；其中，所述迁移指令携带身份信息、源存储对象对应的第一标识、目标存储对象对应的第二标识以及迁移数据对应的数据参数。

所述获取单元12，用于根据所述身份信息、所述第一标识、所述第二标识以及所述数据参数，获得预设任务列表；其中，所述预设任务列表中存储与所述身份信息对应的迁移任务。

所述获取单元12，还用于获取负载参数。

所述执行单元13，用于根据所述负载参数和所述预设任务列表执行所述迁移任务，以将所述迁移数据从所述源存储对象迁移至所述目标存储对象；其中，所述负载参数用于对数据迁移的执行节点对应的负载状态进行确定。

进一步地，在本申请的实施例中，所述获取单元12，具体用于根据所述第一标识、所述第二标识以及所述数据参数，生成所述迁移指令对应的所述迁移任务；以及根据所述身份信息和所述迁移任务，获得所述预设任务列表。

进一步地，在本申请的实施例中，所述获取单元12，还具体用于根据所述第一标识和所述第二标识，确定协议类型、地址信息以及口令参数；以及根据所述协议类型、所述地址信息、所述口令参数以及所述数据参数，生成所述迁移任务。

进一步地，在本申请的实施例中，所述获取单元12，还具体用于根据所述身份信息和所述迁移任务的对应关系，将所述迁移任务存储至所述预设任务列表中。

进一步地，在本申请的实施例中，所述执行单元13，具体用于根据所述负载参数确定所述执行节点对应的迁移参数；以及按照所述迁移参数，对所述预设任务列表中的所述迁移任务进行调度，以通过所述执行节点执行所述迁移任务。

进一步地，在本申请的实施例中，所述执行单元13，还具体用于所述执行节点根据所述协议类型、所述地址信息以及所述口令参数，从所述源存储对象中获取所述迁移数据；以及所述执行节点根据所述协议类型、所述地址信息以及所述口令参数，将所述迁移数据写入所述目标存储对象。

图8为本申请实施例提出的数据迁移系统的组成结构示意图二，如图8所示，本申请实施例提出的数据迁移系统1还可以包括处理器14、存储有处理器14可执行指令的存储器15，进一步地，数据迁移系统1还可以包括通信接口16，和用于连接处理器14、存储器15以及通信接口16的总线17。

在本申请的实施例中，处理器14可以为特定用途集成电路(ApplicationSpecific Integrated Circuit，ASIC)、数字信号处理器(Digital Signal Processor，DSP)、数字信号处理装置(Digital Signal Processing Device，DSPD)、可编程逻辑装置(ProgRAMmable Logic Device，PLD)、现场可编程门阵列(Field ProgRAMmable GateArray，FPGA)、中央处理器(Central Processing Unit，CPU)、控制器、微控制器、微处理器中的至少一种。可以理解地，对于不同的设备，用于实现处理器功能的电子器件还可以为其它，本申请实施例不作具体限定。数据迁移系统1还可以包括存储器15，该存储器15可以与处理器14连接，其中，存储器15用于存储可执行程序代码，该程序代码包括计算机操作指令，存储器15可能包含高速RAM存储器，也可能还包括非易失性存储器，例如，至少两个磁盘存储器。

在本申请的实施例中，总线17用于连接通信接口16、处理器14以及存储器15以及这些器件之间的相互通信。

在本申请的实施例中，存储器15，用于存储指令和数据。

进一步地，在本申请的实施例中，处理器14，用于接收迁移指令；其中，所述迁移指令携带身份信息、源存储对象对应的第一标识、目标存储对象对应的第二标识以及迁移数据对应的数据参数；

根据所述身份信息、所述第一标识、所述第二标识以及所述数据参数，获得预设任务列表；其中，所述预设任务列表中存储与所述身份信息对应的迁移任务；

获取负载参数，并根据所述负载参数和所述预设任务列表执行所述迁移任务，以将所述迁移数据从所述源存储对象迁移至所述目标存储对象；其中，所述负载参数用于对数据迁移的执行节点对应的负载状态进行确定。

在实际应用中，存储器15可以是易失性存储器(volatile memor)，例如随机存取存储器(Random-Access Memory，RAM)；或者非易失性存储器(non-volatile memory)，例如只读存储器(Read-Only Memory，ROM)，快闪存储器(flash memory)，硬盘(Hard DiskDrive，HDD)或固态硬盘(Solid-State Drive，SSD)；或者上述种类的存储器的组合，并向处理器14提供指令和数据。

另外，在本实施例中的各功能模块可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。

集成的单元如果以软件功能模块的形式实现并非作为独立的产品进行销售或使用时，可以存储在一个计算机可读取存储介质中，基于这样的理解，本实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)或processor(处理器)执行本实施例方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read OnlyMemory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。

本申请实施例提出的一种数据迁移系统，该数据迁移系统接收迁移指令；其中，迁移指令携带身份信息、源存储对象对应的第一标识、目标存储对象对应的第二标识以及迁移数据对应的数据参数；根据身份信息、第一标识、第二标识以及数据参数，获得预设任务列表；其中，预设任务列表中存储与身份信息对应的迁移任务；获取负载参数，并根据负载参数和预设任务列表执行迁移任务，以将迁移数据从源存储对象迁移至目标存储对象；其中，负载参数用于对数据迁移的执行节点对应的负载状态进行确定。由此可见，本申请提出的数据迁移方法，数据迁移系统可以根据接收到的迁移指令中所携带的源存储对象的第一标识、目标存储对象的第二标识、用户的身份信息以及迁移数据的数据参数，生成相应的迁移任务，并存储至预设任务列表中，然后可以根据执行节点的负载参数对预设任务列表中的迁移任务进行调度，可以保证各个执行节点进行数据迁移时的工作负载相对均衡，从而在多用户、多类型迁移任务的复杂场景下，实现数据迁移的全局调度，有效提高数据迁移的迁移效率，提升智能性，并且，实现起来简单方便，便于普及，适用范围更广。

本申请实施例提供一种计算机可读存储介质，其上存储有程序，该程序被处理器执行时实现如上所述的数据迁移方法。

具体来讲，本实施例中的一种数据迁移方法对应的程序指令可以被存储在光盘，硬盘，U盘等存储介质上，当存储介质中的与一种数据迁移方法对应的程序指令被一电子设备读取或被执行时，包括如下步骤：

接收迁移指令；其中，所述迁移指令携带身份信息、源存储对象对应的第一标识、目标存储对象对应的第二标识以及迁移数据对应的数据参数；

根据所述身份信息、所述第一标识、所述第二标识以及所述数据参数，获得预设任务列表；其中，所述预设任务列表中存储与所述身份信息对应的迁移任务；

获取负载参数，并根据所述负载参数和所述预设任务列表执行所述迁移任务，以将所述迁移数据从所述源存储对象迁移至所述目标存储对象；其中，所述负载参数用于对数据迁移的执行节点对应的负载状态进行确定。

本领域内的技术人员应明白，本申请的实施例可提供为方法、显示器、或计算机程序产品。因此，本申请可采用硬件实施例、软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。

本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的实现流程示意图和/或方框图来描述的。应理解可由计算机程序指令实现流程示意图和/或方框图中的每一流程和/或方框、以及实现流程示意图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在实现流程示意图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在实现流程示意图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在实现流程示意图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

以上所述，仅为本申请的较佳实施例而已，并非用于限定本申请的保护范围。

Claims (14)

1.一种数据迁移方法，其特征在于，所述方法包括：

接收迁移指令；其中，所述迁移指令携带身份信息、源存储对象对应的第一标识、目标存储对象对应的第二标识以及迁移数据对应的数据参数；

根据所述身份信息、所述第一标识、所述第二标识以及所述数据参数，获得预设任务列表；其中，所述预设任务列表中存储与所述身份信息对应的迁移任务；

获取负载参数，并根据所述负载参数和所述预设任务列表执行所述迁移任务，以将所述迁移数据从所述源存储对象迁移至所述目标存储对象；其中，所述负载参数用于对数据迁移的执行节点对应的负载状态进行确定。

2.根据权利要求1所述的方法，其特征在于，所述根据所述身份信息、所述第一标识、所述第二标识以及所述数据参数，获得预设任务列表，包括：

根据所述第一标识、所述第二标识以及所述数据参数，生成所述迁移指令对应的所述迁移任务；

根据所述身份信息和所述迁移任务，获得所述预设任务列表。

3.根据权利要求2所述的方法，其特征在于，所述根据所述第一标识、所述第二标识以及所述数据参数，生成所述迁移指令对应的所述迁移任务，包括：

根据所述第一标识和所述第二标识，确定协议类型、地址信息以及口令参数；

根据所述协议类型、所述地址信息、所述口令参数以及所述数据参数，生成所述迁移任务。

4.根据权利要求2所述的方法，其特征在于，所述根据所述身份信息和所述迁移任务，获得所述预设任务列表，包括：

根据所述身份信息和所述迁移任务的对应关系，将所述迁移任务存储至所述预设任务列表中。

5.根据权利要求3所述的方法，其特征在于，所述根据所述负载参数和所述预设任务列表执行所述迁移任务，包括：

根据所述负载参数确定所述执行节点对应的迁移参数；

按照所述迁移参数，对所述预设任务列表中的所述迁移任务进行调度，以通过所述执行节点执行所述迁移任务。

6.根据权利要求5所述的方法，其特征在于，所述通过所述执行节点执行所述迁移任务，包括：

所述执行节点根据所述协议类型、所述地址信息以及所述口令参数，从所述源存储对象中获取所述迁移数据；

所述执行节点根据所述协议类型、所述地址信息以及所述口令参数，将所述迁移数据写入所述目标存储对象。

7.一种数据迁移系统，其特征在于，所述数据迁移系统包括：接收单元，获取单元以及执行单元，

所述接收单元，用于接收迁移指令；其中，所述迁移指令携带身份信息、源存储对象对应的第一标识、目标存储对象对应的第二标识以及迁移数据对应的数据参数；

所述获取单元，用于根据所述身份信息、所述第一标识、所述第二标识以及所述数据参数，获得预设任务列表；其中，所述预设任务列表中存储与所述身份信息对应的迁移任务；

所述获取单元，还用于获取负载参数；

所述执行单元，用于根据所述负载参数和所述预设任务列表执行所述迁移任务，以将所述迁移数据从所述源存储对象迁移至所述目标存储对象；其中，所述负载参数用于对数据迁移的执行节点对应的负载状态进行确定。

8.根据权利要求7所述的数据迁移系统，其特征在于，

所述获取单元，具体用于根据所述第一标识、所述第二标识以及所述数据参数，生成所述迁移指令对应的所述迁移任务；以及根据所述身份信息和所述迁移任务，获得所述预设任务列表。

9.根据权利要求8所述的数据迁移系统，其特征在于，

所述获取单元，还具体用于根据所述第一标识和所述第二标识，确定协议类型、地址信息以及口令参数；以及根据所述协议类型、所述地址信息、所述口令参数以及所述数据参数，生成所述迁移任务。

10.根据权利要求8所述的数据迁移系统，其特征在于，

所述获取单元，还具体用于根据所述身份信息和所述迁移任务的对应关系，将所述迁移任务存储至所述预设任务列表中。

11.根据权利要求9所述的数据迁移系统，其特征在于，

所述执行单元，具体用于根据所述负载参数确定所述执行节点对应的迁移参数；以及按照所述迁移参数，对所述预设任务列表中的所述迁移任务进行调度，以通过所述执行节点执行所述迁移任务。

12.根据权利要求11所述的数据迁移系统，其特征在于，

所述执行单元，还具体用于所述执行节点根据所述协议类型、所述地址信息以及所述口令参数，从所述源存储对象中获取所述迁移数据；以及所述执行节点根据所述协议类型、所述地址信息以及所述口令参数，将所述迁移数据写入所述目标存储对象。

13.一种数据迁移系统，其特征在于，所述数据迁移系统包括处理器、存储有所述处理器可执行指令的存储器、通信接口，和用于连接所述处理器、所述存储器以及所述通信接口的总线，当所述指令被所述处理器执行时，实现如权利要求1-6任一项所述的方法。

14.一种计算机可读存储介质，其上存储有程序，应用于数据迁移系统中，其特征在于，所述程序被处理器执行时，实现如权利要求1-6任一项所述的方法。

Images