CN106406763A - 一种后台拷贝方法及装置 - Google Patents

Abstract

本发明公开了一种后台拷贝方法及装置，其中该方法包括：预先将需要被拷贝的源卷数据划分为与预设颗粒大小对应的数据颗粒；获取当前设置的拷贝速率及拷贝时间间隔，并基于拷贝速率及拷贝时间间隔确定每次拷贝所需拷贝的数据颗粒的单次拷贝量；每经过拷贝时间间隔，则将未被拷贝的单次拷贝量的对应数据颗粒进行拷贝。由此，根据实际需要实现了对拷贝速率的控制，从而实现了拷贝过程中占用带宽的有效限制，有效避免了拷贝操作与IO读写互相争抢带宽的情况出现，进而提升了主机的IO性能。

Description

一种后台拷贝方法及装置

技术领域

本发明涉及数据存储技术领域，更具体地说，涉及一种后台拷贝方法及装置。

背景技术

后台拷贝技术是存储领域经常使用到的一种技术，通过后台拷贝技术，实现对数据的后台拷贝，进而实现数据备份，保证数据可靠性。

现有技术中通过后台拷贝技术实现的数据后台拷贝，通常都是直接对需要被拷贝的数据进行拷贝实现的，但是发明人发现，由于上述技术方案中并未考虑到数据后台拷贝的速度，就可能出现主机在进行大量IO读写时，数据后台拷贝仍以较快的速度进行，导致IO读写与后台数据拷贝争抢带宽的情况出现，进而因上述情况导致主机的IO性能下降。

综上所述，现有技术中的上述技术方案存在可能出现数据后台拷贝与IO读写争抢带宽的情况，进而导致主机的IO性能下降问题。

发明内容

本发明的目的是提供一种后台拷贝方法及装置，以解决现有技术中的技术方案存在的可能出现数据后台拷贝与IO读写争抢带宽的情况，进而导致主机的IO性能下降的问题。

为了实现上述目的，本发明提供如下技术方案：

一种后台拷贝方法，包括：

预先将需要被拷贝的源卷数据划分为与预设颗粒大小对应的数据颗粒；

获取当前设置的拷贝速率及拷贝时间间隔，并基于所述拷贝速率及拷贝时间间隔确定每次拷贝所需拷贝的数据颗粒的单次拷贝量；

每经过所述拷贝时间间隔，则将未被拷贝的单次拷贝量的对应数据颗粒进行拷贝。

优选的，基于所述拷贝速率及拷贝时间间隔确定每次拷贝所需拷贝的数据颗粒的单次拷贝量，包括：

确定所述拷贝速率与所述拷贝时间间隔的商为所述单次拷贝量，其中，所述拷贝速率具体为每秒所需拷贝的数据颗粒的秒拷贝量。

优选的，还包括：

接收外界输入的参数设置指令，并按照所述参数设置指令设置所述拷贝速率及所述拷贝时间间隔。

优选的，还包括：

基于所述拷贝速率及拷贝时间间隔计算对未被拷贝的数据颗粒进行拷贝所需的总拷贝次数；

对所述未被拷贝的数据颗粒进行拷贝，并在每次拷贝之后，判断所述拷贝速率及所述拷贝时间间隔是否发生变化，如果是，则按照当前设置的拷贝速率及拷贝时间间隔计算所述总拷贝次数，并初始化预设的拷贝次数参数为0，如果否，则将当前的拷贝次数参数加1，直至所述拷贝次数参数的值与当前总拷贝次数相等为止。

优选的，基于当前设置的拷贝速率及拷贝时间间隔计算所述总拷贝次数，包括：

将未被拷贝的数据颗粒的总拷贝量与所述单次拷贝量的商向上取整得到所述总拷贝次数。

一种后台拷贝装置，包括：

划分模块，用于预先将需要被拷贝的源卷数据划分为与预设颗粒大小对应的数据颗粒；

计算模块，用于获取当前设置的拷贝速率及拷贝时间间隔，并基于所述拷贝速率及拷贝时间间隔确定每次拷贝所需拷贝的数据颗粒的单次拷贝量；

拷贝模块，用于每经过所述拷贝时间间隔，则将未被拷贝的单次拷贝量的对应数据颗粒进行拷贝。

优选的，所述第一计算模块包括：

计算单元，用于确定所述拷贝速率与所述拷贝时间间隔的商为所述单次拷贝量，其中，所述拷贝速率具体为每秒所需拷贝的数据颗粒的秒拷贝量。

优选的，还包括：

参数设置模块，用于接收外界输入的参数设置指令，并按照所述参数设置指令设置所述拷贝速率及所述拷贝时间间隔。

优选的，所述拷贝模块还包括：

拷贝单元，用于：基于所述拷贝速率及拷贝时间间隔计算对未被拷贝的数据颗粒进行拷贝所需的总拷贝次数；对所述未被拷贝的数据颗粒进行拷贝，并在每次拷贝之后，判断所述拷贝速率及所述拷贝时间间隔是否发生变化，如果是，则按照当前设置的拷贝速率及拷贝时间间隔计算所述总拷贝次数，并初始化预设的拷贝次数参数为0，如果否，则将当前的拷贝次数参数加1，直至所述拷贝次数参数的值与当前总拷贝次数相等为止。

优选的，所述拷贝单元包括：

拷贝子单元，用于将未被拷贝的数据颗粒的总拷贝量与所述单次拷贝量的商向上取整得到所述总拷贝次数。

本发明提供了一种后台拷贝方法及装置，其中该方法包括：预先将需要被拷贝的源卷数据划分为与预设颗粒大小对应的数据颗粒；获取当前设置的拷贝速率及拷贝时间间隔，并基于所述拷贝速率及拷贝时间间隔确定每次拷贝所需拷贝的数据颗粒的单次拷贝量；每经过所述拷贝时间间隔，则将未被拷贝的单次拷贝量的对应数据颗粒进行拷贝。通过本申请公开的上述技术特征，将需要被拷贝的数据划分为数据颗粒，并基于设置的拷贝速率及拷贝时间间隔确定对应的单次拷贝量，进而按照拷贝时间间隔实现数据颗粒的定时拷贝，且每次拷贝均仅拷贝单次拷贝量的数据颗粒，由此，根据实际需要实现了对拷贝速率的控制，从而实现了拷贝过程中占用带宽的有效限制，有效避免了拷贝操作与IO读写互相争抢带宽的情况出现，进而提升了主机的IO性能。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。

图1为本发明实施例提供的一种后台拷贝方法的流程图；

图2为本发明实施例提供的一种后台拷贝装置的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

请参阅图1，其示出了本发明实施例提供的一种后台拷贝方法的流程图，可以包括以下步骤：

S11：预先将需要被拷贝的源卷数据划分为与预设颗粒大小对应的数据颗粒。

后台拷贝技术对应的后台拷贝过程简单来说就是将数据由源卷复制到目标卷的过程。其中，预设颗粒大小可以根据实际需要进行设定，如256KB等。通过将需要被拷贝的数据划分为数据颗粒，将拷贝操作分解为多项更小的拷贝操作，每次操作均基于数据颗粒执行，从而在后台拷贝过程中实现其占用带宽的有效限制。具体来说，可以将需要被拷贝的数据按照其地址划分为一系列不相重叠的数据颗粒，第一个数据颗粒位于需要被拷贝的源卷数据的开始处，各数据颗粒之间没有间隔；在预设颗粒大小固定的情况下，每个数据颗粒的长度都相同。

S12：获取当前设置的拷贝速率及拷贝时间间隔，并基于拷贝速率及拷贝时间间隔确定每次拷贝所需拷贝的数据颗粒的单次拷贝量。

其中拷贝速率及拷贝时间间隔可以由用户根据实际需要进行设定，其中设置好拷贝时间间隔之后，可以通过定时器实现对应计时，进而通过定时器实现的拷贝时间间隔进行后台拷贝操作。基于拷贝速率及拷贝时间间隔确定每次拷贝所需拷贝的数据颗粒的单次拷贝量，从而在每次拷贝操作中均拷贝单次拷贝量的数据颗粒。

S13：每经过拷贝时间间隔，则将未被拷贝的单次拷贝量的对应数据颗粒进行拷贝。

通过每经过拷贝时间间隔则将未被拷贝的单次拷贝量的数据颗粒拷贝至目标卷，从而达到控制拷贝速率的目的。需要说明的是，此处所说的单次拷贝量是与当前设置的拷贝速率及拷贝时间间隔对应的单次拷贝量。另外，对于数据颗粒的拷贝可以是按照其逻辑地址实现的，如第一次进行拷贝则是将位于源卷数据开始处及之后连续的单次拷贝量的数据颗粒进行拷贝，第二次进行拷贝则是将进行第一次拷贝之后剩余源卷数据的开始处及之后连续的单次拷贝量的数据颗粒进行拷贝，以此类推。

通过本申请公开的上述技术特征，将需要被拷贝的数据划分为数据颗粒，并基于设置的拷贝速率及拷贝时间间隔确定对应的单次拷贝量，进而按照拷贝时间间隔实现数据颗粒的定时拷贝，且每次拷贝均仅拷贝单次拷贝量的数据颗粒，由此，根据实际需要实现了对拷贝速率的控制，从而实现了拷贝过程中占用带宽的有效限制，有效避免了拷贝操作与IO读写互相争抢带宽的情况出现，进而提升了主机的IO性能。

本发明实施例提供的一种后台拷贝方法，基于拷贝速率及拷贝时间间隔确定每次拷贝所需拷贝的数据颗粒的单次拷贝量，可以包括：

确定拷贝速率与拷贝时间间隔的商为单次拷贝量，其中，拷贝速率具体为每秒所需拷贝的数据颗粒的秒拷贝量。

其中，用于拷贝速率处于拷贝时间间隔即可得到单次拷贝量，此时拷贝速率具体为每秒所需拷贝的数据颗粒的秒拷贝量。当然，还可以根据实际需要进行其他设定，如将拷贝速率设置为对应的属性值，进而确定与该属性值对应的每秒所需拷贝的数据颗粒的秒拷贝量，再根据上述方式获取到单次拷贝量，如拷贝速率对应的属性值可以在1到100之间，其与每秒所需拷贝的数据颗粒的秒拷贝量之间的对应关系可以如表1所示，例如，当拷贝速率对应的属性值设置为100的时候，秒拷贝量等于64MB，也就相当于每秒256个数据颗粒(数据颗粒大小为256KB)。

表1

本发明实施例提供的一种后台拷贝方法，还可以包括：

接收外界输入的参数设置指令，并按照参数设置指令设置拷贝速率及拷贝时间间隔。

其中，用户可以根据实际需要对拷贝速率及拷贝时间间隔进行修改，具体来说，无论后台拷贝在何种状态下，都可以通过输入参数设置指令，实现对拷贝速率及拷贝时间间隔的设置修改。从而实现了用户对上述参数的灵活设置。当然，本申请公开的上述实现拷贝速率控制的技术方案可以应用于任何需要实现数据复制的技术领域。

本发明实施例提供的一种后台拷贝方法，还可以包括：

基于拷贝速率及拷贝时间间隔计算对未被拷贝的数据颗粒进行拷贝所需的总拷贝次数；

对未被拷贝的数据颗粒进行拷贝，并在每次拷贝之后，判断拷贝速率及拷贝时间间隔是否发生变化，如果是，则按照当前设置的拷贝速率及拷贝时间间隔计算总拷贝次数，并初始化预设的拷贝次数参数为0，如果否，则将当前的拷贝次数参数加1，直至拷贝次数参数的值与当前总拷贝次数相等为止。

具体来说，在步骤S12中，对于单次拷贝量的计算均为基于当前设置的拷贝速率及拷贝时间间隔实现的，因此，每次计算出对应的单次拷贝量后再实现的拷贝操作均为按照与当前设置的拷贝速率及拷贝时间间隔对应的单次拷贝量实现的。而为了通过对拷贝操作次数的统计，确定是否完成数据的拷贝工作可以通过上述技术方案实现，因为拷贝速率及拷贝时间间隔发生变化后，对应的总拷贝次数及单次拷贝量均会发生对应的变化，因此，当拷贝速率及拷贝时间间隔发生变化时，需要重新计算单次拷贝量及总拷贝次数，以按照该单次拷贝量实现对应的拷贝操作，按照该总拷贝次数实现拷贝操作次数的统计。具体来说，可以通过start命令调用bcStart流程，该流程即对应上述实现拷贝操作的各步骤，具体该流程可以通过定时器每个拷贝时间间隔则异步调用async流程，此流程操作首先获取之前已经复制过的数据颗粒的位置，得到还未被复制的数据颗粒的起始位置，再计算出总拷贝次数及单次拷贝量，实现对数据颗粒的拷贝。

具体来说，基于当前设置的拷贝速率及拷贝时间间隔计算总拷贝次数，可以包括：

将未被拷贝的数据颗粒的总拷贝量与单次拷贝量的商向上取整得到总拷贝次数。

其中，向上取整即为当将未被拷贝的数据颗粒的总拷贝量除以与当前设置的拷贝速率及拷贝时间间隔对应的单次拷贝量所得的商为小数时，则将该小数的小数部分向上取整，具体来说，如果上述商为1.3，则总拷贝次数为2。可见，总拷贝次数最少为1次，从而通过执行该总拷贝次数次的拷贝次数，实现对待拷贝数据颗粒的拷贝。

本发明实施例还提供了一种后台拷贝装置，如图2所示，可以包括：

划分模块11，用于预先将需要被拷贝的源卷数据划分为与预设颗粒大小对应的数据颗粒；

计算模块12，用于获取当前设置的拷贝速率及拷贝时间间隔，并基于拷贝速率及拷贝时间间隔确定每次拷贝所需拷贝的数据颗粒的单次拷贝量；

拷贝模块13，用于每经过拷贝时间间隔，则将未被拷贝的单次拷贝量的对应数据颗粒进行拷贝。

本发明实施例提供的一种后台拷贝装置，第一计算模块可以包括：

计算单元，用于确定拷贝速率与拷贝时间间隔的商为单次拷贝量，其中，拷贝速率具体为每秒所需拷贝的数据颗粒的秒拷贝量。

本发明实施例提供的一种后台拷贝装置，还可以包括：

参数设置模块，用于接收外界输入的参数设置指令，并按照参数设置指令设置拷贝速率及拷贝时间间隔。

本发明实施例提供的一种后台拷贝装置，拷贝模块还可以包括：

拷贝单元，用于：基于拷贝速率及拷贝时间间隔计算对未被拷贝的数据颗粒进行拷贝所需的总拷贝次数；对未被拷贝的数据颗粒进行拷贝，并在每次拷贝之后，判断拷贝速率及拷贝时间间隔是否发生变化，如果是，则按照当前设置的拷贝速率及拷贝时间间隔计算总拷贝次数，并初始化预设的拷贝次数参数为0，如果否，则将当前的拷贝次数参数加1，直至拷贝次数参数的值与当前总拷贝次数相等为止。

本发明实施例提供的一种后台拷贝装置，拷贝单元可以包括：

拷贝子单元，用于将未被拷贝的数据颗粒的总拷贝量与单次拷贝量的商向上取整得到总拷贝次数。

本发明实施例提供的一种后台拷贝装置中相关部分的说明请参见本发明实施例提供的一种后台拷贝方法中对应部分的详细说明，在此不再赘述。

对所公开的实施例的上述说明，使本领域技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种后台拷贝方法，其特征在于，包括：

预先将需要被拷贝的源卷数据划分为与预设颗粒大小对应的数据颗粒；

获取当前设置的拷贝速率及拷贝时间间隔，并基于所述拷贝速率及拷贝时间间隔确定每次拷贝所需拷贝的数据颗粒的单次拷贝量；

每经过所述拷贝时间间隔，则将未被拷贝的单次拷贝量的对应数据颗粒进行拷贝。

2.根据权利要求1所述的方法，其特征在于，基于所述拷贝速率及拷贝时间间隔确定每次拷贝所需拷贝的数据颗粒的单次拷贝量，包括：

确定所述拷贝速率与所述拷贝时间间隔的商为所述单次拷贝量，其中，所述拷贝速率具体为每秒所需拷贝的数据颗粒的秒拷贝量。

3.根据权利要求1所述的方法，其特征在于，还包括：

接收外界输入的参数设置指令，并按照所述参数设置指令设置所述拷贝速率及所述拷贝时间间隔。

4.根据权利要求3所述的方法，其特征在于，还包括：

基于所述拷贝速率及拷贝时间间隔计算对未被拷贝的数据颗粒进行拷贝所需的总拷贝次数；

对所述未被拷贝的数据颗粒进行拷贝，并在每次拷贝之后，判断所述拷贝速率及所述拷贝时间间隔是否发生变化，如果是，则按照当前设置的拷贝速率及拷贝时间间隔计算所述总拷贝次数，并初始化预设的拷贝次数参数为0，如果否，则将当前的拷贝次数参数加1，直至所述拷贝次数参数的值与当前总拷贝次数相等为止。

5.根据权利要求4所述的方法，其特征在于，基于当前设置的拷贝速率及拷贝时间间隔计算所述总拷贝次数，包括：

将未被拷贝的数据颗粒的总拷贝量与所述单次拷贝量的商向上取整得到所述总拷贝次数。

6.一种后台拷贝装置，其特征在于，包括：

划分模块，用于预先将需要被拷贝的源卷数据划分为与预设颗粒大小对应的数据颗粒；

计算模块，用于获取当前设置的拷贝速率及拷贝时间间隔，并基于所述拷贝速率及拷贝时间间隔确定每次拷贝所需拷贝的数据颗粒的单次拷贝量；

拷贝模块，用于每经过所述拷贝时间间隔，则将未被拷贝的单次拷贝量的对应数据颗粒进行拷贝。

7.根据权利要求6所述的装置，其特征在于，所述第一计算模块包括：

计算单元，用于确定所述拷贝速率与所述拷贝时间间隔的商为所述单次拷贝量，其中，所述拷贝速率具体为每秒所需拷贝的数据颗粒的秒拷贝量。

8.根据权利要求6所述的装置，其特征在于，还包括：

参数设置模块，用于接收外界输入的参数设置指令，并按照所述参数设置指令设置所述拷贝速率及所述拷贝时间间隔。

9.根据权利要求8所述的装置，其特征在于，所述拷贝模块还包括：

拷贝单元，用于：基于所述拷贝速率及拷贝时间间隔计算对未被拷贝的数据颗粒进行拷贝所需的总拷贝次数；对所述未被拷贝的数据颗粒进行拷贝，并在每次拷贝之后，判断所述拷贝速率及所述拷贝时间间隔是否发生变化，如果是，则按照当前设置的拷贝速率及拷贝时间间隔计算所述总拷贝次数，并初始化预设的拷贝次数参数为0，如果否，则将当前的拷贝次数参数加1，直至所述拷贝次数参数的值与当前总拷贝次数相等为止。

10.根据权利要求9所述的装置，其特征在于，所述拷贝单元包括：

拷贝子单元，用于将未被拷贝的数据颗粒的总拷贝量与所述单次拷贝量的商向上取整得到所述总拷贝次数。