CN113691414B - 一种带宽性能测试方法、装置及系统 - Google Patents

Abstract

本发明提出了一种带宽性能测试方法，应用于存储IP远程复制网络环境中，包括：搭建虚拟化IP网络测试环境，配置不同虚拟化IP链路的网络环境参数；建立虚拟化IP网络测试环境中主存储集群与从存储集群之间的远程复制关系，并进行远程复制；获取不同虚拟化IP链路对应的不同网络环境下的带宽性能数据，本发明还提出了一种带宽性能测试装置及系统，有效地降低了带宽性能测试，提高了验证的便利性；而且可以一次性实现不同网络环境参数的测试，提高了带宽性能测试验证效率。

Description

一种带宽性能测试方法、装置及系统

技术领域

本发明涉及存储系统中性能测试验证领域，尤其是涉及一种带宽性能测试方法、装置及系统。

背景技术

远程复制应用于数据中心级的数据保护或灾难恢复，主要操作方式是将同一数据分别在不同的存储系统中形成拷贝。通常，考虑系统可靠性与性能之间的均衡，实际应用场景中，使用两份拷贝。其中，两份卷的容量大小相同，生产中心作为主卷，备份中心作为从卷。主卷包含了主机端写入的生产数据，并且承担正常的业务应用数据；从卷包含对主卷的备份数据，并保持与主卷数据的同步更新，用于灾难后的数据恢复。

远程复制采用同步、异步两种复制模式。其中，同步复制指同一时间实时将数据写入主从两个站点。在任何时刻，两站点均保持数据一致，即实时一致。与之对应，异步复制指数据非实时的写到从站点。适用于远距离且低带宽的应用场景，为灾难恢复提供了另一种实现方式。

远程复制链路一般支持FC链路（双向、点对点的串行数据通道每一条链路终结于端口或转发器，链路介质可以是光纤等）和IP链路，使用IP链路实现不同站点设备间的远程复制是应用最广泛的。

测试验证复杂IP网络环境带宽性能，现有技术一般是使用真实的网络损伤仪，逐条配置网络复制环境，模拟网络的延迟、丢包、可用带宽、抖动等网络状况，之后验证存储IP远程复制的带宽适应性、性能优化、后台拷贝速率。

但是，使用真实的网络损伤仪，损伤精度非常高，价格也非常昂贵，而且需要专业人员的专业操作，不利于降低测试验证成本，提高测试验证的便利性。

发明内容

本发明为了解决现有技术中存在的问题，创新提出了一种带宽性能测试方法、装置及系统，有效解决由于现有技术造成存储IP远程复制中带宽性能测试成本高、需要专业人员专业操作的问题，有效地降低了带宽性能测试成本，提高了测试验证的便利性。

本发明第一方面提供了一种带宽性能测试方法，应用于存储IP远程复制网络环境中，包括：

搭建虚拟化IP网络测试环境，配置不同虚拟化IP链路的网络环境参数；

建立虚拟化IP网络测试环境中主存储集群与从存储集群之间的远程复制关系，并进行远程复制；

获取不同虚拟化IP链路对应的不同网络环境下的带宽性能数据。

可选地，搭建虚拟化IP网络测试环境，配置不同虚拟化IP链路的网络环境参数具体包括：

搭建虚拟化IP网络测试环境；其中，虚拟化IP网络测试环境包括部署网络环境模拟工具的测试服务器、主存储集群、从存储集群、第一交换机、第二交换机，所述测试服务器通过第一交换机与主存储集群通信连接，所述测试服务器还通过第二交换机与从存储集群通信连接；第一交换机通过第一管理链路以及第一远程复制链路与主存储集群通信连接，第二交换机通过第二管理链路以及第二远程复制链路与从存储集群通信连接；

通过链路虚拟化技术将虚拟化IP网络测试环境中主存储集群与从存储集群之间的物理通信链路虚拟为多个虚拟化IP链路；

每一虚拟化IP链路配置不同网络环境参数。

可选地，网络环境参数包括网络环境延时、丢包率。

可选地，建立虚拟化IP网络测试环境中主存储端与从存储之间的远程复制关系，并进行远程复制具体是：

建立虚拟化IP网络测试环境中主存储集群与从存储集群的远程复制关系；

在主存储集群与从存储集群集群上分别建立第一数据卷以及第二数据卷，其中，第一数据卷位于主存储集群，第二数据卷位于从存储集群，第一数据卷与第二数据卷存储空间相同，在第一数据卷中写入随机数据；

在主存储集群上，建立第一数据卷与第二数据卷的远程复制关系；

启动后台远程拷贝，记录远程复制的起始时间和结束时间。

进一步地，建立虚拟化IP网络测试环境中主存储集群与从存储集群的远程复制关系具体包括：

在主存储集群中设置第一网络端口，设置主存储集群节点的网络信息，修改主存储集群节点的远程拷贝属性；

在从存储集群中设置第二网络端口，设置从存储集群节点的网络信息，修改从存储集群节点的远程拷贝属性；

在主存储集群或从存储集群中创建伙伴关系，添加从存储集群或主存储集群组成伙伴集群。

进一步地，第一网络端口为主存储集群新建的以太网端口，主存储集群节点的网络信息包括为主存储集群节点新设置的业务IP；第二网络端口为从存储集群新建的以太网端口，从存储集群节点的网络信息包括为从存储集群节点新设置的业务IP；主存储集群节点与从存储集群节点通过新设置的业务IP远程通信连接，组成伙伴集群。

可选地，获取不同虚拟化IP链路对应的不同网络环境下的带宽性能数据具体包括：

获取远程复制的起始时间和结束时间，

获取主存储集群中第一数据卷的存储空间大小或从存储集群中第二数据卷的存储空间大小；

根据主存储集群中第一数据卷的存储空间大小或从存储集群中第二数据卷的存储空间大小、远程复制的起始时间和结束时间获取不同虚拟化IP链路对应的不同网络环境下的带宽性能数据。

进一步地，还包括：

保持不同虚拟化IP链路的网络环境参数、主存储集群中第一数据卷的存储空间大小或从存储集群中第二数据卷的存储空间大小不变，重复多次测试，获取不同虚拟化IP链路对应的不同网络环境下的带宽性能数据的平均值。

本发明第二方面提供了一种带宽性能测试装置，应用于存储IP远程复制网络环境中，包括：

搭建模块，搭建虚拟化IP网络测试环境，配置不同虚拟化IP链路的网络环境参数；

建立模块，建立虚拟化IP网络测试环境中主存储集群与从存储集群之间的远程复制关系，并进行远程复制；

获取模块，获取不同虚拟化IP链路对应的不同网络环境下的带宽性能数据。

本发明第三方面提供了一种带宽性能测试系统，应用于存储IP远程复制网络环境中，包括：部署网络环境模拟工具的测试服务器、主存储集群、从存储集群、第一交换机、第二交换机，所述测试服务器通过第一交换机与主存储集群通信连接，所述测试服务器还通过第二交换机与从存储集群通信连接；第一交换机通过第一管理链路以及第一远程复制链路与主存储集群通信连接，第二交换机通过第二管理链路以及第二远程复制链路与从存储集群通信连接；所述测试服务器，用于根据网络环境模拟工具搭建虚拟化IP网络测试环境，配置不同虚拟化IP链路的网络环境参数；建立主存储集群与从存储集群之间的远程复制关系，并进行远程复制；获取不同虚拟化IP链路对应的不同网络环境下的带宽性能数据。

本发明采用的技术方案包括以下技术效果：

1、本发明通过软件搭建虚拟化IP网络测试环境，有效解决由于现有技术造成存储IP远程复制中带宽性能测试成本高、需要专业人员专业操作的问题，有效地降低了带宽性能测试，提高了测试验证的便利性。

2、本发明技术方案通过配置不同虚拟化IP链路的网络环境参数，为每一条虚拟化IP链路设置不同的网络环境参数，可以一次性实现不同网络环境参数的测试，提高了带宽性能测试验证效率。

3、本发明技术方案中第一网络端口为主存储集群新建的以太网端口，主存储集群节点的网络信息包括为主存储集群节点新设置的业务IP；第二网络端口为从存储集群新建的以太网端口，从存储集群节点的网络信息包括为从存储集群节点新设置的业务IP；主存储集群节点与从存储集群节点通过新设置的业务IP远程通信连接，组成伙伴集群；为主存储集群节点以及从存储节点设置新的业务IP，第一网络端口、第二网络端口均为单独新建设置的网络端口，避免了其他网络端口的占用，提高了数据拷贝以及带宽性能测试的效率。

4、本发明技术方案中保持不同虚拟化IP链路的网络环境参数、主存储集群中第一数据卷的存储空间大小或从存储集群中第二数据卷的存储空间大小不变，重复多次测试，获取不同虚拟化IP链路对应的不同网络环境下的带宽性能数据的平均值，提高了带宽性能测试的准确性以及可靠性。

应当理解的是以上的一般描述以及后文的细节描述仅是示例性和解释性的，并不能限制本发明。

附图说明

为了更清楚说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单介绍，显而易见的，对于本领域普通技术人员而言，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为链路虚拟化的示意图；

图2为本发明方案中实施例一方法的流程示意图；

图3为本发明方案中实施例一方法中步骤S1的流程示意图；

图4为本发明方案中实施例一方法中虚拟化IP网络环境的拓扑示意图；

图5为本发明方案中实施例一方法中步骤S2的流程示意图；

图6为本发明方案中实施例一方法中步骤S21的流程示意图；

图7为本发明方案中实施例一方法中步骤S3的一流程示意图；

图8为本发明方案中实施例一方法中步骤S3的另一流程示意图；

图9为本发明方案中实施例一方法中网络环境延时对带宽性能影响的示意图；

图10为本发明方案中实施例一方法中丢包率对带宽性能影响的示意图；

图11为本发明方案中实施例二装置中的结构示意图；

图12为本发明方案中实施例二装置中搭建模块101的结构示意图；

图13为本发明方案中实施例二装置中建立模块102的结构示意图；

图14为本发明方案中实施例二装置中获取模块103的一结构示意图；

图15为本发明方案中实施例二装置中获取模块103的另一结构示意图；

图16为本发明方案中实施例三系统的结构示意图。

具体实施方式

为能清楚说明本方案的技术特点，下面通过具体实施方式，并结合其附图，对本发明进行详细阐述。下文的公开提供了许多不同的实施例或例子用来实现本发明的不同结构。为了简化本发明的公开，下文中对特定例子的部件和设置进行描述。此外，本发明可以在不同例子中重复参考数字和/或字母。这种重复是为了简化和清楚的目的，其本身不指示所讨论各种实施例和/或设置之间的关系。应当注意，在附图中所图示的部件不一定按比例绘制。本发明省略了对公知组件和处理技术及工艺的描述以避免不必要地限制本发明。

实施例一

在存储IP链路的远程复制过程中，主要用了以下技术：

（1）采用了压缩技术

压缩技术可以支持软件压缩和硬件压缩，软件压缩会消耗系统的CPU资源，硬件压缩使用的是在线实时压缩技术，并且可以降低对CPU资源的消耗。可以通过压缩技术，减少复制链路上实际需要传输的数据量。

（2）采用了网络传输优化技术

没有采用网络优化之前，主端发出复制数据到从端需要等待从端反馈复制完成的应答，主端才能开始下一次数据的发送。在长距离的IP网络中，网络延迟是制约传输速率的很关键因素，延迟越高传输速率就会越低。

使用远程复制功能，可以有以下优势：

（1）远距离容灾

同步复制可以允许两台存储的部署距离达到300KM，实现了远距离的数据实时容灾。对灾难恢复，提供了一种简单的保持主卷与从卷之间数据一致的方法。

（2）低性能成本

异步复制模式，数据传输是按照I/O（input/output，输入/输出）的写入顺序，顺序的复制到从端，不会影响前端主机业务的延迟，主机应用等待的时间也会减少，并可以增加部署两台设备之间的距离。同时也确保了整个系统的吞吐量随着系统容量的增加而增加，保持了不断增长的数据组的一致性。

（3）强带宽适应性

具有变更卷的异步复制，可以保证在从端始终保有一份一致性数据，并且在不断的同步中，保护用户数据的一致性。该模式专为低带宽异步复制模式设计的，使得带宽能够根据对不同数据延迟程度的需求而变化。

（4）高效的性能优化

IP远程复制使用压缩技术和虚拟链路技术结合，不仅减少了传输的数据量，降低了对带宽的要求，还增加了虚拟链路共同去传输数据，使数据传输速率接近满带宽。

链路虚拟化是指将一条物理的链路虚拟成多条链路，由多条链路共同去传输数据。如果数据包从任何一条虚拟链路中丢失，数据将被重新发送。虚拟链路的数量由AI（Artificial Intelligence，人工智能）引擎控制，AI引擎还监视数据传输期间的链路性能，它可以适当地调整虚拟链路的数量，此信息保留在控制器中，以便如果链接停止并再次启动，则将使用先前设置的虚拟链路重新启动；AI引擎-bridgeworks库（IP网络性能优化库，内部包括各种数据优化函数）对网络环境性能进行优化，虚拟链路技术图1所示。

如图2所示，本发明提供了一种带宽性能测试方法，应用于存储IP远程复制网络环境中，包括：

S1，搭建虚拟化IP网络测试环境，配置不同虚拟化IP链路的网络环境参数；

S2，建立虚拟化IP网络测试环境中主存储集群与从存储集群之间的远程复制关系，并进行远程复制；

S3，获取不同虚拟化IP链路对应的不同网络环境下的带宽性能数据。

其中，在步骤S1中，如图3-图4所示，步骤S1具体包括：

S11，搭建虚拟化IP网络测试环境；其中，虚拟化IP网络测试环境包括部署网络环境模拟工具的测试服务器、主存储集群、从存储集群、第一交换机、第二交换机，所述测试服务器通过第一交换机与主存储集群通信连接，所述测试服务器还通过第二交换机与从存储集群通信连接；第一交换机通过第一管理链路以及第一远程复制链路与主存储集群通信连接，第二交换机通过第二管理链路以及第二远程复制链路与从存储集群通信连接；

S12，通过链路虚拟化技术将虚拟化IP网络测试环境中主存储集群与从存储集群之间的物理通信链路虚拟为多个虚拟化IP链路；

S13，每一虚拟化IP链路配置不同网络环境参数。

其中步骤S11中，主存储集群由一主控柜独立搭建的存储集群，从存储集群是由另一主控柜独立搭建的存储集群。link 11是第一管理链路，link 12是第一远程复制链路；link21是第二管理链路，link 22是第二远程复制链路。

网络环境模拟工具可以是开源工具Wanulator，Wanulator部署于服务器中。

部署网络环境模拟工具的服务器至少包括两个网络接口（网卡），如果服务器多于两个网卡，默认使用前两个网卡。部署网络环境模拟工具的服务器主机通过安装、启动、打开wanulator工具程序，选择switch模式，勾选eth0和eth1两个网卡；部署网络环境模拟工具的服务器主机通过eth0和eth1两个网卡分别于主存储集群、从存储集群通信连接，具体地，部署网络环境模拟工具的服务器主机可以通过eth1网卡与第一交换机通信连接，第一交换机与主存储集群通信连接；部署网络环境模拟工具的服务器主机可以通过eth0网卡与第二交换机通信连接，第二交换机与从存储集群通信连接。

在步骤S12-S13中，部署网络环境模拟工具的服务器主机可以通过网络环境模拟工具，实现将虚拟化IP网络测试环境中主存储集群与从存储集群之间的物理通信链路虚拟为多个虚拟化IP链路（通过链路虚拟化技术），并为每一虚拟化IP链路配置不同网络环境参数。具体地，由部署Wanulator的服务器主机通过调用接口，进行自动化配置网络环境延时、丢包率等网络环境参数参数。配置网络环境参数中的网络环境延时时，例如，待配置的网络环境延时为20ms，则可以在eth1中配置网络环境延时为20ms；也可以在eth0中配置网络环境延时为20ms；还可以eth1中配置网络环境延时为10ms，在eth0中配置网络环境延时为10ms，具体配置方式本发明在此不做限制，只要网卡eth1中网络环境延时+网卡eth0中网络环境延时=待配置的网络环境延时（20ms）即可。配置网络环境参数中的丢包率时，例如，待配置的丢包率为1%，则可以在eth1中配置丢包率为1%；也可以在eth0中配置丢包率为1%；还可以eth1中配置丢包率为0.5%，在eth0中配置丢包率为0.5%，具体配置方式本发明在此不做限制，只要网卡eth1中丢包率+网卡eth0中丢包率=待配置的丢包率（1%）即可。在具体地验证配置时，网络环境参数可以单独设置，例如在每一虚拟化IP链路中仅设置网络环境延时或丢包率，也可以在每一虚拟化IP链路中既设置网络环境延时，也设置丢包率，即网络环境延时或丢包率两项（或多项）网络环境参数相结合设置，例如网络环境延时为20ms且丢包率为1%的网络环境情况。

具体地，本发明实施例示例性地给出一种网络环境参数的配置情况，第一条虚拟化IP链路设置为正常网络环境（none，即无网络环境延时或丢包），第二条虚拟化IP链路设置为网络环境延时为20ms，第三条虚拟化IP链路设置为网络环境延时为40ms，第四条虚拟化IP链路设置为网络环境延时为80ms，第五条虚拟化IP链路设置为网络环境延时为160ms，第六条虚拟化IP链路设置为丢包率为0.1%，第七条虚拟化IP链路设置为丢包率为1%，第八条虚拟化IP链路设置为丢包率为1%且网络环境延时为80ms，也可以是其他的设置方式，本发明在此不做限制。

其中，在步骤S2中，如图5所示，步骤S2具体包括：

S21，建立虚拟化IP网络测试环境中主存储集群与从存储集群的远程复制关系；

S22，在主存储集群与从存储集群集群上分别建立第一数据卷以及第二数据卷，其中，第一数据卷位于主存储集群，第二数据卷位于从存储集群，第一数据卷与第二数据卷存储空间相同，在第一数据卷中写入随机数据；

S23，在主存储集群上，建立第一数据卷与第二数据卷的远程复制关系；

S24，启动后台远程拷贝，记录远程复制的起始时间和结束时间。

其中，如图6所示，步骤S21具体包括：

S211，在主存储集群中设置第一网络端口，设置主存储集群节点的网络信息，修改主存储集群节点的远程拷贝属性；

S212，在从存储集群中设置第二网络端口，设置从存储集群节点的网络信息，修改从存储集群节点的远程拷贝属性；

S213，在主存储集群或从存储集群中创建伙伴关系，添加从存储集群或主存储集群组成伙伴集群。

在步骤S211-S213中，在主存储集群上选择“设置”->“网络”->“以太网端口”，设置主存储集群节点的网络信息，修改远程拷贝属性，使得远程拷贝使能，即将远程拷贝属性由禁止改为组1。在从存储集群上选择“设置”->“网络”->“以太网端口”，设置从存储集群节点的网络信息，修改远程拷贝属性，使得远程拷贝使能，即将远程拷贝属性由禁止改为组1。优选地，第一网络端口为主存储集群新建的以太网端口，主存储集群节点的网络信息包括为主存储集群节点新设置的业务IP；第二网络端口为从存储集群新建的以太网端口，从存储集群节点的网络信息包括为从存储集群节点新设置的业务IP；主存储集群节点与从存储集群节点通过新设置的业务IP远程通信连接，组成伙伴集群。

在步骤S22中，在主存储集群与从存储集群集群上分别建立第一数据卷以及第二数据卷，其中，第一数据卷位于主存储集群，第二数据卷位于从存储集群，第一数据卷与第二数据卷存储空间相同（可以是10G），在第一数据卷中写入完全随机数据。

在步骤S23-S24中，在主存储集群上，通过第一网络端口、第二网络端口建立第一数据卷与第二数据卷的远程复制关系；启动后台远程拷贝，记录远程复制的起始时间和结束时间。起始时间可以在主存储集群中通过访问审计日志的形式获取，结束时间可以在从存储集群中通过访问监视事件的方式获取。

在步骤S3中，如图7所示，步骤S3具体包括：

S31，获取远程复制的起始时间和结束时间，

S32，获取主存储集群中第一数据卷的存储空间大小或从存储集群中第二数据卷的存储空间大小；

S33，根据主存储集群中第一数据卷的存储空间大小或从存储集群中第二数据卷的存储空间大小、远程复制的起始时间和结束时间获取不同虚拟化IP链路对应的不同网络环境下的带宽性能数据。

其中，在步骤S33中，不同虚拟化IP链路对应的不同网络环境下的带宽性能数据即为主存储集群中第一数据卷的存储空间大小或从存储集群中第二数据卷的存储空间大小与远程复制持续时间的比值，其中，远程复制持续时间为远程复制的结束时间和远程复制的起始时间的差值。

如下表所示，不同存储系统类型下的不同网络环境对应的带宽性能数据。

其中，x86 Background Copy(Mb/s)为存储系统类型为X86类型的带宽性能数据，其型号为X86 HF5000G5存储，FT Background Copy(Mb/s)为存储系统类型为FT类型的带宽性能数据，其型号为FT_AS5500G5-C。

进一步地，如图8所示，步骤S3还包括：

S34，保持不同虚拟化IP链路的网络环境参数、主存储集群中第一数据卷的存储空间大小或从存储集群中第二数据卷的存储空间大小不变，重复多次测试，获取不同虚拟化IP链路对应的不同网络环境下的带宽性能数据的平均值。

其中，重复多次测试可以是5次，也可以是其他次数，本发明在此不做限制。

进一步地，如图9所示，为不同网络环境延时对于带宽性能的影响，横坐标为不同的网络环境，none为正常网络环境，即无网络环境延时或丢包；add wan为添加网络环境模拟工具Wanulator，但不配置任何参数；delay20ms表示网络环境延时为20ms；packetdrop1%&delay80ms表示丢包率为1%且网络环境延时为80ms；纵坐标为带宽；如图10所示，为不同丢包率对于带宽性能的影响，横坐标为不同的网络环境，packet drop0.1%表示丢包率为0.1%；packet drop1%&delay80ms为丢包率为1%且网络环境延时为80ms；纵坐标为带宽；通过图9-图10可以得出，当网络环境延时越大，带宽性能越低；当丢包率越大，带宽性能越低；而且当网络环境不够复杂（单一网络环境延时或丢包率）时，AI引擎-bridgeworks库（IP网络性能优化库，各种数据优化函数）的对带宽性能优化表现并不明显（下降速度不明显）；随着网络环境变复杂，即网络环境延时或丢包率组合条件下，AI引擎-bridgeworks库对带宽性能优化表现优异（下降速度减缓）。

需要说明的是，本发明技术方案中，步骤S1-S3均可以通过硬件或软件语言编程实现，编程的思路与步骤相对应，也可以通过其他方式实现，本发明在此不做限制。

本发明通过软件搭建虚拟化IP网络测试环境，有效解决由于现有技术造成存储IP远程复制中带宽性能测试成本高、需要专业人员专业操作的问题，有效地降低了带宽性能测试，提高了测试验证的便利性。

本发明技术方案通过配置不同虚拟化IP链路的网络环境参数，为每一条虚拟化IP链路设置不同的网络环境参数，可以一次性实现不同网络环境参数的测试，提高了带宽性能测试验证效率。

本发明技术方案中第一网络端口为主存储集群新建的以太网端口，主存储集群节点的网络信息包括为主存储集群节点新设置的业务IP；第二网络端口为从存储集群新建的以太网端口，从存储集群节点的网络信息包括为从存储集群节点新设置的业务IP；主存储集群节点与从存储集群节点通过新设置的业务IP远程通信连接，组成伙伴集群；为主存储集群节点以及从存储节点设置新的业务IP，第一网络端口、第二网络端口均为单独新建设置的网络端口，避免了其他网络端口的占用，提高了数据拷贝以及带宽性能测试的效率。

本发明技术方案中保持不同虚拟化IP链路的网络环境参数、主存储集群中第一数据卷的存储空间大小或从存储集群中第二数据卷的存储空间大小不变，重复多次测试，获取不同虚拟化IP链路对应的不同网络环境下的带宽性能数据的平均值，提高了带宽性能测试的准确性以及可靠性。

实施例二

如图11所示，本发明技术方案还提供了一种带宽性能测试装置，应用于存储IP远程复制网络环境中，包括：

搭建模块101，搭建虚拟化IP网络测试环境，配置不同虚拟化IP链路的网络环境参数；

建立模块102，建立虚拟化IP网络测试环境中主存储集群与从存储集群之间的远程复制关系，并进行远程复制；

获取模块103，获取不同虚拟化IP链路对应的不同网络环境下的带宽性能数据。

其中，在搭建模块101中，如图12、图4所示，搭建模块101具体包括：

搭建子模块1011，搭建虚拟化IP网络测试环境；其中，虚拟化IP网络测试环境包括部署网络环境模拟工具的测试服务器、主存储集群、从存储集群、第一交换机、第二交换机，所述测试服务器通过第一交换机与主存储集群通信连接，所述测试服务器还通过第二交换机与从存储集群通信连接；第一交换机通过第一管理链路以及第一远程复制链路与主存储集群通信连接，第二交换机通过第二管理链路以及第二远程复制链路与从存储集群通信连接；

虚拟子模块1012，通过链路虚拟化技术将虚拟化IP网络测试环境中主存储集群与从存储集群之间的物理通信链路虚拟为多个虚拟化IP链路；

配置子模块1013，每一虚拟化IP链路配置不同网络环境参数。

其中搭建子模块1011中，主存储集群由一主控柜独立搭建的存储集群，从存储集群是由另一主控柜独立搭建的存储集群。link 11是第一管理链路，link 12是第一远程复制链路；link21是第二管理链路，link 22是第二远程复制链路。

网络环境模拟工具可以是开源工具Wanulator，Wanulator部署于服务器中。

部署网络环境模拟工具的服务器至少包括两个网络接口（网卡），如果服务器多于两个网卡，默认使用前两个网卡。部署网络环境模拟工具的服务器主机通过安装、启动、打开wanulator工具程序，选择switch模式，勾选eth0和eth1两个网卡；部署网络环境模拟工具的服务器主机通过eth0和eth1两个网卡分别于主存储集群、从存储集群通信连接，具体地，部署网络环境模拟工具的服务器主机可以通过eth1网卡与第一交换机通信连接，第一交换机与主存储集群通信连接；部署网络环境模拟工具的服务器主机可以通过eth0网卡与第二交换机通信连接，第二交换机与从存储集群通信连接。

在虚拟子模块1012、配置子模块1013中，部署网络环境模拟工具的服务器主机可以通过网络环境模拟工具，实现将虚拟化IP网络测试环境中主存储集群与从存储集群之间的物理通信链路虚拟为多个虚拟化IP链路（通过链路虚拟化技术），并为每一虚拟化IP链路配置不同网络环境参数。具体地，由部署Wanulator的服务器主机通过调用接口，进行自动化配置网络环境延时、丢包率等网络环境参数参数。配置网络环境参数中的网络环境延时时，例如，待配置的网络环境延时为20ms，则可以在eth1中配置网络环境延时为20ms；也可以在eth0中配置网络环境延时为20ms；还可以eth1中配置网络环境延时为10ms，在eth0中配置网络环境延时为10ms，具体配置方式本发明在此不做限制，只要网卡eth1中网络环境延时+网卡eth0中网络环境延时=待配置的网络环境延时（20ms）即可。配置网络环境参数中的丢包率时，例如，待配置的丢包率为1%，则可以在eth1中配置丢包率为1%；也可以在eth0中配置丢包率为1%；还可以eth1中配置丢包率为0.5%，在eth0中配置丢包率为0.5%，具体配置方式本发明在此不做限制，只要网卡eth1中丢包率+网卡eth0中丢包率=待配置的丢包率（1%）即可。在具体地验证配置时，网络环境参数可以单独设置，例如在每一虚拟化IP链路中仅设置网络环境延时或丢包率，也可以在每一虚拟化IP链路中既设置网络环境延时，也设置丢包率，即网络环境延时或丢包率两项（或多项）网络环境参数相结合设置，例如网络环境延时为20ms且丢包率为1%的网络环境情况。

具体地，本发明实施例示例性地给出一种网络环境参数的配置情况，第一条虚拟化IP链路设置为正常网络环境（无网络环境延时或丢包），第二条虚拟化IP链路设置为网络环境延时为20ms，第三条虚拟化IP链路设置为网络环境延时为40ms，第四条虚拟化IP链路设置为网络环境延时为80ms，第五条虚拟化IP链路设置为网络环境延时为160ms，第六条虚拟化IP链路设置为丢包率为0.1%，第七条虚拟化IP链路设置为丢包率为1%，第八条虚拟化IP链路设置为丢包率为1%且网络环境延时为80ms，也可以是其他的设置方式，本发明在此不做限制。

其中，在建立模块102中，如图13所示，建立模块102具体包括：

第一建立子模块1021，建立虚拟化IP网络测试环境中主存储集群与从存储集群的远程复制关系；

第二建立子模块1022，在主存储集群与从存储集群集群上分别建立第一数据卷以及第二数据卷，其中，第一数据卷位于主存储集群，第二数据卷位于从存储集群，第一数据卷与第二数据卷存储空间相同，在第一数据卷中写入随机数据；

第三建立子模块1023，在主存储集群上，建立第一数据卷与第二数据卷的远程复制关系；

启动记录子模块1024，启动后台远程拷贝，记录远程复制的起始时间和结束时间。

其中，第一建立子模块1021用于实现步骤包括：在主存储集群中设置第一网络端口，设置主存储集群节点的网络信息，修改主存储集群节点的远程拷贝属性；在从存储集群中设置第二网络端口，设置从存储集群节点的网络信息，修改从存储集群节点的远程拷贝属性；在主存储集群或从存储集群中创建伙伴关系，添加从存储集群或主存储集群组成伙伴集群。

在主存储集群上选择“设置”->“网络”->“以太网端口”，设置主存储集群节点的网络信息，修改远程拷贝属性，使得远程拷贝使能，即将远程拷贝属性由禁止改为组1。在从存储集群上选择“设置”->“网络”->“以太网端口”，设置从存储集群节点的网络信息，修改远程拷贝属性，使得远程拷贝使能，即将远程拷贝属性由禁止改为组1。优选地，第一网络端口为主存储集群新建的以太网端口，主存储集群节点的网络信息包括为主存储集群节点新设置的业务IP；第二网络端口为从存储集群新建的以太网端口，从存储集群节点的网络信息包括为从存储集群节点新设置的业务IP；主存储集群节点与从存储集群节点通过新设置的业务IP远程通信连接，组成伙伴集群。

在第二建立子模块1022中，在主存储集群与从存储集群集群上分别建立第一数据卷以及第二数据卷，其中，第一数据卷位于主存储集群，第二数据卷位于从存储集群，第一数据卷与第二数据卷存储空间相同（可以是10G），在第一数据卷中写入完全随机数据。

在第三建立子模块1023、启动记录子模块1024中，在主存储集群上，通过第一网络端口、第二网络端口建立第一数据卷与第二数据卷的远程复制关系；启动后台远程拷贝，记录远程复制的起始时间和结束时间。起始时间可以在主存储集群中通过访问审计日志的形式获取，结束时间可以在从存储集群中通过访问监视事件的方式获取。

在获取模块103中，如图14所示，获取模块103具体包括：

第一获取子模块1031，获取远程复制的起始时间和结束时间，

第二获取子模块1032，获取主存储集群中第一数据卷的存储空间大小或从存储集群中第二数据卷的存储空间大小；

第三获取子模块1033，根据主存储集群中第一数据卷的存储空间大小或从存储集群中第二数据卷的存储空间大小、远程复制的起始时间和结束时间获取不同虚拟化IP链路对应的不同网络环境下的带宽性能数据。

其中，在第三获取子模块1033中，不同虚拟化IP链路对应的不同网络环境下的带宽性能数据即为主存储集群中第一数据卷的存储空间大小或从存储集群中第二数据卷的存储空间大小与远程复制持续时间的比值，其中，远程复制持续时间为远程复制的结束时间和远程复制的起始时间的差值。

如下表所示，不同存储系统类型下的不同网络环境对应的带宽性能数据。

其中，x86 Background Copy(Mb/s)为存储系统类型为X86类型的带宽性能数据，其型号为X86 HF5000G5存储，FT Background Copy(Mb/s)为存储系统类型为FT类型的带宽性能数据，其型号为FT_AS5500G5-C。

进一步地，如图15所示，获取模块103还包括：

重复测试子模块1034，保持不同虚拟化IP链路的网络环境参数、主存储集群中第一数据卷的存储空间大小或从存储集群中第二数据卷的存储空间大小不变，重复多次测试，获取不同虚拟化IP链路对应的不同网络环境下的带宽性能数据的平均值。

本发明通过软件搭建虚拟化IP网络测试环境，有效解决由于现有技术造成存储IP远程复制中带宽性能测试成本高、需要专业人员专业操作的问题，有效地降低了带宽性能测试，提高了测试验证的便利性。

本发明技术方案通过配置不同虚拟化IP链路的网络环境参数，为每一条虚拟化IP链路设置不同的网络环境参数，可以一次性实现不同网络环境参数的测试，提高了带宽性能测试验证效率。

本发明技术方案中第一网络端口为主存储集群新建的以太网端口，主存储集群节点的网络信息包括为主存储集群节点新设置的业务IP；第二网络端口为从存储集群新建的以太网端口，从存储集群节点的网络信息包括为从存储集群节点新设置的业务IP；主存储集群节点与从存储集群节点通过新设置的业务IP远程通信连接，组成伙伴集群；为主存储集群节点以及从存储节点设置新的业务IP，第一网络端口、第二网络端口均为单独新建设置的网络端口，避免了其他网络端口的占用，提高了数据拷贝以及带宽性能测试的效率。

本发明技术方案中保持不同虚拟化IP链路的网络环境参数、主存储集群中第一数据卷的存储空间大小或从存储集群中第二数据卷的存储空间大小不变，重复多次测试，获取不同虚拟化IP链路对应的不同网络环境下的带宽性能数据的平均值，提高了带宽性能测试的准确性以及可靠性。

实施例三

如图16所示，本发明技术方案还提供了一种带宽性能测试系统，应用于存储IP远程复制网络环境中，包括：部署网络环境模拟工具2011的测试服务器201、主存储集群202、从存储集群203、第一交换机204、第二交换机205，测试服务器201通过第一交换机204与主存储集群202通信连接，测试服务器201还通过第二交换机205与从存储集群203通信连接；第一交换机204通过第一管理链路以及第一远程复制链路与主存储集群202通信连接，第二交换机205通过第二管理链路以及第二远程复制链路与从存储集群203通信连接；测试服务器201，用于根据网络环境模拟工具搭建虚拟化IP网络测试环境，配置不同虚拟化IP链路的网络环境参数；建立主存储集群202与从存储集群203之间的远程复制关系，并进行远程复制；获取不同虚拟化IP链路对应的不同网络环境下的带宽性能数据。

本发明通过软件搭建虚拟化IP网络测试环境，有效解决由于现有技术造成存储IP远程复制中带宽性能测试成本高、需要专业人员专业操作的问题，有效地降低了带宽性能测试，提高了测试验证的便利性。

本发明技术方案通过配置不同虚拟化IP链路的网络环境参数，为每一条虚拟化IP链路设置不同的网络环境参数，可以一次性实现不同网络环境参数的测试，提高了带宽性能测试验证效率。

本发明技术方案中第一网络端口为主存储集群新建的以太网端口，主存储集群节点的网络信息包括为主存储集群节点新设置的业务IP；第二网络端口为从存储集群新建的以太网端口，从存储集群节点的网络信息包括为从存储集群节点新设置的业务IP；主存储集群节点与从存储集群节点通过新设置的业务IP远程通信连接，组成伙伴集群；为主存储集群节点以及从存储节点设置新的业务IP，第一网络端口、第二网络端口均为单独新建设置的网络端口，避免了其他网络端口的占用，提高了数据拷贝以及带宽性能测试的效率。

本发明技术方案中保持不同虚拟化IP链路的网络环境参数、主存储集群中第一数据卷的存储空间大小或从存储集群中第二数据卷的存储空间大小不变，重复多次测试，获取不同虚拟化IP链路对应的不同网络环境下的带宽性能数据的平均值，提高了带宽性能测试的准确性以及可靠性。

上述虽然结合附图对本发明的具体实施方式进行了描述，但并非对本发明保护范围的限制，所属领域技术人员应该明白，在本发明的技术方案的基础上，本领域技术人员不需要付出创造性劳动即可做出的各种修改或变形仍在本发明的保护范围以内。

Claims (5)

1.一种带宽性能测试方法，其特征是，应用于存储IP远程复制网络环境中，包括：

搭建虚拟化IP网络测试环境，配置不同虚拟化IP链路的网络环境参数；

其中，虚拟化IP网络测试环境包括：主存储集群、从存储集群、第一交换机、第二交换机、部署有网络环境模拟工具的测试服务器，所述测试服务器通过第一交换机与主存储集群通信连接，所述测试服务器还通过第二交换机与从存储集群通信连接；第一交换机通过第一管理链路以及第一远程复制链路与主存储集群通信连接，第二交换机通过第二管理链路以及第二远程复制链路与从存储集群通信连接；

其中，配置不同虚拟化IP链路的网络环境参数具体包括：通过链路虚拟化技术将虚拟化IP网络测试环境中主存储集群与从存储集群之间的物理通信链路虚拟为多个虚拟化IP链路；每一虚拟化IP链路配置不同网络环境参数；

建立虚拟化IP网络测试环境中主存储集群与从存储集群之间的远程复制关系，并进行远程复制；

其中，建立虚拟化IP网络测试环境中主存储集群与从存储集群之间的远程复制关系具体包括：在主存储集群中设置第一网络端口，设置主存储集群节点的网络信息，修改主存储集群节点的远程拷贝属性；在从存储集群中设置第二网络端口，设置从存储集群节点的网络信息，修改从存储集群节点的远程拷贝属性；在主存储集群或从存储集群中创建伙伴关系，添加从存储集群或主存储集群组成伙伴集群；第一网络端口为主存储集群新建的以太网端口，主存储集群节点的网络信息包括为主存储集群节点新设置的业务IP；第二网络端口为从存储集群新建的以太网端口，从存储集群节点的网络信息包括为从存储集群节点新设置的业务IP；主存储集群节点与从存储集群节点通过新设置的业务IP远程通信连接，组成伙伴集群；

其中，进行远程复制具体包括：在主存储集群与从存储集群上分别建立第一数据卷以及第二数据卷，第一数据卷位于主存储集群，第二数据卷位于从存储集群，第一数据卷与第二数据卷存储空间相同，在第一数据卷中写入随机数据；在主存储集群上，建立第一数据卷与第二数据卷的远程复制关系；启动后台远程拷贝，记录远程复制的起始时间和结束时间；

获取不同虚拟化IP链路对应的不同网络环境下的带宽性能数据，具体包括：

获取远程复制的起始时间和结束时间；

获取主存储集群中第一数据卷的存储空间大小或从存储集群中第二数据卷的存储空间大小；

根据主存储集群中第一数据卷的存储空间大小或从存储集群中第二数据卷的存储空间大小、远程复制的起始时间和结束时间获取不同虚拟化IP链路对应的不同网络环境下的带宽性能数据。

2.根据权利要求1所述的带宽性能测试方法，其特征是，网络环境参数包括网络环境延时、丢包率。

3.根据权利要求1所述的带宽性能测试方法，其特征是，还包括：

保持不同虚拟化IP链路的网络环境参数、主存储集群中第一数据卷的存储空间大小或从存储集群中第二数据卷的存储空间大小不变，重复多次测试，获取不同虚拟化IP链路对应的不同网络环境下的带宽性能数据的平均值。

4.一种带宽性能测试装置，其特征是，应用于存储IP远程复制网络环境中，包括：

搭建模块，搭建虚拟化IP网络测试环境，配置不同虚拟化IP链路的网络环境参数；

其中，虚拟化IP网络测试环境包括：主存储集群、从存储集群、第一交换机、第二交换机、部署有网络环境模拟工具的测试服务器，所述测试服务器通过第一交换机与主存储集群通信连接，所述测试服务器还通过第二交换机与从存储集群通信连接；第一交换机通过第一管理链路以及第一远程复制链路与主存储集群通信连接，第二交换机通过第二管理链路以及第二远程复制链路与从存储集群通信连接；

其中，配置不同虚拟化IP链路的网络环境参数具体包括：通过链路虚拟化技术将虚拟化IP网络测试环境中主存储集群与从存储集群之间的物理通信链路虚拟为多个虚拟化IP链路；每一虚拟化IP链路配置不同网络环境参数；

建立模块，建立虚拟化IP网络测试环境中主存储集群与从存储集群之间的远程复制关系，并进行远程复制；

其中，建立虚拟化IP网络测试环境中主存储集群与从存储集群之间的远程复制关系具体包括：在主存储集群中设置第一网络端口，设置主存储集群节点的网络信息，修改主存储集群节点的远程拷贝属性；在从存储集群中设置第二网络端口，设置从存储集群节点的网络信息，修改从存储集群节点的远程拷贝属性；在主存储集群或从存储集群中创建伙伴关系，添加从存储集群或主存储集群组成伙伴集群；第一网络端口为主存储集群新建的以太网端口，主存储集群节点的网络信息包括为主存储集群节点新设置的业务IP；第二网络端口为从存储集群新建的以太网端口，从存储集群节点的网络信息包括为从存储集群节点新设置的业务IP；主存储集群节点与从存储集群节点通过新设置的业务IP远程通信连接，组成伙伴集群；

其中，进行远程复制具体包括：在主存储集群与从存储集群上分别建立第一数据卷以及第二数据卷，第一数据卷位于主存储集群，第二数据卷位于从存储集群，第一数据卷与第二数据卷存储空间相同，在第一数据卷中写入随机数据；在主存储集群上，建立第一数据卷与第二数据卷的远程复制关系；启动后台远程拷贝，记录远程复制的起始时间和结束时间；

获取模块，获取不同虚拟化IP链路对应的不同网络环境下的带宽性能数据，具体包括：

获取远程复制的起始时间和结束时间；

获取主存储集群中第一数据卷的存储空间大小或从存储集群中第二数据卷的存储空间大小；

根据主存储集群中第一数据卷的存储空间大小或从存储集群中第二数据卷的存储空间大小、远程复制的起始时间和结束时间获取不同虚拟化IP链路对应的不同网络环境下的带宽性能数据。

5.一种带宽性能测试系统，其特征是，应用于存储IP远程复制网络环境中，包括：主存储集群、从存储集群、第一交换机、第二交换机、部署有网络环境模拟工具的测试服务器；所述测试服务器，用于根据网络环境模拟工具搭建虚拟化IP网络测试环境，配置不同虚拟化IP链路的网络环境参数；建立主存储集群与从存储集群之间的远程复制关系，并进行远程复制；获取不同虚拟化IP链路对应的不同网络环境下的带宽性能数据；

其中，虚拟化IP网络测试环境包括：主存储集群、从存储集群、第一交换机、第二交换机、部署有网络环境模拟工具的测试服务器，所述测试服务器通过第一交换机与主存储集群通信连接，所述测试服务器还通过第二交换机与从存储集群通信连接；第一交换机通过第一管理链路以及第一远程复制链路与主存储集群通信连接，第二交换机通过第二管理链路以及第二远程复制链路与从存储集群通信连接；

其中，配置不同虚拟化IP链路的网络环境参数具体包括：通过链路虚拟化技术将虚拟化IP网络测试环境中主存储集群与从存储集群之间的物理通信链路虚拟为多个虚拟化IP链路；每一虚拟化IP链路配置不同网络环境参数；

建立虚拟化IP网络测试环境中主存储集群与从存储集群之间的远程复制关系，并进行远程复制；

其中，建立虚拟化IP网络测试环境中主存储集群与从存储集群之间的远程复制关系具体包括：在主存储集群中设置第一网络端口，设置主存储集群节点的网络信息，修改主存储集群节点的远程拷贝属性；在从存储集群中设置第二网络端口，设置从存储集群节点的网络信息，修改从存储集群节点的远程拷贝属性；在主存储集群或从存储集群中创建伙伴关系，添加从存储集群或主存储集群组成伙伴集群；第一网络端口为主存储集群新建的以太网端口，主存储集群节点的网络信息包括为主存储集群节点新设置的业务IP；第二网络端口为从存储集群新建的以太网端口，从存储集群节点的网络信息包括为从存储集群节点新设置的业务IP；主存储集群节点与从存储集群节点通过新设置的业务IP远程通信连接，组成伙伴集群；

其中，进行远程复制具体包括：在主存储集群与从存储集群上分别建立第一数据卷以及第二数据卷，其中，第一数据卷位于主存储集群，第二数据卷位于从存储集群，第一数据卷与第二数据卷存储空间相同，在第一数据卷中写入随机数据；在主存储集群上，建立第一数据卷与第二数据卷的远程复制关系；启动后台远程拷贝，记录远程复制的起始时间和结束时间；

获取不同虚拟化IP链路对应的不同网络环境下的带宽性能数据，具体包括：

获取远程复制的起始时间和结束时间；

获取主存储集群中第一数据卷的存储空间大小或从存储集群中第二数据卷的存储空间大小；

根据主存储集群中第一数据卷的存储空间大小或从存储集群中第二数据卷的存储空间大小、远程复制的起始时间和结束时间获取不同虚拟化IP链路对应的不同网络环境下的带宽性能数据。