CN105516328A - 用于分布式存储系统的动态负载均衡方法、装置和系统 - Google Patents

Abstract

本发明提供一用于分布式存储系统的动态负载均衡方法、装置和系统，监控服务器实时采集自身线路负载信息，并接收各节点服务器实时采集并发送的线路负载信息，当接收需传输数据的发送节点服务器发送的数据发送请求时，根据该数据发送请求和所有线路负载信息为该发送节点服务器分配第一数据传输路径，并将第一数据传输路径返回发送节点服务器，控制发送节点服务器根据该第一数据传输路径进行数据传输，当需传输数据时，根据所有线路负载信息确定监控服务器传输数据的第二数据传输路径，根据该第二数据传输路径进行数据传输。动态调整数据压力流向，从而保证分布式存储系统中不会有因多路径不均衡而造成网络瓶颈的现象发生，提高了系统的吞吐量。

Description

用于分布式存储系统的动态负载均衡方法、装置和系统

技术领域

本发明涉及数据传输技术领域，特别是涉及一种用于分布式存储系统的动态负载均衡方法、装置和系统。

背景技术

分布式存储系统是应对大数据量高响应、吞吐量的要求而发展的，其将负载(工作任务)进行平衡，分摊到多个操作单元上进行执行，实现多个服务器共同完成工作任务的目标，以解决当前网络遇到的数据量大、并发数多和可靠性要求高等诸多问题，提高了系统的可用性、可靠性和可扩展性，而且，可以通过冗余，增加文件备份的方式提高数据的高可用性。然而在分布式存储系统中，各服务器间传输数据时存在多条路径，即便是各服务器硬件资源完全同构，在集群运行过程中各服务器物理线路的负担情况也均不同，各服务器物理线路可传输资源的差别较大，分布式存储系统将可能因多路径负载不均衡的问题而出现网络瓶颈，限制系统的吞吐量。

发明内容

有鉴于此，本发明实施例提供一种用于分布式存储系统的动态负载均衡方法、装置和系统，以解决现有技术中分布式存储系统中，各服务器间传输数据时存在多条路径，即便是各服务器硬件资源完全同构，在集群运行过程中各服务器物理线路的负担情况也均不同，各服务器物理线路可传输资源的差别较大，分布式存储系统可能因多路径负载不均衡的问题而出现网络瓶颈，限制系统的吞吐量的问题。

为实现上述目的，本发明实施例提供如下技术方案：

一种用于分布式存储系统的动态负载均衡方法，用于分布式存储系统，所述分布式存储系统包括一监控服务器和至少一节点服务器，所述动态负载均衡方法包括：

监控服务器实时采集自身线路负载信息，并接收各节点服务器实时采集并发送来的线路负载信息；

当接收需传输数据的发送节点服务器发送的数据发送请求时，根据所述数据发送请求和所有所述线路负载信息为所述发送节点服务器分配第一数据传输路径，并将所述第一数据传输路径返回所述发送节点服务器，控制所述发送节点服务器根据所述第一数据传输路径进行数据传输；

当需传输数据时，根据所有所述线路负载信息确定所述监控服务器传输数据的第二数据传输路径，根据所述第二数据传输路径进行数据传输。

其中，所述根据所述数据发送请求和所有所述线路负载信息为所述发送节点服务器分配第一数据传输路径包括：

根据所述数据发送请求确定需传输数据的发送节点服务器和待接收数据的第一目标服务器，并确定所述发送节点服务器和所述第一目标服务器间的所有第一可能数据传输路径；

确定每条所述第一可能数据传输路径所经过的所有第一中间服务器，根据所有所述第一中间服务器的线路负载信息确定每条所述第一可能数据传输线路的综合负载信息；

根据每条所述第一可能数据传输线路的综合负载信息，根据预设规则从所有所述第一可能数据传输路径中选出第一最优数据传输路径，将所述第一最优数据传输路径作为第一数据传输路径。

其中，所述根据所有所述线路负载信息确定所述监控服务器传输数据的第二数据传输路径包括：

确定待接收数据的第二目标服务器，并确定所述监控服务器和所述第二目标服务器间的所有第二可能数据传输路径；

确定每条所述第二可能数据传输路径所经过的所有第二中间服务器，根据所有所述第二中间服务器的线路负载信息确定每条所述第二可能数据传输线路的综合负载信息；

根据每条所述第二可能数据传输线路的综合负载信息，根据预设规则从所有所述第二可能数据传输路径中选出第二最优数据传输路径，将所述第二最优数据传输路径作为第二数据传输路径。

一种用于分布式存储系统的监控服务器，包括：采集接收模块、第一路径模块和第二路径模块；其中，

所述采集接收模块，用于实时采集自身线路负载信息，并接收各节点服务器实时采集并发送来的线路负载信息；

所述第一路径模块，用于当接收需传输数据的发送节点服务器发送的数据发送请求时，根据所述数据发送请求和所有所述线路负载信息为所述发送节点服务器分配第一数据传输路径，并将所述第一数据传输路径返回所述发送节点服务器，控制所述发送节点服务器根据所述第一数据传输路径进行数据传输；

所述第二路径模块，用于当需传输数据时，根据所有所述线路负载信息确定所述监控服务器传输数据的第二数据传输路径，根据所述第二数据传输路径进行数据传输。

其中，所述第一路径模块包括：第一确定单元、第一处理单元和第一选取单元；

所述第一确定单元，用于根据所述数据发送请求确定需传输数据的发送节点服务器和待接收数据的第一目标服务器，并确定所述发送节点服务器和所述第一目标服务器间的所有第一可能数据传输路径；

所述第一处理单元，用于确定每条所述第一可能数据传输路径所经过的所有第一中间服务器，根据所有所述第一中间服务器的线路负载信息确定每条所述第一可能数据传输线路的综合负载信息；

所述第一选取单元，用于根据每条所述第一可能数据传输线路的综合负载信息，根据预设规则从所有所述第一可能数据传输路径中选出第一最优数据传输路径，将所述第一最优数据传输路径作为第一数据传输路径。

其中，所述第二路径模块包括：第二确定单元、第二处理单元和第二选取单元；

所述第二确定单元，用于确定待接收数据的第二目标服务器，并确定所述监控服务器和所述第二目标服务器间的所有第二可能数据传输路径；

所述第二处理单元，用于确定每条所述第二可能数据传输路径所经过的所有第二中间服务器，根据所有所述第二中间服务器的线路负载信息确定每条所述第二可能数据传输线路的综合负载信息；

所述第二选取单元，用于根据每条所述第二可能数据传输线路的综合负载信息，根据预设规则从所有所述第二可能数据传输路径中选出第二最优数据传输路径，将所述第二最优数据传输路径作为第二数据传输路径。

一种用于分布式存储系统的动态负载均衡方法，用于分布式存储系统，所述分布式存储系统包括一监控服务器和至少一节点服务器，所述动态负载均衡方法包括：

节点服务器实时采集自身线路负载信息，并将所述线路负载信息发送给监控服务器；

当需传输数据时，向所述监控服务器发送数据发送请求，请求所述监控服务器为所述需传输数据的节点服务器分配数据传输路径；

接收所述监控服务器根据所述数据发送请求和所述监控服务器内所有线路负载信息为所述需传输数据的节点服务器分配的数据传输路径，其中，所述监控服务器内所有线路负载信息包括所有节点服务器发送的线路负载信息和所述监控服务器的线路负载信息，根据所述数据传输路径进行数据传输。

其中，所述向所述监控服务器发送数据发送请求后还包括：

判断是否在预设时间内接收到所述监控服务器分配的数据传输路径；

若否，则重新向监控服务器发送数据发送请求。

一种用于分布式存储系统的节点服务器，包括：采集发送模块、请求发送模块和路径接收模块；其中，

所述采集发送模块，用于实时采集自身线路负载信息，并将所述线路负载信息发送给监控服务器；

所述请求发送模块，用于当需传输数据时，向所述监控服务器发送数据发送请求，请求所述监控服务器为所述需传输数据的节点服务器分配数据传输路径；

所述路径接收模块，用于接收所述监控服务器根据所述数据发送请求和所述监控服务器内所有线路负载信息为所述需传输数据的节点服务器分配的数据传输路径，其中，所述监控服务器内所有线路负载信息包括所有节点服务器发送的线路负载信息和所述监控服务器的线路负载信息，根据所述数据传输路径进行数据传输。

一种用于分布式存储系统的动态负载均衡系统，包括：一监控服务器和至少一节点服务器；其中，

所述监控服务器，用于实时采集自身线路负载信息，并接收各节点服务器实时采集并发送来的线路负载信息；当接收需传输数据的发送节点服务器发送的数据发送请求时，根据所述数据发送请求和所有所述线路负载信息为所述发送节点服务器分配第一数据传输路径，并将所述第一数据传输路径返回所述发送节点服务器，控制所述发送节点服务器根据所述第一数据传输路径进行数据传输；当需传输数据时，根据所有所述线路负载信息确定所述监控服务器传输数据的第二数据传输路径，根据所述第二数据传输路径进行数据传输；

所述节点服务器，用于实时采集自身线路负载信息，并将所述线路负载信息发送给监控服务器；当需传输数据时，向所述监控服务器发送数据发送请求，请求所述监控服务器为所述需传输数据的节点服务器分配数据传输路径；接收所述监控服务器根据所述数据发送请求和所述监控服务器内所有线路负载信息为所述需传输数据的节点服务器分配的数据传输路径，其中，所述监控服务器内所有线路负载信息包括所有节点服务器发送的线路负载信息和所述监控服务器的线路负载信息，根据所述数据传输路径进行数据传输。

基于上述技术方案，本发明实施例提供的用于分布式存储系统的动态负载均衡方法、装置和系统，分布式存储系统包括一监控服务器和至少一节点服务器，监控服务器和节点服务器均实时采集自身线路负载信息，节点服务器在采集自身线路负载信息后将采集的线路负载信息发送给监控服务器；当节点服务器需要传输数据时，先向监控服务器发送数据发送请求，监控服务器在接收该数据发送请求后根据该数据发送请求和所有线路负载信息为该需传输数据的节点服务器分配第一数据传输路径，并将该分配的第一数据传输路径返回该需传输数据的节点服务器，该需传输数据的节点服务器在接收到该第一数据传输路径后，根据该第一数据传输路径进行数据传输；当监控服务器需要传输数据时，该监控服务器先根据所有线路负载信息确定自身传输数据的第二数据传输路径，在确定该第二数据传输路径后根据该第二数据传输路径进行数据传输。监控服务器和节点服务器均实时采集自身线路负载信息至该监控服务器中，实时对分布式存储系统中各服务器线路的资源负载情况进行监控上报，无论是当节点服务器还是监控服务器需要发送传输数据时，均先通过监控服务器获得数据传输路径，然后再根据该数据传输路径进行数据传输，通过监控服务器根据多路径网络的负载情况，动态调整数据压力流向，动态调整线路负载压力，从而保证分布式存储系统中不会有因多路径不均衡而造成网络瓶颈的现象发生，提高了系统的吞吐量。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。

图1为本发明实施例提供用于分布式存储系统的动态负载均衡方法的流程图；

图2为本发明实施例提供的用于分布式存储系统的动态负载均衡方法中根据数据发送请求和所有线路负载信息为发送节点服务器分配第一数据传输路径的方法流程图；

图3为本发明实施例提供的用于分布式存储系统的动态负载均衡方法中根据所有线路负载信息确定监控服务器传输数据的第二数据传输路径的方法流程图；

图4为本发明实施例提供的用于分布式存储系统的监控服务器的系统框图；

图5为本发明实施例提供的用于分布式存储系统的监控服务器中第一路径模块的结构框图；

图6为本发明实施例提供的用于分布式存储系统的监控服务器中第二路径模块的结构框图；

图7为本发明实施例提供的用于分布式存储系统的动态负载均衡方法的另一流程图；

图8为本发明实施例提供的用于分布式存储系统的动态负载均衡方法中节点服务器重新向监控服务器发送数据发送请求的方法流程图；

图9为本发明实施例提供的用于分布式存储系统的节点服务器的系统框图；

图10为本发明实施例提供的用于分布式存储系统的动态负载均衡系统的系统框图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

图1为本发明实施例提供的用于分布式存储系统的动态负载均衡方法的流程图，监控服务器实时采集自身线路负载信息，并接收各节点服务器实时采集并发送来的线路负载信息，实时对分布式存储系统中各服务器线路的资源负载情况进行监控上报，无论是当节点服务器还是监控服务器需要发送传输数据时，均先通过监控服务器获得数据传输路径，然后再根据该数据传输路径进行数据传输，通过监控服务器根据多路径网络的负载情况，动态调整数据压力流向，动态调整线路负载压力，从而保证分布式存储系统中不会有因多路径不均衡而造成网络瓶颈的现象发生，提高了系统的吞吐量；参照图1，该用于分布式存储系统的动态负载均衡方法可以包括：

步骤S100：监控服务器实时采集自身线路负载信息，并接收各节点服务器实时采集并发送来的线路负载信息；

可选的，监控服务器和节点服务器均可在接收到相应的数据采集指令后，每隔预设时间间隔分别采集自身的线路负载信息。

步骤S110：当接收需传输数据的发送节点服务器发送的数据发送请求时，根据所述数据发送请求和所有所述线路负载信息为所述发送节点服务器分配第一数据传输路径，并将所述第一数据传输路径返回所述发送节点服务器，控制所述发送节点服务器根据所述第一数据传输路径进行数据传输；

当某节点服务区需传输数据时，称该需传输数据的服务器为发送节点服务器，当发送节点服务器需传输数据时，将会向监控服务器发送数据发送请求时，请求该监控服务器为其分配数据传输路径。相应的，监控服务器将接收该发送节点服务器发送的数据发送请求，然后根据该数据发送请求和所有线路负载信息为该发送节点服务器分配第一数据传输路径，最后将得到的该第一数据传输路径返回该发送节点服务器，该发送节点服务器将在接收到该第一数据传输路径后根据该第一数据传输路径进行数据传输。

可选的，监控服务器可根据接收的数据发送请求确定需传输数据的发送节点服务器和待接收数据的第一目标服务器，并确定该发送节点服务器和该第一目标服务器间的所有第一可能数据传输路径，然后确定每条第一可能数据传输路径所经过的所有第一中间服务器，根据所有第一中间服务器的线路负载信息确定每条第一可能数据传输线路的综合负载信息，根据每条第一可能数据传输线路的综合负载信息，根据预设规则从所有第一可能数据传输路径中选出第一最优数据传输路径，最后将该第一最优数据传输路径作为第一数据传输路径，来得到第一数据传输路径。

根据预设规则从所有第一可能数据传输路径中选出第一最优数据传输路径，将可以保证该选出的第一最优数据传输路径所经过的所有第一中间服务器均不超载，或只有少于设置数目的中间服务器超载。

其中，第一目标服务器可以是除了向监控服务器发送数据发送请求的发送节点服务器外的其他节点服务器，也可以是监控服务器。第一中间服务器可以是除了向监控服务器发送数据发送请求的发送节点服务器和目标服务器外的其他节点服务器，也可以监控服务器。

步骤S120：当需传输数据时，根据所有所述线路负载信息确定所述监控服务器传输数据的第二数据传输路径，根据所述第二数据传输路径进行数据传输。

当监控服务器需传输数据时，该监控服务器将根据所有线路负载信息确定第二数据传输路径，然后根据该得到的第二数据传输路径进行数据传输。

可选的，监控服务器可根据确定待接收数据的第二目标服务器，并确定其自身与该第二目标服务器间的所有第二可能数据传输路径，然后确定每条第二可能数据传输路径所经过的所有第二中间服务器，根据所有第二中间服务器的线路负载信息确定每条第二可能数据传输线路的综合负载信息，根据每条第二可能数据传输线路的综合负载信息，根据预设规则从所有第二可能数据传输路径中选出第二最优数据传输路径，最后将该第二最优数据传输路径作为第二数据传输路径，来得到第二数据传输路径。

相应的，根据预设规则从所有第二可能数据传输路径中选出第二最优数据传输路径，将可以保证该选出的第二最优数据传输路径所经过的所有第二中间服务器均不超载，或只有少于设置数目的中间服务器超载。

其中，由于监控服务器只有一个，因此，第二目标服务器只可为节点服务器。第二中间服务器也只能是除了目标服务器外的其他节点服务器。

基于上述技术方案，本发明实施例提供的用于分布式存储系统的动态负载均衡方法，用于分布式存储系统，该分布式存储系统包括一监控服务器和至少一节点服务器，监控服务器和节点服务器均实时采集自身线路负载信息，节点服务器在采集自身线路负载信息后将采集的线路负载信息发送给监控服务器；当节点服务器需要传输数据时，先向监控服务器发送数据发送请求，监控服务器在接收该数据发送请求后根据该数据发送请求和所有线路负载信息为该需传输数据的节点服务器分配第一数据传输路径，并将该分配的第一数据传输路径返回该需传输数据的节点服务器，该需传输数据的节点服务器在接收到该第一数据传输路径后，根据该第一数据传输路径进行数据传输；当监控服务器需要传输数据时，该监控服务器先根据所有线路负载信息确定自身传输数据的第二数据传输路径，在确定该第二数据传输路径后根据该第二数据传输路径进行数据传输。监控服务器和节点服务器均实时采集自身线路负载信息至该监控服务器中，实时对分布式存储系统中各服务器线路的资源负载情况进行监控上报，无论是当节点服务器还是监控服务器需要发送传输数据时，均先通过监控服务器获得数据传输路径，然后再根据该数据传输路径进行数据传输，通过监控服务器根据多路径网络的负载情况，动态调整数据压力流向，动态调整线路负载压力，从而保证分布式存储系统中不会有因多路径不均衡而造成网络瓶颈的现象发生，提高了系统的吞吐量。

可选的，图2示出了本发明实施例提供的用于分布式存储系统的动态负载均衡方法中根据数据发送请求和所有线路负载信息为发送节点服务器分配第一数据传输路径的方法流程图，参照图2，该根据数据发送请求和所有线路负载信息为发送节点服务器分配第一数据传输路径的方法可以包括：

步骤S200：根据所述数据发送请求确定需传输数据的发送节点服务器和待接收数据的第一目标服务器，并确定所述发送节点服务器和所述第一目标服务器间的所有第一可能数据传输路径；

监控服务器在接收数据发送请求后，将可以根据改数据发送请求确定需传输数据的发送节点服务器和待接收数据的第一目标服务器，并根据该发送节点服务器和第一目标服务器确定该发送节点服务器和该第一目标服务器间的所有第一可能数据传输路径。

步骤S210：确定每条所述第一可能数据传输路径所经过的所有第一中间服务器，根据所有所述第一中间服务器的线路负载信息确定每条所述第一可能数据传输线路的综合负载信息；

每条第一可能数据传输路径除了发送节点服务器和第一目标服务器外，将经过不同的服务器，将这些服务器称为第一中间服务器，每个第一中间服务器均有其相对应的线路负载信息，根据所有第一中间服务器的线路负载信息将可以确定每条第一可能数据传输线路的综合负载信息。

步骤S220：根据每条所述第一可能数据传输线路的综合负载信息，根据预设规则从所有所述第一可能数据传输路径中选出第一最优数据传输路径，将所述第一最优数据传输路径作为第一数据传输路径。

在得到每条第一可能数据传输线路的综合负载信息后，将可以预设规则从所有第一可能数据传输路径中选出第一最优数据传输路径，将该第一最优数据传输路径作为第一数据传输路径，以保证该选出的第一最优数据传输路径所经过的所有第一中间服务器均不超载，或只有少于设置数目的中间服务器超载。

可选的，图3示出了本发明实施例提供的用于分布式存储系统的动态负载均衡方法中根据所有线路负载信息确定监控服务器传输数据的第二数据传输路径的方法流程图，参照图3，该根据所有线路负载信息确定监控服务器传输数据的第二数据传输路径的方法可以包括：

步骤S300：确定待接收数据的第二目标服务器，并确定所述监控服务器和所述第二目标服务器间的所有第二可能数据传输路径；

监控服务器在需传输数据时，将先确定其相对应的待接收数据的第二目标服务器，并根据该第二目标服务器确定其与该第二目标服务器间的所有第二可能数据传输路径。

步骤S310：确定每条所述第二可能数据传输路径所经过的所有第二中间服务器，根据所有所述第二中间服务器的线路负载信息确定每条所述第二可能数据传输线路的综合负载信息；

每条第二可能数据传输路径除了监控服务器和第二目标服务器外，也将经过不同的服务器，将这些服务器称为第二中间服务器，每个第二中间服务器也均有其相对应的线路负载信息，根据所有第二中间服务器的线路负载信息将可以确定每条第二可能数据传输线路的综合负载信息。

步骤S320：根据每条所述第二可能数据传输线路的综合负载信息，根据预设规则从所有所述第二可能数据传输路径中选出第二最优数据传输路径，将所述第二最优数据传输路径作为第二数据传输路径。

在得到每条第二可能数据传输线路的综合负载信息后，将可以预设规则从所有第二可能数据传输路径中选出第二最优数据传输路径，将该第二最优数据传输路径作为第一数据传输路径，以保证该选出的第二最优数据传输路径所经过的所有第二中间服务器均不超载，或只有少于设置数目的中间服务器超载。

本发明实施例提供的用于分布式存储系统的动态负载均衡方法，监控实时采集自身线路负载信息，并接收各节点服务器实时采集并发送来的线路负载信息，实时对分布式存储系统中各服务器线路的资源负载情况进行监控上报，无论是当节点服务器还是监控服务器需要发送传输数据时，均先通过监控服务器获得数据传输路径，然后再根据该数据传输路径进行数据传输，通过监控服务器根据多路径网络的负载情况，动态调整数据压力流向，动态调整线路负载压力，从而保证分布式存储系统中不会有因多路径不均衡而造成网络瓶颈的现象发生，提高了系统的吞吐量。

下面对本发明实施例提供的用于分布式存储系统的监控服务器进行介绍，下文描述的用于分布式存储系统的监控服务器与上文描述的用于分布式存储系统的动态负载均衡方法可相互对应参照。

图4为本发明实施例提供的用于分布式存储系统的监控服务器的系统框图，参照图4，该用于分布式存储系统的监控服务器的可以包括：采集接收模块110、第一路径模块120和第二路径模块130；其中，

采集接收模块110，用于实时采集自身线路负载信息，并接收各节点服务器实时采集并发送来的线路负载信息；

第一路径模块120，用于当接收需传输数据的发送节点服务器发送的数据发送请求时，根据所述数据发送请求和所有所述线路负载信息为所述发送节点服务器分配第一数据传输路径，并将所述第一数据传输路径返回所述发送节点服务器，控制所述发送节点服务器根据所述第一数据传输路径进行数据传输；

第二路径模块130，用于当需传输数据时，根据所有所述线路负载信息确定所述监控服务器传输数据的第二数据传输路径，根据所述第二数据传输路径进行数据传输。

可选的，图5示出了本发明实施例提供的用于分布式存储系统的监控服务器中第一路径模块120的结构框图，参照图5，该第一路径模块120可以包括：第一确定单元121、第一处理单元122和第一选取单元123；

第一确定单元121，用于根据所述数据发送请求确定需传输数据的发送节点服务器和待接收数据的第一目标服务器，并确定所述发送节点服务器和所述第一目标服务器间的所有第一可能数据传输路径；

第一处理单元122，用于确定每条所述第一可能数据传输路径所经过的所有第一中间服务器，根据所有所述第一中间服务器的线路负载信息确定每条所述第一可能数据传输线路的综合负载信息；

第一选取单元123，用于根据每条所述第一可能数据传输线路的综合负载信息，根据预设规则从所有所述第一可能数据传输路径中选出第一最优数据传输路径，将所述第一最优数据传输路径作为第一数据传输路径。

可选的，图6示出了本发明实施例提供的用于分布式存储系统的监控服务器中第二路径模块130的结构框图，参照图6，该第二路径模块130可以包括：第二确定单元131、第二处理单元132和第二选取单元133；

第二确定单元131，用于确定待接收数据的第二目标服务器，并确定所述监控服务器和所述第二目标服务器间的所有第二可能数据传输路径；

第二处理单元132，用于确定每条所述第二可能数据传输路径所经过的所有第二中间服务器，根据所有所述第二中间服务器的线路负载信息确定每条所述第二可能数据传输线路的综合负载信息；

第二选取单元133，用于根据每条所述第二可能数据传输线路的综合负载信息，根据预设规则从所有所述第二可能数据传输路径中选出第二最优数据传输路径，将所述第二最优数据传输路径作为第二数据传输路径。

本发明实施例提供的用于分布式存储系统的监控服务器，监控实时采集自身线路负载信息，并接收各节点服务器实时采集并发送来的线路负载信息，实时对分布式存储系统中各服务器线路的资源负载情况进行监控上报，无论是当节点服务器还是监控服务器需要发送传输数据时，均先通过监控服务器获得数据传输路径，然后再根据该数据传输路径进行数据传输，通过监控服务器根据多路径网络的负载情况，动态调整数据压力流向，动态调整线路负载压力，从而保证分布式存储系统中不会有因多路径不均衡而造成网络瓶颈的现象发生，提高了系统的吞吐量。

图7为本发明实施例提供的用于分布式存储系统的动态负载均衡方法的另一流程图，参照图7，该用于分布式存储系统的动态负载均衡另一方法可以包括：

步骤S400：节点服务器实时采集自身线路负载信息，并将所述线路负载信息发送给监控服务器；

步骤S410：当需传输数据时，向所述监控服务器发送数据发送请求，请求所述监控服务器为所述需传输数据的节点服务器分配数据传输路径；

从节点服务器的角度来说，每当节点服务器需传输数据时，该需传输数据的节点服务器将先向监控服务器发送数据发送请求，请求该监控服务器为其分配数据传输路径。

步骤S420：接收所述监控服务器根据所述数据发送请求和所述监控服务器内所有线路负载信息为所述需传输数据的节点服务器分配的数据传输路径，其中，所述监控服务器内所有线路负载信息包括所有节点服务器发送的线路负载信息和所述监控服务器的线路负载信息，根据所述数据传输路径进行数据传输。

该需传输数据的节点服务器，即发送节点服务器向监控服务器发送数据发送请求后，监控服务器将根据该数据发送请求和该监控服务器内所有线路负载信息为该需传输数据的节点服务器分配数据传输路径，将该数据传输路径返回该需传输数据的节点服务器，该需传输数据的节点服务器在接收到该数据传输路径后，将根据该数据传输路径进行数据传输。

可选的，需传输数据的节点服务器在向监控服务器发送数据发送请求后，还可判断是否在预设时间内接收到该监控服务器分配的数据传输路径，若未在预设时间内接收到该监控服务器分配的数据传输路径，则重新向该监控服务器发送数据发送请求。

可选的，图8示出了本发明实施例提供的用于分布式存储系统的动态负载均衡方法中节点服务器重新向监控服务器发送数据发送请求的方法流程图，参照图8，该节点服务器重新向监控服务器发送数据发送请求的方法可以包括：

步骤S500：判断是否在预设时间内接收到所述监控服务器分配的数据传输路径；

需传输数据的节点服务器在向监控服务器发送数据发送请求后，可判断是否在预设时间内接收到该监控服务器分配的数据传输路径，通过判断是否在预设时间内接收到该监控服务器分配的数据传输路径，来判断是否需要重新向该监控服务器发送数据发送请求。

步骤S500：若否，则重新向监控服务器发送数据发送请求。

若判定未在预设时间内接收到该监控服务器分配的数据传输路径，则说明，则说明在监控服务器接收数据发送请求、根据该数据发送请求分配数据传输路径和将该数据传输路径返回该传输数据的节点服务器的过程中出现错误，该传输数据的节点服务器重新向该监控服务器发送数据发送请求。

本发明实施例提供的用于分布式存储系统的动态负载均衡方法，节点服务器实时采集自身线路负载信息并发送给监控服务器，实时对分布式存储系统中各服务器线路的资源负载情况进行监控上报，当节点服务器需要发送传输数据时，先通过监控服务器获得数据传输路径，然后再根据该数据传输路径进行数据传输，通过监控服务器根据多路径网络的负载情况，动态调整数据压力流向，动态调整线路负载压力，从而保证分布式存储系统中不会有因多路径不均衡而造成网络瓶颈的现象发生，提高了系统的吞吐量。

下面对本发明实施例提供的用于分布式存储系统的节点服务器进行介绍，下文描述的用于分布式存储系统的节点服务器与上文描述的用于分布式存储系统的动态负载均衡方法可相互对应参照。

图9为本发明实施例提供的用于分布式存储系统的节点服务器的系统框图，参照图9，该用于分布式存储系统的节点服务器可以包括：采集发送模块210、请求发送模块220和路径接收模块230；其中，

采集发送模块210，用于实时采集自身线路负载信息，并将所述线路负载信息发送给监控服务器；

请求发送模块220，用于当需传输数据时，向所述监控服务器发送数据发送请求，请求所述监控服务器为所述需传输数据的节点服务器分配数据传输路径；

路径接收模块230，用于接收所述监控服务器根据所述数据发送请求和所述监控服务器内所有线路负载信息为所述需传输数据的节点服务器分配的数据传输路径，其中，所述监控服务器内所有线路负载信息包括所有节点服务器发送的线路负载信息和所述监控服务器的线路负载信息，根据所述数据传输路径进行数据传输。

本发明实施例提供的用于分布式存储系统的节点服务器，节点服务器实时采集自身线路负载信息并发送给监控服务器，实时对分布式存储系统中各服务器线路的资源负载情况进行监控上报，当节点服务器需要发送传输数据时，先通过监控服务器获得数据传输路径，然后再根据该数据传输路径进行数据传输，通过监控服务器根据多路径网络的负载情况，动态调整数据压力流向，动态调整线路负载压力，从而保证分布式存储系统中不会有因多路径不均衡而造成网络瓶颈的现象发生，提高了系统的吞吐量。

下面对本发明实施例提供的用于分布式存储系统的动态负载均衡系统进行介绍，下文描述的用于分布式存储系统的动态负载均衡系统基于上文描述的用于分布式存储系统的动态负载均衡方法、监控服务器和节点服务器。

图10为本发明实施例提供的用于分布式存储系统的动态负载均衡系统的系统框图，参照图10，该用于分布式存储系统的动态负载均衡系统可以包括：一监控服务器100和至少一节点服务器200；其中，

监控服务器100，用于实时采集自身线路负载信息，并接收各节点服务器实时采集并发送来的线路负载信息；当接收需传输数据的发送节点服务器发送的数据发送请求时，根据所述数据发送请求和所有所述线路负载信息为所述发送节点服务器分配第一数据传输路径，并将所述第一数据传输路径返回所述发送节点服务器，控制所述发送节点服务器根据所述第一数据传输路径进行数据传输；当需传输数据时，根据所有所述线路负载信息确定所述监控服务器传输数据的第二数据传输路径，根据所述第二数据传输路径进行数据传输；

节点服务器200，用于实时采集自身线路负载信息，并将所述线路负载信息发送给监控服务器；当需传输数据时，向所述监控服务器发送数据发送请求，请求所述监控服务器为所述需传输数据的节点服务器分配数据传输路径；接收所述监控服务器根据所述数据发送请求和所述监控服务器内所有线路负载信息为所述需传输数据的节点服务器分配的数据传输路径，其中，所述监控服务器内所有线路负载信息包括所有节点服务器发送的线路负载信息和所述监控服务器的线路负载信息，根据所述数据传输路径进行数据传输。

本发明实施例提供的用于分布式存储系统的动态负载均衡系统，监控服务器和节点服务器均实时采集自身线路负载信息至该监控服务器中，实时对分布式存储系统中各服务器线路的资源负载情况进行监控上报，无论是当节点服务器还是监控服务器需要发送传输数据时，均先通过监控服务器获得数据传输路径，然后再根据该数据传输路径进行数据传输，通过监控服务器根据多路径网络的负载情况，动态调整数据压力流向，动态调整线路负载压力，从而保证分布式存储系统中不会有因多路径不均衡而造成网络瓶颈的现象发生，提高了系统的吞吐量。

本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置和系统而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。

专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种用于分布式存储系统的动态负载均衡方法，其特征在于，用于分布式存储系统，所述分布式存储系统包括一监控服务器和至少一节点服务器，所述动态负载均衡方法包括：

监控服务器实时采集自身线路负载信息，并接收各节点服务器实时采集并发送来的线路负载信息；

当接收需传输数据的发送节点服务器发送的数据发送请求时，根据所述数据发送请求和所有所述线路负载信息为所述发送节点服务器分配第一数据传输路径，并将所述第一数据传输路径返回所述发送节点服务器，控制所述发送节点服务器根据所述第一数据传输路径进行数据传输；

当需传输数据时，根据所有所述线路负载信息确定所述监控服务器传输数据的第二数据传输路径，根据所述第二数据传输路径进行数据传输。

2.根据权利要求1所述的动态负载均衡方法，其特征在于，所述根据所述数据发送请求和所有所述线路负载信息为所述发送节点服务器分配第一数据传输路径包括：

根据所述数据发送请求确定需传输数据的发送节点服务器和待接收数据的第一目标服务器，并确定所述发送节点服务器和所述第一目标服务器间的所有第一可能数据传输路径；

确定每条所述第一可能数据传输路径所经过的所有第一中间服务器，根据所有所述第一中间服务器的线路负载信息确定每条所述第一可能数据传输线路的综合负载信息；

根据每条所述第一可能数据传输线路的综合负载信息，根据预设规则从所有所述第一可能数据传输路径中选出第一最优数据传输路径，将所述第一最优数据传输路径作为第一数据传输路径。

3.根据权利要求1所述的动态负载均衡方法，其特征在于，所述根据所有所述线路负载信息确定所述监控服务器传输数据的第二数据传输路径包括：

确定待接收数据的第二目标服务器，并确定所述监控服务器和所述第二目标服务器间的所有第二可能数据传输路径；

确定每条所述第二可能数据传输路径所经过的所有第二中间服务器，根据所有所述第二中间服务器的线路负载信息确定每条所述第二可能数据传输线路的综合负载信息；

根据每条所述第二可能数据传输线路的综合负载信息，根据预设规则从所有所述第二可能数据传输路径中选出第二最优数据传输路径，将所述第二最优数据传输路径作为第二数据传输路径。

4.一种用于分布式存储系统的监控服务器，其特征在于，包括：采集接收模块、第一路径模块和第二路径模块；其中，

所述采集接收模块，用于实时采集自身线路负载信息，并接收各节点服务器实时采集并发送来的线路负载信息；

所述第一路径模块，用于当接收需传输数据的发送节点服务器发送的数据发送请求时，根据所述数据发送请求和所有所述线路负载信息为所述发送节点服务器分配第一数据传输路径，并将所述第一数据传输路径返回所述发送节点服务器，控制所述发送节点服务器根据所述第一数据传输路径进行数据传输；

所述第二路径模块，用于当需传输数据时，根据所有所述线路负载信息确定所述监控服务器传输数据的第二数据传输路径，根据所述第二数据传输路径进行数据传输。

5.根据权利要求4所述的监控服务器，其特征在于，所述第一路径模块包括：第一确定单元、第一处理单元和第一选取单元；

所述第一确定单元，用于根据所述数据发送请求确定需传输数据的发送节点服务器和待接收数据的第一目标服务器，并确定所述发送节点服务器和所述第一目标服务器间的所有第一可能数据传输路径；

所述第一处理单元，用于确定每条所述第一可能数据传输路径所经过的所有第一中间服务器，根据所有所述第一中间服务器的线路负载信息确定每条所述第一可能数据传输线路的综合负载信息；

所述第一选取单元，用于根据每条所述第一可能数据传输线路的综合负载信息，根据预设规则从所有所述第一可能数据传输路径中选出第一最优数据传输路径，将所述第一最优数据传输路径作为第一数据传输路径。

6.根据权利要求4所述的监控服务器，其特征在于，所述第二路径模块包括：第二确定单元、第二处理单元和第二选取单元；

所述第二确定单元，用于确定待接收数据的第二目标服务器，并确定所述监控服务器和所述第二目标服务器间的所有第二可能数据传输路径；

所述第二处理单元，用于确定每条所述第二可能数据传输路径所经过的所有第二中间服务器，根据所有所述第二中间服务器的线路负载信息确定每条所述第二可能数据传输线路的综合负载信息；

所述第二选取单元，用于根据每条所述第二可能数据传输线路的综合负载信息，根据预设规则从所有所述第二可能数据传输路径中选出第二最优数据传输路径，将所述第二最优数据传输路径作为第二数据传输路径。

7.一种用于分布式存储系统的动态负载均衡方法，其特征在于，用于分布式存储系统，所述分布式存储系统包括一监控服务器和至少一节点服务器，所述动态负载均衡方法包括：

节点服务器实时采集自身线路负载信息，并将所述线路负载信息发送给监控服务器；

当需传输数据时，向所述监控服务器发送数据发送请求，请求所述监控服务器为所述需传输数据的节点服务器分配数据传输路径；

接收所述监控服务器根据所述数据发送请求和所述监控服务器内所有线路负载信息为所述需传输数据的节点服务器分配的数据传输路径，其中，所述监控服务器内所有线路负载信息包括所有节点服务器发送的线路负载信息和所述监控服务器的线路负载信息，根据所述数据传输路径进行数据传输。

8.根据权利要求7所述的动态负载均衡方法，其特征在于，所述向所述监控服务器发送数据发送请求后还包括：

判断是否在预设时间内接收到所述监控服务器分配的数据传输路径；

若否，则重新向监控服务器发送数据发送请求。

9.一种用于分布式存储系统的节点服务器，其特征在于，包括：采集发送模块、请求发送模块和路径接收模块；其中，

所述采集发送模块，用于实时采集自身线路负载信息，并将所述线路负载信息发送给监控服务器；

所述请求发送模块，用于当需传输数据时，向所述监控服务器发送数据发送请求，请求所述监控服务器为所述需传输数据的节点服务器分配数据传输路径；

所述路径接收模块，用于接收所述监控服务器根据所述数据发送请求和所述监控服务器内所有线路负载信息为所述需传输数据的节点服务器分配的数据传输路径，其中，所述监控服务器内所有线路负载信息包括所有节点服务器发送的线路负载信息和所述监控服务器的线路负载信息，根据所述数据传输路径进行数据传输。

10.一种用于分布式存储系统的动态负载均衡系统，其特征在于，包括：一监控服务器和至少一节点服务器；其中，

所述监控服务器，用于实时采集自身线路负载信息，并接收各节点服务器实时采集并发送来的线路负载信息；当接收需传输数据的发送节点服务器发送的数据发送请求时，根据所述数据发送请求和所有所述线路负载信息为所述发送节点服务器分配第一数据传输路径，并将所述第一数据传输路径返回所述发送节点服务器，控制所述发送节点服务器根据所述第一数据传输路径进行数据传输；当需传输数据时，根据所有所述线路负载信息确定所述监控服务器传输数据的第二数据传输路径，根据所述第二数据传输路径进行数据传输；

所述节点服务器，用于实时采集自身线路负载信息，并将所述线路负载信息发送给监控服务器；当需传输数据时，向所述监控服务器发送数据发送请求，请求所述监控服务器为所述需传输数据的节点服务器分配数据传输路径；接收所述监控服务器根据所述数据发送请求和所述监控服务器内所有线路负载信息为所述需传输数据的节点服务器分配的数据传输路径，其中，所述监控服务器内所有线路负载信息包括所有节点服务器发送的线路负载信息和所述监控服务器的线路负载信息，根据所述数据传输路径进行数据传输。