CN102647362B - 一种多控制器存储系统负载均衡的方法 - Google Patents
一种多控制器存储系统负载均衡的方法 Download PDFInfo
- Publication number
- CN102647362B CN102647362B CN201210126943.XA CN201210126943A CN102647362B CN 102647362 B CN102647362 B CN 102647362B CN 201210126943 A CN201210126943 A CN 201210126943A CN 102647362 B CN102647362 B CN 102647362B
- Authority
- CN
- China
- Prior art keywords
- access
- storage
- controller
- storage resource
- resource
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003860 storage Methods 0.000 title claims abstract description 153
- 238000000034 method Methods 0.000 title claims abstract description 15
- 238000012544 monitoring process Methods 0.000 claims abstract description 22
- 238000009826 distribution Methods 0.000 claims abstract description 13
- 230000000977 initiatory effect Effects 0.000 claims description 6
- 230000002045 lasting effect Effects 0.000 claims description 3
- 235000013399 edible fruits Nutrition 0.000 claims description 2
- 238000000151 deposition Methods 0.000 claims 1
- 238000005303 weighing Methods 0.000 claims 1
- 230000004044 response Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 1
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Computer And Data Communications (AREA)
Abstract
本发明公开了一种多控制器存储系统负载均衡的方法,属于一种多控制器存储系统技术领域,多控制器存储系统中通过监控每个控制器上存储资源的访问负载,将存储资源以及访问存储资源的入口在控制器之间进行转移,实现系统各个控制器上的存储资源访问负载的动态平衡;体系结构包括:存储资源分配模块、访问负载监控模块、存储资源转移模块。本发明的一种多控制器存储系统负载均衡的方法,实现了多控制器存储系统各个控制器上的存储资源访问处于一种动态平衡的状态,使多控制器存储系统整体获得最大带宽以及访问稳定性。
Description
技术领域
本发明涉及一种多控制器存储系统技术领域,具体地说是一种多控制器存储系统负载均衡的方法。
背景技术
企业访问数据量的扩大导致存储容量、响应速度和存储带宽需求迅速增加,是企业发展面临的难题之一。多控制器存储系统以大量对外访问端口和海量的存储容量及计算能力,有效满足计算、电信、金融信息中心对存储系统的需求。然而,多控制器存储系统如何在控制器之间进行访问负载的均衡,使客户端获得最大的存储带宽和稳定性是一个需要解决的问题。
发明内容
本发明的技术任务是提供一种多控制器存储系统中通过监控各个存储资源的访问负载,将存储资源以及访问存储资源的入口在控制器之间进行转移,实现系统各个控制器上的存储资源访问处于一种动态平衡的状态,使系统整体获得最大带宽以及访问稳定性的一种多控制器存储系统负载均衡的方法。
本发明的技术任务是按以下方式实现的,多控制器存储系统中通过监控每个控制器上存储资源的访问负载,将存储资源以及访问存储资源的入口在控制器之间进行转移,实现系统各个控制器上的存储资源访问负载的动态平衡;体系结构包括:存储资源分配模块、访问负载监控模块、存储资源转移模块;存储资源分配模块将多控制器存储系统中的每个存储资源与存储资源所属控制器以及客户端访问该存储资源的入口(即IP地址)关联起来,建立存储资源、IP地址和控制器的三元组列表,即(RESOURCE,IP,CONTROLLER)三元组,称为关联关系列表;访问负载监控模块对多控制器存储系统中每个控制器上的访问负载进行统计;存储资源转移模块持续的在一定时间间隔后,根据访问负载监控模块的结果将存储资源以及访问入口在控制器之间进行动态转移。
存储资源分配模块可以根据关联关系列表查询某个控制器所拥有的存储资源,查询存储资源所属的控制器,查询访问的发起控制器和目的控制器。
负载监控模块统计每个存储资源的访问负载:客户端连接到存储资源所属的控制器发起的对该存储资源的直接访问,客户端连接到其他控制器发起的对该存储资源的间接访问;统计客户端连接到本控制器所发起的访问:对本控制器拥有的存储资源的直接访问,对其他控制器存储资源的间接访问。
根据访问负载监控模块的一段时间内的统计信息,决定如何将所有的存储资源及访问入口(IP地址)在各个控制器之间进行动态转移,决定每个控制器上是否有存储资源或访问入口(IP地址)需要转移到其他控制器,或者接收其他控制器转移过来的存储资源或访问入口。
存储资源以及访问存储资源的入口在控制器之间进行转移的判断规则为:
(1)、将有间接访问的存储资源从所属控制器转移到接收客户端访问的控制器,使客户端之后对其的访问由间接访问变为直接访问;如果有多个不同控制器对存储资源的间接访问,就将此存储资源以及所有访问入口转移到一个控制器上;
(2)、经过(1)的转移后的访问都是直接访问,计算每个控制器所有的存储资源的访问负载的和;
(3)、以单个存储资源的访问负载为单元,将所有的访问负载在控制器之间进行尽可能平均的分配;
(4)、根据(3)中分配结果,将存储资源及访问入口在控制器之间进行转移;
(5)、根据以上规则完成存储资源以及访问存储资源的入口在控制器之间动态转移后,接下来客户端的访问处于平衡状态。
监控多控制器存储系统每个控制器上存储资源的访问负载,并根据访问负载是直接访问还是间接访问以及系统总的的访问负载,将存储资源以及访问入口在控制器之间进行动态转移,以使系统的各个控制器上的访问负载处于平衡。
本发明的一种多控制器存储系统负载均衡的方法具有以下优点:通过存储资源在控制器之间的转移,提高客户端访问的响应速度和带宽,平衡了多个控制器之间的负载从而提高了系统整体的存储带宽和稳定性。
因此,采用这种技术,可以有效提高客户端对存储系统访问的稳定性和整体带宽。
附图说明
下面结合附图对本发明进一步说明。
附图1为一种多控制器存储系统负载均衡的方法的系统组成框图。
具体实施方式
参照说明书附图和具体实施例对本发明的一种多控制器存储系统负载均衡的方法作以下详细地说明。
实施例:
本发明的一种多控制器存储系统负载均衡的方法,多控制器存储系统中通过监控每个控制器上存储资源的访问负载,将存储资源以及访问存储资源的入口在控制器之间进行转移,实现系统各个控制器上的存储资源访问负载的动态平衡;体系结构包括:存储资源分配模块、访问负载监控模块、存储资源转移模块;存储资源分配模块将多控制器存储系统中的每个存储资源与存储资源所属控制器以及客户端访问该存储资源的入口(即IP地址)关联起来,建立存储资源、IP地址和控制器的三元组列表,即(RESOURCE,IP,CONTROLLER)三元组,称为关联关系列表;访问负载监控模块对多控制器存储系统中每个控制器上的访问负载进行统计;存储资源转移模块持续的在一定时间间隔后,根据访问负载监控模块的结果将存储资源以及访问入口在控制器之间进行动态转移。
存储资源分配模块可以根据关联关系列表查询某个控制器所拥有的存储资源,查询存储资源所属的控制器,查询访问的发起控制器和目的控制器。
负载监控模块统计每个存储资源的访问负载:客户端连接到存储资源所属的控制器发起的对该存储资源的直接访问,客户端连接到其他控制器发起的对该存储资源的间接访问;统计客户端连接到本控制器所发起的访问:对本控制器拥有的存储资源的直接访问,对其他控制器存储资源的间接访问。
根据访问负载监控模块的一段时间内的统计信息,决定如何将所有的存储资源及访问入口(IP地址)在各个控制器之间进行动态转移,决定每个控制器上是否有存储资源或访问入口(IP地址)需要转移到其他控制器,或者接收其他控制器转移过来的存储资源或访问入口。
存储资源以及访问存储资源的入口在控制器之间进行转移的判断规则为:
(1)、将有间接访问的存储资源从所属控制器转移到接收客户端访问的控制器,使客户端之后对其的访问由间接访问变为直接访问;如果有多个不同控制器对存储资源的间接访问,就将此存储资源以及所有访问入口转移到一个控制器上;
(2)、经过(1)的转移后的访问都是直接访问,计算每个控制器所有的存储资源的访问负载的和;
(3)、以单个存储资源的访问负载为单元,将所有的访问负载在控制器之间进行尽可能平均的分配;
(4)、根据(3)中分配结果,将存储资源及访问入口在控制器之间进行转移;
(5)、根据以上规则完成存储资源以及访问存储资源的入口在控制器之间动态转移后,接下来客户端的访问处于平衡状态。
监控多控制器存储系统每个控制器上存储资源的访问负载,并根据访问负载是直接访问还是间接访问以及系统总的的访问负载,将存储资源以及访问入口在控制器之间进行动态转移,以使系统的各个控制器上的访问负载处于平衡。
本发明的一种多控制器存储系统负载均衡的方法,完整实现了多控制器存储系统中通过监控各个存储资源的访问负载系统。将存储资源以及访问存储资源的入口在控制器之间进行转移,实现系统各个控制器上的存储资源访问处于一种动态平衡的状态,使系统整体或以获得最大带宽并可以提供较好的访问稳定性。
除说明书所述的技术特征外,均为本专业技术人员的已知技术。
Claims (4)
1.一种多控制器存储系统负载均衡的方法,包括多控制器存储系统,其特征在于多控制器存储系统中通过监控每个控制器上存储资源的访问负载,将存储资源以及访问存储资源的入口在控制器之间进行转移,实现系统各个控制器上的存储资源访问负载的动态平衡;多控制器存储系统的体系结构包括:存储资源分配模块、访问负载监控模块、存储资源转移模块;存储资源分配模块将多控制器存储系统中的每个存储资源与存储资源所属控制器以及客户端访问该存储资源的入口关联起来,建立存储资源、IP地址和控制器的三元组列表,称为关联关系列表;访问负载监控模块对多控制器存储系统中每个控制器上的访问负载进行统计;存储资源转移模块持续的在一定时间间隔后,根据访问负载监控模块的结果将存储资源以及访问入口在控制器之间进行动态转移;
存储资源以及访问存储资源的入口在控制器之间进行转移的判断规则为:
(1)、将有间接访问的存储资源从所属控制器转移到接收客户端访问的控制器,使客户端之后对其的访问由间接访问变为直接访问;如果有多个不同控制器对存储资源的间接访问,就将此存储资源以及所有访问入口转移到一个控制器上;
(2)、经过(1)的转移后的访问都是直接访问,计算每个控制器所有的存储资源的访问负载的和;
(3)、以单个存储资源的访问负载为单元,将所有的访问负载在控制器之间进行尽可能平均的分配;
(4)、根据(3)中分配结果,将存储资源及访问入口在控制器之间进行转移;
(5)、根据以上规则完成存储资源以及访问存储资源的入口在控制器之间动态转移后,接下来客户端的访问处于平衡状态。
2.根据权利要求1所述的一种多控制器存储系统负载均衡的方法,其特征在于存储资源分配模块可以根据关联关系列表查询某个控制器所拥有的存储资源,查询存储资源所属的控制器,查询访问的发起控制器和目的控制器。
3.根据权利要求1所述的一种多控制器存储系统负载均衡的方法,其特征在于负载监控模块统计每个存储资源的访问负载:客户端连接到存储资源所属的控制器发起的对该存储资源的直接访问,客户端连接到其他控制器发起的对该存储资源的间接访问;统计客户端连接到本控制器所发起的访问:对本控制器拥有的存储资源的直接访问,对其他控制器存储资源的间接访问。
4.根据权利要求1所述的一种多控制器存储系统负载均衡的方法,其特征在于根据访问负载监控模块的一段时间内的统计信息,决定如何将所有的存储资源及访问入口在各个控制器之间进行动态转移,决定每个控制器上是否有存储资源或访问入口需要转移到其他控制器,或者接收其他控制器转移过来的存储资源或访问入口。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210126943.XA CN102647362B (zh) | 2012-04-27 | 2012-04-27 | 一种多控制器存储系统负载均衡的方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210126943.XA CN102647362B (zh) | 2012-04-27 | 2012-04-27 | 一种多控制器存储系统负载均衡的方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102647362A CN102647362A (zh) | 2012-08-22 |
CN102647362B true CN102647362B (zh) | 2016-12-21 |
Family
ID=46659945
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201210126943.XA Active CN102647362B (zh) | 2012-04-27 | 2012-04-27 | 一种多控制器存储系统负载均衡的方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102647362B (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014130387A (ja) * | 2012-12-27 | 2014-07-10 | Fujitsu Ltd | ストレージコントローラ選択システム、ストレージコントローラ選択方法、およびストレージコントローラ選択プログラム |
JP6275850B2 (ja) * | 2013-08-31 | 2018-02-07 | 華為技術有限公司Huawei Technologies Co.,Ltd. | ストレージシステムにおいて操作要求を処理するための方法及び装置 |
US10908960B2 (en) * | 2019-04-16 | 2021-02-02 | Alibaba Group Holding Limited | Resource allocation based on comprehensive I/O monitoring in a distributed storage system |
CN113608696B (zh) * | 2021-08-04 | 2024-06-04 | 北京八分量信息科技有限公司 | 异构网络中共享存储资源的自动配置方法、装置 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN100337218C (zh) * | 2005-02-23 | 2007-09-12 | 北京邦诺存储科技有限公司 | 网络存储系统中的数据管理方法及其构建的网络存储系统 |
CN100527744C (zh) * | 2006-03-21 | 2009-08-12 | 华南理工大学 | 一种智能网络磁盘存储系统及其实现方法 |
CN101741698B (zh) * | 2008-11-13 | 2012-05-30 | 英业达股份有限公司 | 一种共享储存设备的计算器系统及其共享方法 |
CN102136003A (zh) * | 2011-03-25 | 2011-07-27 | 上海交通大学 | 大规模分布式存储系统 |
CN102420867A (zh) * | 2011-12-01 | 2012-04-18 | 浪潮电子信息产业股份有限公司 | 一种基于实时负载均衡机制的集群存储入口解析方法 |
-
2012
- 2012-04-27 CN CN201210126943.XA patent/CN102647362B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN102647362A (zh) | 2012-08-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109218355B (zh) | 负载均衡引擎,客户端,分布式计算系统以及负载均衡方法 | |
US10078533B2 (en) | Coordinated admission control for network-accessible block storage | |
CN102611735B (zh) | 一种应用服务的负载均衡方法及系统 | |
US10250673B1 (en) | Storage workload management using redirected messages | |
CN107124472A (zh) | 负载均衡方法及装置、计算机可读存储介质 | |
CN104750557B (zh) | 一种内存管理方法和内存管理装置 | |
CN109617986A (zh) | 一种负载均衡方法及网络设备 | |
CN107800756A (zh) | 一种负载均衡方法及负载均衡器 | |
CN108881348A (zh) | 服务质量控制方法、装置和存储服务器 | |
CN103747274B (zh) | 一种增设缓存集群的视频数据中心及其缓存资源调度方法 | |
CN109933431B (zh) | 一种智能的客户端负载均衡方法及系统 | |
CN102647362B (zh) | 一种多控制器存储系统负载均衡的方法 | |
US20150196841A1 (en) | Load balancing system and method for rendering service in cloud gaming environment | |
CN103379156B (zh) | 实现存储空间动态均衡的方法、系统和装置 | |
CN103701916A (zh) | 分布式存储系统的动态负载均衡方法 | |
CN103327072A (zh) | 一种集群负载均衡的方法及其系统 | |
CN103401947A (zh) | 多个服务器的任务分配方法和装置 | |
CN109710412A (zh) | 一种基于动态反馈的Nginx负载均衡方法 | |
CN111694663A (zh) | 服务器集群的负载均衡方法、装置及系统 | |
CN104092756A (zh) | 一种基于dht机制的云存储系统的资源动态分配方法 | |
CN109299190A (zh) | 分布式存储系统中处理对象的元数据的方法及装置 | |
CN107579924A (zh) | 一种流量调拨方法和装置 | |
CN104461727A (zh) | 内存模组访问方法及装置 | |
CN104158902B (zh) | 一种基于请求数的Hbase数据块分配方法及装置 | |
US10574584B1 (en) | Controlling network device capacity |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |