CN104023082B - 一种集群负载均衡的实现方法 - Google Patents
一种集群负载均衡的实现方法 Download PDFInfo
- Publication number
- CN104023082B CN104023082B CN201410281860.7A CN201410281860A CN104023082B CN 104023082 B CN104023082 B CN 104023082B CN 201410281860 A CN201410281860 A CN 201410281860A CN 104023082 B CN104023082 B CN 104023082B
- Authority
- CN
- China
- Prior art keywords
- module
- equipment
- request
- cluster
- rule
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 30
- 238000012545 processing Methods 0.000 claims abstract description 26
- 238000012544 monitoring process Methods 0.000 claims abstract description 17
- 230000008569 process Effects 0.000 claims abstract description 9
- 235000014510 cooky Nutrition 0.000 claims description 9
- 230000005540 biological transmission Effects 0.000 claims description 7
- 230000001360 synchronised effect Effects 0.000 claims description 6
- 230000007246 mechanism Effects 0.000 claims description 4
- 238000012546 transfer Methods 0.000 claims description 4
- 230000005856 abnormality Effects 0.000 claims description 3
- 230000008859 change Effects 0.000 claims description 3
- 238000001514 detection method Methods 0.000 claims description 3
- 238000012806 monitoring device Methods 0.000 claims description 3
- 230000004044 response Effects 0.000 claims description 3
- 230000015572 biosynthetic process Effects 0.000 description 2
- 230000007812 deficiency Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004138 cluster model Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000012938 design process Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000035800 maturation Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004899 motility Effects 0.000 description 1
Landscapes
- Debugging And Monitoring (AREA)
Abstract
本发明提供一种集群负载均衡的实现方法，其具体实现过程为：设计数据处理模块、策略控制模块、策略生成模块、服务模块、日志记录模块、系统监控模块、系统管理模块组成集群负载均衡系统，由数据处理模块负责接收服务模块的日志数据；服务模块对外提供负载均衡服务；策略生成模块负责生成配置文件，由策略控制模块下载配置文件后将配置文件应用于服务模块。该一种集群负载均衡的实现方法和现有技术相比，能够提供完整的负载均衡日志和报表，能够平滑加入和弹出负载均衡设备。通过该集群提升负载均衡设备的稳定性、健壮性和提升负载均衡设备的性能。
Description
技术领域
本发明涉及计算机网络技术领域，具体的说是一种基于TCP协议的负载均衡机制，即基于TCP协议的集群负载均衡的实现方法。
背景技术
面对互联网技术的成熟，伴随着电子商务技术、网络办公技术的快速发展。由服务器组成集群对外提供服务的技术已经成为主流趋势，现有服务器集群在负载均衡的稳定性和健壮性方面存在较大不足。
由于负载均衡器可以提升网络吞吐量、增加网络带宽、加强网络数据的处理能力、提供网络的灵活性和可用性。能够将数据根据后端服务器的状态和一定的会话保持算法将请求传递到不同的服务器上，降低后端服务器的负载，提升服务的稳定性和健壮性，因而，设计负载均衡器集群成为一种趋势。
在实际设计过程中，由于负载均衡设备也越来越多。按照设备类型的不同可以分为硬件负载均衡器/软件负载均衡器，按照规模的不同可以分为单一负载均衡器/集群负载均衡器，按照使用范围的不同可以分为全局负载均衡器/局部负载均衡器。按照部署方式的不同可以分为路由模式/桥接模式/三角传输模式。但是不管什么样的负载均衡设备最终都必须能够提供健壮、稳定的服务。能够承受住各种网络环境下考验。
基于此，现提供一种集群负载均衡的实现方法，通过该方法能够根据网络环境智能扩充负载均衡设备；能够监控集群内设备的状态；能够提供系统服务日志和各种日志报表。
发明内容
本发明的技术任务是解决现有技术的不足，提供一种实用性强、集群负载均衡的实现方法。
本发明的技术方案是按以下方式实现的，该一种集群负载均衡的实现方法，其具体实现过程为：
设置负载均衡集群，该集群由计算机服务器设备组成并以三角传输模式接入到网络中，该集群对请求的响应由计算机服务器直接完成，该集群分成数据处理模块、规则控制模块、规则生成模块、服务模块、日志记录模块、系统监控模块、系统管理模块，其中
服务模块，负责提供负载均衡机制，将不同设备组成统一整体共同对外提供负载均衡服务，根据设备状态分发请求到不同负载均衡设备，传递请求到后端服务器，根据设备负载信息动态添加和删除设备；
日志记录模块，负责动态定位数据处理模块位置，传递日志到数据处理模块；
数据处理模块，负载记录由日志记录模块传递的数据，统计保存到数据库中的数据，形成统计数据和报表；
规则生成模块，负责生成服务模块的配置规则，供服务模块使用，该规则生成模块可以向规则控制模块下发规则；
规则控制模块，负责定位规则生成模块位置、，并根据设备角色下载规则生成模块形成的规则、配置规则到服务模块；
系统监控模块，负责监控设备状态，形成设备负载信息、告警异常状态、关闭和启用负载均衡设备服务；
系统管理模块，负责定位负载均衡设备，对集群内的计算机设备进行配置，即配置角色、监控规则，查看日志，配置日志规则，管理系统下的各个模块的功能、显示日志报表和下载日志报表，是负载均衡集群的管理入口。
所述集群中有至少一台作为服务模块的计算机设备；有一台作为数据处理模块的计算机设备；一台作为规则生成模块的主配置机的计算机设备；上述系统管理模块为集群内每一台设备的管理入口。
所述服务模块的服务过程为：
首先加载规则配置文件，服务启动后同步计算机设备，查找当前存在在集群内的其它属于服务模块角色的设备，并将这些设备同步到程序中；
同步完毕后系统开始接收网络请求和系统内部发送到本设备的请求；
接收到的网络请求由分发系统决定是哪台设备转发请求：如果是转发到本地的请求，由转发请求模块直接转发；如果是分发到其它设备的请求，由分发系统分发到其它设备上；
接收到的系统内部请求由接收系统直接转发到转发请求模块，转发请求；
请求转发后由日志记录模块记录相关日志。
所述集群系统将采用cookie插入的方式记录设备转发信息，当cookie中没有相关记录时，首先由本服务模块设备发送，在设备负载过高时通过查找集群内部其它设备的设备状态，选择负载较低的设备转发请求；当cookie中存在相关记录后，直接将请求分发到上次处理这个请求的设备上。
所述日志记录模块的工作过程为：
首先定位数据服务器位置，与数据库服务器建立连接；
当接收到要存储的日志后，将日志发送到数据库服务器。
所述数据处理模块的工作过程为：
该模块读取配置文件，标志SSA功能；
接收请求、执行计划任务并显示日志报表：所述接收请求接收的是日志记录请求、日志管理请求、服务定位请求，该请求接收后保存日志到日志处理模块的服务器中；执行计划任务是统计日志报表数据；显示日志报表是将日志报表显示到系统管理平台。
所述规则生成模块的工作过程为：
生成配置文件，检测校验配置文件的正确性；
主动下发配置文件到各个设备；
接收请求并发送配置文件到各个设备。
所述规则控制模块的工作过程为：定位规则生成模块位置，从规则生成模块下载规则配置文件并部署到服务模块，主动检测规则配置文件是否发送变化。
所述系统监控模块的工作过程为：获取作为该监控模块的计算机设备状态和集群设备状态，并根据集群内的设备状态信息决定是否关闭或启用本设备的服务模块。
本发明与现有技术相比所产生的有益效果是：
本发明的一种集群负载均衡的实现方法能够动态管理集群内部设备服务的开启和关闭，能够提供完整的负载均衡日志和报表，能够平滑加入和弹出负载均衡设备；通过该集群提升负载均衡设备的稳定性、健壮性和提升负载均衡设备的性能；实用性强，适用范围广泛，易于推广。
附图说明
附图1是本发明集群模型示意图。
附图2是服务模块基本原理图。
附图3是日志记录模块基本原理图。
附图4是数据处理模块基本原理图。
附图5是策略生成模块基本原理图。
附图6是策略控制模块基本原理图。
附图7是系统监控模块基本原理图。
附图8是系统管理模块基本原理图。
具体实施方式
下面结合附图对本发明的一种集群负载均衡的实现方法作以下详细说明。
如附图1所示，现提供一种集群负载均衡的实现方法，其具体实现过程为：
设置负载均衡集群，该集群由计算机服务器设备组成并以三角传输模式接入到网络中，该集群对请求的响应由计算机服务器直接完成，该集群分成数据处理模块、规则控制模块、规则生成模块、服务模块、日志记录模块、系统监控模块、系统管理模块，其中
服务模块，负责提供负载均衡机制，将不同设备组成统一整体共同对外提供负载均衡服务，根据设备状态分发请求到不同负载均衡设备，传递请求到后端服务器，根据设备负载信息动态添加和删除设备；
日志记录模块，负责动态定位数据处理模块位置，传递日志到数据处理模块；
数据处理模块，负载记录由日志记录模块传递的数据，统计保存到数据库中的数据，形成统计数据和报表；
规则生成模块，负责生成服务模块的配置规则，供服务模块使用，该规则生成模块可以向规则控制模块下发规则；
规则控制模块，负责定位规则生成模块位置、，并根据设备角色下载规则生成模块形成的规则、配置规则到服务模块；
系统监控模块，负责监控设备状态，形成设备负载信息、告警异常状态、关闭和启用负载均衡设备服务；
系统管理模块，负责定位负载均衡设备，对集群内的计算机设备进行配置，即配置角色、监控规则，查看日志，配置日志规则，管理系统下的各个模块的功能、显示日志报表和下载日志报表，是负载均衡集群的管理入口。
在实际工作时，数据处理模块负责接收服务模块的日志数据。服务模块对外提供负载均衡服务。规则生成模块负责生成配置文件，由规则控制模块下载配置文件后将配置文件应用于服务模块。
所述集群中有至少一台作为服务模块的计算机设备；有一台作为数据处理模块的计算机设备；一台作为规则生成模块的主配置机的计算机设备；上述系统管理模块为集群内每一台设备的管理入口。
如附图2所示，所述服务模块是本系统的核心，系统下其它模块的存在都是为了更好的服务于服务模块。其服务过程为：
首先加载规则配置文件，服务启动后同步计算机设备，查找当前存在在集群内的其它属于服务模块角色的设备，并将这些设备同步到程序中；
同步完毕后系统开始接收网络请求和系统内部发送到本设备的请求；
接收到的网络请求由分发系统决定是哪台设备转发请求：如果是转发到本地的请求，由转发请求模块直接转发；如果是分发到其它设备的请求，由分发系统分发到其它设备上；
接收到的系统内部请求由接收系统直接转发到转发请求模块，转发请求；
请求转发后由日志记录模块记录相关日志。
为保证转发请求的完整性，系统将采用cookie插入的方式记录设备转发信息。服务模块第一次接收到请求时，因cookie中没有相关记录，分发系统会首先考虑由本设备发送，在设备负载过高时通过查找集群内部其它设备的设备状态，选择负载较低的设备转发请求。当cookie中存在相关记录后，直接将请求分发到上次处理这个请求的设备上。有可能请求到来时上次负责发送请求的设备异常，此时将重新选择设备进行发送。
如附图3所示，所述日志记录模块的工作过程为：
首先定位数据服务器位置，与数据库服务器建立连接；
当接收到要存储的日志后，将日志发送到数据库服务器。
如附图4所示，所述数据处理模块的工作过程为：
该模块读取配置文件，标志SSA功能；
接收请求、执行计划任务并显示日志报表：所述接收请求接收的是日志记录请求、日志管理请求、服务定位请求，该请求接收后保存日志到日志处理模块的服务器中；执行计划任务是统计日志报表数据；显示日志报表是将日志报表显示到系统管理平台。
如附图5所示，所述规则生成模块的工作过程为：
生成配置文件，检测校验配置文件的正确性；
主动下发配置文件到各个设备；
接收请求并发送配置文件到各个设备。
如附图6所示，所述规则控制模块的工作过程为：定位规则生成模块位置，从规则生成模块下载规则配置文件并部署到服务模块，主动检测规则配置文件是否发送变化。
如附图7所示，所述系统监控模块的工作过程为：获取作为该监控模块的计算机设备状态和集群设备状态，并根据集群内的设备状态信息决定是否关闭或启用本设备的服务模块。
如附图8所示，系统管理模块是基于web平台的方式对设备进行管理的综合入口。负责管理设备上各个模块的功能配置，即定位设备类型、管理各个模块、查看日志报表、查看告警等。
以上实施方式仅用于说明本发明，而并非对本发明的限制，有关技术领域的普通技术人员，在不脱离本发明的精神和范围的情况下，还可以做出各种变化和变型，因此所有等同的技术方案也属于本发明的范畴，本发明的专利保护范围应由权利要求限定。
Claims (9)
1.一种集群负载均衡的实现方法，其特征在于其具体实现过程为：
设置负载均衡集群，该集群由计算机服务器设备组成并以三角传输模式接入到网络中，该集群对请求的响应由计算机服务器直接完成，该集群分成数据处理模块、规则控制模块、规则生成模块、服务模块、日志记录模块、系统监控模块、系统管理模块，其中
服务模块，负责提供负载均衡机制，将不同设备组成统一整体共同对外提供负载均衡服务，根据设备状态分发请求到不同负载均衡设备，传递请求到后端服务器，根据后端服务器负载信息动态添加或删除负载均衡设备；
日志记录模块，负责动态定位数据处理模块位置，传递日志到数据处理模块；
数据处理模块，负载记录由日志记录模块传递的数据，统计保存到数据库中的数据，形成统计数据和报表；
规则生成模块，负责生成服务模块的配置规则，供服务模块使用，该规则生成模块可以向规则控制模块下发规则；
规则控制模块，负责定位规则生成模块位置，并根据设备角色下载规则生成模块形成的规则、配置规则到服务模块；
系统监控模块，负责监控设备状态，形成设备负载信息、告警异常状态、关闭和启用负载均衡设备服务；
系统管理模块，负责定位负载均衡设备，对集群内的计算机设备进行配置，即配置角色、监控规则，查看日志，配置日志规则，管理系统下的各个模块的功能、显示日志报表和下载日志报表，是负载均衡集群的管理入口。
2.根据权利要求1所述的一种集群负载均衡的实现方法，其特征在于：所述集群中有至少一台作为服务模块的计算机设备；有一台作为数据处理模块的计算机设备；一台作为规则生成模块的主配置机的计算机设备；上述系统管理模块为集群内每一台设备的管理入口。
3.根据权利要求2所述的一种集群负载均衡的实现方法，其特征在于：所述服务模块的服务过程为：
首先加载规则配置文件，服务启动后同步计算机设备，查找当前存在在集群内的其它属于服务模块角色的设备，并将这些设备同步到程序中；
同步完毕后系统开始接收网络请求和系统内部发送到本设备的请求；
接收到的网络请求由分发系统决定是哪台设备转发请求：如果是转发到本地的请求，由转发请求模块直接转发；如果是分发到其它设备的请求，由分发系统分发到其它设备上；
接收到的系统内部请求由接收系统直接转发到转发请求模块，转发请求；
请求转发后由日志记录模块记录相关日志。
4.根据权利要求3所述的一种集群负载均衡的实现方法，其特征在于：所述集群系统采用cookie插入的方式记录设备转发信息，当cookie中没有相关记录时，首先由本服务模块设备发送，在设备负载过高时通过查找集群内部其它设备的设备状态，选择负载较低的设备转发请求；当cookie中存在相关记录后，直接将请求分发到上次处理这个请求的设备上。
5.根据权利要求2所述的一种集群负载均衡的实现方法，其特征在于：所述日志记录模块的工作过程为：
首先定位数据服务器位置，与数据库服务器建立连接；
当接收到要存储的日志后，将日志发送到数据库服务器。
6.根据权利要求2所述的一种集群负载均衡的实现方法，其特征在于：所述数据处理模块的工作过程为：
该模块读取配置文件，标志SSA功能；
接收请求、执行计划任务并显示日志报表：所述接收请求接收的是日志记录请求、日志管理请求、服务定位请求，该请求接收后保存日志到日志处理模块的服务器中；执行计划任务是统计日志报表数据；显示日志报表是将日志报表显示到系统管理平台。
7.根据权利要求2所述的一种集群负载均衡的实现方法，其特征在于：所述规则生成模块的工作过程为：
生成配置文件，检测校验配置文件的正确性；
主动下发配置文件到各个设备；
接收请求并发送配置文件到各个设备。
8.根据权利要求2所述的一种集群负载均衡的实现方法，其特征在于：所述规则控制模块的工作过程为：定位规则生成模块位置，从规则生成模块下载规则配置文件并部署到服务模块，主动检测规则配置文件是否发送变化。
9.根据权利要求2所述的一种集群负载均衡的实现方法，其特征在于：所述系统监控模块的工作过程为：获取作为该监控模块的计算机设备状态和集群设备状态，并根据集群内的设备状态信息决定是否关闭或启用本设备的服务模块。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410281860.7A CN104023082B (zh) | 2014-06-23 | 2014-06-23 | 一种集群负载均衡的实现方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410281860.7A CN104023082B (zh) | 2014-06-23 | 2014-06-23 | 一种集群负载均衡的实现方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN104023082A CN104023082A (zh) | 2014-09-03 |
| CN104023082B true CN104023082B (zh) | 2017-05-03 |
Family
ID=51439651
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201410281860.7A Active CN104023082B (zh) | 2014-06-23 | 2014-06-23 | 一种集群负载均衡的实现方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN104023082B (zh) |
Families Citing this family (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106549875B (zh) * | 2015-09-18 | 2019-09-13 | 中国移动通信集团浙江有限公司 | 一种会话管理方法、装置及负载均衡器 |
| CN106850549B (zh) * | 2016-12-16 | 2020-08-21 | 北京江南博仁科技有限公司 | 一种分布式加密服务网关及实现方法 |
| CN106790692A (zh) * | 2017-02-20 | 2017-05-31 | 郑州云海信息技术有限公司 | 一种多集群的负载均衡方法和装置 |
| CN109218341B (zh) * | 2017-06-29 | 2022-02-25 | 北京京东尚科信息技术有限公司 | 用于监控服务器和用于服务器的负载均衡方法和装置 |
| CN108415951B (zh) * | 2018-02-02 | 2022-01-11 | 广东睿江云计算股份有限公司 | 一种数据库控制方法和系统 |
| CN108765149B (zh) * | 2018-05-11 | 2021-10-19 | 南京工程学院 | 一种基于集群的量化策略回测系统及其回测方法 |
| CN109587062B (zh) * | 2018-12-07 | 2021-05-25 | 北京金山云网络技术有限公司 | 负载均衡信息同步的方法、装置和处理设备 |
| CN110348821A (zh) * | 2019-07-19 | 2019-10-18 | 杭州物源科技有限公司 | 一种结合物联网的智能制造管理系统及方法 |
| CN113329077A (zh) * | 2021-05-27 | 2021-08-31 | 东南大学 | 一种面向微服务系统的跨容器通信框架设计方法 |
| CN113407421B (zh) * | 2021-08-19 | 2021-11-30 | 北京江融信科技有限公司 | 微服务网关的动态日志记录管理方法及系统 |
| CN113742079B (zh) * | 2021-09-10 | 2024-05-03 | 安超云软件有限公司 | K8s七层负载均衡策略实现的方法及应用 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101610211A (zh) * | 2009-07-15 | 2009-12-23 | 浪潮电子信息产业股份有限公司 | 一种实现加权轮询的高速缓存负载均衡方法 |
| CN103166870A (zh) * | 2011-12-13 | 2013-06-19 | 百度在线网络技术（北京）有限公司 | 负载均衡集群系统及采用其提供服务的方法 |
| CN103812691A (zh) * | 2014-01-14 | 2014-05-21 | 浪潮电子信息产业股份有限公司 | 一种集群负载均衡系统的日志统计系统及方法 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8661287B2 (en) * | 2011-06-30 | 2014-02-25 | Rackspace Us, Inc. | Automatically performing failover operations with a load balancer |
-
2014
- 2014-06-23 CN CN201410281860.7A patent/CN104023082B/zh active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101610211A (zh) * | 2009-07-15 | 2009-12-23 | 浪潮电子信息产业股份有限公司 | 一种实现加权轮询的高速缓存负载均衡方法 |
| CN103166870A (zh) * | 2011-12-13 | 2013-06-19 | 百度在线网络技术（北京）有限公司 | 负载均衡集群系统及采用其提供服务的方法 |
| CN103812691A (zh) * | 2014-01-14 | 2014-05-21 | 浪潮电子信息产业股份有限公司 | 一种集群负载均衡系统的日志统计系统及方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN104023082A (zh) | 2014-09-03 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN104023082B (zh) | 一种集群负载均衡的实现方法 | |
| CN104333512B (zh) | 一种分布式内存数据库访问系统及方法 | |
| CN101447892B (zh) | 分布式测试方法和系统、以及测试服务器 | |
| CN105447023B (zh) | 业务标识生成方法和装置 | |
| CN105607954A (zh) | 一种有状态容器在线迁移的方法和装置 | |
| CN103067206A (zh) | 物联网跨机房分布式全自动热备用服务器切换系统 | |
| CN102902669B (zh) | 基于互联网系统的分布式信息抓取方法 | |
| CN106911648B (zh) | 一种环境隔离方法及设备 | |
| CN102820984A (zh) | 自动网络拓扑结构检测和建模 | |
| CN104506462B (zh) | 一种分布式交换机中mac地址管理方法及设备 | |
| CN109075996A (zh) | 用于监视网络性能的监视控制器及因此执行的方法 | |
| CN103795575B (zh) | 一种面向多数据中心的系统监控方法 | |
| CN106549875A (zh) | 一种会话管理方法、装置及负载均衡器 | |
| CN106878193A (zh) | 一种负载分担方法及装置 | |
| CN109845192A (zh) | 用于动态地适配软件定义的网络的计算机系统和方法 | |
| CN104618255A (zh) | 一种前置采集服务系统及数据处理方法 | |
| CN106101264A (zh) | 内容分发网络日志推送方法、装置和系统 | |
| CN106953926A (zh) | 一种路由方法及装置 | |
| CN103905219A (zh) | 一种业务平台中通信信息的监控存储系统及方法 | |
| CN106874371A (zh) | 一种数据处理方法及装置 | |
| CN103269371B (zh) | 一种基于Anycast的物联网DS查询方法及系统 | |
| CN103580951B (zh) | 多个信息系统的输出比较方法、测试迁移辅助方法及系统 | |
| CN106209680A (zh) | 信息处理装置以及方法 | |
| CN105591467B (zh) | 基于面向服务架构的继电保护故障信息主站系统 | |
| CN106790647A (zh) | 一种自适应服务管理的方法和系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |