CN112631786A - 一种异构负载均衡设备的统一管理自动处理系统 - Google Patents

Abstract

本发明涉及一种异构负载均衡设备的统一管理自动处理系统，包括采集模块、配置管理模块和数据可视化模块，所述的采集模块，用于对负载均衡设备、虚拟服务VS、应用节点Member的性能指标、日志、故障信息及配置容量进行实时的检测采集；所述的配置管理模块，用于从设备配置信息管理中，自动的和动态的收集负载均衡设备的品牌、型号、配置、容量、虚拟服务VS及应用节点Member信息；所述的数据可视化模块，用于动态实时滚动播放用户重点关心的设备对象的指标变化趋势、各项重要数据指标的TOP排名、以及正常或故障对象的分布占比。与现有技术相比，本发明具有效率高、难度低、平台统一等优点。

Description

一种异构负载均衡设备的统一管理自动处理系统

技术领域

本发明涉及IT智能运维数据处理技术，尤其是涉及一种异构负载均衡设备的统一管理自动处理系统。

背景技术

随着信息化技术的高速发展，企业数据中心的异构化程度越来越高。对于跨品牌、类型的设备的管理难度越来越高。设备管理的独立情况也越来越明显。负载均衡设备作为基础架构与应用业务的衔接桥梁。也在当前的IT架构中起着关键性的作用。

负载均衡是一种基础的网络服务，主要是为了解决公司业务并发压力，加强网络处理能力，降低单台设备的资源压力，提升整体的服务性能。

客户端的流量首先会到达负载均衡服务器，由负载均衡服务器通过一定的调度算法将流量分发到不同的应用服务器上面，同时负载均衡服务器也会对应用服务器做周期性的健康检查，当发现故障节点时便动态的将节点从应用服务器集群中剔除，以此来保证应用的高可用。

由于成本及负载均衡设备的功能特点。每个企业数据中心中的负载均衡设备品牌也会存在多种，设备管理的VS和Member的划分也有不同的规则和方法。

目前，各个品牌的负载均衡设备都是由各厂家的设备提供独立的，各不相同的管理方式。界面风格、操作习惯、数据格式、信息类型、操作命令都存在着巨大的差异。给管理员和运维人员带来了较高的维护难度。同时，由于自带的管理系统并不支持与短信、邮件等通知平台集成。因此，在发生故障的同时，无法第一时间通知到管理人员。需要管理人员被动的登录自带系统进行查看。实时性无法得到保障。同时，设备的运行报告也需要登录各自的系统手工将数据下载并进行整理后才可以对不同品牌的设备进行横向、纵向的多维度比对。对于综合反映整体设备运行情况的需求难以实现，或者需要消耗大量的人力来手工处理。在基于设备具有管理系统的基础上，仍然需要较高的专业知识和技术水平才能对异构负载均衡设备进行有效的管理。

因此建立异构的负载均衡设备的统一管理自动化处理，从而彻底解决传统的人工处理带来的缺点，成为需要解决的技术问题。

发明内容

本发明的目的就是为了克服上述现有技术存在的缺陷而提供一种效率高、难度低、平台统一的异构负载均衡设备的统一管理自动处理系统，对不同品牌的负载均衡设备，通过统一标准的集中运维模式，完成整个数据中心的应用性能服务保障。

本发明的目的可以通过以下技术方案来实现：

根据本发明的一个方面，提供了一种异构负载均衡设备的统一管理自动处理系统，包括采集模块、配置管理模块和数据可视化模块，所述的采集模块、配置管理模块和数据可视化模块依次连接，所述的采集模块与各负载均衡设备连接；

所述的采集模块，用于对负载均衡设备、虚拟服务VS、应用节点Member的性能指标、日志、故障信息及配置容量进行实时的检测采集；

所述的配置管理模块，用于从设备配置信息管理中，自动的和动态的收集负载均衡设备的品牌、型号、配置、容量、虚拟服务VS及应用节点Member信息；

所述的数据可视化模块，用于动态实时滚动播放用户重点关心的设备对象的指标变化趋势、各项重要数据指标的TOP排名、以及正常或故障对象的分布占比。

作为优选的技术方案，所述的采集模块采用SNMP、TCP\IP或SSH协议对负载均衡设备、虚拟服务VS、应用节点Member的信息进行采集。

作为优选的技术方案，所述的采集模块采用消息中间件的方式进行信息的实时采集。

作为优选的技术方案，所述的采集模块对不同数据来源、不同数据格式、不同数据属性在接入平台时进行统一标准化处理。

作为优选的技术方案，所述的配置管理模块包括了不同品牌、类型的负载均衡设备在实际IT架构应用环境中的角色划分信息。

作为优选的技术方案，所述的配置管理模块包括指标及策略构建单元，用于帮助用户实现指定对象的特定指标采集。

作为优选的技术方案，所述的配置管理模块将采集的策略和间隔参通过API接口同步到采集模块，所述的采集模块将精确地根据用户配置的策略进行数据采集和故障告警。

作为优选的技术方案，所述的配置管理模块衔接采集模块对不同设备对象的指标采集进行精细化控制，在配置管理模块下发采集策略之后，采集模块将指令一一与负载均衡设备进行交互通信，采集完成后根据配置管理模块的标签化规则对数据格式进行统一处理，同时对指标名称存在差异的数据进行翻译和转换，形成了一个策略知识库。

作为优选的技术方案，所述的数据可视化模块采用多层级页面结构设计，支持用户从总览到细节的层层钻取需求，包括从数据中心总体运行状态到单个设备运行状态，到每个VS、每个Member的运行状态的显示。

作为优选的技术方案，所述的数据可视化模块加入了大数据检索功能，通过对数据的标签化处理，可秒级查询海量的历史数据，从历史数据中筛选出用户的模糊需求。

与现有技术相比，本发明具有以下优点：

1)本发明利用采集器、指标规则及告警策略、数据可视化平台构成了一个异构负载均衡设备的统一管理系统，通过对每个品牌的负载均衡设备进行统一的数据采集和数据处理，再将结果信息实时反馈到展现页面，从而大大减低了异构负载均衡的统一管理难度，丰富的数据和指标帮助用户可以在一个平台中实现多种品牌的综合管理。

2)本发明使得先进的大数据流式处理架构得以更好的应用，提高设备运维自动化程度、降低异构设备的维护难度、增加设备运行状态检测密度，增强了设备故障发现的时效性，并且能很好的实现不同负载均衡设备管理方式上的统一和互通。数据中心运维管理系统发展中所要实现的目标是设备全覆盖、数据大集中、管理方式统一，并能提供可行解决方案，而本发明凭借强大可靠的技术，则能很好解决这些棘手问题。同时，与传统的独立管理不同，可将多种复合品牌的负载均衡设备进行集中管理而游刃有余。

3)本发明在不同品牌负载均衡设备独立管理的模式上，做了极大的优化和整合。负载均衡设备受制于品牌、型号等因素，在对接数据上不尽相同。这就使得指标的名称、单位、用途无法一致，因而使管理难度随之增加。另一方面，负载均衡设备的对象数据没有统一的格式和标准，从而给故障处理带来了极大的工作量。这些都大大增加了异构环境下负载均衡设备运维管理的复杂性。因此本发明中的配置管理模块是对这个问题的可行性解决方案。配置管理模块，其功能是管理的大脑，同时，衔接采集模块对不同设备对象的指标采集进行精细化控制，在配置管理模块下发采集策略之后，采集模块将指令一一与负载均衡设备进行交互通信。采集完成后根据配置管理模块的标签化规则对数据格式进行统一处理。对指标名称等存在差异的数据进行翻译和转换。形成了一个策略知识库。

4)本发明使巡检系统完全实现自动化，从而减少了人为参与所带来的不确定风险因素。大大降低了管理成本的同时提高了运维效率。并且本发明不受时间、空间、环境等因素影响，为数据中心异构环境下的负载均衡设备统一管理提供了可靠的技术手段。

附图说明

图1为本发明的结构框图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明的一部分实施例，而不是全部实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都应属于本发明保护的范围。

对于现有技术中存在的缺点，建立异构的负载均衡设备的统一管理是非常必要且合理的取代措施。系统可以借助先进的深度学习算法、领先的流数据处理技术完美替代传统的人工作业，彻底解决了人工处理数据、第一时间报警、总览设备运行情况等问题。从而为企业在发展中提高应用可用性、降低运维难度及成本、提高设备管理能力、扩大企业竞争实力。

然而异构负载均衡设备的统一管理方法也有缺点，在接入一个全新品牌的负载均衡设备时，对数据的标签化规则、采集的参数及界面展现的调整也有着不少的工作量。该方法是一个需要持续维护和不断完善的平台。兼容的设备厂家、型号越多，知识库就越完善。覆盖市场的面就越广。主流的品牌及型号规则都被收入平台后，平台能实现开箱即用的效果。

负载均衡设备统一管理平台的建设目标是建立集中的、集成的、可扩展的集中管控、运维分析平台，全面覆盖数据中心各类负载均衡设备，为做好设备本身的管理和对应用服务的支持打下坚实的基础，采集关键的应用状态数据，整合已有运维系统，并实现及时准确的故障告警和应用系统状态分析，且能将以上信息直观、合理地予以展现，实现应用的可视化和集中管控。从设备的资产配置数据、性能数据、日志数据、应用数据等多方面综合分析设备的运行状态与对应用服务的支持。

如图1所示，本发明异构负载均衡设备的统一管理自动处理系统，具体包括：

第一，采集模块，通过SNMP、TCP\IP、SSH等协议对负载均衡设备、VS及Member的性能指标、日志、故障信息及配置容量进行实时的检测采集。由于监控对象细分到Member，对象的整体数量巨大。实时检测的时效性导致数据并发量也非常的高。同时，考虑到多数据中心的模式，采用消息中间件的方式应对分布式采集和大数据流的处理要求。在保证数据处理效率的同时也保障数据的完整性。丰富的数据采集手段解决了不同品牌负载均衡设备之间数据收集方法不同的问题。并通过消息中间件的作用，做到了不同数据来源、不同数据格式、不同数据属性在接入平台时的统一标准化。为平台后续的数据处理和分析做好铺垫服务。

第二，配置管理模块，包括了不同品牌、类型的负载均衡设备在实际IT架构应用环境中的角色划分。从设备配置信息管理中，自动的、动态的收集负载均衡设备的品牌、型号、配置、容量、VS及Member信息。指标及策略的建立，则可以帮助用户轻松的实现指定对象的特定指标采集。包括采集的方法、间隔等参数都可以通过配置模块模块通过API接口同步到采集模块。采集模块将精确的根据用户配置的策略进行数据采集和故障告警。

第三，B/S数据可视化模块，通过H5丰富的图表插件动态实时滚动播放用户重点关心的设备对象的指标变化趋势。以及各项重要数据指标的TOP排名。正常/故障对象的分布占比。同时，系统多层级页面结构设计，可以支持用户从总览到细节的层层钻取需求。从数据中心总体运行状态到单个设备运行状态，到每个VS、每个Member的运行状态。并且可视化模块加入了大数据检索功能，通过对数据的标签化处理，可以秒级查询海量的历史数据，从历史数据中筛选出用户的模糊需求。用户可以借助可视化模块直观、有效、快速的发现问题、定位问题、追溯问题。

其中数据可视化模块是访问系统的主要入口，可以查看所有负载均衡设备的状态，同时可以对历史/实时指标趋势进行查询；所述的采集模块，包括SNMP采集器、日志采集器、TCP/IP采集器、SSH采集器等。这些采集模块具备与配置管理模块的同步接口；配置管理模块主要包含负载均衡设备的配置信息、数据标签化规则、存储规则、告警规则等等。本发明系统及客户端的接口交互采用标准的WebAPI协议或者消息队列协议进行数据共享及交互，形成了一个统一的异构负载均衡设备统一管理系统。

上述的配置管理模块，主要对负载均衡设备的信息进行管理，包含设备名称、IP低、品牌、型号、所属机房、VS及Member等信息。标签化定义模块，主要是定义数据类型、字段名称、存放顺序、标签别名等。告警策模块，主要管理告警关键字、告警阀值、告警级别、告警间隔等。客户端可视化模块展示每次的采样的结果、告警的总数、设备的健康度、状态分类占比、指标TOP排名。

以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。

Claims (10)

1.一种异构负载均衡设备的统一管理自动处理系统，其特征在于，包括采集模块、配置管理模块和数据可视化模块，所述的采集模块、配置管理模块和数据可视化模块依次连接，所述的采集模块与各负载均衡设备连接；

所述的采集模块，用于对负载均衡设备、虚拟服务VS、应用节点Member的性能指标、日志、故障信息及配置容量进行实时的检测采集；

所述的配置管理模块，用于从设备配置信息管理中，自动的和动态的收集负载均衡设备的品牌、型号、配置、容量、虚拟服务VS及应用节点Member信息；

所述的数据可视化模块，用于动态实时滚动播放用户重点关心的设备对象的指标变化趋势、各项重要数据指标的TOP排名、以及正常或故障对象的分布占比。

2.根据权利要求1所述的一种异构负载均衡设备的统一管理自动处理系统，其特征在于，所述的采集模块采用SNMP、TCP\IP或SSH协议对负载均衡设备、虚拟服务VS、应用节点Member的信息进行采集。

3.根据权利要求1所述的一种异构负载均衡设备的统一管理自动处理系统，其特征在于，所述的采集模块采用消息中间件的方式进行信息的实时采集。

4.根据权利要求3所述的一种异构负载均衡设备的统一管理自动处理系统，其特征在于，所述的采集模块对不同数据来源、不同数据格式、不同数据属性在接入平台时进行统一标准化处理。

5.根据权利要求1所述的一种异构负载均衡设备的统一管理自动处理系统，其特征在于，所述的配置管理模块包括了不同品牌、类型的负载均衡设备在实际IT架构应用环境中的角色划分信息。

6.根据权利要求1所述的一种异构负载均衡设备的统一管理自动处理系统，其特征在于，所述的配置管理模块包括指标及策略构建单元，用于帮助用户实现指定对象的特定指标采集。

7.根据权利要求6所述的一种异构负载均衡设备的统一管理自动处理系统，其特征在于，所述的配置管理模块将采集的策略和间隔参通过API接口同步到采集模块，所述的采集模块将精确地根据用户配置的策略进行数据采集和故障告警。

8.根据权利要求6所述的一种异构负载均衡设备的统一管理自动处理系统，其特征在于，所述的配置管理模块衔接采集模块对不同设备对象的指标采集进行精细化控制，在配置管理模块下发采集策略之后，采集模块将指令一一与负载均衡设备进行交互通信，采集完成后根据配置管理模块的标签化规则对数据格式进行统一处理，同时对指标名称存在差异的数据进行翻译和转换，形成了一个策略知识库。

9.根据权利要求1所述的一种异构负载均衡设备的统一管理自动处理系统，其特征在于，所述的数据可视化模块采用多层级页面结构设计，支持用户从总览到细节的层层钻取需求，包括从数据中心总体运行状态到单个设备运行状态，到每个VS、每个Member的运行状态的显示。

10.根据权利要求1所述的一种异构负载均衡设备的统一管理自动处理系统，其特征在于，所述的数据可视化模块加入了大数据检索功能，通过对数据的标签化处理，可秒级查询海量的历史数据，从历史数据中筛选出用户的模糊需求。

Images