CN107483568A - 一种基于云平台可弹性调度的网络和业务监控系统 - Google Patents

Abstract

本发明包括云端模块和企业端模块，云端模块通过其云监控平台接入网关和企业端模块的企业监控系统出口网关之间建立VPN（虚拟专用网络）进行信息交流，云端模块包括用户管理模块、信息发布平台、告警管理模块、配置管理模块、报表管理模块、组件池模块、采集服务模块和数据仓库模块，企业端模块设有若干个服务器节点，每个服务器节点包括Agent代理机模块、运行监控模块、本地调度器模块、组件管理器模块和本地组件池模块，本发明提出基于云平台集中监控告警，集中配置下发，完全托管的网络和业务监控系统，有以下特点：1）云平台集中管控，后端专业团队服务；2）远程调度下发，依需部署；3）功能扩展灵活，短信，SMS，APP随时随地掌握系统运行状态。

Description

一种基于云平台可弹性调度的网络和业务监控系统

技术领域

本发明涉及互联网技术，尤其涉及一种基于云平台可弹性调度的网络和业务监控系统。

背景技术

监控系统是整个运维环节，乃至整个产品生命周期中极其重要的一环，事前及时预警发现故障，事后提供翔实的数据用于追查定位问题，随着信息系统在各行各业的普及，企业决策越来越依赖于信息系统提供的数据，这也导致对信息系统安全稳定运行的要求越来越高。而传统网管和业务网管对于中小型传统行业来说，主要存在以下几个问题：功能复杂度高、初期建设成本大、需要配备专业运维团队和功能扩展局限性大。

发明内容

本发明旨在提供一种轻量化、低成本、免维护的基于云平台可弹性调度的网络和业务监控系统。

为实现上述技术目的，本发明采用以下技术方案，一种基于云平台可弹性调度的网络和业务监控系统，包括云端模块和企业端模块，云端模块通过其云监控平台接入网关和企业端模块的企业监控系统出口网关之间建立VPN（虚拟专用网络）进行信息交流，云端模块包括用户管理模块、信息发布平台、告警管理模块、配置管理模块、报表管理模块、组件池模块、采集服务模块以及数据仓库模块，上述用户管理模块、配置管理模块和采集服务模块连接云监控平台接入网关，通过该网关与企业端的各模块进行信息交流，云端模块的各模块具体包括:用户管理模块，通过云监控平台接入网关进行用户接入控制，主要分为客户管理模块和系统用户管理模块两个部分，客户管理模块是对接入云监控管理平台的用户进行资料维护、权限配置以及服务协议信息的维护，系统用户管理模块是对于需要操作和维护云监控系统用户的账号、权限的维护和管理，用户管理模块连接组件池模块、数据仓库模块和信息发布平台，用户管理模块通过信息发布平台发布权限控制信息，对组件池模块进行组件权限控制，并将用户及权限配置存入数据仓库模块；信息发布平台是云监控各类对外信息发布的统一管理平台，具体功能包括发布规则管理即确定信息发布的类型、时间周期、对象，具体的发布方式包括web发布、APP发布以及SMS/邮件发布；配置管理模块对企业端各服务器节点运行组件、计划调度进行配置，并将配置同步至各运行节点，包括计划配置模块、计划调度模块和配置同步模块，通过云监控平台接入网关进行计划调度和组件下发，配置管理模块连接数据仓库模块，将配置信息入库；告警管理模块包括告警规则配置模块和告警生成模块，告警规则配置模块进行告警规则的配置，告警生成模块根据告警规则对采集到的各节点数据进行分析、筛选、判断并生成格式化告警，告警管理模块连接信息发布平台，向发布平台提供告警信息；报表管理模块包括模板管理模块和报表生成模块，报表生成模块根据采集的信息和告警数据结合模板管理模块提供的格式表格生产动态报表、提供系统健康状况、发展趋势等全局统计数据及图表为客户提供决策支持，报表管理模块连接信息发布平台，向发布平台提供发布信息；组件池模块包括公用组件池模块和私有组件池模块，系统中的所有组件均在云端进行统一管理和集中维护，配置管理模块根据需求到组件池获取组件内容并同步到企业端模块的相应服务器节点，公用组件池模块是指可以标准化，适用各种类型服务器节点的组件集合，私有组件池模块是指非标准化的根据客户需求定制化的组件集合，组件池模块连接配置管理模块，向配置管理模块提供组件信息；采集服务模块通过云监控平台接入网关进行监控信息和运行状态的数据采集，负责对所有监控服务器节点上报的信息进行采集和整理入库处理，采集服务模块连接配置管理模块和数据仓库模块，向配置管理模块提供运行状态数据并将原始数据存入数据仓库模块；数据仓库模块用以存储系统各类管理、配置、告警、报表和组件信息，数据仓库连接告警管理模块和报表管理模块，向告警管理模块提供告警数据和系统状态数据，向报表管理模块提供监控数据和系统状态数据；监控系统的企业端模块设有若干个服务器节点，每个服务器节点包括Agent代理机模块、运行监控模块、本地调度器模块、组件管理器模块以及本地组件池模块，上述服务器节点的Agent代理机模块和运行监控模块连接企业监控系统出口网关通过该网关与云端的各模块进行信息交流，企业端模块的各模块具体包括:Agent代理机模块，通过企业监控系统出口网关负责云端下发的各类配置调度信息、组件的接收和本地监控数据的上传，同时也负责监控运行监控器模块的状态，当运行监控器模块进程异常时进行重启修复，Agent代理机模块连接本地调度器模块和组件管理器模块，将配置调度信息下发至本地调度器模块，将组件信息下发至组件管理器模块；运行监控器模块，负责检查除本身以外其他各模块以及具体组件的运行状态，并自动修复异常进程，运行监控器模块与Agent代理机模块互相监控以避免单点失效，增强系统健壮性，运行监控器模块连接本地调度器模块和组件管理器模块并对这两个模块进行状态监控；本地调度器模块，按照下发的执行计划对本地组件的运行进行调度管理，使之按时生成所需监控数据，本地调度器模块连接组件池模块，向组件池模块发送调度执行信息；组件管理器模块，对下发的组件进行统一管理，根据下发的配置下载安装、配置及删除组件功能，组件管理器模块连接组件池模块，向组件池模块发送组件管理信息；本地组件池模块，用以存储云端下发的各类组件，具体可分为系统监控组件、网络监控组件、业务监控组件和数据库监控组件。

进一步地，公用组件池模块包括CPU信息采集组件、网络状态信息采集组件和数据库性能类的组件，私有组件池包括业务组件和客户定制化组件。

进一步地，所述本地组件池模块还包括定制化监控组件。

进一步地，企业端模块还设有本地数据库用以存储本地采集的监控信息和各进程运行状态信息，本地数据库连接运行监控器模块和组件池模块，运行监控器模块将状态监控数据存入本地数据库，组件池模块将运行状态数据存入本地数据库。

本发明提出基于云平台集中监控告警，集中配置下发，完全托管的网络和业务监控系统，主要有以下特点：1）云平台集中管控，后端专业团队服务；2）远程调度下发，依需部署；3）功能扩展灵活，短信，SMS，APP随时随地掌握系统运行状态；本发明的设计方案亮点首先在于实现了监控组件，运行计划和配置的云端集中管理，集中下发，极大的简化了本地管理和配置复杂度，其次在于组件的集中化管理，配合专业的云端维护团队，以及规模化的企业应用，使得开发和运维成本降至极低水平，企业无需花费高昂费用即可得到专业的维护服务，另外，本发明可以广泛用于为社会提供公共运维服务，企业仅需几百元的年使用费即可获得满足其需要的运维监控服务，同时极低的费用成本有助于快速实现产品的规模化应用，从而形成企业客户和平台运营者互惠互利，互相促进的良性循环，平台的高可扩展性对于有特殊需求的客户可以提供快速组件定制化开发服务并通过弹性化的架构设计实现自动远端部署。

附图说明

图1为本发明的模块示意图。

具体实施方式

下面详细描述本发明的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本发明，而不能理解为对本发明的限制。

在本发明的描述中，除非另有规定和限定，需要说明的是，术语“安装”、“相连”、“连接”应做广义理解，例如，可以是机械连接或电连接，也可以是两个元件内部的连通，可以是直接相连，也可以通过中间媒介间接相连。对于本领域的普通技术人员而言，可以根据具体情况理解上述术语的具体含义。

下面参照图1描述根据本发明实施例的一种基于云平台可弹性调度的网络和业务监控系统，包括云端模块和企业端模块，云端模块通过其云监控平台接入网关和企业端模块的企业监控系统出口网关之间建立VPN（虚拟专用网络）进行信息交流，云端模块包括用户管理模块、信息发布平台、告警管理模块、配置管理模块、报表管理模块、组件池模块、采集服务模块以及数据仓库模块，上述用户管理模块、配置管理模块和采集服务模块连接云监控平台接入网关，通过该网关与企业端的各模块进行信息交流，云端模块的各模块具体包括:用户管理模块，通过云监控平台接入网关进行用户接入控制，主要分为客户管理模块和系统用户管理模块两个部分，客户管理模块是对接入云监控管理平台的用户进行资料维护、权限配置以及服务协议信息的维护，系统用户管理模块是对于需要操作和维护云监控系统用户的账号、权限的维护和管理，用户管理模块连接组件池模块、数据仓库模块和信息发布平台，用户管理模块通过信息发布平台发布权限控制信息，对组件池模块进行组件权限控制，并将用户及权限配置存入数据仓库模块；信息发布平台是云监控各类对外信息发布的统一管理平台，具体功能包括发布规则管理即确定信息发布的类型、时间周期、对象，具体的发布方式包括web发布、APP发布以及SMS/邮件发布；配置管理模块对企业端各服务器节点运行组件、计划调度进行配置，并将配置同步至各运行节点，包括计划配置模块、计划调度模块和配置同步模块，通过云监控平台接入网关进行计划调度和组件下发，配置管理模块连接数据仓库模块，将配置信息入库；告警管理模块包括告警规则配置模块和告警生成模块，告警规则配置模块进行告警规则的配置，告警生成模块根据告警规则对采集到的各节点数据进行分析、筛选、判断并生成格式化告警，告警管理模块连接信息发布平台，向发布平台提供告警信息；报表管理模块包括模板管理模块和报表生成模块，报表生成模块根据采集的信息和告警数据结合模板管理模块提供的格式表格生产动态报表、提供系统健康状况、发展趋势等全局统计数据及图表为客户提供决策支持，报表管理模块连接信息发布平台，向发布平台提供发布信息；组件池模块包括公用组件池模块和私有组件池模块，系统中的所有组件均在云端进行统一管理和集中维护，配置管理模块根据需求到组件池获取组件内容并同步到企业端模块的相应服务器节点，公用组件池模块是指可以标准化，适用各种类型服务器节点的组件集合，私有组件池模块是指非标准化的根据客户需求定制化的组件集合，组件池模块连接配置管理模块，向配置管理模块提供组件信息；采集服务模块通过云监控平台接入网关进行监控信息和运行状态的数据采集，负责对所有监控服务器节点上报的信息进行采集和整理入库处理，采集服务模块连接配置管理模块和数据仓库模块，向配置管理模块提供运行状态数据并将原始数据存入数据仓库模块；数据仓库模块用以存储系统各类管理、配置、告警、报表和组件信息，数据仓库连接告警管理模块和报表管理模块，向告警管理模块提供告警数据和系统状态数据，向报表管理模块提供监控数据和系统状态数据；监控系统的企业端模块设有若干个服务器节点，每个服务器节点包括Agent代理机模块、运行监控模块、本地调度器模块、组件管理器模块以及本地组件池模块，上述服务器节点的Agent代理机模块和运行监控模块连接企业监控系统出口网关通过该网关与云端的各模块进行信息交流，企业端模块的各模块具体包括:Agent代理机模块，通过企业监控系统出口网关负责云端下发的各类配置调度信息、组件的接收和本地监控数据的上传，同时也负责监控运行监控器模块的状态，当运行监控器模块进程异常时进行重启修复，Agent代理机模块连接本地调度器模块和组件管理器模块，将配置调度信息下发至本地调度器模块，将组件信息下发至组件管理器模块；运行监控器模块，负责检查除本身以外其他各模块以及具体组件的运行状态，并自动修复异常进程，运行监控器模块与Agent代理机模块互相监控以避免单点失效，增强系统健壮性，运行监控器模块连接本地调度器模块和组件管理器模块并对这两个模块进行状态监控；本地调度器模块，按照下发的执行计划对本地组件的运行进行调度管理，使之按时生成所需监控数据，本地调度器模块连接组件池模块，向组件池模块发送调度执行信息；组件管理器模块，对下发的组件进行统一管理，根据下发的配置下载安装、配置及删除组件功能，组件管理器模块连接组件池模块，向组件池模块发送组件管理信息；本地组件池模块，用以存储云端下发的各类组件，具体可分为系统监控组件、网络监控组件、业务监控组件和数据库监控组件。

进一步地，公用组件池模块包括CPU信息采集组件、网络状态信息采集组件和数据库性能类的组件，私有组件池包括业务组件和客户定制化组件。

进一步地，所述本地组件池模块还包括定制化监控组件。

进一步地，企业端模块还设有本地数据库用以存储本地采集的监控信息和各进程运行状态信息，本地数据库连接运行监控器模块和组件池模块，运行监控器模块将状态监控数据存入本地数据库，组件池模块将运行状态数据存入本地数据库。

本发明提出基于云平台集中监控告警，集中配置下发，完全托管的网络和业务监控系统，主要有以下特点：1）云平台集中管控，后端专业团队服务；2）远程调度下发，依需部署；3）功能扩展灵活，短信，SMS，APP随时随地掌握系统运行状态；本发明的设计方案亮点首先在于实现了监控组件，运行计划和配置的云端集中管理，集中下发，极大的简化了本地管理和配置复杂度，其次在于组件的集中化管理，配合专业的云端维护团队，以及规模化的企业应用，使得开发和运维成本降至极低水平，企业无需花费高昂费用即可得到专业的维护服务，另外，本发明可以广泛用于为社会提供公共运维服务，企业仅需几百元的年使用费即可获得满足其需要的运维监控服务，同时极低的费用成本有助于快速实现产品的规模化应用，从而形成企业客户和平台运营者互惠互利，互相促进的良性循环，平台的高可扩展性对于有特殊需求的客户可以提供快速组件定制化开发服务并通过弹性化的架构设计实现自动远端部署。

在本说明书的描述中，参考术语“一个实施例”、“示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。

尽管已经示出和描述了本发明的实施例，本领域的普通技术人员可以理解：在不脱离本发明的原理和宗旨的情况下可以对这些实施例进行多种变化、修改、替换和变型，本发明的范围由权利要求及其等同物限定。

Claims (4)

1.一种基于云平台可弹性调度的网络和业务监控系统，其特征在于，包括云端模块和企业端模块，云端模块通过其云监控平台接入网关和企业端模块的企业监控系统出口网关之间建立VPN（虚拟专用网络）进行信息交流，云端模块包括用户管理模块、信息发布平台、告警管理模块、配置管理模块、报表管理模块、组件池模块、采集服务模块以及数据仓库模块，上述用户管理模块、配置管理模块和采集服务模块连接云监控平台接入网关，通过该网关与企业端的各模块进行信息交流，云端模块的各模块具体包括:用户管理模块，通过云监控平台接入网关进行用户接入控制，主要分为客户管理模块和系统用户管理模块两个部分，客户管理模块是对接入云监控管理平台的用户进行资料维护、权限配置以及服务协议信息的维护，系统用户管理模块是对于需要操作和维护云监控系统用户的账号、权限的维护和管理，用户管理模块连接组件池模块、数据仓库模块和信息发布平台，用户管理模块通过信息发布平台发布权限控制信息，对组件池模块进行组件权限控制，并将用户及权限配置存入数据仓库模块；信息发布平台是云监控各类对外信息发布的统一管理平台，具体功能包括发布规则管理即确定信息发布的类型、时间周期、对象，具体的发布方式包括web发布、APP发布以及SMS/邮件发布；配置管理模块对企业端各服务器节点运行组件、计划调度进行配置，并将配置同步至各运行节点，包括计划配置模块、计划调度模块和配置同步模块，通过云监控平台接入网关进行计划调度和组件下发，配置管理模块连接数据仓库模块，将配置信息入库；告警管理模块包括告警规则配置模块和告警生成模块，告警规则配置模块进行告警规则的配置，告警生成模块根据告警规则对采集到的各节点数据进行分析、筛选、判断并生成格式化告警，告警管理模块连接信息发布平台，向发布平台提供告警信息；报表管理模块包括模板管理模块和报表生成模块，报表生成模块根据采集的信息和告警数据结合模板管理模块提供的格式表格生产动态报表、提供系统健康状况、发展趋势等全局统计数据及图表为客户提供决策支持，报表管理模块连接信息发布平台，向发布平台提供发布信息；组件池模块包括公用组件池模块和私有组件池模块，系统中的所有组件均在云端进行统一管理和集中维护，配置管理模块根据需求到组件池获取组件内容并同步到企业端模块的相应服务器节点，公用组件池模块是指可以标准化，适用各种类型服务器节点的组件集合，私有组件池模块是指非标准化的根据客户需求定制化的组件集合，组件池模块连接配置管理模块，向配置管理模块提供组件信息；采集服务模块通过云监控平台接入网关进行监控信息和运行状态的数据采集，负责对所有监控服务器节点上报的信息进行采集和整理入库处理，采集服务模块连接配置管理模块和数据仓库模块，向配置管理模块提供运行状态数据并将原始数据存入数据仓库模块；数据仓库模块用以存储系统各类管理、配置、告警、报表和组件信息，数据仓库连接告警管理模块和报表管理模块，向告警管理模块提供告警数据和系统状态数据，向报表管理模块提供监控数据和系统状态数据；监控系统的企业端模块设有若干个服务器节点，每个服务器节点包括Agent代理机模块、运行监控模块、本地调度器模块、组件管理器模块以及本地组件池模块，上述服务器节点的Agent代理机模块和运行监控模块连接企业监控系统出口网关通过该网关与云端的各模块进行信息交流，企业端模块的各模块具体包括:Agent代理机模块，通过企业监控系统出口网关负责云端下发的各类配置调度信息、组件的接收和本地监控数据的上传，同时也负责监控运行监控器模块的状态，当运行监控器模块进程异常时进行重启修复，Agent代理机模块连接本地调度器模块和组件管理器模块，将配置调度信息下发至本地调度器模块，将组件信息下发至组件管理器模块；运行监控器模块，负责检查除本身以外其他各模块以及具体组件的运行状态，并自动修复异常进程，运行监控器模块与Agent代理机模块互相监控以避免单点失效，增强系统健壮性，运行监控器模块连接本地调度器模块和组件管理器模块并对这两个模块进行状态监控；本地调度器模块，按照下发的执行计划对本地组件的运行进行调度管理，使之按时生成所需监控数据，本地调度器模块连接组件池模块，向组件池模块发送调度执行信息；组件管理器模块，对下发的组件进行统一管理，根据下发的配置下载安装、配置及删除组件功能，组件管理器模块连接组件池模块，向组件池模块发送组件管理信息；本地组件池模块，用以存储云端下发的各类组件，具体可分为系统监控组件、网络监控组件、业务监控组件和数据库监控组件。

2.根据权利要求1所述的系统，其特征在于，公用组件池模块包括CPU信息采集组件、网络状态信息采集组件和数据库性能类的组件，私有组件池包括业务组件和客户定制化组件。

3.根据权利要求1或2所述的系统，其特征在于，所述本地组件池模块还包括定制化监控组件。

4.根据权利要求1所述的系统，其特征在于，企业端模块还设有本地数据库用以存储本地采集的监控信息和各进程运行状态信息，本地数据库连接运行监控器模块和组件池模块，运行监控器模块将状态监控数据存入本地数据库，组件池模块将运行状态数据存入本地数据库。