CN101707632A - 一种动态监控服务器集群性能并实时报警的方法 - Google Patents

Abstract

本发明公开了一种动态监控服务器集群性能并实时报警的方法，包括服务器集群，服务器均使用linux操作系统，体系结构包括数据收集层、数据分析层和数据展示层；数据收集层包括服务器集群，数据分析层包括监控服务器，数据展示层包括电子邮件或者手机短信或者报表或者图件；数据分析层的监控服务器通过网络对数据收集层的服务器进行监控，数据分析层通过网络将监控数据传输到数据展示层。本发明的一种动态监控服务器集群性能并实时报警的方法和现有技术相比，基于linux平台对服务器性能数据收集分析及展示，且可实时报警，具有获取的数据信息及时、准确、灵活方便、对服务器资源占用率低等特点。

Description

一种动态监控服务器集群性能并实时报警的方法

技术领域

本发明涉及一种服务器集群监控技术，具体地说是一种动态监控服务器集群性能并实时报警的方法。

背景技术

当前，在服务器的竞标测试中有大量的客户可能是由于目前的设备已经不能满足当前应用系统的运行而进行设备的升级换代，客户需要明确采购设备是否能够满足现有系统的运行，以及应对未来的增长趋势，这时需要评测当前服务器的性能，以便满足用户的需求。此外，系统管理员也需要实时监测上线系统的运行情况，也需要了解当前服务器的健康状况，而现在大部分的系统管理员都是采用最原始的方法，登陆到每个系统，检查应用日志，系统负载，磁盘空间等，当服务器比较多，形成服务器群集时，这种工作变的即繁琐，而又没实际意义，经常出现登陆上去系统运行正常，退出后系统又异常。

发明内容

本发明的技术任务是提供一种基于linux平台对服务器性能数据收集分析及展示，且可实时报警的一种动态监控服务器集群性能并实时报警的方法。

本发明的技术任务是按以下方式实现的，包括服务器集群，服务器均使用linux操作系统，体系结构包括数据收集层、数据分析层和数据展示层；数据收集层包括服务器集群，数据分析层包括监控服务器，数据展示层包括电子邮件或者手机短信或者报表或者图件；数据分析层的监控服务器通过网络对数据收集层的服务器进行监控，数据分析层通过网络将监控数据传输到数据展示层；首先在数据收集层，通过linux操作系统或者其他的性能抓取软件订制用户最关心的性能数据转换成文本格式，然后利用网络传输到单独的数据分析层的监控服务器上，监控服务器通过对数据的分析整理、规范化，生成便于用户易读的数据，再将数据传输到数据展示层展出，在整个测试期间，如果超出了用户自定义的阈值，系统立即报警，通知客户。

具体流程为：

(1)、在数据收集层，被监控的服务器可以有一个或者多个，他们采用定时机制，把本服务器的状态、日志等衡量服务器运行性能的数据，通过网络实时采集发送到数据分析层的监控服务器上；其中这些监控信息包括本服务器的磁盘状态、内存的使用情况，cpu的利用率，操作系统日志，以及相关的报警日志等采集到临时文件夹，然后定时提交给数据分析层的监控服务器；

(2)、数据分析层负责把数据收集层中服务器的数据做数据分析，如果有异常，则联合其他相应的设备，调用相关的接口发送信息；

(3)、数据展示层，通过公共的接口发送消息，通知最终用户，按照信息的重要程度，分为多级报警方法；对于高重要程度的信息，如磁盘空间不足，硬件错误等，采用手机短信方式；对于测试过程中的一些响应异常，有时可以忽略，一般通过电子邮件进行发送；另外的一些值的走势信息，如系统负载的走势，cpu使用情况走势等，通过报表或者图形进行展示.

为了保证监控过程中，数据收集层可能会出现当机情况，数据收集层采用主机HA策略，即服务器集群采用双机集群系统。

数据分析层的接口均为标准接口定义体系。可以实现各个服务器之间的信息同步，可以避免某个服务器脚本位置，监控信息发生变化时能动态灵活的同步到其他服务器上。

linux是一套免费使用和自由传播的类Unix操作系统，它主要用于基于x86系列CPU的计算机上。linux的基本思想有两点：第一，一切都是文件；第二，每个软件都有确定的用途。其中第一条详细来讲就是系统中的所有都归结为一个文件，包括命令、硬件和软件设备、操作系统、进程等等对于操作系统内核而言，都被视为拥有各自特性或类型的文件。linux提供了包括操作系统、数据库、网站服务器、动态网页的一整套网站架设支持。

HA——双机集群系统的简称；是linux系列的高可靠性的服务器集群系统解决方案。HA能够自动检测系统的故障。同时，一旦发现计算机出现故障，HA将把该计算机上的所有进程转移到备份计算机上，从而为客户提供不间断的服务。HA拥有多种冗余模式，其中包括双机在线待机模式、双机就绪模式及三机模式。所有的模式都提供了对各种备份资源-如文件系统、数据库、网络IP地址、系统进程、SCSI设备及NFS-的支持。

本发明的一种动态监控服务器集群性能并实时报警的方法具有以下优点：

1、能够实时监控服务器的运行状况，并且能通过订制策略来及时准确的反馈自己想要的信息，对被测服务器性能的影响几乎可以忽略，同时还能动态进行灵活的增加或减少主机节点；

2、获取的数据信息及时，准确；

3、灵活方便，对服务器资源占用率低，通过引进中间服务器进行分析，可以减轻被测服务器的资源利用，同时采用文件格式作为传输文件，大大降低网络带宽；

4、监控质量好，可以利用双检验法，进行多级检验，提高监控质量；因而，具有很好的推广使用价值。

附图说明

下面结合附图对本发明进一步说明。

附图1为一种动态监控服务器集群性能并实时报警的方法的体系架构图。

具体实施方式

参照说明书附图和具体实施例对本发明的一种动态监控服务器集群性能并实时报警的方法作以下详细地说明。

实施例：

本发明的一种动态监控服务器集群性能并实时报警的方法，包括服务器集群，服务器均使用linux操作系统，体系结构包括数据收集层、数据分析层和数据展示层；数据收集层包括服务器集群，数据分析层包括监控服务器，数据展示层包括电子邮件或者手机短信或者报表或者图件；数据分析层的监控服务器通过网络对数据收集层的服务器进行监控，数据分析层通过网络将监控数据传输到数据展示层；首先在数据收集层，通过linux操作系统或者其他的性能抓取软件订制用户最关心的性能数据转换成文本格式，然后利用网络传输到单独的数据分析层的监控服务器上，监控服务器通过对数据的分析整理、规范化，生成便于用户易读的数据，再将数据传输到数据展示层展出，在整个测试期间，如果超出了用户自定义的阈值，系统立即报警，通知客户.

具体流程为：

(1)、在数据收集层，被监控的服务器可以有一个或者多个，他们采用定时机制，把本服务器的状态、日志等衡量服务器运行性能的数据，通过网络实时采集发送到数据分析层的监控服务器上；其中这些监控信息包括本服务器的磁盘状态、内存的使用情况，cpu的利用率，操作系统日志，以及相关的报警日志等采集到临时文件夹，然后定时提交给数据分析层的监控服务器；

(2)、数据分析层负责把数据收集层中服务器的数据做数据分析，如果有异常，则联合其他相应的设备，调用相关的接口发送信息；

(3)、数据展示层，通过公共的接口发送消息，通知最终用户，按照信息的重要程度，分为多级报警方法；对于高重要程度的信息，如磁盘空间不足，硬件错误等，采用手机短信方式；对于测试过程中的一些响应异常，有时可以忽略，一般通过电子邮件进行发送；另外的一些值的走势信息，如系统负载的走势，cpu使用情况走势等，通过报表或者图形进行展示。

为了保证监控过程中，数据收集层可能会出现当机情况，数据收集层采用主机HA策略，即服务器集群采用双机集群系统。

数据分析层的接口均为标准接口定义体系。可以实现各个服务器之间的信息同步，可以避免某个服务器脚本位置，监控信息发生变化时能动态灵活的同步到其他服务器上。

数据分析层的接口定义伪代码如下：

1、数据收集层：

server_info.sh

##功能：抓取系统底层的主机信息

1)、Define hostname，oracle_base……定义环境变量；

2)、Moniter_api.sh调用监控服务器端口并把这个信息写到配置文件中

3)、Uptime，top……获取系统信息命令

4)、scp拷贝到监控机器上

2、数据分析层：

Moniter_api.sh

##功能：根据输入参数信息判断是发送短信还是发送邮件通知用户

If[输入参数＝＝mail]then

         进行邮件处理；

elif[输入参数＝＝mobile]then

         进行短信处理；

else

   进行数据文件拷贝；

   fi

   fi

 Data_Analy_sh

 ##数据分析功能：

1)定义环境变量，设置预警阈值；

2)循环监测个被测试服务器的某项指标；

While read服务器列表

Do

   进行信息处理；

If超出阈值then

   调用Moniter_api.sh接口；

if

done

3、数据展示层：

Display_result.sh

##成果展示，主要利用历史数据进行预测；

读入历史数据，调用开源代码Nagios，进行显示。

除说明书所述的技术特征外，均为本专业技术人员的已知技术。

Claims (4)

1.一种动态监控服务器集群性能并实时报警的方法，包括服务器集群，服务器均使用linux操作系统，其特征在于体系结构包括数据收集层、数据分析层和数据展示层；数据收集层包括服务器集群，数据分析层包括监控服务器，数据展示层包括电子邮件或者手机短信或者报表或者图件；数据分析层的监控服务器通过网络对数据收集层的服务器进行监控，数据分析层通过网络将监控数据传输到数据展示层；首先在数据收集层，通过linux操作系统或者其他的性能抓取软件订制用户最关心的性能数据转换成文本格式，然后利用网络传输到单独的数据分析层的监控服务器上，监控服务器通过对数据的分析整理、规范化，生成便于用户易读的数据，再将数据传输到数据展示层展出，在整个测试期间，如果超出了用户自定义的阈值，系统立即报警，通知客户。

2.根据权利要求1所述的一种动态监控服务器集群性能并实时报警的方法，其特征在于具体流程为：

(1)、在数据收集层，被监控的服务器可以有一个或者多个，他们采用定时机制，把本服务器的状态、日志等衡量服务器运行性能的数据，通过网络实时采集发送到数据分析层的监控服务器上；其中这些监控信息包括本服务器的磁盘状态、内存的使用情况，cpu的利用率，操作系统日志，以及相关的报警日志等采集到临时文件夹，然后定时提交给数据分析层的监控服务器；

(2)、数据分析层负责把数据收集层中服务器的数据做数据分析，如果有异常，则联合其他相应的设备，调用相关的接口发送信息；

(3)、数据展示层，通过公共的接口发送消息，通知最终用户，按照信息的重要程度，分为多级报警方法，对于高重要程度的信息采用手机短信方式，对于测试过程中的一些响应异常，通过电子邮件进行发送，另外的一些值的走势信息，通过报表或者图形进行展示。

3.根据权利要求1所述的一种动态监控服务器集群性能并实时报警的方法，其特征在于数据收集层采用主机HA策略，即服务器集群采用双机集群系统。

4.根据权利要求1所述的一种动态监控服务器集群性能并实时报警的方法，其特征在于数据分析层的接口均为标准接口定义体系。

Images