CN107124318A - 一种告警转发方法和装置 - Google Patents

Abstract

本发明实施例公开了一种告警转发方法，该方法包括：获取被监控机的状态；当根据被监控机的状态确定当前被监控机故障时，将与该故障对应的告警信息加入预设的消息队列中；根据当前监控机的状态从消息队列中获取告警信息进行转发。本发明实施例还公开了一种告警转发装置。通过本发明实施例方案，能够在监控资源增多的情况下，保证云海OS的正常运行。

Description

一种告警转发方法和装置

技术领域

本发明实施例涉及计算机技术领域，尤其涉及一种告警转发方法和装置。

背景技术

随着浪潮云海OS(Operating System，操作系统)管理系统应用的广泛，监控资源的增多，产生的告警数量逐步增多，转发环境也逐步复杂(邮件、短信等)。传统的告警转发方法，在每次系统产生告警时，直接调用转发接口将告警通过邮件、短信等转发给用户，或者通过一定的协议转发给第三方平台。特别是当我们添加大量的服务器(如10000台)，每台机器按照100个监控项，假设一种极端情况，1000000个监控项同时产生告警，如果这时候不做任何处理进行告警转发(在某银行基于32G内存、32核CPU、SSD的监控机上出现过类似情况)，这种情况对于云海是灾难性的，直接导致云海OS宕机，严重影响系统的稳定性，我们的监控机大部分时间是低负载运行，因为瞬时的高并发需求造成宕机，这存在巨大问题。

发明内容

为了解决上述问题，本发明实施例提出了一种告警转发方法和装置，能够在监控资源增多的情况下，保证云海OS的正常运行。

为了达到上述目的，本发明实施例提出了一种告警转发方法，该方法包括：

获取被监控机的状态；

当根据被监控机的状态确定当前被监控机故障时，将与该故障对应的告警信息加入预设的消息队列中；

根据当前监控机的状态从消息队列中获取告警信息进行转发。

可选地，该方法还包括：在将与故障对应的告警信息加入预设的消息队列中以后，根据监控机的状态控制从消息队列中获取告警信息的速度。

可选地，监控机的状态包括：监控机的负载情况和性能。

可选地，根据当前监控机的状态从消息队列中获取告警信息进行转发包括：

当监控机的负载小于预设的负载阈值，以及监控机的性能参数符合预设的参数指标时，从消息队列中获取告警信息进行转发。

可选地，该方法还包括：

当监控机的负载大于或等于预设的负载阈值，和/或监控机的性能参数不符合预设的参数指标时，暂停从消息队列中获取告警信息进行转发，并等待预设的时间长度以后再次对监控机的负载情况和性能进行判断。

可选地，根据监控机的负载情况和性能控制从消息队列中获取告警信息的速度包括：

当监控机的负载小于预设的负载阈值，以及监控机的性能参数符合预设的参数指标时，加快获取告警信息的速度；

当监控机的负载大于或等于负载阈值，和/或监控机的性能参数不符合预设的参数指标时，减缓获取告警信息的速度。

为了达到上述目的，本发明实施例还提出了一种告警转发装置，该装置包括：第一获取模块、加入模块和第二获取模块。

第一获取模块，用于获取被监控机的状态。

加入模块，用于当根据被监控机的状态确定当前被监控机故障时，将与故障对应的告警信息加入预设的消息队列中。

第二获取模块，用于根据当前监控机的状态从消息队列中获取告警信息进行转发。

可选地，该装置还包括：控制模块。

控制模块，用于在加入模块将与故障对应的告警信息加入预设的消息队列中以后，根据监控机的状态控制从消息队列中获取告警信息的速度。

可选地，监控机的状态包括：监控机的负载情况和性能。

可选地，第二获取模块根据当前监控机的状态从消息队列中获取告警信息进行转发包括：

当监控机的负载小于预设的负载阈值，以及监控机的性能参数符合预设的参数指标时，从消息队列中获取告警信息进行转发。

可选地，该装置还包括：停止模块；

停止模块，用于当监控机的负载大于或等于预设的负载阈值，和/或监控机的性能参数不符合预设的参数指标时，暂停从消息队列中获取告警信息进行转发，并等待预设的时间长度以后再次对监控机的负载情况和性能进行判断。

可选地，控制模块根据监控机的负载情况和性能控制从消息队列中获取告警信息的速度包括：

当监控机的负载小于预设的负载阈值，以及监控机的性能参数符合预设的参数指标时，加快获取告警信息的速度；

当监控机的负载大于或等于负载阈值，和/或监控机的性能参数不符合预设的参数指标时，减缓获取告警信息的速度。

本发明实施例方案包括：获取被监控机的状态；当根据被监控机的状态确定当前被监控机故障时，将与该故障对应的告警信息加入预设的消息队列中；根据当前监控机的状态从消息队列中获取告警信息进行转发。通过本发明实施例方案，能够在监控资源增多的情况下，保证云海OS的正常运行。

附图说明

下面对本发明实施例中的附图进行说明，实施例中的附图是用于对本发明实施例的进一步理解，与说明书一起用于解释本发明实施例，并不构成对本发明实施例保护范围的限制。

图1为本发明实施例的告警转发方法流程图；

图2为本发明实施例的告警转发方法示意图；

图3为本发明实施例的告警装置组成框图。

具体实施方式

为了便于本领域技术人员的理解，下面结合附图对本发明实施例作进一步的描述，并不能用来限制本发明实施例的保护范围。

为了达到上述目的，本发明实施例提出了一种告警转发方法，如图1图、2所示，该方法包括S101-S103：

S101、获取被监控机的状态。

在本发明实施例中，当前存在的实时进行告警转发机制，如果产生告警的检测项过多，由于通过邮件、短信、其他协议进行告警转发是耗时操作，所以有可能造成同一时刻处理中的告警数过大，超过了监控机的系统负载，直接造成我们的系统宕机。基于上述问题，本发明实施例方案提出了一种新型的告警转发方法，在系统中同一时刻产生大量的告警需要转发时，如果当前系统负载过高，将需要转发的告警放入消息队列(如Kafka、MemeryCached)中，定时根据系统的状态，从消息队列中读取待转发的告警，保证同一时刻处理的告警转发数量不会太大。

在本发明实施例中，在实施本发明实施例之前，需要首先根据预设协议获取各个被监控机的状态，并根据各个被监控机的状态确定当前被监控机是否出现故障。例如，如果速度传感器检测出某一被监控机的当前风扇转速为2500转/分，而预设的额定转速为2000转/分，则可以判定该被监控机的风扇当前状态为故障；如果该被监控机的当前风扇转速为1800转/分，则可以判定该被监控机的风扇当前状态为正常。

S102、当根据被监控机的状态确定当前被监控机故障时，将与该故障对应的告警信息加入预设的消息队列中。

在本发明实施例中，当根据被监控机的状态确定当前被监控机故障时，监控机会根据该故障情况生成相应的告警信息，例如，“1号被监控机的风扇故障”。

在本发明实施例中，为了避免在同一时间内生成多个告警信息，从而造成监控机负载过重，对于生成的告警信息可以首先存放在预设的消息队列内，以对这些告警信息进行暂存，从而使得各个告警信息在可控状态下进行转发。

在本发明实施例中，对于各个告警信息在消息队列中的排放方式可以采用先进先出的方式排放，以便于后续对告警信息进行转法时能够按照告警信息产生的时间顺序进行转发，从而避免因告警延迟太久，使得维护人员未能及时清理故障而造成严重后果。

S103、根据当前监控机的状态从消息队列中获取告警信息进行转发。

在本发明实施例中，在将告警信息放入消息队列以后，便可以有针对性地对其中的告警信息进行转发了。例如，可以根据当前监控机的状态确定是否从消息队列中调取告警信息进行转发。

可选地，监控机的状态可以包括：监控机的负载情况和性能。

在本发明实施例中，如果当前监控机的负载过大，需要转发的告警信息过多，为了避免发生宕机情况，可以暂时不从消息队列中调取告警信息；如果当前监控机的负载较小，需要转发的告警信息较少，为了尽快将告警信息转发出去，可以从消息队列中调取告警信息进行转发。另外，监控机的性能也是决定告警信息转发快慢的重要因素。如果当前监控机的性能差，如内存小、处理速度慢，则说明当前监控机转发告警信息的速度也慢，反之，如果当前监控机的性能好，如内存大、处理速度快，则说明当前监控机转发告警信息的速度也快。因此，根据监控机的状态从消息队列中获取告警信息进行转发可以有效避免因监控机负载过重而造成监控机宕机的现象发生，保证云海OS的正常运行。

在本发明实施例中，为了确定当前监控机的负载情况，可以实时检测或周期性检测监控机的负载。

可选地，检测监控机的负载可以包括：检测当前已调出的等待转发的告警信息的数量。

在本发明实施例中，监控机的负载状况可以通过等待转发的告警信息的数量获得，数量越多，说明负载越大；数量越少，说明负载越小。

在本发明实施例中，可以通过预设的计数器对调出的等待转发的告警信息进行计数，等待的告警信息的数量每增加一则计数值加1，等待的告警信息被转发一个则减一，并通过计数器的累计数字确定等待的告警信息的总数量。

可选地，根据当前监控机的状态从消息队列中获取告警信息进行转发包括：

当监控机的负载小于预设的负载阈值，以及监控机的性能参数符合预设的参数指标时，从消息队列中获取告警信息进行转发。

在本发明实施例中，在根据当前监控机的状态从消息队列中获取告警信息进行转发之前，还需要预先设置一个负载阈值，以根据该负载阈值确定当前负载是否过大。

可选地，该方法还包括：检测监控机的配置和性能，根据监控机的配置和性能确定负载阈值。

在本发明实施例中，由于不同的监控机的配置和性能不同，则其处理故障告警信息的速度也不同，因此，可以根据不同监控机的配置和性能确定于当前监控机相应的负载阈值。例如，对于配置和性能较好的监控机(如64G内存、64核CPU、SSD)，该负载数值可以设置的较大，对于配置和性能较差的监控机(32G内存、32核CPU、SSD)，该负载数值可以设置的较小。在本发明实施例中，对于负载数值的具体数值不做限制。

在本发明实施例中，通过上述方案确定出负载阈值以后，便可以根据当前等待的告警信息的数量以及该负载阈值确定出当前负载的大小。具体地，当监控机的负载小于预设的负载阈值时，可以确定当前监控机的负载较小，当监控机的负载大于或等于预设的负载阈值时，可以确定当前监控机的负载较大。

在本发明实施例中，还可以对当前监控机的性能进行检测，以确定当前监控机是否处于正常状态，甚至最佳状态，以确保当前监控机能够对等待的告警信息进行转发。

在本发明实施例中，对监控机性能的检测可以通过预设的参数标准，将监控机的各个性能参数与该性能标准相比较，如果符合性能标准，可以确定其性能良好，如果不符合性能标准，则可以确定其性能较差。另外，针对多个性能参数的评定，可以对多个性能参数进行加权计算，以获得一个性能评定值，根据该性能评定值的高低来确定监控机性能的好坏。在具体实施中，如果某一项性能参数不符合要求，可以降低其加权系数，如果某一项性能参数已经降低到不符合标准时，则可以直接确定当前监控机性能较差。

在本发明实施例中，通过上述内容对监控机的负载和性能进行判断以后，便可以进一步根据该负载和性能确定是否从消息队列中获取告警信息进行转发了。

可选地，根据当前监控机的状态从消息队列中获取告警信息进行转发可以包括：

当监控机的负载小于预设的负载阈值，以及监控机的性能参数符合预设的参数指标时，从消息队列中获取告警信息进行转发。

在本发明实施例中，当监控机的负载小于预设的负载阈值时，说明监控机未处于繁忙状态，当监控机的性能参数符合预设的参数指标时，说明当前监控机的性能良好，当监控机具备上述两个条件时，说明当前监控机具有良好的信息处理能力，便可以继续从消息队列中获取告警信息进行转发。

可选地，该方法还可以包括：

当监控机的负载大于或等于预设的负载阈值，和/或监控机的性能参数不符合预设的参数指标时，暂停从消息队列中获取告警信息进行转发，并等待预设的时间长度以后再次对监控机的负载情况和性能进行判断。

在本发明实施例中，当监控机的负载大于或等于预设的负载阈值时，说明监控机正处于繁忙状态，当监控机的性能参数不符合预设的参数指标时，说明当前监控机的性能不好，当监控机具备上述两个条件中的任何一个或多个时，说明当前监控机不具有良好的信息处理能力，可以暂停从消息队列中获取告警信息进行转发。另外，为了不耽误告警信息的转发时效，可以实时地或周期性地对监控机的负载情况和性能进行再次检测，以在监控机状态良好时可以及时对告警信息进行转发。

可选地，该方法还可以包括：在将与故障对应的告警信息加入预设的消息队列中以后，根据监控机的状态控制从消息队列中获取告警信息的速度。

在本发明实施例中，为了对告警信息进行可控化的转发，以避免因监控机的负载过重和/或性能不好而发生宕机现象，可以根据监控机的状态控制从消息队列中获取告警信息的速度。

可选地，根据监控机的负载情况和性能控制从消息队列中获取告警信息的速度可以包括：

当监控机的负载小于预设的负载阈值，以及监控机的性能参数符合预设的参数指标时，加快获取告警信息的速度；

当监控机的负载大于或等于负载阈值，和/或监控机的性能参数不符合预设的参数指标时，减缓获取告警信息的速度。

在本发明实施例中，当监控机的负载小于预设的负载阈值时，说明监控机未处于繁忙状态，当监控机的性能参数符合预设的参数指标时，说明当前监控机的性能良好，当监控机具备上述两个条件时，说明当前监控机具有良好的信息处理能力，便可以继续从消息队列中获取告警信息进行转发，并可以加快获取告警信息的速度，并根据具体的负载量和性能参数来确定加快的幅度；例如，如果具体的负载量非常小，可以以较大的幅度加快获取告警信息的速度；如果具体的负载量较小，可以以较小的幅度加快获取告警信息的速度。

在本发明实施例中，当监控机的负载大于或等于预设的负载阈值时，说明监控机正处于繁忙状态，当监控机的性能参数不符合预设的参数指标时，说明当前监控机的性能不好，当监控机具备上述两个条件中的任何一个时，说明当前监控机不具有良好的信息处理能力，此时可以不停止从消息队列中获取告警信息，仅是减缓获取告警信息的速度。并可以根据具体的负载量和性能参数来确定减缓的幅度；例如，如果具体的负载量非常大，可以以较大的幅度减缓获取告警信息的速度；如果具体的负载量较大，可以以较小的幅度减缓获取告警信息的速度。

可选地，该方法还可以包括：通过短信、邮件和/或第三方平台转发故障告警信息。

在本发明实施例中，可以通过当前已有的任何通信方式进行告警信息的转发，例如，包括但不限于：短信、邮件、广播以及第三方平台。例如，还可以通过现有的微信、QQ等多种方式进行转发。

为了达到上述目的，本发明实施例还提出了一种告警转发装置1，如图3所示，需要说明的时，上述的方法实施例中的任何实施例均适用于该装置实施例中，在此不再一一赘述。该装置包括：第一获取模块11、加入模块12和第二获取模块13。

第一获取模块11，用于获取被监控机的状态。

加入模块12，用于当根据被监控机的状态确定当前被监控机故障时，将与故障对应的告警信息加入预设的消息队列中。

第二获取模块13，用于根据当前监控机的状态从消息队列中获取告警信息进行转发。

可选地，该装置还包括：控制模块14。

控制模块14，用于在加入模块将与故障对应的告警信息加入预设的消息队列中以后，根据监控机的状态控制从消息队列中获取告警信息的速度。

可选地，监控机的状态包括：监控机的负载情况和性能。

可选地，根据当前监控机的状态从消息队列中获取告警信息进行转发包括：

当监控机的负载小于预设的负载阈值，以及监控机的性能参数符合预设的参数指标时，从消息队列中获取告警信息进行转发。

可选地，该装置还包括：停止模块15；

停止模块，用于当监控机的负载大于或等于预设的负载阈值，和/或监控机的性能参数不符合预设的参数指标时，暂停从消息队列中获取告警信息进行转发，并等待预设的时间长度以后再次对监控机的负载情况和性能进行判断。

可选地，控制模块根据监控机的负载情况和性能控制从消息队列中获取告警信息的速度包括：

当监控机的负载小于预设的负载阈值，以及监控机的性能参数符合预设的参数指标时，加快获取告警信息的速度；

当监控机的负载大于或等于负载阈值，和/或监控机的性能参数不符合预设的参数指标时，减缓获取告警信息的速度。

本发明实施例方案包括：获取被监控机的状态；当根据被监控机的状态确定当前被监控机故障时，将与该故障对应的告警信息加入预设的消息队列中；根据当前监控机的状态从消息队列中获取告警信息进行转发。通过本发明实施例方案，能够在监控资源增多的情况下，保证云海OS的正常运行。

需要说明的是，以上所述的实施例仅是为了便于本领域的技术人员理解而已，并不用于限制本发明实施例的保护范围，在不脱离本发明实施例的发明构思的前提下，本领域技术人员对本发明实施例所做出的任何显而易见的替换和改进等均在本发明实施例的保护范围之内。

Claims (10)

1.一种告警转发方法，其特征在于，所述方法包括：

获取被监控机的状态；

当根据所述被监控机的状态确定当前被监控机故障时，将与所述故障对应的告警信息加入预设的消息队列中；

根据当前监控机的状态从所述消息队列中获取告警信息进行转发。

2.如权利要求1所述的告警转发方法，其特征在于，所述方法还包括：在将与所述故障对应的告警信息加入预设的消息队列中以后，根据所述监控机的状态控制从所述消息队列中获取告警信息的速度。

3.如权利要求1或2所述的告警转发方法，其特征在于，所述监控机的状态包括：所述监控机的负载情况和性能。

4.如权利要求3所述的告警转发方法，其特征在于，所述根据当前监控机的状态从所述消息队列中获取告警信息进行转发包括：

当所述监控机的负载小于预设的负载阈值，以及所述监控机的性能参数符合预设的参数指标时，从所述消息队列中获取告警信息进行转发。

5.如权利要求4所述的告警转发方法，其特征在于，所述方法还包括：

当所述监控机的负载大于或等于预设的负载阈值，和/或所述监控机的性能参数不符合预设的参数指标时，暂停从所述消息队列中获取告警信息进行转发，并等待预设的时间长度以后再次对所述监控机的负载情况和性能进行判断。

6.如权利要求3所述的告警转发方法，其特征在于，所述根据所述监控机的负载情况和性能控制从所述消息队列中获取告警信息的速度包括：

当所述监控机的负载小于预设的负载阈值，以及所述监控机的性能参数符合预设的参数指标时，加快获取告警信息的速度；

当所述监控机的负载大于或等于所述负载阈值，和/或所述监控机的性能参数不符合预设的参数指标时，减缓获取告警信息的速度。

7.一种告警转发装置，其特征在于，所述装置包括：第一获取模块、加入模块和第二获取模块；

所述第一获取模块，用于获取被监控机的状态；

所述加入模块，用于当根据所述被监控机的状态确定当前被监控机故障时，将与所述故障对应的告警信息加入预设的消息队列中；

所述第二获取模块，用于根据当前监控机的状态从所述消息队列中获取告警信息进行转发。

8.如权利要求7所述的告警转发装置，其特征在于，所述装置还包括：控制模块；

所述控制模块，用于在所述加入模块将与所述故障对应的告警信息加入预设的消息队列中以后，根据所述监控机的状态控制从所述消息队列中获取告警信息的速度。

9.如权利要求7或8所述的告警转发装置，其特征在于，所述监控机的状态包括：所述监控机的负载情况和性能。

10.如权利要求9所述的告警转发装置，其特征在于，

所述第二获取模块根据当前监控机的状态从所述消息队列中获取告警信息进行转发包括：

当所述监控机的负载小于预设的负载阈值，以及所述监控机的性能参数符合预设的参数指标时，从所述消息队列中获取告警信息进行转发；

所述控制模块根据所述监控机的负载情况和性能控制从所述消息队列中获取告警信息的速度包括：

当所述监控机的负载小于预设的负载阈值，以及所述监控机的性能参数符合预设的参数指标时，加快获取告警信息的速度；

当所述监控机的负载大于或等于所述负载阈值，和/或所述监控机的性能参数不符合预设的参数指标时，减缓获取告警信息的速度。