CN111209165A - 一种基于通道的两级监控处理方法 - Google Patents

Abstract

本发明涉及一种基于通道的两级监控处理方法，步骤S1：动态设置截获定制表；步骤S2：获取业务特征并标注监控基线；步骤S3：进行业务特征比较以截获业务；步骤S4：获取截获业务的日志信息；步骤S5：基于监控基线进行业务实时监控；步骤S6：监控平台基于截获定制表进行全面监控。本发明能够进行基于通道的实时监控和基于平台的全局监控，通过两级监控来进行不同层次和不同规范的预警；通过定制表和基线的设置、两级监控的方式，层次化的利用不同节点的日志信息；通过监控基线的设置，满足了多角色监控的需求，为多维度分析提供了支持。

Description

一种基于通道的两级监控处理方法

【技术领域】

本发明属于计算机技术领域，尤其涉及一种基于通道的两级监控处理方法。

【背景技术】

随着互联网技术普及和信息化技术不断提高，社会上各个领域对信息化要求越来越高，处理的数据也不断增加。云计算平台把庞大的基础设施、数据存储、各种平台、软件组成相互共享、协作的资源池，并在此基础上抽象出层次化服务。信息监控已经逐渐成为金融、交通、商业、电力、公安、海关、国防乃至住宅区等领域的一项重要的组成部分。此外，无论是服务器、数据库、应用文件还是网络设备都会产生很多日志信息，这些日志信息对于系统管理员来说，查看起来比较繁重，并且无法完成各个日志之间的关联。对于专业知识比较匮乏的管理员来说，日志分析无从下手，更加不能够完成攻击的发现，日志本身的利用也缺乏层次性。常见的对日志的利用方式就是不加区分的针对单个节点的日志进行统一性的整体分析。本发明能够进行基于通道的实时监控和基于平台的全局监控，通过两级监控来进行不同层次和不同规范的预警；通过定制表和基线的设置、两级监控的方式，层次化的利用不同节点的日志信息；能够基于监控需求进行业务的拦截，从而降低监控消耗，通过对同一业务的监控来满足不同的监控需求，联动调整监控需求和监控基线，从而能够适应性的进行监控范围和目标的调整的同时；通过监控基线的设置，满足了多角色监控的需求，为多维度分析提供了支持。

【发明内容】

为了解决现有技术中的上述问题，本发明提出了一种基于通道的两级监控处理方法，所述方法包含：

步骤S1：动态设置截获定制表；

步骤S2：获取业务特征并标注监控基线；

步骤S3：进行业务特征比较以截获业务；

步骤S4：获取截获业务的日志信息；

步骤S5：基于监控基线进行业务实时监控；

步骤S6：基于截获定制表进行全面监控。

进一步的，所述步骤S1具体为：在进行业务处理的过程中，根据截获定制表确定所述业务是否需要被截获。

进一步的，截获定制表中保存和所需截获业务相关的包括通道和特定业务特征的记录。

进一步的，每条记录对应一条监控指令。

进一步的，特定业务特征为业务特征中的一个或多个。

进一步的，在通道或者通道所在计算装置进行以及监控，在监控平台执行二级监控。

进一步的，所述监控基线为监控平台向各个通道发送的。

进一步的，监控基线为一或者多条。

进一步的，为不同的监控目标设置不同的监控基线。

进一步的，所述基于业务特征确定业务是否属于监控基线的监控目标，具体为：如果一业务的业务特征中包含一条监控基线中的所有特征，则确定所述业务为监控目标。

本发明的有益效果包括：能够进行基于通道的实时监控和基于平台的全局监控，通过两级监控来进行不同层次和不同规范的预警；通过定制表和基线的设置、两级监控的方式，层次化的利用不同节点的日志信息；能够基于监控需求进行业务的拦截，从而降低监控消耗，通过对同一业务的监控来满足不同的监控需求，联动调整监控需求和监控基线，从而能够适应性的进行监控范围和目标的调整的同时；通过监控基线的设置，满足了多角色监控的需求，为多维度分析提供了支持。

【附图说明】

此处所说明的附图是用来提供对本发明的进一步理解，构成本申请的一部分，但并不构成对本发明的不当限定，在附图中：

图1为本发明的基于通道的两级监控处理方法示意图。

【具体实施方式】

下面将结合附图以及具体实施例来详细说明本发明，其中的示意性实施例以及说明仅用来解释本发明，但并不作为对本发明的限定。

对本发明所应用的一种基于通道的两级监控处理方法进行详细说明，如附图1所示，所述方法包含：

步骤S1：动态设置截获定制表；具体的：在进行业务处理的过程中，根据截获定制表确定所述业务是否需要被截获；其中：截获定制表中保存和所需截获业务相关的包括通道/端口类型和特定业务特征的记录；每条记录对应一条监控指令；

特定业务特征为业务特征中的一个或多个；通道为处理通道或者路由通道，用于进行业务的处理和/或路由，包含了业务的处理逻辑和相关软硬件资源，端口用于进行业务数据的通信；

对于不同的监控指令，监控平台均需要进行监控信息的汇总，监控平台向通道/端口下达监控指令；监控指令为根据监控需求来设置；现有技术中往往是针对业务本身或者所有业务进行监控，监控范围不能定制化，更不能根据业务的特征来进行监控的定制；通过基于业务的执行主体和业务本身特征结合的定制方式，能够灵活和多层次的监控；

为了进行所截获业务的动态定制，根据监控需求实时的设置截获定制表，所述截获定制表能够动态的进行截获业务类型设置，能够在通道和端口的基础上，针对业务本身的特点进行定制，从而在便于形成基于通道或者端口的业务处理方式之外，还能够对当前业务监控要点进行重点设置；

优选的：通道/端口在进行业务处理之前查询截获定制表，并基于截获定制表中的信息进行业务的截获；

可替换的:截获定制表被设置后，将截获定制表发送给通道/端口的本地，并覆盖本地的截获定制表；通过这样的方式能够提高截获效率；其中：本地截获定制表中仅保存和通道/端口相关的部分截获定制表以提高查询效率；

优选的：所述部分截获定制表被使用之前根据业务特征进行排序；进一步的，根据特定业务特征进行记录的合并，合并后的一条记录对应合并前多条记录所对应的多条监控指令；

步骤S2：获取业务特征并标注监控基线；具体为：在通道进行业务处理前，获取业务特征；在业务的执行过程中，基于业务特征确定业务是否属于监控基线的监控目标，如果是，则将所述业务和相应的监控基线相关联；

监控基线为通道级监控的基准线，每个监控基线包括所需要监控的所有特征所构成的特征序列，其中，每个特征的基准特征值所组成的序列为所述特征序列对应的基准特征值序列；将所述基准特征值序列和监控目标的特征值序列进行比较就能够进行业务的一级监控；一级监控是在通道现场的实时监控；

基准特征值为特征值的基准值；特征用于表征业务本身相关的特征，例如：在处理节点A上的处理时间，处理节点A的响应时间，整体处理时间等；优选的：特征值序列为将特征值按照特定的顺序排列所组成的序列；

优选的：所述监控基线为监控平台向各个通道发送的；监控基线为一或者多条；

优选的：为不同的监控目标设置不同的监控基线；例如：对于通道A设置监控基线L1,为业务特征包含特征C1和C2的监控基线L2等；通过为不同的目标设置不同的监控基线，使得能够在业务执行过程中，进行多角色监控，实时避免问题的出现；

所述基于业务特征确定业务是否属于监控基线的监控目标，具体为：如果一业务的业务特征中包含一条监控基线中的所有特征，则确定所述业务为监控目标；

在业务的执行过程中，通道的本地计算装置处于相对空闲的状态，可以进行相关的控制操作，例如：进行监控基线的关联；例如：将一条监控基线和一个或多个业务相关联；一个业务和一条或多条监控基线相关联；

步骤S3：进行业务特征比较以截获业务；具体为：将业务特征和特定业务特征比较，如果截获定制表中存在两者一致的记录，则通道截获所述业务；

所述将业务特征和特定业务特征比较，具体为：获取截获定制表中和通道相关的所有记录，对于每条记录，依次将业务特征中的特定特征或特定业务特征的值和记录中特定业务特征或者特定业务特征的值相比较以确定两者是否一致；如果记录中所有特定业务特征或者特定业务特征的值均和记录中相应的特定业务特征或者特定业务特征的值一致，则确定存在两者一致的记录；其中：如果仅仅是特征和特征之间的比较，那么只要业务的业务特征中存在相应的特定业务特征或者有相应的赋值即可；如果是深入进行值的比较，那么就需要进行值的比较；

优选的：只要有截获定制表中有一条两者一致的记录，则截获所述业务，在业务执行的过程中，继续所述比较步骤，并标记所有两者一致的记录；一条业务的截获可能对应多项监控需求，但是监控操作本身的执行已经可以启动了；

所述通道截获所述业务，具体为：为所述业务的每个处理步骤增加监控处理操作；还可以是为所述业务的截获在通道的存储空间中创建独立的存储空间以存储截获业务所需要的数据；

优选的：根据截获定制表中和所述通道相关的记录的条数动态的在通道间分配存储空间，从而使得记录条数多的通道分配大的存储空间，反之亦然；通道需要存储监控和截获设计的数据，例如：业务的日志信息等，但通道本身不进行监控和截获数据的整体分析处理；多条通道本身可以位于一个独立的计算装置中，监控平台为独立于计算装置外的监控平台用于为多个计算装置进行业务的两级监控控制；

现有技术中对于业务的截获是在操作系统级别或在业务本身所在的应用程序进行截获，然而在OS级别的截获需要打破权限限制，这样的处理方式降低了系统安全性的同时还会降低系统效率，在进程/线程级别的截获，其截获范围有限，很多特征无法获取全程追踪几乎无可能；基于通道/端口进行业务截获不仅能够克服上述问题，还便于后续的监控以及基于监控结果的分析；

优选的：所述通道替换为通信端口；

步骤S4：获取截获业务的日志信息；具体的：通道在业务处理过程中，通过监控处理操作获取处理过程中各个处理节点的日志信息(或从日志信息中获取所需要的日志信息部分)，周期性的将所述日志信息和业务标识、对应的截获定制表的记录标识关联起来发送给监控平台；

通道在业务处理过程中涉及多个处理步骤和/或多个处理节点，每个处理节点均需要将处理过程中的日志信息返回以进行业务处理的全面监控；由于每条定制表中的记录对应的是不同的监控需求，此时，通过将标识关联起来发送避免了重复的发送日志内容信息，节约了通信通道；

步骤S5：基于监控基线进行业务实时监控；具体为：在获取日志信息后，通过分析以获取和业务相关联的监控基线所对应的特征的特征值，将业务的特征值序列和监控基线的基准特征值序列进行比较以进行业务预警；

监控基线为监控平台通过对各个通道所返回的历史日志信息进行分析所确定的；同时监控基线和截获定制表之间是相辅相成的，但是并非一定存在一一对应关系；例如：将通道A中的所有业务都设置在截获定制表中，从而对通道A进行全面监控，通过通道A的日志信息和监控基线L1比较可以看出通道A的数据是基本正常的，此时，可以将通道B中的所有业务都设置在截获定制表中，从而对通道B进行全面监控，发现通道B的B的特性X是和其他通道日志信息之间存在较大差异，从而调整截获定制表，对通道B以及特性X相关的特征C1和C2的业务进行截获，并和监控基线L1和监控基线L2相比较，通过这样的循环反馈从而定制化，多层次的全面监控；监控平台通过所有的业务数据能够发现特定处理节点可能存在的问题，从而对所有和该节点相关的业务均进行监控定制从而进行问题定位，还能够配合的进行基线的设置来临时性的进行业务处理预警；

优选的：不同监控基线对应不同的预警级别，基于预警级别确定发送预警事件的目标；由于不同的基线对应不同的监控范围和监控强度，通过监控基线和预警级别的对应，能够层次化的预警；

步骤S6：监控平台基于截获定制表进行全面监控：具体的：监控平台获取所有通道发送的日志信息和业务标识、对应的截获定制表的记录标识；基于截获定指标的记录标识或业务标识对日志信息进行整理和分析以进行全面分析和监控；

所述全面分析和监控包括基于截获定制表的记录的二级监控，基于分析结果设置截获定制表的记录，设置监控基线并将相应的监控基线发送给通道；

优选的：监控平台还用于基于各个通道返回的日志信息来确定监控基线；

优选的：所述全面监控为：提取新增的通道日志信息，判断新增日志信息中的预设特征值是否和历史日志信息中的预设特征值一致，如果是，则表示所述通道为正常，否则，对所述通道进行预警，并相应的针对所述通道更新截获定制表；优选的：对于不同的预设特征采用不同的判断方式来判断是否一致；

优选的：在基于通道日志信息确定基于通道的监控基线后，基于通道的类型对监控基线进行调整；

优选的：在基于通道日志信息确定基于通道的监控基线后，基于通道完成的业务数据量对监控基线进行调整，使得业务量较大的通道中通道基线的调整量小，而业务量小的通道的调整量较大；业务量较小的情况下，通道本身的数据量较小，用大数据日志信息得到的基线进行通道预警会降低预警执行效率，此时，根据业务量以及通道类型进行基线调整能够提高通道预警效率；

需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于装置实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。

本领域普通技术人员可以理解实现上述方法实施方式中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，所述的程序可以存储于计算机可读取存储介质中，这里所称得的存储介质，如：ROM/RAM、磁碟、光盘等。

以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本发明的保护范围内。

Claims (10)

1.一种基于通道的两级监控处理方法，其特征在于，所述方法包含：

步骤S1：动态设置截获定制表；

步骤S2：获取业务特征并标注监控基线；

步骤S3：进行业务特征比较以截获业务；

步骤S4：获取截获业务的日志信息；

步骤S5：基于监控基线进行业务实时监控；

步骤S6：基于截获定制表进行全面监控。

2.根据权利要求1所述的基于通道的两级监控处理方法，其特征在于，所述步骤S1具体为：在进行业务处理的过程中，根据截获定制表确定所述业务是否需要被截获。

3.根据权利要求2所述的基于通道的两级监控处理方法，其特征在于，截获定制表中保存和所需截获业务相关的包括通道和特定业务特征的记录。

4.根据权利要求3所述的基于通道的两级监控处理方法，其特征在于，每条记录对应一条监控指令。

5.根据权利要求4所述的基于通道的两级监控处理方法，其特征在于，特定业务特征为业务特征中的一个或多个。

6.根据权利要求5所述的基于通道的两级监控处理方法，其特征在于，在通道或者通道所在计算装置进行以及监控，在监控平台执行二级监控。

7.根据权利要求6所述的基于通道的两级监控处理方法，其特征在于，所述监控基线为监控平台向各个通道发送的。

8.根据权利要求7所述的基于通道的两级监控处理方法，其特征在于，监控基线为一或者多条。

9.根据权利要求8所述的基于通道的两级监控处理方法，其特征在于，为不同的监控目标设置不同的监控基线。

10.根据权利要求9所述的基于通道的两级监控处理方法，其特征在于，所述基于业务特征确定业务是否属于监控基线的监控目标，具体为：如果一业务的业务特征中包含一条监控基线中的所有特征，则确定所述业务为监控目标。

Images