CN110532148B - 微服务系统的监控方法及装置 - Google Patents

Abstract

本发明提出一种微服务系统的监控方法及装置，其中方法包括：获取微服务系统中待监控的对象的配置信息、任务信息以及监控标示；将配置信息以及监控标示添加到与对象的类型对应的配置信息表中，将任务信息以及监控标示添加到与类型对应的任务表中；当检测到达扫描周期时，监测任务表中当前的任务信息，当监测到被触发的目标任务信息后，获取与目标任务信息对应的目标监控标示，以及从配置信息表中获取与目标监控标示对应的目标配置信息指示的目标对象；根据目标任务信息对目标对象进行监控处理得到监控结果，从而能够对待监控的对象进行灵活配置，不需要修改监控代码或者频繁重启，提高了监控效率。

Description

微服务系统的监控方法及装置

技术领域

本发明涉及监控技术领域，尤其涉及一种微服务系统的监控方法及装置。

背景技术

目前，微服务系统的监控方法为，对微服务系统中固定的数据源进行固定的监控任务，若要更改待监控的数据源，则需要修改监控代码或者手动更改数据源并进行重启，导致监控反应速度慢，不够灵活，且上述监控方法不支持对其他对象的监控，降低了监控方法的灵活性、反应速度以及监控效率。

发明内容

本发明旨在至少在一定程度上解决相关技术中的技术问题之一。

为此，本发明的第一个目的在于提出一种微服务系统的监控方法，用于解决现有技术中监控方法不够灵活，反应速度慢，监控效率差的问题。

本发明的第二个目的在于提出一种微服务系统的监控装置。

本发明的第三个目的在于提出另一种微服务系统的监控装置。

本发明的第四个目的在于提出一种非临时性计算机可读存储介质。

为达上述目的，本发明第一方面实施例提出了一种微服务系统的监控方法，包括：

获取微服务系统中待监控的对象的配置信息、任务信息以及监控标示；

将所述配置信息以及所述监控标示添加到与所述对象的类型对应的配置信息表中，将所述任务信息以及所述监控标示添加到与所述类型对应的任务表中；

当检测到达扫描周期时，监测所述任务表中当前的任务信息，当监测到被触发的目标任务信息后，获取与所述目标任务信息对应的目标监控标示，以及从所述配置信息表中获取与所述目标监控标示对应的目标配置信息指示的目标对象；

根据所述目标任务信息对所述目标对象进行监控处理得到监控结果。

进一步地，当所述对象的类型为数据源时，所述对象的配置信息包括：所述对象的连接信息；所述对象的任务信息包括：结构化查询语句、任务开始时间、任务结束时间；

所述根据所述目标任务信息对所述目标对象进行监控处理得到监控结果，包括：

周期性的对所述目标对象执行所述目标任务信息中的结构化查询语句，获取对所述目标对象的查询结果，将所述查询结果确定为所述目标对象的监控结果，直至到达所述目标对象的任务结束时间。

进一步地，所述根据所述目标任务信息对所述目标对象进行监控处理得到监控结果之后，还包括：

判断所述监控结果中是否存在记录告警；

若所述监控结果中存在记录告警，则判断预设时间段内的预警通知次数是否超过通知次数阈值，若预设时间段内的预警通知次数未超过通知次数阈值，则进行预警通知；

若所述监控结果中不存在记录告警，或者，预设时间段内的预警通知次数超过通知次数阈值，则不进行预警通知。

进一步地，当所述对象的类型为kafka集群，所述对象的配置信息包括：集群地址信息、集群对应的服务地址；

当所述任务表为监控任务表时，所述对象的任务信息包括：所述对象中待监控的主题和消费者组、任务开始时间、任务结束时间；

所述根据所述目标任务信息对所述目标对象进行监控处理得到监控结果，包括：

周期性的获取所述目标对象中待监控的主题的各个分区的偏移值，以及所述目标对象中待监控的消费者组对待监控的主题的各个分区消费到的偏移值，确定待监控的主题的各个分区的消费滞后值，将待监控的主题的各个分区的消费滞后值确定为监控结果，直至到达所述目标对象的任务结束时间。

进一步地，所述对象的任务信息还包括：消费滞后阈值；

所述根据所述目标任务信息对所述目标对象进行监控处理得到监控结果之后，还包括：

将所述目标对象中待监控的主题的各个分区的消费滞后值与所述目标任务信息中的消费滞后阈值进行比对，判断是否存在对应的消费滞后值大于消费滞后阈值的第一分区；

若存在所述第一分区，则判断预设时间段内的预警通知次数是否超过通知次数阈值，若预设时间段内的预警通知次数未超过通知次数阈值，则进行预警通知；

若不存在所述第一分区，或者，预设时间段内的预警通知次数超过通知次数阈值，则不进行预警通知。

进一步地，当所述任务表为元数据输出任务表时，所述对象的任务信息包括：所述对象中待监控的主题和消费者组、任务开始时间、任务结束时间；

所述根据所述目标任务信息对所述目标对象进行监控处理得到监控结果，包括：

周期性的获取所述目标对象中待监控的主题的各个分区的偏移值，以及所述目标对象中待监控的消费者组对待监控的主题的各个分区消费到的偏移值，确定待监控的主题的各个分区的偏移值、消费到的偏移值、消费滞后值、增量数据，并写入输出表，直至到达所述目标对象的任务结束时间。

进一步地，所述的方法还包括：

获取微服务系统中待监控的网页URL的配置信息以及任务信息；

将所述网页URL的配置信息以及任务信息添加到URL监控任务表中；

当检测到达URL监控任务表扫描周期时，监测所述URL监控任务表中当前的任务信息，当监测到被触发的目标网页URL任务信息后，从所述URL监控任务表中获取与所述目标网页URL任务信息对应的配置信息指示的目标网页URL；

根据所述目标网页URL任务信息对所述目标网页URL进行处理，得到任务执行结果。

进一步地，所述配置信息包括：所述网页URL的地址信息以及请求头信息；

所述任务信息包括：任务开始时间和任务终止时间；

所述根据所述目标网页URL任务信息对所述目标网页URL进行处理，得到任务执行结果，包括：

周期性的发起携带所述目标网页URL的地址信息以及请求头信息的请求，获取请求结果，将所述请求结果确定为任务执行结果，直至到达所述目标网页URL的任务结束时间。

进一步地，所述任务信息还包括：期望的返回值内容；

所述根据所述目标网页URL任务信息对所述目标网页URL进行处理，得到任务执行结果之后，还包括：

判断所述任务执行结果中是否包括目标网页URL任务信息中的期望的返回值内容；

若所述任务执行结果中不包括目标网页URL任务信息中的期望的返回值内容，则判断预设时间段内的预警通知次数是否超过通知次数阈值，若预设时间段内的预警通知次数未超过通知次数阈值，则进行预警通知；

若所述任务执行结果中包括目标网页URL任务信息中的期望的返回值内容，或者，预设时间段内的预警通知次数超过通知次数阈值，则不进行预警通知。

本发明实施例的微服务系统的监控方法，通过获取微服务系统中待监控的对象的配置信息、任务信息以及监控标示；将配置信息以及监控标示添加到与对象的类型对应的配置信息表中，将任务信息以及监控标示添加到与类型对应的任务表中；当检测到达扫描周期时，监测任务表中当前的任务信息，当监测到被触发的目标任务信息后，获取与目标任务信息对应的目标监控标示，以及从配置信息表中获取与目标监控标示对应的目标配置信息指示的目标对象；根据目标任务信息对目标对象进行监控处理得到监控结果，从而能够对待监控的对象进行灵活配置，不需要修改监控代码或者频繁重启，提高了监控效率。

为达上述目的，本发明第二方面实施例提出了一种微服务系统的监控装置，包括：

获取模块，用于获取微服务系统中待监控的对象的配置信息、任务信息以及监控标示；

添加模块，用于将所述配置信息以及所述监控标示添加到与所述对象的类型对应的配置信息表中，将所述任务信息以及所述监控标示添加到与所述类型对应的任务表中；

监测模块，用于当检测到达扫描周期时，监测所述任务表中当前的任务信息，当监测到被触发的目标任务信息后，获取与所述目标任务信息对应的目标监控标示，以及从所述配置信息表中获取与所述目标监控标示对应的目标配置信息指示的目标对象；

监控模块，用于根据所述目标任务信息对所述目标对象进行监控处理得到监控结果。

进一步地，当所述对象的类型为数据源时，所述对象的配置信息包括：所述对象的连接信息；所述对象的任务信息包括：结构化查询语句、任务开始时间、任务结束时间；

所述监控模块具体用于，

周期性的对所述目标对象执行所述目标任务信息中的结构化查询语句，获取对所述目标对象的查询结果，将所述查询结果确定为所述目标对象的监控结果，直至到达所述目标对象的任务结束时间。

进一步地，所述的装置还包括：第一判断模块和第一预警模块；

所述第一判断模块，用于判断所述监控结果中是否存在记录告警；

所述第一预警模块，用于在所述监控结果中存在记录告警时，判断预设时间段内的预警通知次数是否超过通知次数阈值，若预设时间段内的预警通知次数未超过通知次数阈值，则进行预警通知；

所述第一预警模块，还用于在所述监控结果中不存在记录告警，或者，预设时间段内的预警通知次数超过通知次数阈值时，不进行预警通知。

进一步地，当所述对象的类型为kafka集群，所述对象的配置信息包括：集群地址信息、集群对应的服务地址；

当所述任务表为监控任务表时，所述对象的任务信息包括：所述对象中待监控的主题和消费者组、任务开始时间、任务结束时间；

所述监控模块具体用于，

周期性的获取所述目标对象中待监控的主题的各个分区的偏移值，以及所述目标对象中待监控的消费者组对待监控的主题的各个分区消费到的偏移值，确定待监控的主题的各个分区的消费滞后值，将待监控的主题的各个分区的消费滞后值确定为监控结果，直至到达所述目标对象的任务结束时间。

进一步地，所述对象的任务信息还包括：消费滞后阈值；

所述的装置还包括：第二判断模块和第二预警模块；

所述第二判断模块，用于将所述目标对象中待监控的主题的各个分区的消费滞后值与所述目标任务信息中的消费滞后阈值进行比对，判断是否存在对应的消费滞后值大于消费滞后阈值的第一分区；

所述第二预警模块，用于在存在所述第一分区时，判断预设时间段内的预警通知次数是否超过通知次数阈值，若预设时间段内的预警通知次数未超过通知次数阈值，则进行预警通知；

所述第二预警模块，还用于在不存在所述第一分区，或者，预设时间段内的预警通知次数超过通知次数阈值时，不进行预警通知。

进一步地，当所述任务表为元数据输出任务表时，所述对象的任务信息包括：所述对象中待监控的主题和消费者组、任务开始时间、任务结束时间；

所述监控模块具体用于，

周期性的获取所述目标对象中待监控的主题的各个分区的偏移值，以及所述目标对象中待监控的消费者组对待监控的主题的各个分区消费到的偏移值，确定待监控的主题的各个分区的偏移值、消费到的偏移值、消费滞后值、增量数据，并写入输出表，直至到达所述目标对象的任务结束时间。

进一步地，所述获取模块，还用于获取微服务系统中待监控的网页URL的配置信息以及任务信息；

所述添加模块，还用于将所述网页URL的配置信息以及任务信息添加到URL监控任务表中；

所述监测模块，还用于当检测到达URL监控任务表扫描周期时，监测所述URL监控任务表中当前的任务信息，当监测到被触发的目标网页URL任务信息后，从所述URL监控任务表中获取与所述目标网页URL任务信息对应的配置信息指示的目标网页URL；

所述监控模块，还用于根据所述目标网页URL任务信息对所述目标网页URL进行处理，得到任务执行结果。

进一步地，所述配置信息包括：所述网页URL的地址信息以及请求头信息；

所述任务信息包括：任务开始时间和任务终止时间；

所述监控模块具体用于，

周期性的发起携带所述目标网页URL的地址信息以及请求头信息的请求，获取请求结果，将所述请求结果确定为任务执行结果，直至到达所述目标网页URL的任务结束时间。

进一步地，所述任务信息还包括：期望的返回值内容；

所述的装置还包括：第三判断模块和第三预警模块；

所述第三判断模块，用于判断所述任务执行结果中是否包括目标网页URL任务信息中的期望的返回值内容；

所述第三预警模块，用于在所述任务执行结果中不包括目标网页URL任务信息中的期望的返回值内容时，判断预设时间段内的预警通知次数是否超过通知次数阈值，若预设时间段内的预警通知次数未超过通知次数阈值，则进行预警通知；

所述第三预警模块，还用于在所述任务执行结果中包括目标网页URL任务信息中的期望的返回值内容，或者，预设时间段内的预警通知次数超过通知次数阈值时，不进行预警通知。

本发明实施例的微服务系统的监控装置，通过获取微服务系统中待监控的对象的配置信息、任务信息以及监控标示；将配置信息以及监控标示添加到与对象的类型对应的配置信息表中，将任务信息以及监控标示添加到与类型对应的任务表中；当检测到达扫描周期时，监测任务表中当前的任务信息，当监测到被触发的目标任务信息后，获取与目标任务信息对应的目标监控标示，以及从配置信息表中获取与目标监控标示对应的目标配置信息指示的目标对象；根据目标任务信息对目标对象进行监控处理得到监控结果，从而能够对待监控的对象进行灵活配置，不需要修改监控代码或者频繁重启，提高了监控效率。

为达上述目的，本发明第三方面实施例提出了另一种微服务系统的监控装置，包括：存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如上所述的微服务系统的监控方法。

为了实现上述目的，本发明第四方面实施例提出了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如上所述的微服务系统的监控方法。

本发明附加的方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。

附图说明

本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：

图1为本发明实施例提供的一种微服务系统的监控方法的流程示意图；

图2为本发明实施例提供的另一种微服务系统的监控方法的流程示意图；

图3为本发明实施例提供的一种微服务系统的监控装置的结构示意图；

图4为本发明实施例提供的另一种微服务系统的监控装置的结构示意图；

图5为本发明实施例提供的另一种微服务系统的监控装置的结构示意图；

图6为本发明实施例提供的另一种微服务系统的监控装置的结构示意图；

图7为本发明实施例提供的另一种微服务系统的监控装置的结构示意图。

具体实施方式

下面详细描述本发明的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，旨在用于解释本发明，而不能理解为对本发明的限制。

下面参考附图描述本发明实施例的微服务系统的监控方法及装置。

图1为本发明实施例提供的一种微服务系统的监控方法的流程示意图。如图1所示，该微服务系统的监控方法，主要包括以下步骤：

S101、获取微服务系统中待监控的对象的配置信息、任务信息以及监控标示。

本发明提供的微服务系统的监控方法的执行主体为微服务系统的监控装置，微服务系统的监控装置可以为终端设备、服务器等硬件设备，或者硬件设备中安装的软件。其中，微服务系统的监控装置具体可以为微服务系统本身，或者与微服务系统连接的设备，用于对微服务系统进行监控。

本实施例中，微服务系统中包括：客户端以及服务器端，服务器端，用于提供各个微服务。本实施例中，待监控的对象例如可以为数据源或者kafka集群等。其中，数据源指的是各个微服务对应的数据库。kafka集群，用于确保各个微服务的正常工作。

本实施例中，在第一种实施场景中，当对象的类型为数据源时，对象的配置信息包括：对象的连接信息；对象的任务信息包括：结构化查询语句、任务开始时间、任务结束时间、通知方式、通知人员、通知内容、任务执行周期等。其中，通知方式例如短信通知或者邮件通知等。任务执行周期为在任务开始时间和任务结束时间之间执行任务的周期。

本实施例中，在第二种实场景中，当对象的类型为kafka集群时，对象的配置信息包括：集群地址信息、集群对应的服务地址。对象的任务信息可以包括：对象中待监控的主题和消费者组、任务开始时间、任务结束时间、通知方式、通知人员、通知内容、任务执行周期等。

本实施例中，监控标示用于表示对象是用于进行监控，而不是用于提供服务。其中，数据源分配的监控标示的名称例如可以为dbKEY等。为kafka集群分配的监控标示的名称例如可以为broker_flag等。

S102、将配置信息以及监控标示添加到与对象的类型对应的配置信息表中，将任务信息以及监控标示添加到与类型对应的任务表中。

本实施例中，当对象的类型为kafka集群时，与kafka集群对应的任务表可以有两张，分别为监控任务表和元数据输出任务表。其中，监控任务表用于执行监控任务，确定是否存在异常。元数据输出任务表用于输出kafka集群中的数据。

S103、当检测到达扫描周期时，监测任务表中当前的任务信息，当监测到被触发的目标任务信息后，获取与目标任务信息对应的目标监控标示，以及从配置信息表中获取与目标监控标示对应的目标配置信息指示的目标对象。

本实施例中，在一种实施场景下，微服务系统的监控装置可以维护两张表，一张表为当前生效的配置信息表，一张表为当前生效的任务表。当检测到达扫描周期时，将当前生效的配置信息表与最新配置的配置信息表进行比对，确定对象的新增、删除和更新，然后根据对象的新增、删除和更新对当前生效的配置信息表进行更新。当检测到达扫描周期时，将当前生效的任务表与最新配置的任务表进行比对，确定任务的新增、删除和更新，然后根据任务的新增、删除和更新对当前生效的任务表进行更新。

本实施例中，需要说明的是，确定任务信息是否被触发，需要判断是否到达任务信息中的任务开始时间，若到达任务信息中的任务开始时间，则确定任务信息被触发；若未到达任务信息中的任务开始时间或者超过任务信息中的任务结束时间，则确定任务信息未被触发。

S104、根据目标任务信息对目标对象进行监控处理得到监控结果。

本实施例中，在第一种实施场景中，当对象的类型为数据源时，微服务系统的监控装置执行步骤104的过程具体可以为，周期性的对目标对象执行目标任务信息中的结构化查询语句，获取对目标对象的查询结果，将查询结果确定为目标对象的监控结果，直至到达目标对象的任务结束时间。其中，周期为任务执行周期。

进一步地，步骤104之后，所述的方法还可以包括：判断监控结果中是否存在记录告警；若监控结果中存在记录告警，则判断预设时间段内的预警通知次数是否超过通知次数阈值，若预设时间段内的预警通知次数未超过通知次数阈值，则进行预警通知；若监控结果中不存在记录告警，或者，预设时间段内的预警通知次数超过通知次数阈值，则不进行预警通知。

本实施例中，在第二种实施场景中，当对象的类型为kafka集群，且任务表为监控任务表时，微服务系统的监控装置执行步骤104的过程具体可以为，周期性的获取目标对象中待监控的主题的各个分区的偏移值，以及目标对象中待监控的消费者组对待监控的主题的各个分区消费到的偏移值，确定待监控的主题的各个分区的消费滞后值，将待监控的主题的各个分区的消费滞后值确定为监控结果，直至到达目标对象的任务结束时间。

进一步地，对象的任务信息还包括：消费滞后阈值。对应的，步骤104之后，所述的方法还可以包括：将目标对象中待监控的主题的各个分区的消费滞后值与目标任务信息中的消费滞后阈值进行比对，判断是否存在对应的消费滞后值大于消费滞后阈值的第一分区；若存在第一分区，则判断预设时间段内的预警通知次数是否超过通知次数阈值，若预设时间段内的预警通知次数未超过通知次数阈值，则进行预警通知；若不存在第一分区，或者，预设时间段内的预警通知次数超过通知次数阈值，则不进行预警通知。

本实施例中，在第三种实施场景中，当对象的类型为kafka集群，且任务表为元数据输出任务表时，微服务系统的监控装置执行步骤104的过程具体可以为，周期性的获取目标对象中待监控的主题的各个分区的偏移值，以及目标对象中待监控的消费者组对待监控的主题的各个分区消费到的偏移值，确定待监控的主题的各个分区的偏移值、消费到的偏移值、消费滞后值、增量数据，并写入输出表，直至到达目标对象的任务结束时间。

本实施例中，微服务系统的监控装置针对每个对象，会维护一个对象标识+每个预设时间段内预警通知次数重置方案。每个监控任务可以存在一个标志位，每次预警通知成功后该标志位加1，每次执行预警通知前判断当前标志位的值是否超过通知次数阈值，若超过则进行拦截，阻止本次预警通知推送。一个预设时间段到达后进行通知次数阈值的重置，将通知次数阈值恢复为初始值。其中初始值例如可以为0值等。本实施例中，通过通知次数阈值的设置，避免出现不合理的短时间大量推送通知。其中，当对象的类型为数据源时，标志位可以为notice:lock:hour:mysql:id；当对象的类型为kafka集群时，标志位可以为notice:lock:hour:kafka:id。

本发明实施例的微服务系统的监控方法，通过获取微服务系统中待监控的对象的配置信息、任务信息以及监控标示；将配置信息以及监控标示添加到与对象的类型对应的配置信息表中，将任务信息以及监控标示添加到与类型对应的任务表中；当检测到达扫描周期时，监测任务表中当前的任务信息，当监测到被触发的目标任务信息后，获取与目标任务信息对应的目标监控标示，以及从配置信息表中获取与目标监控标示对应的目标配置信息指示的目标对象；根据目标任务信息对目标对象进行监控处理得到监控结果，从而能够对待监控的对象进行灵活配置，不需要修改监控代码或者频繁重启，提高了监控效率。

进一步地，结合参考图2，在图1所示实施例的基础上，所述的方法还可以包括以下步骤：

S105、获取微服务系统中待监控的网页URL的配置信息以及任务信息。

本实施例中，网页URL为微服务系统中涉及到的各个网页。网页URL(统一资源定位符，Uniform Resoure Locator)的配置信息可以包括：网页URL的地址及必需的header请求头信息。网页URL的任务信息可以包括：请求语句、任务开始时间、任务结束时间、通知方式、通知人员、通知内容、任务执行周期等。其中，请求语句用于发起请求。

S106、将网页URL的配置信息以及任务信息添加到URL监控任务表中。

S107、当检测到达URL监控任务表扫描周期时，监测URL监控任务表中当前的任务信息，当监测到被触发的目标网页URL任务信息后，从URL监控任务表中获取与目标网页URL任务信息对应的配置信息指示的目标网页URL。

本实施例中，在一种实施场景下，微服务系统的监控装置还可以维护一张当前生效的URL监控任务表。当检测到达扫描周期时，将当前生效的URL监控任务表与最新配置的URL监控任务表进行比对，确定任务的新增、删除和更新，然后根据对象的新增、删除和更新对当前生效的URL监控任务表进行更新。

S108、根据目标网页URL任务信息对目标网页URL进行处理，得到任务执行结果。

本实施例中，微服务系统的监控装置执行步骤108的过程具体可以为，周期性的发起携带目标网页URL的地址信息以及请求头信息的请求，获取请求结果，将请求结果确定为任务执行结果，直至到达目标网页URL的任务结束时间。

进一步地，网页URL的任务信息中还可以包括：期望的返回值内容。对应的，步骤108之后，所述的方法还可以包括：判断任务执行结果中是否包括目标网页URL任务信息中的期望的返回值内容；若任务执行结果中不包括目标网页URL任务信息中的期望的返回值内容，则判断预设时间段内的预警通知次数是否超过通知次数阈值，若预设时间段内的预警通知次数未超过通知次数阈值，则进行预警通知；若任务执行结果中包括目标网页URL任务信息中的期望的返回值内容，或者，预设时间段内的预警通知次数超过通知次数阈值，则不进行预警通知。

本实施例中，微服务系统的监控装置针对网页URL，会维护一个网页URL标识+每个预设时间段内预警通知次数重置方案。每个监控任务可以存在一个标志位，每次预警通知成功后该标志位加1，每次执行预警通知前判断当前标志位的值是否超过通知次数阈值，若超过则进行拦截，阻止本次预警通知推送。一个预设时间段到达后进行通知次数阈值的重置，将通知次数阈值恢复为初始值。其中初始值例如可以为0值等。网页URL对应的标志位例如可以为notice:lock:hour:url:id。

本发明实施例的微服务系统的监控方法，通过获取微服务系统中待监控的网页URL的配置信息以及任务信息；将网页URL的配置信息以及任务信息添加到URL监控任务表中；当检测到达URL监控任务表扫描周期时，监测URL监控任务表中当前的任务信息，当监测到被触发的目标网页URL任务信息后，从URL监控任务表中获取与目标网页URL任务信息对应的配置信息指示的目标网页URL；根据目标网页URL任务信息对目标网页URL进行处理，得到任务执行结果，从而能够对网页URL进行监控，且能够对待监控的网页URL进行灵活配置，不需要修改监控代码或者频繁重启，提高了监控效率。

图3为本发明实施例提供的一种微服务系统的监控装置的结构示意图。如图3所示，主要包括：获取模块31、添加模块32、监测模块33和监控模块34。

其中，获取模块31，用于获取微服务系统中待监控的对象的配置信息、任务信息以及监控标示；

添加模块32，用于将所述配置信息以及所述监控标示添加到与所述对象的类型对应的配置信息表中，将所述任务信息以及所述监控标示添加到与所述类型对应的任务表中；

监测模块33，用于当检测到达扫描周期时，监测所述任务表中当前的任务信息，当监测到被触发的目标任务信息后，获取与所述目标任务信息对应的目标监控标示，以及从所述配置信息表中获取与所述目标监控标示对应的目标配置信息指示的目标对象；

监控模块34，用于根据所述目标任务信息对所述目标对象进行监控处理得到监控结果。

本发明提供的微服务系统的监控装置可以为终端设备、服务器等硬件设备，或者硬件设备中安装的软件。其中，微服务系统的监控装置具体可以为微服务系统本身，或者与微服务系统连接的设备，用于对微服务系统进行监控。

本实施例中，微服务系统中包括：客户端以及服务器端，服务器端，用于提供各个微服务。本实施例中，待监控的对象例如可以为数据源或者kafka集群等。其中，数据源指的是各个微服务对应的数据库。kafka集群，用于确保各个微服务的正常工作。

本实施例中，在第一种实施场景中，当对象的类型为数据源时，对象的配置信息包括：对象的连接信息；对象的任务信息包括：结构化查询语句、任务开始时间、任务结束时间、通知方式、通知人员、通知内容、任务执行周期等。其中，通知方式例如短信通知或者邮件通知等。任务执行周期为在任务开始时间和任务结束时间之间执行任务的周期。

本实施例中，在第二种实场景中，当对象的类型为kafka集群时，对象的配置信息包括：集群地址信息、集群对应的服务地址。对象的任务信息可以包括：对象中待监控的主题和消费者组、任务开始时间、任务结束时间、通知方式、通知人员、通知内容、任务执行周期等。

本实施例中，监控标示用于表示对象是用于进行监控，而不是用于提供服务。其中，数据源分配的监控标示的名称例如可以为dbKEY等。为kafka集群分配的监控标示的名称例如可以为broker_flag等。

本实施例中，在第一种实施场景中，当对象的类型为数据源时，监控模块34具体可以用于，周期性的对目标对象执行目标任务信息中的结构化查询语句，获取对目标对象的查询结果，将查询结果确定为目标对象的监控结果，直至到达目标对象的任务结束时间。其中，周期为任务执行周期。

进一步地，结合参考图4，在图3所示实施例的基础上，所述的装置还可以包括：第一判断模块35和第一预警模块36；

所述第一判断模块35，用于判断所述监控结果中是否存在记录告警；

所述第一预警模块36，用于在所述监控结果中存在记录告警时，判断预设时间段内的预警通知次数是否超过通知次数阈值，若预设时间段内的预警通知次数未超过通知次数阈值，则进行预警通知；

所述第一预警模块36，还用于在所述监控结果中不存在记录告警，或者，预设时间段内的预警通知次数超过通知次数阈值时，不进行预警通知。

本实施例中，在第二种实施场景中，当对象的类型为kafka集群，且任务表为监控任务表时，监控模块34具体可以用于，周期性的获取目标对象中待监控的主题的各个分区的偏移值，以及目标对象中待监控的消费者组对待监控的主题的各个分区消费到的偏移值，确定待监控的主题的各个分区的消费滞后值，将待监控的主题的各个分区的消费滞后值确定为监控结果，直至到达目标对象的任务结束时间。

进一步的，结合参考图5，在图3所示实施例的基础上，对象的任务信息还包括：消费滞后阈值。对应的，所述的装置还可以包括：第二判断模块37和第二预警模块38；

所述第二判断模块37，用于将所述目标对象中待监控的主题的各个分区的消费滞后值与所述目标任务信息中的消费滞后阈值进行比对，判断是否存在对应的消费滞后值大于消费滞后阈值的第一分区；

所述第二预警模块38，用于在存在所述第一分区时，判断预设时间段内的预警通知次数是否超过通知次数阈值，若预设时间段内的预警通知次数未超过通知次数阈值，则进行预警通知；

所述第二预警模块38，还用于在不存在所述第一分区，或者，预设时间段内的预警通知次数超过通知次数阈值时，不进行预警通知。

本实施例中，在第三种实施场景中，当对象的类型为kafka集群，且任务表为元数据输出任务表时，监控模块34具体可以用于，周期性的获取目标对象中待监控的主题的各个分区的偏移值，以及目标对象中待监控的消费者组对待监控的主题的各个分区消费到的偏移值，确定待监控的主题的各个分区的偏移值、消费到的偏移值、消费滞后值、增量数据，并写入输出表，直至到达目标对象的任务结束时间。

本实施例中，微服务系统的监控装置针对每个对象，会维护一个对象标识+每个预设时间段内预警通知次数重置方案。每个监控任务可以存在一个标志位，每次预警通知成功后该标志位加1，每次执行预警通知前判断当前标志位的值是否超过通知次数阈值，若超过则进行拦截，阻止本次预警通知推送。一个预设时间段到达后进行通知次数阈值的重置，将通知次数阈值恢复为初始值。其中初始值例如可以为0值等。本实施例中，通过通知次数阈值的设置，避免出现不合理的短时间大量推送通知。其中，当对象的类型为数据源时，标志位可以为notice:lock:hour:mysql:id；当对象的类型为kafka集群时，标志位可以为notice:lock:hour:kafka:id。

本发明实施例的微服务系统的监控装置，通过获取微服务系统中待监控的对象的配置信息、任务信息以及监控标示；将配置信息以及监控标示添加到与对象的类型对应的配置信息表中，将任务信息以及监控标示添加到与类型对应的任务表中；当检测到达扫描周期时，监测任务表中当前的任务信息，当监测到被触发的目标任务信息后，获取与目标任务信息对应的目标监控标示，以及从配置信息表中获取与目标监控标示对应的目标配置信息指示的目标对象；根据目标任务信息对目标对象进行监控处理得到监控结果，从而能够对待监控的对象进行灵活配置，不需要修改监控代码或者频繁重启，提高了监控效率。

进一步地，在图3所示实施例的基础上，所述获取模块31，还用于获取微服务系统中待监控的网页URL的配置信息以及任务信息；

所述添加模块32，还用于将所述网页URL的配置信息以及任务信息添加到URL监控任务表中；

所述监测模块33，还用于当检测到达URL监控任务表扫描周期时，监测所述URL监控任务表中当前的任务信息，当监测到被触发的目标网页URL任务信息后，从所述URL监控任务表中获取与所述目标网页URL任务信息对应的配置信息指示的目标网页URL；

所述监控模块34，还用于根据所述目标网页URL任务信息对所述目标网页URL进行处理，得到任务执行结果。

本实施例中，网页URL为微服务系统中涉及到的各个网页。网页URL(统一资源定位符，Uniform Resoure Locator)的配置信息可以包括：网页URL的地址及必需的header请求头信息。网页URL的任务信息可以包括：请求语句、任务开始时间、任务结束时间、通知方式、通知人员、通知内容、任务执行周期等。其中，请求语句用于发起请求。

本实施例中，监控模块34具体可以用于，周期性的发起携带目标网页URL的地址信息以及请求头信息的请求，获取请求结果，将请求结果确定为任务执行结果，直至到达目标网页URL的任务结束时间。

进一步地，网页URL的任务信息中还可以包括：期望的返回值内容。对应的，结合参考图6，在上述实施例的基础上，所述的装置还可以包括：第三判断模块39和第三预警模块40；

所述第三判断模块39，用于判断所述任务执行结果中是否包括目标网页URL任务信息中的期望的返回值内容；

所述第三预警模块40，用于在所述任务执行结果中不包括目标网页URL任务信息中的期望的返回值内容时，判断预设时间段内的预警通知次数是否超过通知次数阈值，若预设时间段内的预警通知次数未超过通知次数阈值，则进行预警通知；

所述第三预警模块40，还用于在所述任务执行结果中包括目标网页URL任务信息中的期望的返回值内容，或者，预设时间段内的预警通知次数超过通知次数阈值时，不进行预警通知。

本实施例中，微服务系统的监控装置针对网页URL，会维护一个网页URL标识+每个预设时间段内预警通知次数重置方案。每个监控任务可以存在一个标志位，每次预警通知成功后该标志位加1，每次执行预警通知前判断当前标志位的值是否超过通知次数阈值，若超过则进行拦截，阻止本次预警通知推送。一个预设时间段到达后进行通知次数阈值的重置，将通知次数阈值恢复为初始值。其中初始值例如可以为0值等。网页URL对应的标志位例如可以为notice:lock:hour:url:id。

本发明实施例的微服务系统的监控装置，通过获取微服务系统中待监控的网页URL的配置信息以及任务信息；将网页URL的配置信息以及任务信息添加到URL监控任务表中；当检测到达URL监控任务表扫描周期时，监测URL监控任务表中当前的任务信息，当监测到被触发的目标网页URL任务信息后，从URL监控任务表中获取与目标网页URL任务信息对应的配置信息指示的目标网页URL；根据目标网页URL任务信息对目标网页URL进行处理，得到任务执行结果，从而能够对网页URL进行监控，且能够对待监控的网页URL进行灵活配置，不需要修改监控代码或者频繁重启，提高了监控效率。

图7为本发明实施例提供的另一种微服务系统的监控装置的结构示意图。该微服务系统的监控装置包括：

存储器1001、处理器1002及存储在存储器1001上并可在处理器1002上运行的计算机程序。

处理器1002执行所述程序时实现上述实施例中提供的微服务系统的监控方法。

进一步地，微服务系统的监控装置还包括：

通信接口1003，用于存储器1001和处理器1002之间的通信。

存储器1001，用于存放可在处理器1002上运行的计算机程序。

存储器1001可能包含高速RAM存储器，也可能还包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。

处理器1002，用于执行所述程序时实现上述实施例所述的微服务系统的监控方法。

如果存储器1001、处理器1002和通信接口1003独立实现，则通信接口1003、存储器1001和处理器1002可以通过总线相互连接并完成相互间的通信。所述总线可以是工业标准体系结构(Industry Standard Architecture，简称为ISA)总线、外部设备互连(Peripheral Component，简称为PCI)总线或扩展工业标准体系结构(Extended IndustryStandard Architecture，简称为EISA)总线等。所述总线可以分为地址总线、数据总线、控制总线等。为便于表示，图7中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。

可选的，在具体实现上，如果存储器1001、处理器1002及通信接口1003，集成在一块芯片上实现，则存储器1001、处理器1002及通信接口1003可以通过内部接口完成相互间的通信。

处理器1002可能是一个中央处理器(Central Processing Unit，简称为CPU)，或者是特定集成电路(Application Specific Integrated Circuit，简称为ASIC)，或者是被配置成实施本发明实施例的一个或多个集成电路。

本发明还提供一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如上所述的微服务系统的监控方法。

本发明还提供一种计算机程序产品，当所述计算机程序产品中的指令处理器执行时，实现如上所述的微服务系统的监控方法。

在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。

此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本发明的描述中，“多个”的含义是至少两个，例如两个，三个等，除非另有明确具体的限定。

流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现定制逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本发明的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本发明的实施例所属技术领域的技术人员所理解。

在流程图中表示或在此以其他方式描述的逻辑和/或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的定序列表，可以具体实现在任何计算机可读介质中，以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用，或结合这些指令执行系统、装置或设备而使用。就本说明书而言，"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下：具有一个或多个布线的电连接部(电子装置)，便携式计算机盘盒(磁装置)，随机存取存储器(RAM)，只读存储器(ROM)，可擦除可编辑只读存储器(EPROM或闪速存储器)，光纤装置，以及便携式光盘只读存储器(CDROM)。另外，计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质，因为可以例如通过对纸或其他介质进行光学扫描，接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序，然后将其存储在计算机存储器中。

应当理解，本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。如，如果用硬件来实现和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(PGA)，现场可编程门阵列(FPGA)等。

本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，该程序在执行时，包括方法实施例的步骤之一或其组合。

此外，在本发明各个实施例中的各功能单元可以集成在一个处理模块中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。

上述提到的存储介质可以是只读存储器，磁盘或光盘等。尽管上面已经示出和描述了本发明的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本发明的限制，本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (12)

1.一种微服务系统的监控方法，其特征在于，包括：

获取微服务系统中待监控的对象的配置信息、任务信息以及监控标示；

将所述配置信息以及所述监控标示添加到与所述对象的类型对应的配置信息表中，将所述任务信息以及所述监控标示添加到与所述类型对应的任务表中；

当检测到达扫描周期时，监测所述任务表中当前的任务信息，当监测到被触发的目标任务信息后，获取与所述目标任务信息对应的目标监控标示，以及从所述配置信息表中获取与所述目标监控标示对应的目标配置信息指示的目标对象；

根据所述目标任务信息对所述目标对象进行监控处理得到监控结果。

2.根据权利要求1所述的方法，其特征在于，当所述对象的类型为数据源时，所述对象的配置信息包括：所述对象的连接信息；所述对象的任务信息包括：结构化查询语句、任务开始时间、任务结束时间；

所述根据所述目标任务信息对所述目标对象进行监控处理得到监控结果，包括：

周期性的对所述目标对象执行所述目标任务信息中的结构化查询语句，获取对所述目标对象的查询结果，将所述查询结果确定为所述目标对象的监控结果，直至到达所述目标对象的任务结束时间。

3.根据权利要求2所述的方法，其特征在于，所述根据所述目标任务信息对所述目标对象进行监控处理得到监控结果之后，还包括：

判断所述监控结果中是否存在记录告警；

若所述监控结果中存在记录告警，则判断预设时间段内的预警通知次数是否超过通知次数阈值，若预设时间段内的预警通知次数未超过通知次数阈值，则进行预警通知；

若所述监控结果中不存在记录告警，或者，预设时间段内的预警通知次数超过通知次数阈值，则不进行预警通知。

4.根据权利要求1所述的方法，其特征在于，当所述对象的类型为kafka集群，所述对象的配置信息包括：集群地址信息、集群对应的服务地址；

当所述任务表为监控任务表时，所述对象的任务信息包括：所述对象中待监控的主题和消费者组、任务开始时间、任务结束时间；

所述根据所述目标任务信息对所述目标对象进行监控处理得到监控结果，包括：

周期性的获取所述目标对象中待监控的主题的各个分区的偏移值，以及所述目标对象中待监控的消费者组对待监控的主题的各个分区消费到的偏移值，确定待监控的主题的各个分区的消费滞后值，将待监控的主题的各个分区的消费滞后值确定为监控结果，直至到达所述目标对象的任务结束时间。

5.根据权利要求4所述的方法，其特征在于，所述对象的任务信息还包括：消费滞后阈值；

所述根据所述目标任务信息对所述目标对象进行监控处理得到监控结果之后，还包括：

将所述目标对象中待监控的主题的各个分区的消费滞后值与所述目标任务信息中的消费滞后阈值进行比对，判断是否存在对应的消费滞后值大于消费滞后阈值的第一分区；

若存在所述第一分区，则判断预设时间段内的预警通知次数是否超过通知次数阈值，若预设时间段内的预警通知次数未超过通知次数阈值，则进行预警通知；

若不存在所述第一分区，或者，预设时间段内的预警通知次数超过通知次数阈值，则不进行预警通知。

6.根据权利要求4所述的方法，其特征在于，当所述任务表为元数据输出任务表时，所述对象的任务信息包括：所述对象中待监控的主题和消费者组、任务开始时间、任务结束时间；

所述根据所述目标任务信息对所述目标对象进行监控处理得到监控结果，包括：

周期性的获取所述目标对象中待监控的主题的各个分区的偏移值，以及所述目标对象中待监控的消费者组对待监控的主题的各个分区消费到的偏移值，确定待监控的主题的各个分区的偏移值、消费到的偏移值、消费滞后值、增量数据，并写入输出表，直至到达所述目标对象的任务结束时间。

7.根据权利要求1所述的方法，其特征在于，还包括：

获取微服务系统中待监控的网页URL的配置信息以及任务信息；

将所述网页URL的配置信息以及任务信息添加到URL监控任务表中；

当检测到达URL监控任务表扫描周期时，监测所述URL监控任务表中当前的任务信息，当监测到被触发的目标网页URL任务信息后，从所述URL监控任务表中获取与所述目标网页URL任务信息对应的配置信息指示的目标网页URL；

根据所述目标网页URL任务信息对所述目标网页URL进行处理，得到任务执行结果。

8.根据权利要求7所述的方法，其特征在于，所述配置信息包括：所述网页URL的地址信息以及请求头信息；

所述任务信息包括：任务开始时间和任务终止时间；

所述根据所述目标网页URL任务信息对所述目标网页URL进行处理，得到任务执行结果，包括：

周期性的发起携带所述目标网页URL的地址信息以及请求头信息的请求，获取请求结果，将所述请求结果确定为任务执行结果，直至到达所述目标网页URL的任务结束时间。

9.根据权利要求8所述的方法，其特征在于，所述任务信息还包括：期望的返回值内容；

所述根据所述目标网页URL任务信息对所述目标网页URL进行处理，得到任务执行结果之后，还包括：

判断所述任务执行结果中是否包括目标网页URL任务信息中的期望的返回值内容；

若所述任务执行结果中不包括目标网页URL任务信息中的期望的返回值内容，则判断预设时间段内的预警通知次数是否超过通知次数阈值，若预设时间段内的预警通知次数未超过通知次数阈值，则进行预警通知；

若所述任务执行结果中包括目标网页URL任务信息中的期望的返回值内容，或者，预设时间段内的预警通知次数超过通知次数阈值，则不进行预警通知。

10.一种微服务系统的监控装置，其特征在于，包括：

获取模块，用于获取微服务系统中待监控的对象的配置信息、任务信息以及监控标示；

添加模块，用于将所述配置信息以及所述监控标示添加到与所述对象的类型对应的配置信息表中，将所述任务信息以及所述监控标示添加到与所述类型对应的任务表中；

监测模块，用于当检测到达扫描周期时，监测所述任务表中当前的任务信息，当监测到被触发的目标任务信息后，获取与所述目标任务信息对应的目标监控标示，以及从所述配置信息表中获取与所述目标监控标示对应的目标配置信息指示的目标对象；

监控模块，用于根据所述目标任务信息对所述目标对象进行监控处理得到监控结果。

11.一种微服务系统的监控装置，其特征在于，包括：

存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1-9任一所述的微服务系统的监控方法。

12.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-9任一所述的微服务系统的监控方法。

Images