CN115827385A - 一种监控方法及系统 - Google Patents
一种监控方法及系统 Download PDFInfo
- Publication number
- CN115827385A CN115827385A CN202211591132.7A CN202211591132A CN115827385A CN 115827385 A CN115827385 A CN 115827385A CN 202211591132 A CN202211591132 A CN 202211591132A CN 115827385 A CN115827385 A CN 115827385A
- Authority
- CN
- China
- Prior art keywords
- service
- data
- monitored
- monitoring
- monitoring data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Debugging And Monitoring (AREA)
Abstract
本申请提供了一种监控方法及系统，具体涉及数据处理技术领域。具体包括：先获取待监控业务，后确定所述待监控业务对应的业务执行信息，所述业务执行信息用于标识执行所述待监控业务所需调用的多个服务，以及执行所述待监控业务时所述多个服务的调用方式，然后根据所述业务执行信息，从业务数据中采集所述多个服务对应的日志数据以及所述多个服务之间互相调用的数据，将采集到的数据添加至监控数据源中，接着将所述监控数据源中的数据进行聚合得到监控数据集，最后分析所述监控数据集，得到所述待监控业务对应的监控数据结果。如此，可以实现对包含多个服务的业务进行监控。
Description
技术领域
本申请涉及数据处理技术领域，尤其涉及一种监控方法及系统。
背景技术
监控是产品周期中重要的一环，在软件开发和运营中起到重要作用。
由于电力营销系统规模庞大，面向用户众多，因此，采用微服务架构建立电力营销系统是一种必然选择。微服务是一种架构风格，将一个大型的系统拆分为多个拥有独立生命周期的应用，应用之间采用轻量级的通信机制进行通信。这些应用都是围绕具体业务进行构建，可以独立部署、独立迭代，也可能根据业务负载独立的水平扩展。但是，微服务架构也带来了架构复杂度的提升，给应用监控带来了前所未有的挑战。在微服务时代，由于服务的拆分，单个用户请求会经过多个微服务应用，形成复杂的调用链路，使传统的依赖于单机业务日志的监控手段无从下手。
综上所述，如何实现对包含多个服务的业务进行监控是本领域技术人员亟需解决的问题。
发明内容
有鉴于此，本申请提供了一种监控方法及系统，旨在实现对包含多个服务的业务进行监控。
第一方面，本申请提供了一种监控方法，包括：
获取待监控业务；
确定所述待监控业务对应的业务执行信息，所述业务执行信息用于标识执行所述待监控业务所需调用的多个服务，以及执行所述待监控业务时所述多个服务的调用方式；
根据所述业务执行信息，从业务数据中采集所述多个服务对应的日志数据以及所述多个服务之间互相调用的数据，将采集到的数据添加至监控数据源中；
将所述监控数据源中的数据进行聚合得到监控数据集；
分析所述监控数据集，得到所述待监控业务对应的监控数据结果。
可选的，将所述监控数据源中的数据进行聚合得到监控数据集之前，所述方法还包括：
删除所述监控数据源中的不完整的日志数据；
所述将所述监控数据源中的数据进行聚合得到监控数据集，包括：
将经过删除处理的所述监控数据源中的数据进行聚合得到监控数据集。
可选的，所述分析所述监控数据集，得到所述待监控业务对应的监控数据结果，包括：
获取所述待监控业务的实际业务数据；
根据所述待监控业务对应的业务执行信息，确定待监控业务的监控业务数据的生成方式；
根据所述监控数据集中的数据以及所述生成方式，生成所述待监控业务的监控业务数据；
将所述实际业务数据与所述监控业务数据进行比对，得到所述待监控业务对应的监控数据结果。
可选的，所述得到所述待监控业务对应的监控数据结果之后，所述方法还包括：
将所述待监控业务对应的监控数据结果展示在显示界面上。
可选的，所述得到所述待监控业务对应的监控数据结果之后，所述方法还包括：
响应于所述监控数据结果异常，生成数据异常警报，所述数据异常警报用于指示待监控业务异常。
第二方面，本申请提供了一种监控系统，包括：
获取单元，用于获取待监控业务；
确定单元，用于确定所述待监控业务对应的业务执行信息，所述业务执行信息用于标识执行所述待监控业务所需调用的多个服务，以及执行所述待监控业务时所述多个服务的调用方式；
采集单元，用于根据所述业务执行信息，从业务数据中采集所述多个服务对应的日志数据以及所述多个服务之间互相调用的数据，将采集到的数据添加至监控数据源中；
聚合单元，用于将所述监控数据源中的数据进行聚合得到监控数据集；
分析单元，用于分析所述监控数据集，得到所述待监控业务对应的监控数据结果。
可选的，所述系统还包括：
删除单元，用于删除所述监控数据源中的不完整的日志数据；
所述聚合单元，具体用于将经过删除处理的所述监控数据源中的数据进行聚合得到监控数据集。
可选的，所述分析单元，具体用于：
获取所述待监控业务的实际业务数据；
根据所述待监控业务对应的业务执行信息，确定待监控业务的监控业务数据的生成方式；
根据所述监控数据集中的数据以及所述生成方式，生成所述待监控业务的监控业务数据；
将所述实际业务数据与所述监控业务数据进行比对，得到所述待监控业务对应的监控数据结果。
第三方面，本申请提供了一种计算机设备，所述设备包括存储器和处理器，所述存储器用于存储指令或代码，所述处理器用于执行所述指令或代码，以使所述设备执行前述第一方面任一项所述的监控方法。
第四方面，本申请实施例提供了一种计算机存储介质，所述计算机存储介质中存储有代码，当所述代码被运行时，运行所述代码的设备实现前述第一方面任一项所述的监控方法。
本申请提供了一种监控方法。在执行所述方法时，先获取待监控业务，后确定所述待监控业务对应的业务执行信息，所述业务执行信息用于标识执行所述待监控业务所需调用的多个服务，以及执行所述待监控业务时所述多个服务的调用方式，然后根据所述业务执行信息，从业务数据中采集所述多个服务对应的日志数据以及所述多个服务之间互相调用的数据，将采集到的数据添加至监控数据源中，接着将所述监控数据源中的数据进行聚合得到监控数据集，最后分析所述监控数据集，得到所述待监控业务对应的监控数据结果。这样，通过采取执行待监控业务的多个服务的数据，在将采取到的数据聚合得到监控数据集，根据监控数据集分析得到监控数据结果，如此，可以实现对包含多个服务的业务进行监控。
附图说明
为更清楚地说明本实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种监控方法的方法流程图；
图2为本申请实施例提供的另一种监控方法的方法流程图；
图3为本申请实施例提供的一种监控系统的结构示意图。
具体实施方式
正如前文描述，由于电力营销系统规模庞大，面向用户众多，因此，采用微服务架构建立电力营销系统是一种必然选择。微服务是一种架构风格，将一个大型的系统拆分为多个拥有独立生命周期的应用，应用之间采用轻量级的通信机制进行通信。这些应用都是围绕具体业务进行构建，可以独立部署、独立迭代，也可能根据业务负载独立的水平扩展。但是，微服务架构也带来了架构复杂度的提升，给应用监控带来了前所未有的挑战。在微服务时代，由于服务的拆分，单个用户请求会经过多个微服务应用，形成复杂的调用链路，使传统的依赖于单机业务日志的监控手段无从下手。
发明人经过研究，提出了先获取待监控业务，后确定所述待监控业务对应的业务执行信息，所述业务执行信息用于标识执行所述待监控业务所需调用的多个服务，以及执行所述待监控业务时所述多个服务的调用方式，然后根据所述业务执行信息，从业务数据中采集所述多个服务对应的日志数据以及所述多个服务之间互相调用的数据，将采集到的数据添加至监控数据源中，接着将所述监控数据源中的数据进行聚合得到监控数据集，最后分析所述监控数据集，得到所述待监控业务对应的监控数据结果。这样，通过采取执行待监控业务的多个服务的数据，在将采取到的数据聚合得到监控数据集，根据监控数据集分析得到监控数据结果，如此，可以实现对包含多个服务的业务进行监控。
为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
参见图1，图1为本申请实施例提供的一种监控方法的方法流程图，包括：
S101：获取待监控业务。
待监控业务为需要通过多个服务实现的业务。
S102：确定待监控业务对应的业务执行信息。
业务执行信息用于标识执行所述待监控业务所需调用的多个服务，以及执行所述待监控业务时所述多个服务的调用方式，确定待监控业务对应的业务执行信息就可以确定执行待监控业务所需要调用的多个服务以及多少个服务在执行待监控业务时的调用方式。
S103：根据业务执行信息，从业务数据中采集多个服务对应的日志数据以及多个服务之间互相调用的数据，将采集到的数据添加至监控数据源中。
根据业务执行信息生成采取规则，采集规则控制数据源的选取，在多个服务对应的日志数据以及多个服务之间互相调用的数据进行采取，再将采集到的数据添加至监控数据源中。
S104：将监控数据源中的数据进行聚合得到监控数据集。
根据预设的聚合算法，将监控源中的数据进行聚合，得到监控数据集。
S105：分析监控数据集，得到待监控业务对应的监控数据结果。
对监控数据集的分析过程包括：获取待监控业务的实际业务数据，根据待监控业务对应的业务执行信息，确定待监控业务的监控业务数据的生成方式，根据监控数据集中的数据以及待监控业务的监控业务数据的生成方式，生成待监控业务的监控业务数据，最后将实际业务数据与监控业务数据进行比对，得到所述待监控业务对应的监控数据结果。
本申请实施例公开了一种监控方法，包括：先获取待监控业务，后确定所述待监控业务对应的业务执行信息，所述业务执行信息用于标识执行所述待监控业务所需调用的多个服务，以及执行所述待监控业务时所述多个服务的调用方式，然后根据所述业务执行信息，从业务数据中采集所述多个服务对应的日志数据以及所述多个服务之间互相调用的数据，将采集到的数据添加至监控数据源中，接着将所述监控数据源中的数据进行聚合得到监控数据集，最后分析所述监控数据集，得到所述待监控业务对应的监控数据结果。这样，通过采取执行待监控业务的多个服务的数据，在将采取到的数据聚合得到监控数据集，根据监控数据集分析得到监控数据结果，如此，可以实现对包含多个服务的业务进行监控。
参见图2，该图为本申请实施例提供的另一种监控方法的方法流程图，包括：
步骤S201与S101的实施方式相同，步骤S202与S102的实施方式相同，步骤S203与S103的实施方式相同，步骤S206与S105的实施方式相同，此处不再赘述。
S204：删除监控数据源中的不完整的日志数据。
筛选出监控数据源中不完整的日志数据，若利用不完整的日志数据去进行业务监控，会导致监控数据结果不准确，删除监控数据源中的不完整的日志数据，可以提高监控的准确性。
S205：将经过删除处理的监控数据源中的数据进行聚合得到监控数据集。
根据预设的聚合算法，将经过删除处理的监控数据源中的数据进行聚合，得到监控数据集，可以提高监控的准确性。
S207：将待监控业务对应的监控数据结果展示在显示界面上。
将待监控业务对应的监控数据结果展示在数据展示器上，数据展示器是全链监测架构的前端展示组件，分为管理员监控大屏、告警应用界面、OpenAPI调用管理界面。
S209：响应于监控数据结果异常，生成数据异常警报。
响应于所述监控数据结果异常，生成数据异常警报，所述数据异常警报用于指示待监控业务异常，可以提醒相关人员及时进行处理。
以上为本申请实施例提供的监控方法的一些具体实现方式，基于此，本申请还提供了对应的装置。下面将从功能模块化的角度对本申请实施例提供的装置进行介绍。
参见图3所示的监控系统300的结构示意图，该系统300包括：
获取单元310，用于获取待监控业务；
确定单元320，用于确定所述待监控业务对应的业务执行信息，所述业务执行信息用于标识执行所述待监控业务所需调用的多个服务，以及执行所述待监控业务时所述多个服务的调用方式；
采集单元330，用于根据所述业务执行信息，从业务数据中采集所述多个服务对应的日志数据以及所述多个服务之间互相调用的数据，将采集到的数据添加至监控数据源中；
聚合单元340，用于将所述监控数据源中的数据进行聚合得到监控数据集；
分析单元350，用于分析所述监控数据集，得到所述待监控业务对应的监控数据结果。
可选的，所述系统300还包括：
删除单元，用于删除所述监控数据源中的不完整的日志数据；
所述聚合单元340，具体用于将经过删除处理的所述监控数据源中的数据进行聚合得到监控数据集。
可选的，所述分析单元350，具体用于：
获取所述待监控业务的实际业务数据；
根据所述待监控业务对应的业务执行信息，确定待监控业务的监控业务数据的生成方式；
根据所述监控数据集中的数据以及所述生成方式，生成所述待监控业务的监控业务数据；
将所述实际业务数据与所述监控业务数据进行比对，得到所述待监控业务对应的监控数据结果。
可选的，所述系统300还包括：
显示单元，用于将所述待监控业务对应的监控数据结果展示在显示界面上。
可选的，所述系统300还包括：
报警单元，用于响应于所述监控数据结果异常，生成数据异常警报，所述数据异常警报用于指示待监控业务异常。
本申请实施例还提供了对应的设备以及计算机存储介质，用于实现本申请实施例提供的方案。
其中，所述设备包括存储器和处理器，所述存储器用于存储指令或代码，所述处理器用于执行所述指令或代码，以使所述设备执行本申请任一实施例所述的监控方法。
所述计算机存储介质中存储有代码，当所述代码被运行时，运行所述代码的设备实现本申请任一实施例所述的监控方法。
本申请实施例中提到的“第一”、“第二”(若存在)等名称中的“第一”、“第二”只是用来做名字标识，并不代表顺序上的第一、第二。
通过以上的实施方式的描述可知，本领域的技术人员可以清楚地了解到上述实施例方法中的全部或部分步骤可借助软件加通用硬件平台的方式来实现。基于这样的理解，本申请的技术方案可以以软件产品的形式体现出来，该计算机软件产品可以存储在存储介质中，如只读存储器(英文：read-only memory，ROM)/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者诸如路由器等网络通信设备)执行本申请各个实施例或者实施例的某些部分所述的方法。
本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于装置实施例而言，由于其基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。
以上所述仅是本申请示例性的实施方式，并非用于限定本申请的保护范围。
Claims (10)
1.一种监控方法，其特征在于，包括：
获取待监控业务；
确定所述待监控业务对应的业务执行信息，所述业务执行信息用于标识执行所述待监控业务所需调用的多个服务，以及执行所述待监控业务时所述多个服务的调用方式；
根据所述业务执行信息，从业务数据中采集所述多个服务对应的日志数据以及所述多个服务之间互相调用的数据，将采集到的数据添加至监控数据源中；
将所述监控数据源中的数据进行聚合得到监控数据集；
分析所述监控数据集，得到所述待监控业务对应的监控数据结果。
2.根据权利要求1所述的方法，其特征在于，将所述监控数据源中的数据进行聚合得到监控数据集之前，所述方法还包括：
删除所述监控数据源中的不完整的日志数据；
所述将所述监控数据源中的数据进行聚合得到监控数据集，包括：
将经过删除处理的所述监控数据源中的数据进行聚合得到监控数据集。
3.根据权利要求1所述的方法，其特征在于，所述分析所述监控数据集，得到所述待监控业务对应的监控数据结果，包括：
获取所述待监控业务的实际业务数据；
根据所述待监控业务对应的业务执行信息，确定待监控业务的监控业务数据的生成方式；
根据所述监控数据集中的数据以及所述生成方式，生成所述待监控业务的监控业务数据；
将所述实际业务数据与所述监控业务数据进行比对，得到所述待监控业务对应的监控数据结果。
4.根据权利要求1所述的方法，其特征在于，所述得到所述待监控业务对应的监控数据结果之后，所述方法还包括：
将所述待监控业务对应的监控数据结果展示在显示界面上。
5.根据权利要求1所述的方法，其特征在于，所述得到所述待监控业务对应的监控数据结果之后，所述方法还包括：
响应于所述监控数据结果异常，生成数据异常警报，所述数据异常警报用于指示待监控业务异常。
6.一种监控系统，其特征在于，包括：
获取单元，用于获取待监控业务；
确定单元，用于确定所述待监控业务对应的业务执行信息，所述业务执行信息用于标识执行所述待监控业务所需调用的多个服务，以及执行所述待监控业务时所述多个服务的调用方式；
采集单元，用于根据所述业务执行信息，从业务数据中采集所述多个服务对应的日志数据以及所述多个服务之间互相调用的数据，将采集到的数据添加至监控数据源中；
聚合单元，用于将所述监控数据源中的数据进行聚合得到监控数据集；
分析单元，用于分析所述监控数据集，得到所述待监控业务对应的监控数据结果。
7.根据权利要求6所述的系统，其特征在于，所述系统还包括：
删除单元，用于删除所述监控数据源中的不完整的日志数据；
所述聚合单元，具体用于将经过删除处理的所述监控数据源中的数据进行聚合得到监控数据集。
8.根据权利要求6所述的系统，其特征在于，所述分析单元，具体用于：
获取所述待监控业务的实际业务数据；
根据所述待监控业务对应的业务执行信息，确定待监控业务的监控业务数据的生成方式；
根据所述监控数据集中的数据以及所述生成方式，生成所述待监控业务的监控业务数据；
将所述实际业务数据与所述监控业务数据进行比对，得到所述待监控业务对应的监控数据结果。
9.一种计算机设备，其特征在于，包括：存储器，处理器，及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时，实现如权利要求1-5任一项所述的监控方法。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有指令，当所述指令在终端设备上运行时，使得所述终端设备执行如权利要求1-5任一项所述的监控方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202211591132.7A CN115827385A (zh) | 2022-12-12 | 2022-12-12 | 一种监控方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202211591132.7A CN115827385A (zh) | 2022-12-12 | 2022-12-12 | 一种监控方法及系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN115827385A true CN115827385A (zh) | 2023-03-21 |
Family
ID=85546520
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202211591132.7A Pending CN115827385A (zh) | 2022-12-12 | 2022-12-12 | 一种监控方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115827385A (zh) |
-
2022
- 2022-12-12 CN CN202211591132.7A patent/CN115827385A/zh active Pending
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110245078B (zh) | 一种软件的压力测试方法、装置、存储介质和服务器 | |
| CN112783720B (zh) | 拓扑结构图生成方法、装置、计算机设备和展示系统 | |
| CN111614483A (zh) | 链路监控方法、装置、存储介质及计算机设备 | |
| CN111240876A (zh) | 微服务的故障定位方法、装置、存储介质及终端 | |
| CN112148606B (zh) | 埋点测试方法、装置、设备及计算机可读介质 | |
| CN111414619B (zh) | 一种数据安全检测方法、装置、设备及可读存储介质 | |
| CN111782901A (zh) | 数据采集方法以及装置 | |
| CN110351131B (zh) | 一种用于分布式链路的监控方法、装置和电子设备 | |
| CN106648722B (zh) | 基于大数据的Flume接收端数据处理方法和装置 | |
| CN109240916B (zh) | 信息输出控制方法、装置及计算机可读存储介质 | |
| CN106484601B (zh) | 客户端的用户数据分析方法及系统 | |
| CN113296991A (zh) | 异常检测方法以及装置 | |
| CN111158979A (zh) | 服务的拨测方法、系统、装置及存储介质 | |
| CN115827385A (zh) | 一种监控方法及系统 | |
| CN116107913A (zh) | 单节点服务器的测试控制方法、装置及系统 | |
| CN115934199A (zh) | 服务性能监控工具、方法、设备及介质 | |
| CN113360182B (zh) | 系统性能诊断的方法和装置 | |
| CN110795330A (zh) | 一种Monkey压力测试的方法和装置 | |
| CN114385457A (zh) | 应用程序数据采集方法、装置、设备及存储介质 | |
| CN112579833B (zh) | 基于用户操作数据的业务关联关系获取方法及装置 | |
| CN110990237B (zh) | 一种信息收集系统、方法及存储介质 | |
| CN109726550A (zh) | 异常操作行为检测方法、装置及计算机可读存储介质 | |
| CN113918636A (zh) | 一种基于etl的数据处理量分析方法 | |
| CN114445162A (zh) | 反向追溯企业发票系统配置的方法 | |
| CN113190458A (zh) | 自动埋点数据分析的方法、装置、计算机设备和存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |