CN110532253B - 一种业务分析方法、系统及集群 - Google Patents

Abstract

本发明实施例提供了一种业务分析方法、系统及集群，其中，该方法包括：在对业务请求进行业务调用处理过程中，通过各个业务配置的探针分别采集各个业务执行产生的符合设定配置规则的业务数据，并将采集的业务数据上报给数据存储模块；查询所述数据存储模块的业务数据，并对查询的业务数据进行分析，生成数据分析报表，并展示所述数据分析报表。本发明实施例提供的技术方案可以采集业务处理过程中各个环节的业务数据，可以对业务处理过程中完整的特定业务数据进行分析，避免业务分析存在盲点。

Description

一种业务分析方法、系统及集群

技术领域

本发明实施例涉及数据分析技术领域，尤其涉及一种业务分析方法、系统及集群。

背景技术

目前，越来越多的企业开始注重数据运营，如何快挖掘数据进行业务分析成为企业运营重点。传统的业务分析通常有以下几种方式：一种是离线数据分析：根据需求编写离线数据处理程序进行数据分析和挖掘；一种是数据库存储查询：用数据库或者其他进行数据存储，再通过API服务进行定时的数据查询，来实现数据业务分析。一种是OLAP引擎分析系统：通过构建OLAP引擎分析系统实现业务数据的分析和查询展示。

虽然上述的传统方法可以实现对业务数据的分析，但是业务处理路径不透明，只能够根据最终入库或者处理后的数据进行业务分析，对业务数据的生产环节缺少洞察，导致业务分析存在盲点。

发明内容

本发明提供一种业务分析方法、系统及集群，可以对业务处理过程中完整的业务数据进行分析，避免业务分析存在盲点。

第一方面，本发明实施例提供了一种业务分析方法，包括：

在对业务请求进行业务调用处理过程中，通过各个业务配置的探针分别采集各个业务执行产生的符合设定配置规则的业务数据，并将采集的业务数据上报给数据存储模块；

查询所述数据存储模块的业务数据，并对查询的业务数据进行分析，生成数据分析报表，并展示所述数据分析报表。

第二方面，本发明实施例提供了一种业务分析系统，包括：

探针，用于在对业务请求进行业务调用处理过程中，分别采集各个业务执行产生的符合设定配置规则的业务数据，并将采集的业务数据上报给数据存储模块；

展示模块，用于查询所述数据存储模块的业务数据，并对查询的业务数据进行分析，生成数据分析报表，并展示所述数据分析报表。

本发明实施例提供了一种集群，包括本发明实施例提供的一种业务分析系统。

本发明实施例提供的技术方案，在对业务请求进行业务调用处理过程中，通过各个业务配置的探针分别采集各个业务执行产生的符合设定配置规则的数据，并将数据上报给数据存储模块，通过查询数据存储模块中的数据，并对查询的数据进行分析，生成分析报表，可以采集业务处理过程中各个环节的业务数据，可以对业务处理的过程中完整的业务数据进行分析，避免业务分析存在盲点，可以实现对业务数据的实时采集，加快数据分析过程。

附图说明

图1是本发明实施例提供的一种业务分析方法流程图；

图2是本发明实施例提供的一种业务分析方法流程图；

图3是本发明实施例提供的一种业务分析系统结构框图；

图4是本发明实施例提供的一种集群的结构框图。

具体实施方式

下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。

图1是本发明实施例提供的一种业务分析方法流程图，所述方法可以由一种业务分析系统来执行，所述系统可以应用于集群中。如图1所示，本发明实施例提供的技术方案包括：

S110：在对业务请求进行业务调用处理过程中，通过各个业务配置的探针分别采集各个业务执行产生的符合设定配置规则的业务数据，并将采集的业务数据上报给数据存储模块。

在本发明实施例中，可选的，在对业务进行业务调用处理过程中，通过各个业务配置的探针分别采集各个业务执行产生的符合设定配置规则的业务数据之前，还可以包括对各个业务配置探针，并对各个探针进行采集业务数据的规则配置。其中，配置规则可以包括数据的采集方式、数据的运算规则，数据的过滤条件以及数据的类型。其中，数据的采集方式可以包括：http数据采集、方法数据采集以及SQL数据采集等。可以理解的是可以根据配置规则中的数据的运算规则采集业务数据，运算规则可以是包括，大于、等于、小于等。当业务数据符合数据过滤条件时，将该业务数据过滤；当业务数据符合配置规则中的数据的类型时，则采集该业务数据。可选的，当对各个探针进行采集业务数据的规则配置，可以包括：基于业务处理路径对各个业务配置的探针进行采集业务数据的规则配置。具体可以详见下述实施例的介绍。其中，对各个探针进行采集业务数据的规则配置的方式还可以是其他方式。

由此，通过对各个业务进行配置探针，并对探针进行采集业务数据的规则配置，可以采集业务调用处理过程中各个环节指定的业务数据，以便于进行数据分析。

在本发明实施例中，当在集群中处理业务请求时，在处理过程中的各个环节会出现业务调用，通过业务配置的探针分别采集各个业务执行产生的符合配置规则的数据，并将采集的数据上报给数据存储模块。例如，当需要对订单中的金额进行分析时，可以对订单业务配置探针，对订单业务配置的探针的配置采集金额数据的规则。则通过对各个业务请求进行业务调用处理过程中，通过订单业务配置的探针可以采集订单的金额，从而得到订单中的金额数据，并进行上报，以对金额数据进行分析。

需要说明的是，本发明实施例中，探针在采集符合设定配置规则的业务数据的同时，探针还可以采集业务调用的性能数据，并将业务调用的性能数据进行上报，以使用户可以查看性能数据。其中业务调用的性能数据包括调用的响应时间、错误信息以及调用次数等。错误信息可以是错误次数等。

S120：查询所述数据存储模块的业务数据，并对查询的业务数据进行分析，生成数据分析报表，并展示所述数据分析报表。

在本发明实施例中的一个实施方式中，可选的，所述查询所述数据存储模块的业务数据，并基于查询的业务数据进行分析，生成数据分析报表，包括：获取用户输入的数据标识，查询与所述数据标识对应的业务数据；对所述业务数据进行分析，生成数据分析报表。具体的，当查询业务数据时，可以获取用户输入的数据标识，其中数据标识可以是数据源标识；在数据存储模块中查询与数据源的标识匹配的数据，并对查询的数据进行分析，生成图表以及数据分析报表，并进行展示。其中，可以通过报表引擎生成数据分析报表，快速响应业务分析需求，解决相关技术中需要多方协作才能构建分析报表的问题。其中，用户可以对生成的图表进行设置，例如，可以进行分辨率设置、样式布局设置等。

相关技术中，传统的数据分析方式，可以实现对业务数据的分析，但是业务处理路径不透明，只能够根据最终入库或者处理后的数据进行业务分析，对业务数据的生产环节缺少洞察，导致业务分析存在盲点。本发明实施例通过对各个业务配置探针，并对探针进行采集业务数据的配置，可以通过探针采集业务处理过程中各个环节的特定业务数据，以对业务数据进行分析，避免业务分析存在盲点。

相关技术中，传统的数据分析方式需要较多的数据传递环节导致业务分析的实时度不高，本发明实施例提供过探针可以实时采集各个业务符合设定配置规则的数据，并进行上报，可以有效减少数据传递过程，加快数据业务分析过程。本发明实施例提供的技术方案，在对业务请求进行业务调用处理过程中，通过各个业务配置的探针分别采集各个业务执行产生的符合设定配置规则的数据，并将数据上报给数据存储模块，通过查询数据存储模块中的数据，并对查询的数据进行分析，生成分析报表，可以采集业务处理过程中各个环节的业务数据，可以对业务处理的过程中完整的业务数据进行分析，避免业务分析存在盲点，可以对业务处理过程中各个环节特定数据，可以实现对业务数据的实时采集，加快数据分析过程。

图2是本发明实施例提供的一种业务分析方法流程图，本实施例中的技术方案可以与上述实施例的一个或者多个技术方案进行组合。

本发明实施例中，可选的，所述对各个探针进行采集业务数据的规则配置，包括：

基于业务处理路径对各个业务配置的探针进行采集业务数据的规则配置。

可选的，本发明实施例提供的方法还可以包括：

当通过探针监控到前端的业务请求时，记录业务请求的业务调用层级信息；

通过探针在业务请求处理过程中的各个业务中依次传递业务调用层级信息；

通过探针将各个业务的业务调用层级信息上报给服务器，以使服务器基于各个业务的调用层级信息生成完整的业务处理路径；

展示针对业务请求的完整的业务处理路径。

如图2所示，本发明实施例提供的技术方案包括：

S210：当通过探针监控到前端的业务请求时，记录所述业务请求的业务调用层级信息。

在本发明实施例中，前端的业务请求可以是由软件系统的生产环境中执行需要执行某一个业务，发出的业务请求。当通过配置在设备上的探针在入口业务处监控到业务请求时，记录针对业务请求的调用层级信息以及业务调用的性能数据。入口业务可以是处理业务请求的第一个业务处理环节。

其中，在集群中处理业务请求时，在各个处理环节会出现业务之间的调用，所以通过探针可以记录针对业务请求的业务调用层级信息，业务调用层级信息可以体现各个业务之间的调用关系，可选的，可以体现当前业务与上级业务之间的调用关系，上级业务可以是指当前业务之前的所有业务。

在本发明实施例中，可选的，业务调用的性能数据包括调用的响应时间、错误信息以及调用次数，其中，错误信息可以是错误次数，或者错误率等，业务调用的性能数据并不局限于上述的数据，还可以包括其他体现业务调用性能的数据。

S220：通过探针在业务请求处理过程中的各个业务中依次传递业务调用层级信息。

在本发明实施例中，可选的，可以将业务调用层级信息携带在RcpID中传递给下一级的业务，直至传递到最后一级业务。具体的，在业务处理过程中，探针会在Rpc调用前生成RpcID，并将业务调用层级信息传递给下一级业务。将下一级业务作为当前业务，通过探针将当前业务的业务调用层级信息传递给下一级业务，重复将下一级业务作为当前业务，通过探针将当前业务的调用层级信息传递给下一级业务的操作，直至将业务调用层级信息传递至最后一级业务。

其中，每个业务的业务调用层级信息并不相同，每个业务的业务调用层级信息体现当前业务与上级业务的调用关系。例如，处理业务请求时，若入口业务为A，业务A调用业务B，业务B调用业务C；则入口业务的业务调用层级信息可以是0，则下一级业务B的业务调用层级信息可以是0.1，则业务C的业务调用层级信息可以是0.1.1。在业务调用层级信息传递过程中，通过探针传递的业务调用层级信息可以体现当前业务与上级业务以及下一级业务的调用关系。例如，探针将业务A的业务调用层级信息向业务B传递过程中，传递的业务调用层级信息可以是0.1，当通过探针监控到业务B接收到调用层级信息时，将业务B的业务调用层级信息设置为0.1。

S230：通过探针将各个业务的业务调用层级信息上报给服务器，以使服务器基于各个业务的调用层级信息生成完整的业务处理路径。

在本发明实施例中，针对每个业务，当在业务的调用层级信息传递过程中，通过探针将业务的业务调用层级信息以及业务调用的性能数据上传到服务器以进行存储或处理。

在本发明实施例中，服务器可以基于各个业务的调用层级信息生成完整的业务处理路径。服务器基于当前业务的调用层级信息确定当前业务的上一级业务，重复该操作，直至确定入口业务。例如，业务C的调用层级信息为0.1.1，则业务C的上一级业务的业务调用层级信息为0.1，则调用层级信息为0.1的是业务B，则业务B的上一级的业务调用层级信息是0，则业务调用层级信息为0的是入口业务A，其中，针对一个业务请求的业务调用的完整的处理路径可以表示为A->B->C，箭头可以表征调用关系。

S240：展示针对业务请求的完整的业务处理路径。

在本发明实施例中，服务器生成业务调用的完整的业务处理路径后，可以将完整的业务处理路径、业务调用的性能数据直接进行存储，或者存储到数据存储模块中。用户可以根据需求访问服务器或者数据存储模块，查询业务请求的相关数据，从而将针对业务请求的完整的业务处理路径以及业务调用的性能数据进行展示。具体的，可以通过Web组件进行展示。用户可以通过可视化界面查看处理的针对所有业务请求的完整处理路径，并了解业务调用的性能数据。

S250：基于业务处理路径对各个业务配置的探针进行采集数据的规则配置。

在本发明实施例的一个实施方式中，可选的，所述基于业务处理路径对各个业务配置的探针进行采集业务数据的规则配置，包括：若业务处理路径中存在至少两个业务均调用了一个目标业务，则对至少两个业务中的一个业务配置的探针进行采集业务数据的规则配置。例如，在业务处理路径中存在业务A和业务B均调用了业务C，则对业务A或者业务B配置探针，并对探针进行采集业务数据规则配置。具体的，针对账号业务，电商业务、支付宝等均可以调用，则可以给电商业务，或者支付宝配置探针即可。由此，通过若业务处理路径中存在至少两个业务均调用了一个目标业务，则对至少两个业务中的一个业务配置的探针进行采集业务数据的规则配置，在采集业务数据时，可以节省资源。

需要说明的是，基于业务处理路径对各个业务配置的探针进行采集数据的规则配置时，还可以采用其他的方式。例如，基于业务处理路径中各个业务之间的关系确定采集业务数据的配置规则，或者确定业务处理路径中的各个业务，并对各个业务的探针进行采集数据的规则配置。

由此，通过业务处理路径对各个业务配置的探针进行采集数据的规则配置，以使对各个环节的业务数据(或者特定业务数据)进行采集，对各个环节的完整业务数据进行分析，避免业务分析存在盲点。

S260：在对业务请求进行业务调用处理过程中，通过各个业务配置的探针分别采集各个业务执行产生的符合设定配置规则的数据，并将采集的数据上报给数据存储模块。

S270：查询所述数据存储模块的数据，并对查询的数据进行分析，生成数据分析报表，并展示所述数据分析报表。

其中，S260-S270的介绍详见上述实施例的介绍。

在上述任意一个实施例的基础上，本发明任意实施例提供的技术方案还可以包括：通过探针采集资源使用率，若资源使用率达到资源使用阈值，则限制或者取消探针对数据的采集。其中，资源使用率可以基于CPU、内存等的使用情况进行计算。其中，限制数据的采集的方式可以是通过概率采样。当资源使用率达到资源使用阈值时，通过限制或者取消探针对数据的采集，可以节省资源，优先保证业务的处理。

图3是本发明实施例提供的一种业务分析系统结构框图，如图3所示，本发明实施例提供的系统包括探针310和展示模块320。

探针310，用于在对业务请求进行业务调用处理过程中，分别采集各个业务执行产生的符合设定配置规则的业务数据，并将采集的业务数据上报给数据存储模块；

展示模块320，用于查询所述数据存储模块的业务数据，并对查询的业务数据进行分析，生成数据分析报表，并展示所述数据分析报表。

可选的，所示系统还包括：配置模块，用于对各个业务配置探针，并对各个探针进行采集业务数据的规则配置。

可选的，配置模块，用于基于业务处理路径对各个业务配置的探针进行采集业务数据的规则配置。

可选的，配置模块，用于若业务处理路径中存在至少两个业务均调用了一个目标业务，则对至少两个业务中的一个业务配置的探针进行采集业务数据的规则配置。

可选的，所述系统还可以包括限制/取消模块，用于通过探针采集资源使用率，若资源使用率达到资源使用阈值，则限制或者取消探针对数据的采集。

可选的，所述配置规则包括：数据的采集方式、数据的运算规则，数据的过滤条件以及数据的类型。

可选的，展示模块，用于获取用户输入的数据标识，查询与所述数据标识对应的业务数据；对所述业务数据进行分析，生成数据分析报表。

可选的，探针310，还用于当监控到前端的业务请求时，记录业务请求的业务调用层级信息；

在业务请求处理过程中的各个业务中依次传递业务调用层级信息；

将各个业务的业务调用层级信息上报给服务器，以使服务器基于各个业务的调用层级信息生成完整的业务处理路径；

展示模块320，还用于展示针对业务请求的完整的业务处理路径。

本发明实施例提供的业务分析系统可以执行本发明实施例中提供的业务分析方法。

图4是本发明实施例提供的一种集群，如图4所示，集群2包括本发明实施例提供的一种业务分析系统1。

注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。

Claims (6)

1.一种业务分析方法，其特征在于，包括：

在对业务请求进行业务调用处理过程中，通过各个业务配置的探针分别采集各个业务执行产生的符合设定配置规则的业务数据，并将采集的业务数据上报给数据存储模块；

查询所述数据存储模块的业务数据，并对查询的业务数据进行分析，生成数据分析报表，并展示所述数据分析报表；

其中，对各个业务配置探针，并对各个探针进行采集业务数据的规则配置；

其中，所述对各个探针进行采集业务数据的规则配置，包括：

基于业务处理路径对各个业务配置的探针进行采集业务数据的规则配置；

其中，所述基于业务处理路径对各个业务配置的探针进行采集业务数据的规则配置，包括：

若业务处理路径中存在至少两个业务均调用了一个目标业务，则对至少两个业务中的一个业务配置的探针进行采集业务数据的规则配置；

其中，所述在对基于业务处理路径对各个业务配置的探针进行采集业务数据的规则配置之前，还包括：

当通过探针监控到前端的业务请求时，记录业务请求的业务调用层级信息；

通过探针在业务请求处理过程中的各个业务中依次传递业务调用层级信息；

通过探针将各个业务的业务调用层级信息上报给服务器，以使服务器基于各个业务的调用层级信息生成完整的业务处理路径；

展示针对业务请求的完整的业务处理路径；

其中，在集群中处理业务请求时，如果在各个处理环节存在业务之间的调用，则通过探针记录针对业务请求的业务调用层级信息；

其中，将业务调用层级信息携带在RcpID中传递给下一级的业务，直至传递到最后一级业务。

2.根据权利要求1所述的方法，其特征在于，还包括：通过探针采集资源使用率，若资源使用率达到资源使用阈值，则限制或者取消探针对数据的采集。

3.根据权利要求1所述的方法，其特征在于，所述配置规则包括：数据的采集方式、数据的运算规则，数据的过滤条件以及数据的类型。

4.根据权利要求1所述的方法，其特征在于，所述查询所述数据存储模块的业务数据，并基于查询的业务数据进行分析，生成数据分析报表，包括：

获取用户输入的数据标识，查询与所述数据标识对应的业务数据；

对所述业务数据进行分析，生成数据分析报表。

5.一种业务分析系统，其特征在于，包括：

探针，用于在对业务请求进行业务调用处理过程中，分别采集各个业务执行产生的符合设定配置规则的业务数据，并将采集的业务数据上报给数据存储模块；

展示模块，用于查询所述数据存储模块的业务数据，并对查询的业务数据进行分析，生成数据分析报表，并展示所述数据分析报表；

其中，所示系统还包括：配置模块，用于对各个业务配置探针，并对各个探针进行采集业务数据的规则配置；

其中，所述配置模块，用于基于业务处理路径对各个业务配置的探针进行采集业务数据的规则配置；

其中，所述配置模块，用于若业务处理路径中存在至少两个业务均调用了一个目标业务，则对至少两个业务中的一个业务配置的探针进行采集业务数据的规则配置；

其中，探针，还用于当监控到前端的业务请求时，记录业务请求的业务调用层级信息；

在业务请求处理过程中的各个业务中依次传递业务调用层级信息；

将各个业务的业务调用层级信息上报给服务器，以使服务器基于各个业务的调用层级信息生成完整的业务处理路径；

展示模块，还用于展示针对业务请求的完整的业务处理路径；

其中，在集群中处理业务请求时，如果在各个处理环节存在业务之间的调用，则通过探针记录针对业务请求的业务调用层级信息；

其中，将业务调用层级信息携带在RcpID中传递给下一级的业务，直至传递到最后一级业务。

6.一种集群，其特征在于，包括如权利要求5所述的业务分析系统。