CN111400149A - 一种应用性能数据监控系统、客户端及方法 - Google Patents

Abstract

本发明涉及一种应用性能数据监控系统、客户端及方法，所述系统包括：监控用户确定模块、监控指令下发模块、监控数据接收模块和数据分析模块，其中，所述监控用户确定模块经配置以从应用的用户中确定部分用户作为当前监控期的监控用户；所述监控指令下发模块经配置以向经确定的当前监控期的监控用户下发监控指令信息；所述监控数据接收模块经配置以接收来自经确定的当前监控期的监控用户的应用上报的应用性能指标数据；所述数据分析模块经配置以分析经接收的应用性能指标数据以得到所述应用的性能数据。本发明在最大程度监控到App的线上用户的应用性能数据的同时，降低了性能监控对用户终端性能的影响，进而可监控到用户对App的真实体验。

Description

一种应用性能数据监控系统、客户端及方法

技术领域

本发明涉及一种应用(Application，简称App)技术领域，特别地涉及一种应用性能数据监控系统、客户端及方法。

背景技术

应用性能监控(Application Performance Monitor，简称APM)是一种用来监控App用户线上表现的一种方法。通过收集App客户端的用户数据(如用户终端数据、App运行数据、网络数据等)、分析所述用户数据来获知APP存在的问题、用户对所述App的体验等，从而确定对App的改进方案。

应用性能数据的监控是APM系统中的主要组成部分之一。应用性能数据的监控是指从安装有App客户端的用户终端获取用于评价该应用性能的数据、通过数据分析进而获得该应用性能的过程。通过应用性能数据的监控，可以确定该应用存在的问题、要改进的地方、用户体验等。所述的用于评价该应用性能的数据包括：用户终端内存的一些指标数据，如内存峰值、内存均值、内存抖动等；用户终端CPU的性能指标数据，如CPU峰值和CPU均值；代表App启动时间的性能指标数据，如冷启动时间、热启动时间和页面渲染时间等；UI性能指标数据，如重绘性能和滚动帧率等等。

现有的APM系统为了获取上述应用性能指标数据，通常采用针对全部用户，不间断地监控数据的方式，简称为全量监控。或者是为了得到某些特定用户的用户体验，通过控制开关(服务器下发的控制客户行为的指令代码)来控制所述特定用户的App客户端来收集并上报应用性能指标数据。例如为了获得应用某个版本的用户体验，只监控安装了该版本应用的用户，实际上，这仍然属于全量监控。

由于App客户端在收集、上报数据时，会占用并消耗用户终端的系统资源，尤其是采用全量监控模式时，对用户终端造成的损耗会影响App的性能和用户对App的体验，从而导致最终监控得到的用户体验并非是由用户对App本身性能产生的体验，而是受到了监控过程的影响。

发明内容

针对现有技术中存在的技术问题，本发明提出了一种应用性能数据监控系统、客户端及方法，用以减少进行应用性能监控时对用户终端的损耗。

为了解决上述技术问题，根据本发明的一个方面，本发明提供了一种应用性能数据监控系统，其包括监控用户确定模块、监控指令下发模块、监控数据接收模块和监控数据接收模块，其中，所述监控用户确定模块经配置以从应用的用户中确定部分用户作为当前监控期的监控用户；所述监控指令下发模块经配置以向经确定的当前监控期的监控用户下发监控指令信息；所述监控数据接收模块，其经配置以接收来自经确定的当前监控期的监控用户的应用上报的应用性能指标数据；所述数据分析模块经配置以分析经接收的应用性能指标数据以得到所述应用的性能数据。

根据本发明的另一个方面，还提供了一种应用性能数据监控客户端，其中包括采集控制模块、数据采集模块和数据上报模块，其中，所述采集控制模块经配置以根据接收到的监控指令信息生成采集指令或停止指令；所述数据采集模块与所述采集控制模块相连接，经配置以在接收到采集指令时采集用户终端上的应用性能指标数据，在接收到停止指令时停止数据的采集；所述数据上报模块配置以上报采集到的应用性能指标数据。

根据本发明的另一个方面，还提供了一种应用性能数据监控方法，包括以下步骤：从待监控应用的用户中确定部分用户作为当前监控期的监控用户；向确定的当前监控期的监控用户下发监控指令信息；监控用户在监控期内根据所述监控指令信息采集并上报应用性能指标数据；以及，接收并分析接收到的应用性能指标数据以得到所述应用的性能数据。本发明在进行应用性能监控时只获取相同指标的部分用户的性能指标数据，在达到监控到真实App的线上用户的应用性能数据的目的的同时，降低了性能监控对用户终端性能的影响，从而可监控到用户对App的真实体验。

附图说明

下面，将结合附图对本发明的优选实施方式进行进一步详细的说明，其中：

图1是根据本发明的一个实施例的应用性能数据监控整体系统的简要原理流程图；

图2是根据本发明的一个实施例的应用性能数据监控系统的原理框图；

图3是根据本发明的一个实施例应用性能数据监控系统客户端的原理框图；以及

图4是根据本发明的一个实施例的应用性能数据监控方法简要流程图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

在以下的详细描述中，可以参看作为本申请一部分用来说明本申请的特定实施例的各个说明书附图。在附图中，相似的附图标记在不同图式中描述大体上类似的组件。本申请的各个特定实施例在以下进行了足够详细的描述，使得具备本领域相关知识和技术的普通技术人员能够实施本申请的技术方案。应当理解，还可以利用其它实施例或者对本申请的实施例进行结构、逻辑或者电性的改变。

图1是根据本发明一个实施例的应用性能数据监控整体系统的简要原理流程图，所述整体系统包括系统服务端1和多组用户的应用客户端21……2n，其中，服务端1设定当前监控期。其中，服务端1可以以天、星期为维度设置监控期，例如，1天或3天为一个监控期，或以1个星期为一个监控期。而后为当前监控期1选定监控用户，并在当前监控期开始或提前一段时间向选定的监控用户的应用客户端下发监控指令信息。如图1所示，应用客户端21接收到监控指令信息，在监控期1期间采集并上报应用性能指标数据。服务端1接收并分析应用性能指标数据从而得到该应用的应用性能数据。在监控期1结束，分别确定当前监控期为监控期2，3……n，并分别选定新的监控用户，所述新的监控用户从未被选中的用户中选择。重复前述过程来获取应用性能指标数据。其中，图1中的每个监控期的应用客户端21……2n分别为一组同监控期的用户的应用客户端，其包括多个用户。

如图1所示，在不同监控期采集应用性能指标数据的监控用户是不同的用户，每个用户只在其被选中的监控期内采集数据，其他时间并未采集数据，因而减少了采集数据为用户终端带来的资源消耗。

图2是根据本发明一个实施例的应用性能数据监控系统的原理框图。所述系统位于服务端，其包括监控用户确定模块12、监控指令下发模块14、监控数据接收模块16和数据分析模块18。

其中，所述监控用户确定模块12从待监控应用的用户中确定部分用户作为当前监控期的监控用户。其中，所述的监控期以天、星期等为维度进行更换。为了减少采集数据对用户终端系统资源的消耗，本发明在不同的监控期采集不同用户的应用性能指标数据，因而，同一个用户，只在其被选定的监控期采集数据，因而降低了应用性能监控对用户体验的影响。

在一个实施例中，为了能够更好地确定出一个监控期的监控用户，所述监控用户确定模块12包括用户分组单元122和用户群更新单元124。用户分组单元122对所述待监控应用的用户进行分组，将具有相同应用性能的用户分为一组。例如，将具有预定终端信息的用户分为一组。终端信息例如终端品牌，型号、系统号等。如，品牌为Apple、型号为iPhone 416GB联通版、系统号为iOS 4的用户终端。又如，品牌为华为、型号为、C8812、系统号为Android OS 4.0的用户终端等等。由于终端信息相同的用户，其对某个App的影响基本是一致的，因而，将对App的影响相同的用户分为一组。为了方便分组，在一个实施例中，建立用户终端信息与用户信息的对应关系表120，例如建立终端型号、系统版本号和用户ID的唯一映射关系表，一个用户ID对应一个终端型号和一个系统版本号。用户分组单元122根据用户终端信息与用户信息的对应关系，将具有相同用户终端信息的用户分为一组。例如，拥有iPhone 4 16GB联通版、iOS 4的用户为一组，记为Group1，其中共有12000个用户。拥有华为C8812、Android OS 4.0的用户为一组，记为Group2，其中共有20000个用户等等。通过如此方法分组，可以得到多个分组，例如共有n个分组。

所述用户群更新单元124根据内部设置确定监控期，并从每一个用户分组选定一部分用户为监控用户。例如，按照比例从每个用户分组中随机选定监控用户。例如，每次按照10％选定用户。对于Group1，在一个监控期内选定12000*10％＝1200个用户，对于Group2，选定20000*10％＝2000个用户，对于Groupi，选中其中的m个用户。

在一个监控期，如3天，结束时，下一个监控期开始，此时所述用户群更新单元124重新从各个用户分组中选定新的监控用户，本次监控用户不同于上一次的监控用户。为了方便识别出用户是否已被选定过，本发明为每个用户设置状态标记。所述用户群更新单元124在选定了监控用户后，为其设置已选定标记，则在下一个监控期选定新用户时，从具有未选定标记的用户中选择。如果经过若干个监控期后，一个用户分组的所有用户已全部被选定过，则清除该组所有用户的选定标记，则这些用户又可以被再次选择。另外，为了获知每一个用户被选定的次数，还可以标记出其已被选定的次数，将其作为一种状态标记。

所述监控指令下发模块14为确定的监控用户下发监控指令信息，例如，向Group1中选出的1200个用户、Group2中的2000个用户、Groupi中的m个用户发送监控指令信息。其中，所述的监控指令信息可以包括数据采集指令及监控期的时间信息。其中，监控期的时间信息例如为监控期的持续时间，如3天、1个星期等。或者，监控期的时间信息包括监控期的开始时间和结束时间。又或者，所述监控指令下发模块14在监控期开始时下发采集指令，在监控期结束时下发停止采集指令。

监控用户的应用客户端接收到监控指令信息后，根据监控指令信息采集并上报应用性能指标数据。如图3所示，图3是根据本发明一个实施例的应用性能数据监控系统客户端的原理框图。所述客户端包括采集控制模块20、数据采集模块22和数据上报模块24。其中，采集控制模块21根据接收到的监控指令信息生成采集指令或停止指令。在一个实施例中，采集控制模块20包括指令生成单元202和计时单元204。当监控指令信息中包括数据采集指令和监控期的时间信息时，指令生成单元202生成采集指令，并发送给数据采集模块22，同时，计时单元204根据监控期的时间信息计时。例如，当监控期的时间信息中监控期的持续时间为3天时，计时单元214设置计时的时间为3天，在计时时间到达时，指令生成单元202生成停止指令，并发送给数据采集模块22。其中，本实施例中的计时单元204也可以为定时单元，用于在定时时间到时，由指令生成单元202生成停止指令。在另一个实施例中，所述监控指令下发模块14在监控期开始时下发采集指令，在监控期结束时下发停止采集指令。应用客户端2的采集控制模块20根据接收到的数据采集指令生成采集指令发送给数据采集模块22，在接收到停止采集数据的指令时，生成停止指令发送给数据采集模块22。

数据采集模块22与所述采集控制模块20相连接，接收到采集指令时，采集该应用的性能指标数据。例如，内存指标数据、CPU指标数据、FPS数据等，并将这些数据由数据上报模块24发送给服务端1。数据采集模块22在接收到停止指令时，停止数据的采集。

参见图2，服务端1的监控数据接收模块16接收监控用户的应用客户端2上报的应用性能指标数据。在一个实施例中，监控数据接收模块16将接收到的数据进行格式转换、数据整理后将其存储到数数库中，以方便数据分析。

数据分析模块18用于分析接收到的应用性能指标数据以得到所述应用的性能数据。在一个实施例中，所述数据分析模块经18经配置进一步包括分类单元180和分析单元182。所述分类单元180根据分类指标对接收到的应用性能指标数据进行分类以得到多个数据组。由于本发明对用户进行了分组，并且只采集了每一组中的部分用户的应用性能指标数据，因而分析时，可在常规的分析粒度上增加一个用户终端信息粒度。因而在分类时，可以用户终端信息作为分类指标，将接收到的数据分成多组，分析单元182再对每一组数据进行分析，从而可以得到某个具体型号、系统号的终端的应用性能数据。如CPU、内存、应用启动时间的快慢、界面滑动的流畅度等的应用性能数据。

图4是根据本发明一个实施例的应用性能数据监控方法流程图，其中包括：

步骤S1,获取待监控应用的用户信息及其用户终端信息。其中，用户信息例如为用户ID，用户终端信息例如为终端型号、系统版本号等。在一个实施例中，应用客户端可主动向服务端提供用户信息及其用户终端信息。如图4中所示。在另一个实施例中，服务端可向应用客户端发送要求其提供用户信息及其用户终端信息的指令，应用客户端应服务端要求提供用户信息和用户终端信息。在另一个实施例中，用户在注册成为所述应用的用户时，已提供用户终端信息，因而，服务端可以从用户信息库中查询得到用户信息和用户终端信息。

步骤S2，建立用户信息及其用户终端信息的对应关系，例如如图4所示，建立终端型号和系统版本号和用户ID的唯一映射关系表。

步骤S3，根据用户终端信息与用户信息的对应关系，将具有相同用户终端信息的用户分为一组。例如，将同一终端型号、同一系统版本号的用户分为一组，从而将所述应用的全部用户分成多个组。

步骤S4，在当前监控期内，在各个用户分组中，从未选定的用户中为当前监控期选定监控用户。本发明为每个用户设置状态标记，为选定的监控用户设置已选定标记。因而，在选择用户时，从每个组中的未标记已选定标记的用户中选择一定量的用户作为本监控期的监控用户。选择的方式可以按用户ID的字母排序、数字大小排序、汉字的拼音顺序或随机的方式选择用户。至于选择的用户数量，可以按分组总用户量的百分比确定每次选择的用户数量，也可以根据预置的数量选择。当经过多个监控期时，剩余的可用用户数量不足时，选定当前可用的全部用户，并为其设置选中标记，同时，清除其余用户的选中标记，并从中选出一定数量的用户，使本次所选用户的数量达到预置数量。

步骤S5，向确定的监控用户下发监控指令信息，并且监控当前监控期。

步骤S6，对当前监控期计时。

步骤S7，判断当前监控期是否已满，在当前监控期已满时，返回步骤S4重新选定监控用户。

步骤S8，监控用户的应用客户端在监控期内根据所述监控指令信息采集应用性能指标数据。

步骤S9，应用客户端上报应用性能指标数据。

步骤S10，服务端接收应用性能指标数据，经过预处理后按照用户终端信息分组。

步骤S11，分析每一组数据，得到对应用户终端型号、系统号的应用性能数据。

通过上述流程，监控系统不断从用户获取应用性能指标数据，但是由于对每组具有相同用户终端信息的用户组，轮流从不同用户中获取数据，从而避免始终在一个用户获取数据而造成的该用户终端系统资源损耗。本发明既能够满足分析应用性能所需的数据量，又降低了对用户终端性能的影响。

上述实施例仅供说明本发明之用，而并非是对本发明的限制，有关技术领域的普通技术人员，在不脱离本发明范围的情况下，还可以做出各种变化和变型，因此，所有等同的技术方案也应属于本发明公开的范畴。

Claims (30)

1.一种应用性能数据监控系统，其中包括：

监控用户确定模块，其经配置以从应用的用户中确定部分用户作为当前监控期的监控用户；

监控指令下发模块，其经配置以向经确定的当前监控期的监控用户下发监控指令信息；

监控数据接收模块，其经配置以接收来自经确定的当前监控期的监控用户的应用上报的应用性能指标数据；以及

数据分析模块，其经配置以分析经接收的应用性能指标数据以得到所述应用的性能数据。

2.根据权利要求1所述的应用性能数据监控系统，其中，所述监控用户确定模块包括：

用户分组单元，其经配置以对所述应用的用户进行分组；以及

用户群更新单元；经配置以在各个用户分组中，从未选定的用户中为每个监控期选定监控用户。

3.根据权利要求2所述的应用性能数据监控系统，其中，所述监控用户确定模块经进一步配置以根据用户终端信息与用户信息的对应关系，将具有预定用户终端信息的用户分为一组。

4.根据权利要求3所述的应用性能数据监控系统，其中，所述用户群更新单元经进一步配置，在监控期变更时从未选定的用户中确定下一监控期的监控用户。

5.根据权利要求3所述的应用性能数据监控系统，其中，所述用户终端信息至少包括终端型号和系统版本号，所述用户信息至少包括用户ID。

6.根据权利要求2所述的应用性能数据监控系统，其中，所述用户群更新模块经进一步配置以为已确定的监控用户设置状态标记。

7.根据权利要求6所述的应用性能数据监控系统，其中，所述状态标记为已确定成为监控用户的次数。

8.根据权利要求6所述的应用性能数据监控系统，其中，所述状态标记为已选定标记，其中当所述应用的全部用户具有已选定标记时，清除所有用户的已选定标记。

9.根据权利要求2所述的应用性能数据监控系统，其中，所述用户群更新模块经进一步配置以在各个用户分组中按照预置比例从未选定的用户中为当前监控期随机确定多个用户。

10.根据权利要求1所述的应用性能数据监控系统，其中，所述监控指令信息包括数据采集指令。

11.根据权利要求10所述的应用性能数据监控系统，其中，所述监控指令信息还进一步包括监控期的时间信息。

12.根据权利要求10所述的应用性能数据监控系统，其中，所述监控指令下发模块经进一步配置，在监控期开始时下发数据采集指令，在监控期结束时下发数据采集停止指令。

13.根据权利要求1所述的应用性能数据监控系统，其中，所述数据分析模块经配置进一步包括：

分类单元，经配置根据分类指标对当前监控期接收到的应用性能指标数据进行分类，以得到多个数据组；以及

分析单元，经配置以对每个数据组进行分析，得到对应分类指标的应用性能数据。

14.根据权利要求13所述的应用性能数据监控系统，其中，所述分类指标为用户终端信息。

15.一种应用性能数据监控客户端，其中包括：

采集控制模块，经配置以根据接收到的监控指令信息生成采集指令或停止指令；

数据采集模块，与所述采集控制模块相连接，经配置以在接收到采集指令时采集用户终端上的应用性能指标数据，在接收到停止指令时停止数据的采集；以及

数据上报模块，经配置以上报采集到的应用性能指标数据。

16.根据权利要求15所述的应用性能数据监控客户端，其中，所述采集控制模块包括指令生成单元，其经配置以根据监控指令信息中的数据采集指令生成所述采集指令。

17.根据权利要求16所述的应用性能数据监控客户端，其中，所述采集控制模块经进一步配置包括计时单元，经配置在监控指令信息中包括监控期的时间信息时，在计时时间达到监控期时，向所述指令生成单元发送计时结束通知；对应地，所述指令生成单元根据所述计时结束通知生成停止指令。

18.根据权利要求16所述的应用性能数据监控客户端，其中，所述指令生成单元经配置以根据监控指令信息中的停止数据采集指令生成停止指令。

19.一种应用性能数据监控方法，包括：

从待监控应用的用户中确定部分用户作为当前监控期的监控用户；

向确定的当前监控期的监控用户下发监控指令信息；

监控用户在监控期内根据所述监控指令信息采集并上报应用性能指标数据；以及

接收并分析接收到的应用性能指标数据以得到所述应用的性能数据。

20.根据权利要求1所述的应用性能数据监控方法，进一步包括：

对所述待监控应用的用户进行分组；以及

在各个用户分组中，从未选定的用户中为当前监控期选定监控用户。

21.根据权利要求20所述的应用性能数据监控方法，进一步包括：

获取待监控应用的用户信息及其用户终端信息；

建立用户终端信息与用户信息的对应关系；以及

根据用户终端信息与用户信息的对应关系，将具有预定用户终端信息的用户分为一组。

22.根据权利要求19所述的应用性能数据监控方法，进一步包括：为已确定的监控用户设置状态标记。

23.根据权利要求22所述的应用性能数据监控方法，其中状态标记为已确定成为监控用户的次数。

24.根据权利要求22所述的应用性能数据监控方法，其中状态标记为已选定标记，其中，在所述待监控应用的全部用户具有已选定标记时，清除所有用户的已选定标记。

25.根据权利要求20所述的应用性能数据监控方法，其中，为当前监控期选定监控用户时，在各个用户分组中，按照预置比例从未选定的用户中为当前监控期随机确定多个监控用户。

26.根据权利要求19所述的应用性能数据监控方法，其中，在下发监控指令信息时，所述监控指令信息包括数据采集指令和监控期的时间信息。

27.根据权利要求19所述的应用性能数据监控方法，其中，还进一步包括：对当前监控期计时；响应于当前监控期结束，更换监控用户。

28.根据权利要求27所述的应用性能数据监控方法，其中，还进一步包括：响应于当前监控期结束，为当前监控期的监控用户下发数据采集停止指令。

29.根据权利要求19所述的应用性能数据监控方法，其中，还进一步包括：根据分类指标对接收到的应用性能指标数据进行分类，以得到多个数据组；以及对每个数据组进行分析，得到对应分类指标的应用性能数据。

30.根据权利要求29所述的应用性能数据监控方法，其中，所述分类指标为用户终端信息。

Images