CN111581065A - 一种基于直播场景下的移动端消息分压测试系统及方法 - Google Patents

Abstract

本发明实施例提供一种基于直播场景下的异动单消息分压测试系统及方法，包括：数据制作单元：用于根据自定义规则确定用于测试直播场景的消息类型，以及根据所述消息类型制作相应的测试消息，并根据所述测试消息生成分压测试数据；分压测试单元：用于将分压测试数据下发到移动端的直播客户端；性能收集单元：用于在所述分压测试数据下发到移动端的直播客户端之后，获取并收集移动端的直播客户端在运行分压测试数据时的性能数据，所述性能数据包括：并行处理效率、界面流畅性、稳定性。持自定义制作多种规则的分压测试数据，针对不同直播场景生成对应的数据，最大程度模拟移动端的用户现场，以准确保证并发场景下的持续稳定性。

Description

一种基于直播场景下的移动端消息分压测试系统及方法

技术领域

本发明涉及测试领域，具体涉及一种基于直播场景下的移动端消息分压测试系统及方法。

背景技术

随着移动互联网的快速发展，消息分发功能逐步融入至各大应用，尤其是微信、微博等社交类软件，2015年开始的“千播大战”更是将消息分发系统推向新的高度。不同于社交类软件，直播类软件对消息分发的要求更为严格，主要体现在：

1、业务复杂：社交类软件以文字、语音、图片交流为主，而直播类软件中大部分重要业务都是基于消息分发实现，其业务复杂性远远大于社交场景。消息分发一种下发方法，包括两个部分：分是指放大，一条消息要发给直播间的所有用户，发是指通过长链通道下发到每个移动终端。

2、消息放大：针对单个手机设备，微信最多支持500人的同时聊天，但直播场景下，单直播间内需支持万级的同时在线。

基于以上原因，一个优秀的直播类软件必须能够在复杂业务及高强度的并发场景下保持稳定，因此针对移动端消息分发的性能压力测试就显得非常重要。当前移动端消息分发的压力测试方式主要以服务端配合方式为主，移动端长连接至测试服务端，服务端高速率下发压力测试数据至移动端，来验证移动端的稳定性。其中，移动端是指每个所在端，每个直播间的用户都需要承担其他人发送的消息，一万个人每人同时发一条，一个终端就要处理1w条。移动端消息分发的性能包括：性能包括移动端的并行处理效率、界面流畅性、稳定性等。

在实现本发明过程中，申请人发现现有技术中至少存在如下问题：

大多数直播类软件业务场景较为单一，压力测试数据大多以固定规则生成，该方式的缺点体现在：

1、扩展性差：业务快速发展，固定的规则较难覆盖所有场景，需要不断更改规则。

2、压力测试场景单一：每次都以相同的数据进行压力测试，压力测试场景单一，不能很好的模拟用户场景，效果一般。

发明内容

本发明实施例提供一种基于直播场景下的移动端消息分压测试系统及方法，支持自定义制作多种规则的分压测试数据，针对不同直播场景生成对应的数据，最大程度模拟移动端的用户现场，以准确保证并发场景下的持续稳定性。

为达上述目的，一方面，本发明实施例提供一种基于直播场景的移动端消息分压测试统，包括：

数据制作单元：用于根据自定义规则确定用于测试直播场景的消息类型，以及根据所述消息类型制作相应的测试消息，并根据所述测试消息生成分压测试数据；

分压测试单元：用于将分压测试数据下发到移动端的直播客户端；

性能收集单元：用于在所述分压测试数据下发到移动端的直播客户端之后，获取并收集移动端的直播客户端在运行分压测试数据时的性能数据，所述性能数据包括：并行处理效率、界面流畅性、稳定性。

另一方面，本发明实施例还提供一种前述的基于直播场景下的移动端消息分压测试系统的移动端消息分压测试方法，包括：

根据自定义规则确定用于测试直播场景的消息类型，以及根据所述消息类型制作相应的测试消息，并根据所述测试消息生成分压测试数据；

将分压测试数据下发到移动端的直播客户端；

获取并收集移动端的直播客户端在运行分压测试数据时的性能数据，所述性能数据包括：并行处理效率、界面流畅性、稳定性。

上述技术方案具有如下有益效果：本发明支持自定义制作多种规则的分压测试数据，针对不同直播场景生成对应的数据，最大程度模拟移动端的用户现场，以准确保证并发场景下的持续稳定性。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明实施例的基于直播场景下的移动端消息分压测试系统的结构示意图。

图2是本发明实施例的基于直播场景下的移动端消息分压测试方法的流程图；

图3是本发明实施例的基于直播场景下的移动端消息分压测试操作框图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

如图1所示，结合本发明的实施例，提供一种基于直播场景的移动端消息分压测试系统，包括：

数据制作单元11：用于根据自定义规则确定用于测试直播场景的消息类型，以及根据所述消息类型制作相应的测试消息，并根据所述测试消息生成分压测试数据；

分压测试单元12：用于将分压测试数据下发到移动端的直播客户端；

性能收集单元13：用于在所述分压测试数据下发到移动端的直播客户端之后，获取并收集移动端的直播客户端在运行分压测试数据时的性能数据，所述性能数据包括：并行处理效率、界面流畅性、稳定性。

优选地，所述自定义规则包括：随机规则、权重规则和特制规则中的至少一种；

所述随机规则，是指在所有符合直播场景的消息类型中每次随机选择一种用于测试直播场景的消息类型；

所述权重规则，是指根据直播场景设定消息下发总量和多种相应的消息类型，并为每种消息类型的消息下发数量设置相应的权重；

所述特制规则，是指根据与直播场景对应的特定事件制定相应的消息类型。

优选地，所述分压测试单元12：具体用于将分压测试数据以多种不同的速率下发到移动端的直播客户端；

性能收集具体单元13：具体用于分别获取并收集不同速率下移动端相应的性能数据。

优选地，还包括：

数据录制单元14：用于采用所述基于直播场景的移动端消息分压测试系统模拟客户端，录制下发给客户端的直播消息数据，当客户端直播消息下发遇到非正常状况时，所述基于直播场景的移动端消息分压测试系统根据所录制的直播消息数据模拟所述直播场景。

优选地，所述数据录制单元14：具体用于将所述基于直播场景的移动端消息分压测试系统的套接字socket接口与直播服务器的套接字socket接口连接，从直播服务器获取直播消息数据。

如图2所示，结合本发明的实施例，还提供一种根据前述的基于直播场景下的移动端消息分压测试系统的移动端消息分压测试方法，包括：

S201：根据自定义规则确定用于测试直播场景的消息类型，以及根据所述消息类型制作相应的测试消息，并根据所述测试消息生成分压测试数据；

S202：将分压测试数据下发到移动端的直播客户端；

S203：获取并收集移动端的直播客户端在运行分压测试数据时的性能数据，所述性能数据包括：并行处理效率、界面流畅性、稳定性。

优选地，所述自定义规则包括：随机规则、权重规则和特制规则中的至少一种；

所述随机规则，是指在所有符合直播场景的消息类型中每次随机选择一种用于测试直播场景的消息类型；

所述权重规则，是指根据直播场景设定消息下发总量和多种相应的消息类型，并为每种消息类型的消息下发数量设置相应的权重；

所述特制规则，是指根据与直播场景对应的特定事件制定相应的消息类型。

优选地，具体包括：

S2021：将分压测试数据以多种不同的速率下发到移动端的直播客户端；

S2031：分别获取并收集不同速率下移动端相应的性能数据。

优选地，还包括S204：采用基于直播场景的移动端消息分压测试系统模拟客户端，录制下发给客户端的直播消息数据，当客户端直播消息下发遇到非正常状况时，所述基于直播场景的移动端消息分压测试系统根据所录制的直播消息数据模拟所述直播场景。

优选地，步骤204还包括：

将所述基于直播场景的移动端消息分压测试系统的套接字socket接口与直播服务器的套接字socket接口连接，从直播服务器获取直播消息数据。

本发明所取得的有益效果如下：

1、本发明支持自定义指定多种规则，根据不同的规则生成分压测试数据，从而能够针对不同直播场景生成对应的分压测试数据，最大程度模拟用户现场；从而获得更多的更接近实际情况的移动端的性能数据，根据这些性能数据适应性调整直播场景后台支撑，从而能够保证正式线上后移动端的直播场景的稳定性、流程性等性能，提高用户体验感。

2、提供对移动场景的线上实时录制能力，在线上发生问题时，根据录制的数据完整还原问题现场，快速确定问题原因，完善压力测试数据；克服目前只能定制的缺陷；进一步保证移动端的直播场景的稳定性、流程性等性能，提高用户体验感。

3、提供不同强度的多速率压力测试能力，多方位评估APP所在的移动端的稳定情况。

下面结合具体的应用实例对本发明实施例上述技术方案进行详细说明，实施过程中没有介绍到的技术细节，可以参考前文的相关描述。

本发明涉及一种基于直播场景下的移动端消息分压测试系统，采用压力测试向对移动终端在短时间下发大量数据验证移动端的性能稳定性。

本发明的消息分压测试系统采用自定义规则生成数据方式，为不同的业务场景生成相应的分压测试数据，具备较好的扩展能力，保障压力测试质量。为了能够跟踪线上问题，本文还提供了数据录制功能，用以提高问题分析效率。

如图3所示，本文分发压力测试系统包括三部分：数据制作工具、数据录制工具和分压测试工具，分压测试步骤如下：

步骤1:在PC端安装数据制作工具，输入需要分压测试的消息类型及制作规则，生成分压测试数据；可以针对不同的直播场景指定不同规则的数据，可以更好的模拟现场。消息类型就是指直播间内的消息指令，直播间的功能比如评论、礼物这种。不同的直播场景会为不同消息类型设置不同的频率，用途是模拟现场。

步骤2:在PC端安装分压测试工具，启动分压测试代理服务；

步骤3:打开正式APP，进入分压测试设置界面，输入分压测试代理服务地址及端口号，点击确定后，即可完成代理服务设置；其中App端是实际用户端。

步骤4:APP中打开任一直播间，后台通过消息通道自动连接至分压测试代理服务，然后在PC端设置分压测试数据、速率、是否循环分压测试等参数，启动分压测试命令，完成消息的下发。

5.1数据制作工具

数据制作工具采用灵活规则为不同的直播场景生成相应的分压测试数据，规则包括随机规则、权重规则、特制规则等方式。针对同一直播间，同一个手机同一个直播间同一次压测只能使用一个规则，但在不同的手机上可以对同一个直播间做不同规则的压测，也就是可以包括随机规则、权重规则和特制规则中的至少一种。

随机规则基于所有消息类型，每次随机选择一种消息类型，生成指定数量的分压测试数据，该规则适用于各种功能都可能出现的普通直播场景。

权重规则给予多种消息类型，按每个类型的权重，生成不同数量的分压测试数据，目的是重点考验固定消息(指定消息)的压力情况，即如果某消息类型对应的消息下发数量占比消息下发总量超过预设阈值，则指定该消息类型作为用于测试直播场景的消息类型，并根据占比为该消息类型设置相应的权重，比如该规则可适用于比如在指定消息类型为礼物和评论数据占比较高(频率比较高)的明星直播场景，此时就将礼物和评论设置为相对较高的占比。

特制规则是针对特殊直播场景所对应的特定事件，制定相应的固定消息类型，并生成指定数量的消息，该规则适合于具备特定玩法的推广活动场景。固定消息类型是根据推广活动专门设定的，比如固定礼物。指定数量是指在每一轮分压测试中生成指定数量，会穿插其他非高频信息，好处是专项分压测试，可以认为这是权重规则中的一个特殊规则。

众所周知，不同的业务类型具有不同的特点，所以在实际操作中，根据业务上的积累，会积累多种符合相应业务场景的消息类型。并且随着时间的推移，根据业务的变化，消息类型也会适应性定期更新。本发明的分压测试，具体到某一次具体的测试时，下发的数量可以是固定好的足够的，比如，采用循环压力测试，并且每轮跑10分钟，整体分压测试时间保障在4个小时以上，也就是能够充分保证设定消息类型的全面性或者数量的足够性。

5.2数据录制工具

数据制作工具解决了分压测试数据单一性的问题，但实际运行时的线上数据毕竟不同于实验室数据，经常出现一些意想不到的问题。本系统模拟客户端，通过socket套接字与直播的正式服务器连接，正式服务器是线上用户真正使用的，能够将正式服务器的下发数据(包括线上产生的所有数据，如评论、礼物、事件指令等)会保存下来，实现录制功能，录制的各种数据用于后期备用。比如，当线上直播场景分发出现问题时，就可以利用录制的数据来实现完整复盘场景，从而分析问题的原因所在，比如：出现Crash(应用崩溃)、功能异常(位置冲突，功能显示错误)的原因，并且起到完善数据制作规则(自定义规则)的作用。

具体操作为：本发明的分压测试系统的代理服务器为实现录制功能，它也会以客户端的角色连接直播场景所在的服务器，在直播场景正式上下时，直播场景所在的服务器将线上数据下发到本系统的代理服务器上，代理服务器保存下来。而在分压测试时，代理服务器则与正式服务器断开连接，再以服务器的角色与移动端连接，进行数据分压测试。

5.3压测工具

分压测试工具模拟消息分发服务，与APP连接，将分压测试数据以不同的速率下发，达到APP端性能压测的目的。移动端消息分发的性能包括：性能包括移动端的并行处理效率、界面流畅性、稳定性、电量、温度、流畅性。针对不同移动端，所测试的性能也是不同的，比如性能相对较低的老机型则以保障稳定性为主，即不崩溃即可，毕竟在真实场景下，较难发生如此大的压力。对于高端手机和新机型，可以所有性能标准执行。

为评估APP端在不同场景下的稳定程度，分压测试工具提供了三种强度：极限(50条/秒)，高压(20条/秒)，普通(10条/秒)，分压测试时长保持在8个小时以上。

与现有的消息分压测试方案相比，本发明的技术效果如下：

1、本发明支持自定义指定多种规则，根据不同的规则生成分压测试数据，从而能够针对不同直播场景生成对应的分压测试数据，最大程度模拟用户现场；从而获得更多的更接近实际情况的移动端的性能数据，根据这些性能数据适应性调整直播场景后台支撑，从而能够保证正式线上后移动端的直播场景的稳定性、流程性等性能，提高用户体验感。

2、提供对移动场景的线上实时录制能力，在线上发生问题时，根据录制的数据完整还原问题现场，快速确定问题原因，完善分压测试数据；克服目前只能定制的缺陷(在测试时，定制的缺陷是通过人为编制好的数据模拟现场，无法真实还原线上的情况，与线上的真实数据存在差异，包括消息类型的完整性、时序性、频次等)；进一步保证移动端的直播场景的稳定性、流程性等性能，提高用户体验感。

3、提供不同强度的多速率分压测试能力，多方位评估APP所在的移动端的稳定情况。

通过本发明，直播的稳定开播时长提高了100％，APP端崩溃率降低了60％。

应该明白，公开的过程中的步骤的特定顺序或层次是示例性方法的实例。基于设计偏好，应该理解，过程中的步骤的特定顺序或层次可以在不脱离本公开的保护范围的情况下得到重新安排。所附的方法权利要求以示例性的顺序给出了各种步骤的要素，并且不是要限于所述的特定顺序或层次。

在上述的详细描述中，各种特征一起组合在单个的实施方案中，以简化本公开。不应该将这种公开方法解释为反映了这样的意图，即，所要求保护的主题的实施方案需要比清楚地在每个权利要求中所陈述的特征更多的特征。相反，如所附的权利要求书所反映的那样，本发明处于比所公开的单个实施方案的全部特征少的状态。因此，所附的权利要求书特此清楚地被并入详细描述中，其中每项权利要求独自作为本发明单独的优选实施方案。

为使本领域内的任何技术人员能够实现或者使用本发明，上面对所公开实施例进行了描述。对于本领域技术人员来说；这些实施例的各种修改方式都是显而易见的，并且本文定义的一般原理也可以在不脱离本公开的精神和保护范围的基础上适用于其它实施例。因此，本公开并不限于本文给出的实施例，而是与本申请公开的原理和新颖性特征的最广范围相一致。

上文的描述包括一个或多个实施例的举例。当然，为了描述上述实施例而描述部件或方法的所有可能的结合是不可能的，但是本领域普通技术人员应该认识到，各个实施例可以做进一步的组合和排列。因此，本文中描述的实施例旨在涵盖落入所附权利要求书的保护范围内的所有这样的改变、修改和变型。此外，就说明书或权利要求书中使用的术语“包含”，该词的涵盖方式类似于术语“包括”，就如同“包括，”在权利要求中用作衔接词所解释的那样。此外，使用在权利要求书的说明书中的任何一个术语“或者”是要表示“非排它性的或者”。

本领域技术人员还可以了解到本发明实施例列出的各种说明性逻辑块(illustrative logical block)，单元，和步骤可以通过电子硬件、电脑软件，或两者的结合进行实现。为清楚展示硬件和软件的可替换性(interchangeability)，上述的各种说明性部件(illustrative components)，单元和步骤已经通用地描述了它们的功能。这样的功能是通过硬件还是软件来实现取决于特定的应用和整个系统的设计要求。本领域技术人员可以对于每种特定的应用，可以使用各种方法实现所述的功能，但这种实现不应被理解为超出本发明实施例保护的范围。

本发明实施例中所描述的各种说明性的逻辑块，或单元都可以通过通用处理器，数字信号处理器，专用集成电路(ASIC)，现场可编程门阵列或其它可编程逻辑装置，离散门或晶体管逻辑，离散硬件部件，或上述任何组合的设计来实现或操作所描述的功能。通用处理器可以为微处理器，可选地，该通用处理器也可以为任何传统的处理器、控制器、微控制器或状态机。处理器也可以通过计算装置的组合来实现，例如数字信号处理器和微处理器，多个微处理器，一个或多个微处理器联合一个数字信号处理器核，或任何其它类似的配置来实现。

本发明实施例中所描述的方法或算法的步骤可以直接嵌入硬件、处理器执行的软件模块、或者这两者的结合。软件模块可以存储于RAM存储器、闪存、ROM存储器、EPROM存储器、EEPROM存储器、寄存器、硬盘、可移动磁盘、CD-ROM或本领域中其它任意形式的存储媒介中。示例性地，存储媒介可以与处理器连接，以使得处理器可以从存储媒介中读取信息，并可以向存储媒介存写信息。可选地，存储媒介还可以集成到处理器中。处理器和存储媒介可以设置于ASIC中，ASIC可以设置于用户终端中。可选地，处理器和存储媒介也可以设置于用户终端中的不同的部件中。

在一个或多个示例性的设计中，本发明实施例所描述的上述功能可以在硬件、软件、固件或这三者的任意组合来实现。如果在软件中实现，这些功能可以存储与电脑可读的媒介上，或以一个或多个指令或代码形式传输于电脑可读的媒介上。电脑可读媒介包括电脑存储媒介和便于使得让电脑程序从一个地方转移到其它地方的通信媒介。存储媒介可以是任何通用或特殊电脑可以接入访问的可用媒体。例如，这样的电脑可读媒体可以包括但不限于RAM、ROM、EEPROM、CD-ROM或其它光盘存储、磁盘存储或其它磁性存储装置，或其它任何可以用于承载或存储以指令或数据结构和其它可被通用或特殊电脑、或通用或特殊处理器读取形式的程序代码的媒介。此外，任何连接都可以被适当地定义为电脑可读媒介，例如，如果软件是从一个网站站点、服务器或其它远程资源通过一个同轴电缆、光纤电缆、双绞线、数字用户线(DSL)或以例如红外、无线和微波等无线方式传输的也被包含在所定义的电脑可读媒介中。所述的碟片(disk)和磁盘(disc)包括压缩磁盘、镭射盘、光盘、DVD、软盘和蓝光光盘，磁盘通常以磁性复制数据，而碟片通常以激光进行光学复制数据。上述的组合也可以包含在电脑可读媒介中。

以上所述的具体实施方式，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施方式而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种基于直播场景的移动端消息分压测试系统，其特征在于，包括：

数据制作单元：用于根据自定义规则确定用于测试直播场景的消息类型，以及根据所述消息类型制作相应的测试消息，并根据所述测试消息生成分压测试数据；

分压测试单元：用于将分压测试数据下发到移动端的直播客户端；

性能收集单元：用于在所述分压测试数据下发到移动端的直播客户端之后，获取并收集移动端的直播客户端在运行分压测试数据时的性能数据，所述性能数据包括：并行处理效率、界面流畅性、稳定性。

2.根据权利要求1所述的基于直播场景的移动端消息分压测试系统，其特征在于，所述自定义规则包括：随机规则、权重规则和特制规则中的至少一种；

所述随机规则，是指在所有符合直播场景的消息类型中随机选择一种用于测试直播场景的消息类型；

所述权重规则，是指根据直播场景设定消息下发总量和多种相应的消息类型，并为每种消息类型的消息下发数量设置相应的权重；

所述特制规则，是指根据与直播场景对应的特定事件制定相应的消息类型。

3.根据权利要求1所述的基于直播场景的移动端消息分压测试系统，其特征在于，

所述分压测试单元：具体用于将分压测试数据以多种不同的速率下发到移动端的直播客户端；

性能收集具体单元：具体用于分别获取并收集不同速率下移动端相应的性能数据。

4.根据权利要求1所述的基于直播场景的移动端消息分压测试系统，其特征在于，还包括：

数据录制单元：用于采用所述基于直播场景的移动端消息分压测试系统模拟客户端，录制下发给客户端的直播消息数据，当客户端直播消息下发遇到非正常状况时，所述基于直播场景的移动端消息分压测试系统根据所录制的直播消息数据模拟所述直播场景。

5.根据权利要求4所述的基于直播场景的移动端消息分压测试系统，其特征在于，所述数据录制单元：具体用于将所述基于直播场景的移动端消息分压测试系统的套接字socket接口与直播服务器的套接字socket接口连接，从直播服务器获取直播消息数据。

6.一种根据权利要求1所述的基于直播场景下的移动端消息分压测试系统的移动端消息分压测试方法，其特征在于，包括：

根据自定义规则确定用于测试直播场景的消息类型，以及根据所述消息类型制作相应的测试消息，并根据所述测试消息生成分压测试数据；

将分压测试数据下发到移动端的直播客户端；

获取并收集移动端的直播客户端在运行分压测试数据时的性能数据，所述性能数据包括：并行处理效率、界面流畅性、稳定性。

7.根据权利要求6所述的基于直播场景的移动端消息分压测试方法，其特征在于，所述自定义规则包括：随机规则、权重规则和特制规则中的至少一种；

所述随机规则，是指在所有符合直播场景的消息类型中每次随机选择一种用于测试直播场景的消息类型；

所述权重规则，是指根据直播场景设定消息下发总量和多种相应的消息类型，并为每种消息类型的消息下发数量设置相应的权重；

所述特制规则，是指根据与直播场景对应的特定事件制定相应的消息类型。

8.根据权利要求6所述的基于直播场景的移动端消息分压测试方法，其特征在于，具体包括：

将分压测试数据以多种不同的速率下发到移动端的直播客户端；

分别获取并收集不同速率下移动端相应的性能数据。

9.根据权利要求6所述的基于直播场景下的移动端消息分压测试方法，其特征在于，还包括：

采用基于直播场景的移动端消息分压测试系统模拟客户端，录制下发给客户端的直播消息数据，当客户端直播消息下发遇到非正常状况时，所述基于直播场景的移动端消息分压测试系统根据所录制的直播消息数据模拟所述直播场景。

10.根据权利要求9所述的基于直播场景的移动端消息分压测试方法，其特征在于，还包括：

将所述基于直播场景的移动端消息分压测试系统的套接字socket接口与直播服务器的套接字socket接口连接，从直播服务器获取直播消息数据。

Images