CN108923999A - 一种网游服务器性能自动化测试方法及系统 - Google Patents

Abstract

一种网游服务器性能自动化测试方法，包括以下步骤：生成并调整测试指令集；录制测试脚本或编写自定义测试脚本，并将其上传；根据测试指令集、以及测试脚本，执行脚本回放，以进行游戏测试；收集测试性能数据；生成测试报告。本发明还提供一种网游服务器性能自动化测试系统，不需要测试人员具备开发能力且测试简单高效，测试数据准确有效，并且测试行为与测试性能数据一一对应，方便定位重现发生的问题。

Description

一种网游服务器性能自动化测试方法及系统

技术领域

本发明涉及服务器测试技术领域，特别是涉及一种网游服务器性能自动化测试方法及系统。

背景技术

众所周知，网游服务器性能是每个游戏上线前必须测试通过。网游服务器性能（压力）测试根据游戏的架构和硬件以及产品特点需要承载几千到几万玩家游戏。这就要求游戏公司需要组织上万人的压力测试，从这字面上看就知道测试的难度和测试成本非常高。测试后汇总数据，重现问题也非常困难。这就成为了一个待解决的问题。

目前服务器性能测试一般的做法，一是测试人员通过外部游戏公会组织玩家进行测试，最后汇总测试数据。这种测试唯一优点就是玩家是真实的。缺点成本高，测试行为难管理，测试数据准确性低、测试问题重现难度高等。

二是通过测试工具模拟玩家各种游戏行为按照测试策略对服务器进行批量访问造成服务器压力。这种测试方法在测试过程中，不可避免地存在以下几个问题：一，其中最大的问题就是需要测试人员掌握一定的开发能力，实时查看测试情况以及处理测试问题；二，在测试结束后，需要整理测试数据，分析测试问题；三，测试的效率不高，测试人员需要实时地观察应用的相关情况；四，在整个测试过程中，人为判断缺乏科学依据，而且不同的测试人员在一些标准上会有所不同。

发明内容

为了解决现有技术存在的不足，本发明的目的在于提供一种网游服务器性能自动化测试方法及系统，不需要测试人员具备开发能力且测试简单高效，测试数据准确有效，并且测试行为与测试性能数据一一对应，方便定位重现发生的问题。

为实现上述目的，本发明提供的网游服务器性能自动化测试方法，包括以下步骤：

生成并调整测试指令集；

录制测试脚本或编写自定义测试脚本，并将其上传；

根据所述测试指令集、以及所述录制的测试脚本或所述自定义测试脚本，执行脚本回放，以进行游戏测试；

收集测试性能数据；

生成测试报告。

进一步地，所述生成并调整测试指令集的步骤，进一步包括：

根据测试计划、测试用例以及测试方案生成所述测试指令集；

根据测试策略对所述测试指令集中的执行的顺序、时间间隔以及并发个数进行调整。

进一步地，所述录制测试脚本或编写自定义测试脚本，并将其上传的步骤，进一步包括：

集成录制控件，启动游戏客户端；

录制并保存测试脚本信息；

对所保存的测试脚本进行编辑；

将所述录制的测试脚本或所述自定义测试脚本上传至测试平台。

进一步地，所述录制控件为LuaRecorde控件，并将Lua脚本格式的脚本保存到根目录下的GameTest.lua。

进一步地，所述根据所述测试指令集、以及所述录制的测试脚本或所述自定义测试脚本，执行脚本回放的步骤，进一步包括：

将所述测试指令集、以及所述录制的测试脚本或所述自定义测试脚本分配到各测试端；

所述各测试端执行脚本回放，以对所述网游服务器进行访问。

进一步地，所述根据所述测试指令集、以及所述录制的测试脚本或所述自定义测试脚本，执行脚本回放的步骤，进一步包括：

判断所述各测试端状态及基础信息；

调整所述各测试端状态及相应的信息，以使其与测试脚本信息一致；

追踪问题产生的原因，将其反馈给网游服务器；

执行所述测试脚本回放。

更进一步地，所述根据所述测试指令集、以及所述录制的测试脚本或所述自定义测试脚本，执行脚本回放的步骤，进一步包括：

在将所述测试指令集、以及所述录制的测试脚本或所述自定义测试脚本分配到各测试端时，生成与其对应的ID，以使所述收集测试性能数据变得高效、准确；

通过TCP协议或http协议来对网游服务器进行访问。

为实现上述目的，本发明提供的网游服务器性能自动化测试系统，包括：游戏客户端、测试平台，以及网游服务器，

所述游戏客户端，在所述测试平台配置与测试相关的信息，且录制测试脚本或编写自定义测试脚本，并将其上传至所述测试平台，

所述测试平台，根据所述与测试相关的信息生成并调整测试指令集；根据所述测试指令集、以及所述录制的测试脚本或所述自定义测试脚本，执行脚本回放，以进行游戏测试从而对所述网游服务器进行访问；收集测试性能数据并生成测试报告。

进一步地，所述测试平台，包括数据传输模块、测试控制模块、多个测试模块，以及数据处理模块，其中，

所述数据传输模块，生成并调整所述测试指令集，并将其传输至所述测试控制模块，

所述测试控制模块，分解所述测试指令集，并将其与测试脚本一起传输至多个所述测试模块，

所述测试模块，根据所述测试指令集、以及所述录制的测试脚本或所述自定义测试脚本，执行脚本回放，以对所述网游服务器进行访问，

所述数据处理模块，采集测试性能数据并生成测试报告。

进一步地，所述数据传输模块根据测试计划、测试用例以及测试方案生成所述测试指令集，并对所述测试指令集中的执行的顺序、时间间隔以及并发个数进行调整。

更进一步地，所述测试控制模块，在分解所述测试指令集，并将其与测试脚本一起传输至多个所述测试模块时，生成与各所述测试模块对应的ID，以使后述的测试性能数据的采集变得高效、准确，

所述数据处理模块，将所述测试性能数据与所生成的ID相关联地进行保存，以使测试性能数据与测试行为一一对应。

本发明的网游服务器性能自动化测试方法及系统，由于根据测试指令集和测试脚本进行脚本回放，因此不需要测试人员具备开发能力，且测试简单高效。

本发明的网游服务器性能自动化测试方法及系统，由于在测试性能数据是在进行脚本回放时，实时对其进行收集，由此测试数据准确有效。

本发明的网游服务其性能自动化测试方法及系统，由于将测试指令集和测试脚本分配至各测试模块时，生成与各测试模块对应的ID，并将测试性能数据与该ID相关联地进行保存，由此测试行为与测试性能数据一一对应，方便定位重现发生的问题。

本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。

附图说明

附图用来提供对本发明的进一步理解，并且构成说明书的一部分，并与本发明的实施例一起，用于解释本发明，并不构成对本发明的限制。在附图中：

图1为根据本发明的网游服务器性能自动化测试方法流程图；

图2为根据本发明的录制测试脚本的流程图；

图3为根据本发明的测试脚本的回放流程图；

图4为根据本发明的网游服务器性能自动化测试系统架构图。

具体实施方式

以下结合附图对本发明的优选实施例进行说明，应当理解，此处所描述的优选实施例仅用于说明和解释本发明，并不用于限定本发明。

图1为根据本发明的网游服务器性能自动化测试方法流程图，下面将参考图1，对本发明的网游服务器性能自动化测试方法进行详细描述。在本实施例中以“循环上下线”为例进行说明。

在步骤101，根据所配置的与测试相关的信息生成测试指令集，并进行测试指令集的调整。在步骤101中，在Web段（测试平台）配置与测试相关的信息，例如测试计划、测试用例以及测试方案等；根据配置与测试相关的信息来生成测试指令集；根据测试策略对测试指令集中的执行的顺序、时间间隔以及并发个数等进行调整。例如，在本实施例中，根据需要对上线指令和下线指令进行组合，并根据游戏策略对上下线之间的时间间隔进行调整。优选地，上述指令集包括对测试端（机器人）的状态进行判断的指令，其中，测试端是指模拟玩家行为对服务器产生压力的工具。

在步骤102，录制测试脚本或编写自定义测试脚本，并将其上传至测试平台。

图2为根据本发明的录制测试脚本的流程图。下面将参考图2，对本发明的录制测试脚本进行详细描述。

在步骤201，集成录制控件，启动游戏客户端。录制控件可以是先有的任何一种录制控件。优选地，录制控件为LuaRecorde控件。

在步骤202，录制并保存测试脚本信息。能够以点击录制、输入账号和密码、进入并进行游戏、退出游戏、结束录制的顺序进行。在步骤202中，对玩家操作行为、玩家当前状态以及场景等的基础信息进行录制；将录制的基础信息转换成脚本格式；将其保存到客户端游戏的根目录下。优选地，将录制的基础信息转换成Lua脚本格式，并将其保存到根目录下的GameTest.lua。

在步骤203，对所保存的测试脚本进行编辑。对所保存的测试脚本进行编辑，可以编辑参数化的账号和密码，也可以对其它参数进行编辑，以使其它用户使用编辑后的测试脚本。如果不需要编辑，则能够跳过该步骤。

在步骤204，将步骤202或步骤203中生成的测试脚本上传至测试平台。

在步骤103，将测试指令集与测试脚本分配到各测试端。优选地，按照测试策略将测试指令集与测试脚本，通过Socket数据传输分配至各测试端。

在步骤104，根据测试指令集与测试脚本执行脚本回放，以进行游戏测试。在步骤104中，测试端接收到测试指令集后，对其进行解析，并将其与测试脚本一起传输至多个测试端；通过多个测试端执行测试脚本的回放（模拟玩家执行相应的游戏操作），来对网游服务器进行访问，即对服务器产生压力。优选地，在将解析后的测试指令集与测试脚本传输至测试端时，生成与其对应的ID，以使后述的测试性能数据的采集变得高效、准确。优选地，通过TCP协议、http协议来对网游服务器进行访问。

图3为根据本发明的测试脚本的回放流程图。下面将参考图3，对本发明的测试端（机器人）执行相应测试脚本进行详细描述。

在步骤301，判断测试端状态及基础信息。如果测试端状态及基础信息与测试脚本信息一致，则执行步骤303；如果测试端状态及基础信息与测试脚本信息不一致，则进行下一步骤。

在步骤302，调整测试端状态及相应的信息，以使其与测试脚本信息一致，从而使其能够执行相应的测试脚本，并追踪问题产生的原因，将其反馈给网游服务器。

在步骤303，根据测试指令集执行测试脚本的回放。各测试端根据包括执行的顺序、时间间隔以及并发个数的测试指令集，执行测试脚本的回放。

在步骤304，结束脚本回放。

在步骤105，根据测试端反馈的状态收集测试性能数据。例如，收集与CPU数据、内存数据、网络延迟、服务器响应时间等有关的数据。在步骤105中，收集上述测试性能数据后，对所收集的测试性能数据进行分类统计且与所生成ID相关联地进行保存，以使测试性能数据与测试行为一一对应。优选地，测试性能数据的收集是在实际测试过程中实时进行的。

在步骤106，根据测试性能数据生成相应的测试报告。

下面对本发明的网游服务器性能自动化测试系统进行详细描述。图4为根据本发明的网游服务器性能自动化测试系统架构图，如图4所示，本发明的网游服务器性能自动化测试系统，包括：游戏客户端410、测试平台420、网游服务器430。其中，测试平台420包括：数据传输模块421、测试控制模块422、多个测试模块423、以及数据处理模块424。

游戏客户端410，其通过数据传输模块421在测试平台420配置与测试相关的信息，且录制并编辑测试脚本，并将其传输至测试平台420。具体地，游戏客户端410集成录制控件并启动游戏，游戏启动后录制测试脚本。对玩家操作行为、玩家当前状态以及场景等的基础信息进行录制；将录制的基础信息转换成脚本格式；将其保存到客户端游戏的根目录下。优选地，使用LuaRecorde控件，并将录制的基础信息转换成Lua脚本格式且将其保存到根目录下的GameTest.lua。游戏客户端410还可以对所保存的测试脚本信息进行编辑，可以编辑参数化的账号和密码，也可以对其它参数进行编辑，以使其它用户使用编辑后的测试脚本。

测试平台420，生成并调整测试指令集，并根据测试指令集与测试脚本进行游戏测试，收集测试数据并生成测试报告。根据上述测试的相关信息数据传输模块421生成测试指令集，并根据测试策略对其进行调整，例如执行的顺序、时间间隔以及并发个数等。测试控制模块422接收由数据传输模块421传输的测试指令集与测试脚本后，对测试指令集进行分解，并将其与测试脚本一起传输至多个测试模块423。优选地，将分解后的测试指令集与测试脚本传输至多个测试模块423时，生成与各测试模块423对应的ID，以使后述的测试性能数据的采集变得高效、准确。测试模块423接收测试脚本，并根据测试指令集执行相应的测试脚本。测试模块423通过执行相应的测试脚本来模拟玩家的游戏操作行为，并通过TCP协议、http协议等与网游服务器进行交互，访问游戏的相关接口，触发相关游戏行为，由此对网游服务器产生压力。在测试模块423进行游戏测试过程中，数据处理模块424实时地采集测试性能数据，例如CPU数据、内存数据、网络延迟、服务器响应时间等，并对其进行分类统计且与所生成的ID相关联地进行保存，以使测试性能数据与测试行为一一对应。另外，数据处理模块424根据保存的测试性能数据，以与标准对比的方式生成测试报告，经由数据传输模块421传输至游戏客户端410。

根据本发明的网游服务器性能自动化测试方法及系统，根据测试指令集和测试脚本进行脚本回放，因此不需要测试人员具备开发能力，且测试简单高效。

根据本发明的网游服务器性能自动化测试方法及系统，在测试性能数据是在进行脚本回放时，实时对其进行收集，由此测试数据准确有效。

根据本发明的网游服务其性能自动化测试方法及系统，将测试指令集和测试脚本分配至各测试模块时，生成与各测试模块对应的ID，并将测试性能数据与该ID相关联地进行保存，由此测试行为与测试性能数据一一对应，方便定位重现发生的问题。

本领域普通技术人员可以理解：以上所述仅为本发明的优选实施例而已，并不用于限制本发明，尽管参照前述实施例对本发明进行了详细的说明，对于本领域的技术人员来说，其依然可以对前述各实施例记载的技术方案进行修改，或者对其中部分技术特征进行等同替换。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (11)

1.一种网游服务器性能自动化测试方法，其特征在于，包括以下步骤：

生成并调整测试指令集；

录制测试脚本或编写自定义测试脚本，并将其上传；

根据所述测试指令集、所述录制的测试脚本或所述自定义测试脚本，执行脚本回放，以进行游戏测试；

收集测试性能数据；

生成测试报告。

2.根据权利要求1所述的网游服务器性能自动化测试方法，其特征在于，所述生成并调整测试指令集的步骤，进一步包括：

根据测试计划、测试用例以及测试方案生成所述测试指令集；

根据测试策略对所述测试指令集中的执行的顺序、时间间隔以及并发个数进行调整。

3.根据权利要求1所述的网游服务器性能自动化测试方法，其特征在于，所述录制测试脚本或编写自定义测试脚本，并将其上传的步骤，进一步包括：

集成录制控件，启动游戏客户端；

录制并保存测试脚本信息；

对所保存的测试脚本进行编辑；

将所述录制的测试脚本或所述自定义测试脚本上传至测试平台。

4.根据权利要求3所述的网游服务器性能自动化测试方法，其特征在于，

所述录制控件为LuaRecorde控件，并将Lua脚本格式的脚本保存到根目录下的GameTest.lua。

5.根据权利要求1所述的网游服务器性能自动化测试方法，其特征在于，所述根据所述测试指令集、以及所述录制的测试脚本或所述自定义测试脚本，执行脚本回放的步骤，进一步包括：

将所述测试指令集、以及所述录制的测试脚本或所述自定义测试脚本分配到各测试端；

所述各测试端执行脚本回放，以对所述网游服务器进行访问。

6.根据权利要求5所述的网游服务器性能自动化测试方法，其特征在于，所述根据所述测试指令集、以及所述录制的测试脚本或所述自定义测试脚本，执行脚本回放的步骤，进一步包括：

判断所述各测试端状态及基础信息；

调整所述各测试端状态及相应的信息，以使其与测试脚本信息一致；

追踪问题产生的原因，将其反馈给网游服务器；

执行所述测试脚本回放。

7.根据权利要求5所述的网游服务器性能自动化测试方法，其特征在于，所述根据所述测试指令集、以及所述录制的测试脚本或所述自定义测试脚本，执行脚本回放的步骤，进一步包括：

在将所述测试指令集、以及所述录制的测试脚本或所述自定义测试脚本分配到各测试端时，生成与其对应的ID，以使所述收集测试性能数据变得高效、准确；

通过TCP协议或http协议来对网游服务器进行访问。

8.一种网游服务器性能自动化测试系统，包括：游戏客户端、测试平台，以及网游服务器，所述网游服务器性能自动测试系统的特征在于，

所述游戏客户端，在所述测试平台配置与测试相关的信息，且录制测试脚本或编写自定义测试脚本，并将其上传至所述测试平台，

所述测试平台，根据所述与测试相关的信息生成并调整测试指令集；根据所述测试指令集、以及所述录制的测试脚本或所述自定义测试脚本，执行脚本回放，以进行游戏测试从而对所述网游服务器进行访问；收集测试性能数据并生成测试报告。

9.根据权利要求8所述的网游服务器性能自动化测试系统，其特征在于，

所述测试平台，包括数据传输模块、测试控制模块、多个测试模块，以及数据处理模块，其中，

所述数据传输模块，生成并调整所述测试指令集，并将其传输至所述测试控制模块，

所述测试控制模块，分解所述测试指令集，并将其与测试脚本一起传输至多个所述测试模块，

所述测试模块，根据所述测试指令集、以及所述录制的测试脚本或所述自定义测试脚本，执行脚本回放，以对所述网游服务器进行访问，

所述数据处理模块，采集测试性能数据并生成测试报告。

10.根据权利要求9所述的网游服务器性能自动化测试系统，其特征在于，所述数据传输模块根据测试计划、测试用例以及测试方案生成所述测试指令集，并对所述测试指令集中的执行的顺序、时间间隔以及并发个数进行调整。

11.根据权利要求9所述的网游服务器性能自动化测试系统，其特征在于，

所述测试控制模块，在分解所述测试指令集，并将其与测试脚本一起传输至多个所述测试模块时，生成与各所述测试模块对应的ID，以使后述的测试性能数据的采集变得高效、准确，

所述数据处理模块，将所述测试性能数据与所生成的ID相关联地进行保存，以使测试性能数据与测试行为一一对应。