CN109542780A - 自然语言处理应用的测试方法、测试设备及存储介质 - Google Patents

Abstract

本发明实施例提供一种自然语言处理应用的测试方法、测试设备及存储介质。本发明的自然语言处理应用的测试方法，包括：获取测试用例，所述测试用例包括关键字，根据所述关键字调用所述关键字对应的测试代码，所述测试代码用于在测试前端执行业务操作，以使所述测试前端生成业务请求消息，并发送给自然语言处理应用的服务器，通过所述测试前端接收所述服务器反馈的业务请求响应结果，根据所述业务请求响应结果确定所述测试用例是否执行通过。本发明实施例可以有效减少代码的编写量，减少测试人员的工作量。

Description

自然语言处理应用的测试方法、测试设备及存储介质

技术领域

本发明实施例涉及计算机技术，尤其涉及一种自然语言处理应用的测试方法、测试设备及存储介质。

背景技术

随着智能互联时代的到来，新技术的创新，业务的跨领域融合正在加速改变的人们的行为和生活，自然语言处理(Natural Language Processing，NLP)技术作为新的颠覆性的人机交互方式已经开始渗透到汽车、家居、医疗、移动应用等诸多领域。

NLP技术的主要应用包括问答系统(Question answering)、机器翻译(Machinetranslation)、文字校对(Text-proofing)等，而由于NLP技术涉及理解自然语言，验证采集NLP技术的应用显得尤为重要。传统主流的研发级软件测试，通常通过编写测试代码打桩进行单元测试、接口测试、以及功能测试。

对于采用NLP技术的应用的测试与传统主流的软件测试区别在于，首先传统主流软件领域测试所有输入有与之相对应的准确输出，而采用NLP技术的应用的处理结果答案可以是不唯一的，例如基本对话中一个问题，可以有不同种回答。如果按照传统软件测试方法进行NLP功能测试，例如对话功能，通常需要人工测试或大量的基础。

发明内容

本发明实施例提供一种自然语言处理应用的测试方法、测试设备及存储介质，可以有效减少代码的编写量，减少测试人员的工作量。

第一方面，本发明实施例提供一种自然语言处理应用的测试方法，包括：获取测试用例，所述测试用例包括关键字；根据所述关键字调用所述关键字对应的测试代码，所述测试代码用于在测试前端执行业务操作，以使所述测试前端生成业务请求消息，并发送给自然语言处理应用的服务器；通过所述测试前端接收所述服务器反馈的业务请求响应结果；根据所述业务请求响应结果确定所述测试用例是否执行通过。

相较于现有技术的测试方法需要针对每个测试用例编写测试代码，本发明实施例可以有效减少代码的编写量，减少测试人员的工作量。

结合第一方面，在第一方面的一种可能的实现方式中，所述测试用例还包括至少一个第一测试参数和至少一个第二测试参数；所述测试代码用于将所述至少一个第一测试参数输入至所述测试前端，以使所述测试前端生成第一业务请求消息，并发送给所述服务器，所述第一业务请求消息携带所述至少一个第一测试参数；所述根据所述业务请求响应结果确定所述测试用例是否执行通过，包括：根据所述业务请求响应结果和所述至少一个第二测试参数确定所述测试用例是否执行通过。

结合第一方面或第一方面的一种可能的实现方式，在第一方面的另一种可能的实现方式中，所述方法还包括：根据所述关键字调用相应的测试数据集，获取所述第一测试参数和所述第二测试参数。

从测试数据集获取上述第一测试参数和第二测试参数，从而实现测试参数与测试代码的解耦合，可以应对海量数据对话、数据分类等测试。

结合第一方面或第一方面的任一种可能的实现方式，在第一方面的另一种可能的实现方式中，所述通过所述测试前端接收所述服务器反馈的业务请求响应结果，包括：从所述测试前端的显示区获取所述服务器反馈的业务请求响应消息。

结合第一方面或第一方面的任一种可能的实现方式，在第一方面的另一种可能的实现方式中，所述业务操作包括点击操作、文本框输入操作、或列表框选择操作中至少一项。

第二方面，本发明实施例提供一种自然语言处理应用的测试装置，包括：获取模块，用于获取测试用例，所述测试用例包括关键字；执行模块，用于根据所述关键字调用所述关键字对应的测试代码，所述测试代码用于在所述测试前端执行业务操作，以使所述测试前端生成业务请求消息，并发送给自然语言处理应用的服务器；接收模块，用于通过所述测试前端接收所述服务器反馈的业务请求响应结果；检验模块，用于根据所述业务请求响应结果确定所述测试用例是否执行通过。

结合第二方面，在第二方面的一种可能的实现方式中，所述测试用例还包括至少一个第一测试参数和至少一个第二测试参数；所述测试代码用于将所述至少一个第一测试参数输入至所述测试前端，以使所述测试前端生成第一业务请求消息，并发送给所述服务器，所述第一业务请求消息携带所述至少一个第一测试参数；所述检验模块用于：根据所述业务请求响应结果和所述至少一个第二测试参数确定所述测试用例是否执行通过。

结合第二方面或第二方面的一种可能的实现方式，在第二方面的另一种可能的实现方式中，所述装置还包括：参数获取模块；

所述参数获取模块，用于根据所述关键字调用相应的测试数据集，获取所述第一测试参数和所述第二测试参数。

结合第二方面或第二方面的任一种可能的实现方式，在第二方面的另一种可能的实现方式中，所述接收模块用于：从所述测试前端的显示区获取所述服务器反馈的业务请求响应消息。

结合第二方面或第二方面的任一种可能的实现方式，在第二方面的另一种可能的实现方式中，所述业务操作包括点击操作、文本框输入操作、或列表框选择操作中至少一项。

第三方面，本发明实施例提供一种测试设备，所述测试设备包括：处理器、存储器、收发器；所述收发器耦合至所述处理器，所述处理器控制所述收发器的收发动作；

其中，所述存储器用于存储计算机可执行程序代码，所述程序代码包括指令；当所述处理器执行所述指令时，所述指令使所述测试设备执行如第一方面任一项所述的方法。

第四方面，本发明实施例提供一种计算机存储介质，其上存储有计算机程序或指令，其特征在于，当所述计算机程序或指令被处理器或计算机执行时，实现如第一方面任一项所述的方法。

本发明实施例的自然语言处理应用的测试方法、测试设备及存储介质，通过获取测试用例，所述测试用例包括关键字，根据所述关键字调用所述关键字对应的测试代码，所述测试代码用于在测试前端执行业务操作，以使所述测试前端生成业务请求消息，并发送给自然语言处理应用的服务器，通过所述测试前端接收所述服务器反馈的业务请求响应结果，根据所述业务请求响应结果确定所述测试用例是否执行通过，其中通过关键字调用相应测试代码，可以提高测试代码的可读性，并且相同功能的测试代码可以被反复调用，相较于现有技术的测试方法需要针对每个测试用例编写测试代码，本发明实施例可以有效减少代码的编写量，减少测试人员的工作量。

附图说明

下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍。

图1为本发明实施例的一种应用场景的示意图；

图2为本发明实施例的一种自然语言处理应用的测试方法的流程图；

图3为本发明实施例的另一种自然语言处理应用的测试方法的流程图；

图4为本发明实施例的一种自然语言处理应用的测试装置的结构示意图；

图5为本发明实施例的另一种自然语言处理应用的测试装置的结构示意图；

图6为本发明实施例的一种测试设备的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述。

本发明所涉及的术语“第一”、“第二”、等(如果存在)是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例例如能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

图1为本发明实施例的一种应用场景的示意图，如图1所示，该应用场景包括服务器和测试设备。其中，该服务器为待测试的NLP应用的服务器，NLP应用的类型包括如智能问答、分类、聚类、相似度计算、语义分析、语义搜索等。该测试设备用于对该NLP应用的服务器的功能进行测试，以验证其功能的有效性和完善性。

在一些实施例中，该测试设备可以划分为测试模块和测试前端，该测试模块用于获取测试用例，并调用相应的测试代码，以访问测试前端，该测试前端用于通过网络协议与服务器连接，将业务请求消息推送到服务器，由该服务器进行NLP应用的处理流程，并反馈业务请求响应结果。

该测试前端可以包括web测试程序界面或应用程序界面。

需要说明的是，上述NLP应用的服务器还可以与其他功能的服务器连接，举例而言，该NLP应用的服务器为智能问答的服务器，该问答系统的服务器可以与提供查询天气功能的服务器建立连接，还可以与提供订票业务的服务器建立连接。

本发明下述实施例还提供一种更加适合NLP领域的测试方法，上述测试模块可以执行本发明下述实施例的NLP应用的测试方法，以对NLP应用进行更加完善的测试，减少测试人员的工作量。

图2为本发明实施例的一种自然语言处理应用的测试方法的流程图，本实施例的执行主体可以是上述测试设备的测试模块，如图2所示，本实施例的方法可以包括：

步骤101、获取测试用例，所述测试用例包括关键字。

其中，该测试用例用于对NLP应用的功能进行验证。该关键字可以为自然语言描述，例如文字形式，用于描述测试用例的处理步骤，例如，该关键字可以是登录、注册、问答、翻译等。

步骤102、根据所述关键字调用所述关键字对应的测试代码，所述测试代码用于在测试前端执行业务操作，以使所述测试前端生成业务请求消息，并发送给自然语言处理应用的服务器。

本发明实施例将关键字与测试代码进行强绑定，即关键字与测试代码对应，即通过该测试代码实现该关键字的描述的执行，从而可以提升测试代码的可读性。并且该关键字对应的测试代码可以被不同的测试用例反复调用，以对NLP应用进行验证。

其中，调用该关键字对应的测试代码，该测试代码包括多条计算机指令，执行该计算机指令，可以实现通过应用程序编程接口(Application Programming Interface，API)访问测试前端，并在该测试前端执行业务操作，测试前端根据该业务操作生成业务请求消息，并向NLP应用的服务器发送该业务请求消息。

步骤103、通过所述测试前端接收所述服务器反馈的业务请求响应结果。

其中，测试前端接收服务器反馈的业务请求响应结果，在一些实施例中，测试前端可以将该业务请求响应结果显示在测试前端的界面的显示区，测试模块从该显示区获取该业务请求响应结果。

步骤104、根据所述业务请求响应结果确定所述测试用例是否执行通过。

测试模块对该业务请求响应结果进行验证，确定该测试用例是否执行通过，在一些实施例中，还可以生成测试报告，该测试包括记录有该测试用例的执行通过与否，以供测试人员查阅。

需要说明的是，上述业务请求消息和业务请求响应结果可以是文本数据，也可以是语音数据，其可以根据需求进行灵活设置。

上述业务操作可用包括点击操作、文本框输入操作、或列表框选择操作中至少一项。当然可以理解的，还可以包括其他操作，本发明实施例不一一举例说明。

本发明实施例的测试模块可以集成到自动化测试环境中，进行自动化测试，例如，DevOps自动化测试工具链。

对上述步骤101的解释说明，测试用例可以包括关键字，该关键字用于调用相应的测试代码，从而实现相同功能的测试代码可以被反复调用，相较于现有技术的测试方法需要针对每个测试用例编写测试代码，本发明实施例可以有效减少代码的编写量。

在一些实例中，该测试用例可以不包括测试参数。例如，该测试用例用于测试前端与服务器建立连接，该测试用例可以不包括测试参数，仅通过关键字(建立连接)匹配，调用关键字(建立连接)对应的测试代码，该测试代码用于使得测试前端生成业务请求消息，该业务请求消息可以是建立连接请求消息，并发送给服务器。该测试用例也可以包括一个或多个测试参数，其具体实现方式可以参见下述实施例的解释说明。

对实现相同功能的测试代码可以被反复调用进行举例说明，测试用例A和测试用例B均包括登录步骤，该登录步骤可以使用关键字(登录(用户名，密码))描述，测试用例A和测试用例B均可以通过该关键字(登录(用户名，密码))调用相应的代码，从而实现相同功能的测试代码可以被不同测试用例反复调用。

本实施例，通过获取测试用例，所述测试用例包括关键字，根据所述关键字调用所述关键字对应的测试代码，所述测试代码用于在测试前端执行业务操作，以使所述测试前端生成业务请求消息，并发送给自然语言处理应用的服务器，通过所述测试前端接收所述服务器反馈的业务请求响应结果，根据所述业务请求响应结果确定所述测试用例是否执行通过，其中通过关键字调用相应测试代码，可以提高测试代码的可读性，并且相同功能的测试代码可以被反复调用，相较于现有技术的测试方法需要针对每个测试用例编写测试代码，本发明实施例可以有效减少代码的编写量，减少测试人员的工作量。

下面采用几个具体的实施例，对图2所示方法实施例的技术方案进行详细说明。

图3为本发明实施例的另一种自然语言处理应用的测试方法的流程图，本实施例的执行主体可以是上述测试设备的测试模块，如图3所示，本实施例的方法可以包括：

步骤201、获取测试用例，所述测试用例包括关键字、至少一个第一测试参数和至少一个第二测试参数。

其中，该关键字的解释说明可以参见上述图2所示实施例，此处不再赘述。该至少一个第一测试参数和至少一个第二测试参数用于对NLP应用的服务器的功能进行具体验证。

至少一个第一测试参数和至少一个第二测试参数，可以包括一个第一测试参数和至少一个第二测试参数，以及，至少一个测试参数和一个第二测试参数，其分别对应不同的应用场景。

以该NLP应用为智能问答为例，该关键字可以是问答，对于一个问题对应一个或多个答案的场景，该第一测试参数可以是问题语句，该至少一个第二测试参数可以是该问题语句对应的一个或多个答案。对于多种不同问法(多个问题语句)对应一个答案的场景，该至少一个第一测试参数可以是一个或多个问题语句，该第二测试参数可以是该问题语句对应的一个答案。

步骤202、根据所述关键字调用所述关键字对应的测试代码，所述测试代码用于将所述至少一个第一测试参数输入至所述测试前端，以使所述测试前端生成第一业务请求消息，并发送给所述服务器，所述第一业务请求消息携带所述第一测试参数。

其中，调用该关键字对应的测试代码，将该至少一个第一测试参数传递至该测试代码中，该测试代码包括多条计算机指令，执行该计算机指令，可以实现通过应用程序编程接口(Application Programming Interface，API)访问测试前端，并将该至少一个第一测试参数输入到测试前端的发送文本框，测试前端根据该业务操作生成业务请求消息，该业务请求消息携带该至少一个第一测试参数，并向NLP应用的服务器发送该业务请求消息。需要说明的是，当至少一个第一测试参数为多个时，该业务请求消息可以是多个业务请求消息，以分别携带一个第一测试参数。

NLP应用的服务器对该业务请求消息进行处理，向测试前端返回业务请求响应结果。

以上述第一测试参数是问题语句为例进一步举例说明，NLP应用的服务器根据该问题语句反馈相应的答案。

步骤203、通过所述测试前端接收所述服务器反馈的业务请求响应结果。

其中，测试模块可以从测试前端的界面的显示区获取该业务请求响应结果。

步骤204、根据所述业务请求响应结果和所述至少一个第二测试参数确定所述测试用例是否执行通过。

测试模块将该业务请求响应结果与该至少一个第二测试参数进行匹配，以确定该测试用例是否执行通过。

以上述一个问题多个答案的应用场景为例进一步举例说明，一个第一测试参数是问题语句，测试模块将服务器反馈的答案与该至少一个第二测试参数进行匹配，该至少一个第二测试参数为问题语句对应的一个或多个答案。

需要说明的是，对于多种问法一个答案的应用场景，多个问题语句可以对应一个答案，其均可以通过本实施例的测试方法进行测试，以验证NLP应用的功能。

本实施例，通过获取测试用例，所述测试用例包括关键字、至少一个第一测试参数和至少一个第二测试参数，根据所述关键字调用所述关键字对应的测试代码，所述测试代码用于将所述至少一个第一测试参数输入至所述测试前端，以使所述测试前端生成第一业务请求消息，并发送给所述服务器，所述第一业务请求消息携带所述至少一个第一测试参数，通过所述测试前端接收所述服务器反馈的业务请求响应结果，根据所述业务请求响应结果和所述至少一个第二测试参数确定所述测试用例是否执行通过，其中通过关键字调用相应测试代码，可以提高测试代码的可读性，并且相同功能的测试代码可以被反复调用，相较于现有技术的测试方法需要针对每个测试用例编写测试代码，本发明实施例可以有效减少代码的编写量，减少测试人员的工作量。

相同关键字、不同测试参数的测试用例可以调用相同的测试代码，只需更新测试代码中的测试参数，从而可以减小代码的编写量。

在上述任一实施例的基础上，本发明实施例的方法还可以包括：根据所述关键字调用相应的测试数据集，获取所述第一测试参数和所述第二测试参数。即从测试数据集获取上述第一测试参数和第二测试参数，从而实现测试参数与测试代码的解耦合，可以应对海量数据对话、数据分类等测试。

以智能问答应用为例，对不同问答语句进行测试，只需更新测试数据集，便可以实现对具体应用场景的问答语句进行测试，无需重新编写测试代码，可以减少测试人员的工作量。

图4为本发明实施例的一种自然语言处理应用的测试装置的结构示意图，如图4所示，本实施例的装置可以包括：获取模块11、执行模块12、接收模块13和效验模块14，其中，获取模块11用于获取测试用例，所述测试用例包括关键字，执行模块12用于根据所述关键字调用所述关键字对应的测试代码，所述测试代码用于在所述测试前端执行业务操作，以使所述测试前端生成业务请求消息，并发送给自然语言处理应用的服务器，接收模块13用于通过所述测试前端接收所述服务器反馈的业务请求响应结果，检验模块14用于根据所述业务请求响应结果确定所述测试用例是否执行通过。

可选的，所述测试用例还包括至少一个第一测试参数和至少一个第二测试参数；所述测试代码用于将所述至少一个第一测试参数输入至所述测试前端，以使所述测试前端生成第一业务请求消息，并发送给所述服务器，所述第一业务请求消息携带所述至少一个第一测试参数；所述检验模块14用于：根据所述业务请求响应结果和所述至少一个第二测试参数确定所述测试用例是否执行通过。

可选的，所述接收模块13用于：从所述测试前端的显示区获取所述服务器反馈的业务请求响应消息。

可选的，所述业务操作包括点击操作、文本框输入操作、或列表框选择操作中至少一项。

本实施例的装置，可以用于执行图2所示方法实施例的技术方案，其实现原理和技术效果类似，此处不再赘述。

图5为本发明实施例的另一种自然语言处理应用的测试装置的结构示意图，如图5所示，本实施例的装置在图4所示装置结构的基础上，进一步地，还可以包括：参数获取模块15，该参数获取模块15用于根据所述关键字调用相应的测试数据集，获取所述第一测试参数和所述第二测试参数。

本实施例的装置，可以用于执行图3所示方法实施例的技术方案，其实现原理和技术效果类似，此处不再赘述。

本发明实施例还提供一种计算机存储介质，其上存储有计算机程序或指令，当所述计算机程序或指令被处理器或计算机执行时，实现如上述任一个所实施例所述的方法。

需要说明的是，本发明实施例的上述模拟病人问诊对话装置可以是终端设备，也可以是终端设备中的一个部件，例如一个芯片。

图6为本发明实施例的一种测试设备的结构示意图，如图6所示，本实施例的测试设备，包括：处理器211、存储器212、收发器213以及总线214。其中，处理器211、存储器212和收发器213通过总线214相互连接。其中，总线214可以是外设部件互连标准(PeripheralComponent Interconnect，PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture，EISA)总线等。上述总线214可以分为地址总线、数据总线、控制总线等。为便于表示，图6中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。

在硬件实现上，以上图4或图5所示的各个功能模块可以以硬件形式内嵌于或独立于测试设备的处理器211中。

所述收发器213可以包括混频器等必要的射频通信器件。所述处理器211可以包括中央处理单元(Central Processing Unit，CPU)、数字信号处理器(digital signalprocessor，DSP)、微控制器(Microcontroller Unit，MCU)、专用集成电路(ApplicationSpecific Integrated Circuit，ASIC)或现场可编程逻辑门阵列(Field－ProgrammableGate Array，FPGA)中的至少一个。

存储器212用于存储程序指令，处理器211用于调用存储器212中的程序指令执行上述方案。

所述程序指令可以以软件功能单元的形式实现并能够作为独立的产品销售或使用，所述存储器212可以是任意形式的计算机可读取存储介质。基于这样的理解，本申请的技术方案的全部或部分可以以软件产品的形式体现出来，包括若干指令用以使得一台计算机设备，具体可以是处理器211，来执行本申请各个实施例中测试模块的全部或部分步骤。而前述的计算机可读存储介质包括：U盘、移动硬盘、只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。

本实施例以上所述的测试设备，可以用于执行上述各方法实施例中的技术方案，其实现原理和技术效果类似，其中各个器件的功能可以参考方法实施例中相应的描述，此处不再赘述。

本领域普通技术人员可以理解：实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时，执行包括上述各方法实施例的步骤；而前述的存储介质包括：ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。

最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (10)

1.一种自然语言处理应用的测试方法，其特征在于，包括：

获取测试用例，所述测试用例包括关键字；

根据所述关键字调用所述关键字对应的测试代码，所述测试代码用于在测试前端执行业务操作，以使所述测试前端生成业务请求消息，并发送给自然语言处理应用的服务器；

通过所述测试前端接收所述服务器反馈的业务请求响应结果；

根据所述业务请求响应结果确定所述测试用例是否执行通过。

2.根据权利要求1所述的方法，其特征在于，所述测试用例还包括至少一个第一测试参数和至少一个第二测试参数；

所述测试代码用于将所述至少一个第一测试参数输入至所述测试前端，以使所述测试前端生成第一业务请求消息，并发送给所述服务器，所述第一业务请求消息携带所述至少一个第一测试参数；

所述根据所述业务请求响应结果确定所述测试用例是否执行通过，包括：

根据所述业务请求响应结果和所述至少一个第二测试参数确定所述测试用例是否执行通过。

3.根据权利要求2所述的方法，其特征在于，所述方法还包括：

根据所述关键字调用相应的测试数据集，获取所述第一测试参数和所述第二测试参数。

4.根据权利要求1至3任一项所述的方法，其特征在于，所述通过所述测试前端接收所述服务器反馈的业务请求响应结果，包括：

从所述测试前端的显示区获取所述服务器反馈的业务请求响应消息。

5.根据权利要求1至3任一项所述的方法，其特征在于，所述业务操作包括点击操作、文本框输入操作、或列表框选择操作中至少一项。

6.一种自然语言处理应用的测试装置，其特征在于，包括：

获取模块，用于获取测试用例，所述测试用例包括关键字；

执行模块，用于根据所述关键字调用所述关键字对应的测试代码，所述测试代码用于在所述测试前端执行业务操作，以使所述测试前端生成业务请求消息，并发送给自然语言处理应用的服务器；

接收模块，用于通过所述测试前端接收所述服务器反馈的业务请求响应结果；

检验模块，用于根据所述业务请求响应结果确定所述测试用例是否执行通过。

7.根据权利要求6所述的装置，其特征在于，所述测试用例还包括至少一个第一测试参数和至少一个第二测试参数；

所述测试代码用于将所述至少一个第一测试参数输入至所述测试前端，以使所述测试前端生成第一业务请求消息，并发送给所述服务器，所述第一业务请求消息携带所述至少一个第一测试参数；

所述检验模块用于：根据所述业务请求响应结果和所述至少一个第二测试参数确定所述测试用例是否执行通过。

8.根据权利要求7所述的装置，其特征在于，所述装置还包括：参数获取模块；

所述参数获取模块，用于根据所述关键字调用相应的测试数据集，获取所述第一测试参数和所述第二测试参数。

9.一种测试设备，其特征在于，所述测试设备包括：处理器、存储器、收发器；所述收发器耦合至所述处理器，所述处理器控制所述收发器的收发动作；

其中，所述存储器用于存储计算机可执行程序代码，所述程序代码包括指令；当所述处理器执行所述指令时，所述指令使所述测试设备执行如权利要求1至5任一项所述的方法。

10.一种计算机存储介质，其上存储有计算机程序或指令，其特征在于，当所述计算机程序或指令被处理器或计算机执行时，实现如权利要求1至5任一项所述的方法。