CN112350877B

CN112350877B - 测试方法、测试平台、智能网关和测试系统

Info

Publication number: CN112350877B
Application number: CN201910726762.2A
Authority: CN
Inventors: 虞淼; 李俊玮; 张德朝
Original assignee: China Mobile Communications Group Co Ltd; China Mobile Communications Ltd Research Institute
Current assignee: China Mobile Communications Group Co Ltd; China Mobile Communications Ltd Research Institute
Priority date: 2019-08-07
Filing date: 2019-08-07
Publication date: 2023-07-25
Anticipated expiration: 2039-08-07
Also published as: CN112350877A

Abstract

本发明实施例提供一种测试方法、测试平台、智能网关和测试系统，该方法包括：通过测试接口向所述智能网关发送测试信息，所述测试接口为所述智能网关上的测试插件与测试平台之间的接口；获取所述智能网关上的测试插件基于所述测试信息对所述智能网关的API接口进行测试的测试结果。本发明实施例中，利用测试平台、测试接口、智能网关之间的交互架构，从设备信息分析到返回值对比的整个测试流程，均实现了自动化，具有高效性；自动读取智能网关设备信息、自动选择对应测试插件、自动对比返回值，测试过程无需人工，避免了大量参数录入、比对操作中的人工误操作，具有高可靠性。

Description

测试方法、测试平台、智能网关和测试系统

技术领域

本发明实施例涉及通信技术领域，具体涉及一种测试方法、测试平台、智能网关和测试系统。

背景技术

参见图1，智能网关通过开放服务网关(Open Service Gateway Initiative，OSGi)智能操作系统将网络功能封装为应用程序编程接口(Application ProgrammingInterface，API)接口，插件通过API接口调用智能网关所开放的网络功能。为保证智能网关网络功能的正常运行，需要为对应的API接口作完整性测试。

为了验证智能网关API接口实现完整性，“同类技术”是通过运行插件逐个调用API函数，而后再以人工方式对插件本地返回参数与预期的参数比对，验证智能网关是否支持完整的API接口。此方式主要存在以下两点问题：一是效率低、耗时久。需要靠人工提前分析设备信息，包括本地操作系统类型和版本、以及需要被测的智能化功能等，再靠人工选择对应的测试插件并进行测试参数配置，才能开展测试。二是API函数量大，人工检测易误判。API函数数量目前多达近160个，后续随着网关功能的新增，API函数数量还会增加。大量的API函数需要人工通过插件调用和对返回值做参数比对来验证API的实现完整性。

发明内容

本发明实施例的一个目的在于提供一种测试方法、测试平台、智能网关和测试系统，解决现有测试方法效率低、易误判的问题。

依据本发明实施例的第一方面，提供一种测试方法，应用于测试平台，包括：

通过测试接口向所述智能网关发送测试信息，所述测试接口为所述智能网关上的测试插件与测试平台之间的接口；

获取所述智能网关上的测试插件基于所述测试信息对所述智能网关的应用程序编程接口API接口进行测试的测试结果。

可选地，所述测试接口的承载协议栈从下至上依次包括：互联网协议IP层、传输控制协议TCP层、JavaScript对象标记JSON层和测试管理层。

可选地，所述TCP层的TCP报文包括：TCP包头、JSON数据长度字段和JSON数据字段。

可选地，所述方法还包括：

将配置参数对应的预期返回值模板与测试插件上报的测试结果进行比对。

可选地，通过测试接口向所述智能网关发送测试信息之前，所述方法还包括：

通过所述测试接口与所述智能网关交互，完成测试服务器的注册。

获取所述智能网关上的测试插件的测试环境信息；

向所述智能网关发送配置参数，所述配置参数是所述测试平台根据获取的测试环境信息确定的。

可选地，向所述智能网关发送配置参数，包括以下一项或多项：

通过所述智能网关的网关功能模块与所述测试平台的权限管理服务RMS管理模块之间的第一接口，向所述智能网关发送用于配置插件服务器的配置参数；

通过所述智能网关的网关功能模块与所述测试平台的插件管理模块之间的第二接口，向所述智能网关发送用于配置测试插件权限的配置参数。

可选地，获取所述智能网关上的测试插件基于所述测试信息对所述智能网关的API接口进行测试的测试结果，包括：

通过测试接口获取所述智能网关上的测试插件基于所述测试信息对所述智能网关的API接口进行测试的测试结果；或者，

通过第一接口获取所述智能网关上的测试插件基于所述测试信息对所述智能网关的API接口进行测试的测试结果。

可选地，所述通过所述测试平台与智能网关之间的测试接口，向所述智能网关发送测试信息，包括：

通过所述智能网关的测试插件与所述测试平台的测试管理模块之间的测试接口，向所述测试插件发送读取要求；

所述通过测试接口获取所述智能网关上的测试插件基于所述测试信息生成的测试结果，包括：

通过所述智能网关的测试插件与所述测试平台的测试管理模块之间的测试接口，接收所述智能网关上的测试插件基于所述读取要求生成的API接口读取结果。

可选地，所述通过测试接口向所述智能网关发送测试信息，所述测试接口为所述智能网关上的测试插件与测试平台之间的接口，包括：

通过所述智能网关的测试插件与所述测试平台的测试管理模块之间的测试接口，向所述测试插件发送测试指令；

所述通过第一接口获取所述智能网关上的测试插件基于所述测试信息生成的测试结果，包括：

通过所述智能网关的网关功能模块与所述测试平台的RMS管理模块之间的第一接口，接收所述智能网关上的测试插件基于所述测试指令生成的API接口调用结果。

依据本发明实施例的第二方面，提供一种测试方法，应用于智能网关，包括：

通过测试接口获取测试信息，所述测试接口为所述智能网关上的测试插件与测试平台之间的接口；

根据所述测试信息，通过所述智能网关上的测试插件对所述智能网关的API接口进行测试，并向所述测试平台上报测试结果。

可选地，所述测试接口的承载协议栈从下至上依次包括：IP层、TCP层、JSON层和测试管理层。

可选地，通过测试接口获取测试信息之前，所述方法还包括：

通过所述测试接口与所述测试平台交互，完成测试服务器的注册。

从所述测试平台接收配置参数，所述配置参数是所述测试平台根据获取的测试环境信息确定的。

可选地，从所述测试平台接收测试配置参数，包括以下一项或多项：

通过所述智能网关的网关功能模块与所述测试平台的RMS管理模块之间的第一接口，接收用于配置插件服务器的配置参数；

通过所述智能网关的网关功能模块与所述测试平台的插件管理模块之间的第二接口，接收用于配置测试插件权限的配置参数。

可选地，向所述测试平台上报测试结果，包括：

通过测试接口向所述测试平台上报所述测试结果；或者，

通过第一接口向所述测试平台上报所述测试结果。

可选地，所述通过测试接口获取测试信息，所述测试接口为所述智能网关上的测试插件与测试平台之间的接口，包括：

通过所述智能网关的测试插件与所述测试平台的测试管理模块之间的测试接口获取API接口读取要求；

所述通过测试接口向所述测试平台上报所述测试结果，包括：

通过所述智能网关的测试插件与所述测试平台的测试管理模块之间的测试接口上报API接口读取结果。

通过所述智能网关的测试插件与所述测试平台的测试管理模块之间的测试接口获取API接口测试指令；

所述通过第一接口向所述测试平台上报测试结果，包括：

通过所述智能网关的网关功能模块与所述测试平台的RMS管理模块之间的第一接口上报API接口调用结果。

依据本发明实施例的第三方面，提供一种测试平台，包括：

第一发送模块，用于通过测试接口向所述智能网关发送测试信息，所述测试接口为所述智能网关上的测试插件与测试平台之间的接口；

第一获取模块，用于获取所述智能网关上的测试插件基于所述测试信息对所述智能网关的应用程序编程接口API接口进行测试的测试结果。

依据本发明实施例的第四方面，提供一种测试平台，包括：测试处理模块、RMS管理模块、插件管理模块和测试管理模块，其中：

所述测试处理模块，用于将配置参数对应的预期返回值模板与测试插件上报的测试结果进行比对；

所述RMS管理模块，用于模拟RMS服务器，配置测试配置；

所述插件管理模块，用于控制和/或卸载API测试插件；

所述测试管理模块，用于管理测试服务器与测试插件的测试消息交互。

依据本发明实施例的第五方面，提供一种智能网关，包括：

第三获取模块，用于通过测试接口获取测试信息，所述测试接口为所述智能网关上的测试插件与测试平台之间的接口；

上报模块，用于根据所述测试信息，通过所述智能网关上的测试插件对所述智能网关的API接口进行测试，并向所述测试平台上报测试结果。

依据本发明实施例的第六方面，提供一种测试系统，包括：测试平台和智能网关，其中所述测试平台包括：测试处理模块、RMS管理模块、插件管理模块和测试管理模块，所述智能网关包括：测试插件、智能网关功能模块和API接口；

所述测试系统还包括：测试接口、第一接口和第二接口，所述测试接口用于所述测试管理模块和所述测试插件之间的交互；所述第一接口用于所述RMS管理模块与所述智能网关功能模块之间的交互；所述第二接口用于所述插件管理模块与所述API接口之间的交互；

所述RMS管理模块，用于模拟RMS服务器，配置测试配置；

所述插件管理模块，用于控制和/或卸载API测试插件；

在本发明实施例中，利用测试平台、测试接口、智能网关之间的交互架构，自动获取智能网关的系统信息，并自适应地生成测试配置参数模板和预期返回值模板，自动实现运行结果参数模板和预期返回值参数模板的比对，最终自动呈现API接口实现完整性的测试结果。从设备信息分析到返回值对比的整个测试流程，均实现了自动化，具有高效性；自动读取智能网关设备信息、自动选择对应测试插件、自动对比返回值，测试过程无需人工，避免了大量参数录入、比对操作中的人工误操作，具有高可靠性。

附图说明

通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：

图1为智能网关架构示意图；

图2为本发明实施例的测试方法的流程图之一；

图3为本发明实施例的测试方法的流程图之二；

图4为本发明实施例的测试方法的流程图之三；

图5为本发明实施例的测试方法的流程图之四；

图6为本发明实施例的智能网关API自动测试装置的架构示意图；

图7为本发明实施例的智能网关API自动化测试流程示意图；

图8为本发明实施例的协议栈示意图；

图9为本发明实施例的报文格式示意图；

图10为本发明实施例的测试平台的示意图；

图11为本发明实施例的智能网关的示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本申请的说明书和权利要求书中的术语“包括”以及它的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。此外，说明书以及权利要求中使用“和/或”表示所连接对象的至少其中之一，例如A和/或B，表示包含单独A，单独B，以及A和B都存在三种情况。

在本发明实施例中，“示例性的”或者“例如”等词用于表示作例子、例证或说明。本发明实施例中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言，使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。

在本发明实施例中，A接口也可以称为A通道，B通道也可以称为B接口。

参见图2，本发明实施例还提供一种测试方法，应用于测试平台，包括：步骤201和步骤202。

步骤201：通过测试接口向所述智能网关发送测试信息，所述测试接口为所述智能网关上的测试插件与测试平台之间的接口；

步骤202：获取所述智能网关上的测试插件基于所述测试信息对所述智能网关的应用程序编程接口(Application Programming Interface，API)接口进行测试的测试结果。

在一些实施例中，测试接口的承载协议栈从下至上依次包括：互联网协议(Internet Protocol，IP)层、传输控制协议(Transmission Control Protocol，TCP)层、JavaScript对象标记(JavaScript Object Notation，JSON)层和测试管理层，参见图8。

本发明实施例中，利用创新提出的自动化测试平台、植入式测试插件以及新定义测试服务器与测试插件三接口交互架构等技术，自动获取智能网关设备的系统信息，并自适应地生成测试配置参数模板和预期返回值模板，自动实现运行结果参数模板和预期返回值参数模板的比对，最终自动呈现API接口实现完整性的测试结果。相比于“同类技术”优势明显：一是具有高效性，从设备信息分析到返回值对比的整个测试流程，均实现了自动化，面对未来种类更多的网络功能API，也能从容应对；二是具有高可靠性，自动读取智能网关设备信息、自动选择对应测试插件、自动对比返回值，测试过程无需人工，避免了大量参数录入、比对操作中的人工误操作。参见图9，在一些实施方式中，TCP层的TCP报文包括：TCP包头、JSON数据长度字段和JSON数据字段。

参见图3，本发明实施例还提供一种测试方法，应用于测试平台，包括：步骤301、步骤302、步骤303、步骤304、步骤305和步骤306。

步骤301：获取所述智能网关上的测试插件的测试环境信息；

可选地，测试环境信息用于生成配置参数(或者称为配置参数模板)和预期返回值模板。

可选地，测试环境信息或称为设备软件环境信息，例如包括：当前设备OSGi运行环境、获取Java虚拟机、OSGi API版本等信息。

步骤302：向智能网关发送配置参数，配置参数是测试平台根据获取的测试环境信息确定的；

可选地，在步骤302中，通过智能网关的网关功能模块与测试平台的RMS管理模块之间的第一接口(例如TR-069接口)，向智能网关发送用于配置插件服务器的配置参数；和/或，通过智能网关的网关功能模块与测试平台的插件管理模块之间的第二接口(例如JSON接口)，向智能网关发送用于配置测试插件权限的配置参数。

步骤303：通过测试接口与所述智能网关交互，完成测试服务器的注册；

例如，智能网关的测试插件与测试平台的测试管理模块通过测试接口(例如JOAT(JAVA OSGi API Test)接口)交互，完成测试服务器的注册。

步骤304：通过测试接口向所述智能网关发送测试信息，所述测试接口为所述智能网关上的测试插件与测试平台之间的接口；

步骤305：获取所述智能网关上的测试插件基于所述测试信息对所述智能网关的API接口进行测试的测试结果；

示例性地，通过测试接口获取所述智能网关上的测试插件基于所述测试信息对所述智能网关的API接口进行测试的测试结果；或者，通过第一接口(例如TR-069接口)获取所述智能网关上的测试插件基于所述测试信息对所述智能网关的API接口进行测试的测试结果。

以API接口调用测试过程为例：在步骤304中，通过所述智能网关的测试插件与所述测试平台的测试管理模块之间的测试接口，向所述测试插件发送读取要求；在步骤305中，通过智能网关的测试插件与测试平台的测试管理模块之间的测试接口，接收智能网关上的测试插件基于读取要求生成的API接口读取结果。

以API接口读取测试过程为例：在步骤304中，通过所述智能网关的测试插件与所述测试平台的测试管理模块之间的测试接口，向所述测试插件发送测试指令；在步骤305中，通过所述智能网关的网关功能模块与所述测试平台的RMS管理模块之间的第一接口(例如TR-069接口)，接收所述智能网关上的测试插件基于所述测试指令生成的API接口调用结果。

步骤306：将配置参数对应的预期返回值模板与测试插件上报的测试结果进行比对。

在本发明实施例中，可以实现自动获取设备系统信息，并自适应地生成用于测试的配置参数和预期返回值；其次解决需要人工通过插件调用和对返回值做参数比对来验证API的实现完整性的问题。在提升测试效率的同时，实现了对智能网关API接口实现完整性和有效性验证。

在本发明实施例中，将智能网关API完整性验证从通过人工方式逐一检查的低效方式，优化为通过测试插件和测试平台装置自动化处理和配合，完成自动化智能网关API完整性验证。

进一步地，在本发明实施例中，通过测试插件和测试平台的配合自动化完成对智能网关中海量API函数的遍历检查，相比于人工配置和比对，可以实现更高效的检查效率和规避人工操作的风险性。

参见图4，本发明实施例还提供一种测试方法，应用于智能网关，包括：步骤401和步骤402。

步骤401：通过测试接口获取测试信息，所述测试接口为所述智能网关上的测试插件与测试平台之间的接口；

可选地，智能网关也可以为智能家庭网关，在本发明实施例对于智能网关的功能不做限定。

可选地，测试接口也可以称为JOAT(JAVA OSGi API Test)接口。该智能网关与测试平台之间还包括通用的测试通道，例如TR-069接口、JSON接口。

步骤402：根据测试信息，通过所述智能网关上的测试插件对所述智能网关的API接口进行测试，并向所述测试平台上报测试结果。

在一些实施方式中，所述测试接口的承载协议栈从下至上依次包括：IP层、TCP层、JSON层和测试管理层，参见图8。

参见图9，在一些实施方式中，TCP层的TCP报文包括：TCP包头、JSON数据长度字段和JSON数据字段。

本发明实施例中，利用创新提出的自动化测试平台、植入式测试插件以及新定义测试服务器与测试插件三接口交互架构等技术，自动获取智能网关设备的系统信息，并自适应地生成测试配置参数模板和预期返回值模板，自动实现运行结果参数模板和预期返回值参数模板的比对，最终自动呈现API接口实现完整性的测试结果。相比于“同类技术”优势明显：一是具有高效性，从设备信息分析到返回值对比的整个测试流程，均实现了自动化，面对未来种类更多的网络功能API，也能从容应对；二是具有高可靠性，自动读取智能网关设备信息、自动选择对应测试插件、自动对比返回值，测试过程无需人工，避免了大量参数录入、比对操作中的人工误操作。

参见图5，本发明实施例还提供一种测试方法，应用于智能网关，包括：步骤501至步骤504。

步骤501：从测试平台接收配置参数，配置参数是测试平台根据获取的测试环境信息确定的；

可选地，通过智能网关的网关功能模块与所述测试平台的RMS管理模块之间的第一接口(例如TR-069接口)，接收用于配置插件服务器的配置参数；和/或通过智能网关的网关功能模块与测试平台的插件管理模块之间的第二接口(例如JSON接口)，接收用于配置测试插件权限的配置参数。

步骤502：通过测试接口与测试平台交互，完成测试服务器的注册；

例如，智能网关的测试插件与测试平台的测试管理模块通过测试接口(例如JOAT接口)交互，完成测试服务器的注册。

步骤503：通过测试接口获取测试信息，所述测试接口为所述智能网关上的测试插件与测试平台之间的接口；

可选地，测试接口也可以称为JOAT接口。该智能网关与测试平台之间还包括通用的接口，例如TR-069接口、SON接口。

步骤504：根据所述测试信息，通过所述智能网关上的测试插件对所述智能网关的API接口进行测试，并向所述测试平台上报测试结果。

例如，通过测试接口向测试平台上报测试结果；或者，通过第一接口(例如TR-069接口)向测试平台上报测试结果。

以API接口调用测试过程为例：在步骤503中，通过所述智能网关的测试插件与测试平台的测试管理模块之间的测试接口获取读取要求；在步骤504中，通过智能网关的测试插件与测试平台的测试管理模块之间的测试接口上报API接口读取结果。

以API接口读取测试过程为例：在步骤503中，通过智能网关的测试插件与测试平台的测试管理模块之间的测试接口获取测试指令；在步骤504中，通过智能网关的网关功能模块与测试平台的RMS管理模块之间的第一接口上报API接口调用结果。

参见图6，测试系统(或者称为智能网关AIP自动化测试装置)包括：测试平台、智能网关、以及测试平台与智能网关之间交互的接口。

(一)测试平台包括：测试处理模块、RMS管理模块、插件管理模块、测试管理模块。其中，

测试处理模块包括以下一项或多项功能：(1)协调多模块比对测试结果和预期参数；(2)呈现输入界面，以及测试插件执行结果；(3)区分管理员和测试人员两级权限，测试软件与测试服务器MAC，CPU ID等物理信息绑定；(4)记录智能网关的测试结果，并生成测试报告。

RMS管理模块，用于模拟RMS服务器，配置测试配置，例如：插件权限、WAN口参数等；

插件管理模块，用于控制、卸载API测试插件；

测试管理模块，用于管理测试服务器与测试插件的测试消息交互。

(二)智能网关上安装有测试插件(或者称为API测试插件)。该测试插件通过测试平台下发安装、并接受测试指令和控制待测试插件。

(三)测试平台与智能网关之间交互的接口包括：JOAT(JAVA OSGi API Test)接口和传统测试中的通道，例如TR-069接口和JSON接口。其中，JOAT接口用于测试信息的交互，TR-069接口用于RMS管理模块与智能网关功能间的交互，JSON接口用于插件管理模块与待测试API的交互。

参见图7，下面介绍智能网关API自动化测试协议交互流程。

首先，通过测试信息通道在智能网关本地安装测试插件，测试插件可以通过API接口获取当前设备OSGi运行环境、获取Java虚拟机、OSGi API版本等设备软件环境信息。然后，测试插件与硬件测试平台完成交互连接，测试平台根据获取的设备软件环境信息(包括OSGi、Java VM、API版本等)确定API测试配置参数模板，然后，将API测试配置参数模板下发到测试插件，运行测试插件，测试插件运行结束将测试结果上报测试平台，测试平台将配置参数模板对应的结果参数模板与测试插件上报的测试结果做自动比对检查，并将检查结果呈现。

具体步骤如下：

步骤1：测试平台的RMS管理模块与智能网关的网关功能模块交互，完成RMS服务器注册和插件服务器的配置；

步骤2：测试平台的插件管理模块导入测试插件；

步骤3：测试平台的插件管理模块与智能网关的网关功能交互，完成插件管理服务器注册，完成测试插件的下发、安装；

步骤4：测试平台的RMS管理模块与智能网关的网关功能模块交互，完成测试插件权限的配置；

步骤5：测试插件启动；

步骤6：智能网关的测试插件与测试平台的测试管理模块通过JOAT接口交互，完成测试服务器的注册。

步骤7：API接口调用验证过程：

a)测试平台的测试管理模块通过JOAT接口向智能网关的测试插件下发测试指令；

b)智能网关的测试插件向网关功能模块执行该测试指令；

c)智能网关的网关功能模块通过TR-069接口向测试平台的RMS管理模块上传网关信息。

d)测试平台多模块协作比对API接口调用结果。

步骤8：API接口读取验证过程：

a)测试平台的RMS管理模块通过TR-069接口对智能网关的网关功能模块配置；

b)测试平台的测试管理模块通过JOAT接口向智能网关的测试插件下发读取要求；

c)智能网关的测试插件向网关功能模块执行读取操作；

d)智能网关的测试插件向通过JOAT接口向测试平台的测试管理模块上传测试信息；

e)测试平台多模块协作比对API接口读取结果。

步骤9：测试平台的插件管理模块与智能网关的网关功能模块交互，完成测试插件的卸载。

参见图8和图9，JOAT接口的承载协议栈采用TCP，TCP之上采用JSON报文。在TCP报文净荷中，前4个字节为JSON数据长度字段，后面为JSON数据字段。

其中JOAT接口交互报文，以测试产检执行测试功能为例，示意的结构如下：

{

“RPCMethod”:”apitest”,

“ID”:数字,//事务ID标识对应操作序号

“Servicesname:XXXX”//服务类的名称

“Parameters”:[{paratype:string,paravalue:XXXX},...]//测试平台下发的API测试的参数

“returnvalue”:[{paratype:string,paravalue:XXXX}]//定义返回值的类型

}

{

“Result”:0,//方法调研结果，0标识成功，其他表示失败

“ID”:数字,//事务ID标识对应操作序号

“Servicesname:XXXX”//服务类的名称

“Parameters”:[{paratype:string,paravalue:XXXX},...]//API测试的返回参数

“returnvalue”:[{paratype:string,paravalue:XXXX}]//返回值的类型

}

参见图10，本发明实施例还提供一种测试平台，该测试平台1000包括：

第一发送模块1001，用于通过测试接口向所述智能网关发送测试信息，所述测试接口为所述智能网关上的测试插件与测试平台之间的接口；

第一获取模块1002，用于获取所述智能网关上的测试插件基于所述测试信息对所述智能网关的应用程序编程接口API接口进行测试的测试结果。

在一些实施方式中，所述测试接口的承载协议栈从下至上依次包括：IP层、TCP层、JSON层和测试管理层。

在一些实施方式中，所述TCP层的TCP报文包括：TCP包头、JSON数据长度字段和JSON数据字段。

在一些实施方式中，所述测试平台1000还包括：

比对模块，用于将配置参数对应的预期返回值模板与测试插件上报的测试结果进行比对。

在一些实施方式中，所述测试平台1000还包括：

注册模块，用于通过所述测试接口与所述智能网关交互，完成测试服务器的注册。

在一些实施方式中，所述测试平台1000还包括：

第二获取模块，用于获取所述智能网关上的测试插件的测试环境信息；

第二发送模块，用于向所述智能网关发送配置参数，所述配置参数是所述测试平台根据获取的测试环境信息确定的。

在一些实施方式中，第二发送模块进一步用于执行以下一项或多项：

在一些实施方式中，第一获取模块1002进一步用于：通过测试接口获取所述智能网关上的测试插件基于所述测试信息对所述智能网关的API接口进行测试的测试结果；或者，通过第一接口获取所述智能网关上的测试插件基于所述测试信息对所述智能网关的API接口进行测试的测试结果。

在一些实施方式中，所述通过所述测试平台与智能网关之间的测试接口，向所述智能网关发送测试信息，包括：

在一些实施方式中，所述通过测试接口向所述智能网关发送测试信息，所述测试接口为所述智能网关上的测试插件与测试平台之间的接口，包括：

本发明实施例提供的测试平台，可以执行上述实施例，其实现原理和技术效果类似，本实施例此处不再赘述。

参见图6，本发明实施例还提供一种测试平台，包括：测试处理模块、RMS管理模块、插件管理模块和测试管理模块，其中：

所述RMS管理模块，用于模拟RMS服务器，配置测试配置；

所述插件管理模块，用于控制和/或卸载API测试插件；

参见图11，本发明实施例还提供一种智能网关，智能网关1100包括：

第三获取模块1101，用于通过测试接口获取测试信息，所述测试接口为所述智能网关上的测试插件与测试平台之间的接口；

上报模块1102，用于根据所述测试信息，通过所述智能网关上的测试插件对所述智能网关的API接口进行测试，并向所述测试平台上报测试结果。

在一些实施方式中，智能网关1100还包括：

注册模块，用于通过所述测试接口与所述测试平台交互，完成测试服务器的注册。

在一些实施方式中，智能网关1100还包括：

接收模块，用于从所述测试平台接收配置参数，所述配置参数是所述测试平台根据获取的测试环境信息确定的。

在一些实施方式中，从所述测试平台接收测试配置参数，包括以下一项或多项：

在一些实施方式中，上报模块1102进一步用于通过测试接口向所述测试平台上报所述测试结果；或者，通过第一接口向所述测试平台上报所述测试结果。

在一些实施方式中，所述通过测试接口获取测试信息，所述测试接口为所述智能网关上的测试插件与测试平台之间的接口，包括：

所述通过第一接口向所述测试平台上报测试结果，包括：

本发明实施例提供的智能网关，可以执行上述实施例，其实现原理和技术效果类似，本实施例此处不再赘述。

参见图6和图7，本发明实施例还提供一种测试系统，包括：测试平台和智能网关，其中所述测试平台包括：测试处理模块、RMS管理模块、插件管理模块和测试管理模块，所述智能网关包括：测试插件、智能网关功能模块和API接口；

所述RMS管理模块，用于模拟RMS服务器，配置测试配置；

所述插件管理模块，用于控制和/或卸载API测试插件；

结合本发明公开内容所描述的方法或者算法的步骤可以硬件的方式来实现，也可以由在处理器执行软件指令的方式来实现。软件指令可以由相应的软件模块组成，软件模块可以被存放于RAM、闪存、ROM、EPROM、EEPROM、寄存器、硬盘、移动硬盘、只读光盘或者本领域熟知的任何其它形式的存储介质中。一种示例性的存储介质耦合至处理器，从而使处理器能够从该存储介质读取信息，且可向该存储介质写入信息。当然，存储介质也可以是处理器的组成部分。处理器和存储介质可以携带在ASIC中。另外，该ASIC可以携带在核心网接口设备中。当然，处理器和存储介质也可以作为分立组件存在于核心网接口设备中。

本领域技术人员应该可以意识到，在上述一个或多个示例中，本发明所描述的功能可以用硬件、软件、固件或它们的任意组合来实现。当使用软件实现时，可以将这些功能存储在计算机可读介质中或者作为计算机可读介质上的一个或多个指令或代码进行传输。计算机可读介质包括计算机存储介质和通信介质，其中通信介质包括便于从一个地方向另一个地方传送计算机程序的任何介质。存储介质可以是通用或专用计算机能够存取的任何可用介质。

以上所述的具体实施方式，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施方式而已，并不用于限定本发明的保护范围，凡在本发明的技术方案的基础之上，所做的任何修改、等同替换、改进等，均应包括在本发明的保护范围之内。

本领域内的技术人员应明白，本发明实施例可提供为方法、系统、或计算机程序产品。因此，本发明实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本发明实施例是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

显然，本领域的技术人员可以对本发明实施例进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明实施例的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims

1.一种测试方法，应用于测试平台，其特征在于，包括：

获取智能网关上的测试插件的测试环境信息，所述测试环境信息用于生成配置参数和预期返回值模板；

向智能网关发送配置参数，所述配置参数是所述测试平台根据获取的所述测试环境信息确定的；

通过测试接口向智能网关发送测试信息，所述测试接口为所述智能网关上的测试插件与测试平台之间的接口；

获取所述智能网关上的测试插件基于所述测试信息对所述智能网关的应用程序编程接口API接口进行测试的测试结果；

将所述配置参数对应的预期返回值模板与测试插件上报的测试结果进行比对；

获取所述智能网关上的测试插件基于所述测试信息对所述智能网关的API接口进行测试的测试结果，包括：

通过所述智能网关的测试插件与所述测试平台的测试管理模块之间的测试接口获取所述智能网关上的测试插件基于所述测试信息对所述智能网关的API接口进行测试的测试结果；或者，通过第一接口获取所述智能网关上的测试插件基于所述测试信息对所述智能网关的API接口进行测试的测试结果，所述第一接口是所述智能网关的网关功能模块与所述测试平台的权限管理服务RMS管理模块之间的接口；

所述通过测试接口向所述智能网关发送测试信息，所述测试接口为所述智能网关上的测试插件与测试平台之间的接口，包括：

2.根据权利要求1所述的方法，其特征在于，所述测试接口的承载协议栈从下至上依次包括：互联网协议IP层、传输控制协议TCP层、JavaScript对象标记JSON层和测试管理层。

3.根据权利要求2所述的方法，其特征在于，所述TCP层的TCP报文包括：TCP包头、JSON数据长度字段和JSON数据字段。

4.根据权利要求1所述的方法，其特征在于，通过测试接口向所述智能网关发送测试信息之前，所述方法还包括：

5.根据权利要求1所述的方法，其特征在于，向所述智能网关发送配置参数，包括以下一项或多项：

6.根据权利要求1所述的方法，其特征在于，

所述通过所述测试平台与智能网关之间的测试接口，向所述智能网关发送测试信息，包括：

7.一种测试方法，应用于智能网关，其特征在于，包括：

从测试平台接收配置参数，所述配置参数是所述测试平台根据获取的测试环境信息确定的，所述测试环境信息用于生成配置参数和预期返回值模板；

根据所述测试信息，通过所述智能网关上的测试插件对所述智能网关的API接口进行测试，并向所述测试平台上报测试结果，以使所述测试平台将所述配置参数对应的预期返回值模板与测试插件上报的测试结果进行比对；

其中，向所述测试平台上报测试结果，包括：

通过所述智能网关的测试插件与所述测试平台的测试管理模块之间的测试接口向所述测试平台上报所述测试结果；或者，通过第一接口向所述测试平台上报所述测试结果，所述第一接口是所述智能网关的网关功能模块与所述测试平台的权限管理服务RMS管理模块之间的接口；

其中，所述通过测试接口获取测试信息，所述测试接口为所述智能网关上的测试插件与测试平台之间的接口，包括：

通过所述智能网关的测试插件与所述测试平台的测试管理模块之间的测试接口上报API接口读取结果；

所述通过第一接口向所述测试平台上报测试结果，包括：

8.根据权利要求7所述的方法，其特征在于，所述测试接口的承载协议栈从下至上依次包括：IP层、TCP层、JSON层和测试管理层。

9.根据权利要求8所述的方法，其特征在于，所述TCP层的TCP报文包括：TCP包头、JSON数据长度字段和JSON数据字段。

10.根据权利要求7所述的方法，其特征在于，通过测试接口获取测试信息之前，所述方法还包括：

11.根据权利要求7所述的方法，其特征在于，从所述测试平台接收测试配置参数，包括以下一项或多项：

12.一种测试平台，其特征在于，包括：

第二获取模块，用于获取智能网关上的测试插件的测试环境信息，所述测试环境信息用于生成配置参数和预期返回值模板；

第二发送模块，用于向智能网关发送配置参数，所述配置参数是所述测试平台根据获取的所述测试环境信息确定的；

第一发送模块，用于通过测试接口向智能网关发送测试信息，所述测试接口为所述智能网关上的测试插件与测试平台之间的接口；

第一获取模块，用于获取所述智能网关上的测试插件基于所述测试信息对所述智能网关的应用程序编程接口API接口进行测试的测试结果；

比对模块，用于将所述配置参数对应的预期返回值模板与测试插件上报的测试结果进行比对；

其中，获取所述智能网关上的测试插件基于所述测试信息对所述智能网关的API接口进行测试的测试结果，包括：

通过所述智能网关的测试插件与所述测试平台的测试管理模块之间的测试接口获取所述智能网关上的测试插件基于所述测试信息对所述智能网关的API接口进行测试的测试结果；或者，通过第一接口获取所述智能网关上的测试插件基于所述测试信息对所述智能网关的API接口进行测试的测试结果，第一接口是所述智能网关的网关功能模块与所述测试平台的权限管理服务RMS管理模块之间的接口；

13.一种测试平台，其特征在于，包括：测试处理模块、RMS管理模块、插件管理模块和测试管理模块，其中：

所述RMS管理模块，用于模拟RMS服务器，配置测试配置；

所述插件管理模块，用于控制和/或卸载API测试插件；

所述测试管理模块，用于管理测试服务器与测试插件的测试信息交互；

所述测试管理模块，还用于获取智能网关上的测试插件的测试环境信息，所述测试环境信息用于生成配置参数和预期返回值模板；向智能网关发送配置参数，所述配置参数是所述测试平台根据获取的所述测试环境信息确定的；通过测试接口向智能网关发送测试信息，所述测试接口为所述智能网关上的测试插件与测试平台之间的接口，获取所述智能网关上的测试插件基于所述测试信息对所述智能网关的API接口进行测试的测试结果；

14.一种智能网关，其特征在于，包括：

接收模块，用于从测试平台接收配置参数，所述配置参数是所述测试平台根据获取的测试环境信息确定的；

上报模块，用于根据所述测试信息，通过所述智能网关上的测试插件对所述智能网关的API接口进行测试，并向所述测试平台上报测试结果，以使所述测试平台将所述配置参数对应的预期返回值模板与测试插件上报的测试结果进行比对；

其中，向所述测试平台上报测试结果，包括：

所述通过第一接口向所述测试平台上报测试结果，包括：

15.一种测试系统，其特征在于，包括：测试平台和智能网关，其中所述测试平台包括：测试处理模块、RMS管理模块、插件管理模块和测试管理模块，所述智能网关包括：测试插件、智能网关功能模块和API接口；

所述RMS管理模块，用于模拟RMS服务器，配置测试配置；

所述插件管理模块，用于控制和/或卸载API测试插件；