CN113133039A - 一种网关系统的性能测试方法以及装置 - Google Patents

一种网关系统的性能测试方法以及装置 Download PDF

Info

Publication number
CN113133039A
CN113133039A CN202110510104.7A CN202110510104A CN113133039A CN 113133039 A CN113133039 A CN 113133039A CN 202110510104 A CN202110510104 A CN 202110510104A CN 113133039 A CN113133039 A CN 113133039A
Authority
CN
China
Prior art keywords
test
gateway system
performance
data
performance test
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110510104.7A
Other languages
English (en)
Other versions
CN113133039B (zh
Inventor
梁俊杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuhan Wind Gather Intelligence Technology Co ltd
Original Assignee
Wuhan Wind Gather Intelligence Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuhan Wind Gather Intelligence Technology Co ltd filed Critical Wuhan Wind Gather Intelligence Technology Co ltd
Priority to CN202110510104.7A priority Critical patent/CN113133039B/zh
Publication of CN113133039A publication Critical patent/CN113133039A/zh
Application granted granted Critical
Publication of CN113133039B publication Critical patent/CN113133039B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W24/00Supervisory, monitoring or testing arrangements
    • H04W24/04Arrangements for maintaining operational condition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W24/00Supervisory, monitoring or testing arrangements
    • H04W24/06Testing, supervising or monitoring using simulated traffic
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W88/00Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/16Gateway arrangements

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本申请提供了一种网关系统的性能测试方法以及装置,用于对物联网系统中的网关系统进行高精度地性能测试,如此可根据测试结果评估网关系统对所属物联网系统的工作带来的影响。本申请提供的一种系统测试方法,包括:测试设备确定测试对象为网关系统的系统测试任务,系统测试任务用于测试网关系统在预设负荷状态下的系统性能;测试设备通过自身与网关系统之间的通信连接,获取当前连接网关系统的物联网节点设备的设备数据;测试设备以设备数据为基础,获取系统测试任务对应的测试用例;测试设备通过测试用例向网关系统发起性能测试,并生成性能测试结果。

Description

一种网关系统的性能测试方法以及装置
技术领域
本申请涉及物联网领域,具体涉及一种网关系统的性能测试方法以及装置。
背景技术
物联网技术正逐步概念落实到广大用户的日常生活中,物联网技术可应用于智能家居、智能安防、智能交通、智能制造等领域,在家用以及商用上具有广阔的应用前景。
物联网(Internet of Things,IoT),可以理解在凭借着互联网技术,将各种信息传感设备与网络结合起来而形成的一个网络,其具体应用时,可以部署一网关系统,在数据处理中心与边缘的物联网节点设备之间起到一通信途径,物联网节点设备采集的数据可在网关系统汇集并上传至数据处理中心,而数据处理中心则可在数据分析的基础上,通过网关系统向各物联网节点设备发送工作控制指令。
而在现有的相关技术的研究过程中,发明人发现,针对具体应用环境部署了物联网系统后,即使经过了验收,在实际应用过程中,仍偶尔出现数据异常的情况,显然,这影响到了物联网系统的实际应用价值。
发明内容
本申请提供了一种网关系统的性能测试方法以及装置,用于对物联网系统中的网关系统进行高精度地性能测试,如此可根据测试结果评估网关系统对所属物联网系统的工作带来的影响。
第一方面,本申请提供了一种网关系统的性能测试方法,方法包括:
测试设备确定测试对象为网关系统的系统测试任务,系统测试任务用于测试网关系统在预设负荷状态下的系统性能;
测试设备通过自身与网关系统之间的通信连接,获取当前连接网关系统的物联网节点设备的设备数据;
测试设备以设备数据为基础,获取系统测试任务对应的测试用例;
测试设备通过测试用例向网关系统发起性能测试,并生成性能测试结果。
结合本申请第一方面,在本申请第一方面第一种可能的实现方式中,测试设备通过测试用例向网关系统发起性能测试,并生成性能测试结果包括:
测试设备根据测试用例,向网关系统发起预设工作过程中涉及的模拟处理事务;
测试设备根据获取到的网关系统对模拟处理事务的响应结果,生成测试环节的测试结果,作为性能测试结果,测试环节包括条件检查、功率测试、吞吐量测试、规则验证、数据维护,条件检查用于检查网关系统上的不可更改工具包文件的校验和是否等于参考校验,条件检查还用于检查网关系统是否对数据使用三个副本存储以满足数据高可用性要求,功率测试用于测试网关系统在数据读取以及数据查询方面的可操作性,吞吐量测试用于测试网关系统在数据服务、数据查询以及规则验证的处理效率,规则验证用于验证测试参数以及测试结果是否满足性能测试标准要求,数据维护用于数据的维护。
结合本申请第一方面,在本申请第一方面第二种可能的实现方式中,测试设备通过测试用例向网关系统发起性能测试,并生成性能测试结果,包括:
测试设备通过测试用例向网关系统发起第一轮性能测试以及第二轮性能测试;
若通过第一轮性能测试以及第二轮性能测试,验证了测试的可重复性,则测试设备输出第一轮性能测试以及第二轮性能的测试结果,作为性能测试结果。
结合本申请第一方面,在本申请第一方面第三种可能的实现方式中,物联网节点设备为在蓝牙低能耗(Bluetooh Low Energy,BLE)、无线保真(Wireless Fidelity,WIFI)、紫峰(Zigbee)或者传输控制协议/网际协议(Transmission Control Protocol/InternetProtocol,TCP/IP)无线通信连接方式下,与网关系统建立通信连接的物联网节点设备。
结合本申请第一方面,在本申请第一方面第四种可能的实现方式中,测试设备通过测试用例向网关系统发起性能测试,并生成性能测试结果之后,方法还包括:
测试设备将性能测试结果上传至网关系统所属物联网平台,进行存储或者数据分析。
第二方面,本申请提供了一种网关系统的性能测试装置,装置包括:
确定单元,用于确定测试对象为网关系统的系统测试任务,系统测试任务用于测试网关系统在预设负荷状态下的系统性能;
获取单元,用于通过自身与网关系统之间的通信连接,获取当前连接网关系统的物联网节点设备的设备数据;
获取单元,还用于以设备数据为基础,获取系统测试任务对应的测试用例;
测试单元,用于通过测试用例向网关系统发起性能测试,并生成性能测试结果。
结合本申请第二方面,在本申请第二方面第一种可能的实现方式中,测试单元,具体用于:
根据测试用例,向网关系统发起预设工作过程中涉及的模拟处理事务;
根据获取到的网关系统对模拟处理事务的响应结果,生成测试环节的测试结果,作为性能测试结果,测试环节包括条件检查、功率测试、吞吐量测试、规则验证、数据维护,条件检查用于检查网关系统上的不可更改工具包文件的校验和是否等于参考校验,条件检查还用于检查网关系统是否对数据使用三个副本存储以满足数据高可用性要求,功率测试用于测试网关系统在数据读取以及数据查询方面的可操作性,吞吐量测试用于测试网关系统在数据服务、数据查询以及规则验证的处理效率,规则验证用于验证测试参数以及测试结果是否满足性能测试标准要求,数据维护用于数据的维护。
结合本申请第二方面,在本申请第二方面第二种可能的实现方式中,测试单元,具体用于:
通过测试用例向网关系统发起第一轮性能测试以及第二轮性能测试;
若通过第一轮性能测试以及第二轮性能测试,验证了测试的可重复性,则输出第一轮性能测试以及第二轮性能的测试结果,作为性能测试结果。
结合本申请第二方面,在本申请第二方面第三种可能的实现方式中,物联网节点设备为在BLE、WIFI、Zigbee或者TCP/IP无线通信连接方式下,与网关系统建立通信连接的物联网节点设备。
结合本申请第二方面,在本申请第二方面第四种可能的实现方式中,装置还包括上传单元,用于:
测试设备将性能测试结果上传至网关系统所属物联网平台,进行存储或者数据分析。
第三方面,本申请提供了一种测试设备,包括处理器和存储器,存储器中存储有计算机程序,处理器调用存储器中的计算机程序时执行本申请第一方面或者本申请第一方面任一种可能的实现方式提供的方法。
第四方面,本申请提供了一种计算机可读存储介质,计算机可读存储介质存储有多条指令,指令适于处理器进行加载,以执行本申请第一方面或者本申请第一方面任一种可能的实现方式提供的方法。
从以上内容可得出,本申请具有以下的有益效果:
针对于物联网系统中的网关系统,本申请提出了一种测试机制,当确定测试对象为网关系统的系统测试任务后,测试设备通过自身与网关系统之间的通信连接,获取当前连接网关系统的物联网节点设备的设备数据,并以该设备数据为基础,获取系统测试任务对应的测试用例,再通过测试用例向网关系统发起性能测试,并生成性能测试结果,在该测试机制下,通过模拟物联网系统的实际应用环境,对网关系统进行了高精度地性能测试,因此可根据该性能测试结果更好地评估网关系统的性能对于所属物联网系统在实际应用中带来的影响。
其次,在具体的测试过程中,由于测试用例是基于网关系统当前所连接的物联网节点设备的基础上获取的,或者说,该测试用例与物联网系统中当前的物联网节点设备相适配,因此其性能测试具有很高的针对性,从而可更为精确地测试出网关系统的性能,且在该测试机制下,尤其适用于物联网系统在投入实际应用后的实时测试,具有较佳的测试效果。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请网关系统的性能测试方法的一种流程示意图;
图2为申请物联网系统的一种结构示意图;
图3为本申请性能测试的一种流程示意图;
图4为本申请性能测试的一种场景示意图;
图5为本申请网关系统的性能测试装置的一种结构示意图;
图6为本申请测试设备的一种结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或模块的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或模块,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或模块。在本申请中出现的对步骤进行的命名或者编号,并不意味着必须按照命名或者编号所指示的时间/逻辑先后顺序执行方法流程中的步骤,已经命名或者编号的流程步骤可以根据要实现的技术目的变更执行次序,只要能达到相同或者相类似的技术效果即可。
本申请中所出现的模块的划分,是一种逻辑上的划分,实际应用中实现时可以有另外的划分方式,例如多个模块可以结合成或集成在另一个系统中,或一些特征可以忽略,或不执行,另外,所显示的或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,模块之间的间接耦合或通信连接可以是电性或其他类似的形式,本申请中均不作限定。并且,作为分离部件说明的模块或子模块可以是也可以不是物理上的分离,可以是也可以不是物理模块,或者可以分布到多个电路模块中,可以根据实际的需要选择其中的部分或全部模块来实现本申请方案的目的。
在介绍本申请提供的网关系统的性能测试方法之前,首先介绍本申请所涉及的背景内容。
本申请提供的网关系统的性能测试方法、装置以及计算机可读存储介质,可应用于测试设备,用于对物联网系统中的网关系统进行高精度地性能测试,如此可根据测试结果评估网关系统对所属物联网系统的工作带来的影响。
本申请提及的网关系统的性能测试方法,其执行主体可以为网关系统的性能测试装置,或者集成了该网关系统的性能测试装置的服务器、物理主机或者用户设备(UserEquipment,UE)等测试设备。其中,系统测试装置可以采用硬件或者软件的方式实现,UE具体可以为智能手机、平板电脑、笔记本电脑、台式电脑或者个人数字助理(PersonalDigital Assistant,PDA)等终端设备,测试设备可以通过设备集群的方式设置。
下面,开始介绍本申请提供的网关系统的性能测试方法。
首先,参阅图1,图1示出了本申请网关系统的性能测试方法的一种流程示意图,本申请提供的网关系统的性能测试方法,具体可包括如下步骤:
步骤S101,测试设备确定测试对象为网关系统的系统测试任务,系统测试任务用于测试网关系统在预设负荷状态下的系统性能;
步骤S102,测试设备通过自身与网关系统之间的通信连接,获取当前连接网关系统的物联网节点设备的设备数据;
步骤S103,测试设备以设备数据为基础,获取系统测试任务对应的测试用例;
步骤S104,测试设备通过测试用例向网关系统发起性能测试,并生成性能测试结果。
从图1所示实施例可看出,针对于物联网系统中的网关系统,本申请提出了一种测试机制,当确定测试对象为网关系统的系统测试任务后,测试设备通过自身与网关系统之间的通信连接,获取当前连接网关系统的物联网节点设备的设备数据,并以该设备数据为基础,获取系统测试任务对应的测试用例,再通过测试用例向网关系统发起性能测试,并生成性能测试结果,在该测试机制下,通过模拟物联网系统的实际应用环境,对网关系统进行了高精度地性能测试,因此可根据该性能测试结果更好地评估网关系统的性能对于所属物联网系统在实际应用中带来的影响。
其次,在具体的测试过程中,由于测试用例是基于网关系统当前所连接的物联网节点设备的基础上获取的,或者说,该测试用例与物联网系统中当前的物联网节点设备相适配,因此其性能测试具有很高的针对性,从而可更为精确地测试出网关系统的性能,且在该测试机制下,尤其适用于物联网系统在投入实际应用后的实时测试,具有较佳的测试效果。
下面则对上述图1所示实施例的各个步骤及其在实际应用中可能的实现方式进行详细阐述。
在本申请中,测试设备可以为物联网系统外部的设备,或者,也可以为物联网系统内部的设备。进一步的,测试设备还可以不是独立运行的设备,或者说,测试设备还可以通过物联网系统内部的设备上的设备部件的形式进行配置,或者,还可以为物联网系统内部的设备上通过虚拟技术在虚拟环境中虚拟化得到的虚拟设备,其具体设备形式可随时实际需要调整,在此不做具体限定。
网关系统,可以理解为物联网系统中用于提供网关服务的系统,该系统,与测试设备类似,可以为独立运行的设备,也可以为非独立运行的设备,即,可以为设备部件或者虚拟设备。
举例而言,在发起对网关系统的测试时,工作人员可手动配置测试设备与网关系统之间的通信连接,并发起测试对象为网关系统的系统测试任务。或者,工作人员也可以触发测试设备在自身网关系统之间构建通信连接,并发起测试对象为网关系统的系统测试任务。
可以理解的是,对于网关系统的测试,其测试过程是基于测试用例实现的,通过不同的测试用例,模拟实际应用过程中网关系统可接收到的模拟处理事务,网关系统在接收到大量的模拟处理事务并进行处理的过程中,其响应结果即可反应出网关系统在预设负荷状态下的系统性能,可根据该高精度的性能测试结果更好地评估网关系统的性能对于所属物联网系统在实际应用中带来的影响,在一定程度上避免现有技术中即使经过了验收,在实际应用过程中,物联网系统仍偶尔出现数据异常的情况。
在完成测试后,则可将该性能测试结果进行本地保存,以供工作人员查阅或者调取,或者,还可进一步地上传至网关系统所属物联网平台,进行存储或者数据分析。
该物联网平台,可以理解为物联网系统的线上工作平台,上面提及的物联网系统中的数据处理中心可配置在该平台中,物联网系统的运营方以及用户,可通过该平台查阅、调整物联网系统的工作状态。
而在该工作过程中,容易理解,一般可根据物联网系统内各物联网节点设备的具体工作状态参数进行整体的物联网系统的工作状态的调整,如调整个别物联网节点设备的工作状态,或者联动多个物联网节点设备进行工作。
在该情况下,还可具体结合本申请采集到的网关系统的性能测试结果,对网关系统的工作进行评估,以确定网关系统在当前反应的性能测试结果的基础上带来的影响,从而可更为保险的、精确地进行整体的物联网系统的工作状态的调整,不仅可起到个性化数据存储、查阅的功能,更还可以为物联网系统的工作的数据分析提供有力的数据支持。
同时,本申请还认为,网关系统的性能波动对物联网系统的工作带来的影响,还更可能存在于无线通信场景下,该无线通信场景,可以理解为物联网系统中处于边缘位置的物联网节点设备与网关系统之间,相比于传统的设备之间采用的有线通信连接方式,可采取无线通信连接方式。
示例性的,物联网节点设备为在BLE、WIFI、Zigbee或者TCP/IP等无线通信连接方式下,与网关系统建立通信连接的物联网节点设备。
可以理解,相比于传统的有线通信连接方式,无线通信连接方式,可带来更为灵活的应用场景,即,处于边缘位置的物联网节点设备可更为灵活地部署在传输线路难以部署的位置。
而在无线通信连接方式下,无线信号相比于有线信号,在一些情况下更容易受到环境的影响,而该情况对于网关系统的工作而言,意味着不稳定因素,从而也更容易地暴露出网关系统的性能。
因此,本申请针对于网关系统的性能测试,尤其适用于物联网节点设备与网关系统之间采用无线通信连接方式的应用场景。
具体的,还可参考图2示出的申请物联网系统的一种结构示意图进行上述内容的理解。
接着,回到测试本身,本申请针对该测试过程中涉及的测试用例,还提出了一种适配方式,即,根据网关系统在物联网系统中连接的物联网节点设备的设备数据,来获取相适配的测试用例,从而该测试用例与当前网关系统具有较高的适配性,其实现的性能测试具有很高的针对性,从而可更为精确地测试出网关系统的性能。
该适配性的提升,具体可以理解为,将测试用例模拟涉及的应用场景具体模拟为这些物联网节点设备所涉及的应用场景。
如此,相比于采用通用的测试用例,具有更高的还原性,进而取得更加的测试效果。
在适配过程中,可以从预先配置的整体的测试用例集合中提取出有关这些物联网节点设备的测试用例,或者,也可根据这些物联网节点设备实时生成适配的测试用例。
可以理解的是,在这过程中,具体是根据量化出来的物联网节点设备的设备数据的基础上进行适配处理的,该设备数据,可以理解为物联网节点设备的特征数据,例如涉及的通信方式、采集数据类型、采集数据内容、工作指令等。
此外,应当注意到的是,上述的适配处理,具体是与物联网系统中当前的物联网节点设备相关的,换句话说,测试用例是实时与物联网系统相适配的,因此,可更为高精度地测试出当前网关系统的性能,尤其在实际应用中,更适用于物联网系统在投入实际应用后的实时测试,具有较佳的测试效果。
进一步的,在测试过程中,具体还可根据测试要求分为不同的测试环节,以从各方面反应网关系统的性能。
对应的,在本申请中,测试设备通过测试用例向网关系统发起性能测试,并生成性能测试结果,具体可包括如下:
测试设备根据测试用例,向网关系统发起预设工作过程中涉及的模拟处理事务;
测试设备根据获取到的网关系统对模拟处理事务的响应结果,生成测试环节的测试结果,作为性能测试结果,测试环节包括条件检查、功率测试、吞吐量测试、规则验证、数据维护,条件检查用于检查网关系统上的不可更改工具包文件的校验和是否等于参考校验,条件检查还用于检查网关系统是否对数据使用三个副本存储以满足数据高可用性要求,功率测试用于测试网关系统在数据读取以及数据查询方面的可操作性(可以理解为测试是否可以正常进行),吞吐量测试用于测试网关系统在数据服务、数据查询以及规则验证的处理效率,规则验证用于验证测试参数以及测试结果是否满足性能测试标准要求,数据维护用于数据的维护。
此处介绍了性能测试的针对内容,而在测试过程中,本申请还提供一种测试方式,用于更好地进行测试。
参阅图3示出的本申请性能测试的一种流程示意图,本申请提及的性能测试,具体还可包括:
步骤S301,测试设备通过测试用例向网关系统发起第一轮性能测试以及第二轮性能测试;
可以理解,本申请将整体的性能测试分为了两轮,即,包括第一轮性能测试以及第二轮性能测试。
而两轮性能测试的基础,即测试用例,可采用相同的测试用例,也可以是整体的测试用例中拆分得到的不同测试用例。
应当理解,测试用例用于从预设的不同测试内容反映出网关系统的性能,因此,在实际应用中,即使对整体的测试用例进行了拆分,拆分得到的部分的测试用例也能从不同测试方面反应出网关系统的性能,换句话说,由于测试用例的全面(包括质量以及数量),因此理应都能得到极为相近的测试结果。
步骤S302,若通过第一轮性能测试以及第二轮性能测试,验证了测试的可重复性,则测试设备输出第一轮性能测试以及第二轮性能的测试结果,作为性能测试结果。
而当经历了两轮的性能测试后,本申请认为,若其测试结果一致或者极为相近(可配置一相近范围来识别,例如配置一性能测试结果之间的数据相似度的相近范围),则可认为符合了测试的可重复性,在该情况下,可认为本次性能测试为有效测试,并可输出测试结果。
其中,该性能测试结果,可以为第一轮性能测试以及第二轮性能测试的测试结果的集合,也可以将两者涉及的数据取均值进行输出,或者也可从两者择一进行输出等,具体可随实际需要调整,在此不做限定。
进一步的,对应于上述提及的测试环节中的数据维护,不仅可以理解为针对于网关系统正常工作上所涉及到的数据维护,例如去除冗余数据、扫描有害数据、数据更新、数据恢复等工作,该数据维护还可包括次数两轮性能测试之间的缓冲处理,以避免第一轮性能测试的数据对第二轮性能测试带来影响。
例如,该数据维护,具体可以为清理第一轮性能测试产生的数据,删除临时文件,重启数据管理系统后,再执行第二轮性能测试。
具体的,可结合图4示出的本申请性能测试的一种场景示意图进行理解。
以上是本申请提供网关系统的性能测试方法的介绍,为便于更好的实施本申请提供的网关系统的性能测试方法,本申请还提供了网关系统的性能测试装置。
参阅图5,图5为本申请网关系统的性能测试装置的一种结构示意图,在本申请中,网关系统的性能测试装置500具体可包括如下结构:
确定单元501,用于确定测试对象为网关系统的系统测试任务,系统测试任务用于测试网关系统在预设负荷状态下的系统性能;
获取单元502,用于通过自身与网关系统之间的通信连接,获取当前连接网关系统的物联网节点设备的设备数据;
获取单元502,还用于以设备数据为基础,获取系统测试任务对应的测试用例;
测试单元503,用于通过测试用例向网关系统发起性能测试,并生成性能测试结果。
在一种示例性的实现方式中,测试单元503,具体用于:
根据测试用例,向网关系统发起预设工作过程中涉及的模拟处理事务;
根据获取到的网关系统对模拟处理事务的响应结果,生成测试环节的测试结果,作为性能测试结果,测试环节包括条件检查、功率测试、吞吐量测试、规则验证、数据维护,条件检查用于检查网关系统上的不可更改工具包文件的校验和是否等于参考校验,条件检查还用于检查网关系统是否对数据使用三个副本存储以满足数据高可用性要求,功率测试用于测试网关系统在数据读取以及数据查询方面的可操作性,吞吐量测试用于测试网关系统在数据服务、数据查询以及规则验证的处理效率,规则验证用于验证测试参数以及测试结果是否满足性能测试标准要求,数据维护用于数据的维护。
在又一种示例性的实现方式中,测试单元503,具体用于:
通过测试用例向网关系统发起第一轮性能测试以及第二轮性能测试;
若通过第一轮性能测试以及第二轮性能测试,验证了测试的可重复性,则输出第一轮性能测试以及第二轮性能的测试结果,作为性能测试结果。
在又一种示例性的实现方式中,物联网节点设备为在BLE、WIFI、Zigbee或者TCP/IP无线通信连接方式下,与网关系统建立通信连接的物联网节点设备。
在又一种示例性的实现方式中,装置还包括上传单元504,用于:
测试设备将性能测试结果上传至网关系统所属物联网平台,进行存储或者数据分析。
本申请还提供了测试设备,参阅图6,图6示出了本申请测试设备的一种结构示意图,具体的,本申请测试设备可包括处理器601、存储器602以及输入输出设备603,处理器601用于执行存储器602中存储的计算机程序时实现如图1对应实施例中网关系统的性能测试方法的各步骤;或者,处理器601用于执行存储器602中存储的计算机程序时实现如图5对应实施例中各单元的功能,存储器602用于存储处理器601执行上述图1对应实施例中网关系统的性能测试方法所需的计算机程序。
示例性的,计算机程序可以被分割成一个或多个模块/单元,一个或者多个模块/单元被存储在存储器602中,并由处理器601执行,以完成本申请。一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段,该指令段用于描述计算机程序在计算机装置中的执行过程。
测试设备可包括,但不仅限于处理器601、存储器602、输入输出设备603。本领域技术人员可以理解,示意仅仅是测试设备的示例,并不构成对测试设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件,例如测试设备还可以包括网络接入设备、总线等,处理器601、存储器602、输入输出设备603等通过总线相连。
处理器601可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等,处理器是测试设备的控制中心,利用各种接口和线路连接整个设备的各个部分。
存储器602可用于存储计算机程序和/或模块,处理器601通过运行或执行存储在存储器602内的计算机程序和/或模块,以及调用存储在存储器602内的数据,实现计算机装置的各种功能。存储器602可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序等;存储数据区可存储根据测试设备的使用所创建的数据等。此外,存储器可以包括高速随机存取存储器,还可以包括非易失性存储器,例如硬盘、内存、插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(SecureDigital,SD)卡,闪存卡(Flash Card)、至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器601用于执行存储器602中存储的计算机程序时,具体可实现以下功能:
确定测试对象为网关系统的系统测试任务,系统测试任务用于测试网关系统在预设负荷状态下的系统性能;
通过自身与网关系统之间的通信连接,获取当前连接网关系统的物联网节点设备的设备数据;
以设备数据为基础,获取系统测试任务对应的测试用例;
通过测试用例向网关系统发起性能测试,并生成性能测试结果。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的网关系统的性能测试装置、测试设备及其相应单元的具体工作过程,可以参考如图1对应实施例中网关系统的性能测试方法的说明,具体在此不再赘述。
本领域普通技术人员可以理解,上述实施例的各种方法中的全部或部分步骤可以通过指令来完成,或通过指令控制相关的硬件来完成,该指令可以存储于一计算机可读存储介质中,并由处理器进行加载和执行。
为此,本申请提供一种计算机可读存储介质,其中存储有多条指令,该指令能够被处理器进行加载,以执行本申请如图1对应实施例中网关系统的性能测试方法中的步骤,具体操作可参考如图1对应实施例中网关系统的性能测试方法的说明,在此不再赘述。
其中,该计算机可读存储介质可以包括:只读存储器(Read Only Memory,ROM)、随机存取记忆体(Random Access Memory,RAM)、磁盘或光盘等。
由于该计算机可读存储介质中所存储的指令,可以执行本申请如图1对应实施例网关系统的性能测试方法中的步骤,因此,可以实现本申请如图1对应实施例中网关系统的性能测试方法所能实现的有益效果,详见前面的说明,在此不再赘述。
以上对本申请提供的网关系统的性能测试方法、装置、测试设备以及计算机可读存储介质进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。

Claims (10)

1.一种网关系统的性能测试方法,其特征在于,所述方法包括:
测试设备确定测试对象为网关系统的系统测试任务,所述系统测试任务用于测试所述网关系统在预设负荷状态下的系统性能;
所述测试设备通过自身与所述网关系统之间的通信连接,获取当前连接所述网关系统的物联网节点设备的设备数据;
所述测试设备以所述设备数据为基础,获取所述系统测试任务对应的测试用例;
所述测试设备通过所述测试用例向所述网关系统发起性能测试,并生成性能测试结果。
2.根据权利要求1所述的方法,其特征在于,所述测试设备通过所述测试用例向所述网关系统发起性能测试,并生成性能测试结果包括:
所述测试设备根据所述测试用例,向所述网关系统发起预设工作过程中涉及的模拟处理事务;
所述测试设备根据获取到的所述网关系统对所述模拟处理事务的响应结果,生成测试环节的测试结果,作为所述性能测试结果,所述测试环节包括条件检查、功率测试、吞吐量测试、规则验证、数据维护,所述条件检查用于检查所述网关系统上的不可更改工具包文件的校验和是否等于参考校验,所述条件检查还用于检查所述网关系统是否对数据使用三个副本存储以满足数据高可用性要求,所述功率测试用于测试所述网关系统在数据读取以及数据查询方面的可操作性,所述吞吐量测试用于测试所述网关系统在所述数据服务、所述数据查询以及所述规则验证的处理效率,所述规则验证用于验证测试参数以及测试结果是否满足性能测试标准要求,所述数据维护用于数据的维护。
3.根据权利要求1所述的方法,其特征在于,所述测试设备通过所述测试用例向所述网关系统发起性能测试,并生成性能测试结果,包括:
所述测试设备通过所述测试用例向所述网关系统发起第一轮性能测试以及第二轮性能测试;
若通过所述第一轮性能测试以及所述第二轮性能测试,验证了测试的可重复性,则所述测试设备输出所述第一轮性能测试以及所述第二轮性能的测试结果,作为所述性能测试结果。
4.根据权利要求1所述的方法,其特征在于,所述物联网节点设备为在蓝牙低能耗BLE、无线保真WIFI、紫峰Zigbee或者传输控制协议/网际协议TCP/IP无线通信连接方式下,与所述网关系统建立通信连接的物联网节点设备。
5.根据权利要求1所述的方法,其特征在于,所述测试设备通过所述测试用例向所述网关系统发起性能测试,并生成性能测试结果之后,所述方法还包括:
所述测试设备将所述性能测试结果上传至所述网关系统所属物联网平台,进行存储或者数据分析。
6.一种网关系统的性能测试装置,其特征在于,所述装置包括:
确定单元,用于确定测试对象为网关系统的系统测试任务,所述系统测试任务用于测试所述网关系统在预设负荷状态下的系统性能;
获取单元,用于通过自身与所述网关系统之间的通信连接,获取当前连接所述网关系统的物联网节点设备的设备数据;
所述获取单元,还用于以所述设备数据为基础,获取所述系统测试任务对应的测试用例;
测试单元,用于通过所述测试用例向所述网关系统发起性能测试,并生成性能测试结果。
7.根据权利要求6所述的装置,其特征在于,所述测试单元,具体用于:
根据所述测试用例,向所述网关系统发起预设工作过程中涉及的模拟处理事务;
根据获取到的所述网关系统对所述模拟处理事务的响应结果,生成测试环节的测试结果,作为所述性能测试结果,所述测试环节包括条件检查、功率测试、吞吐量测试、规则验证、数据维护,所述条件检查用于检查所述网关系统上的不可更改工具包文件的校验和是否等于参考校验,所述条件检查还用于检查所述网关系统是否对数据使用三个副本存储以满足数据高可用性要求,所述功率测试用于测试所述网关系统在数据读取以及数据查询方面的可操作性,所述吞吐量测试用于测试所述网关系统在所述数据服务、所述数据查询以及所述规则验证的处理效率,所述规则验证用于验证测试参数以及测试结果是否满足性能测试标准要求,所述数据维护用于数据的维护。
8.根据权利要求6所述的装置,其特征在于,所述测试单元,具体用于:
通过所述测试用例向所述网关系统发起第一轮性能测试以及第二轮性能测试;
若通过所述第一轮性能测试以及所述第二轮性能测试,验证了测试的可重复性,则输出所述第一轮性能测试以及所述第二轮性能的测试结果,作为所述性能测试结果。
9.根据权利要求6所述的装置,其特征在于,所述物联网节点设备为在蓝牙低能耗BLE、无线保真WIFI、紫峰Zigbee或者传输控制协议/网际协议TCP/IP无线通信连接方式下,与所述网关系统建立通信连接的物联网节点设备。
10.根据权利要求6所述的装置,其特征在于,所述装置还包括上传单元,用于:
所述测试设备将所述性能测试结果上传至所述网关系统所属物联网平台,进行存储或者数据分析。
CN202110510104.7A 2021-05-11 2021-05-11 一种网关系统的性能测试方法以及装置 Active CN113133039B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110510104.7A CN113133039B (zh) 2021-05-11 2021-05-11 一种网关系统的性能测试方法以及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110510104.7A CN113133039B (zh) 2021-05-11 2021-05-11 一种网关系统的性能测试方法以及装置

Publications (2)

Publication Number Publication Date
CN113133039A true CN113133039A (zh) 2021-07-16
CN113133039B CN113133039B (zh) 2022-07-12

Family

ID=76781334

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110510104.7A Active CN113133039B (zh) 2021-05-11 2021-05-11 一种网关系统的性能测试方法以及装置

Country Status (1)

Country Link
CN (1) CN113133039B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114448852A (zh) * 2021-12-30 2022-05-06 中国电信股份有限公司 一种网关终端的测试方法、装置及存储介质
CN114860537A (zh) * 2022-04-24 2022-08-05 武汉迎风聚智科技有限公司 一种应用于系统测试用的实时系统监控方法以及装置
CN115514668A (zh) * 2022-09-20 2022-12-23 南京瀚联信息技术有限公司 一种边缘网关的应用开发测试装置

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050054002A (ko) * 2003-12-03 2005-06-10 한국전자통신연구원 Megaco 프로토콜 시험 장치 및 방법
CN101145964A (zh) * 2007-07-27 2008-03-19 中兴通讯股份有限公司 一种网管系统自动冒烟测试方法和系统
US20080205285A1 (en) * 2007-02-26 2008-08-28 John Scherer Remote network element testing in a broadband communications network
CN102510346A (zh) * 2011-11-18 2012-06-20 百度在线网络技术(北京)有限公司 网络设备的测试方法、系统及装置
CN102880543A (zh) * 2011-04-18 2013-01-16 埃森哲环球服务有限公司 用于集成测试平台的测试数据供应链管理器
CN109218139A (zh) * 2018-10-23 2019-01-15 京信通信系统(中国)有限公司 网关测试系统
CN109309601A (zh) * 2018-10-18 2019-02-05 北京新能源汽车股份有限公司 一种网关测试系统及方法
CN110086692A (zh) * 2019-05-14 2019-08-02 广州云智易物联网有限公司 一种基于物联网的自动化测试方法、装置及计算机设备
US20200120121A1 (en) * 2017-08-18 2020-04-16 Visa International Service Association Remote configuration of security gateways

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050054002A (ko) * 2003-12-03 2005-06-10 한국전자통신연구원 Megaco 프로토콜 시험 장치 및 방법
US20080205285A1 (en) * 2007-02-26 2008-08-28 John Scherer Remote network element testing in a broadband communications network
CN101145964A (zh) * 2007-07-27 2008-03-19 中兴通讯股份有限公司 一种网管系统自动冒烟测试方法和系统
CN102880543A (zh) * 2011-04-18 2013-01-16 埃森哲环球服务有限公司 用于集成测试平台的测试数据供应链管理器
CN102510346A (zh) * 2011-11-18 2012-06-20 百度在线网络技术(北京)有限公司 网络设备的测试方法、系统及装置
US20200120121A1 (en) * 2017-08-18 2020-04-16 Visa International Service Association Remote configuration of security gateways
CN109309601A (zh) * 2018-10-18 2019-02-05 北京新能源汽车股份有限公司 一种网关测试系统及方法
CN109218139A (zh) * 2018-10-23 2019-01-15 京信通信系统(中国)有限公司 网关测试系统
CN110086692A (zh) * 2019-05-14 2019-08-02 广州云智易物联网有限公司 一种基于物联网的自动化测试方法、装置及计算机设备

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114448852A (zh) * 2021-12-30 2022-05-06 中国电信股份有限公司 一种网关终端的测试方法、装置及存储介质
CN114860537A (zh) * 2022-04-24 2022-08-05 武汉迎风聚智科技有限公司 一种应用于系统测试用的实时系统监控方法以及装置
CN115514668A (zh) * 2022-09-20 2022-12-23 南京瀚联信息技术有限公司 一种边缘网关的应用开发测试装置

Also Published As

Publication number Publication date
CN113133039B (zh) 2022-07-12

Similar Documents

Publication Publication Date Title
CN113133039B (zh) 一种网关系统的性能测试方法以及装置
US8874736B2 (en) Event extractor
CN109729131A (zh) 一种应用请求的处理方法、装置和路由器
JP2011155660A (ja) 分析装置、製品受容試験方法および製品受容試験装置
US20220052866A1 (en) Smart home system control method and apparatus, electronic device
CN106681903B (zh) 生成测试用例的方法及装置
CN107070752B (zh) 一种长连接容量的测试方法及测试系统
CN109683997B (zh) 通过沙箱访问应用程序接口的方法、沙箱及沙箱设备
CN108875035B (zh) 分布式文件系统的数据存储方法及相关设备
CN103595769B (zh) Sdk实现文件上传的方法与装置
CN112445700A (zh) 测试方法和装置
CN110913362B (zh) 通过客户端与测试设备来实现无线信号测试的方法和装置
US11570274B1 (en) Systems for exchange of data between remote devices
CN115129574A (zh) 一种代码测试方法和装置
CN114390574B (zh) 无线网络吞吐量测试方法、装置和计算机可读存储介质
CN110704307A (zh) 应用产品的测试方法、装置、用户设备及计算机存储介质
CN115021831A (zh) 弱网测试方法、装置、系统、设备及存储介质
CN112751716B (zh) 一种控制文件服务器响应的测试方法、系统以及电子设备
CN114466000A (zh) 一种cdn网关回源方法及装置
CN113127369A (zh) 一种执行脚本的处理方法以及装置
CN113904847A (zh) 物联网卡的云平台绑定方法、系统、设备及介质
CN112929914A (zh) 网络链路模拟辅助测试的系统及方法
CN111078477A (zh) 接口测试的方法、装置、存储介质和电子设备
CN115174461B (zh) 一种基于网络请求的系统测试方法以及装置
CN103686774A (zh) 一种一控多的无线网络测试方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant