CN103294599B - 一种基于云的嵌入式软件交叉测试方法 - Google Patents

一种基于云的嵌入式软件交叉测试方法 Download PDF

Info

Publication number
CN103294599B
CN103294599B CN201310261929.5A CN201310261929A CN103294599B CN 103294599 B CN103294599 B CN 103294599B CN 201310261929 A CN201310261929 A CN 201310261929A CN 103294599 B CN103294599 B CN 103294599B
Authority
CN
China
Prior art keywords
cloud
test
tested
software
equipment under
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201310261929.5A
Other languages
English (en)
Other versions
CN103294599A (zh
Inventor
李必信
刘力
王璐璐
陶传奇
李超
俞析蒙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Southeast University
Original Assignee
Southeast University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Southeast University filed Critical Southeast University
Priority to CN201310261929.5A priority Critical patent/CN103294599B/zh
Publication of CN103294599A publication Critical patent/CN103294599A/zh
Application granted granted Critical
Publication of CN103294599B publication Critical patent/CN103294599B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Debugging And Monitoring (AREA)

Abstract

本发明公开了一种基于云的嵌入式软件交叉测试方法,主要用于处理嵌入式软件在云平台下进行交叉测试的问题,本发明通过将测试云与被测云剥离,形成逻辑和物理上分离的测试环境,有利于实现便捷的远程调试,可以解决开发人员分布在不同地理区域的团队难以协作的问题,另外可以减少重复基础设施建设的投资。本发明将被测设备统一管理和调度,方便了测试环境的部署和维护。通过调度被测设备的任务分布,极大提高单个设备的利用率。本发明方法运行于云环境下,具备了云应用多并发、资源可扩展、用户随买随用、按用量付费的优点。

Description

一种基于云的嵌入式软件交叉测试方法
技术领域
本发明属于软件测试领域,涉及一种基于云平台的嵌入式软件交叉测试方法。
背景技术
当前,云计算技术是学术界和商界讨论的热点话题。云计算是计算机资源(硬件和软件)通过网络(典型的是因特网)以服务形式提供的使用方式。它是一种通过互联网可以广泛的、方便的、按需的访问,可配置的共享资源池的(例如网络、服务器、存储设施、应用程序和服务等)的模式,这种模式能够被快速的提供和释放,只需要少量的管理工作或者与服务供应商进行很少的交互。云计算技术使得计算,数据存储,软件等资源,可以以面向需求的方式来提供;这意味着,计算机软硬件资源能够像现有的水厂、电厂那样按需提供;云计算技术的发展将会改变互联网的技术基础,甚至改变现行的商业运作模式。
为了利用云计算降低传统软件测试高昂的费用应用云的基础设施来进行软件测试就是云测试技术。云测试技术能够借助于云中的计算机软硬件资源,减少部署甚至不部署本地测试资源,直接使用软件测试云中的测试资源,从而缩短软件测试时间,降低软件测试的费用,提高软件开发效率;可以利用第三方提供的面向需求的云测试服务,进行大规模、有效的、实时在线测试和验证所开发的软件系统;易于利用云平台的可扩展性来测试和评估软件系统的负载性能和可扩展性。
发明内容
技术问题:本发明提供一种用于对嵌入式软件乃至一般软件进行云环境下交叉测试的基于云的嵌入式软件交叉测试方法。
技术方案:本发明的方法利用虚拟化资源管理技术,将一到多个被测系统集中管理,并向上提供设施级服务。通过层叠式的服务调用,最终实现交叉测试的云服务。
本发明的基于云的嵌入式软件交叉测试方法,包括如下步骤:
1)在测试云上利用交叉编译器编译输入的源码,得到能在被测设备上运行的二进制软件包,测试云将二进制软件包发送给被测云;
2)被测云管理器将被测软件部署到被测设备节点上,并根据被测设备节点的数量和负载情况按如下方法分配测试用例:
a)对比被测设备节点数量N和测试用例数量M,如果N<M,则进入步骤b),否则直接进入步骤c);
b)分配N个测试用例到N个被测设备节点上,待测试用例运行完成后,令M=M﹣N后返回步骤a);
c)将测试用例分配到对应节点上;
3)被测设备运行测试用例,并将运行结果反馈给被测云管理器,被测云管理器将所有测试用例的运行结果收集后反馈给测试云;
4)测试云基于接收的所有测试用例的运行结果,统计每个测试用例的运行正确率,然后将测试用例的运行正确率与用户指定的该测试用例运行正确率阈值进行对比,如果所有测试用例的运行正确率均大于运行正确率阈值,则判定被测软件能在被测云上正确运行,否则判定被测软件不能在被测云上正确运行。
本发明方法,主要用于对嵌入式软件乃至一般软件进行云环境下的交叉测试。
有益效果:本发明与现有技术相比,具有以下优点:
1)非交叉测试的云测试如果要对非构建在该云环境上的软件系统进行测试,必须在云上运行一个仿真程序来模拟被测系统软件运行环境。这种模拟的有效性很大程度上取决于仿真程序设计的质量和预先考虑到被测软件可能存在的问题。然而,在真实的被测系统上,被测软件遇到的问题远远不是仿真程序设计者能够预先考虑到的,这样的软件测试必然有其疏漏。因此,云交叉测试作为对非云环境运行的软件系统测试手段是非常有必要的。
2)云交叉测试通过将测试云与被测云剥离,形成逻辑和物理上分离的测试环境,有利于实现便捷的远程调试,可以解决开发人员分布在不同地理区域的团队难以协作的问题,另外可以减少重复基础设施建设的投资。通过远程调试,还可以实现对交通不便、急需现场维护的设备进行与现场调试效果一致的测试和调试工作。
3)云交叉测试技术将被测设备统一管理和调度,方便了测试环境的部署和维护。通过调度被测设备的任务分布,极大提高单个设备的利用率。同时,云交叉测试技术允许动态增减被测设备数量,而在测试过程中不受到物理设备的变动影响,赋予测试人员极大的灵活性:可以通过增加设备减少测试时间,也可以减少设备以降低运行成本。
综上所述,本发明与现有非交叉测试的云测试技术或一般交叉测试技术相比,具有以下优点:
与一般的云测试方法相比,本发明可以将测试任务部署到真实设备上运行,而一般云环境下静态测试、模拟测试是对软件源代码的检查,后者不能预见到软件在实际运行环境中因硬件行为导致的错误,而前者将得到真实运行环境下的测试结果。因此在对嵌入式软件测试的有效性和全面性上比传统云测试方法好。
同时本发明的方法运行于云环境下,具备了云应用多并发、资源可扩展、用户随买随用、按用量付费的优点。而传统非云的交叉测试方法因受其运行的现实环境所限,不能做到计算资源的动态增减,并因传统计算环境不能做到自动化配置和管理,无论在测试效率还是测试环境的便利性上都不及本方法。
利用云进行嵌入式软件的交叉测试可以提供比静态测试、模拟测试更逼近软件在嵌入式设备上真实运行的测试结果,同时具备一般云测试的优点。利用云进行嵌入式软件的交叉测试研究在国际上尚属空白。
附图说明
图1云交叉测试流程图。
图2云交叉测试典型应用示例图。
具体实施方式
下面通过实施例对本发明做进一步具体说明。
1.云交叉测试方法需要运行在通过以下方式构建的云交叉测试平台上:
利用通用方法搭建一个云作为测试云,使得用户可以利用测试云进行软件源码编译操作以及向远程网络主机收发数据和命令。
将多台被测试设备与一台作为被测云管理器的高性能主机通过以太网或者其他通信设施相连构成被测云,使得该主机可以与被测设备以及测试云交换数据和命令。
2.以测试操作系统内核软件为例,通过以下步骤利用云交叉测试平台进行云交叉测试
1)用户将内核以及对应测试用例的源码,通过用户界面提交到测试云,测试云利用符合被测设备硬件要求的交叉编译器编译输入的源码,得到能在被测设备上运行的内核及对应测试用例的二进制软件包。随后,测试云将编译生成的二进制软件包以及用户提供的其他运行环境参数发送给被测云,完成云交叉测试前的准备工作;
2)被测云管理器收到内核和测试用例的软件包以及运行参数后,将内核软件包及运行参数文件安装到运行参数中指定数目的可用被测设备节点上,并根据被测设备节点的数量和负载情况按如下方法分配测试用例:
a)对比被测设备节点数量N和测试用例数量M,如果N<M,则进入步骤b),否则直接进入步骤c);
b)分配N个测试用例到N个被测设备节点上,待测试用例运行完成后,令M=M﹣N后返回步骤a);
c)将测试用例分配到对应节点上;
3)被测云管理器重启每个安装好内核软件的被测设备,使之加载和运行待测的内核软件。被测设备内核软件启动完成后,将按照运行参数文件中指定的加载和运行由被测云管理器分配的测试用例,此时被测云管理器开始对该测试用例进行运行计时。每个测试用例运行完成后,将结果反馈给被测云管理器。若某测试用例在用户提供的运行参数指定时间内未完成,被测云管理器将判定该用例运行结果为失败,并将其失败原因标记为超时。被测云管理器将所有测试用例的运行结果收集完毕后反馈给测试云;
4)测试云基于接收的所有测试用例的运行结果,统计每个测试用例的运行正确率,然后将测试用例的运行正确率与用户指定的该测试用例运行正确率阈值进行对比,如果所有测试用例的运行正确率均大于运行正确率阈值,则判定被测软件能在被测云上正确运行,否则判定被测软件不能在被测云上正确运行。最终,用户可以从测试云得到该测试结果,并得到所有测试用例的运行结果,运行所用时间,以及失败的测试用例原因,形成测试报告。

Claims (1)

1.一种基于云的嵌入式软件交叉测试方法,其特征在于,该方法包括如下步骤:
1)在测试云上利用交叉编译器编译输入的源码,得到能在被测设备上运行的二进制软件包,测试云将所述二进制软件包发送给被测云;
2)被测云管理器将被测软件部署到被测设备节点上,并根据被测设备节点的数量和负载情况按如下方法分配测试用例:
a)对比被测设备节点数量N和测试用例数量M,如果N<M,则进入步骤b),否则直接进入步骤c);
b)分配N个测试用例到N个被测设备节点上,待N个测试用例运行完成后,令M=M﹣N,即把M﹣N的值重新赋值给M后返回步骤a);
c)将测试用例分配到对应节点上;
3)被测设备运行测试用例,并将运行结果反馈给被测云管理器,被测云管理器将所有测试用例的运行结果收集后反馈给测试云;
4)测试云基于接收的所有测试用例的运行结果,统计每个测试用例的运行正确率,然后将测试用例的运行正确率与用户指定的该测试用例运行正确率阈值进行对比,如果所有测试用例的运行正确率均大于运行正确率阈值,则判定被测软件能在被测云上正确运行,否则判定被测软件不能在被测云上正确运行。
CN201310261929.5A 2013-06-27 2013-06-27 一种基于云的嵌入式软件交叉测试方法 Expired - Fee Related CN103294599B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310261929.5A CN103294599B (zh) 2013-06-27 2013-06-27 一种基于云的嵌入式软件交叉测试方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310261929.5A CN103294599B (zh) 2013-06-27 2013-06-27 一种基于云的嵌入式软件交叉测试方法

Publications (2)

Publication Number Publication Date
CN103294599A CN103294599A (zh) 2013-09-11
CN103294599B true CN103294599B (zh) 2015-11-04

Family

ID=49095517

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310261929.5A Expired - Fee Related CN103294599B (zh) 2013-06-27 2013-06-27 一种基于云的嵌入式软件交叉测试方法

Country Status (1)

Country Link
CN (1) CN103294599B (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104461856B (zh) * 2013-09-22 2018-04-20 阿里巴巴集团控股有限公司 基于云计算平台的性能测试方法、装置及系统
CN104834593A (zh) * 2014-12-23 2015-08-12 赵明 一种针对软件众测应用的企业数字化软件测试云系统及方法
CN106851708A (zh) * 2015-12-04 2017-06-13 大唐移动通信设备有限公司 一种lte基站的多用户测试方法及测试系统
CN105607998B (zh) * 2015-12-11 2018-10-12 成都新兴信息技术研究所 一种通过在线方式进行嵌入软件调试的系统与方法
CN106844193B (zh) * 2016-12-17 2019-10-11 福建瑞之付微电子有限公司 一种嵌入式模块交叉测试的系统化设计方法
CN108924001A (zh) * 2018-06-26 2018-11-30 郑州云海信息技术有限公司 一种测试方法和装置
CN109086196B (zh) * 2018-08-16 2021-10-22 郑州云海信息技术有限公司 一种机房设备测试用例管理系统
CN110609750A (zh) * 2019-08-01 2019-12-24 厦门亿联网络技术股份有限公司 一种自动分析嵌入式设备死锁的方法及系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5651111A (en) * 1994-06-07 1997-07-22 Digital Equipment Corporation Method and apparatus for producing a software test system using complementary code to resolve external dependencies
CN102981951A (zh) * 2012-11-01 2013-03-20 珠海金山网络游戏科技有限公司 云测试开发平台及云测试开发方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5651111A (en) * 1994-06-07 1997-07-22 Digital Equipment Corporation Method and apparatus for producing a software test system using complementary code to resolve external dependencies
CN102981951A (zh) * 2012-11-01 2013-03-20 珠海金山网络游戏科技有限公司 云测试开发平台及云测试开发方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Cloud Testing Tools;Xiaoying Bai等;《Proceedings of The 6th IEEE International Symposium on Service Oriented System Engineering(SOSE 2011)》;20111214;第1-12页 *
基于云计算的并行测试方案设计与实现;黄晓玲等;《计算机工程》;20121231;第38卷(第24期);第27-31页 *

Also Published As

Publication number Publication date
CN103294599A (zh) 2013-09-11

Similar Documents

Publication Publication Date Title
CN103294599B (zh) 一种基于云的嵌入式软件交叉测试方法
CN105049435A (zh) 面向异构无线传感器网络的协议一致性的云测试框架
CN105301419A (zh) 一种基于云技术的继电保护装置自动测试系统
US20230153158A1 (en) Method, apparatus, system, and storage medium for performing eda task
CN105446164A (zh) 一种半实物仿真测试系统
CN105468817A (zh) 一种多模型实时仿真系统
CN110705191B (zh) 一种多形态模拟仿真验证环境的构建方法
CN116991558A (zh) 算力资源的调度方法及多架构集群、装置、存储介质
CN103631988A (zh) 面向电力系统仿真的多用户仿真数据管理平台
Wiesner et al. Software‐in‐the‐loop simulation for developing and testing carbon‐aware applications
CN105488288A (zh) 一种ns3并行模拟仿真系统
CN109213665B (zh) 一种分布式并发加速测试技术与平台的构建方法
CN114610440A (zh) 模拟机系统的运行环境构建方法及系统
CN103399813B (zh) 一种基于Trace信息的嵌入式系统离线跟踪分析方法
US20230188432A1 (en) Method and Apparatus for Determining Resource Configuration of Cloud Service System
CN103902310A (zh) 虚拟机启动排程系统及方法
CN110868330B (zh) 云平台可划分cpu资源的评估方法、装置及评估系统
CN106033211B (zh) 一种控制涂胶机台胶头清洗的方法及装置
CN115757121A (zh) 基于测试环境搭建的测试方法、装置、设备及存储介质
CN109065111A (zh) 一种基于docker的云平台健康检查系统及方法
CN109302723A (zh) 一种基于互联网的多节点实时无线电监测控制系统及控制方法
US20180005249A1 (en) Optimize a resource allocation plan corresponding to a legacy software product sustenance
CN104052624A (zh) 一种配置管理方法及装置
Rayan et al. Resource Prediction for Big Data Processing in a Cloud Data Center: A Machine Learning Approach: A Machine Learning Approach
CN110311977A (zh) 一种基于云计算的形式验证平台及其方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20151104

Termination date: 20200627