CN101872324A - 一种系统测试方法及装置 - Google Patents
一种系统测试方法及装置 Download PDFInfo
- Publication number
- CN101872324A CN101872324A CN201010217707A CN201010217707A CN101872324A CN 101872324 A CN101872324 A CN 101872324A CN 201010217707 A CN201010217707 A CN 201010217707A CN 201010217707 A CN201010217707 A CN 201010217707A CN 101872324 A CN101872324 A CN 101872324A
- Authority
- CN
- China
- Prior art keywords
- back door
- handling procedure
- interface
- level
- testing software
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012360 testing method Methods 0.000 title claims abstract description 65
- 238000000034 method Methods 0.000 claims abstract description 86
- 238000001514 detection method Methods 0.000 claims description 7
- 238000012986 modification Methods 0.000 claims description 7
- 230000004048 modification Effects 0.000 claims description 7
- 230000008676 import Effects 0.000 claims description 5
- 238000004088 simulation Methods 0.000 claims description 5
- 230000006870 function Effects 0.000 description 21
- 238000010586 diagram Methods 0.000 description 5
- 238000013461 design Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 108010022579 ATP dependent 26S protease Proteins 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 230000002950 deficient Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 230000009897 systematic effect Effects 0.000 description 1
- 238000010998 test method Methods 0.000 description 1
Images
Landscapes
- Debugging And Monitoring (AREA)
Abstract
本发明公开了一种系统测试方法，用于提高测试效率。所述方法包括：通过运行测试软件调用后门接口，其中该测试软件的层次和结构与被测系统的层次和结构一一对应；通过后门接口调用后门处理程序；其中一个后门接口对应一个层次中的一个结构；通过执行后门处理程序对系统中该后门接口对应的层次和结构的测试对象进行测试。本发明还公开了用于实现所述方法的装置。
Description
技术领域
本发明涉及芯片验证及嵌入式软件开发领域，特别是涉及系统测试方法及装置。
背景技术
系统测试是保证系统质量和可靠性的关键步骤，是对系统开发过程中的系统分析系统设计和实施的检查。测试的目的就是希望能以最高的效率发现潜在的各种错误和缺陷。应根据开发各阶段的需求、设计等文档或程序的内部结构精心设计测试软件，并通过运行测试软件来发现错误。信息系统测试包括软件测试、硬件测试和网络测试。
在对硬件进行测试时，通常用仿真软件来模拟硬件的运行，运行测试软件对模拟的硬件进行测试。现有技术中测试过程主要包括，参见图1所示：
步骤101：针对硬件的结构和功能设计测试软件；
步骤102：确定输入数据和预期结果；
步骤103：运行测试软件；
步骤104：输出测试结果；
步骤105：将测试结果与预期结果比较，如果一致，则测试成功，如果不一致，则说明测试软件出错。
当测试软件出错或需要修改硬件功能或结构时，均需要重新设计或大量修改测试软件。给测试工作带来不便，影响测试效率。
发明内容
本发明实施例提供一种系统测试方法及装置，用于提高测试效率。
一种系统测试方法，包括以下步骤：
通过运行测试软件调用后门接口，其中该测试软件的层次和结构与被测系统的层次和结构一一对应；
通过后门接口调用后门处理程序；其中一个后门接口对应一个层次中的一个结构；
通过执行后门处理程序对系统中该后门接口对应的层次和结构的测试对象进行测试。
一种用于系统测试的装置，包括：
软件模块，用于通过运行测试软件调用后门接口，其中该测试软件的层次和结构与被测系统的层次和结构一一对应；
后门接口模块，用于通过后门接口调用后门处理程序；其中一个后门接口对应一个层次中的一个结构；
后门程序模块，用于通过执行后门处理程序对系统中该后门接口对应的层次和结构的测试对象进行测试。
本发明实施例对测试软件进行了改进，使测试软件包括层次和结构，针对层次和结构调用相应的后门接口。以及将可扩展的功能接口及功能加入测试软件中，形成后门处理程序。在修改被测硬件或软件的结构时，只需更新后门接口；在模拟的测试功能未在测试对象上正确实现或修改被测硬件或软件的功能后，只需更新后门处理程序；两种情况均不需要修改测试软件，提高了测试效率。
附图说明
图1为现有技术中测试方法的流程图；
图2为本发明实施例中层次和结构的示意图；
图3为本发明实施例中系统测试的主要方法流程图；
图4为本发明实施例中测试前的预处理方法的流程图；
图5为本发明实施例中系统测试的详细方法流程图；
图6为本发明实施例中装置的主要结构图；
图7为本发明实施例中装置的详细结构图。
具体实施方式
本发明实施例对测试软件进行了改进，根据被测系统的层次和结构，对测试软件划分了层次和结构，针对测试软件的层次和结构调用相应的后门接口。以及将可扩展的功能接口及功能加入测试软件中，形成后门处理程序。在修改被测硬件或软件的结构时，只需更新后门接口的位置；在模拟的测试功能未在测试对象上正确实现或修改被测硬件或软件的功能后，只需更新后门处理程序；两种情况均不需要修改测试软件，提高了测试效率。
本实施例中层次是从纵向对系统的划分，结构是横向对系统的划分。参见图2所示，系统层次从上到下包括应用层、应用接口层、操作系统层、硬件接口层、CPU系统层、寄存器-总线层和硬件层。应用层中每个功能的应用模块(application)(如音频播放、视频播放和互联网)都对应一个结构。应用接口层的结构包括应用提供软件(application support software)结构、协议堆栈(protocol stacks)结构和软件库(software library)。操作系统层包括实时操作系统(RTOS)。硬件接口层包括驱动(drivers)、硬件改写层(hardware adaptation layer)和板提供包(board support package)。CPU系统层包括CPU和存储子系统(memory sub system)。寄存器-总线层包括寄存器接口(register interface)和总线结构(bus structure)。硬件层包括硬件函数(hardware function)和物理信道(physical channels)。测试软件的层次和结构与系统的层次和结构一一对应，也可参见图2所示。
参见图3，本实施例中系统测试的主要方法流程如下：
步骤301：通过运行测试软件调用后门接口。其中该测试软件包括多个层次和结构。
步骤302：通过后门接口调用后门处理程序。其中一个后门接口对应一个层次中的一个结构。
步骤303：通过执行后门处理程序对系统中该后门接口对应的层次和结构的测试对象进行测试。
以上流程是对系统测试过程的概述，下面通过实施例对每个测试环节进行详细介绍。
参见图4，本实施例中测试前的预处理方法包括：
步骤401：根据系统的层次和结构生成测试软件。
步骤402：检查测试软件的层次和结构是否正确，即测试软件的层次和结构是否与系统的层次和结构一致，若不一致，则继续步骤403，否则继续步骤404。
步骤403：确定测试软件的层次和结构出错，需要重新生成测试软件，继续步骤401。
步骤404：针对测试软件中的层次和结构生成后门接口。可以针对需测试的测试对象设置后门接口，或者在所有可能的层次和结构设置后门接口。继续步骤405
步骤405：检查后门接口的位置是否正确，若是，则继续步骤406，否则继续步骤404。
步骤406：针对测试对象和该测试对象对应的后门接口，生成后门处理程序。
参见图5，本实施例中系统测试的详细方法流程如下：
步骤501：将测试软件及测试软件中后门接口对应的后门处理程序合并导入程序存储单元。可以预先针对需测试的测试对象设置后门接口，或者在所有可能的层次和结构设置后门接口，然后针对需测试的测试对象调用对应的后门接口。
步骤502：判断合并导入是否失败，若是，则继续步骤503，否则继续步骤504。在测试软件及后门处理程序编译后，先将测试软件导入程序存储单元，在后门接口指定的程序存储单元中的位置，导入后门处理程序，但指定的位置可能不满足需导入的后门处理程序的大小，导致合并导入失败。
步骤503：确定后门处理程序出错。可针对测试对象和该测试对象对应的后门接口，重新生成后门处理程序，相当于执行步骤406。
步骤504：运行测试软件。
以下是运行测试软件的过程中实现的流程。
步骤505：通过运行测试软件调用后门接口。
步骤506：通过后门接口调用后门处理程序。
步骤507：判断是否能够运行后门处理程序，若不能，则继续步骤503，否则继续步骤508。判断是否能够运行后门处理程序，即判断测试软件及测试软件中后门接口对应的后门处理程序对内存的使用是否与欲分配的内存空间有冲突。内存的使用包括内存的占用和申请。内存的使用与欲分配的内存空间有冲突存在多种情况，如申请的内存超出欲分配的内存空间的大小，或者欲分配的内存空间为已占用的内存等。内存的使用是由后门处理程序控制的，当内存的使用时与欲分配的内存空间有冲突，可确定后门处理程序出错。
步骤508：通过执行后门处理程序模拟系统中测试对象的功能，并输出实际测试结果。其中该测试对象位于该后门接口对应的层次和结构中。即，通过执行后门处理程序对系统中该后门接口对应的层次和结构中修改或增加的测试对象进行测试
步骤509：将实际测试结果与预期测试结果进行比对，若比对结果一致，则继续步骤510，否则继续步骤511。
步骤510：确定测试成功。
步骤511：确定测试功能未在测试对象上正确实现。
通过以上描述了解了系统测试的实现过程，该过程可由装置实现，下面对该装置的内部结构和功能进行介绍。
参见图6，本实施例中用于系统测试的装置包括：软件模块601、后门接口模块602和后门程序模块603。该装置可具体为计算机等设备。
软件模块601用于通过运行测试软件调用后门接口。其中该测试软件包括多个层次和结构。
后门接口模块602用于通过后门接口调用后门处理程序。其中一个后门接口对应一个层次中的一个结构。
后门程序模块603用于通过执行后门处理程序对系统中该后门接口对应的层次和结构的测试对象进行测试。具体的，后门程序模块603通过执行后门处理程序模拟系统中测试对象的功能，并输出实际测试结果其中该测试对象位于该后门接口对应的层次和结构中，将实际测试结果与预期测试结果进行比对，若比对结果一致，则确定测试成功，否则确定测试功能未在测试对象上正确实现。
所述装置还包括导入模块604，参见图7所示。导入模块604用于将测试软件及测试软件中后门接口对应的后门处理程序合并导入程序存储单元。其中程序存储单元位于所述装置内。导入模块604当合并导入程序储存单元失败时确定后门处理程序出错；当合并导入程序储存单元成功时触发测试软件的运行。
所述装置还包括：运行检测模块605用于判断是否能够运行后门处理程序，若不能运行，则确定后门处理程序出错。后门程序模块603在判断能运行后门处理程序时，通过执行后门处理程序对系统中该后门接口对应的层次和结构中修改或增加的测试对象进行测试。
所述装置中的各模块均可由软件结合硬件平台实现，以及图4所示的流程也可由软硬平台实现。用于实现本发明实施例的软件可以存储于软盘、硬盘、光盘和闪存等存储介质。
本发明实施例对测试软件进行了改进，使测试软件包括层次和结构，针对层次和结构调用相应的后门接口。以及将可扩展的功能接口及功能加入测试软件中，形成后门处理程序。在修改被测硬件或软件的结构时，只需更新后门接口；在模拟的测试功能未在测试对象上正确实现或修改被测硬件或软件的功能后，只需更新后门处理程序；两种情况均不需要修改测试软件，提高了测试效率。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。
Claims (10)
1.一种系统测试方法，其特征在于，包括以下步骤：
通过运行测试软件调用后门接口，其中该测试软件的层次和结构与被测系统的层次和结构一一对应；
通过后门接口调用后门处理程序，其中一个后门接口对应一个层次中的一个结构；
通过执行后门处理程序对系统中该后门接口对应的测试对象进行测试。
2.如权利要求1所述的方法，其特征在于，在运行测试软件之前，所述方法还包括步骤：将测试软件及测试软件中后门接口对应的后门处理程序合并导入程序存储单元。
3.如权利要求2所述的方法，其特征在于，当合并导入程序储存单元失败时确定后门处理程序出错；
当合并导入程序储存单元成功时运行测试软件。
4.如权利要求1所述的方法，其特征在于，在通过后门接口调用后门处理程序之后，所述方法还包括步骤：判断是否能够运行后门处理程序，若不能运行，则确定后门处理程序出错；
通过执行后门处理程序对系统中该后门接口对应的层次和结构的测试对象进行测试的步骤包括：在判断能运行后门处理程序时，通过执行后门处理程序对系统中该后门接口对应的层次和结构中修改或增加的测试对象进行测试。
5.如权利要求1所述的方法，其特征在于，通过执行后门处理程序对系统中该后门接口对应的层次和结构的测试对象进行测试的步骤包括：
通过在模拟系统中执行后门处理程序，输出实际测试结果，并将实际测试结果与预期测试结果进行比对，若比对结果一致，则确定测试成功，否则确定测试功能未在测试对象上正确实现。
6.一种用于系统测试的装置，其特征在于，包括：
软件模块，用于通过运行测试软件调用后门接口，其中该测试软件的层次和结构与被测系统的层次和结构一一对应；
后门接口模块，用于通过后门接口调用后门处理程序；其中一个后门接口对应一个层次中的一个结构；
后门程序模块，用于通过执行后门处理程序对系统中该后门接口对应的层次和结构的测试对象进行测试。
7.如权利要求6所述的装置，其特征在于，还包括：导入模块，用于将测试软件及测试软件中后门接口对应的后门处理程序合并导入程序储存单元。
8.如权利要求7所述的装置，其特征在于，导入模块当合并导入程序储存单元失败时确定后门处理程序出错；当合并导入程序储存单元成功时触发测试软件的运行。
9.如权利要求6所述的装置，其特征在于，还包括：运行检测模块，用于判断是否能够运行后门处理程序，若不能运行，则确定后门处理程序出错；
后门程序模块在判断能运行后门处理程序时，通过执行后门处理程序对系统中该后门接口对应的层次和结构中修改或增加的测试对象进行测试。
10.如权利要求6所述的装置，其特征在于，后门程序模块通过在模拟系统中执行后门处理程序，输出实际测试结果，并将实际测试结果与预期测试结果进行比对，若比对结果一致，则确定测试成功，否则确定测试功能未在测试对象上正确实现。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201010217707.XA CN101872324B (zh) | 2010-06-23 | 2010-06-23 | 一种系统测试方法及装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201010217707.XA CN101872324B (zh) | 2010-06-23 | 2010-06-23 | 一种系统测试方法及装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN101872324A true CN101872324A (zh) | 2010-10-27 |
| CN101872324B CN101872324B (zh) | 2016-01-20 |
Family
ID=42997193
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201010217707.XA Active CN101872324B (zh) | 2010-06-23 | 2010-06-23 | 一种系统测试方法及装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN101872324B (zh) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102799531A (zh) * | 2012-07-26 | 2012-11-28 | 浪潮电子信息产业股份有限公司 | 一种基于层次分析理论的软件测试方法 |
| CN105045717A (zh) * | 2015-08-18 | 2015-11-11 | 网易（杭州）网络有限公司 | 测试环境部署方法、装置和系统 |
| CN107908553A (zh) * | 2017-11-02 | 2018-04-13 | 平安科技（深圳）有限公司 | 关联测试方法、应用服务器及计算机可读存储介质 |
| CN108874532A (zh) * | 2017-06-01 | 2018-11-23 | 北京旷视科技有限公司 | 内存分配方法及设备 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20030056150A1 (en) * | 2001-09-14 | 2003-03-20 | David Dubovsky | Environment based data driven automated test engine for GUI applications |
| CN1472925A (zh) * | 2002-07-30 | 2004-02-04 | 华为技术有限公司 | 简化脚本编写并提高脚本可读性的方法 |
| CN1503168A (zh) * | 2002-11-22 | 2004-06-09 | 深圳市中兴通讯股份有限公司 | 一种系统产品的自动化测试方法 |
| CN1848092A (zh) * | 2005-04-14 | 2006-10-18 | 华为技术有限公司 | 测试装置及方法 |
-
2010
- 2010-06-23 CN CN201010217707.XA patent/CN101872324B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20030056150A1 (en) * | 2001-09-14 | 2003-03-20 | David Dubovsky | Environment based data driven automated test engine for GUI applications |
| CN1472925A (zh) * | 2002-07-30 | 2004-02-04 | 华为技术有限公司 | 简化脚本编写并提高脚本可读性的方法 |
| CN1503168A (zh) * | 2002-11-22 | 2004-06-09 | 深圳市中兴通讯股份有限公司 | 一种系统产品的自动化测试方法 |
| CN1848092A (zh) * | 2005-04-14 | 2006-10-18 | 华为技术有限公司 | 测试装置及方法 |
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102799531A (zh) * | 2012-07-26 | 2012-11-28 | 浪潮电子信息产业股份有限公司 | 一种基于层次分析理论的软件测试方法 |
| CN102799531B (zh) * | 2012-07-26 | 2016-04-13 | 浪潮电子信息产业股份有限公司 | 一种基于层次分析理论的软件测试方法 |
| CN105045717A (zh) * | 2015-08-18 | 2015-11-11 | 网易（杭州）网络有限公司 | 测试环境部署方法、装置和系统 |
| CN105045717B (zh) * | 2015-08-18 | 2018-08-07 | 网易（杭州）网络有限公司 | 测试环境部署方法、装置和系统 |
| CN108874532A (zh) * | 2017-06-01 | 2018-11-23 | 北京旷视科技有限公司 | 内存分配方法及设备 |
| CN108874532B (zh) * | 2017-06-01 | 2020-11-06 | 北京旷视科技有限公司 | 内存分配方法及设备 |
| CN107908553A (zh) * | 2017-11-02 | 2018-04-13 | 平安科技（深圳）有限公司 | 关联测试方法、应用服务器及计算机可读存储介质 |
| CN107908553B (zh) * | 2017-11-02 | 2021-02-26 | 平安科技（深圳）有限公司 | 关联测试方法、应用服务器及计算机可读存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN101872324B (zh) | 2016-01-20 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Glass | Real-time: The “lost world” of software debugging and testing | |
| CN101952827B (zh) | 用于执行硬件仿真和验证解决方案的方法和装置 | |
| US8621441B2 (en) | System and method for software immunization based on static and dynamic analysis | |
| US9921949B2 (en) | Software testing | |
| US20110197174A1 (en) | Method, System and Computer Readable Medium for Generating Software Transaction-Level Modeling (TLM) Model | |
| US20130204602A1 (en) | Simulation apparatus and method for verifying hybrid system | |
| CN106325970A (zh) | 编译方法和编译系统 | |
| WO2023024251A1 (zh) | 模块验证方法、uvm验证平台、电子设备及存储介质 | |
| CN101872324B (zh) | 一种系统测试方法及装置 | |
| US20110072429A1 (en) | Virtual machine relocation system and associated methods | |
| CN114818565A (zh) | 基于python的仿真环境管理平台、方法、设备及介质 | |
| CN110941934A (zh) | 一种fpga原型验证开发板分割仿真系统、方法、介质及终端 | |
| CN110516447A (zh) | 一种识别终端模拟器的方法与设备 | |
| CN111353263A (zh) | 软硬件设计与验证平台系统 | |
| US20120278660A1 (en) | Method and device for testing a system comprising at least a plurality of software units that can be executed simultaneously | |
| CN112597718B (zh) | 集成电路设计的验证方法、验证装置以及存储介质 | |
| CN102722438A (zh) | 一种内核调试的方法和设备 | |
| CN112257362A (zh) | 逻辑代码的验证方法、验证装置以及存储介质 | |
| CN101303673A (zh) | 接口板、模拟器、同步方法和同步程序 | |
| CN115757099A (zh) | 平台固件保护恢复功能自动测试方法和装置 | |
| CN111176663A (zh) | 应用程序的数据处理方法、装置、设备及存储介质 | |
| CN116306392A (zh) | 芯片仿真装置、方法、电子设备和存储介质 | |
| CN115809076A (zh) | Ecu软件自动化集成方法及系统 | |
| US7337103B2 (en) | Method and apparatus for the automatic correction of faulty wires in a logic simulation hardware emulator / accelerator | |
| JP2013003633A (ja) | 故障再現装置、故障再現方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C53 | Correction of patent of invention or patent application | ||
| CB03 | Change of inventor or designer information |
Inventor after: Zhang Yinong Inventor after: Wang Xin Inventor before: Wang Xin |
|
| COR | Change of bibliographic data |
Free format text: CORRECT: INVENTOR; FROM: WANG XIN TO: ZHANG YINONG WANG XIN |
|
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| TR01 | Transfer of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20180409 Address after: 100191 Xueyuan Road, Haidian District, Haidian District, Beijing, No. 607, No. six Patentee after: Beijing Vimicro AI Chip Technology Co Ltd Address before: 100083, Haidian District, Xueyuan Road, Beijing No. 35, Nanjing Ning building, 15 Floor Patentee before: Beijing Vimicro Corporation |