CN1841336A - 计算机测试方法 - Google Patents

Abstract

本发明公开了一种计算机测试方法，包括以下步骤：被测计算机启动测试项目的执行；建立被测计算机与主控计算机之间的进程连接；通过所述进程连接，被测计算机向主控计算机发送本机的状态信息，接收主控计算机的执行指令；被测计算机响应所述执行指令，控制测试项目的执行。实施本发明后，可以自动完成测试项目的分发、中断和修改，对被测计算机进行实时监测，对测试项目的执行进行远程控制，以及自动生成测试项目和自动整理测试结论。

Description

计算机测试方法

技术领域

本发明涉及计算机测试技术、网络技术及软件测试技术领域，尤其涉及一种计算机测试方法。

背景技术

随着计算机功能的日益复杂，外围设备日渐增多，对计算机本身稳定性、兼容性要求随之提高。这同时也对计算机的测试精度和测试效率上提出了更高的要求，否则日益复杂、繁重的测试任务将会极大地影响新产品的开发进度和质量。

通常计算机的测试，尤其是批量测试都采用自动化测试的方法。图1所示为现有技术中典型的计算机自动化测试系统，包括服务器110和多台被测计算机120。该测试系统完成一个具体的测试项目通常需要进行以下几个步骤：

测试项目由若干测试条目组成，例如被测计算机上运行的操作系统、驱动程序和测试程序等。对每一个测试条目，测试人员需要编写一个测试脚本，被测计算机120在执行该测试脚本时能够自动完成对应测试条目的安装和/或运行。目前的做法是确定要进行的测试项目中包括哪一些测试条目，根据不同的测试条目找到已经编写好存放在服务器110上的测试脚本，测试人员将测试脚本按照其对应测试条目的安装和运行顺序组合，生成测试项目存放在服务器110上；

根据生成的测试项目，测试人员制作启动盘，用来启动被测计算机120、建立被测计算机120与服务器110之间的网络连接以及令被测计算机120开始执行测试项目；

用启动盘启动被测计算机120，被测计算机120自动执行测试项目，自动生成各个测试条目的测试结果文件并将测试结果文件保存在本地或上传到服务器110。测试人员从各台被测计算机120或服务器110上得到测试结果，查询不同测试条目的测试结果，并将其组合生成出测试报告。

现有的测试方法仍然存在几个不足之处：

1、在测试过程中不能对被测计算机的运行状态进行远程监测，测试人员只有查看被测计算机才能知道其运行情况，在被测计算机数量较多时不便对其进行集中监控；同时，一个测试项目一旦开始执行，只能通过人工停止每一台被测计算机运行的方法才能使其中断，就更无法对运行中的测试项目进行修改了。

2、每一个测试项目都需要由测试人员人工对测试脚本进行组合，效率较低。

3、测试结果需要测试人员手工收集和整理，效率较低。

发明内容

本发明要解决的技术问题是现有技术在测试过程中不能远程监测被测计算机运行状态并且不能对运行中的测试项目进行远程控制。

本发明要解决的另一个问题是现有技术中将测试脚本组合生成测试项目时需要测试人员手工进行。

本发明要解决的第三个问题是现有技术中测试结果的查询和组合需要测试人员手工进行。

本发明所述计算机测试方法包括以下步骤：

a)被测计算机启动测试项目的执行；

b)建立被测计算机与主控计算机之间的进程连接；

c)通过所述进程连接，被测计算机向主控计算机发送本机的状态信息，接收主控计算机的执行指令；

d)被测计算机响应所述执行指令，控制测试项目的执行。

优选地，所述测试项目包括至少一个测试脚本，每个测试脚本完成一个测试条目；所述测试项目、测试条目和测试脚本存储在数据库服务器上的数据库中。

优选地，所述步骤a)与步骤b)之间包括：被测计算机执行测试脚本，安装并启动操作系统。

优选地，所述步骤c)与步骤d)之间包括：被测计算机执行完当前测试脚本。

优选地，所述进程连接为套接字socket连接。

优选地，所述主控计算机的执行指令包括分发指令、中断指令和修改指令；

所述分发指令，其中包括分发测试项目的名称，用于使被测计算机下载数据库中的所述分发测试项目，并启动执行所述分发测试项目；

所述中断指令，用于使被测计算机在当前测试脚本执行完毕后，停止测试项目的执行；

所述修改指令，其中包括修改后测试项目的名称，用于使被测计算机停止当前测试项目的执行，下载数据库中的所述修改后测试项目，并启动执行所述修改后测试项目。

优选地，其特征在于，所述步骤a)之前包括：

建立数据库中测试条目与测试脚本的对应关系；

选择测试条目和所述测试条目的执行顺序；

主控计算机将数据库中与所述测试条目对应的测试脚本按照所述执行顺序组合生成测试项目。

优选地，为数据库中所述测试项目包括的测试脚本设置已执行标志；

被测计算机执行完每个测试脚本后，置位数据库中所述测试项目下该测试脚本的已执行标志；

被测计算机执行完每个测试脚本后，将生成的测试结果文件上传到数据库服务器。

优选地，所述步骤a)之前还包括：为测试脚本命名，令所述测试脚本的名称中包括测试脚本的类型信息。

优选地，所述步骤d)之后包括：

e)数据库服务器将所述测试结果文件中的测试结论写入数据库，对应于所述测试项目的所述测试脚本，用于所述测试结论的查询。

本发明通过建立被测计算机与主控计算机之间的进程连接，使得主控计算机可以通过该进程连接对被测计算机进行实时监测，并对测试项目的执行进行远程控制；进而能够自动完成测试项目的分发、中断和修改；

本发明在数据库中建立测试条目与测试脚本的对应关系，根据测试人员选择的测试条目自动生成测试项目，提高了生成测试项目的效率；

本发明自动将测试结论导入数据库，测试人员可以在数据库中查询到测试结论，提高了整理测试结论的效率。

附图说明

图1所示为现有技术中计算机测试系统的结构图；

图2所示为本发明中计算机测试方法的应用环境；

图3所示为本发明中执行测试项目的流程图；

图4所示为本发明中生成测试项目的流程图。

具体实施方式

本发明中计算机测试方法的应用环境请参阅图2，主控计算机210、数据库服务器220和被测计算机230连接在同一个局域网上。在主控计算机210上可以查看被测计算机上测试项目的执行过程，还可以向被侧计算机发送执行指令以控制测试项目的执行。在数据库服务器220上，测试过程各个阶段的相关数据主要存储在数据库中，以便于实现对上述数据的自动检索。主控计算机210和数据库服务器220在物理上也可以用一台服务器实现，条件是这台服务器具有足够的处理能力。

在被测计算机上执行的每个测试项目包括一个以上的测试条目，每个测试条目对应于被测计算机的一个软件安装和/或运行过程。例如，测试项目Test包括3个测试条目，测试条目Test_1为安装操作系统，测试条目Test_2为安装被测计算机的硬件驱动程序，Test_3为安装并运行测试软件。测试项目和其所包括的测试条目存放在数据库中。

对于计算机而言，这些测试条目只有转换为测试脚本后才能够由被测计算机执行。测试脚本以文件的形式存放在数据库服务器上，在数据库中有为每个测试条目编写的测试脚本。测试脚本的类型包括驱动安装脚本、测试软件安装脚本、应用软件安装脚本、测试软件运行脚本、应用软件运行脚本和系统设置脚本。一个以上的测试脚本根据其执行顺序组合生成测试项目，在数据库中为每个测试项目中的所有测试脚本设置已执行标志。

在生成测试项目后，对尚未安装操作系统的被测计算机，测试人员需要制作启动盘启动被测计算机并建立被测计算机与数据库服务器之间的网络连接，并令被测计算机启动测试项目。通常会先进行被测计算机的硬盘分区、格式化、建立网络连接等，直至下载测试项目，这一过程本实施例的实现方法与现有技术相同，不再赘述。

本发明中执行测试项目的流程如图3所示。在步骤S310，被测计算机启动测试项目的执行。

在步骤S320，被测计算机根据所执行的测试脚本安装并启动操作系统。

在步骤S330，建立被测计算机与主控计算机之间的进程连接。

要对被测计算机的运行情况进行远程监控，需要在主控计算机上负责监控的应用程序与被测计算机上执行测试项目的进程之间建立一个进程连接。被测计算机上执行测试项目的进程运行在后台，随操作系统的启动而自动启动。由于进程需要在操作系统的平台上运行，所以对测试项目的监测和运行控制都得在被测计算机安装完操作系统后才能进行。

被测计算机与主控计算机之间的进程连接本实施例中采用socket(套接字)连接。Socket连接基于TCP/IP(Transfer Control Protocol/Internet Protocol，传输控制协议/网际协议)实现，并且有完善的标准接口可以非常方便地应用于多种不同的操作系统。

在步骤S340，被测计算机通过建立的进程连接，向主控计算机报告本机的运行状态。

被测计算机可以根据主控计算机的状态指令向其发送本机的状态信息，例如在收到主控计算机的状态指令后，根据其状态指令的要求收集本机的运行状态，并发送给主控计算机；也可以设定被测计算机收集本机的哪些状态信息，令被测计算机以固定的时间间隔发送给主控计算机。

被测计算机的状态信息可以是是否处于运行状态、CPU(Central ProcessUnit，中央处理器)利用率和其他测试项目关心的实时运行参数中的一个或多个。

在步骤S350，在每个测试脚本的执行中，被测计算机将测试脚本的执行过程写入执行过程文本文件，此文件保存在数据库服务器的一个设定文件夹中，主控计算机读取这个文本文件就能够得知被测计算机在测试脚本中的运行位置。

在步骤S360，被测计算机每执行完一个测试脚本，将所生成的测试结果文件上传到数据库服务器；在数据库中此测试项目的记录里添加这些文件的文件名和路径；并且在数据库中该测试项目下置位该测试脚本对应的测试条目的已执行标志，表示此测试条目已经完成。这样，主控计算机通过数据库中的标志信息就能够得知哪些测试条目已经完成。

测试结果文件可以是文本文件、HTML(Hypertext Markup Language，超文本链接标示语言)文件或其他格式。

在主控计算机与被测计算机之间建立了进程连接后，主控计算机可以随时向被测计算机发送执行指令。在步骤S370，当被测计算机接到主控计算机的执行指令后，被测计算机执行完当前测试脚本，根据主控计算机执行指令的内容控制测试项目的执行。

虽然主控计算机可以随时发送执行指令，但被测计算机在一个测试脚本的执行过程中，不会响应主控计算机的执行指令，这样可以保证一个软件的安装或运行过程正常完成。

主控计算机的执行指令主要包括分发指令、中断指令和修改指令。分发指令通常用来开始新测试项目的执行，主控计算机在分发指令中指定要进行的测试项目的名称，被测计算机在数据库中查找到该测试项目，下载并启动执行；中断指令用来取消当前正在执行的测试项目中的后续测试条目，被测计算机不再执行后续的测试条目；修改指令用来修改当前正在执行的测试项目中的后续测试条目，被测计算机接到修改指令后，先停止当前测试项目的执行(即先中断)，再根据修改指令中的修改后测试项目的名称，下载数据库中修改后的测试项目，并继续执行。需要注意的是，修改指令只能对尚未进行的测试条目或测试脚本进行修改。

此外，还可以设计其他的执行指令，如暂停与恢复指令等等，以满足具体测试任务的需要。

在测试项目执行完毕后，在数据库中该测试项目的记录里有被测计算机执行各个测试脚本的测试结果文件的文件名和路径。测试结果文件的内容包括执行测试脚本后得出的各种测试结论，如通过、未通过或者是测试得分等信息。

数据库服务器将这些测试结果文件中的测试结论写入数据库，对应于该测试项目所执行的测试脚本。此时，在数据库中已执行的测试项目项下包括以下信息：测试项目名称、测试执行时间、组成测试项目的测试条目、测试项目包括的各个测试脚本、每个测试脚本执行所得测试结果文件的文件名和路径和各项测试结论。

测试人员通过查询数据库，即可得到各个测试项目的上述信息。通常的数据库软件都支持Web(环球网)查询界面，也可以结合测试人员工作的网络环境编程实现数据库查询功能。

在执行测试项目前，要先生成该测试项目。现有技术中在由测试人员手工生成测试项目的过程中，会将测试脚本的类型写入测试项目，同时还可以写入与测试脚本有关的其他信息，例如测试脚本的版本、测试脚本所安装软件的路径等等，以便于进一步设定被测计算机对测试项目的执行方式。

本发明可以实现测试项目的自动生成，其流程如图4所示。在步骤S410，制定对测试脚本的命名规范，并按照这一命名规范为测试脚本命名，被测计算机通过测试脚本的名称就可以得知测试人员对执行该测试脚本的设定。

例如，设定每个测试脚本的名称由8位字符组成，第一位代表操作系统，第一位是1时代表Windows XP，是2时代表Windows 2000，是3时代表Linux等等；第二位代表测试脚本的类型，第二位是1时代表驱动程序，是2时代表应用软件；第三位和第四位标识测试脚本的版本；第五位表示脚本是否需要写入日志文件；第六、七位指定安装和/或运行测试脚本时的设置；第八位表示测试脚本执行过程中需要重新启动的次数。

这样，在测试项目自动生成过程中，能够很快地从数据库中找出测试条目所对应的测试脚本。同时，在被测计算机执行测试项目的过程中，会得知所执行的各个测试脚本的名称，从而通过测试脚本的名称得到测试脚本的类型、测试人员对测试脚本执行过程的特定设置以及一些相关的信息。这样的命名规范可以保证在自动生成测试项目的过程中，测试人员仍然能够方便地控制测试脚本的执行。

在步骤S420，建立数据库中测试条目与测试脚本的对应关系。

在步骤S430，测试人员在主控计算机上选择组成一个测试项目的测试条目，并指定所选择测试条目的执行顺序。根据数据库中的测试条目，在主控计算机上提供选择界面，以便测试人员对测试条目进行选择；可以同时提供供测试人员指定测试条目执行顺序的界面，或者直接以测试人员选择测试条目的顺序作为测试条目的执行顺序。

在步骤S440，根据测试人员选择的测试条目，主控计算机在数据库中查找到对应的测试脚本，并按照测试人员指定的运行顺序将这些测试脚本在数据库中组合成被测计算机执行的测试项目。这样，在数据库中会记载有生成的测试项目及其包括的各个测试脚本。

在具体实现本发明时，可以通过在被测服务器上安装完操作系统之后，安装一个监控程序来实现上述测试项目执行进程的各项功能。监控程序随操作系统启动而自动启动，运行在操作系统的后台，对测试项目进行监控。主控计算机上对被测计算机状态的显示、与被测计算机之间的进程通信、对被测计算机的执行指令等功能也可以通过编程实现。数据库服务器的功能可以由几个模块实现，例如可以设置文件服务器模块完成操作系统、驱动程序和软件的安装文件的分发，设置测试结果数据库模块完成测试结果文件的存储和测试结论的整理，设置FTP(File Transfer Protocol，文件传输协议)服务器模块完成测试项目的生成，上述各个模块也可以分别或者组合运行在不同的物理服务器上。

在应用本发明所述方法后，对测试人员而言，进行一个测试项目的具体步骤如下：

首先，自动生成测试项目。测试人员只需知道要安装何种类型的操作系统、驱动、软件、运行的软件项目和测试结果保存方式，然后在主控计算机上选取测试条目，比如安装Windows 2000中文版等等。测试条目选取完毕后，主控计算机会自动生成可以被被测计算机执行的测试项目。

然后，测试人员通过主控计算机就可以将生成的测试项目分发给被测计算机，可以单独分发给某个被测计算机，也可以对被测计算机进行批量分发。被测计算机开始执行测试项目后，测试人员可以通过主控计算机对被测计算机的状态进行监测，比如是否出现死机、重启或其它异常现象，测试项目进度是否完成等等；也可以通过主控计算机要求被测计算机进行重新测试、重新启动、更改测试项目等操作。

测试项目执行完毕后，测试人员可以通过客户端计算机的浏览器界面查看测试项目的测试结论。

可见，本发明实现了测试项目的自动生成、测试过程的实时监控和测试结果的自动处理这三个功能。本发明缩短了编写测试项目、执行测试项目和整理测试结果所需的时间；同时由于测试过程完全由计算机控制，也减少了人工干预产生问题的可能性，从而在测试效率和精度两个方面取得了良好的效果。

以上所述的本发明实施方式，并不构成对本发明保护范围的限定。任何在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的权利要求保护范围之内。

Claims (10)

1.一种计算机测试方法，其特征在于，包括以下步骤：

a)被测计算机启动测试项目的执行；

b)建立被测计算机与主控计算机之间的进程连接；

c)通过所述进程连接，被测计算机向主控计算机发送本机的状态信息，接收主控计算机的执行指令；

d)被测计算机响应所述执行指令，控制测试项目的执行。

2.按照权利要求1所述的计算机测试方法，其特征在于：所述测试项目包括至少一个测试脚本，每个测试脚本完成一个测试条目；所述测试项目、测试条目和测试脚本存储在数据库服务器上的数据库中。

3.按照权利要求2所述的计算机测试方法，其特征在于，所述步骤a)与步骤b)之间包括：被测计算机执行测试脚本，安装并启动操作系统。

4.按照权利要求3所述的计算机测试方法，其特征在于，所述步骤c)与步骤d)之间包括：被测计算机执行完当前测试脚本。

5.按照权利要求4所述的计算机测试方法，其特征在于：所述进程连接为套接字socket连接。

6.按照权利要求4所述的计算机测试方法，其特征在于：所述主控计算机的执行指令包括分发指令、中断指令和修改指令；

所述分发指令，其中包括分发测试项目的名称，用于使被测计算机下载数据库中的所述分发测试项目，并启动执行所述分发测试项目；

所述中断指令，用于使被测计算机在当前测试脚本执行完毕后，停止测试项目的执行；

所述修改指令，其中包括修改后测试项目的名称，用于使被测计算机停止当前测试项目的执行，下载数据库中的所述修改后测试项目，并启动执行所述修改后测试项目。

7.按照权利要求2至6任意一项所述的计算机测试方法，其特征在于，所述步骤a)之前包括：

建立数据库中测试条目与测试脚本的对应关系；

选择测试条目和所述测试条目的执行顺序；

主控计算机将数据库中与所述测试条目对应的测试脚本按照所述执行顺序组合生成测试项目。

8.按照权利要求7所述的计算机测试方法，其特征在于：为数据库中所述测试项目包括的测试脚本设置已执行标志；

被测计算机执行完每个测试脚本后，置位数据库中所述测试项目下该测试脚本的已执行标志；

被测计算机执行完每个测试脚本后，将生成的测试结果文件上传到数据库服务器。

9.按照权利要求8所述的计算机测试方法，其特征在于，所述步骤a)之前还包括：为测试脚本命名，令所述测试脚本的名称中包括测试脚本的类型信息。

10.按照权利要求9所述的计算机测试方法，其特征在于，所述步骤d)之后包括：

e)数据库服务器将所述测试结果文件中的测试结论写入数据库，对应于所述测试项目的所述测试脚本，用于所述测试结论的查询。

Images