CN108170606A - 系统软件升级类应用的测试系统及方法 - Google Patents

Abstract

本发明实施例提供了一种系统软件升级类应用的测试系统及方法，其中，该系统包括服务器，用于将待测试系统软件的升级前版本和升级后版本分别调度到不同的终端上运行；至少两个终端，每个所述终端用于运行所述服务器所调度的待测试系统软件，运行同一待测试系统软件的升级前版本和升级后版本的两个终端在各自运行的版本下采集相同菜单的相同页面的图像，分析各相同菜单的相同页面的图像对应的相似度，根据相似度低于预设阈值的图像来测试所述待测试系统软件。该方案可以节省较多人工页面点击操作的时间，只需安排较少人力浏览图片即可快速且有效的发现新旧版本的不同之处，完成升级改造后的黑盒验证测试，投入产出较为可观。

Description

系统软件升级类应用的测试系统及方法

技术领域

本发明涉及计算机系统测试技术领域，特别涉及一种系统软件升级类应用的测试系统及方法。

背景技术

在银行等领域的应用系统随着业务的不断发展及提升，各应用系统承载的交易量与日俱增，因此为满足对外服务的需求，对于业务系统上线的版本效率、质量提出了更高的要求，特别是构建于基础设施的一系列操作系统及软件服务的频繁升级对于测试带来更大的挑战。

目前业界对于各类服务器的系统软件升级，如操作系统服务、各类中间件以及IE浏览器等系统软件升级的测试没有统一的测试规范，传统的测试方法依旧是通过对升级后新版本特性的研究和分析，从理论角度来提炼测试要点，选择基于新特性开发的功能进行通过性的验证。对于整个业务处理系统而言，也就存在升级前后覆盖案例范围存在评估不全面及案例执行的效率低下等问题。因此基于目前的人力现状来看，对于B/S类系统软件升级类任务，基本无法实现全覆盖的测试。

发明内容

本发明实施例提供了一种系统软件升级类应用的测试系统，以解决现有技术中对业务处理系统无法实现升级前后案例全覆盖的测试的技术问题。该系统包括：服务器，用于将待测试系统软件的升级前版本和升级后版本分别调度到不同的终端上运行；至少两个终端，每个所述终端用于运行所述服务器所调度的待测试系统软件，运行同一待测试系统软件的升级前版本和升级后版本的两个终端在各自运行的版本下采集相同菜单的相同页面的图像；所述服务器，还用于分析各相同菜单的相同页面的图像对应的相似度，根据相似度低于预设阈值的图像来测试所述待测试系统软件。

本发明实施例还提供了一种系统软件升级类应用的测试方法，以解决现有技术中对业务处理系统无法实现升级前后案例全覆盖的测试的技术问题。该方法包括：将待测试系统软件的升级前版本和升级后版本分别调度到不同的终端上运行；调度每个所述终端运行所调度的待测试系统软件，运行同一待测试系统软件的升级前版本和升级后版本的两个终端在各自运行的版本下采集相同菜单的相同页面的图像，分析各相同菜单的相同页面的图像对应的相似度，根据相似度低于预设阈值的图像来测试所述待测试系统软件。

本发明实施例还提供了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述任意的系统软件升级类应用的测试方法。

本发明实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有执行上述任意的系统软件升级类应用的测试方法的计算机程序。

在本发明实施例中，通过采集待测试系统软件的升级前版本和升级后版本中相同菜单的相同页面的图像，再分析各相同菜单的相同页面的图像对应的相似度，进而根据相似度低于预设阈值的图像来测试待测试系统软件，例如，可以对相似度低于预设阈值的图像进行重点验证和排查，与现有技术中的测试方法相比，本申请实现了基于图像比对的自动化测试，可以节省较多人工页面点击操作的时间，只需安排较少人力浏览图片即可快速且有效的发现新旧版本的不同之处，完成升级改造后的黑盒验证测试，投入产出较为可观。

附图说明

此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，并不构成对本发明的限定。在附图中：

图1是本发明实施例提供的一种系统软件升级类应用的测试系统的结构框图；

图2是本发明实施例提供的一种具体的系统软件升级类应用的测试系统的结构图；

图3是本发明实施例提供的一种配置模块的内部结构图；

图4是本发明实施例提供的一种截图模块的内部结构图；

图5是本发明实施例提供的一种图片管理模块的内部结构图；

图6是本发明实施例提供的一种图像比对模块的内部结构图；

图7是本发明实施例提供的一种像素提取处理流程图；

图8是本发明实施例提供的一种分析模块的内部结构图；

图9是本发明实施例提供的一种分析模块的处理流程图；

图10是本发明实施例提供的一种调度模块的内部结构图；

图11是本发明实施例提供的一种上述系统软件升级类应用的测试系统的工作方法的流程图；

图12是本发明实施例提供的一种系统软件升级类应用的测试方法的流程图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚明白，下面结合实施方式和附图，对本发明做进一步详细说明。在此，本发明的示意性实施方式及其说明用于解释本发明，但并不作为对本发明的限定。

在本发明实施例中，提供了一种系统软件升级类应用的测试系统，如图1所示，该系统包括：

服务器101，用于将待测试系统软件的升级前版本和升级后版本分别调度到不同的终端上运行；

至少两个终端102，每个所述终端用于运行所述服务器所调度的待测试系统软件，运行同一待测试系统软件的升级前版本和升级后版本的两个终端在各自运行的版本下采集相同菜单的相同页面的图像；

所述服务器101，还用于分析各相同菜单的相同页面的图像对应的相似度，根据相似度低于预设阈值的图像来测试所述待测试系统软件。

由图1所示可知，在本发明实施例中，通过采集待测试系统软件的升级前版本和升级后版本中相同菜单的相同页面的图像，再分析各相同菜单的相同页面的图像对应的相似度，进而根据相似度低于预设阈值的图像来测试待测试系统软件，例如，可以对相似度低于预设阈值的图像进行重点验证和排查，与现有技术中的测试方法相比，本申请可以节省较多人工页面点击操作的时间，只需安排较少人力浏览图片即可快速且有效的发现新旧版本的不同之处，完成升级改造后的黑盒验证测试，投入产出较为可观。

具体实施时，上述待测试系统软件可以是存在系统软件升级的B/S类系统。

具体实施时，为了实现待测试系统软件新旧版本的图像采集，如图2所示，终端包括测试执行模块1，调度模块2、分析模块3以及图像比对模块4的功能由上述服务器实现，其中，测试执行模块1的功能通过配置模块11、截图模块12和图片管理模块13共同实现。具体的，测试执行模块1可以采用WatchMan2.0(自动化测试框架，包含页面测试、接口测试、批量测试、手机测试等功能组件)作为自动化测试框架，对升级前后分别进行自动截图功能(两个环境均调度自动化测试脚本)。使用Windows作为平台环境执行自动化测试案例脚本(即上述待测试系统软件)。

具体实施时，为了实现待测试系统软件新旧版本的图像采集，如图2所示，所述终端，包括：配置模块11、截图模块12和图片管理模块13，其中，

如图3所示，所述配置模块11，包括：

配置装载单元111，用于根据终端执行所述待测试系统软件的执行环境获取对应的执行配置文件，所述执行配置文件包括截图开关参数、截图模式参数以及图像存储路径参数；具体的，自动化测试使用的配置参数信息均可以放在env.properties配置文件中进行管理。配置装载单元111根据执行环境进行判断获取对应的自动化执行配置文件后，将配置文件中的配置参数载入内存，配置参数包括截图开关参数、截图模式参数、图像存储路径等参数。

浏览器配置单元112，用于根据所述截图开关参数设置浏览器，设置浏览器在显示时消除由不同浏览器自身所存在的外观特征差异；具体的，例如，由于IE8和IE11在外观上存在一定的差异，为了消除外观差异对图像分析带来的影响，浏览器配置单元112对IE菜单栏、任务栏进行去除，并在执行时根据截图开关参数对IE显示比例进行设置，保证测试案例执行时IE8和IE11在外观特征上不存在差异。

如图4所示，所述截图模块12，包括：

屏幕截取单元121，用于根据所述截图模式参数在所述待测试系统软件中插入截图操作，截取各菜单对应页面的指定位置的图像，且待测试系统软件的升级前版本和升级后版本分别在不同IE浏览器环境下执行，在页面加载完成后进行截图操作；具体的，屏幕截取单元121的功能要求能确保自动化脚本在不同时间、不同IE下执行时，截取的图像所对应的页面位置完全一致。例如，首先，在自动化脚本中插入截图操作，且通过脚本同源的方式使得不同IE环境下执行同一套脚本，实现了操作顺序上的一致性。其次，在截图时增加延时处理，待页面完全加载完成后再进行截图，消除了加载等待对截图效果的影响。截图时不考虑IE的frame层次，仅对屏幕显示信息按坐标进行屏幕捕捉，保证所截图片的真实性。屏幕捕捉后使用BufferedImage对象保存在内存中。

图像保存单元122，用于按照待测试系统软件的脚本文件名(案例类名)、待测试系统软件的名称(案例名称)、待测试系统软件的执行顺序号(即案例的执行顺序号，这个顺序是根据数据池定义来执行的)以及截图时间命名截取的图像，根据所述图像存储路径参数存储截取的图像；具体的，从内存的BufferedImage对象读取图片信息，从案例执行堆栈中获取案例对应的类名、方法名、执行顺序号，将图片按照案例类名+方法名+执行顺序+截图时间的方式进行命名。读入图像存储路径参数，若对应文件夹不存在则自动创建，然后将图片保存到对应的路径下，可以按多套版本、多套浏览器灵活定制目录结构。

如图5所示，所述图片管理模块13，包括：

图片压缩单元131，用于对所述图像保存单元存储的所有图像进行压缩，按照终端编号、压缩时间以及压缩序号命名压缩包(该命名防止压缩包重名)；具体的，可以对截图模块12中保存的图片进行zip压缩处理，对压缩包按照终端编号+压缩时间+压缩序号的方式命名。

图片传输单元132，用于将压缩包传输给所述服务器；具体的，各终端上的图像传输单元将图像压缩单元中压缩完成的zip包通过ftp上传到指定的服务器上。

具体实施时，得到各相同菜单的相同页面的两幅图像后，在本实施例中，通过以下方式计算相似度，例如，如图2、6所示，所述服务器，包括：图像对比模块4，该图像对比模块4，包括：

图片下载解压单元41，用于根据配置文件所指定的终端的编号，下载所述待测试系统软件的升级前版本和升级后版本对应的压缩包，对压缩包进行解压缩；具体的，图片下载解压单元41根据配置文件所指定的终端的编号，下载对应的图片zip包文件，并在下载完成后对文件进行解压缩。

图片像素提取单元42，用于针对所述待测试系统软件的升级前版本和升级后版本对应的压缩包中相同菜单的相同页面的两幅图像，采集该两幅图像中每个像素的像素信息；

具体的，图片像素提取单元42的主要功能可以为对通过截图模块中采集到的图片文件进行预校验及RGB三原色信息的采集。获取图片下载解压单元41所下载解压的所有图片，例如，可以包括IE8以及IE11下的截图，然后按图7所示处理流程进行判断处理，处理逻辑如下：

1)文件夹存在性判断。判断IE8、IE11文件夹是否存在，不存在抛出提示。

2)文件存在性判断。获取IE8、IE11文件夹下所有文件，以IE11为基准，比对IE8目录下是否存在同名文件，存在则向下处理，不存在则针对该文件记录异常。

3)图像信息采集。先做图像基础有效性的校验，如大小等。然后对图像按行、按列进行像素级的拆解，并获取每个像素的RGB三原色(即上述像素信息)。

4)数据存储。将两个图像信息放入两个二维数组，并将采集到的像素信息提供给图片像素比对单元43。

图片像素比对单元43，用于根据像素信息计算该两幅图像中相同像素的个数和不同像素的个数，根据相同像素的个数和不同像素的个数计算该两幅图像的相似度。具体的，根据从图片像素提取单元42中获取到的像素信息，对两张图片进行比对，采集相同像素与不同像素的个数，并得出相似度(例如，相似度＝相同像素/总像素)。

具体实施时，如图2、8所示，所述服务器，还包括：分析模块3，该分析模块3包括：

分类归集单元31，用于将各相同菜单的相同页面的两幅图像对应的相似度与所述预设阈值进行比较，将相似度低于所述预设阈值的图像和相似度高于所述预设阈值的图像分别存放，得出比较结果；具体的，分类归集单元31的主要功能是对图像像素比对单元中的结果进行分析并做出归档判断。根据对比对结果情况进行可配置化分析，按配置情况来决定分类归集存放策略，将比对一致的图片(即上述相似度大于预设阈值的图像)与比对存在差异的图片(即上述相似度小于预设阈值的图像)归集到不同文件夹下，并将该比较结果输出给结果管理单元32。

结果管理单元32，用于输出所述比较结果给用户。具体的，结果管理单元32可以将比较结果通过EXCEL形式输出给用户。例如，比较结果如下表1所示。

表1

具体的，分析模块3的处理流程图如图9所示。

具体实施时，上述调度模块2中自动化测试可以使用Jenkins(基于Java开发的一种开源的持续集成工具)作为持续集成环境，使用Git(分布式版本控制系统)对测试脚本进行统一管理，利用Ant(将软件编译、测试、部署等步骤联系起来的执行工具)脚本调用WatchMan中封装的TestNG(一款开源的自动化测试套件)构建来实现自动化测试任务的集中调度和在不同执行终端上的分布式执行，具体的，如图10所示，调度模块2的内部结构图，包括预处理单元21，任务调度单元22，日志及结果输出单元23。

预处理单元21：该功能包含脚本检查、环境预判、脚本装载功能。预处理程序首先从源代码管理工具(Git)下载最新代码并且进行全量代码编译，编译通过后将代码更新到执行终端上。然后对被测试系统进行应用环境、外联环境、工作日期的检查。最后通过批处理程序装载对应的测试脚本至执行终端上。

任务调度单元22：采用定时任务的方式，通过Ant构建工具，在target中调用TestNG命令，实现自动化测试任务的调度。

日志及结果输出单元23：使用log4j作为日志记录框架，在脚本执行时记录对应的执行日志信息，结合Jenkins的WebTestTool Results对执行结果进行展示。

具体的，如图11所示，上述系统软件升级类应用的测试系统的工作方法包括以下步骤：

步骤S101：预处理单元21对应用和执行机环境进行检查，清理日志及临时文件目录。根据自动化案例的属性及执行频率选取本次需要执行的测试案例，生成案例调度文件。

步骤S102：任务调度单元22从预处理单元21生成的案例调度文件中读取案例信息后，在不同的执行终端上启动自动化测试案例执行。

步骤S103：在每个执行终端上，配置模块11从环境配置文件中读取截图开关、截图模式参数，对IE显示方式进行设置。屏幕截取单元121根据配置模块11的截图模式参数进行屏幕截取，图像保存单元122对截取的图像按既定规则进行保存。

步骤S104：在每个执行终端上，图片压缩单元131对所截取图片进行压缩后，图片传输单元132将压缩包上传到指定服务器进行汇总。

步骤S105：图像比对模块13对不同环境下相同页面位置的图像进行分析比对，输出每组图片的相似度。

基于同一发明构思，本发明实施例中还提供了一种系统软件升级类应用的测试方法，如下面的实施例所述。由于系统软件升级类应用的测试方法解决问题的原理与系统软件升级类应用的测试系统相似，因此系统软件升级类应用的测试方法的实施可以参见系统软件升级类应用的测试系统的实施，重复之处不再赘述。

图12是本发明实施例的系统软件升级类应用的测试方法的流程图，如图12所示，该方法包括：

步骤1201：将待测试系统软件的升级前版本和升级后版本分别调度到不同的终端上运行；

步骤1202：调度每个所述终端运行所调度的待测试系统软件，运行同一待测试系统软件的升级前版本和升级后版本的两个终端在各自运行的版本下采集相同菜单的相同页面的图像，分析各相同菜单的相同页面的图像对应的相似度，根据相似度低于预设阈值的图像来测试所述待测试系统软件。

在一个实施例中，调度每个所述终端运行同一待测试系统软件的升级前版本和升级后版本的两个终端在各自运行的版本下采集相同菜单的相同页面的图像，包括：根据终端执行所述待测试系统软件的执行环境获取对应的执行配置文件，所述执行配置文件包括截图开关参数、截图模式参数以及图像存储路径参数；根据所述截图开关参数设置浏览器，设置浏览器在显示时消除由不同浏览器自身所存在的外观特征差异；根据所述截图模式参数在所述待测试系统软件中插入截图操作，截取各菜单对应页面的指定位置的图像，且待测试系统软件的升级前版本和升级后版本分别在不同IE浏览器环境下执行，在页面加载完成后进行截图操作；按照待测试系统软件的脚本文件名、待测试系统软件的名称、待测试系统软件的执行顺序号以及截图时间命名截取的图像，根据所述图像存储路径参数存储截取的图像；对所述图像保存单元存储的所有图像进行压缩，按照终端编号、压缩时间以及压缩序号命名压缩包；将压缩包传输给服务器。

在一个实施例中，分析各相同菜单的相同页面的图像对应的相似度，包括：在所述服务器上，根据配置文件所指定的终端的编号，下载所述待测试系统软件的升级前版本和升级后版本对应的压缩包，对压缩包进行解压缩；针对所述待测试系统软件的升级前版本和升级后版本对应的压缩包中相同菜单的相同页面的两幅图像，采集该两幅图像中每个像素的像素信息；根据像素信息计算该两幅图像中相同像素的个数和不同像素的个数，根据相同像素的个数和不同像素的个数计算该两幅图像的相似度。

在一个实施例中，还包括：在所述服务器上，将各相同菜单的相同页面的两幅图像对应的相似度与所述预设阈值进行比较，将相似度低于所述预设阈值的图像和相似度高于所述预设阈值的图像分别存放，得出比较结果；输出所述比较结果给用户。

在一个实施例中，本申请还提供了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述系统软件升级类应用的测试方法。

在一个实施例中，本申请还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有执行上述系统软件升级类应用的测试方法的计算机程序。

在本发明实施例中，通过采集待测试系统软件的升级前版本和升级后版本中相同菜单的相同页面的图像，再分析各相同菜单的相同页面的图像对应的相似度，进而根据相似度低于预设阈值的图像来测试待测试系统软件，例如，可以对相似度低于预设阈值的图像进行重点验证和排查，与现有技术中的测试方法相比，本申请可以节省较多人工页面点击操作的时间，只需安排较少人力浏览图片即可快速且有效的发现新旧版本的不同之处，完成升级改造后的黑盒验证测试，投入产出较为可观。

显然，本领域的技术人员应该明白，上述的本发明实施例的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，可选地，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，并且在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本发明实施例不限制于任何特定的硬件和软件结合。

以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明实施例可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种系统软件升级类应用的测试系统，其特征在于，包括：

服务器，用于将待测试系统软件的升级前版本和升级后版本分别调度到不同的终端上运行；

至少两个终端，每个所述终端用于运行所述服务器所调度的待测试系统软件，运行同一待测试系统软件的升级前版本和升级后版本的两个终端在各自运行的版本下采集相同菜单的相同页面的图像；

所述服务器，还用于分析各相同菜单的相同页面的图像对应的相似度，根据相似度低于预设阈值的图像来测试所述待测试系统软件。

2.如权利要求1所述的系统软件升级类应用的测试系统，其特征在于，所述终端，包括：配置模块、截图模块和图片管理模块，其中，

所述配置模块，包括：

配置装载单元，用于根据终端执行所述待测试系统软件的执行环境获取对应的执行配置文件，所述执行配置文件包括截图开关参数、截图模式参数以及图像存储路径参数；

浏览器配置单元，用于根据所述截图开关参数设置浏览器，设置浏览器在显示时消除由不同浏览器自身所存在的外观特征差异；

所述截图模块，包括：

屏幕截取单元，用于根据所述截图模式参数在所述待测试系统软件中插入截图操作，截取各菜单对应页面的指定位置的图像，且待测试系统软件的升级前版本和升级后版本分别在不同IE浏览器环境下执行，在页面加载完成后进行截图操作；

图像保存单元，用于按照待测试系统软件的脚本文件名、待测试系统软件的名称、待测试系统软件的执行顺序号以及截图时间命名截取的图像，根据所述图像存储路径参数存储截取的图像；

所述图片管理模块，包括：

图片压缩单元，用于对所述图像保存单元存储的所有图像进行压缩，按照终端编号、压缩时间以及压缩序号命名压缩包；

图片传输单元，用于将压缩包传输给所述服务器。

3.如权利要求2所述的系统软件升级类应用的测试系统，其特征在于，所述服务器，包括：图像对比模块，该图像对比模块，包括：

图片下载解压单元，用于根据配置文件所指定的终端的编号，下载所述待测试系统软件的升级前版本和升级后版本对应的压缩包，对压缩包进行解压缩；

图片像素提取单元，用于针对所述待测试系统软件的升级前版本和升级后版本对应的压缩包中相同菜单的相同页面的两幅图像，采集该两幅图像中每个像素的像素信息；

图片像素比对单元，用于根据像素信息计算该两幅图像中相同像素的个数和不同像素的个数，根据相同像素的个数和不同像素的个数计算该两幅图像的相似度。

4.如权利要求3所述的系统软件升级类应用的测试系统，其特征在于，所述服务器，还包括：分析模块，该分析模块包括：

分类归集单元，用于将各相同菜单的相同页面的两幅图像对应的相似度与所述预设阈值进行比较，将相似度低于所述预设阈值的图像和相似度高于所述预设阈值的图像分别存放，得出比较结果；

结果管理单元，用于输出所述比较结果给用户。

5.一种系统软件升级类应用的测试方法，其特征在于，包括：

将待测试系统软件的升级前版本和升级后版本分别调度到不同的终端上运行；

调度每个所述终端运行所调度的待测试系统软件，运行同一待测试系统软件的升级前版本和升级后版本的两个终端在各自运行的版本下采集相同菜单的相同页面的图像，分析各相同菜单的相同页面的图像对应的相似度，根据相似度低于预设阈值的图像来测试所述待测试系统软件。

6.如权利要求5所述的系统软件升级类应用的测试方法，其特征在于，调度每个所述终端运行同一待测试系统软件的升级前版本和升级后版本的两个终端在各自运行的版本下采集相同菜单的相同页面的图像，包括：

根据终端执行所述待测试系统软件的执行环境获取对应的执行配置文件，所述执行配置文件包括截图开关参数、截图模式参数以及图像存储路径参数；

根据所述截图开关参数设置浏览器，设置浏览器在显示时消除由不同浏览器自身所存在的外观特征差异；

根据所述截图模式参数在所述待测试系统软件中插入截图操作，截取各菜单对应页面的指定位置的图像，且待测试系统软件的升级前版本和升级后版本分别在不同IE浏览器环境下执行，在页面加载完成后进行截图操作；

按照待测试系统软件的脚本文件名、待测试系统软件的名称、待测试系统软件的执行顺序号以及截图时间命名截取的图像，根据所述图像存储路径参数存储截取的图像；

对所述图像保存单元存储的所有图像进行压缩，按照终端编号、压缩时间以及压缩序号命名压缩包；

将压缩包传输给服务器。

7.如权利要求6所述的系统软件升级类应用的测试方法，其特征在于，分析各相同菜单的相同页面的图像对应的相似度，包括：

在所述服务器上，根据配置文件所指定的终端的编号，下载所述待测试系统软件的升级前版本和升级后版本对应的压缩包，对压缩包进行解压缩；

针对所述待测试系统软件的升级前版本和升级后版本对应的压缩包中相同菜单的相同页面的两幅图像，采集该两幅图像中每个像素的像素信息；

根据像素信息计算该两幅图像中相同像素的个数和不同像素的个数，根据相同像素的个数和不同像素的个数计算该两幅图像的相似度。

8.如权利要求7所述的系统软件升级类应用的测试方法，其特征在于，还包括：

在所述服务器上，将各相同菜单的相同页面的两幅图像对应的相似度与所述预设阈值进行比较，将相似度低于所述预设阈值的图像和相似度高于所述预设阈值的图像分别存放，得出比较结果；输出所述比较结果给用户。

9.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求5至8任一项所述的系统软件升级类应用的测试方法。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有执行权利要求5至8任一项所述的系统软件升级类应用的测试方法的计算机程序。