CN104424093A - 一种兼容性测试方法及系统 - Google Patents

Abstract

本申请提供了一种兼容性测试方法及装置；方法包括：云端接收待测试程序兼容性测试的请求；所述云端在所述请求对应的设备上运行所述待测试程序；所述云端获取运行后所述待测试程序页面中各元素渲染后的外观属性数据；所述云端比对所述外观属性数据，将所述比对结果作为测试结果返回。本申请能够进行高效准确的兼容性测试。

Description

一种兼容性测试方法及系统

技术领域

本发明涉及软件领域，尤其涉及一种兼容性测试方法及系统。

背景技术

移动设备WebApp（基于Web技术，如Javascript、CSS、HTML等开发的应用程序）的开发者都需要解决WebApp的兼容性问题，虽然同一套WebApp软件能在大多数手机上运行，但各手机的细微差异有可能导致页面的差异，从而引发兼容性问题。而开发者往往需要在发布WebApp之前在各种分辨率，各种品牌的手机上进行兼容性测试，以此确保WebApp在大部分手机上展现一致。

现有的兼容性测试方法包括：

1）手动在设备上做兼容性测试。

由测试人员直接在真实设备上运行WebApp，并通过主观判断是否有兼容性问题。

手动在设备上做兼容性测试是最传统最直接的方法，但大部分的开发者，特别是小规模团队的开发者，没有足够齐全的设备来做兼容性测试以保证WebApp兼容性测试的覆盖面。另外，这种方法往往需要测试人员通过人为观察的方式来判断测试结果，无法做到完全精确和客观，也会导致难以实施自动化测试，很难降低人力成本。

2）手动在虚拟模拟器上做兼容性测试。

由测试人员直接在各设备的模拟器上运行WebApp，并通过主观判断是否有兼容性问题。

相比较于在真实设备上做兼容性测试，这种方法的好处在于可以通过模拟器扩大测试覆盖面，但缺点就是模拟器无法完全替代真实设备，往往一个WebApp在模拟器和真实设备上的展示是有差异的，这种差异就会带来兼容性测试的误差。

3）手动在云端远程设备上做兼容性测试。

由测试人员使用云端服务，通过远程控制的方式，把WebApp运行在远端的设备上，并通过主观判断是否有兼容性问题。

有很多供应商会在云端远程部署设备运行环境，然后通过远程桌面的方式提供给WebApp开发人员做兼容性测试，这种方式的缺点在于需要测试人员手动运行并观察WebApp兼容性情况，一方面网络的延时导致这种方式的体验差，不精确；另一方面提供完整运行时环境的维护成本很高，很难做到满足海量的测试需求。

发明内容

本申请要解决的技术问题是如何进行高效准确的兼容性测试。

为了解决上述问题，本申请提供了一种兼容性测试方法，包括：

云端接收待测试程序兼容性测试的请求；

所述云端在所述请求对应的设备上运行所述待测试程序；

所述云端获取运行后所述待测试程序页面中各元素渲染后的外观属性数据；

所述云端比对所述外观属性数据，将所述比对结果作为测试结果返回。

可选地，所述云端在所述请求对应的设备上运行所述待测试程序的步骤包括：

所述云端按照所述请求指定的一组或多组显示参数在所述请求对应的设备上运行所述待测试程序；

所述云端比对所述外观属性数据的步骤包括：

所述云端分别比对按照同一组显示参数运行所述待测试程序时获取的外观属性数据，得到各组显示参数对应的比对结果。

可选地，所述云端比对所述外观属性数据的步骤包括：

所述云端将从不同设备获取的所述外观属性数据相互进行比对，列出外观属性数据具有差异的元素；

或者

所述云端将所述外观属性数据与预设的标准外观属性数据进行比对，列出与预定的标准外观属性数据具有差异的元素。

可选地，所述待测试程序为WebApp；所述执行脚本是基于操作系统WebOS的应用安装规范和开源引擎WebKit调试协议生成的一组命令集合。

可选地，所述云端在所述请求对应的设备上运行所述待测试程序的步骤包括：

所述云端从所述请求中提取出待测试程序的路径、待测试程序的运行入口，并确定该请求对应的一个或多个设备；

根据所提取的待测试程序的路径、运行入口，以及所确定的设备生成执行脚本；

运行所述执行脚本，在所确定的设备上安装并运行所述待测试程序。

本申请还提供了一种兼容性测试装置，包括：

接收单元，用于接收待测试程序兼容性测试的请求；

运行单元，用于在所述请求对应的设备上运行所述待测试程序；

检测单元，用于获取运行后所述待测试程序页面中各元素渲染后的外观属性数据；

结果处理单元，用于比对所述外观属性数据，将比对结果作为测试结果返回。

可选地，所述运行单元在所述请求对应的设备上运行所述待测试程序是指：

所述运行单元分别按照所述请求指定的一组或多组显示参数在所述请求对应的设备上运行所述待测试程序；

所述结果处理单元比对所述外观属性数据是指：

所述结果处理单元分别比对按照同一组显示参数运行所述待测试程序时获取的外观属性数据，得到各组显示参数对应的比对结果。

可选地，所述结果处理单元比对所述外观属性数据是指：

所述结果处理单元将从不同设备获取的所述外观属性数据相互进行比对，列出外观属性数据具有差异的元素，或将所述外观属性数据与预设的标准外观属性数据进行比对，列出与预定的标准外观属性数据具有差异的元素。

可选地，所述待测试程序为WebApp；所述执行脚本是基于操作系统WebOS的应用安装规范和开源引擎WebKit调试协议生成的一组命令集合。

可选地，所述运行单元在所述请求对应的设备上运行所述待测试程序是指：

所述运行单元从所述请求中提取出待测试程序的路径、待测试程序的运行入口，并确定该请求对应的一个或多个设备；根据所提取的待测试程序的路径、运行入口，以及所确定的设备生成执行脚本；运行所述执行脚本，在所确定的设备上安装并运行所述待测试程序。

本申请的技术方案通过底层渲染的真实数据来代替人为主观的判断，可以做到客观和精确，并且可以覆盖到所有细节，不漏掉任何差异点；通过简单快捷的交互，自动化地给出最终结果，可以提高兼容性测试的效率和频率；而且可以促使兼容性测试成为一种自动运行的机制，以此保证项目开发中每个节点上都有兼容性测试的保障。本申请的优化方案能够整合测试设备资源，通过云部署的方式，可以做到一套测试设备服务于更多的测试人员，无需每个程序的测试人员配备所有机型的设备，以较为低廉的成本满足广大程序的兼容性测试需求，并且测试结果较为全面。

附图说明

图1为实施例一的兼容性测试方法的流程示意图；

图2为实施例一中兼容性报告的示意图。

具体实施方式

下面将结合附图及实施例对本申请的技术方案进行更详细的说明。

需要说明的是，如果不冲突，本申请实施例以及实施例中的各个特征可以相互结合，均在本申请的保护范围之内。另外，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。

在一个典型的配置中，进行兼容性测试的装置可包括多个处理器(CPU)、一个或多个输入/输出接口、网络接口和内存。

内存可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flashRAM)。内存是计算机可读介质的示例。

计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)，快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括非暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。

实施例一、一种兼容性测试方法，如图1所示，包括：

101、云端接收待测试程序兼容性测试的请求；

102、所述云端在所述请求对应的设备上运行所述待测试程序；

103、所述云端获取运行后所述待测试程序页面中各元素渲染后的外观属性数据；

104、所述云端比对所述外观属性数据，将所述比对结果作为测试结果返回。

本实施例中，所述请求对应的设备可以是指该请求中所指定的一个或多个型号的设备；当请求中没有指定型号时，所述请求对应的设备可以是指所述云端默认的一个或多个型号的设备。云端所准备的设备可包含不同型号的各种设备，从而使测试结果尽可能全面；当出现新型号的设备时，可以将新设备也添加进默认的设备。这里的型号包括设备的品牌名，设备在该品牌中的系列号或版本号等能唯一确定一类设备的信息。

所述渲染数据是引擎在渲染一个页面的各个元素时所基于的实际外观数值，反映了一个页面在渲染时各个元素的坐标位置，大小和颜色。因此，通过渲染数据可以真实全面的反映出各种行为后最终的实际外观。

本实施例提出了一种全新的兼容性测试的设计思路，通过渲染数据真实获知同一个程序页面在真实设备上运行后的真实外观数据，根据比较外观数据之间的差异来获得兼容性测试的结果，可以自动化地找出待测试程序在不同设备上的显示差异，以此检查和判断兼容性问题，更加高效便捷；并且可以使测试结果更加客观和精确，覆盖到所有细节，不漏掉任何差异点。

另外，本实施例在云端部署覆盖齐全的真实设备，由云端接收测试请求并运行程序，返回测试结果，可用一套设备为不同的开发人员进行多次兼容性测试，避免了设备不全的缺陷，而且提高了设备利用率，降低了成本。

本实施例中，云端可使用提供互联网服务的服务器集群实现，考虑到大规模访问的压力和安全，云端并不提供完整的设备运行时环境给测试人员，只接收测试请求，返回测试结果。

本实施例中，所述云端比对所述外观属性数据的步骤具体可以包括：

所述云端将从不同设备获取的所述外观属性数据相互进行比对，列出外观属性数据具有差异的元素；

或者

所述云端将所述外观属性数据与预设的标准外观属性数据进行比对，列出与预定的标准外观属性数据具有差异的元素。

所述标准外观属性数据可由测试人员通过对所述待测试程序实际运行或通过理论值获得；可以告知云端该标准外观属性数据的路径以供云端读取，或将该标准外观属性数据发送给云端。

本实施例的一种实施方式中，步骤102具体可以包括：

所述云端按照所述请求指定的一组或多组显示参数在所述请求对应的设备上运行所述待测试程序；

本实施方式中，所述显示参数可以包括以下任一种或任意组合：

分辨率、亮度、对比度等。

本实施方式的一种备选方案中，步骤104中所述云端比对所述外观属性数据的步骤具体可以包括：

所述云端分别比对按照同一组显示参数运行所述待测试程序时获取的外观属性数据，得到各组显示参数对应的比对结果。

本备选方案中，所述云端可以将所获取的外观属性数据进行分组，按照同一组显示参数运行所述待测试程序时获取的外观属性数据分在一组，比对时是对各组外观属性数据分别进行比对，从而可以得到各组显示参数对应的比对结果。

本备选方案可以使不同型号的设备在尽可能相同的条件下运行所述待测试程序，提高了数据之间的可比性。另外，测试人员可通过指定多组显示参数，来获得更为全面的测试结果。

本实施方式的另一种备选方案中，步骤104中所述云端比对所述外观属性数据的步骤具体可以包括：

所述云端在所获取的外观属性数据中，将型号相同的设备运行所述待测试程序时获取的外观属性数据分为一组；对各组外观属性数据分别进行比对，得到各组的比对结果。

本备选方案可以得到不同显示参数对运行所述待测试程序时外观属性数据的影响情况，比如可以指定多组亮度和对比度相同、仅分辨率不同的显示参数，从而了解不同分辨率对所述待测试程序的影响。

可综合应用上述两种备选方案，得到更为全面详细的比对结果。

本实施例的一种实施方式中，所述待测试程序可以为WebApp；

本实施方式中，步骤102具体可以包括：

所述云端从所述请求中提取出待测试程序的路径、待测试程序的运行入口，并确定该请求对应的一个或多个设备；

根据所提取的待测试程序的路径、运行入口，以及所确定的设备生成执行脚本；

运行所述执行脚本，在所确定的设备上安装并运行所述待测试程序。

本实施方式中，当所述待测试程序为WebApp时，所述执行脚本可以是基于操作系统WebOS的应用安装规范和开源引擎WebKit调试协议生成的一组命令集合，用于安装待测试程序并运行相应页面。

基于WebApp的特性，所述云端可以预存一个用于在对应类型的设备上安装并执行WebApp的原始执行脚本；收到兼容性测试的请求后，将提取的待测试程序的路径、运行入口填写进相应设备对应的原始执行脚本，即可得到在相应设备上安装并运行所述待测试程序的执行脚本。

其中，WebOS是以承载和运行WebApp为主的操作系统，WebKit是用于运行WebApp的开源引擎，IOS和Android的WebApp的运行环境都是基于WebKit构建的；WebKit把内部的调试能力定义为标准的协议——WebKit调试协议：基于此协议，第三方工具就能调试WebKit上运行的WebApp。

预定设备可以是WebOS设备，提供WebApp运行和测试的环境，由于是真实设备，所以能确保测试环境的实时性。另外，同一台设备可能会同时运行多个WebApp实例，可基于WebOS多进程机制，多个WebApp同时运行，互不干扰。

一个执行脚本的具体例子如下：

install webapp1

lanuch webapp1

fire event1

dump renderData

exit webapp1

以上执行脚本的具体执行过程如下：

install webapp1：基于WebOS安装WebApp的接口在指定机型上安装webapp1；

lanuch webapp1：基于WebOS启动WebApp的接口在指定机型上启动webapp1；

fire event1：基于WebKit的调试协议将event1转化为调试指令，并触发此事件，以此达到运行WebApp指定模块的目的；

dump renderData：生成渲染数据；

exit webapp1：退出应用webapp1。

本实施方式中，所述外观属性数据可以但不限于以DOM（文档对象模型）树的结构表示。

DOM是表示HTML中元素的模型，WebApp中所有元素都是以DOM为模型来表示，是所有HTML渲染设备通用的模型；一个以DOM树表示渲染后外观属性数据的例子如下：

可以看出，上面这段外观属性数据反映了一个页面在渲染时各个元素的坐标位置，大小和颜色。

本实施例的一种实施方式中，所述测试结果中可以包括：

所运行的待测试程序、运行所述待测试程序的显示参数、差异元素的名称及类型、差异点的大小、存在兼容性问题的设备型号、运行页面截图等。

当存在标准外观属性数据时，如果一个设备运行所述待测试程序得到的外观属性数据与该标准外观属性数据不同，则该设备的型号就是存在兼容性问题的设备型号，和标准外观属性数据不同的元素即差异元素，可以将相应元素的标准外观属性数据也放在兼容性报告中作为参考。当获取了多个型号的设备运行同一个待测试程序的外观属性数据时，如果一个设备的外观属性数据与其它设备均不同，则可以将该设备的型号视为存在兼容性问题的设备型号，和其它设备的外观属性数据不同的元素即差异元素，可以将其它型号设备中相应元素的外观属性数据也放在兼容性报告中作为参考。

所述测试结果可以但不限于表现为兼容性报告的样式，如图2所示；测试结果还可以将差异点反馈到实际的DOM节点，从而能直观地告诉测试人员具体是哪个元素在哪台设备上经过哪个事件后会有显示的差异。

本实施例的一个具体例子中，所述云端为云测试服务器，为测试人员提供云服务；该例子中的兼容性测试过程包括如下的步骤301～307。

301、测试人员使用云服务提交兼容性测试申请和WebApp运行入口。

302、云测试服务器根据测试人员提交的申请和WebApp运行入口生成执行脚本。

303、云测试服务器运行执行脚本在对应的移动设备上安装并运行WebApp。

304、在移动设备上运行渲染WebApp中需要测试的页面，并生成渲染数据，云测试服务器获取该渲染数据。

305、云测试服务器收集渲染数据，进行相应的数据筛选和过滤后，生成兼容性测试的数据来源。

306、云测试服务器对比分析各设备产生的渲染数据，生成兼容性测试报告。

307、云测试服务器返回测试报告给提交测试需求的测试人员。

实施例二、一种兼容性测试装置，包括：

接收单元，用于接收待测试程序兼容性测试的请求；

运行单元，用于在所述请求对应的设备上运行所述待测试程序；

检测单元，用于获取运行后所述待测试程序页面中各元素渲染后的外观属性数据；

结果处理单元，用于比对所述外观属性数据，将比对结果作为测试结果返回。

本实施例的装置可以为云端的装置，也可以集成在云端已有的服务器上。

本实施例的一种实施方式中，所述运行单元在所述请求对应的设备上运行所述待测试程序具体可以是指：

所述运行单元分别按照所述请求指定的一组或多组显示参数在所述请求对应的设备上运行所述待测试程序；

所述结果处理单元比对所述外观属性数据是指：

所述结果处理单元分别比对按照同一组显示参数运行所述待测试程序时获取的外观属性数据，得到各组显示参数对应的比对结果。

本实施例的一种实施方式中，所述结果处理单元比对所述外观属性数据是指：

所述结果处理单元将从不同设备获取的所述外观属性数据相互进行比对，列出外观属性数据具有差异的元素，或将所述外观属性数据与预设的标准外观属性数据进行比对，列出与预定的标准外观属性数据具有差异的元素。

本实施例的一种实施方式中，所述待测试程序可以为WebApp；所述执行脚本是基于操作系统WebOS的应用安装规范和开源引擎WebKit调试协议生成的一组命令集合。

该实施方式中，所述运行单元在所述请求对应的设备上运行所述待测试程序是指：

所述运行单元从所述请求中提取出待测试程序的路径、待测试程序的运行入口，并确定该请求对应的一个或多个设备；根据所提取的待测试程序的路径、运行入口，以及所确定的设备生成执行脚本；运行所述执行脚本，在所确定的设备上安装并运行所述待测试程序。

本实施例的一种实施方式中，所述外观属性数据可以但不限于以文档对象模型树的结构表示。

本领域普通技术人员可以理解上述方法中的全部或部分步骤可通过程序来指令相关硬件完成，所述程序可以存储于计算机可读存储介质中，如只读存储器、磁盘或光盘等。可选地，上述实施例的全部或部分步骤也可以使用一个或多个集成电路来实现。相应地，上述实施例中的各模块/单元可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。本申请不限制于任何特定形式的硬件和软件的结合。

当然，本申请还可有其他多种实施例，在不背离本申请精神及其实质的情况下，熟悉本领域的技术人员当可根据本申请作出各种相应的改变和变形，但这些相应的改变和变形都应属于本申请的权利要求的保护范围。

Claims (10)

1.一种兼容性测试方法，包括：

云端接收待测试程序兼容性测试的请求；

所述云端在所述请求对应的设备上运行所述待测试程序；

所述云端获取运行后所述待测试程序页面中各元素渲染后的外观属性数据；

所述云端比对所述外观属性数据，将所述比对结果作为测试结果返回。

2.如权利要求1所述的方法，其特征在于，所述云端在所述请求对应的设备上运行所述待测试程序的步骤包括：

所述云端按照所述请求指定的一组或多组显示参数在所述请求对应的设备上运行所述待测试程序；

所述云端比对所述外观属性数据的步骤包括：

所述云端分别比对按照同一组显示参数运行所述待测试程序时获取的外观属性数据，得到各组显示参数对应的比对结果。

3.如权利要求1所述的方法，其特征在于，所述云端比对所述外观属性数据的步骤包括：

所述云端将从不同设备获取的所述外观属性数据相互进行比对，列出外观属性数据具有差异的元素；

或者

所述云端将所述外观属性数据与预设的标准外观属性数据进行比对，列出与预定的标准外观属性数据具有差异的元素。

4.如权利要求1到3中任一项所述的方法，其特征在于：

所述待测试程序为WebApp；所述执行脚本是基于操作系统WebOS的应用安装规范和开源引擎WebKit调试协议生成的一组命令集合。

5.如权利要求4所述的方法，其特征在于，所述云端在所述请求对应的设备上运行所述待测试程序的步骤包括：

所述云端从所述请求中提取出待测试程序的路径、待测试程序的运行入口，并确定该请求对应的一个或多个设备；

根据所提取的待测试程序的路径、运行入口，以及所确定的设备生成执行脚本；

运行所述执行脚本，在所确定的设备上安装并运行所述待测试程序。

6.一种兼容性测试装置，其特征在于，包括：

接收单元，用于接收待测试程序兼容性测试的请求；

运行单元，用于在所述请求对应的设备上运行所述待测试程序；

检测单元，用于获取运行后所述待测试程序页面中各元素渲染后的外观属性数据；

结果处理单元，用于比对所述外观属性数据，将比对结果作为测试结果返回。

7.如权利要求6所述的装置，其特征在于，所述运行单元在所述请求对应的设备上运行所述待测试程序是指：

所述运行单元分别按照所述请求指定的一组或多组显示参数在所述请求对应的设备上运行所述待测试程序；

所述结果处理单元比对所述外观属性数据是指：

所述结果处理单元分别比对按照同一组显示参数运行所述待测试程序时获取的外观属性数据，得到各组显示参数对应的比对结果。

8.如权利要求6所述的装置，其特征在于，所述结果处理单元比对所述外观属性数据是指：

所述结果处理单元将从不同设备获取的所述外观属性数据相互进行比对，列出外观属性数据具有差异的元素，或将所述外观属性数据与预设的标准外观属性数据进行比对，列出与预定的标准外观属性数据具有差异的元素。

9.如权利要求6到8中任一项所述的装置，其特征在于：

所述待测试程序为WebApp；所述执行脚本是基于操作系统WebOS的应用安装规范和开源引擎WebKit调试协议生成的一组命令集合。

10.如权利要求9所述的装置，其特征在于，所述运行单元在所述请求对应的设备上运行所述待测试程序是指：

所述运行单元从所述请求中提取出待测试程序的路径、待测试程序的运行入口，并确定该请求对应的一个或多个设备；根据所提取的待测试程序的路径、运行入口，以及所确定的设备生成执行脚本；运行所述执行脚本，在所确定的设备上安装并运行所述待测试程序。