CN106569946A - 一种移动终端性能测试方法及系统 - Google Patents

Abstract

本发明公开一种移动终端性能测试方法，包括：记录所述移动终端的触摸屏检测到触摸动作时的起始点，并持续对所述触摸屏中的显示内容进行拍摄；对拍摄到的所述触摸屏中的显示内容进行图像识别，判断是否与目标图像稳定地匹配，所述目标图像是在所述触摸动作后所述触摸屏的预期显示内容；若稳定地匹配，则记录所述稳定地匹配对应的终止点；获得从所述起始点到所述终止点所用的时间，即为所述触摸屏的界面切换响应时间。本发明还提供了对应的系统，本发明实现了对移动终端的界面切换的自动测试，测试效率高，测试准确性高。

Description

一种移动终端性能测试方法及系统

技术领域

本发明涉及自动化测试技术领域，尤其涉及一种移动终端性能测试方法及系统。

背景技术

随着智能移动终端的迅速发展，用户越来越重视其性能体验，移动终端的性能测试也越来越被重视。传统的人工测试手段消耗大量的人力与时间，且测试过程的主观性很强，难以做到统一标准，已不能满足现在对移动终端测试的高效率、高标准的要求。

发明内容

本发明的目的在于，针对现有技术中的移动终端性能测试的上述不足，提供一种移动终端性能测试方法及系统。

本发明解决上述技术问题所采用的技术方案是提供了一种移动终端性能测试方法，包括：记录所述移动终端的触摸屏检测到触摸动作时的起始点，并持续对所述触摸屏中的显示内容进行拍摄；对拍摄到的所述触摸屏中的显示内容进行图像识别，判断是否与目标图像稳定地匹配，所述目标图像是在所述触摸动作后所述触摸屏的预期显示内容；若稳定地匹配，则记录所述稳定地匹配对应的终止点；获得从所述起始点到所述终止点所用的时间，即为所述触摸屏的界面切换响应时间。

其中，所述记录所述移动终端的触摸屏检测到触摸动作时的起始点包括：记录所述移动终端的触摸屏检测到触摸动作时的拍摄图像帧当前序号，记为第一序号；

所述记录所述稳定地匹配对应的终止点包括：记录所述稳定地匹配对应的拍摄图像帧当前序号，记为第二序号；

所述获得从所述起始点到所述终止点所用的时间包括：获得所述第一序号和所述第二序号之间的差值，求所述差值与拍摄帧率的商，即为所述从所述起始点到所述终止点所用的时间。

其中，所述对拍摄到的所述触摸屏中的显示内容进行图像识别的步骤包括：将拍摄到的所述触摸屏中的显示内容转换为灰度图像以得到各个像素点；计算转换后的灰度图像的相似度；判断转换后的灰度图像的相似度是否等于获取到的所述目标图像的识别度阈值，若是，则拍摄到的所述触摸屏中的显示内容正确识别。

其中，所述判断拍摄到的所述触摸屏中的显示内容是否与目标图像稳定地匹配的步骤包括：将拍摄到的所述触摸屏中的显示内容转换为灰度图像以得到各个像素点；计算相邻两图像帧的各像素点的差值的绝对值，并统计所述绝对值大于或等于获取到的所述目标图像的稳定性阈值的像素点的个数，其中，像素点的个数与其中一图像帧的像素点总数的比值小于预定值时，相邻两图像帧为稳定状态；获取相邻两图像帧为稳定状态的次数；判断所述相邻两帧图像为稳定状态的次数是否等于所述拍摄帧率与所述触摸屏的显示帧率的比值。

其中，获取所述目标图像的稳定性阈值的步骤包括：获取预定时间内的所有的所述目标图像；获取所有的所述目标图像的相邻两图像帧的临界值；选取最大的临界值以作为所述目标图像的稳定性阈值。

其中，所述获取所述目标图像的相邻两图像帧的临界值的步骤包括：将所述目标图像转换为灰度图像以得到各个像素点；统计相邻两图像帧的各个像素点的差值的绝对值，并按照升序排列的绝对值将对应的像素点个数排列到一维数组X[a]中；将其中一图像帧的像素点总数依次与X[x]作减法运算，其中，x＝0,1,2,…,i-1，并在与X[i-1]作减法运算后的剩余值与所述像素点总数的比值达到预定值时确认i为临界值。

其中，获取所述目标图像的识别度阈值的步骤包括：选取相似度区间，并获取预定时间内的所有的所述目标图像；对所述相似度区间依次进行n次变换以得到使所有的所述目标图像均被识别的最大阈值，其中，n为大于或等于5的正整数；确认所述最大阈值为所述目标图像的识别度阈值。

其中，所述对所述相似度区间依次进行n次变换以得到使所有的所述目标图像均被识别的最大阈值的步骤包括：将所有的所述目标图像转化为灰度图像以计算得到所述目标图像的相似度；判断所有的所述目标图像的相似度是否均大于所述相似度区间的最大值；若是，将所述相似度区间的最小值变成最大值与最小值的均值以对所述相似度区间进行一次迭代，若否，将所述相似度区间的最大值变成最大值与最小值的均值以对所述相似度区间进行一次迭代；重复判断以对一次迭代后的所述相似度区间进行二次迭代，直到对所述相似度区间完成n次迭代；获取n次迭代后的所述相似度区间的最大值，以作为最大阈值。

本发明解决上述技术问题所采用的另一技术方案是提高了一种移动终端性能测试系统，包括：

拍摄模块，用于记录所述移动终端的触摸屏检测到触摸动作时的起始点，并持续对所述触摸屏中的显示内容进行拍摄；

图像处理模块，用于对拍摄到的所述触摸屏中的显示内容进行图像识别，判断是否与目标图像稳定地匹配，所述目标图像是在所述触摸动作后所述触摸屏的预期显示内容；

所述拍摄模块还用于在稳定地匹配时，记录所述稳定地匹配对应的终止点；

计算模块，用于获得从所述起始点到所述终止点所用的时间，即为所述触摸屏的界面切换响应时间。

其中，所述拍摄模块具体用于记录所述移动终端的触摸屏检测到触摸动作时的拍摄图像帧当前序号，记为第一序号，并记录所述稳定地匹配对应的拍摄图像帧当前序号，记为第二序号；所述计算模块具体用于获得所述第一序号和所述第二序号之间的差值，求所述差值与拍摄帧率的商，即为所述从所述起始点到所述终止点所用的时间。

本发明的有益效果有：替代传统的人眼和人脑，实现对移动终端的界面切换的自动测试，测试效率高，测试准确性高。

附图说明

下面将结合附图及实施方式对本发明作进一步说明，附图中：

图1是本发明的移动终端性能测试方法实施例的流程图；

图2是本发明的获取目标图像的识别度阈值的部分流程图；

图3是本发明的获取目标图像的稳定性阈值的部分流程图；

图4是本发明的移动终端性能测试系统第一实施例的结构示意图；

图5是本发明的移动终端性能测试系统第二实施例的结构示意图。

具体实施方式

为使本领域的技术人员更好地理解本发明的技术方案，下面结合附图和具体实施方式对本发明的技术方案做进一步详细描述。

如图1所示，是本发明的移动终端性能测试方法实施例的流程图，该方法实现对移动终端性能的自动测试，测试效率高，包括：

步骤S102：记录移动终端的触摸屏检测到触摸动作时的起始点，并持续对触摸屏中的显示内容进行拍摄；

步骤S104：对拍摄到的触摸屏中的显示内容进行图像识别，判断是否与目标图像稳定地匹配，目标图像是在触摸动作后触摸屏的预期显示内容；

步骤S106：若稳定地匹配，则记录稳定地匹配对应的终止点；

步骤S108：获得从起始点到终止点所用的时间，即为触摸屏的界面切换响应时间。

在步骤S102中，触摸动作由触摸介质对触摸屏进行相关操作而产生，触摸介质包括但不限于手指、触摸笔和机器手。通过压力传感器感应到的压力数据来检测触摸动作，在触摸动作完成的过程中，压力数据由小到大再由大道小变化。使用高速相机持续对触摸屏的显示内容进行拍摄，并且，高速相机以固定的拍摄帧率对触摸屏进行拍摄，其中，为了得到较好的拍摄效果，拍摄帧率大于触摸屏的显示帧率，且拍摄帧率是显示帧率的整数倍。同时，高速相机记录移动终端的触摸屏检测到触摸动作时的起始点，具体地，记录移动终端的触摸屏检测到触摸动作时的拍摄图像帧当前序号，记为第一序号，此时，压力传感器感应到的压力数据下降到最小。

在步骤S104中，通过对拍摄到的触摸屏的显示内容与目标图像进行处理，进而得到稳定匹配的终止点，具体地，对拍摄到的触摸屏中的显示内容进行图像识别，首先，将拍摄到的触摸屏中的显示内容转换为灰度图像以得到各个像素点，在本实施例中，将拍摄到的触摸屏中的显示内容转换为8位灰度图像，减少运行量，还可以转换为其他位数的灰度图像，如16位。随后，计算转换后的灰度图像的相似度，在本实施例中，计算灰度图像的相似度采用模板方式，即提取当前图像帧，将其他图像帧的像素点与当前图像帧进行比照，进而计算相似度，当然，还可以采用其他方式来计算相似度，例如基于图像中的特征点；最后，判断转换后的灰度图像的相似度是否等于获取到的目标图像的识别度阈值，若是，则拍摄到的触摸屏中的显示内容正确识别。

其中，目标图像的识别度阈值是指触摸动作后能被正确识别的相似度的临界值，目标图像的预期显示内容的相似度等于该相似度的临界值时，预期显示内容能被正确识别，相反，则不能被正确识别。在本实施例中，其获取的步骤包括：首先，选取相似度区间，并获取预定时间内的所有的目标图像，该预定时间可以为0.5s；随后，对相似度区间依次进行n次变换以得到使所有的目标图像均被识别的最大阈值，其中，n为大于或等于5的正整数；最后，确认最大阈值为目标图像的识别度阈值。在本实施例中，通过以预定时间内的所有目标图像作为识别的基准来确定识别度阈值，提高测试精度，减少测试误差。

具体地，在本实施例中，如图2所示，对相似度区间依次进行n次变换以得到使所有的目标图像均被识别的最大阈值包括：

步骤S201、将所有的目标图像转化为灰度图像以计算得到目标图像的相似度，在本实施例中，将拍摄到的触摸屏中的预期显示内容转换为8位灰度图像，减少运行量，还可以转换为其他位数的灰度图像，如16位。计算相似度已在上面进行说明，在此不再说明。

步骤S202、判断所有的目标图像的相似度是否均大于相似度区间的最大值；若是，执行步骤S203，若否，执行步骤S204。

步骤S203、将相似度区间的最小值变成最大值与最小值的均值以对相似度区间进行一次迭代，即一次迭代之后的相似度区间缩小。

步骤S204、将相似度区间的最大值变成最大值与最小值的均值以对相似度区间进行一次迭代，即一次迭代之后的相似度区间缩小。

随后，步骤S205、重复判断以对一次迭代后的相似度区间进行二次迭代，直到对相似度区间完成n次迭代；

随后，步骤S206、获取n次迭代后的相似度区间的最大值，以作为最大阈值，需要说明的是，为了提高最大阈值的精确度，n还可以为大于或等于5以上的正整数。

同时，具体地，判断拍摄到的触摸屏中的显示内容是否与目标图像稳定地匹配，首先，将拍摄到的触摸屏中的显示内容转换为灰度图像以得到各个像素点，在本实施例中，将拍摄到的触摸屏中的显示内容转换为8位灰度图像，减少运行量，还可以转换为其他位数的灰度图像，如16位，另外，为了后续步骤中遍历每个像素点，此时，还可以将灰度图像转换为一二维数组，即将每个像素点排列到二维数组中。随后，计算相邻两图像帧的各像素点的差值的绝对值，并统计绝对值大于或等于获取到的目标图像的稳定性阈值的像素点的个数，其中，像素点的个数与其中一图像帧的像素点总数的比值小于预定值时，相邻两图像帧为稳定状态，在本实施例中，预定值可以为0.001。随后，获取相邻两图像帧为稳定状态的次数；最后，判断相邻两帧图像为稳定状态的次数是否等于拍摄帧率与触摸屏的显示帧率的比值，若是，则拍摄到的触摸屏中的显示内容与目标图像稳定地匹配，此时，得到稳定地匹配所对应的终止点，若否，则拍摄到的触摸屏中的显示内容与目标图像不稳定地匹配，此时，重新对后续拍摄到的触摸屏中的显示内容进行处理。

其中，目标图像的稳定性阈值是指触摸动作后目标图像处于稳定状态的最小值。在本实施例中，目标图像的稳定性阈值的获取步骤包括：首先，获取预定时间内的所有的目标图像，该预定时间可以为2s；随后，获取所有的目标图像的相邻两图像帧的临界值；最后，选取最大的临界值以作为目标图像的稳定性阈值。在本实施例中，通过遍历预定时间内的目标图像，从而确定目标图像的稳定性阈值，避免稳定性阈值过大或者过小而引起的判断图像稳定地匹配失误，提高测试精度，减少测试误差。

具体地，如图3所示，获取目标图像的相邻两图像帧的临界值的步骤包括：

步骤S301、将目标图像转换为灰度图像以得到各个像素点。在本实施例中，将拍摄到的触摸屏中的显示内容转换为8位灰度图像，减少运行量，还可以转换为其他位数的灰度图像，如16位。其中，由于8位灰度图像，每个像素点的取值范围为[0,255]。

步骤S302、统计相邻两图像帧的各个像素点的差值的绝对值，并按照升序排列的绝对值将对应的像素点个数排列到一维数组X[a]中。其中，a为正整数，在本实施例中，a为256，如下表1所示，是某相邻两图像帧的各个像素点的差值的绝对值的分布，需要说明的是，差值的绝对值越小的像素点分布越多，差值的绝对值越大的像素点分布越少，并且，相邻两图像帧相差越大时，差值的绝对值越大的像素点分布越多。

表1

X[j]	0	1	2	3	4	5	…	255
									像素点个数	10000	2000	800	200	120	80	…	2

步骤S303、将其中一图像帧的像素点总数依次与X[x]作减法运算，其中，x＝0,1,2,…,i-1，并在与X[i-1]作减法运算后的剩余值与像素点总数的比值达到预定值时确认i为临界值。在本实施例中，该预定值为0.001。

在步骤S106中，使用高速相机记录稳定地匹配对应的终止点，具体地，记录稳定地匹配对应的拍摄图像帧当前序号，记为第二序号。

在步骤S108中，具体地，获得第一序号和第二序号之间的差值，求差值与拍摄帧率的商，即为从起始点到终止点所用的时间，进而测试出触摸屏的节目切换响应时间。

通过上述实施例的实施，通过自动记录触摸动作发生时的起始点和发生后的触摸屏的显示内容与预期显示内容稳定地匹配时的终止点，实现对移动终端的界面切换的自动测试。同时，通过与目标图像稳定地匹配，提高测试效率。进一步地，通过获取目标图像的相关数据，提高测试的准确度。

如图4所示，是本发明的移动终端性能测试系统第一实施例的结构示意图，该系统通过上述实施例中的方法对移动终端进行性能测试，包括拍摄模块410、图像处理模块420和计算模块430，其中：

拍摄模块410用于记录移动终端的触摸屏检测到触摸动作时的起始点，并持续对触摸屏中的显示内容进行拍摄。具体地，拍摄模块410记录移动终端的触摸屏检测到触摸动作时的拍摄图像帧当前序号，记为第一序号。

图像处理模块420用于对拍摄到的触摸屏中的显示内容进行图像识别，判断是否与目标图像稳定地匹配，目标图像是在触摸动作后触摸屏的预期显示内容。在本实施例中，图像处理模块420采用上述实施例的方法进行处理，在此不再说明。

拍摄模块410还用于在稳定地匹配时，记录稳定地匹配对应的终止点。具体地，拍摄模块410还记录稳定地匹配对应的拍摄图像帧当前序号，记为第二序号。

计算模块430用于获得从起始点到终止点所用的时间，即为触摸屏的界面切换响应时间。具体地，获得第一序号和第二序号之间的差值，求差值与拍摄帧率的商，即为从起始点到终止点所用的时间。

如图5所示，是本发明的移动终端性能测试系统第一实施例的结构示意图，包括高速相机510和终端520，其中，终端520包括处理器521、存储器522和显示器523，终端520可以为个人电脑，也可以为服务器。

高速相机510用于记录移动终端的触摸屏检测到触摸动作时的起始点，并持续对触摸屏中的显示内容进行拍摄。具体地，高速相机510记录移动终端的触摸屏检测到触摸动作时的拍摄图像帧当前序号，记为第一序号。

处理器521用于对拍摄到的触摸屏中的显示内容进行图像识别，判断是否与目标图像稳定地匹配，目标图像是在触摸动作后触摸屏的预期显示内容。在本实施例中，处理器521采用上述实施例的方法进行处理，在此不再说明。

高速相机510还用于在稳定地匹配时，记录稳定地匹配对应的终止点。具体地，高速相机510还记录稳定地匹配对应的拍摄图像帧当前序号，记为第二序号。

处理器521还用于获得从起始点到终止点所用的时间，即为触摸屏的界面切换响应时间。具体地，获得第一序号和第二序号之间的差值，求差值与拍摄帧率的商，即为从起始点到终止点所用的时间。

存储器522用于存储处理器进行相关操作的过程数据，以及目标图像的相关数据等，如目标图像的识别度阈值和稳定性阈值。

显示器523用于显示处理器进行相关操作后的结果数据等，如，触摸屏的界面切换响应时间。

以上仅为本发明的实施方式，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围。

Claims (10)

1.一种移动终端性能测试方法，其特征在于，包括：

记录所述移动终端的触摸屏检测到触摸动作时的起始点，并持续对所述触摸屏中的显示内容进行拍摄；

对拍摄到的所述触摸屏中的显示内容进行图像识别，判断是否与目标图像稳定地匹配，所述目标图像是在所述触摸动作后所述触摸屏的预期显示内容；

若稳定地匹配，则记录所述稳定地匹配对应的终止点；

获得从所述起始点到所述终止点所用的时间，即为所述触摸屏的界面切换响应时间。

2.根据权利要求1中所述的方法，其特征在于，

所述记录所述移动终端的触摸屏检测到触摸动作时的起始点包括：

记录所述移动终端的触摸屏检测到触摸动作时的拍摄图像帧当前序号，记为第一序号；

所述记录所述稳定地匹配对应的终止点包括：

记录所述稳定地匹配对应的拍摄图像帧当前序号，记为第二序号；

所述获得从所述起始点到所述终止点所用的时间包括：

获得所述第一序号和所述第二序号之间的差值，求所述差值与拍摄帧率的商，即为所述从所述起始点到所述终止点所用的时间。

3.根据权利要求1中所述的方法，其特征在于，

所述对拍摄到的所述触摸屏中的显示内容进行图像识别的步骤包括：

将拍摄到的所述触摸屏中的显示内容转换为灰度图像以得到各个像素点；

计算转换后的灰度图像的相似度；

判断转换后的灰度图像的相似度是否等于获取到的所述目标图像的识别度阈值，若是，则拍摄到的所述触摸屏中的显示内容正确识别。

4.根据权利要求1中所述的方法，其特征在于，

所述判断拍摄到的所述触摸屏中的显示内容是否与目标图像稳定地匹配的步骤包括：

将拍摄到的所述触摸屏中的显示内容转换为灰度图像以得到各个像素点；

计算相邻两图像帧的各像素点的差值的绝对值，并统计所述绝对值大于或等于获取到的所述目标图像的稳定性阈值的像素点的个数，其中，像素点的个数与其中一图像帧的像素点总数的比值小于预定值时，相邻两图像帧为稳定状态；

获取相邻两图像帧为稳定状态的次数；

判断所述相邻两帧图像为稳定状态的次数是否等于所述拍摄帧率与所述触摸屏的显示帧率的比值。

5.根据权利要求4中所述的方法，其特征在于，

获取所述目标图像的稳定性阈值的步骤包括：

获取预定时间内的所有的所述目标图像；

获取所有的所述目标图像的相邻两图像帧的临界值；

选取最大的临界值以作为所述目标图像的稳定性阈值。

6.根据权利要求5中所述的方法，其特征在于，所述获取所述目标图像的相邻两图像帧的临界值的步骤包括：

将所述目标图像转换为灰度图像以得到各个像素点；

统计相邻两图像帧的各个像素点的差值的绝对值，并按照升序排列的绝对值将对应的像素点个数排列到一维数组X[a]中；

将其中一图像帧的像素点总数依次与X[x]作减法运算，其中，x＝0,1,2,…,i-1，并在与X[i-1]作减法运算后的剩余值与所述像素点总数的比值达到预定值时确认i为临界值。

7.根据权利要求3中所述的方法，其特征在于，

获取所述目标图像的识别度阈值的步骤包括：

选取相似度区间，并获取预定时间内的所有的所述目标图像；

对所述相似度区间依次进行n次变换以得到使所有的所述目标图像均被识别的最大阈值，其中，n为大于或等于5的正整数；

确认所述最大阈值为所述目标图像的识别度阈值。

8.根据权利要求7中所述的方法，其特征在于，所述对所述相似度区间依次进行n次变换以得到使所有的所述目标图像均被识别的最大阈值的步骤包括：

将所有的所述目标图像转化为灰度图像以计算得到所述目标图像的相似度；

判断所有的所述目标图像的相似度是否均大于所述相似度区间的最大值；若是，将所述相似度区间的最小值变成最大值与最小值的均值以对所述相似度区间进行一次迭代，若否，将所述相似度区间的最大值变成最大值与最小值的均值以对所述相似度区间进行一次迭代；

重复判断以对一次迭代后的所述相似度区间进行二次迭代，直到对所述相似度区间完成n次迭代；

获取n次迭代后的所述相似度区间的最大值，以作为最大阈值。

9.一种移动终端性能测试系统，其特征在于，包括：

拍摄模块，用于记录所述移动终端的触摸屏检测到触摸动作时的起始点，并持续对所述触摸屏中的显示内容进行拍摄；

图像处理模块，用于对拍摄到的所述触摸屏中的显示内容进行图像识别，判断是否与目标图像稳定地匹配，所述目标图像是在所述触摸动作后所述触摸屏的预期显示内容；

所述拍摄模块还用于在稳定地匹配时，记录所述稳定地匹配对应的终止点；

计算模块，用于获得从所述起始点到所述终止点所用的时间，即为所述触摸屏的界面切换响应时间。

10.根据权利要求9中所述的系统，其特征在于，

所述拍摄模块具体用于记录所述移动终端的触摸屏检测到触摸动作时的拍摄图像帧当前序号，记为第一序号，并记录所述稳定地匹配对应的拍摄图像帧当前序号，记为第二序号；

所述计算模块具体用于获得所述第一序号和所述第二序号之间的差值，求所述差值与拍摄帧率的商，即为所述从所述起始点到所述终止点所用的时间。