CN110888812A - 终端页面的响应时间的测试系统及测试方法 - Google Patents

终端页面的响应时间的测试系统及测试方法 Download PDF

Info

Publication number
CN110888812A
CN110888812A CN201911172459.9A CN201911172459A CN110888812A CN 110888812 A CN110888812 A CN 110888812A CN 201911172459 A CN201911172459 A CN 201911172459A CN 110888812 A CN110888812 A CN 110888812A
Authority
CN
China
Prior art keywords
pictures
page jump
response time
module
page
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201911172459.9A
Other languages
English (en)
Other versions
CN110888812B (zh
Inventor
田家扬
蒋嵩
汪绩宁
王南
刘培扬
张益斌
何丽冰
冯雪
朱夕辉
戴瑞东
赵熠阳
阚睿
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
State Nuclear Power Automation System Engineering Co Ltd
Original Assignee
State Nuclear Power Automation System Engineering Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by State Nuclear Power Automation System Engineering Co Ltd filed Critical State Nuclear Power Automation System Engineering Co Ltd
Priority to CN201911172459.9A priority Critical patent/CN110888812B/zh
Publication of CN110888812A publication Critical patent/CN110888812A/zh
Application granted granted Critical
Publication of CN110888812B publication Critical patent/CN110888812B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3672—Test management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3457—Performance evaluation by simulation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/14—Image acquisition
    • G06V30/148—Segmentation of character regions
    • G06V30/153—Segmentation of character regions using recognition of characters or words
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Image Analysis (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种终端页面的响应时间的测试系统及测试方法，所述测试系统包括：虚拟鼠标构建模块，用于构建虚拟鼠标；触发模块，用于利用虚拟鼠标在预设位置自动触发页面跳转操作；图片采集模块，用于在页面跳转操作被触发时持续拍摄所述终端页面，以得到多张图片，多张图片按照时间先后排序，具有相同页面内容的图片具有相同的特征标识；检测模块，用于按照所述排序依次对相邻的两张所述图片的特征标识进行检测；当相邻的两张所述图片的特征标识不相同时，调用计算模块，所述计算模块用于利用相邻的两张所述图片的时间差计算所述响应时间。本发明通过自动化的抓图对比方式，取代了人工点击和对比，有效节约了人力，提高了测试效率和准确度。

Description

终端页面的响应时间的测试系统及测试方法
技术领域
本发明涉及视觉检测领域，尤其涉及一种终端页面的响应时间的测试系统及测试方法。
背景技术
终端的图形用户界面是应用程序与用户交互的主要方式，图形用户界面为用户提供了各式各样的终端页面内容，用户利用鼠标或轨迹球在图形用户界面上的点击操作伴随着终端页面的跳转和变换，而终端页面的跳转时间(即响应时间)直接关系到用户的使用体验，因而响应时间测试是图形用户界面在推广应用前的重要测试内容。
随着机器视觉技术的迅猛发展，现有技术中，通常在人工点击页面跳转按钮时，利用相机对页面跳转的过程进行高频率的拍摄，再对拍摄的图片进行人工校验和对比，比较当前页面从开始发生跳转到稳定转换为另一个页面所用的时间，以此来衡量页面响应的速度。通过人工判断页面跳转过程中画面的变化情况，不仅很容易受到光线、观察角度或其他主观因素的影响，造成结果偏差，而且还会耗费大量的时间成本，严重影响了测试的效率。
发明内容
本发明要解决的技术问题是为了克服现有技术中通过人工测试页面响应时间的误差较大且效率低的缺陷，提供一种终端页面的响应时间的测试系统及测试方法。
本发明是通过下述技术方案来解决上述技术问题：
一种终端页面跳转的响应时间的测试系统，所述测试系统包括：
虚拟鼠标构建模块，用于构建虚拟鼠标；
触发模块，用于利用所述虚拟鼠标在预设位置自动触发页面跳转操作；
图片采集模块，用于在所述页面跳转操作被触发时持续拍摄所述终端页面，以得到多张图片，多张所述图片按照时间先后排序，具有相同页面内容的所述图片具有相同的特征标识；
检测模块，用于按照所述排序依次对相邻的两张所述图片的特征标识进行检测；
当相邻的两张所述图片的特征标识不相同时，调用计算模块，所述计算模块用于利用相邻的两张所述图片的时间差计算所述响应时间。
较佳地，不同的所述页面跳转操作分别对应不同的虚拟按钮，不同的所述虚拟按钮分别具有不同的所述预设位置；
所述触发模块用于接收用户配置的所述预设位置，以及控制所述虚拟鼠标移动至所述预设位置对应的所述虚拟按钮上并点击，以触发所述虚拟按钮对应的所述页面跳转操作。
较佳地，所述图片采集模块在所述页面跳转操作被触发时持续拍摄所述终端页面，以得到页面跳转视频，以及将所述页面跳转视频按帧转换为多张图片；所述计算模块用于利用所述特征标识变化之后的第一帧图片的时间帧减去所述特征标识变化之前的最后一帧图片的时间帧，以得到所述响应时间；
或者，
所述图片采集模块在所述页面跳转操作被触发时持续拍摄所述终端页面，以生成多张相互独立的图片；所述计算模块用于利用所述特征标识变化之后的第一张图片的生成时间减去所述特征标识变化之前的最后一张图片的生成时间，以得到所述响应时间。
较佳地，所述测试系统还包括区域划分模块以及特征提取模块；
所述区域划分模块用于利用掩膜对多张所述图片分别划分出待识别区域，所述待识别区域包括所述特征标识；
所述特征提取模块用于对所述待识别区域进行OCR(光学字符)识别，以获取每张图片对应的所述特征标识。
较佳地，所述触发模块、所述检测模块以及所述计算模块通过PC(个人电脑)端的LabView(一种程序开发环境)构建，所述PC端包括USB(通用串行总线)串口，所述LabView包括Visa(虚拟仪器软件体系结构)串口；
所述虚拟鼠标构建模块通过所述USB串口与所述PC端通信连接，所述触发模块通过所述Visa串口接收所述虚拟鼠标的位置信息。
较佳地，所述终端页面由SGUI(图形用户接口)生成。
一种终端页面跳转的响应时间的测试方法，所述测试方法包括：
构建虚拟鼠标；
利用所述虚拟鼠标在预设位置自动触发页面跳转操作，并在所述页面跳转操作被触发时持续拍摄所述终端页面，以得到多张图片，多张所述图片按照时间先后排序，具有相同页面内容的所述图片具有相同的特征标识；
按照所述排序依次对相邻的两张所述图片的特征标识进行检测；
当相邻的两张所述图片的特征标识不相同时，利用相邻的两张所述图片的时间差计算所述响应时间。
较佳地，不同的所述页面跳转操作分别对应不同的虚拟按钮，不同的所述虚拟按钮分别具有不同的所述预设位置；
所述利用所述虚拟鼠标在预设位置自动触发页面跳转操作的步骤包括：
接收用户配置的所述预设位置；
控制所述虚拟鼠标移动至所述预设位置对应的所述虚拟按钮上并点击，以触发所述虚拟按钮对应的所述页面跳转操作。
较佳地，所述在所述页面跳转操作被触发时持续拍摄所述终端页面，以得到多张图片的步骤包括：在所述页面跳转操作被触发时持续拍摄所述终端页面，以得到页面跳转视频；将所述页面跳转视频按帧转换为多张图片；
所述利用相邻的两张所述图片的时间差计算所述响应时间的步骤包括：
利用所述特征标识变化之后的第一帧图片的时间帧减去所述特征标识变化之前的最后一帧图片的时间帧，以得到所述响应时间；
或者，
所述在所述页面跳转操作被触发时持续拍摄所述终端页面，以得到多张图片的步骤包括：
所述在所述页面跳转操作被触发时持续拍摄所述终端页面，以生成多张相互独立的图片；
所述利用相邻的两张所述图片的时间差计算所述响应时间的步骤包括：
利用所述特征标识变化之后的第一张图片的生成时间减去所述特征标识变化之前的最后一张图片的生成时间，以得到所述响应时间。
较佳地，所述按照所述排序依次对相邻的两张所述图片的特征标识进行检测的步骤之前还包括：
利用掩膜对多张所述图片分别划分出待识别区域，所述待识别区域包括所述特征标识；
对所述待识别区域进行OCR识别，以获取每张图片对应的所述特征标识。
在符合本领域常识的基础上，上述各优选条件，可任意组合，即得本发明各较佳实例。
本发明的积极进步效果在于：本发明提供的终端页面的响应时间的测试系统及测试方法通过构建虚拟鼠标来模拟真实鼠标的点击操作，利用所述虚拟鼠标在预设位置自动触发页面跳转操作；接下来，在所述页面跳转操作被触发时持续拍摄所述终端页面，以得到多张图片，根据前一张图片的特征标识与紧邻的后一张图片的特征标识是否相同来自动判断页面是否发生跳转，当页面发生跳转后，可以自动计算出页面跳转的响应时间。由此，通过自动化的抓图对比方式，取代了人工点击和对比，有效节约了人力，提高了测试效率和准确度。
附图说明
图1为本发明实施例1的终端页面跳转的响应时间的测试系统的结构框图。
图2为本发明实施例2的终端页面跳转的响应时间的测试系统的结构框图。
图3为本发明实施例3的终端页面跳转的响应时间的测试方法的流程图。
图4为本发明实施例4的终端页面跳转的响应时间的测试方法的流程图。
具体实施方式
下面通过实施例的方式进一步说明本发明，但并不因此将本发明限制在所述的实施例范围之中。
实施例1
一种终端页面跳转的响应时间的测试系统，如图1所示，所述测试系统1包括：
虚拟鼠标构建模块11，用于构建虚拟鼠标；所述虚拟鼠标可以是虚拟轨迹球。
触发模块12，用于利用所述虚拟鼠标在预设位置自动触发页面跳转操作；
本实施例中，在所述虚拟鼠标完成一次自动触发的页面跳转操作后，可以对虚拟鼠标进行复位，使得虚拟鼠标停留在预设的初始位置，例如，屏幕的左上角。
进一步地，所述触发模块12可以接收用户配置的所述预设位置，以及控制所述虚拟鼠标移动至所述预设位置对应的所述虚拟按钮上并点击，以触发所述虚拟按钮对应的所述页面跳转操作。
具体地，由于不同的所述页面跳转操作分别对应不同的虚拟按钮，不同的所述虚拟按钮分别具有不同的所述预设位置，在本实施例中，可以利用工控机构建虚拟鼠标，工控机的人机交互界面可上可以设置不同的控制虚拟鼠标移动的控制按钮，例如可以是初始化、停止、发送、PMS NAVIGATION、SAFE GUARDS、RCS VARIABLES、RCS HD VNT SOFT CTRL等。PMS NAVIGATION、SAFE GUARDS、RCS VARIABLES、RCS HD VNT SOFT CTRL这四个控制按钮可以分别控制虚拟鼠标移动到一个预设坐标位置的虚拟按钮上。
另外，在工控机的人机交互界面上，还可以设置字符串输入框，用户可以在字符串输入框中输入自定义的坐标，再点击发送按钮后，鼠标便可以移动到用户自定义坐标所对应的虚拟按钮上，以触发该虚拟按钮对应的页面跳转操作。
图片采集模块13，用于在所述页面跳转操作被触发时持续拍摄所述终端页面，以得到多张图片，多张所述图片按照时间先后排序，具有相同页面内容的所述图片具有相同的特征标识；相应地，具有不同页面内容的所述图片具有不同的特征标识，也可以说，每一个页面都具有唯一的特征标识。
检测模块14，用于按照所述排序依次对相邻的两张所述图片的特征标识进行检测；
当相邻的两张所述图片的特征标识不相同时，调用计算模块15，所述计算模块15用于利用相邻的两张所述图片的时间差计算所述响应时间。
优选地，所述终端页面可以由SGUI(图形用户接口)生成。
本实施例中，可以利用视频采集卡(例如天创恒达的TC-540N型号的视频采集卡)采集页面跳转过程的图像，在这种情况下，所述图片采集模块13在所述页面跳转操作被触发时持续拍摄所述终端页面，以得到页面跳转视频，以及将所述页面跳转视频按帧转换为多张图片(例如，每秒视频转化为60帧图片)；所述计算模块15用于利用所述特征标识变化之后的第一帧图片的时间帧减去所述特征标识变化之前的最后一帧图片的时间帧，以得到所述响应时间。
另外，还可以利用相机直接拍摄所述页面跳转过程中的图像，在这种情况下，所述图片采集模块13在所述页面跳转操作被触发时持续拍摄所述终端页面，以生成多张相互独立的图片。所述计算模块15用于利用所述特征标识变化之后的第一张图片的生成时间减去所述特征标识变化之前的最后一张图片的生成时间，以得到所述响应时间。
所述图片可以以其所属的时间帧来命名或者以其生成时间来命名，便于查看时间的变化，利于后续响应时间的计算。完成命名之后的图片被存储在指定的文件夹下，所述文件夹具有指定的读取基路径。
可以理解的是，本实施例中的测试系统1可以用于多种领域的人机交互页面的响应时间的测试，例如：核电仿真领域、风电仿真领域等，本实施例对其应用领域不作具体限制。在检测页面跳转的响应时间的同时，还可以控制图片采集模块13在虚拟鼠标开始移动时便开始采集图片信息，从而还能够得到鼠标的移动时间，通过检测开始OCR识别到OCR识别结束所需的时间还可以得到OCR识别处理时间，所述鼠标的移动时间、页面跳转的响应时间以及OCR识别处理时间的加和可以从整体上反应整个系统的运行情况。
本实施例提供的终端页面跳转的响应时间的测试系统通过自动化的抓图对比方式，取代了人工点击和对比，有效节约了人力，提高了测试效率和准确度。
实施例2
一种终端页面跳转的响应时间的测试系统，如图2所示，所述测试系统是在实施例1基础上的进一步改进。
具体地，所述测试系统1还包括区域划分模块16以及特征提取模块17；
所述区域划分模块16用于利用掩膜对多张所述图片分别划分出待识别区域，所述待识别区域包括所述特征标识；所述特征提取模块17用于对所述待识别区域进行OCR(光学字符)识别，以获取每张图片对应的所述特征标识。
所述区域划分模块16可以从前述的基路径指向的文件夹中读取存储的图片。
在进行批量的图片识别之前，可以对特征提取模块进行Vision OCR Training(文字识别训练)，生成*.abc类型的文件，以用于对所述图片中的待识别区域进行OCR识别与判断。
在对特征标识进行识别的过程中，还可以利用现有技术中的滤波算法去除识别错误的图片，以排除错误识别以及个别字符无法识别造成的误差，从而降低后续计算过程中的噪声和干扰，提高了准确度。
本实施例中，所述触发模块12、所述检测模块14以及所述计算模块15通过PC(个人电脑)端的LabView(一种程序开发环境)构建，所述触发模块12、所述检测模块14以及所述计算模块15可以并行执行多个页面跳转操作，例如，若触发模块12以及检测模块14已经完成了当前页面跳转操作的响应时间测试中的信号触发以及特征标识识别的工作，工作流程已经转入计算模块15，由计算模块15对响应时间进行计算，在计算模块15执行当前页面跳转操作的响应时间计算时，已经空闲的触发模块12以及检测模块14可以继续进行下一个页面跳转操作的响应时间测试中的信号触发以及特征标识识别的工作。
本实施例中，可以通过LabView平台中的Vision图像处理开发包，配合VisionAcquisition Software模块与Vision Development Module模块来完成触发模块12、检测模块14以及计算模块15等软件模块的构建。所述PC端包括USB(通用串行总线)串口，所述LabView包括Visa(虚拟仪器软件体系结构)串口。所述虚拟鼠标构建模块11通过所述USB串口与所述PC端通信连接，所述触发模块12通过所述Visa串口接收所述虚拟鼠标的位置信息。
本实施例中，所述PC(个人电脑)端可以通过调整电脑内部硬件配置实现工作站的功能。所述图片采集模块13可以利用RS232(一种串行通信接口标准)类型的电缆线，将采集的图片传输至所述起到工作站作用的PC端。
本实施例提供的终端页面跳转的响应时间的测试系统通过滤波算法降低了误差，并且通过掩膜的方式来提高识别效率，从而进一步优化了响应时间测试的整体流程，大大提高了测试质量，填补了图形用户界面的自动化工厂测试的空白。
实施例3
本实施例提供一种终端页面跳转的响应时间的测试方法，如图3所示，所述测试方法可以包括如下步骤：
步骤S1：构建虚拟鼠标；所述虚拟鼠标可以通过模拟轨迹球来实现。
步骤S2：利用所述虚拟鼠标在预设位置自动触发页面跳转操作，并在所述页面跳转操作被触发时持续拍摄所述终端页面，以得到多张图片，多张所述图片按照时间先后排序，具有相同页面内容的所述图片具有相同的特征标识。
本实施例中，在所述虚拟鼠标完成一次自动触发的页面跳转操作后，可以对虚拟鼠标进行复位，使得虚拟鼠标停留在预设的初始位置，例如，屏幕的左上角。
本实施例中，可以接收用户配置的所述预设位置，控制所述虚拟鼠标移动至所述预设位置对应的所述虚拟按钮上并点击，以触发所述虚拟按钮对应的所述页面跳转操作。
具体地，由于不同的所述页面跳转操作分别对应不同的虚拟按钮，不同的所述虚拟按钮分别具有不同的所述预设位置，在本实施例中，可以利用工控机构建虚拟鼠标，工控机的人机交互界面可上可以设置不同的控制虚拟鼠标移动的控制按钮，例如可以是初始化、停止、发送、PMS NAVIGATION、SAFE GUARDS、RCS VARIABLES、RCS HD VNT SOFT CTRL等。PMS NAVIGATION、SAFE GUARDS、RCS VARIABLES、RCS HD VNT SOFT CTRL这四个控制按钮可以分别控制虚拟鼠标移动到一个预设坐标位置的虚拟按钮上。
另外，在工控机的人机交互界面上，还可以设置字符串输入框，用户可以在字符串输入框中输入自定义的坐标，再点击发送按钮后，鼠标便可以移动到用户自定义坐标所对应的虚拟按钮上，以触发该虚拟按钮对应的页面跳转操作。
步骤S3：按照所述排序依次对相邻的两张所述图片的特征标识进行检测；
当相邻的两张所述图片的特征标识不相同时，表明页面发生了跳转，则执行步骤S4：利用相邻的两张所述图片的时间差计算所述响应时间。
当相邻的两张所述图片的特征标识相同时，表明页面还没有完成跳转，则继续执行步骤S3，即将后一次的结果不断与前一次的结果进行匹配，直到完成页面跳转。
优选地，所述终端页面可以由SGUI(图形用户接口)生成。
本实施例中，可以利用视频采集卡(例如天创恒达的TC-540N型号的视频采集卡)采集页面跳转过程的图像，基于此，所述步骤S2可以包括：在所述页面跳转操作被触发时持续拍摄所述终端页面，以得到页面跳转视频；将所述页面跳转视频按帧转换为多张图片；在这种情况下，所述步骤S4可以包括：利用所述特征标识变化之后的第一帧图片的时间帧减去所述特征标识变化之前的最后一帧图片的时间帧，以得到所述响应时间。
另外，还可以利用相机直接拍摄所述页面跳转过程中的图像，基于此，所述步骤S2可以包括：所述在所述页面跳转操作被触发时持续拍摄所述终端页面，以生成多张相互独立的图片；在这种情况下，所述步骤S4可以包括：利用所述特征标识变化之后的第一张图片的生成时间减去所述特征标识变化之前的最后一张图片的生成时间，以得到所述响应时间。
所述图片可以以其所属的时间帧来命名或者以其生成时间来命名，便于查看时间的变化，利于后续响应时间的计算。完成命名之后的图片被存储在指定的文件夹下，所述文件夹具有指定的读取基路径。
可以理解的是，本实施例中的测试方法可以用于多种领域的人机交互页面的响应时间的测试，例如：核电仿真领域、风电仿真领域等，本实施例对其应用领域不作具体限制。在检测页面跳转的响应时间的同时，还可以控制图片采集模块在虚拟鼠标开始移动时便开始采集图片信息，从而还能够得到鼠标的移动时间，通过检测开始OCR识别到OCR识别结束所需的时间还可以得到OCR识别处理时间，所述鼠标的移动时间、页面跳转的响应时间以及OCR识别处理时间的加和可以从整体上反应整个系统的运行情况。
本实施例提供的终端页面跳转的响应时间的测试方法通过自动化的抓图对比方式，取代了人工点击和对比，有效节约了人力，提高了测试效率和准确度。
实施例4
本实施例提供一种终端页面跳转的响应时间的测试方法，如图4所示，该测试方法是在实施例3基础上的进一步改进。
进一步地，所述步骤S3之前还可以包括：
步骤S5：利用掩膜对多张所述图片分别划分出待识别区域，所述待识别区域包括所述特征标识；
步骤S6：对所述待识别区域进行OCR识别，以获取每张图片对应的所述特征标识。
在执行步骤S5之前，还可以从前述的基路径指向的文件夹中读取存储的图片。
本实施例中，在对特征标识进行识别的过程中，还可以利用现有技术中的滤波算法去除识别错误的图片，以排除错误识别以及个别字符无法识别造成的误差，从而降低后续计算过程中的噪声和干扰，提高了准确度。
本实施例提供的终端页面跳转的响应时间的测试系统通过滤波算法降低了误差，并且通过掩膜的方式来提高识别效率，从而进一步优化了响应时间测试的整体流程，大大提高了测试质量，填补了图形用户界面的自动化工厂测试的空白。
虽然以上描述了本发明的具体实施方式，但是本领域的技术人员应当理解，这仅是举例说明，本发明的保护范围是由所附权利要求书限定的。本领域的技术人员在不背离本发明的原理和实质的前提下，可以对这些实施方式做出多种变更或修改，但这些变更和修改均落入本发明的保护范围。

Claims (10)

1.一种终端页面跳转的响应时间的测试系统，其特征在于，所述测试系统包括：
虚拟鼠标构建模块，用于构建虚拟鼠标；
触发模块，用于利用所述虚拟鼠标在预设位置自动触发页面跳转操作；
图片采集模块，用于在所述页面跳转操作被触发时持续拍摄所述终端页面，以得到多张图片，多张所述图片按照时间先后排序，具有相同页面内容的所述图片具有相同的特征标识；
检测模块，用于按照所述排序依次对相邻的两张所述图片的特征标识进行检测；
当相邻的两张所述图片的特征标识不相同时，调用计算模块，所述计算模块用于利用相邻的两张所述图片的时间差计算所述响应时间。
2.如权利要求1所述的终端页面跳转的响应时间的测试系统，其特征在于，不同的所述页面跳转操作分别对应不同的虚拟按钮，不同的所述虚拟按钮分别具有不同的所述预设位置；
所述触发模块用于接收用户配置的所述预设位置，以及控制所述虚拟鼠标移动至所述预设位置对应的所述虚拟按钮上并点击，以触发所述虚拟按钮对应的所述页面跳转操作。
3.如权利要求1所述的终端页面跳转的响应时间的测试系统，其特征在于，
所述图片采集模块在所述页面跳转操作被触发时持续拍摄所述终端页面，以得到页面跳转视频，以及将所述页面跳转视频按帧转换为多张图片；所述计算模块用于利用所述特征标识变化之后的第一帧图片的时间帧减去所述特征标识变化之前的最后一帧图片的时间帧，以得到所述响应时间；
或者，
所述图片采集模块在所述页面跳转操作被触发时持续拍摄所述终端页面，以生成多张相互独立的图片；所述计算模块用于利用所述特征标识变化之后的第一张图片的生成时间减去所述特征标识变化之前的最后一张图片的生成时间，以得到所述响应时间。
4.如权利要求1所述的终端页面跳转的响应时间的测试系统，其特征在于，所述测试系统还包括区域划分模块以及特征提取模块；
所述区域划分模块用于利用掩膜对多张所述图片分别划分出待识别区域，所述待识别区域包括所述特征标识；
所述特征提取模块用于对所述待识别区域进行OCR识别，以获取每张图片对应的所述特征标识。
5.如权利要求1所述的终端页面跳转的响应时间的测试系统，其特征在于：所述触发模块、所述检测模块以及所述计算模块通过PC端的LabView构建，所述PC端包括USB串口，所述LabView包括Visa串口；
所述虚拟鼠标构建模块通过所述USB串口与所述PC端通信连接，所述触发模块通过所述Visa串口接收所述虚拟鼠标的位置信息。
6.如权利要求1所述的终端页面跳转的响应时间的测试系统，其特征在于：所述终端页面由SGUI生成。
7.一种终端页面跳转的响应时间的测试方法，其特征在于，所述测试方法包括：
构建虚拟鼠标；
利用所述虚拟鼠标在预设位置自动触发页面跳转操作，并在所述页面跳转操作被触发时持续拍摄所述终端页面，以得到多张图片，多张所述图片按照时间先后排序，具有相同页面内容的所述图片具有相同的特征标识；
按照所述排序依次对相邻的两张所述图片的特征标识进行检测；
当相邻的两张所述图片的特征标识不相同时，利用相邻的两张所述图片的时间差计算所述响应时间。
8.如权利要求7所述的终端页面跳转的响应时间的测试方法，其特征在于，不同的所述页面跳转操作分别对应不同的虚拟按钮，不同的所述虚拟按钮分别具有不同的所述预设位置；
所述利用所述虚拟鼠标在预设位置自动触发页面跳转操作的步骤包括：
接收用户配置的所述预设位置；
控制所述虚拟鼠标移动至所述预设位置对应的所述虚拟按钮上并点击，以触发所述虚拟按钮对应的所述页面跳转操作。
9.如权利要求7所述的终端页面跳转的响应时间的测试方法，其特征在于，
所述在所述页面跳转操作被触发时持续拍摄所述终端页面，以得到多张图片的步骤包括：在所述页面跳转操作被触发时持续拍摄所述终端页面，以得到页面跳转视频；将所述页面跳转视频按帧转换为多张图片；
所述利用相邻的两张所述图片的时间差计算所述响应时间的步骤包括：
利用所述特征标识变化之后的第一帧图片的时间帧减去所述特征标识变化之前的最后一帧图片的时间帧，以得到所述响应时间；
或者，
所述在所述页面跳转操作被触发时持续拍摄所述终端页面，以得到多张图片的步骤包括：
所述在所述页面跳转操作被触发时持续拍摄所述终端页面，以生成多张相互独立的图片；
所述利用相邻的两张所述图片的时间差计算所述响应时间的步骤包括：
利用所述特征标识变化之后的第一张图片的生成时间减去所述特征标识变化之前的最后一张图片的生成时间，以得到所述响应时间。
10.如权利要求7所述的终端页面跳转的响应时间的测试方法，其特征在于，
所述按照所述排序依次对相邻的两张所述图片的特征标识进行检测的步骤之前还包括：
利用掩膜对多张所述图片分别划分出待识别区域，所述待识别区域包括所述特征标识；
对所述待识别区域进行OCR识别，以获取每张图片对应的所述特征标识。
CN201911172459.9A 2019-11-26 2019-11-26 终端页面的响应时间的测试系统及测试方法 Active CN110888812B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911172459.9A CN110888812B (zh) 2019-11-26 2019-11-26 终端页面的响应时间的测试系统及测试方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911172459.9A CN110888812B (zh) 2019-11-26 2019-11-26 终端页面的响应时间的测试系统及测试方法

Publications (2)

Publication Number Publication Date
CN110888812A true CN110888812A (zh) 2020-03-17
CN110888812B CN110888812B (zh) 2023-11-07

Family

ID=69748800

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911172459.9A Active CN110888812B (zh) 2019-11-26 2019-11-26 终端页面的响应时间的测试系统及测试方法

Country Status (1)

Country Link
CN (1) CN110888812B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111708696A (zh) * 2020-06-15 2020-09-25 杭州明讯软件技术有限公司 一种移动终端应用自动化穿越测试方法及装置
CN113360398A (zh) * 2021-06-29 2021-09-07 平安普惠企业管理有限公司 混合应用程序测试方法、装置、设备及介质
CN113778887A (zh) * 2021-09-16 2021-12-10 厦门理工学院 软件测试装置及其软件测试方法

Citations (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050103854A1 (en) * 2003-11-13 2005-05-19 Metrologic Instruments, Inc. Hand-supportable digital imaging-based bar code symbol reader supporting narrow-area and wide-area modes of illumination and image capture
US20050246433A1 (en) * 2004-01-09 2005-11-03 Carrigan Brian J Method and apparatus for facilitating control of a target computer by a remote computer
US20080155515A1 (en) * 2006-12-21 2008-06-26 International Business Machines Association Method and System for Graphical User Interface Testing
KR100877727B1 (ko) * 2008-03-07 2009-01-08 주식회사 엠네스 이동통신 단말기의 기능 및 어플리케이션 검증 장치
US20130036331A1 (en) * 2010-04-06 2013-02-07 Huawei Technologies Co., Ltd. Debugging method and debugging device
US20130111414A1 (en) * 2011-10-31 2013-05-02 Institute For Information Industry Virtual mouse driving apparatus and virtual mouse simulation method
EP2728480A1 (en) * 2012-11-02 2014-05-07 Continental Automotive GmbH Testing an operator control device
CN104090842A (zh) * 2014-07-15 2014-10-08 深圳市金立通信设备有限公司 一种应用程序运行的检测方法
CN104123550A (zh) * 2013-04-25 2014-10-29 魏昊 基于云计算的文本扫描识别方法
CN104123221A (zh) * 2013-04-28 2014-10-29 腾讯科技（深圳）有限公司 响应时间的测试方法及装置
KR101473769B1 (ko) * 2013-09-23 2014-12-17 두산중공업 주식회사 응답시간 측정 장치, 응답시간 측정 시스템 및 응답시간 측정 방법
CN104252410A (zh) * 2013-06-27 2014-12-31 阿里巴巴集团控股有限公司 一种对页面中的控件进行测试的方法和设备
CN104424092A (zh) * 2013-08-22 2015-03-18 腾讯科技（深圳）有限公司 页面加载时长测试方法及装置
US20150286753A1 (en) * 2014-04-07 2015-10-08 Vmware, Inc. Estimating Think Times
US20150339213A1 (en) * 2014-05-21 2015-11-26 Cgi Technologies And Solutions Inc. Automated testing of an application system
CN105320602A (zh) * 2015-12-04 2016-02-10 广东欧珀移动通信有限公司 一种应用启动速度的测试方法及装置
CN105808416A (zh) * 2014-12-27 2016-07-27 南车株洲电力机车研究所有限公司 一种人机图形交互界面的自动化测试方法和系统
WO2016177281A1 (zh) * 2015-05-05 2016-11-10 阿里巴巴集团控股有限公司 图片展示方法和装置
CN106326104A (zh) * 2015-07-08 2017-01-11 腾讯科技（深圳）有限公司 终端控件测试方法及装置
JP2017059230A (ja) * 2015-09-14 2017-03-23 株式会社リコー データ処理システム及びデータ処理方法
CN106951893A (zh) * 2017-05-08 2017-07-14 奇酷互联网络科技（深圳）有限公司 文字信息获取方法、装置及移动终端
US9753758B1 (en) * 2015-12-01 2017-09-05 Sprint Communications Company L.P. Building of virtual servers in a cloud via non-structured strings
CN107526678A (zh) * 2016-06-22 2017-12-29 平安科技（深圳）有限公司 Web应用程序的测试方法和装置
CN107562610A (zh) * 2017-09-21 2018-01-09 上海谦问万答吧云计算科技有限公司 获取页面加载时间的方法、装置、终端和介质
CN107678895A (zh) * 2017-09-11 2018-02-09 上海斐讯数据通信技术有限公司 一种智能终端页面跳转时间的测试方法及系统
CN107783898A (zh) * 2017-07-24 2018-03-09 平安科技（深圳）有限公司 移动应用的测试方法及测试设备
CN107818046A (zh) * 2017-10-11 2018-03-20 五八有限公司 应用程序页面的a/b测试方法及装置
CN107832224A (zh) * 2017-11-22 2018-03-23 深圳前海桔子信息技术有限公司 一种应用程序的测试方法、装置、存储介质及智能终端
US20180173618A1 (en) * 2016-01-16 2018-06-21 Ping An Technology (Shenzhen) Co., Ltd. Test method, system, and device, and readable storage medium
CN108196904A (zh) * 2017-12-27 2018-06-22 广州品唯软件有限公司 计算页面响应时长的方法、装置和计算机存储介质
CN108664364A (zh) * 2017-03-31 2018-10-16 腾讯科技（深圳）有限公司 一种终端测试方法及装置
US10114733B1 (en) * 2016-08-29 2018-10-30 Cadence Design Systems, Inc. System and method for automated testing of user interface software for visual responsiveness
CN109165167A (zh) * 2018-09-07 2019-01-08 苏宁智能终端有限公司 一种响应时间的测试方法及装置
CN109408271A (zh) * 2018-10-19 2019-03-01 北京小米移动软件有限公司 滑盖操作的响应方法、装置及存储介质
CN109729420A (zh) * 2017-10-27 2019-05-07 腾讯科技（深圳）有限公司 图片处理方法及装置、移动终端及计算机可读存储介质
CN109815100A (zh) * 2019-01-04 2019-05-28 深圳市象形字科技股份有限公司 一种利用图像对比分析对叫号宝软件的行为监控方法
CN109828918A (zh) * 2019-01-16 2019-05-31 深圳壹账通智能科技有限公司 应用程序测试方法、装置、计算机设备和存储介质
CN109885490A (zh) * 2019-02-01 2019-06-14 广州云测信息技术有限公司 一种图片对比方法和装置
CN109933756A (zh) * 2019-03-22 2019-06-25 腾讯科技（深圳）有限公司 基于ocr的图像转档方法、装置、设备及可读存储介质
CN109976966A (zh) * 2017-12-27 2019-07-05 阿里巴巴集团控股有限公司 一种应用程序启动时间统计方法、装置及系统
CN110399798A (zh) * 2019-06-25 2019-11-01 朱跃飞 一种基于深度学习的离散图片文件信息提取系统及方法
CN110413501A (zh) * 2018-04-26 2019-11-05 腾讯科技（深圳）有限公司 浏览器兼容性测试方法、装置、系统及可读存储介质
CN110442499A (zh) * 2019-07-10 2019-11-12 阿里巴巴集团控股有限公司 测试、提高页面响应性能的方法和装置、终端设备
CN110457214A (zh) * 2019-07-30 2019-11-15 腾讯科技（深圳）有限公司 应用测试方法及装置、电子设备

Patent Citations (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050103854A1 (en) * 2003-11-13 2005-05-19 Metrologic Instruments, Inc. Hand-supportable digital imaging-based bar code symbol reader supporting narrow-area and wide-area modes of illumination and image capture
US20050246433A1 (en) * 2004-01-09 2005-11-03 Carrigan Brian J Method and apparatus for facilitating control of a target computer by a remote computer
US20080155515A1 (en) * 2006-12-21 2008-06-26 International Business Machines Association Method and System for Graphical User Interface Testing
KR100877727B1 (ko) * 2008-03-07 2009-01-08 주식회사 엠네스 이동통신 단말기의 기능 및 어플리케이션 검증 장치
US20130036331A1 (en) * 2010-04-06 2013-02-07 Huawei Technologies Co., Ltd. Debugging method and debugging device
US20130111414A1 (en) * 2011-10-31 2013-05-02 Institute For Information Industry Virtual mouse driving apparatus and virtual mouse simulation method
EP2728480A1 (en) * 2012-11-02 2014-05-07 Continental Automotive GmbH Testing an operator control device
CN104123550A (zh) * 2013-04-25 2014-10-29 魏昊 基于云计算的文本扫描识别方法
CN104123221A (zh) * 2013-04-28 2014-10-29 腾讯科技（深圳）有限公司 响应时间的测试方法及装置
CN104252410A (zh) * 2013-06-27 2014-12-31 阿里巴巴集团控股有限公司 一种对页面中的控件进行测试的方法和设备
CN104424092A (zh) * 2013-08-22 2015-03-18 腾讯科技（深圳）有限公司 页面加载时长测试方法及装置
KR101473769B1 (ko) * 2013-09-23 2014-12-17 두산중공업 주식회사 응답시간 측정 장치, 응답시간 측정 시스템 및 응답시간 측정 방법
US20150286753A1 (en) * 2014-04-07 2015-10-08 Vmware, Inc. Estimating Think Times
US20150339213A1 (en) * 2014-05-21 2015-11-26 Cgi Technologies And Solutions Inc. Automated testing of an application system
CN104090842A (zh) * 2014-07-15 2014-10-08 深圳市金立通信设备有限公司 一种应用程序运行的检测方法
CN105808416A (zh) * 2014-12-27 2016-07-27 南车株洲电力机车研究所有限公司 一种人机图形交互界面的自动化测试方法和系统
WO2016177281A1 (zh) * 2015-05-05 2016-11-10 阿里巴巴集团控股有限公司 图片展示方法和装置
CN106326104A (zh) * 2015-07-08 2017-01-11 腾讯科技（深圳）有限公司 终端控件测试方法及装置
JP2017059230A (ja) * 2015-09-14 2017-03-23 株式会社リコー データ処理システム及びデータ処理方法
US9753758B1 (en) * 2015-12-01 2017-09-05 Sprint Communications Company L.P. Building of virtual servers in a cloud via non-structured strings
CN105320602A (zh) * 2015-12-04 2016-02-10 广东欧珀移动通信有限公司 一种应用启动速度的测试方法及装置
US20180173618A1 (en) * 2016-01-16 2018-06-21 Ping An Technology (Shenzhen) Co., Ltd. Test method, system, and device, and readable storage medium
CN107526678A (zh) * 2016-06-22 2017-12-29 平安科技（深圳）有限公司 Web应用程序的测试方法和装置
US10114733B1 (en) * 2016-08-29 2018-10-30 Cadence Design Systems, Inc. System and method for automated testing of user interface software for visual responsiveness
CN108664364A (zh) * 2017-03-31 2018-10-16 腾讯科技（深圳）有限公司 一种终端测试方法及装置
CN106951893A (zh) * 2017-05-08 2017-07-14 奇酷互联网络科技（深圳）有限公司 文字信息获取方法、装置及移动终端
CN107783898A (zh) * 2017-07-24 2018-03-09 平安科技（深圳）有限公司 移动应用的测试方法及测试设备
CN107678895A (zh) * 2017-09-11 2018-02-09 上海斐讯数据通信技术有限公司 一种智能终端页面跳转时间的测试方法及系统
CN107562610A (zh) * 2017-09-21 2018-01-09 上海谦问万答吧云计算科技有限公司 获取页面加载时间的方法、装置、终端和介质
CN107818046A (zh) * 2017-10-11 2018-03-20 五八有限公司 应用程序页面的a/b测试方法及装置
CN109729420A (zh) * 2017-10-27 2019-05-07 腾讯科技（深圳）有限公司 图片处理方法及装置、移动终端及计算机可读存储介质
CN107832224A (zh) * 2017-11-22 2018-03-23 深圳前海桔子信息技术有限公司 一种应用程序的测试方法、装置、存储介质及智能终端
CN108196904A (zh) * 2017-12-27 2018-06-22 广州品唯软件有限公司 计算页面响应时长的方法、装置和计算机存储介质
CN109976966A (zh) * 2017-12-27 2019-07-05 阿里巴巴集团控股有限公司 一种应用程序启动时间统计方法、装置及系统
CN110413501A (zh) * 2018-04-26 2019-11-05 腾讯科技（深圳）有限公司 浏览器兼容性测试方法、装置、系统及可读存储介质
CN109165167A (zh) * 2018-09-07 2019-01-08 苏宁智能终端有限公司 一种响应时间的测试方法及装置
CN109408271A (zh) * 2018-10-19 2019-03-01 北京小米移动软件有限公司 滑盖操作的响应方法、装置及存储介质
CN109815100A (zh) * 2019-01-04 2019-05-28 深圳市象形字科技股份有限公司 一种利用图像对比分析对叫号宝软件的行为监控方法
CN109828918A (zh) * 2019-01-16 2019-05-31 深圳壹账通智能科技有限公司 应用程序测试方法、装置、计算机设备和存储介质
CN109885490A (zh) * 2019-02-01 2019-06-14 广州云测信息技术有限公司 一种图片对比方法和装置
CN109933756A (zh) * 2019-03-22 2019-06-25 腾讯科技（深圳）有限公司 基于ocr的图像转档方法、装置、设备及可读存储介质
CN110399798A (zh) * 2019-06-25 2019-11-01 朱跃飞 一种基于深度学习的离散图片文件信息提取系统及方法
CN110442499A (zh) * 2019-07-10 2019-11-12 阿里巴巴集团控股有限公司 测试、提高页面响应性能的方法和装置、终端设备
CN110457214A (zh) * 2019-07-30 2019-11-15 腾讯科技（深圳）有限公司 应用测试方法及装置、电子设备

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111708696A (zh) * 2020-06-15 2020-09-25 杭州明讯软件技术有限公司 一种移动终端应用自动化穿越测试方法及装置
CN113360398A (zh) * 2021-06-29 2021-09-07 平安普惠企业管理有限公司 混合应用程序测试方法、装置、设备及介质
CN113360398B (zh) * 2021-06-29 2023-09-01 西安天下帮扶信息科技有限公司 混合应用程序测试方法、装置、设备及介质
CN113778887A (zh) * 2021-09-16 2021-12-10 厦门理工学院 软件测试装置及其软件测试方法
CN113778887B (zh) * 2021-09-16 2022-07-22 厦门理工学院 软件测试装置及其软件测试方法

Also Published As

Publication number Publication date
CN110888812B (zh) 2023-11-07

Similar Documents

Publication Publication Date Title
CN110888812B (zh) 终端页面的响应时间的测试系统及测试方法
WO2017032311A1 (zh) 一种检测方法及装置
CN105808416B (zh) 一种人机图形交互界面的自动化测试方法和系统
CN106924961B (zh) 一种智能象棋对弈控制方法及系统
CN110298231B (zh) 一种用于篮球比赛视频进球判定的方法及系统
CN109977765A (zh) 人脸图像识别方法、装置及计算机设备
CN107292223A (zh) 一种实时手势检测的在线验证方法及系统
CN104517101A (zh) 一种基于像素平方差匹配的游戏扑克牌识别方法
CN110162454B (zh) 游戏运行方法和装置、存储介质及电子装置
CN109359043B (zh) 一种基于机器学习的移动游戏自动化测试方法
CN104866804A (zh) 一种掌纹信息识别的方法和设备
CN103106388B (zh) 图像识别方法和系统
CN112559341A (zh) 一种画面测试方法、装置、设备及存储介质
CN110213605B (zh) 图像纠正方法、装置及设备
CN105389812A (zh) 基于计算机视觉的车载信息终端功能自动测试方法
CN117078677A (zh) 一种用于始极片的缺陷检测方法及系统
CN110314361B (zh) 一种基于卷积神经网络的篮球进球得分判断方法及系统
CN105227949A (zh) 一种Android机顶盒自动化测试方法
CN109815100B (zh) 一种利用图像对比分析对叫号宝软件的行为监控方法
CN113452991A (zh) 镜头对焦状态确定方法、装置、设备及存储介质
CN117349181A (zh) 软件测试方法、装置、可读存储介质和电子设备
CN116993654B (zh) 摄像头模组缺陷检测方法、装置、设备、存储介质及产品
CN111507289A (zh) 视频匹配方法、计算机设备和存储介质
CN110688602A (zh) 网页加载速度的测试方法、装置及系统
CN111815552A (zh) 一种工件检测方法、装置、可读存储介质及终端设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant