CN109634859A - 一种控件属性识别和图像识别相结合的测试方法 - Google Patents

一种控件属性识别和图像识别相结合的测试方法 Download PDF

Info

Publication number
CN109634859A
CN109634859A CN201811506609.0A CN201811506609A CN109634859A CN 109634859 A CN109634859 A CN 109634859A CN 201811506609 A CN201811506609 A CN 201811506609A CN 109634859 A CN109634859 A CN 109634859A
Authority
CN
China
Prior art keywords
module
test
property
target widget
control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811506609.0A
Other languages
English (en)
Inventor
宋航
宋一航
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201811506609.0A priority Critical patent/CN109634859A/zh
Publication of CN109634859A publication Critical patent/CN109634859A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3672—Test management
    • G06F11/3688—Test management for test execution, e.g. scheduling of test suites
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/22—Matching criteria, e.g. proximity measures

Abstract

本发明公开了一种控件属性识别和图像识别相结合的测试方法，包括以下步骤：步骤S1：预选图片，从预先配置中的若干图片中选取一张；步骤S2：测试装置运行目标软件，在运行过程时在用户界面中进行自动截图；步骤S3：将预选图片的分辨率与截图的图片分辨率比对；步骤S4：对比结果完全一致时，针对选择的图片做对应的测试操作，完成测试，不一致时，选取目标控件；步骤S5：选取目标控件，并读取目标控件的识别属性；步骤S6：在软件运行过程中，采集目标控件的识别属性并与预选目标控件时读取的识别属性进行匹配；步骤S7：识别属性完全匹配时，完成测试。本发明便于有效的提高UI自动化测试的效率和可靠性。

Description

一种控件属性识别和图像识别相结合的测试方法
技术领域
本发明涉及计算机技术领域，具体为一种控件属性识别和图像识别相结合的测试方法。
背景技术
随着互联网技术的快速发展，网站的迭代速度变得非常快，在针对网站进行测试时，如果仅依靠传统的手工测试，效率将非常低下，已无法满足实际的需求。因此出现了利用自动化测试代替部分手工测试的测试方案，解放出大量的测试时间。然而，在针对网站进行自动化测试时，如果被测试页面中的控件元素发生变化，很可能会导致测试失败。
现有的测试方法存在如下不足：主要采用控件属性识别或图像识别技术进行测试，并没有同时采用两种手段进行测试，但是现有的手机对不同的软件、网站其兼容性存在差异，且适配性不同，单独的一种测试其测试效果较差。
发明内容
本发明的目的在于提供一种控件属性识别和图像识别相结合的测试方法，以解决上述背景技术中提出的问题。
为实现上述目的，本发明提供如下技术方案：包括以下步骤：
步骤S1：预选图片，从预先配置中的若干图片中选取一张；
步骤S2：测试装置运行目标软件，在运行过程时在用户界面中进行自动截图；
步骤S3：将预选图片的分辨率与截图的图片分辨率比对；
步骤S4：对比结果完全一致时，针对选择的图片做对应的测试操作，完成测试，不一致时，选取目标控件；
步骤S5：选取目标控件，并读取目标控件的识别属性；
步骤S6：在软件运行过程中，采集目标控件的识别属性并与预选目标控件时读取的识别属性进行匹配；
步骤S7：识别属性完全匹配时，完成测试，匹配不成功时，对目标控件的识别属性进行修改，并执行S2步骤。
进一步的，步骤S1中选取的图片与目标软件在测试过程中的用户界面的图片相匹配。
进一步的，步骤S5中选取的目标控件为用户界面中多个控件中随机选取，在选取的过程中自动读取目标控件的属性。
进一步的，步骤S6中采集目标控件的识别属性时，对同一目标控件采取周期性采集，并实现周期性对比。
进一步的，所述测试装置中包括通讯接口、截图模块、对比模块、存储模块、供电模块、控件识别模块、更新模块以及处理器；
所述通讯接口、存储模块、对比模块、更新模块均与处理器双向电性连接，所述截图模块、控件识别模块的输出端与处理器的输入端电性连接。
进一步的，所述截图模块包括目标图片位置获取子模块、截图子模块，所述目标图片位置获取子模块的输出端与截图子模块的输入端电性连接，所述截图子模块的输出端与处理器的输入端电性连接。
进一步的，所述控件识别模块包括读取子模块、识别子模块，所述读取子模块、识别子模块的输出端均与处理器的输入端电性连接。
进一步的，所述存储模块中存储有预配置的若干图片、目标控件读取的识别属性、采集的识别属性、以及更新模块工作的详情信息。
进一步的，所述的测试装置还包括有显示模块，所述显示模块的输入端与处理器的输出端电性连接。
与现有技术相比，本发明的有益效果是：
1、本发明通过设置图像识别以及控件识别相结合，在测试过程中，先通过图像识别进行测试，当因为兼容性导致预选图片无法匹配时，然后更换控件识别进行再次测试，在控件识别测试过程中，目标控件的读取识别属性与采集的识别属性匹配成功，完成测试，不成功时，修改控件的属性，进行再次的重复测试，直至匹配成功，有效的提高了脚本在不同种类手机上的兼容性和适配性，同时提高了UI自动化测试的效率以及可靠性；
2、本发明通过设置设置存储模块，通过存储模块对预配置的若干图片、目标控件读取的识别属性、采集的识别属性、以及更新模块工作的详情信息进行存储，并对控件修改的信息进行详细记录，便于后期维护。
附图说明
图1为本发明一种控件属性识别和图像识别相结合的测试方法流程图；
图2为本发明一种控件属性识别和图像识别相结合的测试方法中测试装置的模块框图；
图3为本发明一种控件属性识别和图像识别相结合的测试方法中测试装置的控件识别模块的结构示意图；
图4为本发明一种控件属性识别和图像识别相结合的测试方法中测试装置的截图的结构示意图。
图中：1-通讯接口；2-截图模块；3-对比模块；4-存储模块；5-供电模块；6-控件识别模块；7-更新模块；8-处理器；9-目标图片位置获取子模块；10-截图子模块；11-读取子模块；12-识别子模块；13-显示模块。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
请参阅图1-4，本发明提供一种技术方案：一种控件属性识别和图像识别相结合的测试方法，包括以下步骤：
步骤S1：预选图片，从预先配置中的若干图片中选取一张；
步骤S2：测试装置运行目标软件，在运行过程时在用户界面中进行自动截图；
步骤S3：将预选图片的分辨率与截图的图片分辨率比对；
步骤S4：对比结果完全一致时，针对选择的图片做对应的测试操作，完成测试，不一致时，选取目标控件；
步骤S5：选取目标控件，并读取目标控件的识别属性；
步骤S6：在软件运行过程中，采集目标控件的识别属性并与预选目标控件时读取的识别属性进行匹配；
步骤S7：识别属性完全匹配时，完成测试，匹配不成功时，对目标控件的识别属性进行修改，并执行S2步骤。
步骤S1中选取的图片与目标软件在测试过程中的用户界面的图片相匹配。
步骤S5中选取的目标控件为用户界面中多个控件中随机选取，在选取的过程中自动读取目标控件的属性。
步骤S6中采集目标控件的识别属性时，对同一目标控件采取周期性采集，并实现周期性对比。
所述测试装置中包括通讯接口1、截图模块2、对比模块3、存储模块4、供电模块5、控件识别模块6、更新模块7以及处理器8；
所述通讯接口1、存储模块4、对比模块3、更新模块7均与处理器8双向电性连接，所述截图模块2、控件识别模块6的输出端与处理器8的输入端电性连接。
所述截图模块2包括目标图片位置获取子模块9、截图子模块10，所述目标图片位置获取子模块9的输出端与截图子模块10的输入端电性连接，所述截图子模块10的输出端与处理器8的输入端电性连接。
所述控件识别模块6包括读取子模块11、识别子模块12，所述读取子模块11、识别子模块12的输出端均与处理器8的输入端电性连接。
所述存储模块4中存储有预配置的若干图片、目标控件读取的识别属性、采集的识别属性、以及更新模块7工作的详情信息。
所述的测试装置还包括有显示模块13，所述显示模块13的输入端与处理器8的输出端电性连接。
工作原理：在测试时，预先设置若干图片，然后根据所测试的软件，从中国选取一张与与目标软件在测试过程中的用户界面的图片相匹配的图片，将选取的图片发送给对比模块3，目标软件在运行过程中，在其用户界面中通过截图模块2中的目标图片位置获取子模块9、截图子模块10对目标图片进行截图，然后将截图的图片发送给对比模块3，与之前预选的的分辨率做对比，比对的结果相同时，完成测试，不同时，执行步骤S5，选取目标控件，同时读取目标控件的识别属性，在测试过程中，按照指令直接对应操作，再次过程中，周期性采集目标控件的识别属性，将采集的识别属性与最开始读取的识别属性进行匹配，匹配成功时，完成测试，匹配不成功时，处理器8依据采集的识别属性，对目标控件的属性进行修改，并重新执行步骤2，直至完成测试。
需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。
尽管已经示出和描述了本发明的实施例，对于本领域的普通技术人员而言，可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型，本发明的范围由所附权利要求及其等同物限定。

Claims (9)

1.一种控件属性识别和图像识别相结合的测试方法，其特征在于：包括以下步骤：
步骤S1：预选图片，从预先配置中的若干图片中选取一张；
步骤S2：测试装置运行目标软件，在运行过程时在用户界面中进行自动截图；
步骤S3：将预选图片的分辨率与截图的图片分辨率比对；
步骤S4：对比结果完全一致时，针对选择的图片做对应的测试操作，完成测试，不一致时，选取目标控件；
步骤S5：选取目标控件，并读取目标控件的识别属性；
步骤S6：在软件运行过程中，采集目标控件的识别属性并与预选目标控件时读取的识别属性进行匹配；
步骤S7：识别属性完全匹配时，完成测试，匹配不成功时，对目标控件的识别属性进行修改，并执行S2步骤。
2.根据权利要求1所述的一种控件属性识别和图像识别相结合的测试方法，其特征在于：步骤S1中选取的图片与目标软件在测试过程中的用户界面的图片相匹配。
3.根据权利要求1所述的一种控件属性识别和图像识别相结合的测试方法，其特征在于：步骤S5中选取的目标控件为用户界面中多个控件中随机选取，在选取的过程中自动读取目标控件的属性。
4.根据权利要求1所述的一种控件属性识别和图像识别相结合的测试方法，其特征在于：步骤S6中采集目标控件的识别属性时，对同一目标控件采取周期性采集，并实现周期性对比。
5.根据权利要求1所述的一种控件属性识别和图像识别相结合的测试方法，其特征在于：所述测试装置中包括通讯接口(1)、截图模块(2)、对比模块(3)、存储模块(4)、供电模块(5)、控件识别模块(6)、更新模块(7)以及处理器(8)；
所述通讯接口(1)、存储模块(4)、对比模块(3)、更新模块(7)均与处理器(8)双向电性连接，所述截图模块(2)、控件识别模块(6)的输出端与处理器(8)的输入端电性连接。
6.根据权利要求5所述的一种控件属性识别和图像识别相结合的测试方法，其特征在于：所述截图模块(2)包括目标图片位置获取子模块(9)、截图子模块(10)，所述目标图片位置获取子模块(9)的输出端与截图子模块(10)的输入端电性连接，所述截图子模块(10)的输出端与处理器(8)的输入端电性连接。
7.根据权利要求5所述的一种控件属性识别和图像识别相结合的测试方法，其特征在于：所述控件识别模块(6)包括读取子模块(11)、识别子模块(12)，所述读取子模块(11)、识别子模块(12)的输出端均与处理器(8)的输入端电性连接。
8.根据权利要求5所述的一种控件属性识别和图像识别相结合的测试方法，其特征在于：所述存储模块(4)中存储有预配置的若干图片、目标控件读取的识别属性、采集的识别属性、以及更新模块(7)工作的详情信息。
9.根据权利要求5所述的一种控件属性识别和图像识别相结合的测试方法，其特征在于：所述的测试装置还包括有显示模块(13)，所述显示模块(13)的输入端与处理器(8)的输出端电性连接。
CN201811506609.0A 2018-12-10 2018-12-10 一种控件属性识别和图像识别相结合的测试方法 Pending CN109634859A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811506609.0A CN109634859A (zh) 2018-12-10 2018-12-10 一种控件属性识别和图像识别相结合的测试方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811506609.0A CN109634859A (zh) 2018-12-10 2018-12-10 一种控件属性识别和图像识别相结合的测试方法

Publications (1)

Publication Number Publication Date
CN109634859A true CN109634859A (zh) 2019-04-16

Family

ID=66072781

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811506609.0A Pending CN109634859A (zh) 2018-12-10 2018-12-10 一种控件属性识别和图像识别相结合的测试方法

Country Status (1)

Country Link
CN (1) CN109634859A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110287094A (zh) * 2019-05-20 2019-09-27 平安普惠企业管理有限公司 Ui自动化测试方法、装置及计算机可读存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104978270A (zh) * 2015-07-03 2015-10-14 上海触乐信息科技有限公司 一种自动化地软件测试方法和装置
CN105224462A (zh) * 2015-10-27 2016-01-06 小米科技有限责任公司 控件元素的识别方法和装置
CN106294099A (zh) * 2015-05-15 2017-01-04 阿里巴巴集团控股有限公司 一种测试方法及设备
US20180129586A1 (en) * 2016-11-10 2018-05-10 Testplant Europe Ltd Method of, and apparatus for, handling reference images for an automated test of software with a graphical user interface
CN108509342A (zh) * 2018-04-04 2018-09-07 成都中云天下科技有限公司 一种精准快速的App自动化测试方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106294099A (zh) * 2015-05-15 2017-01-04 阿里巴巴集团控股有限公司 一种测试方法及设备
CN104978270A (zh) * 2015-07-03 2015-10-14 上海触乐信息科技有限公司 一种自动化地软件测试方法和装置
CN105224462A (zh) * 2015-10-27 2016-01-06 小米科技有限责任公司 控件元素的识别方法和装置
US20180129586A1 (en) * 2016-11-10 2018-05-10 Testplant Europe Ltd Method of, and apparatus for, handling reference images for an automated test of software with a graphical user interface
CN108509342A (zh) * 2018-04-04 2018-09-07 成都中云天下科技有限公司 一种精准快速的App自动化测试方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110287094A (zh) * 2019-05-20 2019-09-27 平安普惠企业管理有限公司 Ui自动化测试方法、装置及计算机可读存储介质

Similar Documents

Publication Publication Date Title
CN105227945B (zh) 一种自动白平衡的控制方法及移动终端
CN106254682B (zh) 一种拍照方法及移动终端
CN102904996B (zh) 一种手机触摸屏性能测试的方法及装置、系统
CN103377119B (zh) 一种非标准控件自动化测试方法和装置
CN106057135B (zh) 一种显示亮度的控制方法及移动终端
CN105915782A (zh) 一种基于人脸识别的照片获取方法和移动终端
CN103365967B (zh) 一种基于爬虫的自动化差异检测方法及装置
CN106210526A (zh) 一种拍摄方法及移动终端
CN106454104A (zh) 一种拍照方法及移动终端
CN105632348A (zh) Led显示屏配屏方法及装置
CN103631709B (zh) 双核浏览器测试方法和系统
CN104780407A (zh) 一种机顶盒自动测试方法及系统
CN106771974A (zh) 显示模组点灯测试装置及方法
CN109101931A (zh) 一种场景识别方法、场景识别装置及终端设备
CN109783351A (zh) 界面测试方法、装置及计算机可读存储介质
CN106095248A (zh) 一种基于移动终端的应用程序查找启动方法及系统
CN110888812B (zh) 终端页面的响应时间的测试系统及测试方法
CN106341530A (zh) 一种支付页面的切换方法及移动终端
CN109525836A (zh) 基于fpga的嵌入式多模同测装置
CN109634859A (zh) 一种控件属性识别和图像识别相结合的测试方法
CN104216823A (zh) 一种自动化测试方法及主控装置
CN106453778B (zh) 一种联系人头像设置方法及移动终端
CN210016474U (zh) 配网测试控制设备及系统
CN112667212A (zh) 埋点数据可视化方法、装置、终端和存储介质
CN110916609A (zh) 一种视力检测装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190416

RJ01 Rejection of invention patent application after publication