CN105955881A - 一种自动化测试步骤录制及回放方法和装置 - Google Patents
一种自动化测试步骤录制及回放方法和装置 Download PDFInfo
- Publication number
- CN105955881A CN105955881A CN201610258224.1A CN201610258224A CN105955881A CN 105955881 A CN105955881 A CN 105955881A CN 201610258224 A CN201610258224 A CN 201610258224A CN 105955881 A CN105955881 A CN 105955881A
- Authority
- CN
- China
- Prior art keywords
- action events
- image object
- information
- image
- step information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3696—Methods or tools to render software testable
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Image Analysis (AREA)
- Electrically Operated Instructional Devices (AREA)
Abstract
本发明公开了一种自动化测试步骤录制及回放方法和装置，所述方法包括：获取用户的操作事件以及对应的坐标信息；对被测设备进行屏幕截图，根据坐标信息，通过图像边缘检测算法，确定出屏幕截图中与该操作事件对应的图像对象，将图像对象和操作事件作为一个步骤信息进行保存；对所有步骤信息进行组装，得到录制文件；当回放录制文件时，对录制文件进行解析，得到各步骤信息，并分别对各步骤信息中的图像对象执行对应的操作事件。应用本发明所述方案，能够降低使用门槛，提高测试效率。
Description
【技术领域】
本发明涉及测试技术，特征涉及一种自动化测试步骤录制及回放方法和装置。
【背景技术】
目前，移动设备的自动化测试主要依靠设备自身所搭载的操作系统支持的测试框架进行，比如，apple公司的ios系统使用基于uiautomation的测试框架，google公司的android系统使用基于instrument和uiautomator的测试框架，此外，基于这些基础框架，还衍生出了appium、robotium和selendroid等通过对上述测试框架进行二次开发而来的第三方测试框架。
每个测试框架都需要依赖于操作系统提供的接口，搭建复杂的开发环境，编写测试脚本代码，这些都需要专业的人员才能完成，即使用门槛很高，限制了非专业人员的使用。
【发明内容】
本发明提供了一种自动化测试步骤录制及回放方法和装置，能够降低使用门槛，提高测试效率。
具体技术方案如下：
一种自动化测试步骤录制及回放方法，包括：
获取用户的操作事件以及所述操作事件对应的坐标信息；
对被测设备进行屏幕截图，根据所述坐标信息，通过图像边缘检测算法，确定出所述屏幕截图中与所述操作事件对应的图像对象，将所述图像对象和所述操作事件作为一个步骤信息进行保存；
对所有步骤信息进行组装，得到录制文件；
当回放所述录制文件时，对所述录制文件进行解析，得到各步骤信息，分别对各步骤信息中的图像对象执行对应的操作事件。
根据本发明一优选实施例，所述对所有步骤信息进行组装，得到录制文件包括：
按照操作事件的发生时间由先到后的顺序，对所有步骤信息进行组装，得到所述录制文件；
所述分别对各步骤信息中的图像对象执行对应的操作事件包括：
按照操作事件的发生时间由先到后的顺序，分别对各步骤信息中的图像对象执行对应的操作事件。
根据本发明一优选实施例，所述操作事件包括：点击、划动。
根据本发明一优选实施例，所述根据所述坐标信息，通过图像边缘检测算法，确定出所述屏幕截图中与所述操作事件对应的图像对象包括：
通过图像边缘检测算法，确定出所述屏幕截图中包括的所有图像对象；
统计所述所有图像对象中满足自身的坐标信息与所述操作事件对应的坐标信息存在交集这一条件的图像对象个数；
若统计结果为一，则将存在交集的图像对象作为与所述操作事件对应的图像对象；
若统计结果大于一，则将从存在交集的各图像对象中选定的一个图像对象作为与所述操作事件对应的图像对象。
根据本发明一优选实施例，所述将所述图像对象和所述操作事件作为一个步骤信息进行保存包括：
以图片的形式对所述图像对象进行保存。
根据本发明一优选实施例，所述分别对各步骤信息中的图像对象执行对应的操作事件包括：
针对任一步骤信息，对所述被测设备进行屏幕截图；
通过图像模板匹配算法，从所述屏幕截图中确定出与所述步骤信息中的图像对象相匹配的区域；
在所述相匹配的区域的坐标位置执行所述步骤信息中的操作事件。
一种自动化测试步骤录制及回放装置，包括：录制模块和回放模块；
所述录制模块，用于获取用户的操作事件以及所述操作事件对应的坐标信息，对被测设备进行屏幕截图，根据所述坐标信息，通过图像边缘检测算法，确定出所述屏幕截图中与所述操作事件对应的图像对象，将所述图像对象和所述操作事件作为一个步骤信息进行保存；对所有步骤信息进行组装，得到录制文件，将所述录制文件发送给所述回放模块；
所述回放模块，用于对所述录制文件进行解析，得到各步骤信息，分别对各步骤信息中的图像对象执行对应的操作事件。
根据本发明一优选实施例，所述录制模块中包括：用户事件捕获单元、图像边缘检测单元以及录制文件生成单元；
所述用户事件捕获单元，用于获取用户的操作事件以及所述操作事件对应的坐标信息，将所述操作事件和所述坐标信息发送给所述图像边缘检测单元；
所述图像边缘检测单元，用于对被测设备进行屏幕截图，根据所述坐标信息，通过图像边缘检测算法，确定出所述屏幕截图中与所述操作事件对应的图像对象，将所述图像对象和所述操作事件作为一个步骤信息发送给所述录制文件生成单元；
所述录制文件生成单元，用于按照操作事件的发生时间由先到后的顺序，对所有步骤信息进行组装，得到所述录制文件。
根据本发明一优选实施例，所述图像边缘检测单元通过图像边缘检测算法，确定出所述屏幕截图中包括的所有图像对象，统计所述所有图像对象中满足自身的坐标信息与所述操作事件对应的坐标信息存在交集这一条件的图像对象个数，若统计结果为一，则将存在交集的图像对象作为与所述操作事件对应的图像对象，若统计结果大于一，则将从存在交集的各图像对象中选定的一个图像对象作为与所述操作事件对应的图像对象。
根据本发明一优选实施例，所述录制文件生成单元以图片的形式对各步骤信息中的图像对象进行保存。
根据本发明一优选实施例，所述回放模块中包括：录制文件解析单元以及步骤信息回放单元；
所述录制文件解析单元，用于对所述录制文件进行解析，得到各步骤信息，将各步骤信息发送给所述步骤信息回放单元；
所述步骤信息回放单元，用于按照操作事件的发生时间由先到后的顺序，分别对各步骤信息中的图像对象执行对应的操作事件。
根据本发明一优选实施例，所述步骤信息回放单元进一步用于，针对任一步骤信息，对所述被测设备进行屏幕截图，通过图像模板匹配算法，从所述屏幕截图中确定出与所述步骤信息中的图像对象相匹配的区域，在所述相匹配的区域的坐标位置执行所述步骤信息中的操作事件。
可见，采用本发明所述方案，在无需搭建复杂的开发环境、编写测试脚本代码的前提下，通过简单的界面操作等即可实现自动化测试步骤的录制及回放，从而相比于现有技术降低了使用门槛，提高了测试效率。
【附图说明】
图1为本发明所述自动化测试步骤录制及回放方法实施例的流程图。
图2为本发明所述确定出屏幕截图中与获取到的操作事件对应的图像对象的方法实施例的流程图。
图3为本发明所述屏幕截图中的各图像对象的位置分布方式示意图。
图4为本发明所述自动化测试步骤录制及回放装置实施例的组成结构示意图。
【具体实施方式】
针对现有技术中存在的问题，本发明中提出一种自动化测试步骤录制及回放方案，通过简单的界面操作等即可实现自动化测试步骤的录制及回放。
为了使本发明的技术方案更加清楚、明白，以下参照附图并举实施例，对本发明所述方案作进一步地详细说明。
实施例一
图1为本发明所述自动化测试步骤录制及回放方法实施例的流程图，如图1所示，包括以下实现方式。
在11中，获取用户的操作事件以及该操作事件对应的坐标信息。
所述操作事件可包括：点击、划动等。
用户可通过操控鼠标或触摸屏幕，来实现对于被测设备的屏幕界面的点击或划动等操作。
所述被测设备通常为手机等移动设备。
当用户作出点击或划动等操作之后，即在获取到用户的操作事件之后，可按照现有方式确定出该操作事件对应到被测设备的屏幕界面上的坐标信息。
另外，在实际应用中，对于每个操作事件，均需要反馈到被测设备上去执行对应的操作，比如，用户的操作事件为点击操作，那么则需要在被测设备的屏幕界面上该操作事件对应的坐标位置执行该点击操作。
在12中，对被测设备进行屏幕截图，根据获取到的坐标信息，通过图像边缘检测算法，确定出屏幕截图中与获取到的操作事件对应的图像对象，将该图像对象和获取到的操作事件作为一个步骤信息进行保存。
在获取到用户的操作事件以及该操作事件对应的坐标信息之后，可首先对被测设备当前的屏幕界面进行屏幕截图。
之后，可根据获取到的坐标信息，通过图像边缘检测算法，确定出屏幕截图中与获取到的操作事件对应的图像对象。
图2为本发明所述确定出屏幕截图中与获取到的操作事件对应的图像对象的方法实施例的流程图，如图2所示，包括以下实现方式。
在21中，通过图像边缘检测算法，确定出屏幕截图中包括的所有图像对象。
图像边缘检测是图像处理领域中的一项重要技术，顾名思义，其目的即在于识别出图像中的边缘点。
早期常用的图像边缘检测算法包括：边缘算子法、曲线拟合算法等，近年来又出现了很多新的算法，如：小波变换算法、基于数学形态学的算法、模糊理论算法、神经网络算法等。
本实施例中，可通过图像边缘检测算法，确定出屏幕截图中包括的所有图像对象，所述图像对象可包括：图标、按钮、文字等，同时可获取到各图像对象在屏幕界面上的坐标信息。
本实施例中对于采用哪种图像边缘检测算法不作限制，可根据实际需要而定。
在22中，统计所有图像对象中满足自身的坐标信息与获取到的操作事件对应的坐标信息存在交集这一条件的图像对象个数。
针对21中确定出的每个图像对象，分别确定其坐标信息与获取到的操作事件对应的坐标信息是否存在交集，并统计存在交集的图像对象个数。
统计结果可能为一，也可能大于一，除非用户操作失误，如执行点击操作时未点击到任何一个图像对象上，否则一般不会出现统计结果为零的情况。
在23中，若统计结果为一，则将存在交集的图像对象作为与获取到的操作事件对应的图像对象；若统计结果大于一，则将从存在交集的各图像对象中选定的一个图像对象作为与获取到的操作事件对应的图像对象。
当统计结果大于一时，可以让用户从各存在交集的图像对象中进行选择，选定其中的一个作为与获取到的操作事件对应的图像对象。
图3为本发明所述屏幕截图中的各图像对象的位置分布方式示意图，如图3所示，假设屏幕截图中共包括6个图像对象，分别为图像对象1-图像对象6。
假设用户对图3中所示的图像对象2执行了点击操作事件，那么只有图像对象2的坐标信息与该操作事件对应的坐标信息存在交集，即统计结果为一，因此，将图像对象2作为与该操作事件对应的图像对象。
假设用户执行的划动操作事件同时涉及到了两个图像对象，如图3中所示的图像对象5和图像对象6，那么这两个图像对象的坐标信息与该操作事件对应的坐标信息均存在交集，即统计结果大于一，因此，可通过某种方式让用户对图像对象5和图像对象6进行选择，将用户选定的图像对象作为与该操作事件对应的图像对象，如何让用户进行选择不作限制，可根据实际需要而定。
在确定出操作事件对应的图像对象之后，可将操作事件和对应的图像对象作为一个步骤信息进行保存。其中，图像对象以图片的形式进行保存。
在13中，对所有步骤信息进行组装，得到录制文件。
通过重复执行11～12，可得到一系列步骤信息，当接收到用户的完成或结束指令时，可按照操作事件的发生时间由先到后的顺序，对获取到的所有步骤信息进行组装，从而得到所需的录制文件，如何进行组装不作限制，可根据实际需要而定。
在14中，当回放录制文件时，对录制文件进行解析，得到各步骤信息，并分别对各步骤信息中的图像对象执行对应的操作事件。
在回放录制文件时，首先对录制文件进行解析，以得到各步骤信息，每个步骤信息中分别包括有图像对象以及对应的操作事件信息。
之后，按照操作事件的发生时间由先到后的顺序，分别对各步骤信息中的图像对象执行对应的操作事件。
具体地，针对任一步骤信息，可分别进行以下处理：对被测设备进行屏幕截图，即对被测设备当前的屏幕界面进行屏幕截图，通过图像模板匹配算法，从屏幕截图中确定出与该步骤信息中的图像对象相匹配的区域，在相匹配的区域的坐标位置执行该步骤信息中的操作事件。
常用的图像模板匹配算法包括：基于图像灰度的匹配算法、基于图像特征的匹配算法、基于模型的匹配算法、基于变换域的匹配算法等，本实施例中具体采用哪种算法不作限制，可根据实际需要而定。
针对任一步骤信息，通过图像模板匹配算法确定出屏幕截图中与该步骤信息中的图像对象相匹配的区域之后，可进一步确定出相匹配的区域的坐标信息，进而在该坐标信息所标定的屏幕界面位置执行该步骤信息中的操作事件，如点击或划动等。
假设录制文件中共包括3个步骤信息，分别为步骤信息1、步骤信息2和步骤信息3，步骤信息1中的操作事件的发生时间先于步骤信息2中的操作事件的发生时间，步骤信息2中的操作事件的发生时间先于步骤信息3中的操作事件的发生时间，并假设在回放步骤信息2时出现问题，如未能在屏幕截图中找到相匹配的区域，那么可停止回放，向用户报错，进而由用户来确定具体的问题原因并施以解决措施等，如果3个步骤信息均顺利回放完成，则表明测试成功。
实施例二
图4为本发明所述自动化测试步骤录制及回放装置实施例的组成结构示意图，如图4所示，包括：录制模块41和回放模块42。
录制模块41，用于获取用户的操作事件以及操作事件对应的坐标信息，对被测设备进行屏幕截图，根据坐标信息，通过图像边缘检测算法，确定出屏幕截图中与操作事件对应的图像对象，将图像对象和操作事件作为一个步骤信息进行保存；对所有步骤信息进行组装，得到录制文件，将录制文件发送给回放模块42。
回放模块42，用于对录制文件进行解析，得到各步骤信息，并分别对各步骤信息中的图像对象执行对应的操作事件。
如图4所示，录制模块41中可具体包括：用户事件捕获单元411、图像边缘检测单412元以及录制文件生成单元413。
用户事件捕获单元411获取用户的操作事件以及操作事件对应的坐标信息，并将获取到的操作事件和坐标信息发送给图像边缘检测单元412。
所述操作事件可包括：点击、划动等。用户事件捕获单元411在获取到用户的操作事件之后，可按照现有方式确定出该操作事件对应到被测设备的屏幕界面上的坐标信息。
图像边缘检测单元412对被测设备进行屏幕截图，根据接收到的坐标信息，通过图像边缘检测算法，确定出屏幕截图中与接收到的操作事件对应的图像对象，将图像对象和接收到的操作事件作为一个步骤信息发送给录制文件生成单元413。
图像边缘检测单元412接收到用户事件捕获单元411发送来的操作事件和坐标信息之后，可首先对被测设备当前的屏幕界面进行屏幕截图。
之后，图像边缘检测单元412可通过图像边缘检测算法，确定出屏幕截图中包括的所有图像对象，统计所有图像对象中满足自身的坐标信息与接收到的操作事件对应的坐标信息存在交集这一条件的图像对象个数，若统计结果为一，则将存在交集的图像对象作为与接收到的操作事件对应的图像对象，若统计结果大于一，则将从存在交集的各图像对象中选定的一个图像对象作为与接收到的操作事件对应的图像对象。
当统计结果大于一时，可以让用户从各存在交集的图像对象中进行选择，选定其中的一个作为与获取到的操作事件对应的图像对象。
早期常用的图像边缘检测算法包括：边缘算子法、曲线拟合算法等，近年来又出现了很多新的算法，如：小波变换算法、基于数学形态学的算法、模糊理论算法、神经网络算法等，本实施例中具体采用哪种算法不作限制，可根据实际需要而定。
在确定出操作事件对应的图像对象之后，图像边缘检测单元412可将操作事件和对应的图像对象作为一个步骤信息发送给录制文件生成单元413。
录制文件生成单元413按照操作事件的发生时间由先到后的顺序，对所有步骤信息进行组装，得到录制文件。
另外，录制文件生成单元413会以图片的形式对各步骤信息中的图像对象进行保存。
如图4所示，回放模块42中可具体包括：录制文件解析单元421以及步骤信息回放单元422。
录制文件解析单元421对录制文件进行解析，得到各步骤信息，将各步骤信息发送给步骤信息回放单元422。
每个步骤信息中分别包括有图像对象以及对应的操作事件信息。
步骤信息回放单元422按照操作事件的发生时间由先到后的顺序，分别对各步骤信息中的图像对象执行对应的操作事件。
具体地，针对任一步骤信息，步骤信息回放单元422可对被测设备进行屏幕截图，即对被测设备当前的屏幕界面进行屏幕截图，并通过图像模板匹配算法，从屏幕截图中确定出与该步骤信息中的图像对象相匹配的区域，在相匹配的区域的坐标位置执行该步骤信息中的操作事件。
常用的图像模板匹配算法包括：基于图像灰度的匹配算法、基于图像特征的匹配算法、基于模型的匹配算法、基于变换域的匹配算法等，本实施例中具体采用哪种算法不作限制，可根据实际需要而定。
针对任一步骤信息，步骤信息回放单元422通过图像模板匹配算法确定出屏幕截图中与该步骤信息中的图像对象相匹配的区域之后，可进一步确定出相匹配的区域的坐标信息，进而在该坐标信息所标定的屏幕界面位置执行该步骤信息中的操作事件，如点击或划动等。
通过上述各实施例可以看出，采用本发明所述方案，在无需搭建复杂的开发环境、编写测试脚本代码的前提下，通过简单的界面操作等即可实现自动化测试步骤的录制及回放，从而相比于现有技术降低了使用门槛，提高了测试效率。
在本发明所提供的几个实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。
上述以软件功能单元的形式实现的集成的单元，可以存储在一个计算机可读取存储介质中。上述软件功能单元存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)或处理器(Processor)执行本发明各个实施例所述方法的部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明保护的范围之内。
Claims (12)
1.一种自动化测试步骤录制及回放方法，其特征在于，包括：
获取用户的操作事件以及所述操作事件对应的坐标信息；
对被测设备进行屏幕截图，根据所述坐标信息，通过图像边缘检测算法，确定出所述屏幕截图中与所述操作事件对应的图像对象，将所述图像对象和所述操作事件作为一个步骤信息进行保存；
对所有步骤信息进行组装，得到录制文件；
当回放所述录制文件时，对所述录制文件进行解析，得到各步骤信息，分别对各步骤信息中的图像对象执行对应的操作事件。
2.根据权利要求1所述的方法，其特征在于，
所述对所有步骤信息进行组装，得到录制文件包括：
按照操作事件的发生时间由先到后的顺序，对所有步骤信息进行组装，得到所述录制文件；
所述分别对各步骤信息中的图像对象执行对应的操作事件包括：
按照操作事件的发生时间由先到后的顺序，分别对各步骤信息中的图像对象执行对应的操作事件。
3.根据权利要求1所述的方法，其特征在于，
所述操作事件包括：点击、划动。
4.根据权利要求1所述的方法，其特征在于，
所述根据所述坐标信息，通过图像边缘检测算法，确定出所述屏幕截图中与所述操作事件对应的图像对象包括：
通过图像边缘检测算法，确定出所述屏幕截图中包括的所有图像对象；
统计所述所有图像对象中满足自身的坐标信息与所述操作事件对应的坐标信息存在交集这一条件的图像对象个数；
若统计结果为一，则将存在交集的图像对象作为与所述操作事件对应的图像对象；
若统计结果大于一，则将从存在交集的各图像对象中选定的一个图像对象作为与所述操作事件对应的图像对象。
5.根据权利要求1、2、3或4所述的方法，其特征在于，
所述将所述图像对象和所述操作事件作为一个步骤信息进行保存包括：
以图片的形式对所述图像对象进行保存。
6.根据权利要求5所述的方法，其特征在于，
所述分别对各步骤信息中的图像对象执行对应的操作事件包括：
针对任一步骤信息，对所述被测设备进行屏幕截图；
通过图像模板匹配算法，从所述屏幕截图中确定出与所述步骤信息中的图像对象相匹配的区域；
在所述相匹配的区域的坐标位置执行所述步骤信息中的操作事件。
7.一种自动化测试步骤录制及回放装置，其特征在于，包括：录制模块和回放模块；
所述录制模块，用于获取用户的操作事件以及所述操作事件对应的坐标信息，对被测设备进行屏幕截图，根据所述坐标信息，通过图像边缘检测算法，确定出所述屏幕截图中与所述操作事件对应的图像对象，将所述图像对象和所述操作事件作为一个步骤信息进行保存；对所有步骤信息进行组装，得到录制文件，将所述录制文件发送给所述回放模块；
所述回放模块，用于对所述录制文件进行解析，得到各步骤信息，分别对各步骤信息中的图像对象执行对应的操作事件。
8.根据权利要求7所述的装置，其特征在于，
所述录制模块中包括：用户事件捕获单元、图像边缘检测单元以及录制文件生成单元；
所述用户事件捕获单元，用于获取用户的操作事件以及所述操作事件对应的坐标信息，将所述操作事件和所述坐标信息发送给所述图像边缘检测单元；
所述图像边缘检测单元，用于对被测设备进行屏幕截图，根据所述坐标信息，通过图像边缘检测算法，确定出所述屏幕截图中与所述操作事件对应的图像对象，将所述图像对象和所述操作事件作为一个步骤信息发送给所述录制文件生成单元；
所述录制文件生成单元，用于按照操作事件的发生时间由先到后的顺序，对所有步骤信息进行组装，得到所述录制文件。
9.根据权利要求8所述的装置，其特征在于，
所述图像边缘检测单元通过图像边缘检测算法，确定出所述屏幕截图中包括的所有图像对象，统计所述所有图像对象中满足自身的坐标信息与所述操作事件对应的坐标信息存在交集这一条件的图像对象个数，若统计结果为一，则将存在交集的图像对象作为与所述操作事件对应的图像对象，若统计结果大于一，则将从存在交集的各图像对象中选定的一个图像对象作为与所述操作事件对应的图像对象。
10.根据权利要求8或9所述的装置，其特征在于，
所述录制文件生成单元以图片的形式对各步骤信息中的图像对象进行保存。
11.根据权利要求10所述的装置，其特征在于，
所述回放模块中包括：录制文件解析单元以及步骤信息回放单元；
所述录制文件解析单元，用于对所述录制文件进行解析，得到各步骤信息，将各步骤信息发送给所述步骤信息回放单元；
所述步骤信息回放单元，用于按照操作事件的发生时间由先到后的顺序，分别对各步骤信息中的图像对象执行对应的操作事件。
12.根据权利要求11所述的装置，其特征在于，
所述步骤信息回放单元进一步用于，针对任一步骤信息，对所述被测设备进行屏幕截图，通过图像模板匹配算法，从所述屏幕截图中确定出与所述步骤信息中的图像对象相匹配的区域，在所述相匹配的区域的坐标位置执行所述步骤信息中的操作事件。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610258224.1A CN105955881B (zh) | 2016-04-22 | 2016-04-22 | 一种自动化测试步骤录制及回放方法和装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610258224.1A CN105955881B (zh) | 2016-04-22 | 2016-04-22 | 一种自动化测试步骤录制及回放方法和装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN105955881A true CN105955881A (zh) | 2016-09-21 |
| CN105955881B CN105955881B (zh) | 2019-02-12 |
Family
ID=56915469
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201610258224.1A Active CN105955881B (zh) | 2016-04-22 | 2016-04-22 | 一种自动化测试步骤录制及回放方法和装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN105955881B (zh) |
Cited By (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106528420A (zh) * | 2016-11-07 | 2017-03-22 | 中国工商银行股份有限公司 | 一种软件界面的自动化测试方法及装置 |
| CN106708528A (zh) * | 2016-12-28 | 2017-05-24 | 北京奇虎科技有限公司 | 脚本生成方法及装置 |
| CN106874208A (zh) * | 2017-02-27 | 2017-06-20 | 网易（杭州）网络有限公司 | 测试脚本的处理方法、装置及电子设备 |
| CN108646968A (zh) * | 2018-04-20 | 2018-10-12 | 苏州蜗牛数字科技股份有限公司 | 一种基于图像分析重现场景的方法及系统 |
| CN108733555A (zh) * | 2017-04-25 | 2018-11-02 | 中移信息技术有限公司 | 一种应用测试方法及装置 |
| WO2019056333A1 (zh) * | 2017-09-25 | 2019-03-28 | 深圳传音制造有限公司 | 用于移动终端测试的屏幕录制方法及移动终端 |
| CN109857674A (zh) * | 2019-02-27 | 2019-06-07 | 上海优扬新媒信息技术有限公司 | 一种录制回放测试方法和相关装置 |
| CN109871172A (zh) * | 2019-01-23 | 2019-06-11 | 广州杰赛科技股份有限公司 | 一种自动化测试中的鼠标点击方法、装置及可读存储介质 |
| CN110046009A (zh) * | 2019-02-19 | 2019-07-23 | 阿里巴巴集团控股有限公司 | 录制方法、装置、服务器及可读存储介质 |
| CN110619630A (zh) * | 2019-09-10 | 2019-12-27 | 南京知倍信息技术有限公司 | 一种基于机器人的移动设备可视化测试系统及测试方法 |
| CN110908922A (zh) * | 2019-12-31 | 2020-03-24 | 京东数字科技控股有限公司 | 应用程序的测试方法和装置 |
| CN111158842A (zh) * | 2019-12-30 | 2020-05-15 | 深圳前海微众银行股份有限公司 | 操作流程检测方法、设备及存储介质 |
| CN112100075A (zh) * | 2020-09-24 | 2020-12-18 | 腾讯科技（深圳）有限公司 | 一种用户界面回放方法、装置、设备及存储介质 |
| CN112464623A (zh) * | 2020-11-24 | 2021-03-09 | 金蝶软件（中国）有限公司 | Rpa流程文件生成方法、装置、计算机设备和存储介质 |
| CN112579431A (zh) * | 2019-09-30 | 2021-03-30 | 南京大学 | 一种基于图像识别的跨平台脚本录制与回放方法 |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103164310A (zh) * | 2011-12-12 | 2013-06-19 | 百度在线网络技术（北京）有限公司 | 一种用于测试移动设备的方法、设备和系统 |
| CN103365779A (zh) * | 2013-07-09 | 2013-10-23 | 广东欧珀移动通信有限公司 | 软件测试方法和系统 |
| CN103928038A (zh) * | 2014-04-29 | 2014-07-16 | 广东欧珀移动通信有限公司 | 电子设备的测试录制及回放方法 |
| CN104461894A (zh) * | 2014-12-17 | 2015-03-25 | 用友软件股份有限公司 | 安卓软件的操作录制装置和方法 |
| CN104572123A (zh) * | 2015-01-27 | 2015-04-29 | 广东欧珀移动通信有限公司 | 一种脚本生成方法及装置 |
| CN104951393A (zh) * | 2014-03-25 | 2015-09-30 | 中国电信股份有限公司 | 测试方法和测试装置 |
| US9223669B2 (en) * | 2011-01-18 | 2015-12-29 | Robert Lin | Self-expanding test automation method |
-
2016
- 2016-04-22 CN CN201610258224.1A patent/CN105955881B/zh active Active
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9223669B2 (en) * | 2011-01-18 | 2015-12-29 | Robert Lin | Self-expanding test automation method |
| CN103164310A (zh) * | 2011-12-12 | 2013-06-19 | 百度在线网络技术（北京）有限公司 | 一种用于测试移动设备的方法、设备和系统 |
| CN103365779A (zh) * | 2013-07-09 | 2013-10-23 | 广东欧珀移动通信有限公司 | 软件测试方法和系统 |
| CN104951393A (zh) * | 2014-03-25 | 2015-09-30 | 中国电信股份有限公司 | 测试方法和测试装置 |
| CN103928038A (zh) * | 2014-04-29 | 2014-07-16 | 广东欧珀移动通信有限公司 | 电子设备的测试录制及回放方法 |
| CN104461894A (zh) * | 2014-12-17 | 2015-03-25 | 用友软件股份有限公司 | 安卓软件的操作录制装置和方法 |
| CN104572123A (zh) * | 2015-01-27 | 2015-04-29 | 广东欧珀移动通信有限公司 | 一种脚本生成方法及装置 |
Cited By (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106528420B (zh) * | 2016-11-07 | 2019-04-05 | 中国工商银行股份有限公司 | 一种软件界面的自动化测试方法及装置 |
| CN106528420A (zh) * | 2016-11-07 | 2017-03-22 | 中国工商银行股份有限公司 | 一种软件界面的自动化测试方法及装置 |
| CN106708528A (zh) * | 2016-12-28 | 2017-05-24 | 北京奇虎科技有限公司 | 脚本生成方法及装置 |
| WO2018121582A1 (zh) * | 2016-12-28 | 2018-07-05 | 北京奇虎科技有限公司 | 脚本生成方法及装置 |
| CN106874208A (zh) * | 2017-02-27 | 2017-06-20 | 网易（杭州）网络有限公司 | 测试脚本的处理方法、装置及电子设备 |
| CN108733555A (zh) * | 2017-04-25 | 2018-11-02 | 中移信息技术有限公司 | 一种应用测试方法及装置 |
| WO2019056333A1 (zh) * | 2017-09-25 | 2019-03-28 | 深圳传音制造有限公司 | 用于移动终端测试的屏幕录制方法及移动终端 |
| CN108646968A (zh) * | 2018-04-20 | 2018-10-12 | 苏州蜗牛数字科技股份有限公司 | 一种基于图像分析重现场景的方法及系统 |
| CN109871172A (zh) * | 2019-01-23 | 2019-06-11 | 广州杰赛科技股份有限公司 | 一种自动化测试中的鼠标点击方法、装置及可读存储介质 |
| CN110046009A (zh) * | 2019-02-19 | 2019-07-23 | 阿里巴巴集团控股有限公司 | 录制方法、装置、服务器及可读存储介质 |
| CN109857674A (zh) * | 2019-02-27 | 2019-06-07 | 上海优扬新媒信息技术有限公司 | 一种录制回放测试方法和相关装置 |
| CN110619630A (zh) * | 2019-09-10 | 2019-12-27 | 南京知倍信息技术有限公司 | 一种基于机器人的移动设备可视化测试系统及测试方法 |
| CN110619630B (zh) * | 2019-09-10 | 2023-04-07 | 南京知倍信息技术有限公司 | 一种基于机器人的移动设备可视化测试系统及测试方法 |
| CN112579431A (zh) * | 2019-09-30 | 2021-03-30 | 南京大学 | 一种基于图像识别的跨平台脚本录制与回放方法 |
| CN111158842A (zh) * | 2019-12-30 | 2020-05-15 | 深圳前海微众银行股份有限公司 | 操作流程检测方法、设备及存储介质 |
| CN110908922A (zh) * | 2019-12-31 | 2020-03-24 | 京东数字科技控股有限公司 | 应用程序的测试方法和装置 |
| CN112100075A (zh) * | 2020-09-24 | 2020-12-18 | 腾讯科技（深圳）有限公司 | 一种用户界面回放方法、装置、设备及存储介质 |
| CN112100075B (zh) * | 2020-09-24 | 2024-03-15 | 腾讯科技（深圳）有限公司 | 一种用户界面回放方法、装置、设备及存储介质 |
| CN112464623A (zh) * | 2020-11-24 | 2021-03-09 | 金蝶软件（中国）有限公司 | Rpa流程文件生成方法、装置、计算机设备和存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN105955881B (zh) | 2019-02-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN105955881A (zh) | 一种自动化测试步骤录制及回放方法和装置 | |
| US8060795B2 (en) | Solution for automatically incorporating diagnostic data within screen capture images | |
| US8627296B1 (en) | Unified unit and integration test with automatic mock creation | |
| US9412035B2 (en) | Place-based image organization | |
| US10162742B2 (en) | System and method for end to end performance response time measurement based on graphic recognition | |
| US20150363300A1 (en) | Generating software test script from video | |
| CN105144117B (zh) | 对调用堆栈和上下文数据的自动相关分析方法 | |
| CN106201857B (zh) | 测试用例的选取方法及装置 | |
| CN110597704A (zh) | 应用程序的压力测试方法、装置、服务器和介质 | |
| CN108170550A (zh) | 异常处理的方法、装置及设备 | |
| CN111708704A (zh) | 一种云真机测试方法、装置、终端及存储介质 | |
| US9990274B2 (en) | Testing integrated business systems | |
| US8140318B2 (en) | Method and system for generating application simulations | |
| CN113902457B (zh) | 房源信息可靠性的评估方法、装置、电子设备及存储介质 | |
| CN110806981B (zh) | 一种应用程序测试方法、装置、设备和存储介质 | |
| CN111258875A (zh) | 界面测试方法及系统、电子设备、存储介质 | |
| Pham et al. | Toward mining visual log of software | |
| CN110569184B (zh) | 一种测试方法及终端设备 | |
| US8265975B2 (en) | Adaptive project based practice selection schemes in a computing environment | |
| US20220197784A1 (en) | Method and system for guaranteeing game quality by using artificial intelligence agent | |
| CN112100075B (zh) | 一种用户界面回放方法、装置、设备及存储介质 | |
| CN113992878B (zh) | 远程桌面操作审计方法、装置及设备 | |
| CN117950983A (zh) | 用户界面测试方法、装置、电子设备和存储介质 | |
| CN110036373B (zh) | 在程序的跟踪期间修整程序的部分的系统、方法和产品 | |
| CN116643987A (zh) | 一种对测试行为的校验方法、装置、设备及介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |