CN104572123B - 一种脚本生成方法及装置 - Google Patents

Abstract

本发明适用于软件领域，提供了一种脚本生成方法及装置。所述方法包括：确定界面上被测目标的边缘；根据确定的被测目标的边缘分割出被测目标，以及获取所述被测目标的屏幕坐标；检测屏幕的操作事件，并获取所述操作事件的信息；根据分割出的被测目标、获取的被测目标的屏幕坐标和获取的操作事件的信息生成相应的脚本。本发明实施例能够提高脚本生成的速度。

Description

一种脚本生成方法及装置

技术领域

本发明实施例属于软件领域，尤其涉及一种脚本生成方法及装置。

背景技术

目前，终端设备的更新越来越快，而任何的终端设备在推出市场之前，都需要设计大量的脚本，并根据设计的脚本进行大量的测试。

现有的脚本生成方法，通常需要手动截取目标区域图片并设定动作类型，才能获取一条脚本的信息。其中，在设定动作类型时，通过以下方式设定，用户点击右键，从弹出的菜单中选取相应的动作类型。由于用于测试的脚本的数量通常较大，而现有的脚本生成方法的步骤过于繁琐，因此，导致脚本生成的速度过慢。

发明内容

本发明实施例提供了一种脚本生成方法及装置，旨在解决现有方法生成脚本的速度过慢的问题。

本发明实施例是这样实现的，一种脚本生成方法，所述方法包括：

确定界面上被测目标的边缘；

根据确定的被测目标的边缘分割出被测目标，以及获取所述被测目标的屏幕坐标；

检测屏幕的操作事件，并获取所述操作事件的信息；

根据分割出的被测目标、获取的被测目标的屏幕坐标和获取的操作事件的信息生成相应的脚本。

本发明实施例的另一目的在于提供一种脚本生成装置，所述装置包括：

被测目标边缘确定单元，用于确定界面上被测目标的边缘；

被测目标信息获取单元，用于根据确定的被测目标的边缘分割出被测目标，以及获取所述被测目标的屏幕坐标；

操作事件信息获取单元，用于检测屏幕的操作事件，并获取所述操作事件的信息；

脚本生成单元，用于根据分割出的被测目标、获取的被测目标的屏幕坐标和获取的操作事件的信息生成相应的脚本。

在本发明实施例中，确定界面上被测目标的边缘，根据确定的被测目标的边缘分割出被测目标，以及获取所述被测目标的屏幕坐标，检测屏幕的操作事件，并获取所述操作事件的信息，根据分割出的被测目标、获取的被测目标的屏幕坐标和获取的操作事件的信息生成相应的脚本。由于无需手动截取被测目标，减少了生成脚本的步骤，因此，提升了脚本生成速度。

附图说明

图1是本发明第一实施例提供的一种脚本生成方法的流程图；

图2是本发明第一实施例提供的一种终端设备的界面的示意图；

图3是从图2的终端设备的界面分割的各个被测目标的示意图；

图4是本发明第二实施例提供的一种脚本生成装置的结构图。

具体实施方式

为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

在本发明实施例中，确定界面上被测目标的边缘，根据确定的被测目标的边缘分割出被测目标，以及获取所述被测目标的屏幕坐标，检测屏幕的操作事件，并获取所述操作事件的信息，根据分割出的被测目标、获取的被测目标的屏幕坐标和获取的操作事件的信息生成相应的脚本。

为了说明本发明所述的技术方案，下面通过具体实施例来进行说明。

实施例一：

图1示出了本发明第一实施例提供的一种脚本生成方法的流程图，详述如下：

步骤S11，确定界面上被测目标的边缘。

该步骤中，终端设备的界面呈现的各个元素都是被测目标，如，被测目标可以为界面上显示的应用的图标、状态栏等。假设终端设备的界面如图2所示，则各个被测目标为图3所示的各个元素。

在通过边缘检测算法确定各个被测目标的边缘时，所述步骤S11，确定界面上被测目标的边缘，具体包括：

A1、获取界面的图像信息。其中，界面的图像信息包括界面的背景图像信息和界面上各个被测目标的图像信息。

A2、对所述界面的图像信息进行处理，以确定所述界面的图像信息的深度信息、亮度信息。具体地，获取界面的图像信息对应的各个像素值，并根据获取的各个像素值确定界面的图像信息对应的深度信息和亮度信息。

A3、在所述界面的图像信息的深度信息超出预设的深度阈值，且在所述界面的图像信息的亮度信息超出预设的亮度阈值时，将超出预设的深度阈值以及超出预设的亮度阈值对应的区域确定为被测目标的边缘。具体地，当深度信息超出预设的深度阈值，即图像的深度不连续时，表明界面的图像信息除了包括背景图像信息，还可能包括被测目标的图像信息。同理，当亮度信息超出预设的亮度阈值，即图像的亮度变化不连续时，表明界面的图像信息除了包括背景图像信息，还可能包括被测目标的图像信息，此时，将超出预设的深度阈值以及超出预设的亮度阈值对应的区域确定为被测目标的边缘。

当然，也可预先设定各个元素在终端设备的界面呈现的位置，大小，这时，可根据预先设定的各个元素在终端设备的界面呈现的位置，大小确定界面上被测目标的边缘。

步骤S12，根据确定的被测目标的边缘分割出被测目标，以及获取所述被测目标的屏幕坐标。

具体地，被测目标的屏幕坐标包括显示在界面的被测目标的左上角横坐标、左上角纵坐标、宽、高等信息。例如，假设图2中的第一个被测目标(即显示天气信息的图标)的屏幕坐标为[68,126,970,506]，则表明该图2中的第一个被测目标的左上角横坐标为68、左上角纵坐标为126、宽为970、高为506，单位为像素。

步骤S13，检测屏幕的操作事件，并获取所述操作事件的信息。

具体地，所述操作事件的信息包括屏幕被点击处的坐标和动作类型。其中，屏幕被点击处的坐标包括屏幕被点击处的横坐标和纵坐标；动作类型包括但不限于：点击、长按、拖拽、滑动。具体地，该步骤可直接检测被测目标发出的动作类型，无需通过右键开启选择菜单选择。

步骤S14，根据分割出的被测目标、获取的被测目标的屏幕坐标和获取的操作事件的信息生成相应的脚本。

具体地，根据获取的操作事件的信息，从获取的被测目标的屏幕坐标匹配出具体的被测目标，再将匹配出的具体的被测目标和获取的操作事件的信息结合，生成与匹配出的具体的被测目标有关的脚本。

可选地，所述步骤S14，根据分割出的被测目标、获取的被测目标的屏幕坐标和获取的操作事件的信息生成相应的脚本，具体包括：

B1、将所述操作事件的信息与所述被测目标的屏幕坐标比较，以确定屏幕被点击处的坐标对应的被测目标；所述操作事件的信息包括屏幕被点击处的坐标和动作类型。具体地，将操作事件的信息包括屏幕被点击处的坐标与被测目标的屏幕坐标比较，当屏幕被点击处的横坐标大于或等于被测目标的左上角横坐标，且屏幕被点击处的纵坐标小于或等于被测目标的左上角纵坐标时，根据被测目标的左上角横坐标和被测目标的宽确定被测目标的右下角横坐标，以及，根据被测目标的左上角纵坐标和被测目标的高确定被测目标的右下角综坐标，若屏幕被点击处的横坐标小于或等于被测目标的右下角横坐标，且屏幕被点击处的纵坐标大于或等于被测目标的有下角纵坐标时，将该被测目标确定为屏幕被点击处的坐标对应的被测目标。

B2、根据确定的屏幕被点击处的坐标对应的被测目标和动作类型生成相应的脚本。具体地，生成的脚本包括被测目标的图像信息和对应的动作类型。例如，假设动作类型为“点击”，被测目标的图像信息为X，则生成的脚本语句的样式可为([点击].[X])。其中，被测目标的图像信息可预先存储，当屏幕被点击处的坐标对应的被测目标确定后，从预先存储的图像信息中查找屏幕被点击处的坐标对应的被测目标，当然，也可直接抓取屏幕被点击处的坐标对应的被测目标。这时，所述B3，根据确定的屏幕被点击处的坐标对应的被测目标和动作类型生成相应的脚本，具体包括：

B31、抓取确定的屏幕被点击处的坐标对应的被测目标。

B32、根据抓取的被测目标和相应的动作类型生成相应的脚本。

上述B31和B32中，由于无需事先存储被测目标的图像信息，有利于节省内存占用。另外，由于实施自动抓取被测目标，因此，使得抓取的被测目标的大小、形状更规范、美观。

可选地，在所述B32，根据抓取的被测目标和相应的动作类型生成相应的脚本之前，包括：

存储抓取的被测目标。具体地，将抓取的被测目标对应的图像信息保存为本地图片文件，以便提高将抓取的被测目标对应的图像信息与动作类型进行封装组合的速度。

在本发明第一实施例中，确定界面上被测目标的边缘，根据确定的被测目标的边缘分割出被测目标，以及获取所述被测目标的屏幕坐标，检测屏幕的操作事件，并获取所述操作事件的信息，根据分割出的被测目标、获取的被测目标的屏幕坐标和获取的操作事件的信息生成相应的脚本。由于无需手动截取被测目标，减少了生成脚本的步骤，因此，提升了脚本生成速度。

应理解，在本发明实施例中，上述各过程的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本发明实施例的实施过程构成任何限定。

实施例二：

图4示出了本发明第二实施例提供的一种脚本生成装置的结构图，该脚本生成装置可以应用于终端设备，该终端设备可以包括经无线接入网RAN与一个或多个核心网进行通信的用户设备，该用户设备可以是移动电话(或称为“蜂窝”电话)、具有移动设备的计算机等，例如，用户设备还可以是便携式、袖珍式、手持式、计算机内置的或者车载的移动装置，它们与无线接入网交换语音和/或数据。又例如，该移动设备可以包括智能手机、平板电脑、个人数字助理PDA、销售终端POS或车载电脑等。为了便于说明，仅示出了与本发明实施例相关的部分。

该脚本生成装置包括：被测目标边缘确定单元41、被测目标信息获取单元42、操作事件信息获取单元43、脚本生成单元44。其中：

被测目标边缘确定单元41，用于确定界面上被测目标的边缘。

其中，界面呈现的各个元素都是被测目标，如，被测目标可以为界面上显示的应用的图标、状态栏等。

可选地，所述被测目标边缘确定单元41包括：

图像信息获取模块，用于获取界面的图像信息。其中，界面的图像信息包括界面的背景图像信息和界面上各个被测目标的图像信息。

图像基本信息确定模块，用于对所述界面的图像信息进行处理，以确定所述界面的图像信息的深度信息、亮度信息。

图像基本信息比较模块，用于在所述界面的图像信息的深度信息超出预设的深度阈值，且在所述界面的图像信息的亮度信息超出预设的亮度阈值时，将超出预设的深度阈值以及超出预设的亮度阈值对应的区域确定为被测目标的边缘。具体地，当深度信息超出预设的深度阈值，即图像的深度不连续时，表明界面的图像信息除了包括背景图像信息，还可能包括被测目标的图像信息。同理，当亮度信息超出预设的亮度阈值，即图像的亮度变化不连续时，表明界面的图像信息除了包括背景图像信息，还可能包括被测目标的图像信息，此时，将超出预设的深度阈值以及超出预设的亮度阈值对应的区域确定为被测目标的边缘。

当然，也可预先设定各个元素在终端设备的界面呈现的位置，大小，这时，可根据预先设定的各个元素在终端设备的界面呈现的位置，大小确定界面上被测目标的边缘。

被测目标信息获取单元42，用于根据确定的被测目标的边缘分割出被测目标，以及获取所述被测目标的屏幕坐标。

具体地，被测目标的屏幕坐标包括显示在界面的被测目标的左上角横坐标、左上角纵坐标、宽、高等信息。

操作事件信息获取单元43，用于检测屏幕的操作事件，并获取所述操作事件的信息。

具体地，所述操作事件的信息包括屏幕被点击处的坐标和动作类型。其中，屏幕被点击处的坐标包括屏幕被点击处的横坐标和纵坐标；动作类型包括但不限于：点击、长按、拖拽、滑动。具体地，该步骤可直接检测被测目标发出的动作类型。

脚本生成单元44，用于根据分割出的被测目标、获取的被测目标的屏幕坐标和获取的操作事件的信息生成相应的脚本。

可选地，所述脚本生成单元44包括：

屏幕坐标比较模块，用于将所述操作事件的信息与所述被测目标的屏幕坐标比较，以确定屏幕被点击处的坐标对应的被测目标。所述操作事件的信息包括屏幕被点击处的坐标和动作类型。具体地，将操作事件的信息包括屏幕被点击处的坐标与被测目标的屏幕坐标比较，当屏幕被点击处的横坐标大于或等于被测目标的左上角横坐标，且屏幕被点击处的纵坐标小于或等于被测目标的左上角纵坐标时，根据被测目标的左上角横坐标和被测目标的宽确定被测目标的右下角横坐标，以及，根据被测目标的左上角纵坐标和被测目标的高确定被测目标的右下角综坐标，若屏幕被点击处的横坐标小于或等于被测目标的右下角横坐标，且屏幕被点击处的纵坐标大于或等于被测目标的有下角纵坐标时，将该被测目标确定为屏幕被点击处的坐标对应的被测目标。

脚本语句生成模块，用于根据确定的屏幕被点击处的坐标对应的被测目标和动作类型生成相应的脚本。具体地，生成的脚本包括被测目标的图像信息和对应的动作类型。例如，假设动作类型为“点击”，被测目标的图像信息为X，则生成的脚本语句的样式可为([点击].[X])。

可选地，所述脚本语句生成模块包括：

被测目标抓取模块，用于抓取确定的屏幕被点击处的坐标对应的被测目标。

脚本信息封装模块，用于根据抓取的被测目标和相应的动作类型生成相应的脚本。

由于无需事先存储被测目标的图像信息，有利于节省内存占用。另外，由于实施自动抓取被测目标，因此，使得抓取的被测目标的大小、形状更规范、美观。

可选地，所述装置包括：

被测目标存储单元，用于存储抓取的被测目标。

具体地，将抓取的被测目标对应的图像信息保存为本地图片文件，以便提高将抓取的被测目标对应的图像信息与动作类型进行封装组合的速度。

在本发明第二实施例中，由于无需手动截取被测目标，减少了生成脚本的步骤，因此，不仅提升了脚本生成速度，也使得生成的脚本更规范、美观。此外，由于可直接检测被测目标发出的动作类型，无需通过右键开启选择菜单选择动作类型，因此，进一步减少了生成脚本的步骤，极大减少了用户的工作量。

本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

在本申请所提供的几个实施例中，应该理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。

所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应所述以权利要求的保护范围为准。

Claims (9)

1.一种用于终端设备推出市场前的脚本测试的脚本生成方法，其特征在于，所述方法包括：

确定界面上被测目标的边缘，所述被测目标为界面上显示的应用的图标；

预先设定各个图标在终端设备的界面呈现的位置，大小，根据预先设定的各个图标在终端设备的界面呈现的位置，大小确定界面上被测目标的边缘；

根据确定的被测目标的边缘分割出被测目标，以及获取所述被测目标的屏幕坐标；

检测屏幕的操作事件，并获取所述操作事件的信息；

根据分割出的被测目标、获取的被测目标的屏幕坐标和获取的操作事件的信息生成相应的脚本；

所述根据分割出的被测目标、获取的被测目标的屏幕坐标和获取的操作事件的信息生成相应的脚本，具体包括：

所述操作事件的信息包括屏幕被点击处的坐标和动作类型，所述动作类型包括：长按、拖拽、滑动；

将所述操作事件的信息与所述被测目标的屏幕坐标比较，以确定屏幕被点击处的坐标对应的被测目标，具体地：将操作事件的信息包括屏幕被点击处的坐标与被测目标的屏幕坐标比较，当屏幕被点击处的横坐标大于或等于被测目标的左上角横坐标，且屏幕被点击处的纵坐标小于或等于被测目标的左上角纵坐标时，根据被测目标的左上角横坐标和被测目标的宽确定被测目标的右下角横坐标，以及，根据被测目标的左上角纵坐标和被测目标的高确定被测目标的右下角纵坐标，若屏幕被点击处的横坐标小于或等于被测目标的右下角横坐标，且屏幕被点击处的纵坐标大于或等于被测目标的右下角纵坐标时，将该被测目标确定为屏幕被点击处的坐标对应的被测目标；

根据确定的屏幕被点击处的坐标对应的被测目标和动作类型生成相应的脚本。

2.根据权利要求1所述的方法，其特征在于，所述根据确定的屏幕被点击处的坐标对应的被测目标和动作类型生成相应的脚本，具体包括：

抓取确定的屏幕被点击处的坐标对应的被测目标；

根据抓取的被测目标和相应的动作类型生成相应的脚本。

3.根据权利要求2所述的方法，其特征在于，在所述根据抓取的被测目标和相应的动作类型生成相应的脚本之前，包括：

存储抓取的被测目标。

4.根据权利要求1所述的方法，其特征在于，所述确定界面上被测目标的边缘，具体包括：

获取界面的图像信息；

对所述界面的图像信息进行处理，以确定所述界面的图像信息的深度信息、亮度信息；

在所述界面的图像信息的深度信息超出预设的深度阈值，且在所述界面的图像信息的亮度信息超出预设的亮度阈值时，将超出预设的深度阈值以及超出预设的亮度阈值对应的区域确定为被测目标的边缘。

5.一种用于终端设备推出市场前的脚本测试的脚本生成装置，其特征在于，所述装置包括：

被测目标边缘确定单元，用于确定界面上被测目标的边缘，所述被测目标为界面上显示的应用的图标；

预先设定各个图标在终端设备的界面呈现的位置，大小，根据预先设定的各个图标在终端设备的界面呈现的位置，大小确定界面上被测目标的边缘；

被测目标信息获取单元，用于根据确定的被测目标的边缘分割出被测目标，以及获取所述被测目标的屏幕坐标；

操作事件信息获取单元，用于检测屏幕的操作事件，并获取所述操作事件的信息；

脚本生成单元，用于根据分割出的被测目标、获取的被测目标的屏幕坐标和获取的操作事件的信息生成相应的脚本；

所述脚本生成单元包括：

屏幕坐标比较模块，用于将所述操作事件的信息与所述被测目标的屏幕坐标比较，以确定屏幕被点击处的坐标对应的被测目标，具体地：将操作事件的信息包括屏幕被点击处的坐标与被测目标的屏幕坐标比较，当屏幕被点击处的横坐标大于或等于被测目标的左上角横坐标，且屏幕被点击处的纵坐标小于或等于被测目标的左上角纵坐标时，根据被测目标的左上角横坐标和被测目标的宽确定被测目标的右下角横坐标，以及，根据被测目标的左上角纵坐标和被测目标的高确定被测目标的右下角纵坐标，若屏幕被点击处的横坐标小于或等于被测目标的右下角横坐标，且屏幕被点击处的纵坐标大于或等于被测目标的右下角纵坐标时，将该被测目标确定为屏幕被点击处的坐标对应的被测目标；所述操作事件的信息包括屏幕被点击处的坐标和动作类型，所述动作类型包括：长按、拖拽、滑动；

脚本语句生成模块，用于根据确定的屏幕被点击处的坐标对应的被测目标和动作类型生成相应的脚本。

6.根据权利要求5所述的装置，其特征在于，所述脚本语句生成模块包括：

被测目标抓取模块，用于抓取确定的屏幕被点击处的坐标对应的被测目标；

脚本信息封装模块，用于根据抓取的被测目标和相应的动作类型生成相应的脚本。

7.根据权利要求6所述的装置，其特征在于，所述装置包括：

被测目标存储单元，用于存储抓取的被测目标。

8.根据权利要求5所述的装置，其特征在于，所述被测目标边缘确定单元包括：

图像信息获取模块，用于获取界面的图像信息；

图像基本信息确定模块，用于对所述界面的图像信息进行处理，以确定所述界面的图像信息的深度信息、亮度信息；

图像基本信息比较模块，用于在所述界面的图像信息的深度信息超出预设的深度阈值，且在所述界面的图像信息的亮度信息超出预设的亮度阈值时，将超出预设的深度阈值以及超出预设的亮度阈值对应的区域确定为被测目标的边缘。

9.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至4任一项所述方法的步骤。