CN112685279A - 脚本录制方法、装置、终端设备 - Google Patents
脚本录制方法、装置、终端设备 Download PDFInfo
- Publication number
- CN112685279A CN112685279A CN201910987893.6A CN201910987893A CN112685279A CN 112685279 A CN112685279 A CN 112685279A CN 201910987893 A CN201910987893 A CN 201910987893A CN 112685279 A CN112685279 A CN 112685279A
- Authority
- CN
- China
- Prior art keywords
- movable icon
- terminal
- target object
- script
- acquiring
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000013515 script Methods 0.000 title claims abstract description 146
- 238000000034 method Methods 0.000 title claims abstract description 84
- 238000012790 confirmation Methods 0.000 claims description 80
- 238000004590 computer program Methods 0.000 claims description 13
- 238000012423 maintenance Methods 0.000 abstract description 5
- 238000010586 diagram Methods 0.000 description 26
- 238000012544 monitoring process Methods 0.000 description 14
- 230000000694 effects Effects 0.000 description 10
- 238000012545 processing Methods 0.000 description 7
- 239000011159 matrix material Substances 0.000 description 6
- 241001422033 Thestylus Species 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 229910003460 diamond Inorganic materials 0.000 description 3
- 239000010432 diamond Substances 0.000 description 3
- 238000003491 array Methods 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
本申请实施例公开了一种脚本录制方法、装置、终端设备,该方法包括:获取第一终端的显示界面上目标对象对应的第一位置作为参考位置,并在第一位置上获取可移动图标;移动可移动图标至第二位置,并在可移动图标移动过程中显示可移动图标的当前位置与第一位置之间的连线;基于参考位置、第二位置、以及第一终端的第一屏幕分辨率获取可移动图标与目标对象的第一相对偏移距离;获取在第二位置上的操作事件,将目标对象、第一相对偏移距离以及操作事件保存在脚本中以完成脚本录制。采用本申请实施例,可提高脚本录制效率和录制正确率,降低脚本维护风险。
Description
技术领域
本申请涉及计算机技术领域,尤其涉及一种脚本录制方法、装置、终端设备。
背景技术
现有的脚本录制工具,在录制偏移位置时,一种方式是记录绝对偏移坐标,但是通过这种方式录制好的脚本只能在固定分辨率的机器上运行,兼容性较差。另一种方式是通过人工获取并计算出相对偏移坐标,再填写到操作对象对应的属性中。由此可知,上述两种方式都无法直观看到操作对象对应的偏移位置,且脚本录制的效率低,一旦涉及需要修改偏移位置时,需要用户重新获取并计算相对偏移坐标,在脚本调试和脚本维护方面耗时费力。
发明内容
本申请实施例提供一种脚本录制方法、装置、终端设备,可提高脚本录制效率和录制正确率,降低脚本维护风险,适用性高。
第一方面,本申请实施例提供了一种脚本录制方法,该方法包括:
获取第一终端的显示界面上目标对象对应的第一位置作为参考位置,并在上述第一位置上获取可移动图标;
移动上述可移动图标至第二位置,并在上述可移动图标移动过程中显示上述可移动图标的当前位置与上述第一位置之间的连线;
基于上述参考位置、上述第二位置、以及上述第一终端的第一屏幕分辨率获取上述可移动图标与上述目标对象的第一相对偏移距离;
获取在上述第二位置上的操作事件,将上述目标对象、上述第一相对偏移距离以及上述操作事件保存在脚本中以完成脚本录制。
结合第一方面,在一种可能的实施方式中,上述移动上述可移动图标至第二位置,包括:
获取对上述可移动图标的第一移动操作,基于上述第一移动操作移动上述可移动图标;
获取针对上述可移动图标的第一位置确认操作,基于上述第一位置确认操作获取上述可移动图标对应的第二位置。
结合第一方面,在一种可能的实施方式中,上述将上述目标对象、上述第一相对偏移距离以及上述操作事件保存在脚本中之后,上述方法还包括:
获取对上述可移动图标的第二移动操作,基于上述第二移动操作移动上述可移动图标;
获取针对上述可移动图标的第二位置确认操作,基于上述第二位置确认操作获取上述可移动图标对应的第三位置,并在上述可移动图标移动过程中显示上述可移动图标的当前位置与上述第一位置之间的连线;
基于上述第三位置、上述参考位置、以及上述第一终端对应的第一屏幕分辨率确定上述可移动图标与上述目标对象的第二相对偏移距离;
将上述脚本中的上述第一相对偏移距离替换为上述第二相对偏移距离。
结合第一方面,在一种可能的实施方式中,上述方法还包括:
当上述第一终端的显示界面上包括多个对象时,获取上述多个对象分别对应的第五位置;
在上述可移动图标移动过程中,若上述多个对象中任一对象对应的第五位置与上述可移动图标的当前位置之间的距离小于上述第一位置与上述可移动图标的当前位置之间的距离时,将上述目标对象更换为上述任一对象,并将上述参考位置更换为上述任一对象对应的第五位置。
结合第一方面,在一种可能的实施方式中,上述获取针对上述可移动图标的第一位置确认操作,包括:
将上述可移动图标被取消选中的操作确定为第一位置确认操作;或者
当检测到点击操作时,将上述点击操作确定为第一位置确认操作,并将上述点击操作确定为上述操作事件。
结合第一方面,在一种可能的实施方式中,上述基于上述参考位置、上述第二位置、以及上述显示界面的第一屏幕分辨率获取上述可移动图标与上述目标对象的第一相对偏移距离,包括:
计算上述第二位置和上述参考位置之间的位置差值;
基于上述位置差值以及上述第一屏幕分辨率生成第一相对偏移距离。
结合第一方面,在一种可能的实施方式中,上述将上述目标对象、上述相对偏移距离以及上述操作事件保存在脚本中之后,上述方法还包括:
将上述脚本发送至第二终端;
在上述第二终端回放上述脚本时,上述方法还包括:
识别上述第二终端的显示界面上包括的上述目标对象,并获取上述第二终端的显示界面上上述目标对象对应的第六位置;
根据上述第二终端对应的第二屏幕分辨率、上述第一相对偏移距离以及上述第六位置确定出第七位置,并在上述第七位置上执行上述操作事件。
结合第一方面,在一种可能的实施方式中,上述根据上述第二终端对应的第二屏幕分辨率、上述第一相对偏移距离以及上述第六位置确定出第七位置,包括:
根据上述第二屏幕分辨率和上述第一相对偏移距离确定第二绝对偏移;
根据上述第六位置和上述第二绝对偏移确定第七位置。
第二方面,本申请实施例提供了一种脚本录制装置,该装置包括:
可移动图标获取模块,用于获取第一终端的显示界面上目标对象对应的第一位置作为参考位置,并在上述第一位置上获取可移动图标;
位置确定模块,用于移动上述可移动图标至第二位置,并在上述可移动图标移动过程中显示上述可移动图标的当前位置与上述第一位置之间的连线;
第一相对偏移值确定模块,用于基于上述参考位置、上述第二位置、以及上述第一终端的第一屏幕分辨率获取上述可移动图标与上述目标对象的第一相对偏移距离;
脚本生成模块,用于获取在上述第二位置上的操作事件,将上述目标对象、上述第一相对偏移距离以及上述操作事件保存在脚本中以完成脚本录制。
结合第二方面,在一种可能的实施方式中,上述位置确定模块具体用于:
获取对上述可移动图标的第一移动操作,基于上述第一移动操作移动上述可移动图标;
获取针对上述可移动图标的第一位置确认操作,基于上述第一位置确认操作获取上述可移动图标对应的第二位置。
结合第二方面,在一种可能的实施方式中,上述装置还包括脚本更新模块,上述脚本更新模块包括:
移动操作获取单元,用于获取对上述可移动图标的第二移动操作,基于上述第二移动操作移动上述可移动图标;
位置获取单元,用于获取针对上述可移动图标的第二位置确认操作,基于上述第二位置确认操作获取上述可移动图标对应的第三位置,并在上述可移动图标移动过程中显示上述可移动图标的当前位置与上述第一位置之间的连线;
第二相对偏移值确定单元,用于基于上述第三位置、上述参考位置、以及上述第一终端对应的第一屏幕分辨率确定上述可移动图标与上述目标对象的第二相对偏移距离;
相对偏移值更新单元,用于将上述脚本中的上述第一相对偏移距离替换为上述第二相对偏移距离。
结合第二方面,在一种可能的实施方式中,上述装置还包括目标对象更换模块,上述目标对象更换模块包括:
位置确定单元,用于当上述第一终端的显示界面上包括多个对象时,获取上述多个对象分别对应的第五位置;
目标对象更换单元,用于在上述可移动图标移动过程中,若上述多个对象中任一对象对应的第五位置与上述可移动图标的当前位置之间的距离小于上述第一位置与上述可移动图标的当前位置之间的距离时,将上述目标对象更换为上述任一对象,并将上述参考位置更换为上述任一对象对应的第五位置。
结合第二方面,在一种可能的实施方式中,上述位置确定模块包括可移动图标移动单元和位置确认操作获取单元,其中上述位置确认操作获取单元具体用于:
将上述可移动图标被取消选中的操作确定为第一位置确认操作;或者
当检测到点击操作时,将上述点击操作确定为第一位置确认操作,并将上述点击操作确定为上述操作事件。
结合第二方面,在一种可能的实施方式中,上述相对偏移值确定模块包括:
位置差值确定单元,用于计算上述第二位置和上述参考位置之间的位置差值;
相对偏移值计算单元,用于基于上述位置差值以及上述第一屏幕分辨率生成第一相对偏移距离。
结合第二方面,在一种可能的实施方式中,上述装置还包括脚本发送模块,上述脚本发送模块用于:
将上述脚本发送至第二终端;
其中,在上述第二终端回放上述脚本时,上述第二终端用于:
识别上述第二终端的显示界面上包括的上述目标对象,并获取上述第二终端的显示界面上上述目标对象对应的第六位置;
根据上述第二终端对应的第二屏幕分辨率、上述第一相对偏移距离以及上述第六位置确定出第七位置,并在上述第七位置上执行上述操作事件。
结合第二方面,在一种可能的实施方式中,上述第二终端还用于:
根据上述第二屏幕分辨率和上述第一相对偏移距离确定第二绝对偏移;
根据上述第六位置和上述第二绝对偏移确定第七位置。
第三方面,本申请实施例提供了一种终端设备,该终端设备包括处理器和存储器,该处理器和存储器相互连接。该存储器用于存储支持该终端设备执行上述第一方面和/或第一方面任一种可能的实现方式提供的方法的计算机程序,该计算机程序包括程序指令,该处理器被配置用于调用上述程序指令,执行上述第一方面和/或第一方面任一种可能的实施方式所提供的方法。
第四方面,本申请实施例提供了一种计算机可读存储介质,该计算机可读存储介质存储有计算机程序,该计算机程序包括程序指令,该程序指令当被处理器执行时使该处理器执行上述第一方面和/或第一方面任一种可能的实施方式所提供的方法。
本申请实施例提供的方法,通过获取第一终端的显示界面上目标对象对应的第一位置,可将第一位置确定为参考位置,并在第一位置上生成可移动图标。移动可移动图标至第二位置,在可移动图标移动过程中显示可移动图标的当前位置与第一位置之间的连线。然后基于第二位置、参考位置、以及第一终端对应的第一屏幕分辨率确定出可移动图标与目标对象的第一相对偏移距离。通过进一步获取在第二位置上的操作事件,可将目标对象、第一相对偏移距离以及操作事件保存在脚本中以完成脚本录制。采用本申请实施例,可提高脚本录制效率和录制正确率,降低脚本维护风险,适用性高。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的脚本录制方法的一流程示意图;
图1a是本申请实施例提供的显示界面上确定出目标对象的应用场景示意图;
图1b是本申请实施例提供的生成可移动图标的应用场景示意图;
图1c是本申请实施例提供的显示连线的效果示意图;
图1d是本申请实施例提供的显示连线与第一位置的效果示意图;
图2是本申请实施例提供的脚本录制方法的另一流程示意图;
图2a是本申请实施例提供的改变可移动图标的位置的效果示意图;
图3是本申请实施例提供的脚本录制方法的另一流程示意图;
图3a是本申请实施例提供的显示界面上包括多个对象的应用场景示意图;
图3b是本申请实施例提供的更换目标对象的应用场景示意图;
图4是本申请实施例提供的脚本录制装置的一结构示意图;
图5是本申请实施例提供的脚本录制装置的另一结构示意图;
图6是本申请实施例提供的终端设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请实施例提供的脚本录制方法,可广泛适用于能够录制脚本的服务器或终端。其中,终端包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、移动互联网设备(mobile internet device,MID)等,在此不做限制。例如,在游戏录制的应用场景中,当游戏过程中的实际操作位置在游戏场景中的背景图像(例如空白区域)上时,则需要获取游戏场景中的标志性图像作为目标对象,并设置背景图像相对于目标对象的相对偏移距离,以及在背景图像上的操作事件保存在脚本中。具体地,本申请实施例提供的方法,通过获取第一终端的显示界面上目标对象对应的第一位置,可将第一位置确定为参考位置,并在第一位置上生成可移动图标。移动可移动图标至第二位置,在可移动图标移动过程中显示可移动图标的当前位置与第一位置之间的连线。然后基于第二位置、参考位置、以及第一终端对应的第一屏幕分辨率确定出可移动图标与目标对象的第一相对偏移距离。通过进一步获取在第二位置上的操作事件,可将目标对象、第一相对偏移距离以及操作事件保存在脚本中以完成脚本录制。采用本申请实施例,可提高脚本录制效率和录制正确率,降低脚本维护风险,适用性高。
下面将结合图1至图6分别对本申请实施例提供的方法及相关装置分别进行详细说明。本申请实施例提供的方法中可包括用于获取第一位置、在第一位置上生成可移动图标、基于获取的第一移动操作移动可移动图标、显示可移动图标与第一位置间的连线、获取第一位置确认操作、获取第二位置、确定第一相对偏移距离、获取操作事件以及将数据保存至脚本等数据处理阶段。其中,上述各个数据处理阶段的实现方式可参见如下图1至图3所示的实现方式。
参见图1,图1为本申请实施例提供的脚本录制方法的一流程示意图。本申请实施例提供的方法可以包括如下步骤101至104:
101、获取第一终端的显示界面上目标对象对应的第一位置作为参考位置,并在第一位置上获取可移动图标。
在一些可行的实施方式中,第一终端为用于录制脚本的终端,显示界面为第一终端的显示屏上所呈现的界面或画面,目标对象为终端用户在显示界面上所选择或框选的画面内容,例如目标对象可以是显示界面中的文字或图片等。其中终端包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、移动互联网设备(mobile internet device,MID)等,在此不做限制。在本申请实施例中,终端用户可通过鼠标或触控笔等在第一终端的显示界面上框选目标对象,第一终端通过实时监控终端用户在显示界面上的用户操作,可得到目标对象以及目标对象对应的第一位置。其中目标对象对应的第一位置可以是目标对象的中心点对应的位置,或者也可以是目标对象的任一顶点对应的位置等,在此不做限制。例如参见图1a,图1a是本申请实施例提供的显示界面上确定出目标对象的应用场景示意图。如图1a所示,图1a中矩阵方框所框选的画面内容即为目标对象,其中,目标对象对应的第一位置为O点(即中心点)对应的坐标位置,或者目标对象对应的第一位置为目标对象的任一顶点对应的坐标位置,例如可以是A点或B点或C点或D点对应的坐标位置。其中为方便描述,以下本申请实施例中,以目标对象对应的第一位置为目标对象的中心点对应的坐标位置为例进行说明。应当理解的是,在获取到目标对象对应的第一位置后,可在第一位置上生成或显示可移动图标,并将第一位置确定为参考位置。其中可移动图标为终端用户可拖动的图标,在本申请实施例中,所生成的可移动图标的形状包括十字形,三角形,五角星形或菱形等,在此不做限制。例如参见图1b,图1b是本申请实施例提供的生成可移动图标的应用场景示意图。如图1b所示,图1b中矩阵方框所框选的画面内容即为目标对象,第一位置为目标对象的中心点对应的坐标位置,其中在第一位置上展示的可移动图标为十字形。
102、移动可移动图标至第二位置,并在可移动图标移动过程中显示可移动图标的当前位置与第一位置之间的连线。
在一些可行的实施方式中,终端用户通过选中显示界面上的可移动图标,可拖动该可移动图标在显示界面内向任意方向移动,其中第一终端通过实时监控终端用户在显示界面上对可移动图标的第一移动操作,可基于上述第一移动操作在显示界面内移动该可移动图标。应当理解的是,在可移动图标移动过程中,显示界面上可显示可移动图标的当前位置与第一位置之间的连线。例如,参见图1c,图1c是本申请实施例提供的显示连线的效果示意图。如图1c所示,图1c中的虚线即为可移动图标的当前位置与目标对象对应的第一位置之间的连线。
可选的,在一些可行的实施方式中,基于可移动图标的当前位置和第一位置确定可移动图标与目标对象间的第一绝对偏移坐标,在可移动图标移动过程中显示可移动图标的当前位置与第一位置之间的连线的同时,还可以显示第一绝对偏移坐标,其中第一绝对偏移坐标=当前位置-第一位置。例如,假设当前位置为(500,480),第一位置为(670,420),用当前位置减去第一位置,即可得到可移动图标与目标对象间的第一绝对偏移坐标,这里第一绝对偏移坐标为(170,60)。参见图1d,图1d是本申请实施例提供的显示连线与第一位置的效果示意图。如图1d所示,图1d中的虚线即为可移动图标的当前位置与目标对象对应的第一位置之间的连线,虚线上显示的值(170,60)即为第一绝对偏移坐标。
在一些可行的实施方式中,终端用户通过将鼠标或触控笔从显示界面上离开,即可取消选中的可移动图标,其中第一终端通过实时监控终端用户在显示界面上的操作,可将可移动图标被取消选中的操作确定为第一位置确认操作,通过获取的针对可移动图标的第一位置确认操作,可基于第一位置确认操作获取可移动图标对应的第二位置。可选的,在一些可行的实施方式中,还可以通过检测终端用户在显示界面上的点击操作,然后将获取的点击操作确定为第一位置确认操作,并基于第一位置确认操作获取可移动图标对应的第二位置。应当理解,本申请实施例中还可以将上述点击操作确定为第二位置上的操作事件。
103、基于参考位置、第二位置、以及第一终端的第一屏幕分辨率获取可移动图标与目标对象的第一相对偏移距离。
在一些可行的实施方式中,基于获取的第二位置、参考位置、以及第一终端对应的第一屏幕分辨率,可确定出可移动图标与目标对象间的第一相对偏移距离。在本申请实施例中,可先通过计算第二位置和参考位置之间的位置差值,然后基于位置差值以及第一屏幕分辨率生成第一相对偏移距离,其中,位置差值=第二位置-参考位置,第一相对偏移距离=位置差值÷第一屏幕分辨率。
举例来说,假设第二位置为(800,480),参考位置为(500,420),第一终端对应的第一屏幕分辨率为1920×1080,基于上述位置差值=第二位置-参考位置,可得到位置差值为(300,60)。然后根据位置差值以及第一屏幕分辨率可计算出第一相对偏移距离(x,y),其中x=300÷1920=0.15625,y=60÷1080=0.05555,即第一相对偏移距离为(0.15625,0.05555)。
104、获取在第二位置上的操作事件,将目标对象、第一相对偏移距离以及操作事件保存在脚本中以完成脚本录制。
在一些可行的实施方式中,当终端用户拖动可移动图标移动至第二位置后,可在第二位置上执行点击操作、长按操作或滑动操作等操作事件,具体根据实际应用场景确定,在此不做限制。其中第一终端通过实时监控终端用户在显示界面的第二位置处执行的操作事件,可将获取到的操作事件、目标对象以及第一相对偏移距离保存至脚本中。
可选的,在一些可行的实施方式中,在生成脚本后,第一终端可将脚本发送至第二终端,然后在第二终端回放该脚本时,第二终端通过识别第二终端的显示界面上包括的目标对象,可获取到第二终端的显示界面上目标对象对应的第六位置,再结合第二终端对应的第二屏幕分辨率、脚本中包括的第一相对偏移距离,可确定出第七位置,并在第七位置上执行脚本中包括的操作事件。其中第二终端为用于回放脚本的终端,第二终端包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、移动互联网设备(mobile internet device,MID)等,在此不做限制。应当理解,第二终端对应的第二屏幕分辨率与第一终端对应的第一屏幕分辨率可以相同,也可以不同,在此不做限制。其中第七位置=第六位置+第一相对偏移距离×第二屏幕分辨率。例如,假设获取到第二终端的显示界面上目标对象对应的第六位置为(380,240),第二屏幕分辨率为1024×540,第一相对偏移距离为(0.15625,0.05555),则第七位置=(380,240)+(1024×0.15625,540×0.05555)=(540,270)。
在本申请实施例中,通过获取第一终端的显示界面上目标对象对应的第一位置,可将第一位置确定为参考位置,并在第一位置上生成可移动图标。通过获取对可移动图标的第一移动操作,可基于第一移动操作移动可移动图标,并在可移动图标移动过程中显示可移动图标的当前位置与第一位置之间的连线。通过获取针对可移动图标的第一位置确认操作,可基于第一位置确认操作获取可移动图标对应的第二位置,然后基于第二位置、参考位置、以及第一终端对应的第一屏幕分辨率可确定出可移动图标与目标对象的第一相对偏移距离。通过进一步获取在第二位置上的操作事件,可将目标对象、第一相对偏移距离以及操作事件保存在脚本中。采用本申请实施例,可提高脚本录制效率和录制正确率,同时可在录制过程中展示偏移位置,适用性高。
参见图2,图2是本申请实施例提供的脚本录制方法的另一流程示意图。本申请实施例提供的脚本录制方法可通过如下步骤201至207提供的实现方式进行说明:
201、获取第一终端的显示界面上目标对象对应的第一位置作为参考位置,并在第一位置上生成可移动图标。
在一些可行的实施方式中,第一终端为用于录制脚本的终端,显示界面为第一终端的显示屏上所呈现的界面或画面,目标对象为终端用户在显示界面上所选择的画面内容,例如目标对象可以是显示界面中的文字或图片等。其中终端包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、移动互联网设备(mobile internet device,MID)等,在此不做限制。在本申请实施例中,终端用户可通过鼠标或触控笔等在第一终端的显示界面上框选目标对象,第一终端通过实时监控终端用户在显示界面上的用户操作,可得到目标对象以及目标对象对应的第一位置。其中目标对象对应的第一位置可以是目标对象的中心点对应的位置,或者也可以是目标对象的任一顶点对应的位置等,在此不做限制。例如参见图1a,图1a是本申请实施例提供的显示界面上确定出目标对象的应用场景示意图。如图1a所示,图1a中矩阵方框所框选的画面内容即为目标对象,其中,目标对象对应的第一位置为O点(即中心点)对应的坐标位置,或者目标对象对应的第一位置为目标对象的任一顶点对应的坐标位置,例如可以是A点或B点或C点或D点对应的坐标位置。其中为方便描述,以下本申请实施例中以目标对象对应的第一位置为目标对象的中心点对应的坐标位置为例进行说明。应当理解的是,在获取到目标对象对应的第一位置后,可在第一位置上生成或显示可移动图标,并将第一位置确定为参考位置。其中可移动图标为终端用户可拖动的图标,在本申请实施例中,所生成的可移动图标的形状包括十字形,三角形,五角星形或菱形等,在此不做限制。例如参见图1b,图1b是本申请实施例提供的生成可移动图标的应用场景示意图。如图1b所示,图1b中矩阵方框所框选的画面内容即为目标对象,第一位置为目标对象的中心点对应的坐标位置,其中在第一位置上显示的可移动图标为十字形。
202、获取对可移动图标的第一移动操作,基于第一移动操作移动可移动图标,并在可移动图标移动过程中显示可移动图标的当前位置与第一位置之间的连线。
在一些可行的实施方式中,终端用户通过选中显示界面上的可移动图标,可拖动该可移动图标在显示界面内向任意方向移动,其中第一终端通过实时监控终端用户在显示界面上对可移动图标的第一移动操作,可基于上述第一移动操作在显示界面内移动该可移动图标。应当理解的是,在可移动图标移动过程中,显示界面上可显示可移动图标的当前位置与第一位置之间的连线。例如,参见图1c,图1c是本申请实施例提供的显示连线的效果示意图。如图1c所示,图1c中的虚线即为可移动图标的当前位置与目标对象对应的第一位置之间的连线。
可选的,在一些可行的实施方式中,基于可移动图标的当前位置和第一位置确定可移动图标与目标对象间的第一绝对偏移坐标,在可移动图标移动过程中显示可移动图标的当前位置与第一位置之间的连线的同时,还可以显示第一绝对偏移坐标,其中第一绝对偏移坐标=当前位置-第一位置。例如,假设当前位置为(500,480),第一位置为(670,420),用当前位置减去第一位置,即可得到可移动图标与目标对象间的第一绝对偏移坐标,这里第一绝对偏移坐标为(170,60)。参见图1d,图1d是本申请实施例提供的显示连线与第一位置的效果示意图。如图1d所示,图1d中的虚线即为可移动图标的当前位置与目标对象对应的第一位置之间的连线,虚线上显示的值(170,60)即为第一绝对偏移坐标。
203、获取针对可移动图标的第一位置确认操作,基于第一位置确认操作获取可移动图标对应的第二位置。
在一些可行的实施方式中,终端用户通过将鼠标或触控笔从显示界面上离开,即可取消选中的可移动图标,其中第一终端通过实时监控终端用户在显示界面上的操作,可将可移动图标被取消选中的操作确定为第一位置确认操作,通过获取的针对可移动图标的第一位置确认操作,可基于第一位置确认操作获取可移动图标对应的第二位置,即,将执行第一位置确认操作时对应的当前位置确定为第二位置。可选的,在一些可行的实施方式中,还可以通过检测终端用户在显示界面上的点击操作,将获取的点击操作确定为第一位置确认操作,并基于第一位置确认操作获取得到可移动图标对应的第二位置。其中,本申请实施例可将上述点击操作确定为第二位置上的操作事件。
204、基于参考位置、第二位置、以及第一终端的第一屏幕分辨率获取可移动图标与目标对象的第一相对偏移距离。
在一些可行的实施方式中,基于获取的第二位置、参考位置、以及第一终端对应的第一屏幕分辨率,可确定出可移动图标与目标对象间的第一相对偏移距离。在本申请实施例中,可先通过计算第二位置和参考位置之间的位置差值,然后基于位置差值以及第一屏幕分辨率生成第一相对偏移距离,其中,位置差值=第二位置-参考位置,第一相对偏移距离=位置差值÷第一屏幕分辨率。
举例来说,假设第二位置为(800,480),参考位置为(500,420),第一终端对应的第一屏幕分辨率为1920×1080,基于上述位置差值=第二位置-参考位置,可得到位置差值为(300,60)。然后根据位置差值以及第一屏幕分辨率可计算出第一相对偏移距离(x,y),其中x=300÷1920=0.15625,y=60÷1080=0.05555,即第一相对偏移距离为(0.15625,0.05555)。
205、获取在第二位置上的操作事件,将目标对象、第一相对偏移距离以及操作事件保存在脚本中以完成脚本录制。
在一些可行的实施方式中,当终端用户拖动可移动图标移动至第二位置后,可在第二位置上执行点击操作、长按操作或滑动操作等操作事件,具体根据实际应用场景确定,在此不做限制。其中第一终端通过实时监控终端用户在显示界面的第二位置处执行的操作事件,可将获取到的操作事件、目标对象以及第一相对偏移距离保存至脚本中。
206、获取对可移动图标的第二移动操作,基于第二移动操作移动可移动图标,获取针对可移动图标的第二位置确认操作,基于第二位置确认操作获取可移动图标对应的第三位置,并在可移动图标移动过程中显示可移动图标的当前位置与第一位置之间的连线。
在一些可行的实施方式中,当需要修改目标对象对应的第一相对偏移距离时,终端用户可通过再次选中显示界面上目标对象对应的可移动图标,并拖动该可移动图标在显示界面上进行移动,以改变可移动图标在显示界面中的位置。其中第一终端通过实时监控终端用户在显示界面上对可移动图标的第二移动操作,可基于上述第二移动操作在显示界面内移动该可移动图标,当获取到针对可移动图标的第二位置确认操作时,可基于第二位置确认操作获取可移动图标对应的第三位置,并在可移动图标移动过程中显示可移动图标的当前位置与第一位置之间的连线。应当理解,本申请实施例中,终端用户通过将鼠标或触控笔从显示界面上离开,即可取消选中的可移动图标,其中第一终端通过实时监控终端用户在显示界面上的操作,可将可移动图标被取消选中的操作确定为第二位置确认操作,通过获取的针对可移动图标的第二位置确认操作,可基于第二位置确认操作获取可移动图标对应的第二位置,即,将执行第二位置确认操作时对应的当前位置确定为第二位置。可选的,在一些可行的实施方式中,还可以通过检测终端用户在显示界面上的点击操作,将获取的点击操作确定为第二位置确认操作,并基于第二位置确认操作获取得到可移动图标对应的第三位置。参见图2a,图2a是本申请实施例提供的改变可移动图标的位置的效果示意图。
207、基于第三位置、参考位置、以及第一终端对应的第一屏幕分辨率确定可移动图标与目标对象的第二相对偏移距离,将脚本中的第一相对偏移距离替换为第二相对偏移距离。
在一些可行的实施方式中,基于获取的第三位置、参考位置、以及第一终端对应的第一屏幕分辨率,可确定出可移动图标与目标对象间的第二相对偏移距离。具体地,在本申请实施例中,可先通过计算第三位置和参考位置之间的位置差值,然后基于位置差值以及第一屏幕分辨率生成第二相对偏移距离,也就是说,第二相对偏移距离=(第三位置-参考位置)÷第一屏幕分辨率。通过确定出第二相对偏移距离后,可将脚本中的第一相对偏移距离替换为第二相对偏移距离以更新脚本。
可选的,在一些可行的实施方式中,在更新脚本后,第一终端可将更新后的脚本发送至第二终端,然后在第二终端回放该脚本时,第二终端通过识别第二终端的显示界面上包括的目标对象,可获取到第二终端的显示界面上目标对象对应的第六位置,再结合第二终端对应的第二屏幕分辨率、脚本中包括的第二相对偏移距离,可确定出第七位置,并在第七位置上执行脚本中包括的操作事件。其中第二终端为用于回放脚本的终端,第二终端包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、移动互联网设备(mobile internetdevice,MID)等,在此不做限制。应当理解,第二终端对应的第二屏幕分辨率与第一终端对应的第一屏幕分辨率可以相同,也可以不同,在此不做限制。其中第七位置=第六位置+第二相对偏移距离×第二屏幕分辨率。
在本申请实施例中,通过获取第一终端的显示界面上目标对象对应的第一位置,可将第一位置确定为参考位置,并在第一位置上生成可移动图标。通过获取对可移动图标的第一移动操作,可基于第一移动操作移动可移动图标,并在可移动图标移动过程中显示可移动图标的当前位置与第一位置之间的连线。通过获取针对可移动图标的第一位置确认操作,可基于第一位置确认操作获取可移动图标对应的第二位置,然后基于第二位置、参考位置、以及第一终端对应的第一屏幕分辨率可确定出可移动图标与目标对象的第一相对偏移距离。通过进一步获取在第二位置上的操作事件,可将目标对象、第一相对偏移距离以及操作事件保存在脚本中。若需要更新脚本中包括的目标对象对应的第一相对偏移距离,则通过获取对可移动图标的第二移动操作,可基于第二移动操作移动可移动图标,通过获取针对可移动图标的第二位置确认操作,可基于第二位置确认操作获取可移动图标对应的第三位置,并在可移动图标移动过程中显示可移动图标的当前位置与第一位置之间的连线。基于第三位置、参考位置、以及第一终端对应的第一屏幕分辨率可确定出可移动图标与目标对象的第二相对偏移距离,最后将脚本中的第一相对偏移距离替换为第二相对偏移距离。采用本申请实施例,可提高脚本录制效率和录制正确率,同时可在录制过程中展示偏移位置,降低脚本更新或维护风险,适用性高。
参见图3,图3是本申请实施例提供的脚本录制方法的另一流程示意图。本申请实施例提供的脚本录制方法可通过如下步骤301至306提供的实现方式进行说明:
301、获取第一终端的显示界面上目标对象对应的第一位置作为参考位置,并在第一位置上生成可移动图标。
在一些可行的实施方式中,第一终端为用于录制脚本的终端,显示界面为第一终端的显示屏上所呈现的界面或画面,目标对象为终端用户在显示界面上所选择的画面内容,例如目标对象可以是显示界面中的文字或图片等。其中终端包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、移动互联网设备(mobile internet device,MID)等,在此不做限制。在本申请实施例中,终端用户可通过鼠标或触控笔等在第一终端的显示界面上框选目标对象,第一终端通过实时监控终端用户在显示界面上的用户操作,可得到目标对象以及目标对象对应的第一位置。其中目标对象对应的第一位置可以是目标对象的中心点对应的位置,或者也可以是目标对象的任一顶点对应的位置等,在此不做限制。例如参见图1a,图1a是本申请实施例提供的显示界面上确定出目标对象的应用场景示意图。如图1a所示,图1a中矩阵方框所框选的画面内容即为目标对象,其中,目标对象对应的第一位置为O点(即中心点)对应的坐标位置,或者目标对象对应的第一位置为目标对象的任一顶点对应的坐标位置,例如可以是A点或B点或C点或D点对应的坐标位置。其中为方便描述,以下本申请实施例中以目标对象对应的第一位置为目标对象的中心点对应的坐标位置为例进行说明。应当理解的是,在获取到目标对象对应的第一位置后,可在第一位置上生成或显示可移动图标,并将第一位置确定为参考位置。其中可移动图标为终端用户可拖动的图标,在本申请实施例中,所生成的可移动图标的形状包括十字形,三角形,五角星形或菱形等,在此不做限制。例如参见图1b,图1b是本申请实施例提供的生成可移动图标的应用场景示意图。如图1b所示,图1b中矩阵方框所框选的画面内容即为目标对象,第一位置为目标对象的中心点对应的坐标位置,第一位置上显示的可移动图标为十字形。
302、获取对可移动图标的第一移动操作,基于第一移动操作移动可移动图标,并在可移动图标移动过程中显示可移动图标的当前位置与第一位置之间的连线。
在一些可行的实施方式中,终端用户通过选中显示界面上的可移动图标,可拖动该可移动图标在显示界面内向任意方向移动,其中第一终端通过实时监控终端用户在显示界面上对可移动图标的第一移动操作,可基于上述第一移动操作在显示界面内移动该可移动图标。应当理解的是,在可移动图标移动过程中,显示界面上可显示可移动图标的当前位置与第一位置之间的连线。例如,参见图1c,图1c是本申请实施例提供的显示连线的效果示意图。如图1c所示,图1c中的虚线即为当前位置与第一位置之间的连线。
可选的,在一些可行的实施方式中,基于可移动图标的当前位置和第一位置确定可移动图标与目标对象间的第一绝对偏移坐标,在可移动图标移动过程中显示可移动图标的当前位置与第一位置之间的连线的同时,还可以显示第一绝对偏移坐标,其中第一绝对偏移坐标=当前位置-第一位置。例如,假设当前位置为(500,480),第一位置为(670,420),用当前位置减去第一位置,即可得到可移动图标与目标对象间的第一绝对偏移坐标,这里第一绝对偏移坐标为(170,60)。参见图1d,图1d是本申请实施例提供的显示连线与第一位置的效果示意图。如图1d所示,图1d中的虚线即为当前位置与第一位置之间的连线,虚线上显示的值(170,60)即为第一绝对偏移坐标。
303、在可移动图标移动过程中,若第一终端的显示界面上包括的多个对象中,任一对象对应的第五位置与可移动图标的当前位置之间的距离小于第一位置与可移动图标的当前位置之间的距离,则将目标对象更换为所述任一对象,并将参考位置更换为所述任一对象对应的第五位置。
在一些可行的实施方式中,在可移动图标移动过程中,若第一终端的显示界面上包括的多个对象中,任一对象对应的位置(即第五位置)与可移动图标的当前位置之间的距离小于第一位置与可移动图标的当前位置之间的距离,则将目标对象更换为所述任一对象,并将参考位置更换为所述任一对象对应的第五位置。例如,参见图3a,图3a是本申请实施例提供的显示界面上包括多个对象的应用场景示意图。如图3a所示,显示界面上共包括4个对象,分别为对象1、对象2、对象3以及对象4,其中对象4为目标对象。具体地,在目标对象对应的可移动图标的移动过程中,获取多个对象中每个对象对应的位置(即第五位置)与可移动图标的当前位置之间的距离,若任一对象对应的第五位置与可移动图标的当前位置之间的距离,小于目标对象对应的第一位置与可移动图标的当前位置之间的距离,则将目标对象更换为所述任一对象,并将参考位置更换为所述任一对象对应的第五位置。应当理解,假设任一对象i对应的位置为(xi,yi),可移动图标的当前位置为(xj,yj),则任一对象与可移动图标间的距离公式为
例如,参见图3b,图3b是本申请实施例提供的更换目标对象的应用场景示意图。如图3b所示,图3b的显示界面中包括对象1、对象2、对象3以及对象4,对象1对应的位置为(x1,y1),对象2对应的位置为(x2,y2),对象3对应的位置为(x3,y3),对象4对应的位置为(x4,y4),其中对象4为目标对象,参考位置为(x4,y4),目标对象对应的可移动图标为图3b中的十字形,该可移动图标的当前位置为(x0,y0)。根据距离公式可计算出每个对象与可移动图标间的距离,假设对象1与可移动图标间的距离为连线1对应的长度L1,对象2与可移动图标间的距离为连线2对应的长度L2,对象3与可移动图标间的距离为连线3对应的长度L3,对象4(即目标对象)与可移动图标间的距离为连线4对应的长度L4。由图3b可以看出,L1>L4>L3>L2,因此,可将目标对象更换为与可移动图标的当前位置(x0,y0)距离最近的对象,即,可将目标对象由对象4更换为对象2,同时将参考位置由(x4,y4)更换为(x2,y2)。
304、获取针对可移动图标的第一位置确认操作,基于第一位置确认操作获取可移动图标对应的第二位置。
在一些可行的实施方式中,终端用户通过将鼠标或触控笔从显示界面上离开,即可取消选中的可移动图标,其中第一终端通过实时监控终端用户在显示界面上的操作,可将可移动图标被取消选中的操作确定为第一位置确认操作,通过获取的针对可移动图标的第一位置确认操作,可基于第一位置确认操作获取可移动图标对应的第二位置。可选的,在一些可行的实施方式中,还可以通过检测终端用户在显示界面上的点击操作,然后将获取的点击操作确定为第一位置确认操作,并基于第一位置确认操作获取可移动图标对应的第二位置。应当理解,本申请实施例中还可以将上述点击操作确定为第二位置上的操作事件。
305、基于参考位置、第二位置、以及第一终端的第一屏幕分辨率获取可移动图标与目标对象的第一相对偏移距离。
在一些可行的实施方式中,基于获取的第二位置、参考位置、以及第一终端对应的第一屏幕分辨率,可确定出可移动图标与目标对象间的第一相对偏移距离。在本申请实施例中,可先通过计算第二位置和参考位置之间的位置差值,然后基于位置差值以及第一屏幕分辨率生成第一相对偏移距离,其中,位置差值=第二位置-参考位置,第一相对偏移距离=位置差值÷第一屏幕分辨率。
举例来说,假设第二位置为(800,480),参考位置为(500,420),第一终端对应的第一屏幕分辨率为1920×1080,基于上述位置差值=第二位置-参考位置,可得到位置差值为(300,60)。然后根据位置差值以及第一屏幕分辨率可计算出第一相对偏移距离(x,y),其中x=300÷1920=0.15625,y=60÷1080=0.05555,即第一相对偏移距离为(0.15625,0.05555)。
306、获取在第二位置上的操作事件,将目标对象、第一相对偏移距离以及操作事件保存在脚本中以完成脚本录制。
在一些可行的实施方式中,当终端用户拖动可移动图标移动至第二位置后,可在第二位置上执行点击操作、长按操作或滑动操作等操作事件,具体根据实际应用场景确定,在此不做限制。其中第一终端通过实时监控终端用户在显示界面的第二位置处执行的操作事件,可将获取到的操作事件、目标对象以及第一相对偏移距离保存至脚本中。
可选的,在一些可行的实施方式中,在生成脚本后,第一终端可将脚本发送至第二终端,然后在第二终端回放该脚本时,第二终端通过识别第二终端的显示界面上包括的目标对象,可获取到第二终端的显示界面上目标对象对应的第六位置,再结合第二终端对应的第二屏幕分辨率、脚本中包括的第一相对偏移距离,可确定出第七位置,并在第七位置上执行脚本中包括的操作事件。其中第二终端为用于回放脚本的终端,第二终端包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、移动互联网设备(mobile internet device,MID)等,在此不做限制。应当理解,第二终端对应的第二屏幕分辨率与第一终端对应的第一屏幕分辨率可以相同,也可以不同,在此不做限制。其中第七位置=第六位置+第一相对偏移距离×第二屏幕分辨率。例如,假设获取到第二终端的显示界面上目标对象对应的第六位置为(380,240),第二屏幕分辨率为1024×540,第一相对偏移距离为(0.15625,0.05555),则第七位置=(380,240)+(1024×0.15625,540×0.05555)=(540,270)。
在本申请实施例中,通过获取第一终端的显示界面上目标对象对应的第一位置,可将第一位置确定为参考位置,并在第一位置上生成可移动图标。通过获取对可移动图标的第一移动操作,可基于第一移动操作移动可移动图标,并在可移动图标移动过程中显示可移动图标的当前位置与第一位置之间的连线。其中,在可移动图标移动过程中,若第一终端的显示界面上包括的多个对象中,任一对象对应的第五位置与可移动图标的当前位置之间的距离小于第一位置与可移动图标的当前位置之间的距离,则将目标对象更换为所述任一对象,并将参考位置更换为所述任一对象对应的第五位置。然后通过获取针对可移动图标的第一位置确认操作,可基于第一位置确认操作获取可移动图标对应的第二位置,再基于第二位置、参考位置、以及第一终端对应的第一屏幕分辨率可确定出可移动图标与目标对象的第一相对偏移距离。最后通过进一步获取在第二位置上的操作事件,可将目标对象、第一相对偏移距离以及操作事件保存在脚本中。采用本申请实施例,可提高脚本录制效率和录制正确率,同时可在录制过程中展示偏移位置,及时更新目标对象以及参考位置,提高录制效率,适用性高。
参见图4,图4是本申请实施例提供的脚本录制装置的一结构示意图。本申请实施例提供的脚本录制装置包括:
可移动图标获取模块41,用于获取第一终端的显示界面上目标对象对应的第一位置作为参考位置,并在上述第一位置上获取可移动图标;
位置确定模块42,用于移动上述可移动图标至第二位置,并在上述可移动图标移动过程中显示上述可移动图标的当前位置与上述第一位置之间的连线;
第一相对偏移值确定模块43,用于基于上述参考位置、上述第二位置、以及上述第一终端的第一屏幕分辨率获取上述可移动图标与上述目标对象的第一相对偏移距离;
脚本生成模块44,用于获取在上述第二位置上的操作事件,将上述目标对象、上述第一相对偏移距离以及上述操作事件保存在脚本中以完成脚本录制。
请一并参见图5,图5是本申请实施例提供的脚本录制装置的另一结构示意图。
在一些可行的实施方式中,上述位置确定模块42具体用于:
获取对上述可移动图标的第一移动操作,基于上述第一移动操作移动上述可移动图标;
获取针对上述可移动图标的第一位置确认操作,基于上述第一位置确认操作获取上述可移动图标对应的第二位置。
在一些可行的实施方式中,上述装置还包括脚本更新模块45,上述脚本更新模块45包括:
移动操作获取单元451,用于获取对上述可移动图标的第二移动操作,基于上述第二移动操作移动上述可移动图标;
位置获取单元452,用于获取针对上述可移动图标的第二位置确认操作,基于上述第二位置确认操作获取上述可移动图标对应的第三位置,并在上述可移动图标移动过程中显示上述可移动图标的当前位置与上述第一位置之间的连线;
第二相对偏移值确定单元453,用于基于上述第三位置、上述参考位置、以及上述第一终端对应的第一屏幕分辨率确定上述可移动图标与上述目标对象的第二相对偏移距离;
相对偏移值更新单元454,用于将上述脚本中的上述第一相对偏移距离替换为上述第二相对偏移距离。
在一些可行的实施方式中,上述装置还包括目标对象更换模块46,上述目标对象更换模块46包括:
位置确定单元461,用于当上述第一终端的显示界面上包括多个对象时,获取上述多个对象分别对应的第五位置;
目标对象更换单元462,用于在上述可移动图标移动过程中,若上述多个对象中任一对象对应的第五位置与上述可移动图标的当前位置之间的距离小于上述第一位置与上述可移动图标的当前位置之间的距离时,将上述目标对象更换为上述任一对象,并将上述参考位置更换为上述任一对象对应的第五位置。
在一些可行的实施方式中,上述位置确定模块42包括可移动图标移动单元421和位置确认操作获取单元422,其中上述位置确认操作获取单元422具体用于:
将上述可移动图标被取消选中的操作确定为第一位置确认操作;或者
当检测到点击操作时,将上述点击操作确定为第一位置确认操作,并将上述点击操作确定为上述操作事件。
在一些可行的实施方式中,上述相对偏移值确定模块43包括:
位置差值确定单元431,用于计算上述第二位置和上述参考位置之间的位置差值;
相对偏移值计算单元432,用于基于上述位置差值以及上述第一屏幕分辨率生成第一相对偏移距离。
在一些可行的实施方式中,上述装置还包括脚本发送模块47,上述脚本发送模块47用于:
将上述脚本发送至第二终端;
其中,在上述第二终端回放上述脚本时,上述第二终端用于:
识别上述第二终端的显示界面上包括的上述目标对象,并获取上述第二终端的显示界面上上述目标对象对应的第六位置;
根据上述第二终端对应的第二屏幕分辨率、上述第一相对偏移距离以及上述第六位置确定出第七位置,并在上述第七位置上执行上述操作事件。
在一些可行的实施方式中,上述第二终端还用于:
根据上述第二屏幕分辨率和上述第一相对偏移距离确定第二绝对偏移;
根据上述第六位置和上述第二绝对偏移确定第七位置。
具体实现中,上述脚本录制装置可通过其内置的各个功能模块执行如上述图1至图3中各个步骤所提供的实现方式。例如,上述可移动图标获取模块41可用于执行上述各个步骤中获取目标对象对应的第一位置、获取可移动图标等实现方式,具体可参见上述各个步骤所提供的实现方式,在此不再赘述。上述位置确定模块42可用于执行上述各个步骤中移动可移动图标、显示可移动图标与第一位置之间的连线、获取第二位置等相关步骤所描述的实现方式,具体可参见上述各个步骤所提供的实现方式,在此不再赘述。上述第一相对偏移值确定模块43可用于执行上述各个步骤中基于第二位置、参考位置、以及第一终端对应的第一屏幕分辨率计算第一相对偏移距离等实现方式,具体可参见上述各个步骤所提供的实现方式,在此不再赘述。上述脚本生成模块44可用于执行上述各个步骤中获取操作事件、将目标对象、第一相对偏移距离以及操作事件保存在脚本中等相关步骤所描述的实现方式,具体可参见上述各个步骤所提供的实现方式,在此不再赘述。上述脚本更新模块45可用于执行上述各个步骤中获取第二移动操作、获取第二位置确认操作、确定第二相对偏移距离以及将脚本中的第一相对偏移距离替换为第二相对偏移距离等实现方式,具体可参见上述各个步骤所提供的实现方式,在此不再赘述。上述目标对象更换模块46可用于执行上述各个步骤中获取第五位置,获取第五位置与可移动图标间的距离、获取第一位置与可移动图标间的距离、更换目标对象为距离更小的第五位置对应的对象、以及更换参考位置为第五位置相关步骤所描述的实现方式,具体可参见上述各个步骤所提供的实现方式,在此不再赘述。上述脚本发送模块47可用于执行上述各个步骤中将脚本发送至第二终端等实现方式,具体可参见上述各个步骤所提供的实现方式,在此不再赘述。
在本申请实施例中,脚本录制装置通过获取第一终端的显示界面上目标对象对应的第一位置,可将第一位置确定为参考位置,并在第一位置上生成可移动图标。通过获取对可移动图标的第一移动操作,可基于第一移动操作移动可移动图标,并在可移动图标移动过程中显示可移动图标的当前位置与第一位置之间的连线。通过获取针对可移动图标的第一位置确认操作,可基于第一位置确认操作获取可移动图标对应的第二位置,然后基于第二位置、参考位置、以及第一终端对应的第一屏幕分辨率可确定出可移动图标与目标对象的第一相对偏移距离。通过进一步获取在第二位置上的操作事件,可将目标对象、第一相对偏移距离以及操作事件保存在脚本中。采用本申请实施例,可提高脚本录制效率和录制正确率,同时可在录制过程中展示偏移位置,灵活性高,适用范围广。
参见图6,图6是本申请实施例提供的终端设备的结构示意图。如图6所示,本实施例中的终端设备可以包括:一个或多个处理器501、存储器502、用户接口503以及网络接口504。上述处理器501、存储器502、用户接口503和网络接口504通过总线505连接。存储器502用于存储计算机程序,该计算机程序包括程序指令,处理器501用于执行存储器502存储的程序指令,执行如下操作:
获取第一终端的显示界面上目标对象对应的第一位置作为参考位置,并在上述第一位置上获取可移动图标;
移动上述可移动图标至第二位置,并在上述可移动图标移动过程中显示上述可移动图标的当前位置与上述第一位置之间的连线;
基于上述参考位置、上述第二位置、以及上述第一终端的第一屏幕分辨率获取上述可移动图标与上述目标对象的第一相对偏移距离;
获取在上述第二位置上的操作事件,将上述目标对象、上述第一相对偏移距离以及上述操作事件保存在脚本中以完成脚本录制。
在一些可行的实施方式中,上述处理器501用于:
获取对上述可移动图标的第一移动操作,基于上述第一移动操作移动上述可移动图标;
获取针对上述可移动图标的第一位置确认操作,基于上述第一位置确认操作获取上述可移动图标对应的第二位置。
在一些可行的实施方式中,上述处理器501用于:
获取对上述可移动图标的第二移动操作,基于上述第二移动操作移动上述可移动图标;
获取针对上述可移动图标的第二位置确认操作,基于上述第二位置确认操作获取上述可移动图标对应的第三位置,并在上述可移动图标移动过程中显示上述可移动图标的当前位置与上述第一位置之间的连线;
基于上述第三位置、上述参考位置、以及上述第一终端对应的第一屏幕分辨率确定上述可移动图标与上述目标对象的第二相对偏移距离;
将上述脚本中的上述第一相对偏移距离替换为上述第二相对偏移距离。
在一些可行的实施方式中,上述处理器501用于:
当上述第一终端的显示界面上包括多个对象时,获取上述多个对象分别对应的第五位置;
在上述可移动图标移动过程中,若上述多个对象中任一对象对应的第五位置与上述可移动图标的当前位置之间的距离小于上述第一位置与上述可移动图标的当前位置之间的距离时,将上述目标对象更换为上述任一对象,并将上述参考位置更换为上述任一对象对应的第五位置。
在一些可行的实施方式中,上述处理器501用于:
将上述可移动图标被取消选中的操作确定为第一位置确认操作;或者
当检测到点击操作时,将上述点击操作确定为第一位置确认操作,并将上述点击操作确定为上述操作事件。
在一些可行的实施方式中,上述处理器501用于:
计算上述第二位置和上述参考位置之间的位置差值;
基于上述位置差值以及上述第一屏幕分辨率生成第一相对偏移距离。
在一些可行的实施方式中,上述处理器501用于:
将上述脚本发送至第二终端。
其中,在上述第二终端回放上述脚本时,上述第二终端用于:
识别上述第二终端的显示界面上包括的上述目标对象,并获取上述第二终端的显示界面上上述目标对象对应的第六位置;
根据上述第二终端对应的第二屏幕分辨率、上述第一相对偏移距离以及上述第六位置确定出第七位置,并在上述第七位置上执行上述操作事件。
在一些可行的实施方式中,上述第二终端还用于:
根据上述第二屏幕分辨率和上述第一相对偏移距离确定第二绝对偏移;
根据上述第六位置和上述第二绝对偏移确定第七位置。
应当理解,在一些可行的实施方式中,上述处理器501可以是中央处理单元(central processing unit,CPU),该处理器还可以是其他通用处理器、数字信号处理器(digital signal processor,DSP)、专用集成电路(application specific integratedcircuit,ASIC)、现成可编程门阵列(field programmable gate array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。该存储器502可以包括只读存储器和随机存取存储器,并向处理器501提供指令和数据。存储器502的一部分还可以包括非易失性随机存取存储器。例如,存储器502还可以存储设备类型的信息。存储器502可选的还可以是至少一个位于远离前述处理器501的存储装置。如图4所示,作为一种计算机存储介质的存储器502中可以包括操作系统、网络通信模块、用户接口模块以及设备控制应用程序。用户接口503可以包括显示屏(Display)、键盘(Keyboard),可选的,用户接口503还可以包括标准的有线接口、无线接口。网络接口504可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。
具体实现中,上述终端设备可通过其内置的各个功能模块执行如上述图1至图3中各个步骤所提供的实现方式,具体可参见上述各个步骤所提供的实现方式,在此不再赘述。
在本申请实施例中,终端设备通过获取第一终端的显示界面上目标对象对应的第一位置,可将第一位置确定为参考位置,并在第一位置上生成可移动图标。通过获取对可移动图标的第一移动操作,可基于第一移动操作移动可移动图标,并在可移动图标移动过程中显示可移动图标的当前位置与第一位置之间的连线。通过获取针对可移动图标的第一位置确认操作,可基于第一位置确认操作获取可移动图标对应的第二位置,然后基于第二位置、参考位置、以及第一终端对应的第一屏幕分辨率可确定出可移动图标与目标对象的第一相对偏移距离。通过进一步获取在第二位置上的操作事件,可将目标对象、第一相对偏移距离以及操作事件保存在脚本中。采用本申请实施例,可提高脚本录制效率和录制正确率,同时可在录制过程中展示偏移位置,灵活性高,适用范围广。
本申请实施例还提供一种计算机可读存储介质,该计算机可读存储介质存储有计算机程序,该计算机程序包括程序指令,该程序指令被处理器执行时实现图1至图3中各个步骤所提供的脚本录制方法,具体可参见上述各个步骤所提供的实现方式,在此不再赘述。
上述计算机可读存储介质可以是前述任一实施例提供的脚本录制装置或者上述终端设备的内部存储单元,例如电子设备的硬盘或内存。该计算机可读存储介质也可以是该电子设备的外部存储设备,例如该电子设备上配备的插接式硬盘,智能存储卡(smartmedia card,SMC),安全数字(secure digital,SD)卡,闪存卡(flash card)等。进一步地,该计算机可读存储介质还可以既包括该电子设备的内部存储单元也包括外部存储设备。该计算机可读存储介质用于存储该计算机程序以及该电子设备所需的其他程序和数据。该计算机可读存储介质还可以用于暂时地存储已经输出或者将要输出的数据。
本申请的权利要求书和说明书及附图中的术语“第一”、“第二”、“第三”、“第四”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
在本文中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置展示该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,本文所描述的实施例可以与其它实施例相结合。在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
本申请实施例提供的方法及相关装置是参照本申请实施例提供的方法流程图和/或结构示意图来描述的,具体可由计算机程序指令实现方法流程图和/或结构示意图的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。这些计算机程序指令可提供到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或结构示意图一个方框或多个方框中指定的功能的装置。这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或结构示意图一个方框或多个方框中指定的功能。这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或结构示意一个方框或多个方框中指定的功能的步骤。
Claims (10)
1.一种脚本录制方法,其特征在于,所述方法包括:
获取第一终端的显示界面上目标对象对应的第一位置作为参考位置,并在所述第一位置上获取可移动图标;
移动所述可移动图标至第二位置,并在所述可移动图标移动过程中显示所述可移动图标的当前位置与所述第一位置之间的连线;
基于所述参考位置、所述第二位置、以及所述第一终端的第一屏幕分辨率获取所述可移动图标与所述目标对象的第一相对偏移距离;
获取在所述第二位置上的操作事件,将所述目标对象、所述第一相对偏移距离以及所述操作事件保存在脚本中以完成脚本录制。
2.根据权利要求1所述方法,其特征在于,所述移动所述可移动图标至第二位置,包括:
获取对所述可移动图标的第一移动操作,基于所述第一移动操作移动所述可移动图标;
获取针对所述可移动图标的第一位置确认操作,基于所述第一位置确认操作获取所述可移动图标对应的第二位置。
3.根据权利要求2所述方法,其特征在于,所述将所述目标对象、所述第一相对偏移距离以及所述操作事件保存在脚本中之后,所述方法还包括:
获取对所述可移动图标的第二移动操作,基于所述第二移动操作移动所述可移动图标;
获取针对所述可移动图标的第二位置确认操作,基于所述第二位置确认操作获取所述可移动图标对应的第三位置,并在所述可移动图标移动过程中显示所述可移动图标的当前位置与所述第一位置之间的连线;
基于所述第三位置、所述参考位置、以及所述第一终端对应的第一屏幕分辨率确定所述可移动图标与所述目标对象的第二相对偏移距离;
将所述脚本中的所述第一相对偏移距离替换为所述第二相对偏移距离。
4.根据权利要求1或2所述方法,其特征在于,所述方法还包括:
当所述第一终端的显示界面上包括多个对象时,获取所述多个对象分别对应的第五位置;
在所述可移动图标移动过程中,若所述多个对象中任一对象对应的第五位置与所述可移动图标的当前位置之间的距离小于所述第一位置与所述可移动图标的当前位置之间的距离时,将所述目标对象更换为所述任一对象,并将所述参考位置更换为所述任一对象对应的第五位置。
5.根据权利要求2所述方法,其特征在于,所述获取针对所述可移动图标的第一位置确认操作,包括:
将所述可移动图标被取消选中的操作确定为第一位置确认操作;或者
当检测到点击操作时,将所述点击操作确定为第一位置确认操作,并将所述点击操作确定为所述操作事件。
6.根据权利要求1或2所述方法,其特征在于,所述基于所述参考位置、所述第二位置、以及所述显示界面的第一屏幕分辨率获取所述可移动图标与所述目标对象的第一相对偏移距离,包括:
计算所述第二位置和所述参考位置之间的位置差值;
基于所述位置差值以及所述第一屏幕分辨率生成第一相对偏移距离。
7.根据权利要求1或2所述方法,其特征在于,所述将所述目标对象、所述相对偏移以及所述操作事件保存在脚本中之后,所述方法还包括:
将所述脚本发送至第二终端;
在所述第二终端回放所述脚本时,所述方法还包括:
识别所述第二终端的显示界面上包括的所述目标对象,并获取所述第二终端的显示界面上所述目标对象对应的第六位置;
根据所述第二终端对应的第二屏幕分辨率、所述第一相对偏移距离以及所述第六位置确定出第七位置,并在所述第七位置上执行所述操作事件。
8.根据权利要求7所述方法,其特征在于,所述根据所述第二终端对应的第二屏幕分辨率、所述第一相对偏移距离以及所述第六位置确定出第七位置,包括:
根据所述第二屏幕分辨率和所述第一相对偏移距离确定第二绝对偏移;
根据所述第六位置和所述第二绝对偏移确定第七位置。
9.一种脚本录制装置,其特征在于,所述装置包括:
可移动图标获取模块,用于获取第一终端的显示界面上目标对象对应的第一位置作为参考位置,并在所述第一位置上获取可移动图标;
位置确定模块,用于移动所述可移动图标至第二位置,并在所述可移动图标移动过程中显示所述可移动图标的当前位置与所述第一位置之间的连线;
第一相对偏移值确定模块,用于基于所述参考位置、所述第二位置、以及所述第一终端的第一屏幕分辨率获取所述可移动图标与所述目标对象的第一相对偏移距离;
脚本生成模块,用于获取在所述第二位置上的操作事件,将所述目标对象、所述第一相对偏移距离以及所述操作事件保存在脚本中以完成脚本录制。
10.一种终端设备,其特征在于,包括处理器和存储器,所述处理器和存储器相互连接;
所述存储器用于存储计算机程序,所述计算机程序包括程序指令,所述处理器被配置用于调用所述程序指令,执行如权利要求1-8任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910987893.6A CN112685279B (zh) | 2019-10-17 | 2019-10-17 | 脚本录制方法、装置、终端设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910987893.6A CN112685279B (zh) | 2019-10-17 | 2019-10-17 | 脚本录制方法、装置、终端设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112685279A true CN112685279A (zh) | 2021-04-20 |
CN112685279B CN112685279B (zh) | 2024-02-20 |
Family
ID=75444462
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910987893.6A Active CN112685279B (zh) | 2019-10-17 | 2019-10-17 | 脚本录制方法、装置、终端设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112685279B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114115563A (zh) * | 2021-11-30 | 2022-03-01 | 南京星云数字技术有限公司 | 操作轨迹的采集方法、回放方法以及装置 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009032099A (ja) * | 2007-07-27 | 2009-02-12 | Toshiba Corp | シナリオ生成装置およびシナリオ生成プログラム |
CN104461894A (zh) * | 2014-12-17 | 2015-03-25 | 用友软件股份有限公司 | 安卓软件的操作录制装置和方法 |
CN104951393A (zh) * | 2014-03-25 | 2015-09-30 | 中国电信股份有限公司 | 测试方法和测试装置 |
CN105740874A (zh) * | 2016-03-04 | 2016-07-06 | 网易(杭州)网络有限公司 | 确定自动化测试脚本回放时的操作坐标的方法及装置 |
CN106095373A (zh) * | 2016-06-21 | 2016-11-09 | 东软集团股份有限公司 | 实现跨设备屏幕坐标适配、操作设备的方法及对应的装置 |
CN109871326A (zh) * | 2019-02-13 | 2019-06-11 | 广州云测信息技术有限公司 | 一种脚本录制的方法和装置 |
CN110046009A (zh) * | 2019-02-19 | 2019-07-23 | 阿里巴巴集团控股有限公司 | 录制方法、装置、服务器及可读存储介质 |
-
2019
- 2019-10-17 CN CN201910987893.6A patent/CN112685279B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009032099A (ja) * | 2007-07-27 | 2009-02-12 | Toshiba Corp | シナリオ生成装置およびシナリオ生成プログラム |
CN104951393A (zh) * | 2014-03-25 | 2015-09-30 | 中国电信股份有限公司 | 测试方法和测试装置 |
CN104461894A (zh) * | 2014-12-17 | 2015-03-25 | 用友软件股份有限公司 | 安卓软件的操作录制装置和方法 |
CN105740874A (zh) * | 2016-03-04 | 2016-07-06 | 网易(杭州)网络有限公司 | 确定自动化测试脚本回放时的操作坐标的方法及装置 |
CN106095373A (zh) * | 2016-06-21 | 2016-11-09 | 东软集团股份有限公司 | 实现跨设备屏幕坐标适配、操作设备的方法及对应的装置 |
CN109871326A (zh) * | 2019-02-13 | 2019-06-11 | 广州云测信息技术有限公司 | 一种脚本录制的方法和装置 |
CN110046009A (zh) * | 2019-02-19 | 2019-07-23 | 阿里巴巴集团控股有限公司 | 录制方法、装置、服务器及可读存储介质 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114115563A (zh) * | 2021-11-30 | 2022-03-01 | 南京星云数字技术有限公司 | 操作轨迹的采集方法、回放方法以及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN112685279B (zh) | 2024-02-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111815755B (zh) | 虚拟物体被遮挡的区域确定方法、装置及终端设备 | |
US10915070B2 (en) | Image display apparatus, image display method and storage medium | |
JP6326996B2 (ja) | 端末装置、情報処理システム、及び表示制御プログラム | |
US9852491B2 (en) | Objects in screen images | |
CN107172346B (zh) | 一种虚化方法及移动终端 | |
US20160012612A1 (en) | Display control method and system | |
JP6090173B2 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
CN110020300B (zh) | 一种浏览器页面合成方法及终端 | |
EP2426911A1 (en) | Image processing methods and systems for handheld devices | |
CN103336787B (zh) | 一种用于缩放网页的方法和装置 | |
JP5471454B2 (ja) | 部品選択方法、部品選択装置、cad装置及び部品選択プログラム | |
CN111555938A (zh) | 一种信息处理的方法以及相关装置 | |
US10409478B2 (en) | Method, apparatus, and recording medium for scrapping content | |
CN113641260A (zh) | 触控轨迹预测方法、相关装置、设备及计算机存储介质 | |
CN113129417A (zh) | 一种全景应用中图像渲染的方法及终端设备 | |
CN109213668B (zh) | 操作记录方法、装置及终端 | |
CN112579244B (zh) | 在移动终端截取远程桌面中区域图片的方法及系统 | |
CN112685279B (zh) | 脚本录制方法、装置、终端设备 | |
US20140111551A1 (en) | Information-processing device, storage medium, information-processing method, and information-processing system | |
KR102130361B1 (ko) | 시나리오에 따라 그래픽 처리 해상도를 변경하기 위한 방법 및 휴대용 전자 디바이스 | |
CN107615229B (zh) | 用户界面装置和用户界面装置的画面显示方法 | |
TWI514319B (zh) | 藉由虛擬物件編輯資料之方法及系統,及相關電腦程式產品 | |
CN115729544A (zh) | 桌面组件生成方法、装置、电子设备和可读存储介质 | |
CN112698771B (zh) | 显示控制方法、装置、电子设备和存储介质 | |
CN114115639A (zh) | 界面控制方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20220209 Address after: 518000 28th floor, West Tencent building, North Keji Zhongyi Road, Shennan Avenue, Nanshan District, Shenzhen City, Guangdong Province Applicant after: Shenzhen Tencent Network Area Computer Network Co.,Ltd. Address before: 518057 Tencent Building, No. 1 High-tech Zone, Nanshan District, Shenzhen City, Guangdong Province, 35 floors Applicant before: TENCENT TECHNOLOGY (SHENZHEN) Co.,Ltd. |
|
TA01 | Transfer of patent application right | ||
GR01 | Patent grant | ||
GR01 | Patent grant |