CN113282472B - 性能测试方法及装置 - Google Patents
性能测试方法及装置 Download PDFInfo
- Publication number
- CN113282472B CN113282472B CN202110574044.5A CN202110574044A CN113282472B CN 113282472 B CN113282472 B CN 113282472B CN 202110574044 A CN202110574044 A CN 202110574044A CN 113282472 B CN113282472 B CN 113282472B
- Authority
- CN
- China
- Prior art keywords
- gesture operation
- command word
- target application
- gesture
- voice
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000011056 performance test Methods 0.000 title claims abstract description 80
- 238000000034 method Methods 0.000 title claims abstract description 65
- 238000012360 testing method Methods 0.000 claims abstract description 133
- 230000004044 response Effects 0.000 claims description 54
- 230000008569 process Effects 0.000 claims description 20
- 230000006870 function Effects 0.000 claims description 16
- 230000015654 memory Effects 0.000 claims description 15
- 230000001960 triggered effect Effects 0.000 claims description 14
- 238000013515 script Methods 0.000 abstract description 13
- 230000000694 effects Effects 0.000 abstract description 5
- 238000010586 diagram Methods 0.000 description 16
- 230000002093 peripheral effect Effects 0.000 description 10
- 230000001133 acceleration Effects 0.000 description 9
- 238000004891 communication Methods 0.000 description 9
- 238000012545 processing Methods 0.000 description 9
- 230000006399 behavior Effects 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 6
- 238000004590 computer program Methods 0.000 description 5
- 230000006835 compression Effects 0.000 description 4
- 238000007906 compression Methods 0.000 description 4
- 238000013500 data storage Methods 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 230000006978 adaptation Effects 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 2
- 239000000919 ceramic Substances 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 241000592183 Eidolon Species 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000001680 brushing effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000009795 derivation Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000005538 encapsulation Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000008676 import Effects 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 230000009191 jumping Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000006641 stabilisation Effects 0.000 description 1
- 238000011105 stabilization Methods 0.000 description 1
- 238000010998 test method Methods 0.000 description 1
- 239000010409 thin film Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3409—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3438—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment monitoring of user actions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Quality & Reliability (AREA)
- Computer Hardware Design (AREA)
- Human Computer Interaction (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本公开关于一种性能测试方法及装置,属于计算机技术领域,本实施例提供了一种利用语音控制实现自动操作以进行性能测试的方法,在针对目标应用进行性能测试的场景下,设备通过播放基于命令词文本生成的语音,在语音的触发下自动执行命令词文本对应的手势操作,达到设备模拟用户对目标应用进行手势操作的效果,从而测试目标应用在响应手势操作时的性能。上述方法摆脱了对人工编写的脚本的依赖,降低了实现复杂度,因此节省了性能测试的时间,能够更加快捷地进行性能测试。
Description
技术领域
本公开涉及计算机技术领域,尤其涉及一种性能测试方法及装置。
背景技术
自动化测试是一种将人为驱动的测试行为转化为机器执行过程的技术。自动化测试支持自动对计算机上的软件进行性能测试,从而节省人力、时间以及硬件资源。
相关技术中,测试人员会采用程序语言人工编写脚本。脚本的内容是程序代码,程序代码的含义是针对目标应用进行的操作。测试人员将脚本保存至计算机上,计算机通过运行脚本执行自动化操作,从而完成性能测试。
上述方法依赖于人工编写脚本,而编写脚本的复杂度较高,导致耗费的时间较长。
发明内容
本公开提供一种性能测试方法及装置,以至少解决相关技术中性能测试复杂度高、耗费时间长的问题。本公开的技术方案如下:
根据本公开实施例的第一方面,提供一种性能测试方法,包括;
响应于针对目标应用的性能测试指令,获取所述目标应用的测试文件,所述测试文件包括在对所述目标应用进行测试过程中涉及到的命令词文本;
播放目标语音,所述目标语音基于所述测试文件中的命令词文本生成;
响应于所述目标语音中识别出的命令词,获取所述命令词对应的手势操作;
控制所述目标应用对所述手势操作执行对应的响应操作。
可选地,所述手势操作包括点击手势操作,所述控制所述目标应用对所述手势操作执行对应的响应操作,包括:
控制所述目标应用按照所述点击手势操作切换前台展示的界面。
可选地,所述手势操作包括滑动手势操作,所述控制所述目标应用对所述手势操作执行对应的响应操作,包括:
控制所述目标应用的界面按照所述滑动手势操作进行滑动。
可选地,所述获取所述命令词对应的手势操作之前,所述方法还包括:
显示语音指令设置界面;
响应于对所述语音指令设置界面触发的输入操作,确定命令词与手势操作之间的对应关系。
可选地,所述获取所述目标应用的测试文件之前,所述方法还包括:
显示快捷指令设置界面;
响应于对所述快捷指令设置界面触发的输入操作,生成所述目标应用的测试文件。
可选地,所述测试文件还包括所述命令词文本的执行参数,所述播放目标语音,包括:
根据所述执行参数播放所述目标语音。
可选地,所述执行参数包括所述命令词文本对应的重复次数,所述根据所述执行参数播放所述目标语音,包括:
按照所述重复次数,重复播放所述目标语音。
可选地,所述方法还包括:
在控制所述目标应用对所述手势操作执行对应的响应操作的过程中,获取所述目标应用的性能数据。
可选地,所述测试文件还包括目标地址,所述获取所述目标应用的性能数据之后,所述方法还包括:
将所述目标应用的性能数据存储至所述目标地址。
可选地,所述获取所述命令词对应的手势操作,包括:
根据所述命令词,从配置数据中查询得到所述命令词对应的手势操作,所述配置数据包括至少一组录入的命令词与录入的手势操作之间的对应关系;
相应地,所述响应于针对目标应用的性能测试指令之前,所述方法还包括:
接收操作录入指令,所述操作录入指令包括命令词以及手势操作;
将所述操作录入指令包括的命令词以及手势操作关联存储至所述配置数据。
可选地,所述命令词包括方向信息,所述根据所述命令词,从配置数据中查询得到所述命令词对应的手势操作之后,所述方法还包括:
根据所述命令词中的方向信息,对查询得到的所述手势操作的方向进行调整;
所述控制所述目标应用对所述手势操作执行对应的响应操作,包括:
控制所述目标应用对方向调整后的手势操作执行对应的响应操作。
可选地,所述查询得到的所述手势操作包括沿第一方向的滑动手势操作,所述命令词中的方向信息指示第二方向,所述根据所述命令词中的方向信息,对查询得到的所述手势操作的方向进行调整,包括:
响应于所述第二方向与所述第一方向相反,对查询得到的所述沿第一方向的滑动手势操作进行倒序,得到沿第二方向的滑动手势操作;
所述控制所述目标应用对方向调整后的手势操作执行对应的响应操作,包括:
控制所述目标应用对所述沿第二方向的滑动手势操作执行对应的响应操作。
根据本公开实施例的第二方面,提供一种性能测试装置,包括获取单元,播放单元和控制单元;
获取单元,被配置为执行响应于针对目标应用的性能测试指令,获取所述目标应用的测试文件,所述测试文件包括在对所述目标应用进行测试过程中涉及到的命令词文本;
播放单元,被配置为执行播放目标语音,所述目标语音基于所述测试文件中的命令词文本生成;
所述获取单元,还被配置为执行响应于所述目标语音中识别出的命令词,获取所述命令词对应的手势操作;
控制单元,被配置为执行控制所述目标应用对所述手势操作执行对应的响应操作。
可选地,所述手势操作包括点击手势操作,所述控制单元,被配置为执行控制所述目标应用按照所述点击手势操作切换前台展示的界面。
可选地,所述手势操作包括滑动手势操作,所述控制单元,被配置为执行控制所述目标应用的界面按照所述滑动手势操作进行滑动。
可选地,所述装置还包括:
显示单元,被配置为执行显示语音指令设置界面;
确定单元,被配置为执行响应于对所述语音指令设置界面触发的输入操作,确定命令词与手势操作之间的对应关系。
可选地,所述装置还包括:
显示单元,被配置为执行显示快捷指令设置界面;
生成单元,被配置为执行响应于对所述快捷指令设置界面触发的输入操作,生成所述目标应用的测试文件。
可选地,所述测试文件还包括所述命令词文本的执行参数,所述播放单元,被配置为执行根据所述执行参数播放所述目标语音。
可选地,所述执行参数包括所述命令词文本对应的重复次数,所述播放单元,被配置为执行按照所述重复次数,重复播放所述目标语音。
可选地,所述获取单元,还被配置为执行在控制所述目标应用对所述手势操作执行对应的响应操作的过程中,获取所述目标应用的性能数据。
可选地,所述测试文件还包括目标地址,所述装置还包括:存储单元,被配置为执行将所述目标应用的性能数据存储至所述目标地址。
可选地,所述获取单元,被配置为执行根据所述命令词,从配置数据中查询得到所述命令词对应的手势操作,所述配置数据包括至少一组录入的命令词与录入的手势操作之间的对应关系;
所述装置还包括:
接收单元,被配置为执行接收操作录入指令,所述操作录入指令包括命令词以及手势操作;
存储单元,被配置为执行将所述操作录入指令包括的命令词以及手势操作关联存储至所述配置数据。
可选地,所述命令词包括方向信息,所述装置还包括:调整单元,被配置为执行根据所述命令词中的方向信息,对查询得到的所述手势操作的方向进行调整;
所述控制单元,被配置为执行控制所述目标应用对方向调整后的手势操作执行对应的响应操作。
可选地,所述查询得到的所述手势操作包括沿第一方向的滑动手势操作,所述命令词中的方向信息指示第二方向,所述调整单元,被配置为执行响应于所述第二方向与所述第一方向相反,对查询得到的所述沿第一方向的滑动手势操作进行倒序,得到沿第二方向的滑动手势操作;
所述控制单元,被配置为执行控制所述目标应用对所述沿第二方向的滑动手势操作执行对应的响应操作。
根据本公开实施例的第三方面,提供一种终端,包括:
一个或多个处理器;
用于存储所述处理器可执行程序代码的一个或多个存储器;
其中,所述一个或多个处理器被配置为执行所述程序代码,以实现上述性能测试方法。
根据本公开实施例的第四方面,提供一种存储介质,当所述存储介质中的程序代码由终端的处理器执行时,使得所述终端能够执行上述性能测试方法。
根据本公开实施例的第五方面,提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现上述性能测试方法。
本公开的实施例提供的技术方案至少带来以下有益效果:
本实施例提供了一种利用语音控制实现自动操作以进行性能测试的方法,在针对目标应用进行性能测试的场景下,设备通过播放基于命令词文本生成的语音,在语音的触发下自动执行命令词文本对应的手势操作,达到设备模拟用户对目标应用进行手势操作的效果,从而测试目标应用在响应手势操作时的性能。上述方法摆脱了对人工编写的脚本的依赖,降低了实现复杂度,因此节省了性能测试的时间,能够更加快捷地进行性能测试。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理,并不构成对本公开的不当限定。
图1是根据一示例性实施例示出的一种性能测试系统的结构框图;
图2是根据一示例性实施例示出的一种性能测试方法的流程图;
图3是根据一示例性实施例示出的一种用户界面的示意图;
图4是根据一示例性实施例示出的一种用户界面的示意图;
图5是根据一示例性实施例示出的一种用户界面的示意图;
图6是根据一示例性实施例示出的一种用户界面的示意图;
图7是根据一示例性实施例示出的一种用户界面的示意图;
图8是根据一示例性实施例示出的一种性能测试方法的流程图;
图9是根据一示例性实施例示出的一种用户界面的示意图;
图10是根据一示例性实施例示出的一种目标应用的用户界面的示意图;
图11是根据一示例性实施例示出的一种目标应用的用户界面的示意图;
图12是根据一示例性实施例示出的一种性能测试装置的框图;
图13是根据一示例性实施例示出的一种终端的框图。
具体实施方式
为了使本领域普通人员更好地理解本公开的技术方案,下面将结合附图,对本公开实施例中的技术方案进行清楚、完整地描述。
需要说明的是,本公开的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本公开的实施例能够以除了在这里图示或描述的那些以外的顺序实施。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
本申请的一些实施例可选地应用在移动端性能测试场景。在进行移动端性能测试时,需要运用自动化测试工具来模拟各种场景、执行各种操作,从而通过性能测试工具获取到移动端应用程序(application,APP)的各项性能数据。在模拟性能测试场景执行操作时,很多场景不需要执行复杂的操作并且不需要进行断言,只需要让测试机自动执行操作即可。
本申请的一些实施例可选地应用在用户界面(user interface,UI)测试的场景。UI测试是最接近软件真实用户使用行为的测试类型。通常是模拟真实用户使用软件的行为,即模拟用户在软件界面上的各种操作,并验证这些操作对应的结果是否正确。
以下,对本公开实施例的硬件环境进行示例性说明。
图1是根据一示例性实施例示出的一种性能测试系统的结构框图。该性能测试系统包括:终端101和服务器1101。
终端101安装和运行有待测试的目标应用。终端101支持语音控制的功能,终端101能够在包含命令词的语音的触发下,执行对应的手势操作。可选地,终端101还安装和运行有快捷指令应用。终端101可选地是移动终端,例如是iOS终端。终端101可以是智能手机、游戏主机、台式计算机、平板电脑、电子书阅读器、MP3(Moving Picture Experts GroupAudio Layer III,动态影像专家压缩标准音频层面3)播放器或MP4(Moving PictureExperts Group Audio Layer IV,动态影像专家压缩标准音频层面4)播放器和膝上型便携计算机中的至少一种。
终端101通过无线网络或有线网络与服务器1101相连。
服务器1101包括一台服务器、多台服务器、云计算平台和虚拟化中心中的至少一种。服务器1101用于提供性能测试相关的后台服务以及语音识别相关的服务。可选地,在性能测试的过程中,服务器1101和终端101可以协同工作。例如,服务器1101承担主要工作,终端101承担次要工作;或者,服务器1101承担次要工作,终端101承担主要工作;或者,服务器1101或终端101分别可以单独承担生成工作。
可选地,服务器1101与数据库1102通过网络相连。数据库1102可以用于存储语音库、测试文件或者下述方法实施例涉及的其他数据。当需要时,数据库1102可以将存储的数据提供给终端101以及服务器1101。
终端101可以泛指多个终端中的一个,本实施例仅以终端101来举例说明。
本领域技术人员可以知晓,终端101的数量可以更多或更少。比如终端101可以仅为一个,或者终端101为几十个或几百个,或者更多数量,此时上述性能测试系统还包括其他终端。本公开实施例对终端的数量和设备类型不加以限定。
图2是根据一示例性实施例示出的一种性能测试方法的流程图,如图2所示,该方法包括以下步骤。
在步骤S21中,响应于针对目标应用的性能测试指令,终端获取目标应用的测试文件。
目标应用是指待进行性能测试的应用程序。目标应用包括而不限于直播应用、短视频应用、音视频应用、图文展示应用、阅读应用等等。
性能测试指令指示对目标应用进行性能测试。性能测试指令包括目标应用的标识。
测试文件包括在对目标应用进行测试过程中涉及到的命令词文本。可选地,测试文件还包括命令词文本的执行参数。
命令词文本用于在对目标应用进行测试过程中转换为对应的语音。命令词文本的内容可选地是一个或多个语音控制所需的命令词。命令词文本的含义可选地为对目标应用进行语音控制时要求目标应用执行的响应操作。例如,命令词文本包括“进入(enter)”,“enter”表示发出语音“enter”时要求目标应用显示指定的用户界面。又如,命令词文本包括“滑动(swipe)”,“swipe”表示发出语音“swipe”时要求目标应用滑动显示前台界面。又如,命令词文本包括“左上(top left)”,“top left”表示发出语音“top left”时要求目标应用左上部分的界面元素进行响应。
执行参数是指基于命令词文本进行语音播放时涉及的参数。执行参数例如是根据性能测试场景确定的。例如,执行参数包括重复次数或者等待时长中的至少一项。重复次数表示重复播放多少次语音。重复次数可选地与性能测试场景下连续操作的次数相等。例如,在测试连续50次上滑时应用的性能的场景下,重复次数为50次。等待时长表示播放一条语音后等待多久播放下一条语音。
在一些实施例中,终端在获取测试文件之前,预先将语音控制功能设置为开启状态,以便通过语音控制功能支持后续的性能测试过程。例如,请参考附图3,终端显示语音控制界面,语音控制界面包括语音控制控件301。用户对语音控制控件301进行向右滑动,终端响应于对语音控制控件301的操作,将语音控制功能设置为开启状态。
在步骤S22中,终端播放目标语音。
目标语音基于测试文件中的命令词文本生成。目标语音为终端自动朗读命令词文本的语音。例如,命令词文本为“swipe”,目标语音为朗读“swipe”的语音。
如何获得上述目标语音包括多种方式。可选地,终端调用语音朗读接口,向语音朗读接口传入命令词文本。语音朗读接口关联的服务器接收命令词文本,根据命令词文本生成目标语音,并将目标语音发送给终端,终端接收服务器发送的目标语音。可替代地,由终端基于命令词生成目标语音。在一种可能的实现中,终端将语音库中的语音按照命令词文本的内容和顺序重新组织,得到上述目标语音。
在步骤S23中,响应于目标语音中识别出的命令词,终端获取命令词对应的手势操作。
如何从目标语音识别出命令词包括多种实现方式。可选地,终端对目标语音进行语音识别,得到命令词。可替代地,终端将目标语音发送给语音识别服务器;语音识别服务器对目标语音进行语音识别,得到命令词,语音识别服务器将命令词发送给终端。终端接收来自于语音识别服务器的命令词。
手势操作包括而不限于点击手势操作、滑动手势操作等。点击手势操作包括而不限于点击屏幕左上部分的操作、点击屏幕右下部分的操作。滑动手势操作包括而不限于向上滑动的操作、向右滑返回的操作等。
如何获取手势操作包括多种方式。在一些实施例中,预先设定命令词与手势操作之间的对应关系,终端保存命令词与手势操作之间的对应关系。终端获得命令词之后,以命令词为索引,查询命令词与手势操作之间的对应关系,得到命令词对应的手势操作。例如,预先设定“top left”与点击屏幕左上部分的操作之间的对应关系、“向上滑动(swipe up)”与向上滑动操作之间的对应关系,如果目标语音中识别出命令词“swipe up”,终端获取到的手势操作为向上滑动操作。
可选地,上述命令词与手势操作之间的对应关系是预先通过语音指令设置界面设定的。具体地,终端显示语音指令设置界面;响应于对语音指令设置界面触发的输入操作,确定命令词与手势操作之间的对应关系。例如,语音指令设置界面包括命令词控件以及手势输入控件。终端响应于对命令词控件触发的输入操作,获取用户输入的命令词;终端响应于对手势输入控件触发的输入操作,获取用户输入的手势操作。
可选地,获取用户输入的手势操作具体为记录手势操作的信息。例如,获取用户输入的点击手势操作具体为记录用户在屏幕中点击的位置。获取用户输入的滑动手势操作具体为记录用户在屏幕中滑动的轨迹。
作为一个具体示例,请参考附图3、附图4、附图5以及附图6。
附图3、附图4、附图5以及附图6是获取命令词与手势操作之间对应关系的具体示例。终端显示附图3所示语音控制界面,用户点击语音控制界面中自定命令控件302之后,终端显示附图4所示自定义语音命令界面(即语音指令设置界面)。用户对自定义语音命令界面中命令词控件401触发输入操作,输入命令词“点击(click)”。此外,用户点击附图4所示界面中操作输入控件402。终端响应于对操作输入控件402触发的操作,显示附图5所示自定义手势界面。附图5所示自定义手势界面包括手势输入区域501。手势输入区域501包含提示用户输入手势的提示信息。如附图6所示,用户在手势输入区域501输入了滑动手势502。总结来说,获取命令词与手势操作之间对应关系,即获取命令词控件401上输入的命令词以及手势输入区域501上输入的手势操作,建立命令词与手势操作之间的绑定关系。
在步骤S24中,终端控制目标应用对手势操作执行对应的响应操作。
手势操作对应的响应操作例如是目标应用的界面元素对手势操作进行响应。控制目标应用执行响应操作的基本原理是,通过预先录入手势操作,终端能保存手势操作的信息,在性能测试过程中,终端根据手势操作的信息,对目标应用回放录入的手势,从而模拟真实用户对目标应用触发手势操作的行为,便于准确测试目标应用在手势操作下的性能。
例如,手势操作包括点击手势操作,终端控制目标应用按照点击手势操作切换前台展示的界面。例如,点击手势操作是点击屏幕中目标位置的操作,终端将前台展示的界面切换为目标位置对应的界面。在一种可能的实现中,用户预先在语音命令设置界面中的目标位置进行点击,从而录入点击手势操作。终端记录点击手势操作以及目标位置。在性能测试过程中,终端根据预先保存的目标位置执行上述切换界面的操作。通过这种方式,能够模拟真实用户点击界面的行为,从而支持对点击界面时目标应用的性能进行测试的场景。
作为一个具体示例,目标应用的界面包括短视频列表,短视频列表包括四个短视频封面,分别是位于左上部分的短视频A的封面、位于右上部分的短视频B的封面、位于左下部分的短视频C的封面以及位于右下部分的短视频D的封面。如果点击手势操作为点击屏幕左上部分的操作,终端将前台展示的界面从短视频列表切换为短视频A的播放界面。
例如,手势操作包括滑动手势操作,终端控制目标应用的界面按照滑动手势操作进行滑动。例如,滑动手势操作是按照目标轨迹进行滑动的操作,终端控制目标应用的界面按照该目标轨迹进行滑动。在一种可能的实现中,用户预先在语音命令设置界面中按照目标轨迹进行滑动,从而录入滑动手势操作。终端记录滑动手势操作以及目标轨迹。在性能测试过程中,终端根据预先保存的目标轨迹执行上述滑动界面的操作。通过这种方式,能够模拟真实用户滑动界面(比如刷短视频应用首页)的行为,从而支持滑动界面时目标应用的性能进行测试的场景。
在一些实施例中,终端根据测试文件中命令词文本的执行参数,播放目标语音。通过这种方式,有助于满足更多测试场景的需求。
例如,执行参数包括命令词文本对应的重复次数,终端按照重复次数,重复播放目标语音。比如,性能测试场景是在应用界面上滑动N次,则设定命令词文本“swipe”对应的重复次数为N次,终端重复播放N次语音“swipe”;在语音的触发下,终端自动执行N次滑动操作。又如,性能测试场景是在应用界面上双击,则设定命令词文本“click”对应的重复次数为2次;终端重复播放2次语音“click”;在语音的触发下,终端自动执行2次点击手势操作。通过这种方式,能模拟真实用户连续多次操作的场景,从而支持对连续多次操作时目标应用的性能进行测试的场景。
例如,执行参数包括命令词文本对应的等待时长,终端播放第一目标语音;当时间经过等待时长时,播放第二目标语音。第一目标语音和第二目标语音是基于命令词文本中两个相邻的命令词生成的。等待时长是第一目标语音与第二目标语音之间的播放时间间隔。可选地,等待时长以秒为时间单位。可选地,等待时长根据实际测试场景设定。例如,测试文件中的命令词文本包括“enter”和“swipe”,“enter”对应的等待时长为3秒钟,那么终端播放语音“enter”之后,等待3秒钟播放语音“swipe”。
在一些实施例中,终端在控制目标应用对手势操作执行对应的响应操作的过程中,获取目标应用的性能数据。具体地,终端调用性能测试工具,通过性能测试工具获取目标应用的性能数据。在一种可能的实现中,终端在启动执行手势操作时启动采集目标应用的性能数据,终端在结束执行手势操作时结束采集目标应用的性能数据,输出得到的性能数据。其中,性能测试工具例如为perfog。通过获取性能测试数据,便于利用性能测试数据更加精确地分析应用的性能。perfdog是一个移动全平台iOS/安卓(Android)性能测试、分析工具平台。
在一些实施例中,终端还支持性能数据的自动导出。具体地,上述测试文件还包括目标地址,终端获取所述目标应用的性能数据之后,还将所述目标应用的性能数据存储至所述目标地址。其中,该目标地址例如是终端中存储空间的地址,例如是内存或者硬盘中的物理地址或逻辑地址。可选地,该目标地址是用户预先通过快捷指令应用配置的。例如,用户向快捷指令绑定的操作中添加数据存储操作,并配置数据存储操作关联的地址为上述目标地址,那么终端在执行快捷指令的过程中,能够自动存储目标应用的性能数据。通过上述方式,支持将性能数据自动保存至指定地址,从而更加快捷。
在一些实施例中,还通过快捷指令应用,自动调用上述性能测试工具。例如,在快捷指令应用中添加通过安全外壳协议(secure shell,SSH)运行脚本的操作,该通过SSH运行脚本的操作包括调用性能测试工具所需的参数,例如性能测试工具关联的主机地址和端口号、性能测试工具的名称等。终端响应于快捷指令,会执行SSH运行脚本的操作,从而自动调用上述性能测试工具。
本实施例提供了一种利用语音控制实现自动操作以进行性能测试的方法,在针对目标应用进行性能测试的场景下,设备通过播放基于命令词文本生成的语音,在语音的触发下自动执行命令词文本对应的手势操作,达到设备模拟用户对目标应用进行手势操作的效果,从而测试目标应用在响应手势操作时的性能。上述方法摆脱了对人工编写的脚本的依赖,降低了实现复杂度,因此节省了性能测试的时间,能够更加快捷地进行性能测试。
在一些实施例中,上述测试文件是基于性能测试过程中所需执行的操作生成的。具体地,测试文件是通过应用打开操作、文本朗读操作以及执行参数封装从而得到的。应用打开操作即打开待测试的目标应用的操作。文本朗读操作即对命令词文本进行语音播放的操作。
在一种可能的实现中,测试文件是在快捷指令应用中创建的一条快捷指令关联的文件。测试文件是基于快捷指令绑定的操作生成的。
快捷指令是指用户在通过自行制作编写或导入其他用户分享后,通过点击运行,运行后iOS设备会自动化或半自动化处理,并完成一系列操作的实例。每一个快捷指令皆由一系列操作组成,每一个操作即为执行特定功能的一个步骤。运行快捷指令时,操作列表中的每个操作会按照从上到下的顺序运行。快捷指令旨在通过自动化命令,免去或减少用户对设备的手动点按、滑动、跳转等操作,方便用户使用软件某一功能或完成一系列任务。通过快捷指令应用,能够将默认的快捷指令或者自定义的快捷指令添加到iOS设备。
在一种可能的实现中,快捷指令应用提供快捷指令设置界面。终端显示快捷指令设置界面;响应于对快捷指令设置界面触发的输入操作,生成目标应用的测试文件。例如请参考附图7,附图7示出了快捷指令设置界面的示意图。快捷指令设置界面包括应用选择控件701、重复次数输入控件703、等待时长输入控件702以及运行快捷指令控件704。终端响应于用户对应用选择控件701的点击操作,显示终端已安装的所有应用的标识,用户选中一个应用的标识,终端将用户选择的应用作为待测试的目标应用。终端响应于用户对重复次数输入控件703的输入操作,将用户输入的数值作为一条语音的重复播放次数。终端响应于用户对等待时长输入控件702的输入操作,将用户输入的数值作为测试过程中播放一条语音后的等待时长。终端响应于用户对运行快捷指令控件704的输入操作,将文本阅读操作的快捷指令配置为待运行的快捷指令。
通过利用快捷指令来获得测试文件,免去人工通过程序语言编写脚本的复杂操作,降低了配置难度。此外,在性能测试的过程中,快捷指令应用能保证命令词的播放时长、播放命令词之后的等待时长等参数在每次测试时具有一致性,方便进行前后性能的对比。例如,如果测试目标是确定应用在升级前后性能上的变化,设备通过对app1.0版本执行一次测试流程获得一组性能数据a;再针对app2.0版本执行一次测试流程获得了一组性能数据b,通过比较这两组数据就能得到升级前后性能的差异。而两次测试流程中,需要保证两次测试流程的一致性,一致性体现在测试流程中点击了几次、等待几秒等参数上。
可替代地,测试文件是通过快捷指令应用之外的其他应用录入的操作生成的。例如,用户通过按键精灵一类的工具向设备录入鼠标、键盘等一系列操作,设备通过按键精灵一类的工具将录入的操作封装为测试文件。
下面对上述实施例中手势操作与命令词的关联建立过程进行举例说明。
可选地,手势操作与命令词之间的对应关系是通过预先录入的操作建立的。具体来说,终端接收操作录入指令,将操作录入指令包括的命令词以及手势操作关联存储至配置数据。终端从目标语音中识别出命令词之后,终端根据命令词,从配置数据中查询得到命令词对应的手势操作。
操作录入指令用于指示录入性能测试流程中的手势操作以及触发手势操作的的命令词。操作录入指令包括命令词以及手势操作。在一些实施例中,操作录入指令通过在语音指令设置界面上进行操作触发。例如,请参考附图4和附图6,用户通过附图4所示的界面中录入click(命令词),通过附图6所示的界面中录入上滑手势(手势操作),从而触发操作录入指令。
配置数据用于存储性能测试流程中的手势操作以及命令词。配置数据包括至少一组录入的命令词与录入的手势操作之间的对应关系。可选地,配置数据的形式为一个映射表,配置数据中每一个条目保存一个命令词和一个手势操作。配置数据的索引为命令词。
可选地,如果通过语音识别得到的命令词包括方向信息,终端根据命令词,从配置数据中查询得到命令词对应的手势操作之后,终端还根据命令词中的方向信息,对查询得到的手势操作的方向进行调整;将方向调整后的手势操作输入给目标应用。终端控制目标应用对方向调整后的手势操作执行对应的响应操作。
命令词中的方向信息指示手势操作的预期方向。例如,命令词为“向下滑动”,命令词中的方向信息为“向下”,命令词中的方向信息指示滑动操作的预期方向为向下。
对手势操作的方向进行调整的过程例如为,将查询得到的手势操作的方向调整至方向信息指示的预期方向。
由于根据命令词中的方向信息对存储的手势操作进行了调整,从而对录入的手势操作实现了校准,避免录入不正确的手势操作影响测试流程,节省了录入操作的时间,降低录入手势操作的复杂度。
可选地,查询得到的手势操作包括沿第一方向的滑动手势操作,命令词中的方向信息指示第二方向,根据命令词中的方向信息,对查询得到的手势操作的方向进行调整,包括:响应于第二方向与第一方向相反,对查询得到的沿第一方向的滑动手势操作进行倒序,得到沿第二方向的滑动手势操作;控制目标应用对方向调整后的手势操作执行对应的响应操作,包括:控制目标应用对沿第二方向的滑动手势操作执行对应的响应操作。
例如,用户录入的手势操作是向上滑,而终端通过语音识别得到的命令词是向下滑,则终端将向上滑的滑动数据倒序后输入给目标应用,从而节省录入操作的时间。
下面结合一个实例,对上述附图2所示方法举例说明。
如附图8所示,下述实例包括步骤S81至步骤S88。下述实例中的iOS设备是附图2所示方法中终端的具体示例。下述实例中的自定义手势是附图2所示方法中手势操作的具体示例。下述实例中的自定义语音命令界面是附图2所示方法中语音指令设置界面的具体示例。
iOS13及以上系统自带的语音控制功能支持使用语音指令控制iOS设备。iOS设备自带的快捷指令应用能创建自定义流程来实现自动化操作。下述实施例将语音控制和快捷指令应用结合进行性能测试,整体流程图如图8所示,具体包括如下步骤。
步骤S81、确定性能测试场景下的测试流程。
步骤S82、提取性能测试场景中的操作。
步骤S83、将性能测试场景中的操作录入为自定义手势,并定义对应的语音命令。
步骤S83具体包括下述步骤S83.1至步骤(S83.3
步骤S83.1,如图3所示,打开手机的设置-辅助功能-语音控制,开启语音控制功能。
步骤S83.2开启语音控制后,进入自定命令—自定—创建新命令,输入命令词,可以自定义语音命令。
具体地,如图4所示,图4示出了一个自定义语音命令界面的示意图,用户对短语输入栏触发输入操作,输入一个短语“click”,短语“click”即为命令词。
步骤S83.3点击操作-运行自定义手势,可以在画面中操作来创建自定义手势。
如图5所示,图5为自定义手势界面的示意图,用户能在该自定义手势界面上操作从而创建自定义手势。图6为添加了一个滑动操作手势的界面。
通过执行上述步骤S83,能通过说出语音命令来控制iOS设备执行对应的自定义手势操作。
步骤S84、设备保存语音命令。用户对着手机麦克风说出设置的命令词,测试下iOS设备自动执行的操作是否符合预期。
步骤S85、使用iOS的快捷指令应用,创建快捷指令。
根据性能测试场景的操作流程,在快捷指令应用中,创建一个快捷指令。
步骤S86、在快捷指令应用中添加“朗读文本”的操作进行语音控制,
在快捷指令应用里有“朗读文本”的操作,能够让手机朗读出命令词,从而自动执行语音控制。
步骤S87、添加其他操作,自定义自动化操作流程。
快捷指令应用还有其他操作,如“打开应用”、“等待”、“循环”等。可以自定义操作。将定义的操作自由组合为完整流程,通过运行快捷指令,可以实现自动化操作。
步骤S88、通过运行性能测试场景的快捷指令,可以运用性能测试工具(如perfdog)获取到当前场景的性能数据,从而来进行性能测试。
下面结合一个具体的性能测试场景对上述实例举例说明。
例如,性能测试场景为在漫画详情页进行50次上滑操作,那么当前场景的自动化流程为:通过“朗读enter”进入漫画详情页,“等待3秒钟”,循环执行50次“朗读swipe”、“等待3秒钟”。如图9为此场景的快捷指令自动化流程。实现该场景的前提是“enter”、“swipe”短语已被录入为语音命令并有对应的自定义手势。其中,enter的快捷指令用于通过一系列点击或者其他操作进入对应的界面。
又如,性能测试场景为点击应用界面的左上部分,用户输入命令词“top left”,并针对命令词“top left”,录入一个自定义手势,该自定义手势是在屏幕左上部分的点击手势操作。设备创建一个语音命令,语音命令包括命令词“top left”与在屏幕左上部分的点击手势操作之间的对应关系。那么设备通过朗读“top left”,从而执行创建的语音命令,自动地模拟用户执行在左上部分点击界面的操作。
又如,性能测试场景为在应用界面向右滑返回,用户输入命令词“返回(back)”,并针对命令词“back”,录入一个自定义手势,该自定义手势是在屏幕上向右滑动的手势操作。设备创建一个语音命令,语音命令包括命令词“back”与在屏幕上向右滑动的手势操作之间的对应关系。那么设备通过朗读“back”,从而执行创建的语音命令,自动地模拟用户执行在屏幕上向右滑动的操作。
可替换地,上述实例中的iOS设备替换为安卓端设备。上述实例中的快捷指令应用替换为
按键精灵类应用。按键精灵类应用同样能实现先录入一系列操作、再自动执行预先录入的一系列操作的功能,效果上等同于UI自动化。
可替换地,上述实例中的自定义手势替换为系统默认的手势。具体地,iOS语音控制中有默认的语音命令词和手势,能够直接使用系统默认的命令词和默认的手势支持上述性能测试场景。而通过录入自定义手势,能丰富操作手势,满足更多场景需求。
上述实例提供的方法,一方面,操作简单,不需要编写自动化脚本,极大缩短测试成本和人力投入。另一方面,不需要使用UI自动化框架,通过运用iOS系统自带语音控制功能及快捷指令应用,即可完成自动化操作,贴合实际操作手势及步骤,避免了使用UI自动化框架对iOS端APP的性能指标造成影响,性能数据置信性更高。
下面结合两个实例对上述方法实施例举例说明。下述两个实例中,目标应用为视频播放应用。
在一个实例中,性能测试场景为对视频播放应用的发现页刷视频的功能进行性能测试。例如,终端接收到针对视频播放应用的性能测试指令后,获取视频播放应用的测试文件,从测试文件中获取命令词文本“朗读进入发现页”和“朗读向下滑”。终端播放语音“进入发现页”,显示附图10所示的视频播放应用的发现页,该发现页包括视频1、视频2、视频3和视频4这4个视频的视频封面。终端播放语音“向下滑”,将向下滑操作输入给视频播放应用,从而模拟用户刷发现页的动作。视频播放应用响应于向下滑操作,滑动显示发现页,从而将发现页当前展示的视频封面切换为视频5、视频6的视频封面。
在一个实例中,性能测试场景为在视频播放应用中观看视频的功能进行性能测试。例如,终端接收到针对视频播放应用的性能测试指令后,获取视频播放应用的测试文件,从测试文件中获取命令词文本“朗读进入发现页”和“朗读点击左上角”。终端播放语音“朗读进入发现页,显示附图10所示的视频播放应用的发现页。终端播放语音“朗读点击左上角”,将作用于界面左上角的点击操作输入给视频播放应用,从而模拟用户点击发现页中视频1的动作。视频播放应用响应于点击操作,将前台展示界面从如附图10所示的发现页切换为如附图11所示的视频播放界面,在附图11所示的界面中播放视频1。
图12是根据一示例性实施例示出的一种性能测试装置的框图。参照图12,该装置包括获取单元1001,播放单元1002和控制单元1003。
获取单元1001,被配置为执行响应于针对目标应用的性能测试指令,获取目标应用的测试文件,测试文件包括在对目标应用进行测试过程中涉及到的命令词文本;
播放单元1002,被配置为执行播放目标语音,目标语音基于测试文件中的命令词文本生成;
获取单元1001,还被配置为执行响应于目标语音中识别出的命令词,获取命令词对应的手势操作;
控制单元1003,被配置为执行控制目标应用对手势操作执行对应的响应操作。
本实施例提供了一种利用语音控制实现自动操作以进行性能测试的装置,在针对目标应用进行性能测试的场景下,设备通过播放基于命令词文本生成的语音,在语音的触发下自动执行命令词文本对应的手势操作,达到设备模拟用户对目标应用进行手势操作的效果,从而测试目标应用在响应手势操作时的性能。上述装置摆脱了对人工编写的脚本的依赖,降低了实现复杂度,因此节省了性能测试的时间,能够更加快捷地进行性能测试。
可选地,手势操作包括点击手势操作,控制单元1003,被配置为执行控制目标应用按照点击手势操作切换前台展示的界面。
可选地,手势操作包括滑动手势操作,控制单元1003,被配置为执行控制目标应用的界面按照滑动手势操作进行滑动。
可选地,装置还包括:
显示单元,被配置为执行显示语音指令设置界面;
确定单元,被配置为执行响应于对语音指令设置界面触发的输入操作,确定命令词与手势操作之间的对应关系。
可选地,装置还包括:
显示单元,被配置为执行显示快捷指令设置界面;
生成单元,被配置为执行响应于对快捷指令设置界面触发的输入操作,生成目标应用的测试文件。
可选地,测试文件还包括命令词文本的执行参数,播放单元1002,被配置为执行根据执行参数播放目标语音。
可选地,执行参数包括命令词文本对应的重复次数,播放单元1002,被配置为执行按照重复次数,重复播放目标语音。
可选地,获取单元1001,还被配置为执行在控制目标应用对手势操作执行对应的响应操作的过程中,获取目标应用的性能数据。
可选地,测试文件还包括目标地址,装置还包括:存储单元,被配置为执行将目标应用的性能数据存储至目标地址。
可选地,获取单元1001,被配置为执行根据命令词,从配置数据中查询得到命令词对应的手势操作,配置数据包括至少一组录入的命令词与录入的手势操作之间的对应关系;
装置还包括:
接收单元,被配置为执行接收操作录入指令,操作录入指令包括命令词以及手势操作;
存储单元,被配置为执行将操作录入指令包括的命令词以及手势操作关联存储至配置数据。
可选地,命令词包括方向信息,装置还包括:调整单元,被配置为执行根据命令词中的方向信息,对查询得到的手势操作的方向进行调整;
控制单元1003,被配置为执行控制目标应用对方向调整后的手势操作执行对应的响应操作。
可选地,查询得到的手势操作包括沿第一方向的滑动手势操作,命令词中的方向信息指示第二方向,调整单元,被配置为执行响应于第二方向与第一方向相反,对查询得到的沿第一方向的滑动手势操作进行倒序,得到沿第二方向的滑动手势操作;
控制单元1003,被配置为执行控制目标应用对沿第二方向的滑动手势操作执行对应的响应操作。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
图13示出了本申请一个示例性实施例提供的终端1100的结构框图。该终端1100可以是:智能手机、平板电脑、MP3(Moving Picture Experts Group Audio Layer III,动态影像专家压缩标准音频层面3)播放器、MP4(Moving Picture Experts Group Audio LayerIV,动态影像专家压缩标准音频层面4)播放器、笔记本电脑或台式电脑。终端1100还可能被称为用户设备、便携式终端、膝上型终端、台式终端等其他名称。
通常,终端1100包括有:一个或多个处理器1101和一个或多个存储器1102。
处理器1101可以包括一个或多个处理核心,比如4核心处理器、8核心处理器等。处理器1101可以采用DSP(Digital Signal Processing,数字信号处理)、FPGA(Field-Programmable Gate Array,现场可编程门阵列)、PLA(Programmable Logic Array,可编程逻辑阵列)中的至少一种硬件形式来实现。处理器1101也可以包括主处理器和协处理器,主处理器是用于对在唤醒状态下的数据进行处理的处理器,也称CPU(Central ProcessingUnit,中央处理器);协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中,处理器1101可以集成有GPU(Graphics Processing Unit,图像处理器),GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中,处理器1101还可以包括AI(Artificial Intelligence,人工智能)处理器,该AI处理器用于处理有关机器学习的计算操作。
存储器1102可以包括一个或多个计算机可读存储介质,该计算机可读存储介质可以是非暂态的。存储器1102还可包括高速随机存取存储器,以及非易失性存储器,比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中,存储器1102中的非暂态的计算机可读存储介质用于存储至少一条程序代码,该至少一条程序代码用于被处理器1101所执行以实现本申请中方法实施例提供的性能测试方法。
在一些实施例中,终端1100还可选包括有:外围设备接口1103和至少一个外围设备。处理器1101、存储器1102和外围设备接口1103之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口1103相连。具体地,外围设备包括:射频电路1104、显示屏1105、摄像头组件1106、音频电路1107、定位组件1108和电源1109中的至少一种。
外围设备接口1103可被用于将I/O(Input/Output,输入/输出)相关的至少一个外围设备连接到处理器1101和存储器1102。在一些实施例中,处理器1101、存储器1102和外围设备接口1103被集成在同一芯片或电路板上;在一些其他实施例中,处理器1101、存储器1102和外围设备接口1103中的任意一个或两个可以在单独的芯片或电路板上实现,本实施例对此不加以限定。
射频电路1104用于接收和发射RF(Radio Frequency,射频)信号,也称电磁信号。射频电路1104通过电磁信号与通信网络以及其他通信设备进行通信。射频电路1104将电信号转换为电磁信号进行发送,或者,将接收到的电磁信号转换为电信号。可选地,射频电路1104包括:天线系统、RF收发器、一个或多个放大器、调谐器、振荡器、数字信号处理器、编解码芯片组、用户身份模块卡等等。射频电路1104可以通过至少一种无线通信协议来与其它终端进行通信。该无线通信协议包括但不限于:万维网、城域网、内联网、各代移动通信网络(2G、3G、4G及5G)、无线局域网和/或WiFi(Wireless Fidelity,无线保真)网络。在一些实施例中,射频电路1104还可以包括NFC(Near Field Communication,近距离无线通信)有关的电路,本申请对此不加以限定。
显示屏1105用于显示UI(User Interface,用户界面)。该UI可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏1105是触摸显示屏时,显示屏1105还具有采集在显示屏1105的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器1101进行处理。此时,显示屏1105还可以用于提供虚拟按钮和/或虚拟键盘,也称软按钮和/或软键盘。在一些实施例中,显示屏1105可以为一个,设置终端1100的前面板;在另一些实施例中,显示屏1105可以为至少两个,分别设置在终端1100的不同表面或呈折叠设计;在另一些实施例中,显示屏1105可以是柔性显示屏,设置在终端1100的弯曲表面上或折叠面上。甚至,显示屏1105还可以设置成非矩形的不规则图形,也即异形屏。显示屏1105可以采用LCD(Liquid Crystal Display,液晶显示屏)、OLED(Organic Light-Emitting Diode,有机发光二极管)等材质制备。
摄像头组件1106用于采集图像或视频。可选地,摄像头组件1106包括前置摄像头和后置摄像头。通常,前置摄像头设置在终端的前面板,后置摄像头设置在终端的背面。在一些实施例中,后置摄像头为至少两个,分别为主摄像头、景深摄像头、广角摄像头、长焦摄像头中的任意一种,以实现主摄像头和景深摄像头融合实现背景虚化功能、主摄像头和广角摄像头融合实现全景拍摄以及VR(Virtual Reality,虚拟现实)拍摄功能或者其它融合拍摄功能。在一些实施例中,摄像头组件1106还可以包括闪光灯。闪光灯可以是单色温闪光灯,也可以是双色温闪光灯。双色温闪光灯是指暖光闪光灯和冷光闪光灯的组合,可以用于不同色温下的光线补偿。
音频电路1107可以包括麦克风和扬声器。麦克风用于采集用户及环境的声波,并将声波转换为电信号输入至处理器1101进行处理,或者输入至射频电路1104以实现语音通信。出于立体声采集或降噪的目的,麦克风可以为多个,分别设置在终端1100的不同部位。麦克风还可以是阵列麦克风或全向采集型麦克风。扬声器则用于将来自处理器1101或射频电路1104的电信号转换为声波。扬声器可以是传统的薄膜扬声器,也可以是压电陶瓷扬声器。当扬声器是压电陶瓷扬声器时,不仅可以将电信号转换为人类可听见的声波,也可以将电信号转换为人类听不见的声波以进行测距等用途。在一些实施例中,音频电路1107还可以包括耳机插孔。
定位组件1108用于定位终端1100的当前地理位置,以实现导航或LBS(LocationBased Service,基于位置的服务)。定位组件1108可以是基于美国的GPS(GlobalPositioning System,全球定位系统)、中国的北斗系统或俄罗斯的伽利略系统的定位组件。
电源1109用于为终端1100中的各个组件进行供电。电源1109可以是交流电、直流电、一次性电池或可充电电池。当电源1109包括可充电电池时,该可充电电池可以是有线充电电池或无线充电电池。有线充电电池是通过有线线路充电的电池,无线充电电池是通过无线线圈充电的电池。该可充电电池还可以用于支持快充技术。
在一些实施例中,终端1100还包括有一个或多个传感器1110。该一个或多个传感器1110包括但不限于:加速度传感器1111、陀螺仪传感器1112、压力传感器1113、指纹传感器1114、光学传感器1115以及接近传感器1116。
加速度传感器1111可以检测以终端1100建立的坐标系的三个坐标轴上的加速度大小。比如,加速度传感器1111可以用于检测重力加速度在三个坐标轴上的分量。处理器1101可以根据加速度传感器1111采集的重力加速度信号,控制显示屏1105以横向视图或纵向视图进行用户界面的显示。加速度传感器1111还可以用于游戏或者用户的运动数据的采集。
陀螺仪传感器1112可以检测终端1100的机体方向及转动角度,陀螺仪传感器1112可以与加速度传感器1111协同采集用户对终端1100的3D动作。处理器1101根据陀螺仪传感器1112采集的数据,可以实现如下功能:动作感应(比如根据用户的倾斜操作来改变UI)、拍摄时的图像稳定、游戏控制以及惯性导航。
压力传感器1113可以设置在终端1100的侧边框和/或显示屏1105的下层。当压力传感器1113设置在终端1100的侧边框时,可以检测用户对终端1100的握持信号,由处理器1101根据压力传感器1113采集的握持信号进行左右手识别或快捷操作。当压力传感器1113设置在显示屏1105的下层时,由处理器1101根据用户对显示屏1105的压力操作,实现对UI界面上的可操作性控件进行控制。可操作性控件包括按钮控件、滚动条控件、图标控件、菜单控件中的至少一种。
指纹传感器1114用于采集用户的指纹,由处理器1101根据指纹传感器1114采集到的指纹识别用户的身份,或者,由指纹传感器1114根据采集到的指纹识别用户的身份。在识别出用户的身份为可信身份时,由处理器1101授权该用户执行相关的敏感操作,该敏感操作包括解锁屏幕、查看加密信息、下载软件、支付及更改设置等。指纹传感器1114可以被设置终端1100的正面、背面或侧面。当终端1100上设置有物理按键或厂商Logo时,指纹传感器1114可以与物理按键或厂商Logo集成在一起。
光学传感器1115用于采集环境光强度。在一个实施例中,处理器1101可以根据光学传感器1115采集的环境光强度,控制显示屏1105的显示亮度。具体地,当环境光强度较高时,调高显示屏1105的显示亮度;当环境光强度较低时,调低显示屏1105的显示亮度。在另一个实施例中,处理器1101还可以根据光学传感器1115采集的环境光强度,动态调整摄像头组件1106的拍摄参数。
接近传感器1116,也称距离传感器,通常设置在终端1100的前面板。接近传感器1116用于采集用户与终端1100的正面之间的距离。在一个实施例中,当接近传感器1116检测到用户与终端1100的正面之间的距离逐渐变小时,由处理器1101控制显示屏1105从亮屏状态切换为息屏状态;当接近传感器1116检测到用户与终端1100的正面之间的距离逐渐变大时,由处理器1101控制显示屏1105从息屏状态切换为亮屏状态。
本领域技术人员可以理解,图13中示出的结构并不构成对终端1100的限定,可以包括比图示更多或更少的组件,或者组合某些组件,或者采用不同的组件布置。
在示例性实施例中,还提供了一种包括程序代码的存储介质,例如包括程序代码的存储器,上述程序代码可由终端的处理器执行以完成上述性能测试方法。可选地,存储介质可以是非临时性计算机可读存储介质,例如,该非临时性计算机可读存储介质可以是只读存储器(Read-Only Memory,简称:ROM)、随机存取存储器(Random Access Memory,简称:RAM)、只读光盘(Compact Disc Read-Only Memory,简称:CD-ROM)、磁带、软盘和光数据存储设备等。
在示例性实施例中,提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现上述方法。
在一些实施例中,本申请实施例所涉及的计算机程序可被部署在一个计算机设备上执行,或者在位于一个地点的多个计算机设备上执行,又或者,在分布在多个地点且通过通信网络互连的多个计算机设备上执行,分布在多个地点且通过通信网络互连的多个计算机设备可以组成区块链系统。
本公开所涉及的用户信息可以为经用户授权或者经过各方充分授权的信息。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其它实施方案。本公开旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。
Claims (24)
1.一种性能测试方法,其特征在于,由终端执行,所述终端运行有快捷指令应用,且所述终端支持语音控制的功能,所述方法包括:
通过所述快捷指令应用,创建快捷指令,显示快捷指令设置界面,响应于对所述快捷指令设置界面触发的输入操作,确定与所述快捷指令绑定的操作,生成所述目标应用的测试文件,所述测试文件是基于所述快捷指令绑定的操作生成,所述快捷指令绑定的操作包括应用打开操作和文本朗读操作,所述测试文件包括在对所述目标应用进行测试过程中涉及到的命令词文本,所述文本朗读操作即对所述命令词文本进行语音播放的操作;
运行所述快捷指令,以执行下述操作:
获取所述目标应用的测试文件;
基于所述测试文件,播放目标语音,所述目标语音基于所述测试文件中的命令词文本生成;
响应于所述目标语音中识别出的命令词,获取所述命令词对应的手势操作;
控制所述目标应用对所述手势操作执行对应的响应操作。
2.根据权利要求1所述的性能测试方法,其特征在于,所述手势操作包括点击手势操作,所述控制所述目标应用对所述手势操作执行对应的响应操作,包括:
控制所述目标应用按照所述点击手势操作切换前台展示的界面。
3.根据权利要求1所述的性能测试方法,其特征在于,所述手势操作包括滑动手势操作,所述控制所述目标应用对所述手势操作执行对应的响应操作,包括:
控制所述目标应用的界面按照所述滑动手势操作进行滑动。
4.根据权利要求1至3中任一项所述的性能测试方法,其特征在于,所述获取所述命令词对应的手势操作之前,所述方法还包括:
显示语音指令设置界面;
响应于对所述语音指令设置界面触发的输入操作,确定命令词与手势操作之间的对应关系。
5.根据权利要求1所述的性能测试方法,其特征在于,所述测试文件还包括所述命令词文本的执行参数,所述播放目标语音,包括:
根据所述执行参数播放所述目标语音。
6.根据权利要求5所述的性能测试方法,其特征在于,所述执行参数包括所述命令词文本对应的重复次数,所述根据所述执行参数播放所述目标语音,包括:
按照所述重复次数,重复播放所述目标语音。
7.根据权利要求1所述的性能测试方法,其特征在于,所述方法还包括:
在控制所述目标应用对所述手势操作执行对应的响应操作的过程中,获取所述目标应用的性能数据。
8.根据权利要求7所述的性能测试方法,其特征在于,所述测试文件还包括目标地址,所述获取所述目标应用的性能数据之后,所述方法还包括:
将所述目标应用的性能数据存储至所述目标地址。
9.根据权利要求1所述的性能测试方法,其特征在于,所述获取所述命令词对应的手势操作,包括:
根据所述命令词,从配置数据中查询得到所述命令词对应的手势操作,所述配置数据包括至少一组录入的命令词与录入的手势操作之间的对应关系;
相应地,所述响应于针对目标应用的性能测试指令之前,所述方法还包括:
接收操作录入指令,所述操作录入指令包括命令词以及手势操作;
将所述操作录入指令包括的命令词以及手势操作关联存储至所述配置数据。
10.根据权利要求9所述的性能测试方法,其特征在于,所述命令词包括方向信息,所述根据所述命令词,从配置数据中查询得到所述命令词对应的手势操作之后,所述方法还包括:
根据所述命令词中的方向信息,对查询得到的所述手势操作的方向进行调整;
所述控制所述目标应用对所述手势操作执行对应的响应操作,包括:
控制所述目标应用对方向调整后的手势操作执行对应的响应操作。
11.根据权利要求10所述的性能测试方法,其特征在于,所述查询得到的所述手势操作包括沿第一方向的滑动手势操作,所述命令词中的方向信息指示第二方向,所述根据所述命令词中的方向信息,对查询得到的所述手势操作的方向进行调整,包括:
响应于所述第二方向与所述第一方向相反,对查询得到的所述沿第一方向的滑动手势操作进行倒序,得到沿第二方向的滑动手势操作;
所述控制所述目标应用对方向调整后的手势操作执行对应的响应操作,包括:
控制所述目标应用对所述沿第二方向的滑动手势操作执行对应的响应操作。
12.一种性能测试装置,其特征在于,所述装置包括:
所述装置,被配置为执行通过快捷指令应用,创建快捷指令;
显示单元,用于显示快捷指令设置界面;
生成单元,用于响应于对所述快捷指令设置界面触发的输入操作,确定与所述快捷指令绑定的操作,生成所述目标应用的测试文件,所述测试文件是基于所述快捷指令绑定的操作生成,所述快捷指令绑定的操作包括应用打开操作、文本朗读操作,所述测试文件包括在对所述目标应用进行测试过程中涉及到的命令词文本,所述文本朗读操作即对所述命令词文本进行语音播放的操作;
所述装置,还被配置为执行运行所述快捷指令,以执行下述操作:
获取单元,被配置为执行获取所述目标应用的测试文件;
播放单元,被配置为执行基于所述测试文件,播放目标语音,所述目标语音基于所述测试文件中的命令词文本生成;
所述获取单元,还被配置为执行响应于所述目标语音中识别出的命令词,获取所述命令词对应的手势操作;
控制单元,被配置为执行控制所述目标应用对所述手势操作执行对应的响应操作。
13.根据权利要求12所述的性能测试装置,其特征在于,所述手势操作包括点击手势操作,所述控制单元,被配置为执行控制所述目标应用按照所述点击手势操作切换前台展示的界面。
14.根据权利要求12所述的性能测试装置,其特征在于,所述手势操作包括滑动手势操作,所述控制单元,被配置为执行控制所述目标应用的界面按照所述滑动手势操作进行滑动。
15.根据权利要求12至14中任一项所述的性能测试装置,其特征在于,所述装置还包括:
所述显示单元,被配置为执行显示语音指令设置界面;
确定单元,被配置为执行响应于对所述语音指令设置界面触发的输入操作,确定命令词与手势操作之间的对应关系。
16.根据权利要求12所述的性能测试装置,其特征在于,所述测试文件还包括所述命令词文本的执行参数,所述播放单元,被配置为执行根据所述执行参数播放所述目标语音。
17.根据权利要求16所述的性能测试装置,其特征在于,所述执行参数包括所述命令词文本对应的重复次数,所述播放单元,被配置为执行按照所述重复次数,重复播放所述目标语音。
18.根据权利要求12所述的性能测试装置,其特征在于,所述获取单元,还被配置为执行在控制所述目标应用对所述手势操作执行对应的响应操作的过程中,获取所述目标应用的性能数据。
19.根据权利要求18所述的性能测试装置,其特征在于,所述测试文件还包括目标地址,所述装置还包括:存储单元,被配置为执行将所述目标应用的性能数据存储至所述目标地址。
20.根据权利要求12所述的性能测试装置,其特征在于,所述获取单元,被配置为执行根据所述命令词,从配置数据中查询得到所述命令词对应的手势操作,所述配置数据包括至少一组录入的命令词与录入的手势操作之间的对应关系;
所述装置还包括:
接收单元,被配置为执行接收操作录入指令,所述操作录入指令包括命令词以及手势操作;
存储单元,被配置为执行将所述操作录入指令包括的命令词以及手势操作关联存储至所述配置数据。
21.根据权利要求20所述的性能测试装置,其特征在于,所述命令词包括方向信息,所述装置还包括:调整单元,被配置为执行根据所述命令词中的方向信息,对查询得到的所述手势操作的方向进行调整;
所述控制单元,被配置为执行控制所述目标应用对方向调整后的手势操作执行对应的响应操作。
22.根据权利要求21所述的性能测试装置,其特征在于,所述查询得到的所述手势操作包括沿第一方向的滑动手势操作,所述命令词中的方向信息指示第二方向,所述调整单元,被配置为执行响应于所述第二方向与所述第一方向相反,对查询得到的所述沿第一方向的滑动手势操作进行倒序,得到沿第二方向的滑动手势操作;
所述控制单元,被配置为执行控制所述目标应用对所述沿第二方向的滑动手势操作执行对应的响应操作。
23.一种终端,其特征在于,包括:
一个或多个处理器;
用于存储所述一个或多个处理器可执行程序代码的一个或多个存储器;
其中,所述一个或多个处理器被配置为执行所述程序代码,以实现如权利要求1至11中任一项所述的性能测试方法。
24.一种存储介质,其特征在于,当所述存储介质中的程序代码由终端的处理器执行时,使得终端能够执行如1至11中任一项所述的性能测试方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110574044.5A CN113282472B (zh) | 2021-05-25 | 2021-05-25 | 性能测试方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110574044.5A CN113282472B (zh) | 2021-05-25 | 2021-05-25 | 性能测试方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113282472A CN113282472A (zh) | 2021-08-20 |
CN113282472B true CN113282472B (zh) | 2024-01-02 |
Family
ID=77281693
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110574044.5A Active CN113282472B (zh) | 2021-05-25 | 2021-05-25 | 性能测试方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113282472B (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106603854A (zh) * | 2016-12-23 | 2017-04-26 | 努比亚技术有限公司 | 语音控制方法及装置 |
CN110457105A (zh) * | 2019-08-07 | 2019-11-15 | 腾讯科技(深圳)有限公司 | 界面操作方法、装置、设备及存储介质 |
CN111145737A (zh) * | 2018-11-06 | 2020-05-12 | 中移(杭州)信息技术有限公司 | 语音测试方法、装置和电子设备 |
CN112346570A (zh) * | 2020-11-06 | 2021-02-09 | 戴姆勒股份公司 | 基于语音和手势进行人机交互的方法和设备 |
CN112534799A (zh) * | 2018-08-08 | 2021-03-19 | 三星电子株式会社 | 基于语音执行功能的方法和支持该方法的电子设备 |
-
2021
- 2021-05-25 CN CN202110574044.5A patent/CN113282472B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106603854A (zh) * | 2016-12-23 | 2017-04-26 | 努比亚技术有限公司 | 语音控制方法及装置 |
CN112534799A (zh) * | 2018-08-08 | 2021-03-19 | 三星电子株式会社 | 基于语音执行功能的方法和支持该方法的电子设备 |
CN111145737A (zh) * | 2018-11-06 | 2020-05-12 | 中移(杭州)信息技术有限公司 | 语音测试方法、装置和电子设备 |
CN110457105A (zh) * | 2019-08-07 | 2019-11-15 | 腾讯科技(深圳)有限公司 | 界面操作方法、装置、设备及存储介质 |
CN112346570A (zh) * | 2020-11-06 | 2021-02-09 | 戴姆勒股份公司 | 基于语音和手势进行人机交互的方法和设备 |
Also Published As
Publication number | Publication date |
---|---|
CN113282472A (zh) | 2021-08-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109582579B (zh) | 应用程序测试方法、装置、电子设备及存储介质 | |
CN107885533B (zh) | 管理组件代码的方法及装置 | |
CN109154858B (zh) | 智能电子设备及其操作方法 | |
CN110933330A (zh) | 视频配音方法、装置、计算机设备及计算机可读存储介质 | |
US20210200861A1 (en) | Control information processing method and apparatus, electronic device, and storage medium | |
CN109346111B (zh) | 数据处理方法、装置、终端及存储介质 | |
CN112052897B (zh) | 多媒体数据拍摄方法、装置、终端、服务器及存储介质 | |
CN112044065B (zh) | 虚拟资源的显示方法、装置、设备及存储介质 | |
CN111880888B (zh) | 预览封面生成方法、装置、电子设备及存储介质 | |
CN111524501A (zh) | 语音播放方法、装置、计算机设备及计算机可读存储介质 | |
CN113409427B (zh) | 动画播放方法、装置、电子设备及计算机可读存储介质 | |
CN112416485A (zh) | 信息引导方法、装置、终端及存储介质 | |
CN109240785A (zh) | 一种设置语言的方法、终端及存储介质 | |
CN111437600A (zh) | 剧情展示方法、装置、设备及存储介质 | |
CN108289237B (zh) | 播放动态图片的方法、装置、终端及计算机可读存储介质 | |
CN114371985A (zh) | 自动化测试方法、电子设备及存储介质 | |
CN112052167A (zh) | 生成测试脚本代码的方法和装置 | |
CN112230781A (zh) | 字符推荐方法、装置及存储介质 | |
CN112230910B (zh) | 嵌入型程序的页面生成方法、装置、设备及存储介质 | |
CN113518261A (zh) | 指引视频播放方法、装置、计算机设备及存储介质 | |
CN108763521B (zh) | 存储歌词注音的方法和装置 | |
CN111312207A (zh) | 文本转音频方法、装置、计算机设备及存储介质 | |
CN113282472B (zh) | 性能测试方法及装置 | |
CN110134902A (zh) | 资料信息生成方法、装置及存储介质 | |
CN110688046B (zh) | 歌曲播放方法、装置及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |