发明内容
基于此,为解决上述传统技术中的众测平台上对于相同的测试问题,测试人员可能在描述上存在较大的差异,从而导致对测试问题反馈的准确度不足的技术问题,特提出了一种反馈测试问题的方法。
本发明实施例第一方面提供了一种反馈测试问题的方法,包括:
获取预设的测试流程配置信息,根据所述测试流程配置信息逐步展示测试界面;
检测在所述测试界面上触发的交互事件,获取所述交互事件对应的交互操作标识和响应信息;
接收输入的问题反馈指令,查找与所述交互操作标识和响应信息对应的第一参考问题集合,将所述第一参考问题集合作为目标参考问题集合展示;
获取在所述展示的目标参考问题集合中选中的参考问题,获取输入的与所述选中的参考问题对应的反馈信息,将所述选中的参考问题以及对应的反馈信息提交给测试服务器。
结合本发明实施例第一方面的实现方式,在本发明实施例第一方面的第一种可能的实现方式中,所述获取输入的与所述选中的参考问题对应的反馈信息为:
检测与所述选中的参考问题对应的图标在与反馈信息的类型信息对应的图标上的放置事件;
获取所述放置事件对应的选中的反馈信息的类型信息,展示与所述选中的反馈信息的类型信息的反馈信息输入界面;
接收通过所述反馈信息输入界面输入的与所述选中的反馈信息的类型信息反馈信息。
结合本发明实施例第一方面或第一方面的第一种可能的的实现方式,在本发明实施例第一方面的第二种可能的实现方式中,所述根据所述测试流程配置信息逐步展示测试界面之后还包括:
检测系统事件,获取所述交互事件对应的系统事件标识和响应信息;
接收输入的问题反馈指令,查找与所述系统事件标识和响应信息对应的第二参考问题集合,将所述第二参考问题集合作为目标参考问题集合展示;
执行所述获取在所述展示的目标参考问题集合中选中的参考问题。
结合本发明实施例第一方面的第二种可能的的实现方式,在本发明实施例第一方面的第三种可能的实现方式中,所述系统事件包括蓝牙断连事件、蓝牙配对失败事件、网络数据信号异常事件、周边网络干扰事件、数据突变事件、网络断开事件、温湿度感知异常事件、设备抖动事件、后台调出事件、休眠唤醒事件、系统重启事件、自动锁屏事件、版本升级事件中的至少一种。
结合本发明实施例第一方面的第二种可能的的实现方式,在本发明实施例第一方面的第三种可能的实现方式中,所述获取所述交互事件对应的交互操作标识和响应信息之后还包括:
查找所述交互操作标识/系统事件标识和响应信息匹配的预设的测试规则信息,所述测试规则信息包括至少一个作为样本的交互操作标识/系统事件标识和响应信息;
获取所述查找到的测试规则信息对应的第三参考问题集合,将所述第三参考问题集合作为目标参考问题集合展示;
执行所述获取在所述展示的目标参考问题集合中选中的参考问题。
结合本发明实施例第一方面的第四种可能的的实现方式,在本发明实施例第一方面的第五种可能的实现方式中,所述查找所述交互操作标识/系统事件标识和响应信息匹配的预设的测试规则信息之后还包括:
在未查找到时,执行所述接收输入的问题反馈指令的步骤。
结合本发明实施例第一方面或第一方面的第一种至第五种中任意一种可能的的实现方式,在本发明实施例第一方面的第六种可能的实现方式中,所述查找与所述交互操作标识对应的第一参考问题集合的步骤为:
在预设的经验库服务器中查找与所述交互操作标识和响应信息对应的第一参考问题集合;
接收输入的问题反馈指令之后还包括:
展示新增问题输入界面,接收在所述新增问题输入界面输入的测试问题,将所述测试问题发送给测试服务器;
所述测试服务器接收所述测试问题,获取与所述测试问题匹配的接收频次,在所述接收频次大于或等于阈值时,将所述测试问题作为参考问题添加到所述经验库服务器中。
结合本发明实施例第一方面的第六种可能的的实现方式,在本发明实施例第一方面的第七种可能的实现方式中,展示新增问题输入界面包括:
获取选中的问题类型图标,获取与所述选中的问题类型图标对应的参考问题的类型信息;
展示与所述选中的参考问题的类型信息对应的新增问题输入界面。
结合本发明实施例第一方面的第七种可能的的实现方式,在本发明实施例第一方面的第八种可能的实现方式中,所述获取选中的问题类型图标之后还包括:
检测选中的问题类型图标在与反馈信息的类型信息对应的图标上的放置事件;
获取所述放置事件对应的选中的反馈信息的类型信息,展示与所述选中的反馈信息的类型信息的反馈信息输入界面;
接收通过所述反馈信息输入界面输入的与所述选中的反馈信息的类型信息对应的反馈信息。
结合本发明实施例第一方面或第一方面的第一种至第八种中任意一种可能的的实现方式,在本发明实施例第一方面的第九种可能的实现方式中,所述交互事件包括单击事件、长按事件、旋转事件、缩放事件、滑动事件、拖曳事件、按压事件、抬腕事件、翻腕事件、抖动事件、低头事件、抬头事件、摇头事件、语音输入事件、体感事件中的至少一种。
此外,为解决上述传统技术中的众测平台上对于相同的测试问题,测试人员可能在描述上存在较大的差异,从而导致对测试问题反馈的准确度不足的技术问题,特提出了一种反馈测试问题的装置。
本发明实施例第二方面提供了一种反馈测试问题的装置,所述装置包括:
测试流程获取模块,用于获取预设的测试流程配置信息,根据所述测试流程配置信息逐步展示测试界面;
交互事件检测模块,用于检测在所述测试界面上触发的交互事件,获取所述交互事件对应的交互操作标识和响应信息;
目标参考问题查找模块,用于接收输入的问题反馈指令,查找与所述交互操作标识和响应信息对应的第一参考问题集合,将所述第一参考问题集合作为目标参考问题集合展示;
问题反馈模块,用于获取在所述展示的目标参考问题集合中选中的参考问题,获取输入的与所述选中的参考问题对应的反馈信息,将所述选中的参考问题以及对应的反馈信息提交给测试服务器。
结合本发明实施例第二方面的实现方式,在本发明实施例第二方面的第一种可能的实现方式中,所述问题反馈模块,用于检测与所述选中的参考问题对应的图标在与反馈信息的类型信息对应的图标上的放置事件;获取所述放置事件对应的选中的反馈信息的类型信息,展示与所述选中的反馈信息的类型信息的反馈信息输入界面;接收通过所述反馈信息输入界面输入的与所述选中的反馈信息的类型信息反馈信息。
结合本发明实施例第二方面或第二方面的第一种可能的实现方式,在本发明实施例第二方面的第二种可能的实现方式中,所述装置还包括系统事件检测模块,用于检测系统事件,获取所述交互事件对应的系统事件标识和响应信息;接收输入的问题反馈指令,查找与所述系统事件标识和响应信息对应的第二参考问题集合,将所述第二参考问题集合作为目标参考问题集合展示。
结合本发明实施第二方面的第二种可能的实现方式,在本发明实施例第二方面的第三种可能的实现方式中,所述装置还包括测试规则信息匹配模块,用于查找所述交互操作标识/系统事件标识和响应信息匹配的预设的测试规则信息,所述测试规则信息包括至少一个作为样本的交互操作标识/系统事件标识和响应信息;获取所述查找到的测试规则信息对应的第三参考问题集合,将所述第三参考问题集合作为目标参考问题集合展示。
结合本发明实施第二方面或第二方面的第一种至第三种中任一种可能的实现方式,在本发明实施例第二方面的第四种可能的实现方式中,所述目标参考问题查找模块还用于在预设的经验库服务器中查找与所述交互操作标识和响应信息对应的第一参考问题集合;
所述装置还包括新增问题输入模块,用于展示新增问题输入界面,接收在所述新增问题输入界面输入的测试问题,将所述测试问题发送给测试服务器;
所述测试服务器用于接收所述测试问题,获取与所述测试问题匹配的接收频次,在所述接收频次大于或等于阈值时,将所述测试问题作为参考问题添加到所述经验库服务器中。
结合本发明实施第二方面的第四种可能的实现方式,在本发明实施例第二方面的第五种可能的实现方式中,所述新增问题输入模块还用于获取选中的问题类型图标,获取与所述选中的问题类型图标对应的参考问题的类型信息;展示与所述选中的参考问题的类型信息对应的新增问题输入界面。
结合本发明实施第二方面的第五种可能的实现方式,在本发明实施例第二方面的第六种可能的实现方式中,所述新增问题输入模块用于检测选中的问题类型图标在与反馈信息的类型信息对应的图标上的放置事件;获取所述放置事件对应的选中的反馈信息的类型信息,展示与所述选中的反馈信息的类型信息的反馈信息输入界面;接收通过所述反馈信息输入界面输入的与所述选中的反馈信息的类型信息对应的反馈信息。
综上所述,实施本发明实施例,将具有如下有益效果:
采用了上述反馈测试问题的方法及装置之后,用户在众测平台上根据开发人员预先设定的测试流程进行测试的过程中,其操作的终端将用户的交互操作触发的交互事件的交互操作标识和相应的响应信息上传至测试服务器,在用户进行问题反馈时,终端可通过测试服务器查找到与用户的交互操作对应的参考问题,用户在输入测试问题进行反馈时,不需要自行定义程序漏洞、不足或缺陷,而是使用统一的参考问题作为反馈信息进行提交,即使测试人员为普通用户,也可根据参考问题的提示对程序漏洞、不足或缺陷进行正确的描述和反馈,从而使得反馈给测试服务器的测试问题更加准确。
同时,由于在用户反馈测试问题时,不需要用户自行输入繁杂的问题描述信息,而只需要选择相应的参考问题即可完成反馈,使得操作的步骤更加简便,从而提高了操作的便利性。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
传统技术中的众测平台,众测平台提供了运行于智能手机、平板电脑、智能手表、个人电脑等终端设备上的测试客户端,测试人员为非专业的普通用户。普通用户在终端设备上安装了众测平台的客户端程序之后,即可作为测试人员参与测试。如图1所示,用户在进入众测平台之后,众测平台的客户端程序可展示测试任务列表,用于测试不同的应用的不同功能模块,测试任务列表中的列表项对应着不同的应用的不同功能模块的测试流程。用户可选择相应的测试流程参与测试工作。
如图2所示,用户在进行众测平台上进行测试流程的过程中,若发现测试流程中出现的问题,则可输入问题反馈指令,众测平台的客户端程序则展示相应的问题提交界面。但在该界面中,需要用户自行输入相关信息对测试中出现的测试问题进行描述。对于参与众测平台上测试的普通用户而言,可能对产品并不了解,因此输入的测试问题带有强烈的主观性,因此对测试问题的描述无法与程序开发人员的测试意图完全匹配,会造成测试问题的准确度较低。
同时,每个测试问题均需要用户手动地输入测试问题,以及测试问题的反馈信息(例如截屏信息、录像信息或文字描述信息等),因此操作较繁琐,使得操作的便利性也不足。
为解决上述传统技术中的众测平台上对于相同的测试问题,测试人员可能在描述上存在较大的差异,从而导致对测试问题反馈的准确度不足的技术问题,在一个实施例中,特提出了一种反馈测试问题的方法,该方法的执行可基于计算机程序,该计算机程序可以是众测平台的客户端程序或者测试工具程序。该计算机程序可运行于基于冯诺依曼体系的计算机系统。
如图3所示,在一个实施例中,在一个众测平台的测试系统中,可包括终端10、测试服务器20和经验库服务器30,终端10与测试服务器20、测试服务器20与经验库服务器30之间可通过互联网或者以太网连接。程序开发人员或测试流程的设计人员可预先在测试服务器20上定义测试流程,终端10可由测试服务器20上下载预先定义的测试流程,并向测试服务器20反馈测试问题,经验库服务器30中存储有预先定义的参考问题,提供了用户选择参考问题作为测试问题进行反馈的机制。在该实施例中,上述反馈测试问题的方法即运行于图3所示的终端10上。终端10可以是智能手机、掌上电脑、智能手表、平板电脑、笔记本电脑或个人电脑等终端设备。
具体的,在本实施例中,如图4所示,该反馈测试问题的方法包括:
步骤S102,获取预设的测试流程配置信息,根据测试流程配置信息逐步展示测试界面。
参考图3所示,程序开发人员或测试流程的设计人员可预先在测试服务器20上定义测试流程,定义的逻辑上的测试流程以测试流程配置信息的形式存储于测试服务器20上,当用户在终端上启动了众测平台的客户端程序之后,该客户端程序即可展示测试流程配置信息的列表,用户通过选择相应的测试流程配置信息进行测试。
在测试流程配置信息中定义的测试界面以及相应的功能模块中,通常需要用户在测试界面上结合相应的功能模块进行相应的交互操作,输入测试数据或触发相应终端上的传感器来触发事件来完成测试流程。
例如,若要测试智能手机上的拍照分享功能,则测试流程中,用户需要先进行拍照,然后输入分享文字,在展示的好友列表中选中好友,然后点击分享按钮将拍照得到的图片分享给该好友。因此,在整个测试流程中有多个步骤需要用户进行交互。
可选的,可在每一次需要交互的测试环节展示提示信息,提示用户进行相应的交互操作。如上例中,开始测试时,提示用户点击拍照的按钮进行拍照(例如,可使用箭头指示用户点击相应的按钮),拍照完毕后,则可提示用户输入分享文字,然后提示用户选中某个好友,最后提示用户点击分享按钮进行分享。
步骤S104,检测在测试界面上触发的交互事件,获取所述交互事件对应的交互操作标识和响应信息。
交互事件即为用户的操作或输入触发的事件。例如,若执行本方法的终端为带有触摸屏的智能手机,则交互事件可以是单击事件、长按事件、旋转事件、缩放事件、滑动事件、拖曳事件、按压事件等;若执行本方法的终端为带有触摸屏的智能手环或者智能手表,则交互事件可以是抬腕事件、翻腕事件、抖动事件、低头事件、抬头事件、摇头事件;若执行本方法的终端为带有摄像头的智能车载设备或者智能电视设备、游戏机设备,则交互事件可以是语音输入事件、体感事件等。
可预先设置交互事件对应的交互操作的交互操作标识,每种交互操作标识相应的用户交互动作,从而对用户的操作进行区分。交互事件的响应信息可以是界面响应信息或者系统响应信息。
例如,若在测试过程中的某一个测试步骤中,用户的交互操作为在智能手机的触摸屏上的某个窗口中进行缩放操作,则将触发缩放的交互事件,该交互事件的响应信息即可为该窗口的实际缩放比例(界面响应信息)。
再例如,若在测试过程中的某一个测试步骤中,用户的交互操作为在智能手机的触摸屏上的点击某个按钮访问预设的网页,则将触发单机的交互事件,若用户点击该按钮后,无法访问该网页并提示错误代码,则该交互事件的响应信息即可为该错误代码(系统响应信息)。
步骤S106,接收输入的问题反馈指令,查找与所述交互操作标识和响应信息对应的第一参考问题集合,将所述第一参考问题集合作为目标参考问题集合展示。
问题反馈指令即为用户在测试过程中发现问题后输入的用于向测试服务器反馈测试问题的计算机指令。用户输入该问题反馈指令即可向测试服务器反馈测试问题。
如上例中,若用户的交互操作为在智能手机的触摸屏上的某个窗口中进行缩放操作,但用户观察到伴随着缩放操作而该窗口的实际缩放比例存在问题时,则可输入问题反馈指令,从而向测试服务器反馈该问题。用户可通过点击预设的按钮或图标输入问题反馈指令,也可通过摇一摇等操作输入问题反馈指令。
用户输入了问题反馈指令之后,终端则可查找与用户的交互操作对应的参考问题来辅助用户进行反馈。如上例中,终端在接收到问题反馈指令之后,检测到当前的用户操作的交互操作标识为缩放操作,对应的响应信息为实际缩放比例,则可查找查找与该交互操作标识和响应信息对应的第一参考问题集合,并将第一参考问题集合作为目标参考问题集合展示。
第一参考问题集合为与用户输入问题反馈指令之前进行的交互操作对应的交互操作标识和相应产生的响应信息对应的参考问题的集合。目标参考问题集合即为终端展示的用于方便用户选择相应的多个作为候选的参考问题的集合。
在本实施例中,终端可将用户输入问题反馈指令之前进行的交互操作对应的交互操作标识和相应产生的响应信息上传至测试服务器,测试服务器根据该上传的交互操作标识和响应信息在经验库服务器中查找匹配的预先设定的参考问题,查找到的参考问题可以有多个,该多个查找到的参考问题构成的集合即为第一参考问题集合。测试服务器可将查找到的第一参考问题集合返回给终端作为目标参考问题集合展示,用户在浏览了目标参考问题集合之后,即可根据测试的实际情况,选择最接近的参考问题进行反馈。
也就是说,用户在测试过程中发现问题时,不需要自行对测试中的问题进行描述,而是由终端根据用户的交互操作及其产生的响应信息返回最接近的参考问题以供用户选择,使得普通用户也能够更准确地对测试中的问题进行描述。同时,用户只需要选择即可,不需要输入繁琐的测试问题,从而提高了操作的便利性。
步骤S108,获取在展示的目标参考问题集合中选中的参考问题,获取输入的与所述选中的参考问题对应的反馈信息,将所述选中的参考问题以及对应的反馈信息提交给测试服务器。
如前所述,在向用户展示了目标参考问题集合之后,用户即可根据测试的实际情况在展示的目标参考问题集合中选择合适的参考问题进行反馈。
如上例中,若用户操作的交互操作标识为缩放操作,对应的响应信息为实际缩放比例,则展示的目标参考问题集合中可包含缩放灵敏度过高的参考问题、缩放失灵的参考问题和缩放过程卡顿的参考问题。若用户实际观察发现为缩放过程中窗口大小不变,则可选中缩放失灵的参考问题作为需要反馈的测试问题。
用户在选中了缩放失灵的参考问题之后,即可进一步输入与该参考问题相应的反馈信息。反馈信息可以是多种类型,包括文本、图片或视频。用户可再次进行缩放操作,并在缩放过程中对界面进行录像,然后将录制得到的视频文件作为反馈信息提交。终端即可将该选中的缩放失灵的参考问题以及录制得到的作为反馈信息的视频文件上传给测试服务器。开发人员或者测试流程设计人员即可在测试服务器上浏览到该测试问题。
进一步的,为了提高操作的便利性以及提高测试过程的趣味性。展示的目标参考问题集合中的参考问题具有对应的图标。如图5所示,终端可执行:
步骤S202,检测与所述选中的参考问题对应的图标在与反馈信息的类型信息对应的图标上的放置事件。
步骤S204,获取所述放置事件(drop事件)对应的选中的反馈信息的类型信息,展示与所述选中的反馈信息的类型信息的反馈信息输入界面。
步骤S206,接收通过所述反馈信息输入界面输入的与所述选中的反馈信息的类型信息反馈信息。
也就是说,在展示目标参考问题集合的界面上可展示多个与反馈信息的类型信息对应的图标,例如,对应文本类型的反馈信息的图标、对应图片类型的反馈信息的图标、对应视频类型的反馈信息的图标。用户可通过将选中的参考问题的图标拖放到与反馈信息的类型信息对应的图标上来选择相应的反馈信息的类型。
例如,若用户将选中的参考问题对应的图标拖曳并放置到了对应图片类型的反馈信息的图标上,则可自动完成截屏,然后在展示的反馈信息输入界面展示该截屏得到的图片或缩略图。若用户点击反馈信息输入界面上的提交按钮,则终端将用户选中的参考问题以及该截屏得到的图片上传给测试服务器。
采用此种方式输入反馈信息,用户只需要进行拖放操作即可完成对反馈信息类型的选择,从而快速地输入反馈信息,使得操作的便利性大大提高。
可选的,根据所述测试流程配置信息逐步展示测试界面之后可检测系统事件,获取所述交互事件对应的系统事件标识和响应信息;接收输入的问题反馈指令,查找与所述系统事件标识和响应信息对应的第二参考问题集合,将所述第二参考问题集合作为目标参考问题集合展示;执行所述获取在所述展示的目标参考问题集合中选中的参考问题。
系统事件即为在测试过程中,并非用户根据测试流程配置信息的提示信息进行的交互操作直接产生的,但在测试过程中终端上的系统产生的事件。例如,系统事件可包括蓝牙断连事件、蓝牙配对失败事件、网络数据信号异常事件、周边网络干扰事件、数据突变事件、网络断开事件、温湿度感知异常事件、设备抖动事件、后台调出事件、休眠唤醒事件、系统重启事件、自动锁屏事件、版本升级事件等。
在本实施例中,终端在检测到系统事件之后,也将该事件的系统事件标识以及对应的响应信息(可以是异常事件的错误代码或者异常代码)上传至测试服务器。在用户输入了问题反馈指令之后,也可查找输入问题反馈指令之前触发的系统事件的系统事件标识和响应信息对应的第二参考问题集合。并将查找到的第二参考问题集合推送至终端,由终端将其作为目标参考问题集合展示。用户即可在展示的目标参考问题集合选择最接近的参考问题作为测试问题进行反馈。
可选的,在一个实施例中,测试服务器上还可预先设置有测试规则信息,测试规则信息可包含多个交互操作标识/系统事件标识以及该交互操作标识/系统事件标识对应的响应信息。
而终端在检测到多个交互事件/系统事件,并获取了多个交互事件/系统事件对应的交互操作标识/系统事件标识和响应信息之后,还可执行:
查找所述交互操作标识/系统事件标识和响应信息匹配的预设的测试规则信息,所述测试规则信息包括至少一个作为样本的交互操作标识/系统时间标识和响应信息。
获取所述查找到的测试规则信息对应的第三参考问题集合,将所述第三参考问题集合作为目标参考问题集合展示。
执行所述获取在所述展示的目标参考问题集合中选中的参考问题。
也就是说,若用户在测试中进行了多次交互操作,若该多次交互操作产生的交互操作标识和响应信息若与测试服务器上预先定义的测试规则信息匹配,则测试服务器主动下发与该匹配的测试规则信息对应的第三参考问题集合,终端在接收到该第三参考问题集合之后,自动进入测试问题反馈流程,提示用户在第三参考问题集合构成的目标参考问题集合中选择参考问题进行反馈。
例如,若测试服务器上预先定义的测试规则信息A为满足任意以下条件一至条件五任一项的交互操作:
条件一:在设定时间内(默认值为2秒)连续两次或两次以上,以同样的交互动作操作同一页面中的同一控件。
条件二:在无网络(包括通过蓝牙、数据线或其它常见连接方式)连接状态下,用户完成一次交互动作后,超过设定时间(默认值为5秒)界面无响应。
条件三:在有网络(包括通过蓝牙、数据线或其它常见连接方式)连接状态下,用户完成一次交互动作后,超过设定时间(默认值为5秒)系统无数据传输或界面无响应。
条件四:用户在完成一次交互动作后,自动触发系统报错或出现错误提示。
条件五:用户在完成一次交互动作后,界面自动跳转至错误页面或空白页面。
则,用户在进行测试过程中,终端持续地将测试过程中产生的交互操作标识/系统事件标识和响应信息上传给测试服务器,当测试服务器判断该上传的多个交互操作标识/系统事件标识和响应信息中,满足了上述条件一至条件五任意一项时,则终端上传的交互操作标识/系统事件标识和响应信息与预先定义的测试规则信息A匹配,因此,测试服务器可查找与测试规则信息A对应的预先设定的第三参考问题集合下发给终端,终端在接收到该第三参考问题集合之后,将其作为目标参考问题集合展示。用户可在目标参考问题集合中选择参考问题并输入相应的反馈信息进行提交。
再例如,若预先定义的测试规则信息B为交互操作标识1、交互操作标识2、交互操作标识3以及错误代码为502的响应信息。其中交互操作标识1表示点击按钮1的交互操作,交互操作标识2表示点击按钮2的交互操作,交互操作标识3表示点击按钮3的交互操作,错误代码为502为交互操作标识3的响应信息。则当用户在进行测试过程中,按照1、2、3的先后顺序连续依次点击按钮1、按钮2和按钮3时,若产生了502的错误代码,则用户的操作过程自动与测试规则信息B匹配。
因此,测试服务器可查找与测试规则信息B对应的预先设定的第三参考问题集合下发给终端,终端在接收到该第三参考问题集合之后,将其作为目标参考问题集合展示。
也就是说,用户不需要输入问题反馈指令,但在该用户一系列的交互操作行为以及产生的响应信息与测试服务器上预先定义的测试规则信息(可以是由多个作为样本的交互操作标识/系统事件标识以及对应的响应信息构成的集合,可以是序列的形式,也可以是通过逻辑连接符连接的形式,在匹配时,每个作为样本的交互操作标识/系统事件标识以及响应信息与用户实际操作过程中的交互操作标识/系统事件标识以及对应的响应信息进行匹配,并通过逻辑连接符连接每个单独的匹配结果,最终判断是否匹配)匹配之后,若匹配成功,自动地展示相应的参考问题,提示用户测试过程中存在问题,需要反馈给测试服务器,从而更进一步提高了操作的便利性。
进一步的,还可在未查找所述交互操作标识/系统事件标识和响应信息匹配的预设的测试规则信息时,执行所述接收输入的问题反馈指令。也就是说,用户可随时输入问题反馈指令主动地向测试服务器提交作为反馈得而测试问题。
可选的,终端在接收输入的问题反馈指令之后还可展示新增问题输入界面,接收在新增问题输入界面输入的测试问题,将测试问题发送给测试服务器。
也就是说,尽管向用户展示了目标参考问题集合,但可能用户在测试过程中,可能会发现经验库服务器中未记录的测试问题。此时,仍可展示新增问题输入界面,允许用户自行输入测试问题,并提交给测试服务器。用户自行输入测试问题的类型、问题描述信息、问题级别等。
测试服务器接收到用户通过新增问题输入界面自行输入的测试问题之后,可获取与测试问题匹配的接收频次,在接收频次大于或等于阈值时,将测试问题作为参考问题添加到经验库服务器中。
接收频次即为接收到该测试问题的次数或者用户比例。若接收频次较高,则意味着有较多的用户发现了该测试问题,可将其添加到经验库服务器中从而提示其他用户在测试时可方便选择。
进一步的,获取在所述展示新增问题输入界面包括:获取选中的问题类型图标,获取与选中的问题类型图标对应的参考问题的类型信息;展示与选中的参考问题的类型信息对应的新增问题输入界面。
可预先设置多种参考问题的类型,并为每种类型分别设置图标与其对应。如图6所示,界面左上角的4个图标与参考问题的类型的对应关系可依次为:
“鬼/幽灵”:代表应用程序缺陷、性能问题。
“僵尸”:代表应用程序UI建议。
“万圣节南瓜怪物”:代表应用程序检视点、易用性问题。
“死神怪物”:代表应用程序其它问题。
用户在输入新增问题之前,选择了“僵尸”图标,则将展示与应用程序UI建议对应的新增问题输入界面,用户可在展示的与应用程序UI建议对应的新增问题输入界面中输入问题描述信息、问题级别等内容提交给测试服务器进行反馈。
进一步的,终端获取选中的问题类型图标之后还可检测选中的问题类型图标在与反馈信息的类型信息对应的图标上的放置事件;获取所述放置事件对应的选中的反馈信息的类型信息,展示与所述选中的反馈信息的类型信息的反馈信息输入界面;接收通过所述反馈信息输入界面输入的与所述选中的反馈信息的类型信息对应的反馈信息。
也就是说,在界面上可展示多个与反馈信息的类型信息对应的图标,例如,对应文本类型的反馈信息的图标、对应图片类型的反馈信息的图标、对应视频类型的反馈信息的图标。用户可通过将选中的“僵尸”等问题类型图标拖放到与反馈信息的类型信息对应的图标上来选择相应的反馈信息的类型。
例如,若用户将选中的“僵尸”图标拖曳并放置到了对应图片类型的反馈信息的图标上,则可自动完成截屏,然后在展示的反馈信息输入界面展示该截屏得到的图片或缩略图。若用户点击反馈信息输入界面上的提交按钮,则终端将用户选中的问题类型、相应输入的测试问题以及该截屏得到的图片上传给测试服务器。
采用此种方式输入反馈信息,用户只需要进行拖放操作即可完成对反馈信息类型的选择,从而快速地输入反馈信息,使得操作的便利性大大提高。
在一个实施例中,为解决上述传统技术中的众测平台上对于相同的测试问题,测试人员可能在描述上存在较大的差异,从而导致对测试问题反馈的准确度不足的技术问题,如图7所示,特提出了一种反馈测试问题的装置,包括:测试流程获取模块102、交互事件检测模块104、目标参考问题查找模块106和问题反馈模块108,其中:
测试流程获取模块102,用于获取预设的测试流程配置信息,根据所述测试流程配置信息逐步展示测试界面。
交互事件检测模块104,用于检测在所述测试界面上触发的交互事件,获取所述交互事件对应的交互操作标识和响应信息。
目标参考问题查找模块106,用于接收输入的问题反馈指令,查找与所述交互操作标识和响应信息对应的第一参考问题集合,将所述第一参考问题集合作为目标参考问题集合展示。
问题反馈模块108,用于获取在所述展示的目标参考问题集合中选中的参考问题,获取输入的与所述选中的参考问题对应的反馈信息,将所述选中的参考问题以及对应的反馈信息提交给测试服务器。
在一个实施例中,问题反馈模块108用于检测与所述选中的参考问题对应的图标在与反馈信息的类型信息对应的图标上的放置事件;获取所述放置事件对应的选中的反馈信息的类型信息,展示与所述选中的反馈信息的类型信息的反馈信息输入界面;接收通过所述反馈信息输入界面输入的与所述选中的反馈信息的类型信息反馈信息。
在一个实施例中,如图7所示,该装置还包括系统事件检测模块110,用于检测系统事件,获取所述交互事件对应的系统事件标识和响应信息;接收输入的问题反馈指令,查找与所述系统事件标识和响应信息对应的第二参考问题集合,将所述第二参考问题集合作为目标参考问题集合展示。
在一个实施例中,如图7所示,该装置还包括测试规则信息匹配模块112,用于查找所述交互操作标识/系统事件标识和响应信息匹配的预设的测试规则信息,所述测试规则信息包括至少一个作为样本的交互操作标识/系统事件标识和响应信息;获取所述查找到的测试规则信息对应的第三参考问题集合,将所述第三参考问题集合作为目标参考问题集合展示。
在一个实施例中,目标参考问题查找模块106还用于在预设的经验库服务器中查找与所述交互操作标识和响应信息对应的第一参考问题集合;
在本实施例中,如图7所示,该装置还包括新增问题输入模块114,用于展示新增问题输入界面,接收在所述新增问题输入界面输入的测试问题,将所述测试问题发送给测试服务器。
所述测试服务器用于接收所述测试问题,获取与所述测试问题匹配的接收频次,在所述接收频次大于或等于阈值时,将所述测试问题作为参考问题添加到所述经验库服务器中。
在一个实施例中,新增问题输入模块114还用于获取选中的问题类型图标,获取与所述选中的问题类型图标对应的参考问题的类型信息;展示与所述选中的参考问题的类型信息对应的新增问题输入界面。
在一个实施例中,新增问题输入模块114还用于检测选中的问题类型图标在与反馈信息的类型信息对应的图标上的放置事件;获取所述放置事件对应的选中的反馈信息的类型信息,展示与所述选中的反馈信息的类型信息的反馈信息输入界面;接收通过所述反馈信息输入界面输入的与所述选中的反馈信息的类型信息对应的反馈信息。
综上所述,实施本发明实施例,将具有如下有益效果:
采用了上述反馈测试问题的方法及装置之后,用户在众测平台上根据开发人员预先设定的测试流程进行测试的过程中,其操作的终端将用户的交互操作触发的交互事件的交互操作标识和相应的响应信息上传至测试服务器,在用户进行问题反馈时,终端可通过测试服务器查找到与用户的交互操作对应的参考问题,用户在输入测试问题进行反馈时,不需要自行定义程序漏洞、不足或缺陷,而是使用统一的参考问题作为反馈信息进行提交,即使测试人员为普通用户,也可根据参考问题的提示对程序漏洞、不足或缺陷进行正确的描述和反馈,从而使得反馈给测试服务器的测试问题更加准确。
同时,由于在用户反馈测试问题时,不需要用户自行输入繁杂的问题描述信息,而只需要选择相应的参考问题即可完成反馈,使得操作的步骤更加简便,从而提高了操作的便利性。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(Random AccessMemory,RAM)等。
以上所揭露的仅为本发明较佳实施例而已,当然不能以此来限定本发明之权利范围,因此依本发明权利要求所作的等同变化,仍属本发明所涵盖的范围。