CN107273284A - 测试应用程序性能的方法及装置 - Google Patents

测试应用程序性能的方法及装置 Download PDF

Info

Publication number
CN107273284A
CN107273284A CN201710261210.XA CN201710261210A CN107273284A CN 107273284 A CN107273284 A CN 107273284A CN 201710261210 A CN201710261210 A CN 201710261210A CN 107273284 A CN107273284 A CN 107273284A
Authority
CN
China
Prior art keywords
test
application program
test data
data
interaction area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710261210.XA
Other languages
English (en)
Other versions
CN107273284B (zh
Inventor
马杰
杜娇
刘宏伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xiaodu Information Technology Co Ltd
Original Assignee
Beijing Xiaodu Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xiaodu Information Technology Co Ltd filed Critical Beijing Xiaodu Information Technology Co Ltd
Priority to CN201710261210.XA priority Critical patent/CN107273284B/zh
Publication of CN107273284A publication Critical patent/CN107273284A/zh
Application granted granted Critical
Publication of CN107273284B publication Critical patent/CN107273284B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3684Test management for test design, e.g. generating new test cases
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3688Test management for test execution, e.g. scheduling of test suites

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明实施方式提供了测试应用程序性能的方法及装置,涉及计算机应用技术领域。其中,所述测试应用程序性能的方法包括:获取用户操作应用程序的操作数据;基于所述操作数据生成测试文件;通过所述测试文件测试所述应用程序的稳定性。在本发明实施方式提供的技术方案中,基于用户操作应用程序的操作数据,生成用以测试应用程序稳定性的测试文件,因此,实现了依据用户的实际使用习惯进行稳定性测试,从而使得稳定性测试的结果更为准确。

Description

测试应用程序性能的方法及装置
技术领域
本发明涉及计算机应用技术领域,更为具体而言,涉及测试应用程序性能的方法及装置。
背景技术
随着外卖领域的不断发展,送餐骑士的人数突飞猛进,越来越多的优秀骑士加入送餐大军。同时,外卖平台对于送餐骑士提出了严格的要求,也就是,送餐时间不能超过规定时间,平均准时送达率达到规定标准以上。而物流APP(计算机应用程序)在使用过程中是否足够稳定,是直接影响到骑士效率的关键因素。因此,物流APP的稳定性测试(又称可靠性测试,给计算机应用程序加载一定的业务压力,让计算机应用程序持续运行一段时间,检测计算机应用程序是否能够稳定运行)至关重要。
随着计算机软件技术的发展,Android(安卓)应用的开发工具中已经自带了一些稳定性测试的工具,这些工具可以为我们的稳定性测试提供服务。具体而言,只需设定运行时间,这些工具就可以模拟人在APP中的点击、滑动等各种操作,从而能够在人力不干预的情况下,测试应用程序会不会在长时间的使用过程中发生崩溃、无响应等系统错误、是否能够长时间稳定地为用户提供服务。
然而,在现有技术中,并不是依据用户的实际使用习惯来进行稳定性测试的,通常采用随机操作的方式,即使用测试工具在应用程序的界面上随机执行点击、滑动、下拉、上滑等操作。即使进行相对精确的稳定性测试,也仅限于测试人员基于其自身经验来估计各操作方式的概率。但是,不同APP用户的使用习惯是有很大差别的,因此,仅凭测试人员的经验和估计是很难准确地模拟出用户的实际使用场景,从而导致稳定测试的结果不准确。
发明内容
本发明实施方式提供了测试应用程序性能的方法及装置,用以解决现有技术中由于未依据用户的实际使用习惯来进行稳定性测试,而导致的稳定性测试不准确的问题。
第一方面,本发明实施方式提供了一种测试应用程序性能的方法。
具体地,所述方法包括:
获取用户操作应用程序的操作数据;
基于所述操作数据生成测试文件;
通过所述测试文件测试所述应用程序的稳定性。
由于在本发明中,基于用户操作应用程序的操作数据,生成用以测试应用程序稳定性的测试文件,因此,实现了依据用户的实际使用习惯进行稳定性测试,从而使得稳定性测试的结果更为准确。
结合第一方面,在本发明的一些实现方式中,基于所述操作数据生成测试文件包括:
通过所述操作数据确定所述应用程序的测试数据集,其中,所述测试数据集的划分包括:以所述应用程序的交互区域为粒度的划分;
依据所述测试数据集生成测试文件。
由于在不同APP之间交互区域的划分存在很大差异,因此,需要结合APP本身的交互特点来设计稳定性测试以得到更为准确的测试结果。对此,在本发明中,所述测试数据集的一个或多个划分中包括以所述应用程序的交互区域为粒度的划分,因此,可以分交互区域地确定测试数据,从而结合APP自身的交互特点来设计稳定性测试。
结合第一方面,在本发明的一些实现方式中,通过所述操作数据确定所述应用程序的测试数据集包括:
通过所述操作数据确定所述测试数据集中的第一测试数据;
指定所述测试数据集中的第二测试数据;
基于所述第一测试数据和所述第二测试数据,确定所述测试数据集中的第三测试数据;其中,
所述第一测试数据对应所述应用程序的第一交互区域;
所述第二测试数据对应所述应用程序的第二交互区域;
所述第三测试数据对应所述应用程序的第三交互区域。
在本发明中,可以通过指定应用程序中部分交互区域(例如,能够导致APP跳出运行的交互区域)的测试数据,来控制这部分交互区域在稳定性测试过程中的操作,以进一步提高稳定性测试的准确率。
结合第一方面,在本发明的一些实现方式中,通过所述操作数据确定所述测试数据集中的第一测试数据包括:
依据所述操作数据计算所述应用程序的页面概率分布、跳转概率分布和后台运行概率;
利用所述页面概率分布、跳转概率分布和后台运行概率确定所述第一测试数据。
结合第一方面,在本发明的一些实现方式中,所述方法还包括:
监测所述应用程序是否跳出运行;
若所述应用程序跳出运行,则启动所述应用程序并返回执行下述处理:通过所述测试文件测试所述应用程序的稳定性。
在稳定性测试中,APP经常会跳出运行而导致测试阶段存在无效测试。对此,本发明增加了监控机制(即监测APP当前是否跳出运行,一旦监测到APP跳出运行则再次启动该APP),以减少测试阶段中的无效测试。
第二方面,本发明实施方式提供了一种测试应用程序性能的装置。
具体地,所述装置包括:
获取模块,用于获取用户操作应用程序的操作数据;
生成模块,用于基于所述操作数据生成测试文件;
测试模块,用于通过所述测试文件测试所述应用程序的稳定性。
由于在本发明中,基于用户操作应用程序的操作数据,生成用以测试应用程序稳定性的测试文件,因此,实现了依据用户的实际使用习惯进行稳定性测试,从而使得稳定性测试的结果更为准确。
结合第二方面,在本发明的一些实现方式中,所述生成模块包括:
测试数据集确定单元,用于通过所述操作数据确定所述应用程序的测试数据集,其中,所述测试数据集的划分包括:以所述应用程序的交互区域为粒度的划分;
生成单元,用于依据所述测试数据集生成测试文件。
由于在不同APP之间交互区域的划分存在很大差异,因此,需要结合APP本身的交互特点来设计稳定性测试以得到更为准确的测试结果。对此,在本发明中,所述测试数据集的一个或多个划分中包括以所述应用程序的交互区域为粒度的划分,因此,可以分交互区域地确定测试数据,从而结合APP自身的交互特点来设计稳定性测试。
结合第二方面,在本发明的一些实现方式中,所述测试数据集确定单元包括:
第一测试数据确定子单元,用于通过所述操作数据确定所述测试数据集中的第一测试数据;
第二测试数据指定子单元,用于指定所述测试数据集中的第二测试数据;
第三测试数据确定子单元,用于基于所述第一测试数据和所述第二测试数据,确定所述测试数据集中的第三测试数据;其中,
所述第一测试数据对应所述应用程序的第一交互区域;
所述第二测试数据对应所述应用程序的第二交互区域;
所述第三测试数据对应所述应用程序的第三交互区域。
在本发明中,可以通过指定应用程序中部分交互区域(例如,能够导致APP跳出运行的交互区域)的测试数据,来控制这部分交互区域在稳定性测试过程中的操作,以进一步提高稳定性测试的准确率。
结合第二方面,在本发明的一些实现方式中,所述第一测试数据确定子单元包括:
计算组件,用于依据所述操作数据计算所述应用程序的页面概率分布、跳转概率分布和后台运行概率;
确定组件,用于利用所述页面概率分布、跳转概率分布和后台运行概率确定所述第一测试数据。
结合第二方面,在本发明的一些实现方式中,所述装置还包括:
监测模块,用于监测所述应用程序是否跳出运行;
启动及调用模块,用于在所述应用程序跳出运行的情形下,启动所述应用程序并调用所述测试模块通过所述测试文件测试所述应用程序的稳定性。
在稳定性测试中,APP经常会跳出运行而导致测试阶段存在无效测试。对此,本发明增加了监控机制(即监测APP当前是否跳出运行,一旦监测到APP跳出运行则再次启动该APP),以减少测试阶段中的无效测试。
本发明的这些方面或其他方面在以下具体实施方式的描述中会更加简明易懂。
附图说明
为了更清楚地说明本发明实施方式的技术方案,下面将对实施方式描述中所需要使用的附图作一简单的介绍,显而易见地,下面描述中的附图是本发明的一些实施方式,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是根据本发明方法实施方式1的测试应用程序性能的方法的流程图;
图2是根据本发明方法实施方式2的测试应用程序性能的方法的流程图;
图3是根据本发明方法实施方式3的测试应用程序性能的方法的流程图;
图4示出了图3所示的处理S32的一种实施方式;
图5示出了图4所示的处理S321的一种实施方式;
图6是根据本发明方法实施方式6的测试应用程序性能的方法的流程图;
图7是根据本发明装置实施方式1的测试应用程序性能的装置的结构示意图;
图8示出了图7所示的生成模块2的一种实施方式;
图9示出了图8所示的测试数据集确定单元21的一种实施方式;
图10示出了图9所示的第一测试数据确定子单元211的一种实施方式;
图11示出了图10所示的确定组件2112的一种实施方式。
具体实施方式
以下结合附图和具体实施方式对本发明的各个方面进行详细阐述。其中,在本发明的各个具体实施方式中,众所周知的操作过程、程序模块、单元及其相互之间的连接、链接、通信或操作没有示出或未作详细说明。
并且,所描述的特征、架构或功能可在一个或一个以上实施例中以任何方式组合。
此外,本领域技术人员应当理解,下述的各种实施方式只用于举例说明,而非用于限制本发明的保护范围。本领域的技术人员还可以容易理解,本文所述和附图所示的各实施方式中的程序模块、单元或步骤可以按多种不同配置进行组合和设计。
对于未在本说明书中进行具体说明的技术术语,除非另有特定说明,都应以本领域最宽泛的意思进行解释。
在本发明的说明书和权利要求书及上述附图中的描述的一些流程中,包含了按照特定顺序出现的多个操作,但是应该清楚了解,这些操作可以不按照其在本文中出现的顺序来执行或并行执行,操作的序号如101、102等,仅仅是用于区分开各个不同的操作,序号本身不代表任何的执行顺序。另外,这些流程可以包括更多或更少的操作,并且这些操作可以按顺序执行或并行执行。需要说明的是,本文中的“第一”、“第二”等描述,是用于区分不同的消息、设备、模块等,不代表先后顺序,也不限定“第一”和“第二”是不同的类型。
下面将结合附图,对本发明实施方式中的技术方案进行清楚、完整地描述,显然,所描述的实施方式仅仅是本发明的一部分实施方式,而不是全部的实施方式。基于本发明中的实施方式,本领域技术人员在没有付出创造性劳动的前提下所获得的所有其他实施方式,都属于本发明保护的范围。
【方法实施方式1】
图1是根据本发明方法实施方式1的测试应用程序性能的方法的流程图。参见图1,在本实施方式中,所述方法包括:
S11:获取用户操作应用程序的操作数据。
S12:基于所述操作数据生成测试文件。
S13:通过所述测试文件测试所述应用程序的稳定性。
例如,可以通过百度移动统计平台获取真实的用户操作数据,并从中提取出稳定性测试所需要的关键要素,具体包括:
(1)访问页面:被用户访问的页面。
(2)访问次数占比:用户访问一个页面的次数/全部页面的总访问次数。
(3)访问路径:用户在访问过程中进行的页面跳转。
例如,页面A—页面B,指用户访问页面A之后跳转到页面B。通过分析从页面A到页面B的跳转按钮的位置以及操作方式,可以进一步分析出用户与应用程序进行交互的区域以及执行的行为。举例说明,用户访问物流APP的订单列表页(物流APP的主页,以将订单卡片排成一列的形式展示所有订单)之后访问订单详情页(订单的具体信息页,包含订单的内容、价格、收货地址和导航、送货地址和导航、订单类型等),由此可以分析出该用户点击了订单列表页的主体交互区域。
(4)用户访问深度:访问路径的长度。
该要素用于分析用户是更有可能通过按返回键返回到上一级页面,还是进入子页面,还是直接按home键(起始键)使应用程序进入后台。
由于在本发明中,基于用户操作应用程序的操作数据,生成用以测试应用程序稳定性的测试文件,因此,实现了依据用户的实际使用习惯进行稳定性测试,从而使得稳定性测试的结果更为准确。
【方法实施方式2】
图2是根据本发明方法实施方式2的测试应用程序性能的方法的流程图。如图2所示,在本实施方式中,所述方法包括:
S21:获取用户操作应用程序的操作数据。
S22:通过所述操作数据确定所述应用程序的测试数据集。
S23:依据所述测试数据集生成测试文件。
S24:通过所述测试文件测试所述应用程序的稳定性。
其中,所述测试数据集的划分包括:以所述应用程序的交互区域为粒度的划分。其中,划分的定义如下:
若集合A的幂集P(A)的一个子集π={A1,A2,...,Ak}满足:
(1)π中没有空集;
(2)A1,A2,……,Ak两两不相交;
(3)所有集合的并集A1∪A2∪...∪Ak=A。
则称π是集合A的一个划分。
以应用程序的交互区域为粒度的划分π1满足:
(1)π1中的每个元素分别对应一个交互区域;
(2)π1的元素数量等于应用程序中交互区域的数量。
由于在不同APP之间交互区域的划分存在很大差异,因此,需要结合APP本身的交互特点来设计稳定性测试以得到更为准确的测试结果。对此,在本发明中,所述测试数据集的一个或多个划分中包括以所述应用程序的交互区域为粒度的划分,因此,可以分交互区域地确定测试数据,从而结合APP自身的交互特点来设计稳定性测试。
【方法实施方式3】
图3是根据本发明方法实施方式3的测试应用程序性能的方法的流程图。如图3所示,在本实施方式中,所述方法包括:
S31:获取用户操作应用程序的操作数据。
S32:通过所述操作数据确定所述应用程序的测试数据集中的第一测试数据。
所述第一测试数据对应所述应用程序的第一交互区域。
S33:指定所述测试数据集中的第二测试数据。
所述第二测试数据对应所述应用程序的第二交互区域。
S34:基于所述第一测试数据和所述第二测试数据,确定所述测试数据集中剩余的第三测试数据。
所述第三测试数据对应所述应用程序的第三交互区域。
S35:依据所述测试数据集生成测试文件。
S36:通过所述测试文件测试所述应用程序的稳定性。
在本发明中,可以通过指定应用程序中部分交互区域(例如,能够导致APP跳出运行的交互区域)的测试数据,来控制这部分交互区域在稳定性测试过程中的操作,以进一步提高稳定性测试的准确率。
【方法实施方式4】
本实施方式所提供的方法包含了方法实施方式3中的全部内容,在此不再赘述。如图4所示,在本实施方式中,通过以下方式实现处理S32:
S321:依据所述操作数据计算所述应用程序的页面概率分布、跳转概率分布和后台运行概率。
S322:利用所述页面概率分布、跳转概率分布和后台运行概率确定所述第一测试数据。
应用程序的页面概率分布包括:该应用程序中各页面的访问概率。
例如,若应用程序W中包括三个页面I1、I2和I3,则应用程序W的页面概率分布包括:P(I1)、P(I2)和P(I3)。
应用程序的后台运行概率指:后台运行该应用程序的概率。
应用程序的跳转概率分布包括:该应用程序中各页面间跳转的概率。
例如,若应用程序V中包括两个页面I1和I2,则应用程序V的跳转概率分布包括:P(I1|I1)、P(I2|I1)、P(I1|I2)和P(I2|I2)。
【方法实施方式5】
本实施方式所提供的方法包含了方法实施方式4中的全部内容,在此不再赘述。在本实施方式中,测试数据集中的各测试数据分别包括:交互区域的交互概率和交互区域的行为概率分布。相应地,如图5所示,通过以下方式实现处理S321:
S3211:根据所述页面概率分布和跳转概率分布,确定所述第一测试数据中交互区域的交互概率。
S3212:根据所述页面概率分布、跳转概率分布和后台运行概率,确定所述第一测试数据中交互区域的行为概率分布。
交互区域的交互概率指:与该交互区域进行交互的概率。
交互区域的行为概率分布包括:在该交互区域中各操作行为的概率。
例如,应用程序M中的操作行为包括:O1(点击)、O2(按键)、O3(下拉)、O4(上滑)、O5(水平滑动)和O6(长按)。
该应用程序M中的交互区域A1的行为概率分布包括:P(O1|A1)、P(O2|A1)、P(O3|A1)、P(O4|A1)、P(O5|A1)和P(O6|A1)。
【方法实施方式6】
图6是根据本发明方法实施方式6的测试应用程序性能的方法的流程图。如图6所示,在本实施方式中,所述方法包括:
S61:获取用户操作应用程序的操作数据。
S62:基于所述操作数据生成测试文件。
S63:通过所述测试文件测试所述应用程序的稳定性。
S64:监测所述应用程序是否跳出运行,若是,则执行S65,若否,则返回执行S64。
S65:启动所述应用程序并返回执行S63。
在稳定性测试中,APP经常会跳出运行而导致测试阶段存在无效测试。对此,本发明增加了监控机制(即监测APP当前是否跳出运行,一旦监测到APP跳出运行则再次启动该APP),以减少测试阶段中的无效测试。
在本实施方式中,处理S64具体可以通过以下方式实现:按照设定的间隔时间(例如1分钟)定时监测所述应用程序是否跳出运行。
当然本领域的技术人员也可以根据实际需要对该间隔时间进行其他合理设置。
【方法实施方式7】
下面以物流APP为例,对本实施方式所提供的测试应用程序性能的方法进行描述。所述方法包括:
处理1:获取用户操作应用程序的操作数据。
例如,可以通过百度移动统计平台获取真实的用户操作数据,并从中提取出稳定性测试所需要的关键要素,具体包括:
(1)访问页面:被用户访问的页面。
(2)访问次数占比:用户访问一个页面的次数/全部页面的总访问次数。
(3)访问路径:用户在访问过程中进行的页面跳转。
例如,页面A—页面B,指用户访问页面A之后跳转到页面B。通过分析从页面A到页面B的跳转按钮的位置以及操作方式,可以进一步分析出用户与应用程序进行交互的区域以及执行的行为。举例说明,用户访问物流APP的订单列表页(物流APP的主页,以将订单卡片排成一列的形式展示所有订单)之后访问订单详情页(订单的具体信息页,包含订单的内容、价格、收货地址和导航、送货地址和导航、订单类型等),由此可以分析出该用户点击了订单列表页的主体交互区域。
(4)用户访问深度:访问路径的长度。
该要素用于分析用户是更有可能通过按返回键返回到上一级页面,还是进入子页面,还是直接按home键(起始键)使应用程序进入后台。
处理2:分析用户的操作数据。
对以上4个要素进行分析以得到以下内容:
(1)物流APP的页面概率分布:包括物流APP中各页面的访问概率。
其中,物流APP中的页面例如包括:订单列表页(I1)、订单详情页(I2)、历史订单页(I3)、骑士导航页(I4)、其他页面(I5)。相应地,物流APP的页面概率分布包括:U(I1)、U(I2)、U(I3)、U(I4)和U(I5)。
(2)跳转概率分布包括:该应用程序中各页面间跳转的概率。
以订单列表页I1为例:
I、有约为26%的概率跳转到订单详情页I2;
II、有约为22%的概率停留在订单列表页I1;
III、有约为3%的概率跳转到历史订单页I3;
IV、有约为38%的概率跳转到骑士导航页I4;
V、有约为11%的概率跳转到其他页面I5。
(3)后台运行概率P后台指:后台运行该应用程序的概率。
一般物流APP用户最常用的操作,不是对手机屏幕进行操作,而是按home键将应用程序退到后台。因此,本实施方式将这种场景加入稳定性测试。
处理3:通过分析出的页面概率分布、跳转概率分布和后台运行概率,确定物流APP的测试数据集。
所述测试数据集中的各测试数据分别包括:物流APP中交互区域的交互概率(测试概率)和行为概率分布。即测试数据与物流APP中的交互区域是一一对应的关系。当然本发明不限于此,本领域的技术人员也可以将测试数据与交互区域的对应关系进行其他合理设定,例如,测试数据与交互区域采用多对一的对应关系。
交互区域的交互概率指:与该交互区域进行交互的概率。
在本实施方式中,将物流APP的界面划分为六个交互区域,分别是:
A1:顶部通知区域;
A2:左上角的返回按钮所在区域;
A3:上中部的列表/地图切换区域;
A4:右上角的通知/备注按钮所在区域;
A5:页面中部的主体交互区域;
A6:底部的操作按钮区域。
交互区域的行为概率分布包括:在该交互区域中各操作行为的概率。
物流APP用户的操作行为包括:O1(点击)、O2(按键)、O3(下拉)、O4(上滑)、O5(水平滑动)和O6(长按)。
由于对顶部通知区域A1进行操作很容易导致物流APP跳出执行,因此,为减少稳定性测试中的无效测试,本实施方式将顶部通知区域A1的交互概率P(A1)设定为0,即P(A1)=0,并且,将顶部通知区域A1中的各操作行为概率也设定为0,即P(O1|A1)=0,P(O2|A1)=0,P(O3|A1)=0,P(O4|A1)=0,P(O5|A1)=0和P(O6|A1)=0。
将APP用户在页面Ii中对交互区域Aj访问的概率P(Aj|Ii)记为D(Aj),则该用户在整个操作过程中对交互区域Aj访问的总概率P(Aj)应该为:在各个页面中对该交互区域Aj访问的概率之和,即通过下述公式计算P(Aj):
并且,根据页面间跳转的概率可以得到在某个页面中用户对某个交互区域进行某个操作的概率,例如,由跳转概率分布可知:在订单列表页I1中,用户有26%的概率进入订单详情页I2,由此可以确定在订单列表页I1中,用户有26%的概率点击主体交互区域A5。在本实施方式中,以Ri<A,O>来表示在页面i中用户对交互区域A进行操作O的概率。并且,建立一个表格来对Ri<A,O>的全集进行记录,具体如下:
Ri<A,O> 区域A 操作O
R1<5,1>=25.42% 5 1
R1<5,3>=15.14% 5 3
R1<2,1>=6.28% 2 1
R1<5,5>=4.89% 5 5
R1<3,2>=2.58% 3 2
表1
在本实施方式中,通过下述公式计算公式(1)中的D(Aj),即P(Aj|Ii):
通过下述公式计算在交互区域Aj中进行操作Om的概率P(Om|Aj):
利用公式(1)、公式(2)和公式(3)计算交互区域A2、A3、A4和A6的交互概率以及行为概率分布。
交互区域A5的交互概率以及行为概率分布,可以根据其他交互区域(A1、A2、A3、A4和A6)的交互概率和行为概率分布加以确定。
例如,交互区域A5的交互概率P(A5)=1-P(A1)-P(A2)-P(A3)-P(A4)-P(A6)。
P(Om|A5)=[P(Om)-P(Om|A1)*P(A1)-P(Om|A2)*P(A2)-P(Om|A3)*P(A3)-P(Om|A4)*P(A4)-P(Om|A6)*P(A6)]/P(A5)。
其中,
处理4:将确定出的测试数据集写成测试文件。
以下给出测试文件的示例:
其中,"top_notification"表示顶部通知区域,"top_left"表示左上角的返回按钮所在区域,"top_right"表示右上角的通知/备注按钮所在区域,"title"表示上中部的列表/地图切换区域,"dialog"表示页面中部的主体交互区域,"bottom_bar"表示底部的操作按钮区域。
"touch"表示点击操作,"keytype"表示按键操作,"pulldown"表示下拉操作,"pullup"表示上滑操作,"pullhorizontal"表示水平滑动操作,"longpress"表示长按操作。
处理5:通过所述测试文件测试所述应用程序的稳定性。
处理6:按照设定时间定时监测所述应用程序是否跳出运行,若是,则执行处理7,若否,则经过所述设定时间返回执行处理6。
处理7:启动所述应用程序并返回执行处理5。
最终,产出稳定性测试的测试报告。
【装置实施方式1】
图7是根据本发明装置实施方式1的测试应用程序性能的装置的结构示意图。参见图7,在本实施方式中,装置10包括:获取模块1、生成模块2和测试模块3,具体地:
获取模块1用于获取用户操作应用程序的操作数据。
生成模块2用于基于获取模块1获取的操作数据生成测试文件。
测试模块3用于通过生成模块2生成的测试文件测试所述应用程序的稳定性。
例如,可以通过百度移动统计平台获取真实的用户操作数据,并从中提取出稳定性测试所需要的关键要素,具体包括:
(1)访问页面:被用户访问的页面。
(2)访问次数占比:用户访问一个页面的次数/全部页面的总访问次数。
(3)访问路径:用户在访问过程中进行的页面跳转。
例如,页面A—页面B,指用户访问页面A之后跳转到页面B。通过分析从页面A到页面B的跳转按钮的位置以及操作方式,可以进一步分析出用户与应用程序进行交互的区域以及执行的行为。举例说明,用户访问物流APP的订单列表页(物流APP的主页,以将订单卡片排成一列的形式展示所有订单)之后访问订单详情页(订单的具体信息页,包含订单的内容、价格、收货地址和导航、送货地址和导航、订单类型等),由此可以分析出该用户点击了订单列表页的主体交互区域。
(4)用户访问深度:访问路径的长度。
该要素用于分析用户是更有可能通过按返回键返回到上一级页面,还是进入子页面,还是直接按home键(起始键)使应用程序进入后台。
由于在本发明中,基于用户操作应用程序的操作数据,生成用以测试应用程序稳定性的测试文件,因此,实现了依据用户的实际使用习惯进行稳定性测试,从而使得稳定性测试的结果更为准确。
【装置实施方式2】
本实施方式所提供的装置包括了装置实施方式1中的全部内容,在此不再赘述。在本实施方式中,如图8所示,生成模块2包括:测试数据集确定单元21和生成单元22,具体地:
测试数据集确定单元21用于通过所述操作数据确定所述应用程序的测试数据集。
生成单元22用于依据测试数据集确定单元21确定的测试数据集生成测试文件。
其中,所述测试数据集的划分包括:以所述应用程序的交互区域为粒度的划分。其中,划分的定义如下:
若集合A的幂集P(A)的一个子集π={A1,A2,...,Ak}满足:
(1)π中没有空集;
(2)A1,A2,……,Ak两两不相交;
(3)所有集合的并集A1∪A2∪...∪Ak=A。
则称π是集合A的一个划分。
以应用程序的交互区域为粒度的划分π1满足:
(3)π1中的每个元素分别对应一个交互区域;
(4)π1的元素数量等于应用程序中交互区域的数量。
由于在不同APP之间交互区域的划分存在很大差异,因此,需要结合APP本身的交互特点来设计稳定性测试以得到更为准确的测试结果。对此,在本发明中,所述测试数据集的一个或多个划分中包括以所述应用程序的交互区域为粒度的划分,因此,可以分交互区域地确定测试数据,从而结合APP自身的交互特点来设计稳定性测试。
【装置实施方式3】
本实施方式所提供的装置包括了装置实施方式2中的全部内容,在此不再赘述。在本实施方式中,如图9所示,测试数据集确定单元21包括:第一测试数据确定子单元211、第二测试数据指定子单元212和第三测试数据确定子单元213,具体地:
第一测试数据确定子单元211用于通过所述操作数据确定所述测试数据集中的第一测试数据。
所述第一测试数据对应所述应用程序的第一交互区域。
第二测试数据指定子单元212用于指定所述测试数据集中的第二测试数据。
所述第二测试数据对应所述应用程序的第二交互区域。
第三测试数据确定子单元213用于基于第一测试数据确定子单元211确定的第一测试数据和第二测试数据指定子单元212指定的第二测试数据,确定所述测试数据集中剩余的第三测试数据。
所述第三测试数据对应所述应用程序的第三交互区域。
在本发明中,可以通过指定应用程序中部分交互区域(例如,能够导致APP跳出运行的交互区域)的测试数据,来控制这部分交互区域在稳定性测试过程中的操作,以进一步提高稳定性测试的准确率。
【装置实施方式4】
本实施方式所提供的装置包括了装置实施方式3中的全部内容,在此不再赘述。在本实施方式中,如图10所示,第一测试数据确定子单元211包括:计算组件2111和确定组件2112,具体地:
计算组件2111用于依据所述操作数据计算所述应用程序的页面概率分布、跳转概率分布和后台运行概率。
确定组件2112用于利用计算组件2111计算出的页面概率分布、跳转概率分布和后台运行概率确定所述第一测试数据。
应用程序的页面概率分布包括:该应用程序中各页面的访问概率。
例如,若应用程序W中包括三个页面I1、I2和I3,则应用程序W的页面概率分布包括:P(I1)、P(I2)和P(I3)。
应用程序的后台运行概率指:后台运行该应用程序的概率。
应用程序的跳转概率分布包括:该应用程序中各页面间跳转的概率。
例如,若应用程序V中包括两个页面I1和I2,则应用程序V的跳转概率分布包括:P(I1|I1)、P(I2|I1)、P(I1|I2)和P(I2|I2)。
【装置实施方式5】
本实施方式所提供的装置包括了装置实施方式4中的全部内容,在此不再赘述。在本实施方式中,测试数据集中的各测试数据分别包括:交互区域的交互概率和交互区域的行为概率分布。相应地,如图11所示,确定组件2112包括:交互概率确定子组件21121和行为概率分布确定子组件21122,具体地:
交互概率确定子组件21121用于根据所述页面概率分布和跳转概率分布,确定所述第一测试数据中交互区域的交互概率。
行为概率分布确定子组件21122用于根据所述页面概率分布、跳转概率分布和后台运行概率,确定所述第一测试数据中交互区域的行为概率分布。
交互区域的交互概率指:与该交互区域进行交互的概率。
交互区域的行为概率分布包括:在该交互区域中各操作行为的概率。
例如,应用程序M中的操作行为包括:O1(点击)、O2(按键)、O3(下拉)、O4(上滑)、O5(水平滑动)和O6(长按)。
该应用程序M中的交互区域A1的行为概率分布包括:P(O1|A1)、P(O2|A1)、P(O3|A1)、P(O4|A1)、P(O5|A1)和P(O6|A1)。
【装置实施方式6】
本实施方式所提供的装置包括了装置实施方式1至装置实施方式5中任一项的全部内容,在此不再赘述。在本实施方式中,装置10还包括:监测模块和启动及调用模块,具体地:
监测模块用于监测所述应用程序是否跳出运行。
启动及调用模块用于在监测模块监测到应用程序跳出运行的情形下,启动所述应用程序并调用测试模块3执行下述处理:通过所述测试文件测试所述应用程序的稳定性。
在稳定性测试中,APP经常会跳出运行而导致测试阶段存在无效测试。对此,本发明增加了监控机制(即监测APP当前是否跳出运行,一旦监测到APP跳出运行则再次启动该APP),以减少测试阶段中的无效测试。
在本实施方式中,监测模块可以按照设定的间隔时间(例如1分钟)定时监测所述应用程序是否跳出运行。
当然本领域的技术人员也可以根据实际需要对该间隔时间进行其他合理设置。
本发明的实施方式还提供了一种终端设备,包括存储器和处理器;其中,
所述存储器用于存储一条或多条计算机指令,其中,所述一条或多条计算机指令被所述处理器执行时能够实现如方法实施方式1至方法实施方7中任意一项所述的方法。
此外,本发明的实施方式还提供一种计算机存储介质,所述计算机存储介质用于存储有一条或多条计算机指令,其中,当所述一条或多条计算机指令被执行时能够实现方法实施方式1至方法实施方式7中任意一项所述的方法。
本领域的技术人员可以清楚地了解到本发明可全部通过软件实现,也可借助软件结合硬件平台的方式来实现。基于这样的理解,本发明的技术方案对背景技术做出贡献的全部或者部分可以以软件产品的形式体现出来,所述计算机软件产品可以存储在存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,智能手机或者网络设备等)执行本发明各个实施方式或者实施方式的某些部分所述的方法。
本文中所使用的“软件”等词均指一般意义上的任意类型的计算机编码或者计算机可执行指令集,可以运行所述编码或者指令集来使计算机或其他处理器程序化以执行如上所述的本发明的技术方案的各个方面。此外,需要说明的是,根据实施方式的一个方面,在执行时实施本发明的技术方案的方法的一个或多个计算机程序不必须要在一台计算机或处理器上,而是可以分布于多个计算机或者处理器中的模块中,以执行本发明的技术方案的各个方面。
计算机可执行指令可以有许多形式,如程序模块,可以由一台或多台计算机或是其他设备执行。一般地,程序模块包括例程、程序、对象、组件以及数据结构等等,执行特定的任务或是实施特定的抽象数据类型。特别地,在各种实施方式中,程序模块进行的操作可以根据各个不同实施方式的需要进行结合或者拆分。
并且,本发明的技术方案可以体现为一种方法,并且已经提供了所述方法的至少一个示例。可以通过任何一种合适的顺序执行动作,所述动作表现为所述方法中的一部分。因此,实施方式可以构造成可以按照与所示出的执行顺序不同的顺序执行动作,其中,可以包括同时地执行一些动作(尽管在示出的实施方式中,这些动作是连续的)。
本文所给出的和使用的定义,应当对照字典、通过引用而并入的文档中的定义、和/或其通常意思进行理解。
在权利要求书中以及上述的说明书中,所有的过度短语,例如“包括”、“具有”、“包含”、“承载”、“具有”、“涉及”、“主要由…组成”以及类似词语是应理解为是开放式的,即,包含但不限于。
本发明说明书中使用的术语和措辞仅仅为了举例说明,并不意味构成限定。本领域技术人员应当理解,在不脱离所公开的实施方式的基本原理的前提下,对上述实施方式中的各细节可进行各种变化。因此,本发明的范围只由权利要求确定,在权利要求中,除非另有说明,所有的术语应按最宽泛合理的意思进行理解。
本发明公开了A1、一种测试应用程序性能的方法,包括:
获取用户操作应用程序的操作数据;
基于所述操作数据生成测试文件;
通过所述测试文件测试所述应用程序的稳定性。
A2、如A1所述的方法中,基于所述操作数据生成测试文件包括:
通过所述操作数据确定所述应用程序的测试数据集,其中,所述测试数据集的划分包括:以所述应用程序的交互区域为粒度的划分;
依据所述测试数据集生成测试文件。
A3、如A2所述的方法中,通过所述操作数据确定所述应用程序的测试数据集包括:
通过所述操作数据确定所述测试数据集中的第一测试数据;
指定所述测试数据集中的第二测试数据;
基于所述第一测试数据和所述第二测试数据,确定所述测试数据集中的第三测试数据;其中,
所述第一测试数据对应所述应用程序的第一交互区域;
所述第二测试数据对应所述应用程序的第二交互区域;
所述第三测试数据对应所述应用程序的第三交互区域。
A4、如A3所述的方法中,通过所述操作数据确定所述测试数据集中的第一测试数据包括:
依据所述操作数据计算所述应用程序的页面概率分布、跳转概率分布和后台运行概率;
利用所述页面概率分布、跳转概率分布和后台运行概率确定所述第一测试数据。
A5、如A4所述的方法中,利用所述页面概率分布、跳转概率分布和后台运行概率确定所述第一测试数据包括:
根据所述页面概率分布和跳转概率分布,确定所述第一测试数据中交互区域的交互概率;
根据所述页面概率分布、跳转概率分布和后台运行概率,确定所述第一测试数据中交互区域的行为概率分布。
A6、如A1至A5中任一项所述的方法中,所述方法还包括:
监测所述应用程序是否跳出运行;
若所述应用程序跳出运行,则启动所述应用程序并返回执行下述处理:通过所述测试文件测试所述应用程序的稳定性。
本发明还公开了B7、一种测试应用程序性能的装置,包括:
获取模块,用于获取用户操作应用程序的操作数据;
生成模块,用于基于所述操作数据生成测试文件;
测试模块,用于通过所述测试文件测试所述应用程序的稳定性。
B8、如B7所述的装置中,所述生成模块包括:
测试数据集确定单元,用于通过所述操作数据确定所述应用程序的测试数据集,其中,所述测试数据集的划分包括:以所述应用程序的交互区域为粒度的划分;
生成单元,用于依据所述测试数据集生成测试文件。
B9、如B8所述的装置中,所述测试数据集确定单元包括:
第一测试数据确定子单元,用于通过所述操作数据确定所述测试数据集中的第一测试数据;
第二测试数据指定子单元,用于指定所述测试数据集中的第二测试数据;
第三测试数据确定子单元,用于基于所述第一测试数据和所述第二测试数据,确定所述测试数据集中的第三测试数据;其中,
所述第一测试数据对应所述应用程序的第一交互区域;
所述第二测试数据对应所述应用程序的第二交互区域;
所述第三测试数据对应所述应用程序的第三交互区域。
B10、如B9所述的装置中,所述第一测试数据确定子单元包括:
计算组件,用于依据所述操作数据计算所述应用程序的页面概率分布、跳转概率分布和后台运行概率;
确定组件,用于利用所述页面概率分布、跳转概率分布和后台运行概率确定所述第一测试数据。
B11、如B10所述的装置中,所述确定组件包括:
交互概率确定子组件,用于根据所述页面概率分布和跳转概率分布,确定所述第一测试数据中交互区域的交互概率;
行为概率分布确定子组件,用于根据所述页面概率分布、跳转概率分布和后台运行概率,确定所述第一测试数据中交互区域的行为概率分布。
B12、如B7至B11中任一项所述的装置中,所述装置还包括:
监测模块,用于监测所述应用程序是否跳出运行;
启动及调用模块,用于在所述应用程序跳出运行的情形下,启动所述应用程序并调用所述测试模块通过所述测试文件测试所述应用程序的稳定性。
本发明还公开了C13、一种终端设备,包括存储器和处理器;其中,
所述存储器用于存储一条或多条计算机指令,其中,所述一条或多条计算机指令被所述处理器执行时能够实现如A1至A6中任意一项所述的方法。
本发明还公开了D14、一种计算机存储介质,用于存储一条或多条计算机指令,其中,当所述一条或多条计算机指令被执行时能够实现如A1至A6中任意一项所述的方法。

Claims (10)

1.一种测试应用程序性能的方法,其特征在于,所述方法包括:
获取用户操作应用程序的操作数据;
基于所述操作数据生成测试文件;
通过所述测试文件测试所述应用程序的稳定性。
2.如权利要求1所述的方法,其特征在于,基于所述操作数据生成测试文件包括:
通过所述操作数据确定所述应用程序的测试数据集,其中,所述测试数据集的划分包括:以所述应用程序的交互区域为粒度的划分;
依据所述测试数据集生成测试文件。
3.如权利要求2所述的方法,其特征在于,通过所述操作数据确定所述应用程序的测试数据集包括:
通过所述操作数据确定所述测试数据集中的第一测试数据;
指定所述测试数据集中的第二测试数据;
基于所述第一测试数据和所述第二测试数据,确定所述测试数据集中的第三测试数据;其中,
所述第一测试数据对应所述应用程序的第一交互区域;
所述第二测试数据对应所述应用程序的第二交互区域;
所述第三测试数据对应所述应用程序的第三交互区域。
4.如权利要求3所述的方法,其特征在于,通过所述操作数据确定所述测试数据集中的第一测试数据包括:
依据所述操作数据计算所述应用程序的页面概率分布、跳转概率分布和后台运行概率;
利用所述页面概率分布、跳转概率分布和后台运行概率确定所述第一测试数据。
5.如权利要求1至4中任一项所述的方法,其特征在于,所述方法还包括:
监测所述应用程序是否跳出运行;
若所述应用程序跳出运行,则启动所述应用程序并返回执行下述处理:通过所述测试文件测试所述应用程序的稳定性。
6.一种测试应用程序性能的装置,其特征在于,所述装置包括:
获取模块,用于获取用户操作应用程序的操作数据;
生成模块,用于基于所述操作数据生成测试文件;
测试模块,用于通过所述测试文件测试所述应用程序的稳定性。
7.如权利要求6所述的装置,其特征在于,所述生成模块包括:
测试数据集确定单元,用于通过所述操作数据确定所述应用程序的测试数据集,其中,所述测试数据集的划分包括:以所述应用程序的交互区域为粒度的划分;
生成单元,用于依据所述测试数据集生成测试文件。
8.如权利要求7所述的装置,其特征在于,所述测试数据集确定单元包括:
第一测试数据确定子单元,用于通过所述操作数据确定所述测试数据集中的第一测试数据;
第二测试数据指定子单元,用于指定所述测试数据集中的第二测试数据;
第三测试数据确定子单元,用于基于所述第一测试数据和所述第二测试数据,确定所述测试数据集中的第三测试数据;其中,
所述第一测试数据对应所述应用程序的第一交互区域;
所述第二测试数据对应所述应用程序的第二交互区域;
所述第三测试数据对应所述应用程序的第三交互区域。
9.如权利要求8所述的装置,其特征在于,所述第一测试数据确定子单元包括:
计算组件,用于依据所述操作数据计算所述应用程序的页面概率分布、跳转概率分布和后台运行概率;
确定组件,用于利用所述页面概率分布、跳转概率分布和后台运行概率确定所述第一测试数据。
10.如权利要求6至9中任一项所述的装置,其特征在于,所述装置还包括:
监测模块,用于监测所述应用程序是否跳出运行;
启动及调用模块,用于在所述应用程序跳出运行的情形下,启动所述应用程序并调用所述测试模块通过所述测试文件测试所述应用程序的稳定性。
CN201710261210.XA 2017-04-20 2017-04-20 测试应用程序性能的方法及装置 Expired - Fee Related CN107273284B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710261210.XA CN107273284B (zh) 2017-04-20 2017-04-20 测试应用程序性能的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710261210.XA CN107273284B (zh) 2017-04-20 2017-04-20 测试应用程序性能的方法及装置

Publications (2)

Publication Number Publication Date
CN107273284A true CN107273284A (zh) 2017-10-20
CN107273284B CN107273284B (zh) 2020-12-25

Family

ID=60073585

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710261210.XA Expired - Fee Related CN107273284B (zh) 2017-04-20 2017-04-20 测试应用程序性能的方法及装置

Country Status (1)

Country Link
CN (1) CN107273284B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107957944A (zh) * 2017-11-24 2018-04-24 浙江大学 面向用户数据覆盖率的测试用例自动生成方法
CN108415831A (zh) * 2018-02-05 2018-08-17 五八有限公司 测试用例生成方法及装置、电子设备和可读存储介质
CN110321277A (zh) * 2018-03-30 2019-10-11 武汉斗鱼网络科技有限公司 程序测试方法、装置、可读存储介质及设备

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103309802A (zh) * 2012-03-16 2013-09-18 百度在线网络技术(北京)有限公司 一种移动终端中系统稳定性测试的方法及装置
US20130305096A1 (en) * 2012-05-11 2013-11-14 Samsung Sds Co., Ltd. System and method for monitoring web service
CN103713989A (zh) * 2012-09-29 2014-04-09 百度在线网络技术(北京)有限公司 一种针对用户终端的测试用例生成方法和装置
CN103729446A (zh) * 2013-12-30 2014-04-16 广州金山网络科技有限公司 一种用户操作数据的处理方法、处理装置及服务器
CN104765680A (zh) * 2015-03-13 2015-07-08 安一恒通(北京)科技有限公司 一种用于软件自动测试的方法及装置
CN104809054A (zh) * 2014-01-23 2015-07-29 腾讯科技(深圳)有限公司 实现程序测试的方法和系统
CN105320600A (zh) * 2015-11-26 2016-02-10 上海斐讯数据通信技术有限公司 一种基于自动化测试平台的测试用例执行监测方法及系统
US20160350210A1 (en) * 2013-09-30 2016-12-01 International Business Machines Corporation Detecting error states when interacting with web applications
CN106469113A (zh) * 2015-08-18 2017-03-01 腾讯科技(深圳)有限公司 应用程序测试方法及系统
CN106484610A (zh) * 2015-09-02 2017-03-08 阿里巴巴集团控股有限公司 一种Beta测试方法和装置

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103309802A (zh) * 2012-03-16 2013-09-18 百度在线网络技术(北京)有限公司 一种移动终端中系统稳定性测试的方法及装置
US20130305096A1 (en) * 2012-05-11 2013-11-14 Samsung Sds Co., Ltd. System and method for monitoring web service
CN103713989A (zh) * 2012-09-29 2014-04-09 百度在线网络技术(北京)有限公司 一种针对用户终端的测试用例生成方法和装置
US20160350210A1 (en) * 2013-09-30 2016-12-01 International Business Machines Corporation Detecting error states when interacting with web applications
CN103729446A (zh) * 2013-12-30 2014-04-16 广州金山网络科技有限公司 一种用户操作数据的处理方法、处理装置及服务器
CN104809054A (zh) * 2014-01-23 2015-07-29 腾讯科技(深圳)有限公司 实现程序测试的方法和系统
CN104765680A (zh) * 2015-03-13 2015-07-08 安一恒通(北京)科技有限公司 一种用于软件自动测试的方法及装置
CN106469113A (zh) * 2015-08-18 2017-03-01 腾讯科技(深圳)有限公司 应用程序测试方法及系统
CN106484610A (zh) * 2015-09-02 2017-03-08 阿里巴巴集团控股有限公司 一种Beta测试方法和装置
CN105320600A (zh) * 2015-11-26 2016-02-10 上海斐讯数据通信技术有限公司 一种基于自动化测试平台的测试用例执行监测方法及系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
AMIR GHAHRAI: "Web Application Testing Tips", 《HTTPS://DEVQA.IO/WEB-APPLICATION-TESTING/》 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107957944A (zh) * 2017-11-24 2018-04-24 浙江大学 面向用户数据覆盖率的测试用例自动生成方法
CN107957944B (zh) * 2017-11-24 2020-08-25 浙江大学 面向用户数据覆盖率的测试用例自动生成方法
CN108415831A (zh) * 2018-02-05 2018-08-17 五八有限公司 测试用例生成方法及装置、电子设备和可读存储介质
CN110321277A (zh) * 2018-03-30 2019-10-11 武汉斗鱼网络科技有限公司 程序测试方法、装置、可读存储介质及设备

Also Published As

Publication number Publication date
CN107273284B (zh) 2020-12-25

Similar Documents

Publication Publication Date Title
Mclean et al. Developing a mobile applications customer experience model (MACE)-implications for retailers
Chen Improving website structure through reducing information overload
US7941751B2 (en) Generation and implementation of dynamic surveys
Zhang et al. Information retrieval evaluation as search simulation: A general formal framework for ir evaluation
US20100037166A1 (en) User feedback correlated to specific user interface or application features
Flood et al. Evaluating mobile applications: A spreadsheet case study
Phelps et al. Managing the risks of intranet implementation: an empirical study of user satisfaction
US20080189639A1 (en) Dynamically detecting exceptions based on data changes
CN110442515B (zh) 应用测试方法、装置、设备及可读存储介质
CN107273284A (zh) 测试应用程序性能的方法及装置
US11205418B2 (en) Monotone speech detection
US20130212460A1 (en) Tracking visibility of rendered objects in a display area
CN107220230A (zh) 一种信息采集方法和装置,以及一种智能终端
Myka et al. Comparative analysis of usability of data entry design patterns for mobile applications
CN111368195B (zh) 一种模型训练方法、装置、设备及存储介质
Zali et al. An initial theoretical usability evaluation model for assessing defence mobile e-based application system
McLean et al. The Customer Experience… Is there an App for that? A conceptual understanding of the customer experience with m-commerce mobile applications
US20210042441A1 (en) Protecting user privacy in user interface data collection
Sastry et al. A framework for assessing quality of a web site
Pansanato et al. An evaluation with web developers of capturing user interaction with rich internet applications for usability evaluation
Flood et al. Spreadsheets on the move: An evaluation of mobile spreadsheets
Pinciroli An HCI quality attributes taxonomy for an impact analysis to interactive systems design and improvement
Türkcan et al. Entry and selection methods for specifying dates in mobile context
Pradanita et al. Assessment of Academic Information System Quality from Two Perspectives: Product Quality and Quality in Use
Holcomb et al. Users, a software usability model and product evaluation

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: Building N3, building 12, No. 27, Jiancai Chengzhong Road, Haidian District, Beijing 100096

Applicant after: Beijing Xingxuan Technology Co.,Ltd.

Address before: 100085 Beijing, Haidian District on the road to the information on the ground floor of the 1 to the 3 floor of the 2 floor, room 11, 202

Applicant before: Beijing Xiaodu Information Technology Co.,Ltd.

GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20201225