CN112817870A - 软件测试方法、装置及介质 - Google Patents
软件测试方法、装置及介质 Download PDFInfo
- Publication number
- CN112817870A CN112817870A CN202110218579.9A CN202110218579A CN112817870A CN 112817870 A CN112817870 A CN 112817870A CN 202110218579 A CN202110218579 A CN 202110218579A CN 112817870 A CN112817870 A CN 112817870A
- Authority
- CN
- China
- Prior art keywords
- test
- software
- user
- feedback information
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 79
- 238000013522 software testing Methods 0.000 title claims abstract description 35
- 238000012360 testing method Methods 0.000 claims abstract description 448
- 230000006870 function Effects 0.000 claims description 30
- 238000010998 test method Methods 0.000 claims 1
- 230000000694 effects Effects 0.000 abstract description 17
- 230000008569 process Effects 0.000 description 33
- 238000012545 processing Methods 0.000 description 29
- 238000012216 screening Methods 0.000 description 20
- 238000004891 communication Methods 0.000 description 10
- 230000006872 improvement Effects 0.000 description 10
- 238000004364 calculation method Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 6
- 238000011156 evaluation Methods 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 4
- 238000013441 quality evaluation Methods 0.000 description 4
- 230000005236 sound signal Effects 0.000 description 4
- 230000006399 behavior Effects 0.000 description 3
- 238000007726 management method Methods 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 238000012797 qualification Methods 0.000 description 2
- 238000012795 verification Methods 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000012550 audit Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 238000001303 quality assessment method Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/60—Software deployment
- G06F8/65—Updates
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Computer Security & Cryptography (AREA)
- Stored Programmes (AREA)
Abstract
本公开是关于一种软件测试方法、装置及介质。该方法包括：获取待选测试用户的软件使用信息；基于所述软件使用信息，确定测试用户集合；将所述软件的测试程序包发送至所述测试用户集合中的测试用户；获取所述测试用户关于所述测试程序包的使用的反馈信息；基于所述反馈信息，升级所述软件的功能。采用该方法可以对测试用户的质量进行有效筛选，从而提高测试用户质量，提升软件测试效果。
Description
技术领域
本公开涉及软件测试技术，尤其涉及软件测试方法、装置及介质。
背景技术
随着各种软件新功能的不断开发，系统和软件进行提前测试越来越重要。当新功能开发完成后，业务方会招募一部分用户提前测试，用于发现并解决各种问题。
目前招募测试用户的方法，无法得知用户对内测功能的了解程度，软件测试时选取的用户可能对该软件并不是非常了解，或者软件使用经验较少，不能为软件的改进和升级提供较好的反馈意见，从而在一定程度上影响了软件功能的升级；并且，大部分是熟人内测，难于拓宽内测用户群，因此其他更高质量的用户较难发掘。另外，用户对问题的反馈及解决流程不规范。
发明内容
为克服相关技术中存在的问题，本公开提供一种软件测试方法、装置及系统。
根据本公开实施例的第一方面，提供一种软件测试方法，包括：
获取待选测试用户的软件使用信息；
基于所述软件使用信息，确定测试用户集合；
将软件的测试程序包发送至所述测试用户集合中的测试用户；
获取所述测试用户关于所述测试程序包的使用的反馈信息；
基于所述反馈信息，升级所述软件的功能。
其中，所述基于所述软件使用信息确定测试用户集合，包括：
基于所述软件使用信息，确定所述待选测试用户的贡献度得分；
基于所述贡献度得分，确定测试用户，组成所述测试用户集合。
其中，所述方法还包括：
基于所述反馈信息，更新所述测试用户的贡献度得分；
基于所述测试用户更新后的贡献度得分，重新确定测试用户，更新所述测试用户集合。
其中，所述获取所述测试用户关于所述测试程序包的使用的反馈信息，包括：
创建反馈信息发布群，所述反馈信息发布群包括所述测试用户集合中的所述测试用户，其中所述测试用户在所述反馈信息发布群中发布反馈信息；
通过所述反馈信息发布群获取所述反馈信息。
其中，所述基于所述反馈信息升级所述软件的功能包括：
将关于所述软件的功能的升级信息通过所述反馈信息发布群发送至所述测试用户。
其中，所述软件使用信息包括下述中至少一种：所述待选测试用户使用终端的操作系统的信息、所述待选测试用户关于测试题目的答题信息、所述待选测试用户更新软件的历史频率、所述待选测试用户使用软件的历史反馈信息、所述待选测试用户的历史测试信息。
根据本公开实施例的第二方面，提供一种软件测试装置，包括：
第一获取模块，被配置为获取待选测试用户的软件使用信息；
确定模块，被配置为基于所述软件使用信息确定测试用户集合；
发送模块，被配置为将软件的测试程序包发送至所述测试用户集合中的测试用户；
第二获取模块，被配置为获取所述测试用户关于所述测试程序包的使用的反馈信息；
升级模块，被配置为基于所述反馈信息升级所述软件的功能。
其中，所述确定模块还被配置为：
基于所述软件使用信息，确定所述待选测试用户的贡献度得分；
基于所述贡献度得分，确定测试用户，组成所述测试用户集合。
其中，所述确定模块还被配置为：
基于所述反馈信息，更新所述测试用户的贡献度得分；
基于所述测试用户更新后的贡献度得分，重新确定测试用户，更新所述测试用户集合。
其中，所述第二获取模块还被配置为：
创建反馈信息发布群，所述反馈信息发布群包括所述测试用户集合中的所述测试用户，其中所述测试用户在所述反馈信息发布群中发布反馈信息；
通过所述反馈信息发布群获取所述反馈信息。
其中，所述升级模块还被配置为：
将关于所述软件的功能的升级信息通过所述反馈信息发布群发送至所述测试用户。
其中，所述软件使用信息包括下述中至少一种：
所述待选测试用户使用终端的操作系统的信息、所述待选测试用户关于测试题目的答题信息、所述待选测试用户更新软件的历史频率、所述待选测试用户使用软件的历史反馈信息、所述待选测试用户的历史测试信息。
根据本公开实施例的第三方面，提供一种软件测试装置，包括：
处理器；
用于存储所述处理器可执行指令的存储器；
其中，所述处理器被配置为：
获取待选测试用户的软件使用信息；
基于所述软件使用信息，确定测试用户集合；
将软件的测试程序包发送至所述测试用户集合中的测试用户；
获取所述测试用户关于所述测试程序包的使用的反馈信息；
基于所述反馈信息，升级所述软件的功能。
根据本公开的第四方面，提供一种非临时性计算机可读存储介质，当所述存储介质中的指令由移动终端的处理器执行时，使得移动终端能够执行一种软件测试方法，所述方法包括：
获取待选测试用户的软件使用信息；
基于所述软件使用信息，确定测试用户集合；
将软件的测试程序包发送至所述测试用户集合中的测试用户；
获取所述测试用户关于所述测试程序包的使用的反馈信息；
基于所述反馈信息，升级所述软件的功能。
采用本公开的方法，在测试之前对报名参与测试的用户进行筛选，能够预估测试用户可能在测试中所作出的贡献，以提高测试用户的质量；并且在测试过程中，通过测试用户的反馈信息对参与测试中的用户进行再次审核、筛选，进一步提升测试用户的质量，确保软件的测试效果；同时，开发者基于测试用户的反馈信息对软件进行完善、升级，并把处理进度展示给测试用户，便于测试用户监测所反馈信息的处理进度，使得测试用户与开发者之间形成信息流通的闭环，以提高开发者对反馈信息的处理效率，同时提升测试用户的体验，保证软件的测试效果。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本发明的实施例，并与说明书一起用于解释本发明的原理。
图1是根据一示例性实施例示出的一种软件测试方法的流程图。
图2是根据一示例性实施例示出的一种软件测试方法的流程图。
图3是根据一示例性实施例示出的一种软件测试装置的框图。
图4是根据一示例性实施例示出的一种装置的框图。
图5是根据一示例性实施例示出的一种装置的框图。
具体实施方式
这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。
关于软件开发或更新后在发布之前的测试，多是用户在相关平台看到测试信息，然后加入相关测试群，在人工通过后参与测试；或者，通过邀请码或APP测试入口报名，报名成功后下载更新，通过APP测试问题反馈入口反馈问题。软件开发者无法得知用户对测试功能的了解程度，问题的反馈及解决流程不规范。另外，无论上述哪种测试方案，在测试过程中，问题的反馈处理对用户来说不是一个闭环，即用户无法及时获知问题处理结果。
因此，如何筛选测试用户、如何让用户高效的反馈问题、如何让业务高效的处理问题并反馈给用户就显得格外重要。
本公开提供了一种完整的测试报名、审核、问题反馈和处理的方法，支持参与测试的用户的筛选和考核、问题的反馈和处理。在该方法中，在用户报名参与测试时通过测试题目可以衡量用户对内测项目的了解程度，并以此作为审核用户的标准之一来确定测试用户集合；在测试过程中，基于测试用户的反馈信息更新该测试用户的贡献度得分，进而更新测试用户集合，以保证测试用户的质量；并且对于测试用户的反馈信息，将基于该反馈信息对软件的功能进行改进，并将改进信息发送至测试用户，便于测试用户监测问题处理进度。
图1是根据以示例性实施例示出的一种软件测试方法的流程图，如图1所示，该软件测试方法包括以下步骤：
步骤101，获取待选测试用户的软件使用信息；
步骤102，基于所述软件使用信息，确定测试用户集合；
步骤103，将软件的测试程序包发送至所述测试用户集合中的测试用户；
步骤104，获取所述测试用户关于所述测试程序包的使用的反馈信息；
步骤105，基于所述反馈信息，升级所述软件的功能。
用户欲参加某软件的测试，需要提交测试报名。步骤101中，通过用户提交的报名申请获取申请测试报名的待选测试用户的测试报名信息，可以对不同的待选测试用户进行标记，同时获取各待选测试用户的软件使用信息，以便步骤102进行测试用户的初步筛选。此软件使用信息包括待选测试用户关于使用该软件及其它相关软件或系统的一些历史信息和当前信息。
步骤102中，基于步骤101中获取的待选测试用户的使用信息，根据开发者开发或测试软件的需求，可以，确定待选测试用户的质量，进而判断是否通过该待选测试用户的报名审核，将通过审核后的测试用户组成测试用户集合。其中，开发者开发或测试软件的需求可以包括某个或某些或某类类型的系统或APP的使用行为数据(例如，使用频率、更新频率、使用反馈信息等使用情况数据)等。此筛选审核可以设置为固定条件或范围的自动筛选，也可以设置为人工手动筛选。
步骤103、104和105中，将待测试的所述软件的测试程序包发送至测试用户集合中的各测试用户后，实时获取各测试用户关于测试程序包的使用的反馈信息，包括对测试程序包使用过程中的出现的故障或漏洞及发现的缺陷问题反馈等，还可以包括对测试程序包的改进建议等；再基于这些反馈信息对当前测试的软件的功能进行改进，完善软件功能和使用体验，以达到对软件进行测试的目的。
采用本公开的软件测试方法，通过对报名信息及待选测试用户对所述软件的使用信息进行筛选、审核，提高测试用户的质量，提高测试用户的反馈信息质量，从而保证软件测试效果，提高通过测试对软件所做的改进和完善效果。
在可选实施方式中，所述基于所述软件使用信息确定测试用户集合，包括：
基于所述软件使用信息，确定所述待选测试用户的贡献度得分；
基于所述贡献度得分，确定测试用户，组成所述测试用户集合。
此处的贡献度得分可以通过设定算法处理上述软件使用信息而确定，例如，此设定算法可以是加权求和，即，基于所述软件使用信息中的各信息的评价得分进行加权求和，得出该待选测试用户的贡献度得分。基于各待选测试用户的贡献度得分对待选测试用户进行初步筛选，例如，可以是对各待选测试用户的贡献度得分进行由高到低的排名，然后按照名次排列选取前若干名作为测试用户；也可以是初步确定一贡献度合格分，贡献度得分大于或等于此贡献度合格分的待选测试用户通过初步筛选而成为测试用户。再由如此初步筛选出的各测试用户组成测试用户集合，便于与各测试用户进行信息传递以及对各测试用户在测试过程中的表现进行二次审核、筛选。
需要说明的是，此贡献度得分是提供前述软件使用信息的待选测试用户可能对此次软件测试的贡献度得分，即基于该待选测试用户的软件历史使用信息(例如，更新频率、软件使用反馈数量和质量等)所计算出的预期值，而非在测试过程中给出问题反馈和使用或改进建议的实际贡献情况。但是，在软件的测试过程中，可以基于通过审核(即实际参与到测试中)的测试用户在软件测试过程反馈的问题的数量和质量以及给出的建议的数量和质量等，对其贡献度得分进行再次计算、更新，并基于此更新对测试用户进行再次评价、筛选。
在可选实施例中，所述方法还包括：
基于所述反馈信息，更新所述测试用户的贡献度得分；
基于所述测试用户更新后的贡献度得分，重新确定测试用户，更新所述测试用户集合。
在各测试用户对测试程序包进行体验、测试过程中，针对发现的问题、漏洞或改进建议等进行反馈，在步骤104中对测试用户的反馈信息进行收集。对于收集后的反馈信息，一方面在步骤105中对测试的软件进行相应的改进；另一方面，则可以基于各测试用户反馈信息的次数和质量再次对测试用户进行评估、筛选，以保证测试用户的质量，进而保证此次测试的效果。
将各测试用户的反馈信息针对该测试用户进行贡献度得分的再次计算，包括对各测试用户在测试过程中所提出的问题和漏洞等进行评估、对各测试用户针对测试程序包的改进建议进行评估等，再基于前述各评估结果综合计算各测试用户当前对测试的贡献度得分，然后对相应测试用户的贡献度得分记录进行更新。另外，前述各测试用户的反馈信息还可以包括测试用户针对软件测试程序包在测试过程中的体验评价的质量，例如，对某些功能或模块的认可或恶意吐槽等。
基于上述在测试过程中更新后的贡献度得分，对测试用户集合中的测试用户进行再次审核、筛选，使不合格的或贡献度得分较低的测试用户退出此次测试；还可以根据开发者对软件的测试需求，再次通过步骤101～102来筛选符合要求的测试用户进行补入，对测试用户集合进行更新，保证参与测试的测试用户的高质量，以确保测试效果。
示例性地，在筛选过程中，可以是将测试用户集合中的各测试用户更新后的贡献度得分进行高低排名，使排名在倒数若干名的测试用户退出测试；也可以是确定一贡献度合格分，例如，将测试用户集合中的各测试用户更新后的贡献度得分进行高低排名后，选取前若干名测试用户的更新后的贡献度得分，求取平均值，以此平均值作为贡献度合格分，更新后的贡献度低于此平均值的测试用户退出此次测试。
在测试过程中，各测试用户的贡献度得分的更新计算可以为周期性计算，例如，每天对各测试用户关于测试程序包的使用的反馈信息进行记录，以每一周或每两周或每一个月为一个筛选周期，对各测试用户的贡献度得分进行一次计算，基于计算结果对测试用户集合中的各测试用户进行再次审核、筛选。
在可选实施方式中，在步骤104中，所述获取所述测试用户关于所述测试程序包的使用的反馈信息，包括：
创建反馈信息发布群，所述反馈信息发布群包括所述测试用户集合中的所述测试用户，其中所述测试用户在所述反馈信息发布群中发布反馈信息；
通过所述反馈信息发布群获取所述反馈信息。
此反馈信息发布群，包括测试用户集合中的各测试用户，还可以包括开发者。各测试用户在测试过程中，在此反馈信息发布群中将其要反馈的问题、建议等进行反馈；开发者通过反馈信息发布群获知各测试用户的问题、建议等反馈信息，并针对相应的反馈信息进行处理，包括对各建议的回复、针对不同的问题或建议对软件进行相应的改进等。需要说明的是，该反馈信息发布群可以是通过第三方应用组成的反馈信息发布群，例如微信群、QQ群等，也可以是基于该待测软件的平台组成的反馈信息发布群。测试用户和开发者通过第三方应用的功能或该待测软件的平台功能，可以在该反馈信息发布群中以聊天的方式反馈问题、建议等，也可以在该反馈信息发布群中以发送文件的方式发布测试程序包、升级信息等。
在可选实施方式中，基于所述反馈信息升级所述软件的功能包括：
将关于所述软件的功能的升级信息通过所述反馈信息发布群发送至所述测试用户。
开发者可以将针对测试用户的反馈信息进行的改进处理过程，通过反馈信息发布群反馈至测试用户集合中的测试用户，以便于各测试用户对反馈信息的处理进度进行监测。需要说明的是，在反馈升级信息时，可以设置为反馈信息发布群中所有测试用户可见，也可以设置为仅发送该反馈信息的测试用户可见。通过此反馈信息发布群，能够令测试用户在测试过程中的反馈信息及该反馈信息的处理反馈形成一个闭环流程，提高测试用户的体验、保证软件测试效果。
在可选实施方式中，所述软件使用信息包括下述中至少一种：所述待选测试用户使用终端的操作系统的信息、所述待选测试用户关于测试题目的答题信息、所述待选测试用户更新软件的历史频率、所述待选测试用户使用软件的历史反馈信息、所述待选测试用户的历史测试信息。
其中，待选测试用户使用终端的操作系统的信息，包括：待选测试用户使用终端的操作系统的型号、版本、所属地域等，这类信息也可以用于标记待选测试用户，还可以作为向待选测试用户发送不同测试题目的分类基准，例如，基于不同的操作系统型号或版本而向相应的待选测试用户发送不同的测试题目。示例性地，在报名时向待选测试用户推送的测试题目，待选测试用户可以选择性进行回答，例如，可以选择其中一部分作答，或者全部作答，也可以选择不答。
所述待选测试用户关于测试题目的答题信息，包括：待选测试用户在报名时所选择的测试题目、针对所选测试题目给出的答案等信息，其中，若所选测试题目为有标准答案的题目，则包括针对所选测试题目的答案正确率或具体答题分数；若所选测试题目为无标准答案的开放性题目，则包括该待选测试用户给出的答案与题目的相关度等。另外，该答题信息还可以包括：待选侧是用户的意向测试项目、意向测试类型、意向测试领域等意向答题信息。
所述待选测试用户更新软件的历史频率，包括该待选测试用户针对待测试的软件的历史更新频率，还可以包括该待选测试用户针对其终端操作系统以及其终端操作系统中的其它与此测试软件相关的软件的历史更新频率。前述的各历史更新频率信息均可以通过该待选测试用户的终端操作系统中的记录信息获得，也可以通过其它现有的获取方式和途径获得。
所述待选测试用户使用软件的历史反馈信息，包括：该待选测试用户针对待测试的软件此前的各版本在使用过程中的反馈信息、该待选测试用户针对其终端操作系统及其终端操作系统中的其它软件的使用过程中的反馈信息，例如，可以包括所反馈过的故障、漏洞、改进建议、针对其他用户的相关问题做出过的答复等。此处使用软件的历史反馈信息包括反馈信息的数量和质量，其中，反馈信息的质量可以通过测试关键词自动获取，也可以通过人工核查的方式获取。
所述待选测试用户的历史测试信息，包括：该待选测试用户所参与过的软件测试或系统测试记录、在所参与过的软件测试或系统测试中反馈信息的记录及所反馈信息的质量评估等。
需要说明的是，上述列举的各项信息仅是示例性的，而非穷尽性的，即还可以包括开发者认为应该考量的其它信息，例如，待选测试用户使用该待测试的软件或其相关软件的常用操作行为数据，再例如，根据待选测试用户提供的前述测试报名信息及针对前述软件使用信息，而通过其它途径(例如终端操作系统或网络信息记录等)获取的该待选测试用户的相关使用或反馈信息以及用一定的算法处理后得出的用户评价信息等。另外，开发者认为应该考量的信息还可以包括用户的终端型号、终端系统型号和/或版本、地域、用户性别等信息。
在本公开中，对待选测试用户进行筛选时所确定的贡献度得分，可以从多个维度进行衡量、计算，例如，待选测试用户的终端系统及软件的更新频率和使用行为数据、待选测试用户在终端系统中发布的内容质量、待选测试用户的历史测试信息等。另外，该贡献度得分还可以结合待选测试用户的报名信息中涵盖的意向测试项目或意向测试类型进行计算。
在一个可选的实施方式中，在对待选测试用户进行筛选时所确定的待选测试用户的贡献度得分，包括：基于前述软件使用信息，确定待选测试用户在终端操作系统中的活跃度得分和该待选测试用户的友好度得分；再基于该活跃度得分和友好度得分，通过设定算法确定该待选测试用户的贡献度得分，该设定算法例如是加权求和或者基于加权求和的进一步计算(如，加权平均值)。示例性地，贡献度得分的计算参数中包括上述活跃度得分、友好度得分，还可以包括报名时的测试题目得分等。
其中，待选测试用户在终端操作系统中的活跃度得分，可以基于上述待选测试用户更新软件的历史频率、待选测试用户使用软件的历史反馈信息、待选测试用户的历史测试信息等确定，例如，基于待选测试用户针对待测试的软件和/或其它相关软件的使用频率和历史更新频率、针对待测试的软件和/或相关软件的各历史版本在使用过程中的反馈信息数量和反馈频率、待选测试用户所参与过的软件测试或系统测试次数及在各次测试中给出问题反馈和/或建议的数量等，将前述各信息分别获取并评价后，再进行设定计算或拟合，确定该待选测试用户的活跃度得分。
待选测试用户的友好度得分可以基于下述信息中的一个或多个确定：待选测试用户在终端操作系统中发布的内容质量(可以包括主动发布的内容、回复其他用户问题的内容等)、在使用待测试的软件及相关软件的各历史版本的过程中所反馈过的问题和建议的质量、在所参与过的软件测试或系统测试中反馈信息的质量等。
本公开的软件测试方法，不仅可以在报名初筛时对待选测试用户进行筛选，还可以在测试过程中对参与其中的测试用户进行筛选，充分保证参与的测试用户质量，提高测试效果，确保测试软件的完善程度；同时，在测试过程中，测试用户还可以实时对反馈信息的处理进度进行监测，提高测试和软件的完善效率。
下面描述根据本公开的软件测试方法的一个具体实施例，图2是该具体实施例的软件测试方法的流程图。在本实施例中，待测软件为应用在终端的一款APP，例如，终端可以为手机或平板电脑。如图2所示，该软件测试方法包括如下步骤：
步骤201，获取待选测试用户的测试报名信息及软件使用信息；
其中，测试报名信息包括待选测试用户的用户基本信息、终端系统型号和/或版本信息等基础信息，还包括待选测试用户的意向测试项目、意向测试类型或领域信息等意向信息T1；软件使用信息包括待选测试用户关于测试题目的答题信息I1、待选测试用户针对待测试的软件及其相关软件或操作系统的历史更新频率P0(例如可以是单一更新频率值、也可以是多个更新频率值的综合评价值)以及在使用过程中的历史反馈信息I2、待选测试用户此前参与过的历史测试信息I3(可以为该待选测试用户参与过的测试项目与此次测试的软件的相关度、参与过的测试次数、在参与过的测试中给出反馈信息的次数等信息中的一种或多种的综合评价)、待选测试用户针对待测试的软件及其相关软件或操作系统在使用过程中给出过的反馈信息质量评估Q1、待选测试用户此前参与过的测试过程中给出的反馈信息质量评估Q2；
在获取待选测试用户的测试报名信息过程中，基于其测试报名信息向该待选测试用户发送对应的测试题目，并获取待选测试用户对收到的测试题目的答题信息I1；
步骤202，基于测试报名信息中的基础信息对待选测试用户进行标记，基于软件使用信息确定待选测试用户的贡献度得分D0，对贡献度得分达标的待选测试用户通过审核成为测试用户，组成测试用户集合；其中，待选测试用户的贡献度得分的计算过程包括：
基于上述待选测试用户关于测试题目的答题信息I1、历史更新频率P0、历史反馈信息I2、待选测试用户此前参与过的历史测试信息I3，确定待选测试用户的活跃度得分A，例如：A＝λ1I1+λ2P0+λ3I2+λ4I3，其中，λ1+λ2+λ3+λ4＝1；
基于上述待选测试用户的历史使用反馈信息质量评估Q1、历史测试反馈信息质量评估Q2，确定待选测试用户的友好度得分F，例如：F＝ε1Q1+ε2Q2，其中，ε1+ε2＝1；
再基于上述活跃度得分A和友好度得分F，确定待选测试用户的贡献度得分D0，例如：D0＝ω1A+ω2B，其中，ω1+ω2＝1；
然后基于此贡献度得分D0从待选测试用户中筛选出初步合格的测试用户，组成测试用户集合；
步骤203，将待测试软件的测试程序包发送至前述测试用户集合中的测试用户；
步骤204，创建反馈信息发布群，此反馈信息发布群中包括前述测试用户集合，还包括开发者，通过所述反馈信息发布群获取各测试用户针对前述测试程序包的使用的反馈信息，可以包括问题反馈、故障反馈、漏洞反馈，还可以包括建议反馈；
获取上述反馈信息后，可以基于上述反馈信息来计算各测试用户在测试过程中的贡献度得分D1，基于此贡献度得分D1对在报名筛选过程中计算的贡献度得分D0进行更新，并基于此贡献度得分D1对参与测试中的测试用户进行再次评价、筛选，然后更新测试用户集合，即令贡献度得分D1较低的测试用户退出测试，还可以再补入新的测试用户；其筛选标准可以是将测试用户集合中的各测试用户更新后的贡献度得分D1由高至低排序，令后若干名的测试用户退出，也可以是确定一标准值或取其中若干测试用户的贡献度得分D1的平均值，令贡献度得分D1低于该标准值或平均值的测试用户退出测试；如此以保证参与测试的用户质量，确保测试效果；然后可以再通过步骤201和202向测试用户集合中补入新的测试用户，以满足测试需求，进一步保证测试效果；
步骤205，基于步骤204中获取到的反馈信息，开发者对测试的软件的功能进行完善、改进、升级，并将升级信息通过所述反馈信息发布群发送至测试用户，便于测试用户对反馈信息的处理进度进行监测。
另外，本公开的软件测试方法，可以是针对确定的待选测试用户集合中的待选测试用户进行筛选，例如，该待选测试用户集合包括通过既定途径新报名意向参与测试的用户、还包括曾经报名过和/或参与过相关或相类似软件的测试的用户；也可以是向预设范围(例如地域范围或系统或软件版本范围)内的用户推送测试信息后，通过该推送测试信息进行反馈报名的待选测试用户。
图3是根据一示例性实施例示出的一种软件测试装置的框图，参照图3所示，该装置包括：
第一获取模块301，被配置为获取待选测试用户的软件使用信息；
确定模块302，被配置为基于所述软件使用信息确定测试用户集合；
发送模块303，被配置为将软件的测试程序包发送至所述测试用户集合中的测试用户；
第二获取模块304，被配置为获取所述测试用户关于所述测试程序包的使用的反馈信息；
升级模块305，被配置为基于所述反馈信息升级所述软件的功能。
在可选实施方式中，所述确定模块302还被配置为：
基于所述使用信息，确定所述待选测试用户的贡献度得分；
基于所述贡献度得分，确定测试用户，组成所述测试用户集合。
在可选实施方式中，所述确定模块302还被配置为：
基于所述反馈信息，更新所述测试用户的贡献度得分；
基于所述测试用户更新后的贡献度得分，重新确定测试用户，更新所述测试用户集合。
在可选实施方式中，所述第二获取模块304还被配置为：
创建反馈信息发布群，所述反馈信息发布群包括所述测试用户集合中的所述测试用户，其中所述测试用户在所述反馈信息发布群中发布反馈信息；
通过所述反馈信息发布群获取所述反馈信息。
在可选实施方式中，所述升级模块305还被配置为：
将关于所述软件的功能的改进信息通过所述反馈信息发布群发送至所述测试用户。
在可选实施方式中，所述软件使用信息包括下述中至少一种：
所述待选测试用户使用终端的操作系统的信息、所述待选测试用户关于测试题目的答题信息、所述待选测试用户更新软件的历史频率、所述待选测试用户使用软件的历史反馈信息、所述待选测试用户的历史测试信息。
关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。
采用本公开的方法及装置，能够在测试之前对报名参与测试的用户进行筛选，预估测试用户可能在测试中所作出的贡献，以提高测试用户的质量；并且在测试过程中，通过测试用户的反馈信息对参与测试中的用户进行再次审核、筛选，进一步提升测试用户的质量，确保软件的测试效果；同时，开发者基于测试用户的反馈信息对软件进行完善、升级，并把处理进度展示给测试用户，便于测试用户监测所反馈信息的处理进度，使得测试用户与开发者之间形成信息流通的闭环，以提高开发者对反馈信息的处理效率，同时提升测试用户的体验，保证软件的测试效果。
图4是根据一示例性实施例示出的一种用于软件测试的装置400的框图。例如，装置400可以是移动电话，计算机，数字广播终端，消息收发设备，游戏控制台，平板设备，医疗设备，健身设备，个人数字助理等。
参照图4，装置400可以包括以下一个或多个组件：处理组件402，存储器404，电力组件406，多媒体组件408，音频组件410，输入/输出(I/O)的接口412，传感器组件414，以及通信组件416。
处理组件402通常控制装置400的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理组件402可以包括一个或多个处理器420来执行指令，以完成上述的方法的全部或部分步骤。此外，处理组件402可以包括一个或多个模块，便于处理组件402和其他组件之间的交互。例如，处理组件402可以包括多媒体模块，以方便多媒体组件408和处理组件402之间的交互。
存储器404被配置为存储各种类型的数据以支持在设备400的操作。这些数据的示例包括用于在装置400上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器404可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。
电力组件406为装置400的各种组件提供电力。电力组件406可以包括电源管理系统，一个或多个电源，及其他与为装置400生成、管理和分配电力相关联的组件。
多媒体组件408包括在所述装置400和用户之间的提供一个输出接口的屏幕。在一些实施例中，屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件408包括一个前置摄像头和/或后置摄像头。当设备400处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件410被配置为输出和/或输入音频信号。例如，音频组件410包括一个麦克风(MIC)，当装置400处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器404或经由通信组件416发送。在一些实施例中，音频组件410还包括一个扬声器，用于输出音频信号。
I/O接口412为处理组件402和外围接口模块之间提供接口，上述外围接口模块可以是键盘，点击轮，按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件414包括一个或多个传感器，用于为装置400提供各个方面的状态评估。例如，传感器组件414可以检测到设备400的打开/关闭状态，组件的相对定位，例如所述组件为装置400的显示器和小键盘，传感器组件414还可以检测装置400或装置400一个组件的位置改变，用户与装置400接触的存在或不存在，装置400方位或加速/减速和装置400的温度变化。传感器组件414可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件414还可以包括光传感器，如CMOS或CCD图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件414还可以包括加速度传感器，陀螺仪传感器，磁传感器，压力传感器或温度传感器。
通信组件416被配置为便于装置400和其他设备之间有线或无线方式的通信。装置400可以接入基于通信标准的无线网络，如WiFi，2G或3G，或它们的组合。在一个示例性实施例中，通信组件416经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，所述通信组件416还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会(IrDA)技术，超宽带(UWB)技术，蓝牙(BT)技术和其他技术来实现。
在示例性实施例中，装置400可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述方法。
在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器404，上述指令可由装置400的处理器420执行以完成上述方法。例如，所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
一种非临时性计算机可读存储介质，当所述存储介质中的指令由移动终端的处理器执行时，使得移动终端能够执行一种软件测试方法，所述方法包括：获取待选测试用户的软件使用信息；基于所述软件使用信息，确定测试用户集合；将所述软件的测试程序包发送至所述测试用户集合中的测试用户；获取所述测试用户关于所述测试程序包的使用的反馈信息；基于所述反馈信息，升级所述软件的功能。
图5是根据一示例性实施例示出的一种用于软件测试的装置500的框图。例如，装置500可以被提供为一服务器。参照图5，装置500包括处理组件522，其进一步包括一个或多个处理器，以及由存储器532所代表的存储器资源，用于存储可由处理组件522的执行的指令，例如应用程序。存储器532中存储的应用程序可以包括一个或一个以上的每一个对应于一组指令的模块。此外，处理组件522被配置为执行指令，以执行上述方法：获取待选测试用户的软件使用信息；基于所述软件使用信息，确定测试用户集合；将所述软件的测试程序包发送至所述测试用户集合中的测试用户；获取所述测试用户关于所述测试程序包的使用的反馈信息；基于所述反馈信息，升级所述软件的功能。
装置500还可以包括一个电源组件526被配置为执行装置500的电源管理，一个有线或无线网络接口550被配置为将装置500连接到网络，和一个输入输出(I/O)接口558。装置500可以操作基于存储在存储器532的操作系统，例如Windows ServerTM，Mac OS XTM，UnixTM,LinuxTM，FreeBSDTM或类似。
本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本发明的其它实施方案。本申请旨在涵盖本发明的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本发明的真正范围和精神由下面的权利要求指出。
应当理解的是，本发明并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。
Claims (14)
1.一种软件测试方法，其特征在于，包括：
获取待选测试用户的软件使用信息；
基于所述软件使用信息，确定测试用户集合；
将软件的测试程序包发送至所述测试用户集合中的测试用户；
获取所述测试用户关于所述测试程序包的使用的反馈信息；
基于所述反馈信息，升级所述软件的功能。
2.根据权利要求1所述的测试方法，其特征在于，所述基于所述软件使用信息确定测试用户集合，包括：
基于所述软件使用信息，确定所述待选测试用户的贡献度得分；
基于所述贡献度得分，确定测试用户，组成所述测试用户集合。
3.根据权利要求2所述的测试方法，其特征在于，所述方法还包括：
基于所述反馈信息，更新所述测试用户的贡献度得分；
基于所述测试用户更新后的贡献度得分，重新确定测试用户，更新所述测试用户集合。
4.根据权利要求1所述的测试方法，其特征在于，所述获取所述测试用户关于所述测试程序包的使用的反馈信息，包括：
创建反馈信息发布群，所述反馈信息发布群包括所述测试用户集合中的所述测试用户，其中所述测试用户在所述反馈信息发布群中发布反馈信息；
通过所述反馈信息发布群获取所述反馈信息。
5.根据权利要求4所述的测试方法，其特征在于，所述基于所述反馈信息升级所述软件的功能包括：
将关于所述软件的功能的升级信息通过所述反馈信息发布群发送至所述测试用户。
6.根据权利要求1所述的测试方法，其特征在于，所述软件使用信息包括下述中至少一种：所述待选测试用户使用终端的操作系统的信息、所述待选测试用户关于测试题目的答题信息、所述待选测试用户更新软件的历史频率、所述待选测试用户使用软件的历史反馈信息、所述待选测试用户的历史测试信息。
7.一种软件测试装置，其特征在于，包括：
第一获取模块，被配置为获取待选测试用户的软件使用信息；
确定模块，被配置为基于所述软件使用信息确定测试用户集合；
发送模块，被配置为将软件的测试程序包发送至所述测试用户集合中的测试用户；
第二获取模块，被配置为获取所述测试用户关于所述测试程序包的使用的反馈信息；
升级模块，被配置为基于所述反馈信息升级所述软件的功能。
8.根据权利要求7所述的软件测试装置，其特征在于，所述确定模块还被配置为：
基于所述软件使用信息，确定所述待选测试用户的贡献度得分；
基于所述贡献度得分，确定测试用户，组成所述测试用户集合。
9.根据权利要求8所述的软件测试装置，其特征在于，所述确定模块还被配置为：
基于所述反馈信息，更新所述测试用户的贡献度得分；
基于所述测试用户更新后的贡献度得分，重新确定测试用户，更新所述测试用户集合。
10.根据权利要求7所述的软件测试装置，其特征在于，所述第二获取模块还被配置为：
创建反馈信息发布群，所述反馈信息发布群包括所述测试用户集合中的所述测试用户，其中所述测试用户在所述反馈信息发布群中发布反馈信息；
通过所述反馈信息发布群获取所述反馈信息。
11.根据权利要求10所述的软件测试装置，其特征在于，所述升级模块还被配置为：
将关于所述软件的功能的升级信息通过所述反馈信息发布群发送至所述测试用户。
12.根据权利要求7所述的软件测试装置，其特征在于，所述软件使用信息包括下述中至少一种：
所述待选测试用户使用终端的操作系统的信息、所述待选测试用户关于测试题目的答题信息、所述待选测试用户更新软件的历史频率、所述待选测试用户使用软件的历史反馈信息、所述待选测试用户的历史测试信息。
13.一种软件测试装置，其特征在于，包括：
处理器；
用于存储所述处理器可执行指令的存储器；
其中，所述处理器被配置为：
获取待选测试用户的软件使用信息；
基于所述软件使用信息，确定测试用户集合；
将软件的测试程序包发送至所述测试用户集合中的测试用户；
获取所述测试用户关于所述测试程序包的使用的反馈信息；
基于所述反馈信息，升级所述软件的功能。
14.一种非临时性计算机可读存储介质，当所述存储介质中的指令由移动终端的处理器执行时，使得移动终端能够执行一种软件测试方法，其特征在于，所述方法包括：
获取待选测试用户的软件使用信息；
基于所述软件使用信息，确定测试用户集合；
将软件的测试程序包发送至所述测试用户集合中的测试用户；
获取所述测试用户关于所述测试程序包的使用的反馈信息；
基于所述反馈信息，升级所述软件的功能。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110218579.9A CN112817870A (zh) | 2021-02-26 | 2021-02-26 | 软件测试方法、装置及介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110218579.9A CN112817870A (zh) | 2021-02-26 | 2021-02-26 | 软件测试方法、装置及介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN112817870A true CN112817870A (zh) | 2021-05-18 |
Family
ID=75863994
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110218579.9A Pending CN112817870A (zh) | 2021-02-26 | 2021-02-26 | 软件测试方法、装置及介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112817870A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113312554A (zh) * | 2021-06-15 | 2021-08-27 | 北京百度网讯科技有限公司 | 用于评价推荐系统的方法及装置、电子设备和介质 |
Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20120030658A1 (en) * | 2010-07-30 | 2012-02-02 | International Business Machines Corporation | Software development assistant method and system |
| CN106294118A (zh) * | 2015-06-12 | 2017-01-04 | 富士通株式会社 | 信息处理设备以及信息处理方法 |
| CN108121659A (zh) * | 2017-12-20 | 2018-06-05 | 东莞理工学院 | 一种软件测试方法及系统 |
| CN108829597A (zh) * | 2018-06-13 | 2018-11-16 | 中国平安人寿保险股份有限公司 | 软件众测方法及装置、计算机装置及可读存储介质 |
| CN108874655A (zh) * | 2017-05-15 | 2018-11-23 | 华为技术有限公司 | 一种处理众包测试数据的方法及装置 |
| CN109165157A (zh) * | 2018-07-19 | 2019-01-08 | 腾讯科技（深圳）有限公司 | 一种测试应用程序的方法及测试平台 |
| CN110555592A (zh) * | 2019-07-31 | 2019-12-10 | 合肥微澜特网络科技有限责任公司 | 一种计算机技术开发咨询和评估系统 |
| CN111723015A (zh) * | 2020-06-24 | 2020-09-29 | 湖南快乐阳光互动娱乐传媒有限公司 | 一种软件测试方法、装置及电子设备 |
| CN112306883A (zh) * | 2020-11-05 | 2021-02-02 | 北京小米移动软件有限公司 | 软件测试方法、装置及介质 |
-
2021
- 2021-02-26 CN CN202110218579.9A patent/CN112817870A/zh active Pending
Patent Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20120030658A1 (en) * | 2010-07-30 | 2012-02-02 | International Business Machines Corporation | Software development assistant method and system |
| CN106294118A (zh) * | 2015-06-12 | 2017-01-04 | 富士通株式会社 | 信息处理设备以及信息处理方法 |
| CN108874655A (zh) * | 2017-05-15 | 2018-11-23 | 华为技术有限公司 | 一种处理众包测试数据的方法及装置 |
| CN108121659A (zh) * | 2017-12-20 | 2018-06-05 | 东莞理工学院 | 一种软件测试方法及系统 |
| CN108829597A (zh) * | 2018-06-13 | 2018-11-16 | 中国平安人寿保险股份有限公司 | 软件众测方法及装置、计算机装置及可读存储介质 |
| CN109165157A (zh) * | 2018-07-19 | 2019-01-08 | 腾讯科技（深圳）有限公司 | 一种测试应用程序的方法及测试平台 |
| CN110555592A (zh) * | 2019-07-31 | 2019-12-10 | 合肥微澜特网络科技有限责任公司 | 一种计算机技术开发咨询和评估系统 |
| CN111723015A (zh) * | 2020-06-24 | 2020-09-29 | 湖南快乐阳光互动娱乐传媒有限公司 | 一种软件测试方法、装置及电子设备 |
| CN112306883A (zh) * | 2020-11-05 | 2021-02-02 | 北京小米移动软件有限公司 | 软件测试方法、装置及介质 |
Non-Patent Citations (1)
| Title |
|---|
| 王丹;: "计算机软件测试方法的研究", 黑龙江科技信息, no. 09, 25 March 2016 (2016-03-25) * |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113312554A (zh) * | 2021-06-15 | 2021-08-27 | 北京百度网讯科技有限公司 | 用于评价推荐系统的方法及装置、电子设备和介质 |
| CN113312554B (zh) * | 2021-06-15 | 2023-11-03 | 北京百度网讯科技有限公司 | 用于评价推荐系统的方法及装置、电子设备和介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106528389B (zh) | 系统流畅性的性能评测方法、装置及终端 | |
| CN111859020B (zh) | 推荐方法、装置、电子设备及计算机可读存储介质 | |
| CN112817870A (zh) | 软件测试方法、装置及介质 | |
| CN105653605B (zh) | 一种用于网络社区作弊用户挖掘的方法、系统及电子设备 | |
| CN113885914A (zh) | 应用程序处理方法、装置、电子设备及存储介质 | |
| CN113868467A (zh) | 信息处理方法、装置、电子设备及存储介质 | |
| CN111246255B (zh) | 视频推荐方法、装置、存储介质、终端及服务器 | |
| CN111859097B (zh) | 数据处理方法、装置、电子设备及存储介质 | |
| CN117453933A (zh) | 一种多媒体数据推荐方法、装置、电子设备及存储介质 | |
| CN113031837A (zh) | 内容分享方法、装置、存储介质、终端及服务器 | |
| CN111353796A (zh) | 一种流量渠道的质量判断方法和装置 | |
| CN113393256A (zh) | 网络媒介信息投放质量的预测方法及装置、电子设备 | |
| CN114153954A (zh) | 测试用例推荐方法、装置、电子设备及存储介质 | |
| CN112232538A (zh) | 推荐系统、方法、装置及电子设备 | |
| CN113377673B (zh) | 软件测试的测试前移工作量占比的预测方法、装置和设备 | |
| CN112241486A (zh) | 多媒体信息获取方法及装置 | |
| CN111833070A (zh) | 售后处理方法、装置及电子设备 | |
| CN113704315B (zh) | 一种用户推荐方法、装置、电子设备及存储介质 | |
| CN111401048B (zh) | 一种意图识别方法及装置 | |
| CN113206772B (zh) | 应答报文正确性判别方法、装置、设备、介质及产品 | |
| CN112699910B (zh) | 生成训练数据的方法、装置、电子设备及存储介质 | |
| Martin et al. | Usability benchmarking case study: media downloads via mobile phones in the US | |
| CN110659145B (zh) | 数据检测的方法、装置、后台服务器及存储介质 | |
| KR101959371B1 (ko) | 트렌드분석서버, 트렌드를 분석하기 위한 사용자 단말기, 트렌드분석방법 및 트렌드분석방법에 포함된 단계를 실행시키는 기록매체에 포함된 컴퓨터프로그램 | |
| CN116094959A (zh) | 网络数据处理方法、装置、电子设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |