CN110765009B - 一种自动化执行的ai语音软件测试框架 - Google Patents

一种自动化执行的ai语音软件测试框架 Download PDF

Info

Publication number
CN110765009B
CN110765009B CN201910957329.XA CN201910957329A CN110765009B CN 110765009 B CN110765009 B CN 110765009B CN 201910957329 A CN201910957329 A CN 201910957329A CN 110765009 B CN110765009 B CN 110765009B
Authority
CN
China
Prior art keywords
test
app
case
voice
automatic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910957329.XA
Other languages
English (en)
Other versions
CN110765009A (zh
Inventor
秦阳
黄海峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing Skyworth Institute Of Information Technology Co ltd
Original Assignee
Nanjing Skyworth Institute Of Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing Skyworth Institute Of Information Technology Co ltd filed Critical Nanjing Skyworth Institute Of Information Technology Co ltd
Priority to CN201910957329.XA priority Critical patent/CN110765009B/zh
Publication of CN110765009A publication Critical patent/CN110765009A/zh
Application granted granted Critical
Publication of CN110765009B publication Critical patent/CN110765009B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3672—Test management
    • G06F11/3684—Test management for test design, e.g. generating new test cases
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3672—Test management
    • G06F11/3688—Test management for test execution, e.g. scheduling of test suites
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Telephonic Communication Services (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明涉及软件测试领域，公开了一种自动化执行的AI语音软件测试框架，解决了现有的自动化测试框架无法对AI语音APP进行自动化测试，自动化测试用例维护成本高的问题，其技术方案要点是包括被测试设备和自动化测试用例，所述被测试设备包含测试后台、若干AI语音APP以及若干与AI语音APP关联的其他APP，所述测试后台设有后台服务器；测试用例APP包含若干所述自动化测试用例，所述自动化测试用例包括用例调度层、用例业务层以及用例数据层；所述测试用例APP与所述测试后台之间进行长连接；所述测试用例APP分别与所述AI语音APP和所述其他APP之间连接有第二通讯协议，能够实现对AI语音APP的自动化测试，并且重构自动化测试框架，维护成本降低，适用性更高。

Description

一种自动化执行的AI语音软件测试框架
技术领域
本发明涉及软件测试领域，更具体地说，它涉及一种自动化执行的AI语音软件测试框架。
背景技术
随着互联网络的大面积普及，计算机硬件和软件技术的飞速发展和现代软件复杂程度的加深和程序功能的庞大，使用传统的测试理论和测试技术来完成软件测试越来越力不从心，同时在软件测试过程中存在着大量的重复性工作，一般是使用人工操作的，但是人工操作测试受工作时间影响，效率低，并且人工测试还需要较多的硬件资源分配，加上人工资源占用，成本高；所以在趋于稳定的app或者回归某些功能模块的测试需求上，可以利用现有的技术控制机器实现自动化测试检验产品的功能和稳定性，来减小成本的投入并提高效率。
而现有技术中，现有的自动化测试框架无法对电视上的AI语音技术有关的APP进行自动化测试；并且在机器执行自动化测试用例，无法自动联想，一旦产品功能定义改变之后则需要同步修改自动化用例，维护成本较高，在语音产品上此类问题更加突出，一旦语义变化则可能会导致预期结果与测试用例中原有的设计不同。
发明内容
本发明的目的是提供一种自动化执行的AI语音软件测试框架，能够实现对AI语音APP的自动化测试，并且重构自动化测试框架，维护成本降低，适用性更高。
本发明的上述技术目的是通过以下技术方案得以实现的：一种自动化执行的AI语音软件测试框架，包括被测试设备和自动化测试用例，所述被测试设备包含测试后台、若干AI语音APP以及若干与AI语音APP关联的其他APP，所述测试后台设有后台服务器，用于下发测试指令，测试用例APP：包含若干所述自动化测试用例，所述自动化测试用例包括用例调度层、用例业务层以及用例数据层；所述测试用例APP与所述测试后台之间的通信通过第一通讯协议进行长连接；所述测试用例APP分别与所述AI语音APP和所述其他APP之间连接有第二通讯协议。
优选的，所述用例调度层用于对所有的自动化用例的执行策略进行控制、负责根据测试需求建立测试用例APP与被测试设备的AI语音APP之间的通信、在测试完成后断开连接。
优选的，所述用例业务层用于对AI语音APP进行业务测试。
优选的，所述用例数据层用于接收AI语音APP返回的数据，并对数据解析或者判断后，提供处理后的数据给用例业务层使用。
优选的，所述第一通讯协议为即时通讯协议。
优选的，所述即时通讯协议包括MQTT。
优选的，所述第二通讯协议包括安卓标准通信协议。
综上所述，本发明具有以下有益效果：通过建立长连接推送语音数据的方式调用AI语音APP，解决了必须使用语音遥控器或者人工语音唤醒后语音说话无法脱离人工干预的问题，实现全部语音流程自动化执行；重构自动化测试框架，进行用例业务层与用例数据层的分离，实现自动化测试时统一调度管理，节约用例管理成本，用例数据层的单独剥离维护，只要被测的AI语音APP的业务逻辑不变，则不需要对每条用例单独修改，只需要对用例数据层统一维护，降低了自动化测试用例的维护成本，增强了自动化测试用例的适应性。
附图说明
图1是本发明建立连接示意图；
图2是本发明语音指令下发流程图；
图3是本发明测试用例分层示意图。
具体实施方式
以下结合附图对本发明作进一步详细说明。
一种自动化执行的AI语音软件测试框架，包括测试用例APP和被测试设备；
测试用例APP包含若干自动化测试用例，测试用例APP是若干个编写好的自动化测试用例打包所得的一个可运行的服务APP；
被测试设备包含测试后台、若干AI语音APP以及若干与AI语音APP关联的其他APP，测试后台设有后台服务器，用于下发测试指令；
测试用例APP与测试后台之间的通信通过第一通讯协议进行长连接；该测试用例APP通过第一通讯协议长连接的方式，实现测试用例APP与测试后台之间的通信建立，具体的，第一通讯协议采用的是如MQTT此类的即时通讯协议，能够及时的传输数据，方便测试使用；
测试用例APP分别与AI语音APP和其他APP之间连接有第二通讯协议，一般的第二通讯协议采用的是安卓标准通信协议，以此来实现测试用例APP和AI语音APP之间的数据交互；
通过测试用例APP分别与测试后台和AI语音APP之间的通信连接，能够实现利用测试用例APP从测试后台下发测试指令来指定AI语音APP的相关技术动作。
自动化测试用例包括用例调度层、用例业务层以及用例数据层；用例调度层用于对所有的自动化测试用例的执行策略进行控制、负责根据测试需求建立测试用例APP与被测试设备的AI语音APP之间的通信、在测试完成后断开连接；用例业务层用于对AI语音APP进行业务测试；用例数据层用于接收AI语音APP返回的数据，并对数据解析或者判断后，提供处理后的数据给用例业务层使用。
本实施例中以安卓标准通信协议为例，但是不限于运行Android操作系统的智能手机或者智能设备上的所有类型app。
本实施例的具体应用过程如下：
S1：如图1所示，测试用例APP和AI语音APP分别向后台服务器注册，建立语音指令下发通道。测试用例APP和AI语音APP以及其他APP之间建立安卓标准通信；
S2：如图2所示，测试用例APP通过后台服务器转发语音指令给AI语音APP，AI语音APP根据收到的指令解析语义执行操作后将有效数据返回给测试用例APP；
S3：如图3所示，测试用例执行逻辑如下,首先用例调度层负责建立与AI语音APP的连接以及控制执行哪些用例和执行顺序；其次用例业务层负责下发语音指令给AI语音APP，AI语音APP接收到指令后执行指令（包括调用其他APP）后将有用的数据返回给用例数据层，用例数据层接收到数据后进行解析和处理数据，根据用例业务层需要用的具体数据值将数据返回给具体的某个测试用例；
以上便是本发明的具体过程，并以此来完成对被测试设备上AI语音APP和其他APP的自动化测试。
本发明中的优势在于：
将若干个编写好的自动化测试用例打包成一个可运行的服务APP，并通过后台服务器与AI语音APP建立连接，语音指令可以通过建立的语音指令下发通道下发到AI语音APP中。通过建立长连接的通道下发指令的方式可适应更多平台，只要是入网的设备中的AI语音APP到后台服务器中进行注册即可使用测试用例进行测试，适应性更强，同时也解决了必须使用语音遥控器或者人工语音唤醒后语音说话无法脱离人工干预的问题，实现全部语音流程自动化执行；
并且重构自动化测试用例框架，将自动化测试用例进行分层管理，实现用例调度（包含通道的建立），产品业务测试和产品数据解析分开维护，各层级间分工明确，实现自动化测试时统一调度管理，节约用例管理成本；
相对于每条测试用例单独维护，将用例业务层与用例数据层的分离，一旦数据出现变更只需要维护用例数据层，业务层的测试用例均不需要修改，测试用例的修改维护成本降低；
若产品更换平台业务层有细微变更，则只需维护业务层的逻辑，其他层级不需修改，更能适应各平台移植使用；
若按照测试需求需要制定执行部分用例或者有指定的执行顺序，则只需要对用例调度层进行策略的修改即可。
以上所述仅是本发明的优选实施方式，本发明的保护范围并不仅局限于上述实施例，凡属于本发明思路下的技术方案均属于本发明的保护范围。应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理前提下的若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (4)

1.一种自动化执行的AI语音软件测试框架，包括被测试设备和自动化测试用例，所述被测试设备包含测试后台、若干AI语音APP以及若干与AI语音APP关联的其他APP，所述测试后台设有后台服务器，用于下发测试指令，其特征是：测试用例APP：包含若干所述自动化测试用例，所述自动化测试用例包括用例调度层、用例业务层以及用例数据层；所述测试用例APP与所述测试后台之间的通信通过第一通讯协议进行长连接；所述测试用例APP分别与所述AI语音APP和所述其他APP之间连接有第二通讯协议；
所述用例调度层用于对所有的自动化用例的执行策略进行控制、负责根据测试需求建立测试用例APP与被测试设备的AI语音APP之间的通信、在测试完成后断开连接；所述用例业务层用于对AI语音APP进行业务测试；所述用例数据层用于接收AI语音APP返回的数据，并对数据解析或者判断后，提供处理后的数据给用例业务层使用。
2.据权利要求1所述的一种自动化执行的AI语音软件测试框架，其特征是：所述第一通讯协议为即时通讯协议。
3.据权利要求2所述的一种自动化执行的AI语音软件测试框架，其特征是：所述即时通讯协议包括MQTT。
4.据权利要求1所述的一种自动化执行的AI语音软件测试框架，其特征是：所述第二通讯协议包括安卓标准通信协议。
CN201910957329.XA 2019-10-10 2019-10-10 一种自动化执行的ai语音软件测试框架 Active CN110765009B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910957329.XA CN110765009B (zh) 2019-10-10 2019-10-10 一种自动化执行的ai语音软件测试框架

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910957329.XA CN110765009B (zh) 2019-10-10 2019-10-10 一种自动化执行的ai语音软件测试框架

Publications (2)

Publication Number Publication Date
CN110765009A CN110765009A (zh) 2020-02-07
CN110765009B true CN110765009B (zh) 2023-09-05

Family

ID=69331735

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910957329.XA Active CN110765009B (zh) 2019-10-10 2019-10-10 一种自动化执行的ai语音软件测试框架

Country Status (1)

Country Link
CN (1) CN110765009B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113076249B (zh) * 2021-04-13 2024-04-12 深圳前海联动云软件科技有限公司 一种基于企业需求开发的自动化测试应用平台及测试方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103634592A (zh) * 2013-12-09 2014-03-12 乐视致新电子科技（天津）有限公司 智能电视自动化测试方法及系统
CN106502898A (zh) * 2016-10-25 2017-03-15 广州神马移动信息科技有限公司 测试方法和测试驱动器以及测试平台

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103634592A (zh) * 2013-12-09 2014-03-12 乐视致新电子科技（天津）有限公司 智能电视自动化测试方法及系统
CN106502898A (zh) * 2016-10-25 2017-03-15 广州神马移动信息科技有限公司 测试方法和测试驱动器以及测试平台

Also Published As

Publication number Publication date
CN110765009A (zh) 2020-02-07

Similar Documents

Publication Publication Date Title
CN108366067B (zh) 电力系统通用服务协议一致性测试系统及方法
CN106648674A (zh) 一种大数据计算管理方法及系统
CN111240935B (zh) 一种自动化智能运维系统及运维方法
CN110765009B (zh) 一种自动化执行的ai语音软件测试框架
CN103544016A (zh) 一种基于java反射技术的服务注册配置方法及系统
CN110705724A (zh) 一种可重用自动化运维管理系统
CN102377506A (zh) 测试报文处理系统
CN114173355B (zh) 一种设计运行态分离的网络指令动态执行方法及系统
CN111163128B (zh) 一种基于QT中qWebChannel管道的Web前端通信管理方法
CN105933396B (zh) 一种协同各渠道系统接口实现长流程的方法及系统
CN1955990B (zh) 综合电信平台中的流程执行方法及系统
CN115065702B (zh) 一种适用于新一代调度主站的新能源数据接入系统及方法
CN116149808A (zh) 机器人流程自动化管理系统和方法
CN104133675A (zh) 一种基于动态配置技术的配网多主题应用界面集成方法
CN112506638B (zh) 基于Activiti技术的运维脚本流程化编排方法
CN107608887A (zh) 一种创建虚拟操作系统测试服务器的方法
CN103198380A (zh) 工作流引擎支持Saas应用的方法
CN111949326A (zh) 一种基于Activiti的微服务工作流方法
CN109298851B (zh) 一种OSGi异构软件框架的扩展机制适配方法
CN102469118B (zh) 一种实现信息拉取的方法及装置
CN101764713B (zh) 融合计费系统外围接口规则配置引擎方法
CN111831561B (zh) 一种插件式测试案例库系统
CN102685337B (zh) VoiceXml呼叫控制实现方法及装置
CN110784341A (zh) 一种服务链路追踪虚拟机的方法
CN113987513A (zh) 一种基于自定义脚本漏洞检测管理系统及其方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant