CN112506757A - 自动测试方法、系统、计算机设备及其介质 - Google Patents

Abstract

本申请实施例属于核电测试技术领域，尤其涉及自动测试方法、系统、计算机设备及其介质，其中，方法包括获取故障特征，在预设的测试数据库中匹配与故障特征对应的测试策略和测试策略指向的测试用例集，执行测试用例集，以获取测试比对结果，根据测试比对结果输出测试报告，因此，根据故障特征在测试数据库中自动匹配相应的测试用例集，减少了测试人员基于测试经验决策测试方案，减少了人工成本的投入，提高了测试效率，同时，避免了人为主观决策测试方案所产生的判断偏差，提高了测试的准确性。另外，通过将测试比对结果以测试报告的形式输出，不仅有利于测试人员获悉测试环节的条件和结果，而且为后续完善测试方案提供了基础和规范了测试环节。

Description

自动测试方法、系统、计算机设备及其介质

技术领域

本申请涉及核电测试技术领域，尤其涉及自动测试方法、系统、计算机设备及其介质。

背景技术

核电厂正常运行期间涉及200多个工艺系统，每个系统的控制功能需要数字化控制系统实现，而数字化控制系统的应用需要经过将工艺系统的控制逻辑图进行重新组态，并进行工厂的测试和验收。作为核电站仪控系统的核心设备制造所必须的上游数据输入的控制逻辑图的准确性和正确性是数字化仪控系统能否正常使用的关键环节。

目前，自动测试工具较多应用在计算机程序及简单IO点通讯的系统中。对应核电复杂系统的自动化测试基本都在研究阶段，核电复杂系统的工艺控制正确性测试还是依靠测试工程师的技术经验根据测试需求进行解读并测试，可见，由于测试经验存在主观判断，容易产生判断偏差问题，进而影响测试的准确性，同时测试过程中投入大量人力物力，使得投入成本高，测试效率低。

发明内容

本申请实施例的目的在于提出一种自动测试方法、系统、计算机设备及其介质，解决核电复杂系统的功能测试过程中存在的测试准确率低、成本高、效率低的问题。

为了解决上述技术问题，本申请实施例提供一种自动测试方法，包括：

获取故障特征；

在预设的测试数据库中匹配与故障特征对应的测试策略和测试策略指向的测试用例集；

执行测试用例集，以获取测试比对结果；

根据测试比对结果输出测试报告。

可选地，在预设的测试数据库中匹配与故障特征对应的测试策略和测试策略指向的测试用例集包括：

在测试数据库中识别与故障特征对应的测试策略，每个测试策略包括至少一个故障特征；

获取故障特征对应的故障信息表；

根据故障信息表和测试策略生成测试用例集。

可选地，获取故障特征对应的故障信息表包括：

若接收到自动获取请求，则根据故障特征对应的描述信息自动生成故障信息表；

若接收到故障特征对应的输入信息，则将输入信息按照预设的格式生成故障信息表。

可选地，在预设的测试数据库中匹配与故障特征对应的测试策略和测试策略指向的测试用例集之前，自动测试方法还包括：

获取故障样本数据，故障样本数据包括故障类型信息；

将故障类型信息输入到预设的测试模型，得到初始测试用例；

根据初始测试用例和预设测试策略生成测试用例集，其中，测试用例集为组合的至少一个初始测试用例；

将初始测试用例和测试用例集存储在测试数据库。

可选地，执行测试用例集，以获取测试比对结果包括：

执行测试用例集，并输出测试结果；

在测试数据库中获取测试策略的预期结果；

分析测试结果和预期结果，以获取测试比对结果。

为了解决上述技术问题，本申请实施例还提供一种自动测试系统，包括：

获取模块，用于获取故障特征；

匹配模块，用于在预设的测试数据库中匹配与故障特征对应的测试策略和测试策略指向的测试用例集；

执行模块，用于执行测试用例集，以获取测试比对结果；

输出模块，用于根据测试比对结果输出测试报告。

可选地，匹配模块包括：

识别单元，用于在测试数据库中识别与故障特征对应的测试策略，每个测试策略包括至少一个故障特征；

获取单元，用于获取故障特征对应的故障信息表；

生成单元，用于根据故障信息表和测试策略生成测试用例集。

可选地，所获取单元包括：

自动生成子单元，用于若接收到自动获取请求，则根据故障特征对应的描述信息自动生成故障信息表；

输入生成子单元，用于若接收到故障特征对应的输入信息，则将输入信息按照预设的格式生成故障信息表。

可选地，输出模块包括：

执行单元，用于执行测试用例集，并输出测试结果；

预期单元，用于在测试数据库中获取测试策略的预期结果；

分析单元，用于分析测试结果和预期结果，以获取测试比对结果。

可选地，自动测试系统还包括：

样本模块，用于获取故障样本数据，故障样本数据包括故障类型信息；

输入模块，用于将故障类型信息输入到预设的测试模型，得到初始测试用例；

生成模块，用于根据初始测试用例和预设测试策略生成测试用例集，其中，测试用例集为组合的至少一个初始测试用例；

存储模块，用于将初始测试用例和测试用例集存储在测试数据库。

与现有技术相比，本申请实施例主要有以下有益效果：

通过获取故障特征，在预设的测试数据库中匹配与故障特征对应的测试策略和测试策略指向的测试用例集，执行测试用例集，以获取测试比对结果，根据测试比对结果输出测试报告，因此，根据故障特征在测试数据库中自动匹配相应的测试用例集，减少了测试人员基于测试经验决策测试方案，减少了人工成本的投入，提高了测试效率，同时，避免了人为主观决策测试方案所产生的判断偏差，提高了测试的准确性。另外，通过将测试比对结果以测试报告的形式输出，不仅有利于测试人员获悉测试环节的条件和结果，而且为后续完善测试方案提供了基础和规范了测试环节。

附图说明

为了更清楚地说明本申请中的方案，下面将对本申请实施例描述中所需要使用的附图作一个简单介绍，显而易见地，下面描述中的附图是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本申请可以应用于其中的示例性系统架构图；

图2是本申请的自动测试方法的一个实施例的流程图；

图3是本申请的测试策略结构图；

图4是本申请的自动测试系统的软件结构图；

图5是本申请的测试用例集执行的一个实施例的示意图；

图6是本申请测试用例集的执行过程流程图；

图7是本申请测试用例的执行结果图；

图8是本申请自动测试系统的一个实施例；

图9是本申请计算机设备基本结构框图。

具体实施方式

除非另有定义，本文所使用的所有的技术和科学术语与属于本申请的技术领域的技术人员通常理解的含义相同；本文中在申请的说明书中所使用的术语只是为了描述具体的实施例的目的，不是旨在于限制本申请；本申请的说明书和权利要求书及上述附图说明中的术语“包括”和“具有”以及它们的任何变形，意图在于覆盖不排他的包含。本申请的说明书和权利要求书或上述附图中的术语“第一”、“第二”等是用于区别不同对象，而不是用于描述特定顺序。

在本文中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是，本文所描述的实施例可以与其它实施例相结合。

为了使本技术领域的人员更好地理解本申请方案，下面将结合附图，对本申请实施例中的技术方案进行清楚、完整地描述。

如图1所示，系统架构100可以包括终端设备101、102、103，网络104和服务器105。网络104用以在终端设备101、102、103和服务器105之间提供通信链路的介质。网络104可以包括各种连接类型，例如有线、无线通信链路或者光纤电缆等等。

用户可以使用终端设备101、102、103通过网络104与服务器105交互，以接收或发送消息等。终端设备101、102、103上可以安装有各种通讯客户端应用，例如网页浏览器应用、购物类应用、搜索类应用、即时通信工具、邮箱客户端、社交平台软件等。

终端设备101、102、103可以是具有显示屏并且支持网页浏览的各种电子设备，包括但不限于智能手机、平板电脑、电子书阅读器、MP3播放器(Moving Picture E界面显示perts Group Audio Layer III，动态影像专家压缩标准音频层面3)、MP4(Moving PictureE界面显示perts Group Audio Layer IV，动态影像专家压缩标准音频层面4)播放器、膝上型便携计算机和台式计算机等等。

服务器105可以是提供各种服务的服务器，例如对终端设备101、102、103上显示的页面提供支持的后台服务器。

需要说明的是，本申请实施例所提供的自动测试方法一般由服务器/终端设备执行，相应地，自动测试系统一般设置于服务器/终端设备中。

应该理解，图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要，可以具有任意数目的终端设备、网络和服务器。

继续参考图2，示出了根据本申请的自动测试方法的一个实施例的流程图。所述自动测试方法包括以下步骤：

S201：获取故障特征。

在本实施例中，从实时数据库平台中获取待测试的系统诊断信息，其中，实时数据库平台用于实时存储各个控制系统所上传的系统诊断信息，或者直接从核电站故障诊断系统中获取系统诊断信息，系统诊断信息包括各个系统设备的控制设备型号、控制设备运行状态信息、控制信号和相关的运行参数信息等，将获取的系统诊断信息与预设的测试数据库中的测试数据进行匹配，以提取出系统诊断信息中的故障特征。

进一步地，测试数据库中存储的测试数据源自实时数据库平台，通过专家对各个系统诊断信息进行排查筛选，以归纳出故障问题对应的具体故障特征，每个故障特征设置特定的故障标签，例如故障ID，故障ID可以是故障问题编号，以便于后续查询和定位系统诊断信息对应测试数据库中具体的故障特征，并将该故障特征作为测试系统设备功能的测试数据。

在本实施例中，故障特征主要包括出现故障问题的系统设备类型，所属信号采集通道，故障性质，故障位置，故障程度等。例如，从出现故障问题的控制系统A中获取系统诊断信息，由于控制系统A管理多个相关联的控制设备，控制设备类型可以是相同或者不同，即系统诊断信息包括多个控制设备的系统诊断信息，将系统故障信息与测试数据库中匹配，以得到该控制系统A的多个故障特征，不同控制设备可能出现相同的故障类型，即相同的故障特征，相同的故障特征均携带同一故障标签。

S202：在预设的测试数据库中匹配与故障特征对应的测试策略和测试策略指向的测试用例集。

其中，测试数据库的设计是自动测试工具的核心,它需要描述测试策略、测试用例、测试用例的预期结果和测试结果等。测试数据库预先存储了常见故障类型的故障信息、故障信息包括故障特征，每个故障类型对应至少一个测试策略，即故障特征是测试策略生成测试用例输入的一个变量，其测试策略结构图如图3所示。测试策略指向的测试用例集，测试策略用于决策同一故障类型的各个故障特征的测试方式。在测试数据库中查找故障特征对应的故障标签，并根据故障标签识别对应的测试策略和测试用例集。

具体地，测试策略是专家根据控制系统故障特征的方式生成，测试策略包括测试执行方式，预约时间，终止条件，出错用例数量，是否全部执行等，终止条件为制定测试的启动和停止条件、完成标准的条件，即如何选择和运用方法来解决具体的控制系统问题。例如，测试策略包括测试名称、执行方式、预约时间和出错用例数。

进一步地，测试策略包括要使用的测试方法、测试工具，定义测试范围，评估风险，测试要完成测试和测试成功的评价标准。如测试用例通过率95％，表示可进行验收测试截断。其中，测试方法包括手动和自动，测试工具包括编辑好的测试用例集，测试用例集为根据测试策略组合的多个测试用例，即测试策略包括多个节点，每个节点对应一个测试用例，当一个测试策略有多个节点时，即该测试策略包括多个测试用例，即测试用例集。

在本申请实施例中，测试策略还包括开环测试和闭环测试，其中，开环测试为单纯的逻辑测试，闭环测试是根据逻辑控制结合相应的工艺模型进行测试。

进一步地，测试用例(test scenarios)为根据测试需求，设置不同测试参数及故障类型产生的测试情景。测试用例(Test Case)也指对一项特定的系统功能进行测试任务的描述，体现测试方案、测试方法、测试技术和测试策略。其内容包括测试目标、测试环境、输入数据、测试步骤、预期结果、测试脚本等，最终形成文档。简单地认为，测试用例是为某个特殊目标而编制的一组测试输入、执行条件以及预期结果，用于核实是否满足某个特定系统需求。

S203：执行测试用例集，以获取测试比对结果。

在本实施例中，后台服务器根据测试策略中各个测试用例所在的节点，在测试机中的仿真系统(system simulation)上逐个运行测试用例集中的测试用例，并分别得到各个测试用例的实际测试结果。将测试策略中预先设定的每个测试用例对应的预期结果分别与每个测试用例对应的测试结果进行比较，以得到测试比对结果。

进一步地，为了提高测试效率，多个测试用例可以分别在多台测试机上的仿真系统并行完成测试任务，其中，各个测试机的测试任务在测试策略中预先定义。

S204：根据测试比对结果输出测试报告。

在本实施例中，利用算法编译，自动测试系统根据测试结果输出的关注结果参数与预期结果进行分析对比，以判断测试结果的正确性，并将测试结果和预期比较结果均存入测试数据库。

进一步地，根据预设的测试报告模板，将故障特征、故障特征对应的策略、测试用例集、测试结果以及测试比对结果生成测试报告。

在本实施例中，通过获取故障特征，在预设的测试数据库中匹配与故障特征对应的测试策略和测试策略指向的测试用例集，执行测试用例集，以获取测试比对结果，根据测试比对结果输出测试报告，因此，根据故障特征在测试数据库中自动匹配相应的测试用例集，减少了测试人员基于测试经验决策测试方案，减少了人工成本的投入，提高了测试效率，同时，避免了人为主观决策测试方案所产生的判断偏差，提高了测试的准确性。另外，通过将测试比对结果以测试报告的形式输出，不仅有利于测试人员获悉测试环节的条件和结果，而且为后续完善测试方案提供了基础和规范了测试环节。

进一步地，后台服务器根据故障特征所匹配的测试策略和测试用例集在测试机上的仿真系统逐个运行，并将得到的测试比对结果生成测试报告，以完成控制系统的功能需求测试，并且有效利用了实时数据库平台的数据，以支持对核电站复杂的系统功能性，这样不仅大幅缩短控制系统的控制逻辑图的测试周期和测试质量，进而也提升了核电站数字化仪控系统(Distributed Control System，DCS)的制造质量和生成周期，降低核电站的建设成本和控制安全性。

在本申请实施例的一些可选的实现方式中，如图4的自动测试系统的软件结构图所示，在启动自动测试具体的测试用例之前，需要建立完善的测试数据库，测试数据库存储了常见故障类型的故障信息、故障信息对应的测试策略和测试实施例。

具体地，测试员将收集的故障特征和总结的功能使用缺陷等设计测试需求，并由测试需求制定相应的测试策略，其中，一个测试需求可以定制多个不同的测试策略；将生成的测试策略进行规范管理，例如，将同一测试需求的的测试策略存放在同一个文件，或者针对同一测试需求的多个测试策略均标记成相同的标签，以使测试需求和对应的测试策略形成映射关系，便于后续对具体测试策略的查找；根据测试策略的内容编写具体的测试用例，同样地，一个测试策略可以包括多个测试用例的组合，也可以是多个测试用例的任意一个，每个测试用例均设置了对应的测试预期结果，可为后续的测试提供参考标准；将测试策略和测试策略对应的测试用例存放在测试数据库中。

进一步地，测试数据库还包括测试分析结果，即根据实际测试结果与测试预期结果的差异设置不同的测试分析内容，为后续设计控制逻辑系统功能提供设计的思路和数据参考。

进一步地，当获取到测试需求时，在测试数据库中自动识别与测试数据库相关的测试策略，识别到的测试策略至少为一个，可以由自动测试系统从至少一个策略中自动选取目标测试策略，自动选取的依据可以是根据测试策略的测试最优时间、最优效果或者测试环节优先级等来作为选取的顺序，或者测试员可以根据实际测试需求从识别到的至少一个测试策略中选取目标测试策略，并执行所选取的目标测试策略中的目标测试用例，以输出测试结果，进而将该目标测试用例的的预期测试结果与测试结果进行分析比对，以生成测试报告。

在本实施例的一些可选的实现方式中，步骤S202，即在预设的测试数据库中匹配与故障特征对应的测试策略和测试策略指向的测试用例集包括：

在测试数据库中识别故障特征对应的测试策略；

获取故障特征对应的故障信息表；

根据故障信息表和测试策略生成测试用例集。

在本实施例中，如图5所示的测试用例集执行的一个实施例的示意图，以一个测试策略为例，通常每个故障特征设置特定的故障标签，当不同的故障特征表现为同一控制系统的故障问题时，此时不同的故障特征携带的故障标签相同，因此故障标签可以按照故障问题分类，即故障标签可以是故障类型编号，此时匹配该故障标签对应的至少一个测试策略，即同一类型的故障特征可以由不同的测试策略来完成，而测试策略的选定可根据预先设定的优先级顺序从至少一个测试策略中进行选定，例如，按照测试效率快的优先级别来选取或者按照稳定性等级的优先级别选取，测试策略的选定还可以用手动选取的方式。由于同一系统故障问题可以是多个不同控制设备的故障特征，而一个测试策略可以用于测试同一系统故障问题的不同故障特征，故选中的测试策略包括各个故障特征，根据获取的故障特征在测试策略中逐一读取所对应的故障标签，例如，当前处理的故障标签为故障ID＝0，根据故障ID＝0确定测试方式名称，测试方式名称对应一个故障信息表，故障信息表包括测试要求的测试字段，根据测试字段提取故障特征的故障设备类型、故障性质、故障位置、信号采集、故障程度、工况信息、机组负荷以及参数定值等具体故障信息，其中，工况信息包括冷停堆、热停堆、机组上行、RHR链接、机组下行，参数定值包括定值类型、定值限值、定值描述、缺省值、定值，机组负荷除了预设的数值外，还可以自定义负荷；根据故障信息表中的当前故障特征的故障设备类型、通道等确定故障设备集合；根据故障设备集合、故障性质、故障位置等生产测试用例集和故障信息对象，并奖励关联对象间的关系，其中，测试用例集包括多个测试用例，每个测试用例有对应的测试用例ID、测试用例描述，仿真耗时以及测试用例使用的故障信息表是否自定义操作。依据上述方式对所有的故障特征进行测试处理，直至所有的故障特征全部处理完毕后停止执行，即所有的故障标签全部处理完为止。

进一步地，为了在工程化测试过程中能够高效的验证系统功能是否满足规定和性能要求，测试用例只考虑正常用例。

在本实施例中，在测试数据库中识别故障特征对应的测试策略，获取故障特征对应的故障信息表，根据故障信息表和测试策略生成测试用例集，减少了测试人员基于测试经验决策测试方案，即减少了人工成本的投入，提高了测试效率，同时，避免了人为主观决策测试方案所产生的判断偏差，提高了测试的准确性。

在本实施例的一些可选的实现方式中，获取故障特征对应的故障信息表包括：

若接收到自动获取请求，则根据故障特征对应的描述信息自动生成故障信息表；

若接收到故障特征对应的输入信息，则将输入信息按照预设的格式生成故障信息表。

在本实施例中，自动获取请求可以是用户在终端发起的自动请求信息，例如，可以通过触发终端界面上的自动控件或者选中“不做自定义”控件，使得根据该自动获取请求自动生成某一种测试策略产生当前测试用例时，故障信息表是根据测试策略中的故障特征产生；当用户在终端界面选中“自定义”控件时，弹出输入框，接收用户在输入框中的输入信息，即在手动生成测试用例时，获取包括但不限于故障信息、特定工况、系统定值等输入信息，并将该输入信息按照测试用例规定的预设格式生成故障信息表，即输出的输入变量主要根据逻辑控制需要进行选择，可以手动选择输入变量，也可以采用穷举的方式保证测试的全面覆盖。

在本实施例中，故障信息表的生成既可以自动的方式也可以通过手动的方式执行，从而提高了测试用例在生成故障信息表时的灵活性特点，进而提高测试的效率。

在本实施例的一些可选的实现方式中，在预设的测试数据库中匹配与故障特征对应的测试策略和测试策略指向的测试用例集之前，上述电子设备可以执行以下步骤：

获取故障样本数据，故障样本数据包括故障类型信息；

将故障类型信息输入到预设的测试模型，得到初始测试用例；

根据初始测试用例和预设测试策略生成测试用例集，其中，测试用例集为组合的至少一个初始测试用例；

将初始测试用例和测试用例集存储在测试数据库。

具体地，从实时数据库平台中的系统诊断信息提取故障样本数据，故障类型信息包括故障控制设备型号、故障设备运行状态信息、控制信号和相关的运行参数信息等。预设的测试模型是由专家根据实时更新的系统诊断信息和控制系统功能设计的测试模型，可用于各个控制系统的逻辑功能进行测试，测试模型包括预先存储的测试用例模型，即当故障类型信息输入到测试模型时，测试模型根据识别故障类型信息中的感兴趣信息，例如故障控制设备型号、运行参数等，即可输出初始测试用例，由于控制系统功能复杂多样，采用单一的初始测试用例得到的测试结果并不能达到预期的效果，故根据专家设计的测试策略来控制初始测试用例的执行条件，以及通过测试策略将初始测试用例进行特定的组合，以形成该故障类型信息对应的测试用例集，并将生成的初始测试用例和测试用例集存储在测试数据库中。

在本申请实施例中，通过获取故障样本数据，将故障样本数据中的故障类型信息输入到预设的测试模型，得到初始测试用例，根据初始测试用例和预设测试策略生成测试用例集，将初始测试用例和测试用例集存储在测试数据库，即通过建立测试数据库，存储常见类型的测试用例，有利于测试常规故障特征，进而提高测试效率。

在本实施例的一些可选的实现方式中，在执行测试用例集，以获取测试比对结果包括以下步骤：

执行测试用例集，并输出测试结果；

在测试数据库中获取测试策略的预期结果；

分析测试结果和预期结果，以获取测试比对结果。

在本实施例中，如图6所示为本申请测试用例集的执行过程流程图，通过读取测试用例集在测试策略的所在节点，并设置测试用例集的执行时间，设置方式可以通过手动触发信号执行或者设定触发时间来启动测试用例集的启动时间；当启动测试用例集时，识别当前运行从测试用例集中的每个测试用例ID，根据每个测试用例ID读取当前运行测试用例的工况、系统定值、故障信息等到自动测试系统中，根据当前测试用例启动计算，并等待计算接收，并将计算得到的测试对比结果存储到测试测试数据库中，依据此方式运行每个测试用例，直至所有的测试用例都执行完毕。

在本实施例中，如图7所示为本申请测试用例的执行结果图，其中，执行结果包括测试结果和每一测试结果对应的预期结果，预期结果为根据测试策略要求得到，其中，测试结果包括开关状态，保护装置动作及重点监测参数等。

具体地，开关状态包括开关名称、动作方式、动作时间；保护装置动作包括功能名称、动作方式、动作整定值和动作测量值；重点监测参数包括参数名称、参数限值和触发类型。

进一步地，由于测试策略中的预期结果是预先根据测试模型提供的逻辑法和定值法2种实现方式来计算测试模型中故障样本数据的测试结果，其中，逻辑法为单纯逻辑判断的逻辑测试，定值法是根据所涉及模拟量的闭环测试获得的数值，其中，模拟量包括由工况选择确定的定值信息和与工况无关的定值信息，并根据不同的测试精度及裕度要求给出测试结果对应的结论。因此，分析测试结果和预期结果，即可得到测试比对结果中对应的结论。

具体地，利用算法编译，识别测试结果中的关注结果参数，并将关注结果参数与预期结果进行分析对比，判断测试结果的正确性和对应的结论，并将测试结果和预期比较结果均存入测试数据库，生成测试报告。

在本实施例中，通过执行测试用例集，并输出测试结果，在测试数据库中获取测试策略的预期结果，分析测试结果和预期结果，以获取测试比对结果，通过自动产生大量测试用例进行测试结果分析，根据测试结果一次的统计，分析发现问题，解决了结果设计者及测试人员由于测试经验无法实现的问题穷举而产生的遗漏项目以及及避免人工测试发生不合格项目漏入下一测试环节的可能性，进一步保证测试质量。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，该计算机程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，前述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)等非易失性存储介质，或随机存储记忆体(Random Access Memory，RAM)等。

应该理解的是，虽然附图的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，其可以以其他的顺序执行。而且，附图的流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，其执行顺序也不必然是依次进行，而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。

进一步参考图8，作为对上述图2所示自动测试方法的实现，本申请提供了一种自动测试系统的一个实施例，该系统实施例与图2所示的方法实施例相对应，该系统具体可以应用于各种电子设备中。

如图8所示，本实施例所述的自动测试系统包括：获取模块81、匹配模块82、执行模块83以及输出模块84。其中：

获取模块81，用于获取故障特征；

匹配模块82，用于在预设的测试数据库中匹配与故障特征对应的测试策略和测试策略指向的测试用例集；

执行模块83，用于执行测试用例集，以获取测试比对结果；

输出模块84，用于根据测试比对结果输出测试报告。

可选地，匹配模块82包括：

识别单元821，用于在测试数据库中识别与故障特征对应的测试策略，每个测试策略包括至少一个故障特征；

获取单元822，用于获取故障特征对应的故障信息表；

生成单元823，用于根据故障信息表和测试策略生成测试用例集。

可选地，所获取单元822包括：

自动生成子单元8221，用于若接收到自动获取请求，则根据故障特征对应的描述信息自动生成故障信息表；

输入生成子单元8222，用于若接收到故障特征对应的输入信息，则将输入信息按照预设的格式生成故障信息表。

可选地，输出模块84包括：

执行单元841，用于执行测试用例集，并输出测试结果；

预期单元842，用于在测试数据库中获取测试策略的预期结果；

分析单元843，用于分析测试结果和预期结果，以获取测试比对结果。

可选地，自动测试系统还包括：

样本模块85，用于获取故障样本数据，故障样本数据包括故障类型信息；

输入模块86，用于将故障类型信息输入到预设的测试模型，得到初始测试用例；

生成模块88，用于根据初始测试用例和预设测试策略生成测试用例集，其中，测试用例集为组合的至少一个初始测试用例；

存储模块88，用于将初始测试用例和测试用例集存储在测试数据库。

关于上述实施例中自动测试系统，其中各个模块/单元执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。

为解决上述技术问题，本申请实施例还提供计算机设备。具体请参阅图9，图9为本实施例计算机设备基本结构框图。

所述计算机设备9包括通过系统总线相互通信连接存储器91、处理器92、网络接口93。需要指出的是，图中仅示出了具有组件91-93的计算机设备9，但是应理解的是，并不要求实施所有示出的组件，可以替代的实施更多或者更少的组件。其中，本技术领域技术人员可以理解，这里的计算机设备是一种能够按照事先设定或存储的指令，自动进行数值计算和/或信息处理的设备，其硬件包括但不限于微处理器、专用集成电路(ApplicationSpecific Integrated Circuit，ASIC)、可编程门阵列(Field－Programmable GateArray，FPGA)、数字处理器(Digital Signal Processor，DSP)、嵌入式设备等。

所述计算机设备可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。所述计算机设备可以与用户通过键盘、鼠标、遥控器、触摸板或声控设备等方式进行人机交互。

所述存储器91至少包括一种类型的可读存储介质，所述可读存储介质包括闪存、硬盘、多媒体卡、卡型存储器(例如，SD或D界面显示存储器等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘等。在一些实施例中，所述存储器91可以是所述计算机设备9的内部存储单元，例如该计算机设备9的硬盘或内存。在另一些实施例中，所述存储器91也可以是所述计算机设备9的外部存储设备，例如该计算机设备9上配备的插接式硬盘，智能存储卡(Smart Media Card,SMC)，安全数字(Secure Digital,SD)卡，闪存卡(Flash Card)等。当然，所述存储器91还可以既包括所述计算机设备9的内部存储单元也包括其外部存储设备。本实施例中，所述存储器91通常用于存储安装于所述计算机设备9的操作系统和各类应用软件，例如自动测试方法的程序代码等。此外，所述存储器91还可以用于暂时地存储已经输出或者将要输出的各类数据。

所述处理器92在一些实施例中可以是中央处理器(Central Processing Unit，CPU)、控制器、微控制器、微处理器、或其他数据处理芯片。该处理器92通常用于控制所述计算机设备9的总体操作。本实施例中，所述处理器92用于运行所述存储器91中存储的程序代码或者处理数据，例如运行所述自动测试方法的程序代码。

所述网络接口93可包括无线网络接口或有线网络接口，该网络接口93通常用于在所述计算机设备9与其他电子设备之间建立通信连接。

本申请还提供了另一种实施方式，即提供一种计算机可读存储介质，所述计算机可读存储介质存储有界面显示程序，所述自动测试系统程序可被至少一个处理器执行，以使所述至少一个处理器执行如上述的自动测试方法的步骤。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本申请各个实施例所述的方法。

显然，以上所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例，附图中给出了本申请的较佳实施例，但并不限制本申请的专利范围。本申请可以以许多不同的形式来实现，相反地，提供这些实施例的目的是使对本申请的公开内容的理解更加透彻全面。尽管参照前述实施例对本申请进行了详细的说明，对于本领域的技术人员来而言，其依然可以对前述各具体实施方式所记载的技术方案进行修改，或者对其中部分技术特征进行等效替换。凡是利用本申请说明书及附图内容所做的等效结构，直接或间接运用在其他相关的技术领域，均同理在本申请专利保护范围之内。

Claims (10)

1.一种自动测试方法，其特征在于，包括：

获取故障特征；

在预设的测试数据库中匹配与所述故障特征对应的测试策略和所述测试策略指向的测试用例集；

执行所述测试用例集，以获取测试比对结果；

根据所述测试比对结果输出测试报告。

2.根据权利要求1所述的自动测试方法，其特征在于，所述在预设的测试数据库中匹配与所述故障特征对应的测试策略和所述测试策略指向的测试用例集包括：

在所述测试数据库中识别与所述故障特征对应的所述测试策略，每个所述测试策略包括至少一个故障特征；

获取所述故障特征对应的故障信息表；

根据所述故障信息表和所述测试策略生成所述测试用例集。

3.根据权利要求2所述的自动测试方法，其特征在于，所述获取所述故障特征对应的故障信息表包括：

若接收到自动获取请求，则根据所述故障特征对应的描述信息自动生成故障信息表；

若接收到所述故障特征对应的输入信息，则将所述输入信息按照预设的格式生成所述故障信息表。

4.根据权利要求1所述的自动测试方法，其特征在于，所述在预设的测试数据库中匹配与所述故障特征对应的测试策略和所述测试策略指向的测试用例集之前，所述方法还包括：

获取故障样本数据，所述故障样本数据包括故障类型信息；

将所述故障类型信息输入到预设的测试模型，得到初始测试用例；

根据所述初始测试用例和预设测试策略生成测试用例集，其中，所述测试用例集为组合的至少一个所述初始测试用例；

将所述初始测试用例和所述测试用例集存储在所述测试数据库。

5.根据权利要求1所述的自动测试方法，其特征在于，所述执行所述测试用例集，以获取测试比对结果包括：

执行所述测试用例集，并输出测试结果；

在所述测试数据库中获取所述测试策略的预期结果；

分析所述测试结果和所述预期结果，以获取所述测试比对结果。

6.一种自动测试系统，其特征在于，包括：

获取模块，用于获取故障特征；

匹配模块，用于在预设的测试数据库中匹配与所述故障特征对应的测试策略和所述测试策略指向的测试用例集；

执行模块，用于执行所述测试用例集，以获取测试比对结果；

输出模块，用于根据所述测试比对结果输出测试报告。

7.根据权利要求6所述的自动测试系统，其特征在于，所述匹配模块包括：

识别单元，用于在所述测试数据库中识别与所述故障特征对应的所述测试策略，每个所述测试策略包括至少一个故障特征；

获取单元，用于获取所述故障特征对应的故障信息表；

生成单元，用于根据所述故障信息表和所述测试策略生成所述测试用例集。

8.根据权利要求6所述的自动测试系统，其特征在于，所述自动测试系统还包括：

样本模块，用于获取故障样本数据，所述故障样本数据包括故障类型信息；

输入模块，用于将所述故障类型信息输入到预设的测试模型，得到初始测试用例；

生成模块，用于根据所述初始测试用例和预设测试策略生成测试用例集，其中，所述测试用例集为组合的至少一个所述初始测试用例；

存储模块，用于将所述初始测试用例和所述测试用例集存储在所述测试数据库。

9.一种计算机设备，包括存储器和处理器，所述存储器中存储有计算机程序，所述处理器执行所述计算机程序时实现如权利要求1至5中任一项所述的自动测试方法的步骤。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至5中任一项所述的自动测试方法的步骤。

Images