CN111459843A - 一种应用于风控决策引擎的决策流测试方法及装置 - Google Patents

Abstract

本发明提供了一种应用于风控决策引擎的决策流测试方法及装置，能够在不影响调用决策流正常执行以及调用设备获取第一执行结果的前提下并行执行多条测试决策流，并生成用于对比调用决策流的第一执行结果和测试决策流的第二执行结果的测试分析报表，从而使得调用设备根据测试分析报表和第一执行结果对调用决策流和测试决策流的权重进行权重分配以实现对调用决策流和测试决策流的权重调整和配置，这样能够减少配置调用决策流的耗时。

Description

一种应用于风控决策引擎的决策流测试方法及装置

技术领域

本发明涉及风控决策处理技术领域，具体而言，涉及一种应用于风控决策引擎的决策流测试方法及装置。

背景技术

在一些风控业务场景下，需要对接收到的业务数据进行风控决策处理得到业务数据对应的决策执行结果，以便于后续业务的顺利开展。在对业务数据进行风控决策处理时，决策流的准确性至关重要，因此，为业务数据配备准确、可信的决策流是确保风控业务场景正常运转的关键。一般而言，在对决策流进行选取时，通常采用以下方法进行：

（1）配置一条线上决策流，通过线上决策流执行用户请求并保存执行流水；

（2）将某个时间段的执行流水离线导出，并使用导出的执行流水中的决策执行参数调用测试决策流执行用户请求；

（3）将上述两条决策流对应的执行结果进行比较，如果测试决策流的准确度和可信度较高，则选取测试决策流进行业务处理，如果线上决策流的准确度和可信度较高，则重新上线回滚到线上决策流。

然而上述选取决策流的方式会耗费大量的时间成本。

发明内容

为了改善上述问题，本发明提供了一种应用于风控决策引擎的决策流测试方法及装置。

本发明实施例的第一方面，提供了一种应用于风控决策引擎的决策流测试方法，应用于与调用设备通信的风控决策引擎，所述方法包括：

预先配置针对目标业务需求的多条初始决策流；

将所述多条初始决策流中的其中一条决策流确定为调用决策流，其他决策流确定为测试决策流；其中，每条测试决策流预先分配有执行概率；

在检测到所述调用设备发送的针对所述目标业务需求的执行请求时，执行所述调用决策流并根据每条测试决策流对应的执行概率执行每条测试决策流，获得所述调用决策流对应的第一执行结果以及每条测试决策流对应的第二执行结果；

根据所述第一执行结果和所述第二执行结果生成测试分析报表并将所述测试分析报表以及所述第一执行结果发送给所述调用设备；

接收所述调用设备基于所述测试分析报表以及所述第一执行结果发送的权重分配指令，根据所述权重分配指令对所述调用决策流和每条测试决策流进行权重分配。

在一种可选的方式中，根据所述权重分配指令对所述调用决策流和每条测试决策流进行权重分配，包括：

对所述权重分配指令进行解析，得到所述权重分配指令中包括的与所述调用决策流对应的第一权重值以及与每条测试决策流对应的第二权重值；

将所述第一权重值分配给所述调用决策流得到加权调用决策流并将每个第二权重值分配给对应的测试决策流得到加权测试决策流；

其中，所述第一权重值和所述第二权重值之和为1。

在一种可选的方式中，所述方法还包括：

根据所述调用设备发送的另一执行请求执行所述加权调用决策流和所述加权测试决策流，得到所述加权调用决策流的第三执行结果以及所述加权测试决策流的第四执行结果；

根据所述第三执行结果和所述第四执行结果生成目标分析报表并将所述目标分析报表发送给所述调用设备；

根据所述加权调用决策流的第一权重值以及所述加权测试决策流的第二权重值将所述第三执行结果或所述第四执行结果发送给所述调用设备。

在一种可选的方式中，根据所述第一执行结果和所述第二执行结果生成测试分析报表，包括：

从所述第一执行结果中确定出所述调用决策流在设定时段内的第一结果参数；其中，所述第一结果参数包括第一调用量、第一通过率、第一置信区间以及第一显著度；

从所述第二执行结果中确定出所述测试决策流在所述设定时段内的第二结果参数；其中，所述第二结果参数包括第二调用量、第二通过率、第二置信区间以及第二显著度；

将所述第一结果参数和所述第二结果参数整合到预设格式的分析报表中得到所述测试分析列表。

在一种可选的方式中，所述方法还包括：

接收所述调用设备基于所述测试分析报表发送的决策流切换指令；

根据所述决策流切换指令将所述调用决策流替换为其中一条测试决策流替换成所述调用决策流，并将所述替换前的调用决策流确定为测试决策流。

本发明实施例的第二方面，提供了一种应用于风控决策引擎的决策流测试装置，应用于与调用设备通信的风控决策引擎，所述装置包括：

决策配置模块，用于预先配置针对目标业务需求的多条初始决策流；

决策确定模块，用于将所述多条初始决策流中的其中一条决策流确定为调用决策流，其他决策流确定为测试决策流；其中，每条测试决策流预先分配有执行概率；

决策执行模块，用于在检测到所述调用设备发送的针对所述目标业务需求的执行请求时，执行所述调用决策流并根据每条测试决策流对应的执行概率执行每条测试决策流，获得所述调用决策流对应的第一执行结果以及每条测试决策流对应的第二执行结果；

报表生成模块，用于根据所述第一执行结果和所述第二执行结果生成测试分析报表并将所述测试分析报表以及所述第一执行结果发送给所述调用设备；

权重分配模块，用于接收所述调用设备基于所述测试分析报表以及所述第一执行结果发送的权重分配指令，根据所述权重分配指令对所述调用决策流和每条测试决策流进行权重分配。

在一种可选的方式中，所述权重分配模块，具体用于：

对所述权重分配指令进行解析，得到所述权重分配指令中包括的与所述调用决策流对应的第一权重值以及与每条测试决策流对应的第二权重值；

将所述第一权重值分配给所述调用决策流得到加权调用决策流并将每个第二权重值分配给对应的测试决策流得到加权测试决策流；

其中，所述第一权重值和所述第二权重值之和为1。

在一种可选的方式中，

所述决策执行模块，还用于：根据所述调用设备发送的另一执行请求执行所述加权调用决策流和所述加权测试决策流，得到所述加权调用决策流的第三执行结果以及所述加权测试决策流的第四执行结果；

所述报表生成模块，还用于：根据所述第三执行结果和所述第四执行结果生成目标分析报表并将所述目标分析报表发送给所述调用设备；根据所述加权调用决策流的第一权重值以及所述加权测试决策流的第二权重值将所述第三执行结果或所述第四执行结果发送给所述调用设备。

在一种可选的方式中，所述报表生成模块，具体用于：

从所述第一执行结果中确定出所述调用决策流在设定时段内的第一结果参数；其中，所述第一结果参数包括第一调用量、第一通过率、第一置信区间以及第一显著度；

从所述第二执行结果中确定出所述测试决策流在所述设定时段内的第二结果参数；其中，所述第二结果参数包括第二调用量、第二通过率、第二置信区间以及第二显著度；

将所述第一结果参数和所述第二结果参数整合到预设格式的分析报表中得到所述测试分析列表。

在一种可选的方式中，所述装置还包括决策切换模块，用于：

接收所述调用设备基于所述测试分析报表发送的决策流切换指令；

根据所述决策流切换指令将所述调用决策流替换为其中一条测试决策流替换成所述调用决策流，并将所述替换前的调用决策流确定为测试决策流。。

在应用本申请所公开的上述方案时，首先在风控决策引擎中配置一条调用决策流和多条测试决策流，其次根据执行请求执行调用决策流和测试决策流得到调用决策流对应的第一执行结果以及测试决策流对应的第二执行结果。然后，根据第一执行结果和第二执行结果生成测试分析报表并将测试分析报表以及第一执行结果发送给调用设备。最后，接收调用设备基于测试分析报表以及第一执行结果发送的权重分配指令并根据权重分配指令对调用决策流和测试决策流进行权重分配。如此，能够在不影响调用决策流正常执行以及调用设备获取第一执行结果的前提下并行执行多条测试决策流，并生成用于对比调用决策流和测试决策流的执行结果的测试分析报表。从而使得调用设备根据测试分析报表和第一执行结果对调用决策流和测试决策流的权重进行调整，这样能够减少配置调用决策流的耗时。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本发明的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。

图1为本发明实施例所提供的一种应用于风控决策引擎的决策流测试方法的流程图。

图2为本发明实施例所提供的一种应用于风控决策引擎的决策流测试装置的功能模块框图。

图3为本发明实施例所提供的一种风控决策引擎的硬件结构示意图。

具体实施方式

为了更好的理解上述技术方案，下面通过附图以及具体实施例对本发明技术方案做详细的说明，应当理解本发明实施例以及实施例中的具体特征是对本发明技术方案的详细的说明，而不是对本发明技术方案的限定，在不冲突的情况下，本发明实施例以及实施例中的技术特征可以相互组合。

请参阅图1，为本发明实施例所提供的一种应用于风控决策引擎的决策流测试方法的流程图，所述方法可以包括以下步骤S21-步骤S25所描述的内容。

步骤S21，预先配置针对目标业务需求的多条初始决策流。

例如，假设配置FL1273、FL1274、FL1275共三条决策流。

步骤S22，将所述多条初始决策流中的其中一条决策流确定为调用决策流，其他决策流确定为测试决策流。

例如，将FL1273确定为调用决策流，将FL1274和FL1275确定为测试决策流。进一步地，每条测试决策流预先分配有执行概率。以下表为例，测试决策流FL1274和测试决策流FL1275的执行概率均为100%，表征在执行调用决策流FL1273时，会同步执行测试决策流FL1274和测试决策流FL1275。在本实施例中，测试决策流的执行结果不会反馈给调用设备，因此不会影响调用设备接收到的执行结果。

步骤S23，在检测到所述调用设备发送的针对所述目标业务需求的执行请求时，执行所述调用决策流并根据每条测试决策流对应的执行概率执行每条测试决策流，获得所述调用决策流对应的第一执行结果以及每条测试决策流对应的第二执行结果；

步骤S24，根据所述第一执行结果和所述第二执行结果生成测试分析报表并将所述测试分析报表以及所述第一执行结果发送给所述调用设备。

进一步地，上述步骤S24中，可以通过以下步骤S241-步骤S243生成测试分析报表。

步骤S241，从所述第一执行结果中确定出所述调用决策流在设定时段内的第一结果参数。

在步骤S241中所述第一结果参数包括第一调用量、第一通过率、第一置信区间以及第一显著度。

步骤S242，从所述第二执行结果中确定出所述测试决策流在所述设定时段内的第二结果参数。

在步骤S242中，所述第二结果参数包括第二调用量、第二通过率、第二置信区间以及第二显著度；

步骤S243，将所述第一结果参数和所述第二结果参数整合到预设格式的分析报表中得到所述测试分析列表。

在本实施例中，调用量可以是单条决策流的总调用次数，通过率是决策流的通过的调用次数与决策流的总调用次数之间的比值。置信区间可以通过调用决策流的通过率、测试决策流的通过率、调用决策流的总调用次数以及测试决策流的总调用次数计算得到。

进一步地，显著度可以通过基准值ZScore得到，其中，ZScore可以通过调用决策流是通过的调用数、调用决策流的总调用次数、测试决策流是通过的调用数以及测试决策流的总调用次数计算得到。

在上述基础上，如果ZScore小于0，则p-value等于 2*CDF (ZScore)；如果ZScore不小于0，则p-value等于2*(1- CDF(ZScore))。其中，p-value是显著度，CDF为标准正太分布累积分布函数。

例如，测试分析报表可以如下表所示。

步骤S25，接收所述调用设备基于所述测试分析报表以及所述第一执行结果发送的权重分配指令，根据所述权重分配指令对所述调用决策流和每条测试决策流进行权重分配。

在步骤S25中，根据所述权重分配指令对所述调用决策流和每条测试决策流进行权重分配，具体可以包括以下步骤S251和步骤S252所描述的内容。

步骤S251，对所述权重分配指令进行解析，得到所述权重分配指令中包括的与所述调用决策流对应的第一权重值以及与每条测试决策流对应的第二权重值。

步骤S252，将所述第一权重值分配给所述调用决策流得到加权调用决策流并将每个第二权重值分配给对应的测试决策流得到加权测试决策流。

在本实施例中，所述第一权重值和所述第二权重值之和为1。例如，可以为调用决策流FL1273分配第一权重值0.8，为测试决策流FL1274分配第二权重值0.2，为测试决策流FL1275分配第二权重值0。

如此，能够在不影响调用决策流正常执行以及调用设备获取第一执行结果的前提下并行执行多条测试决策流，并生成用于对比调用决策流和测试决策流的执行结果的测试分析报表。从而使得调用设备根据测试分析报表和第一执行结果对调用决策流和测试决策流的权重进行调整，这样能够减少配置调用决策流的耗时。

可以理解，通过上述权重分配，使得在后续进行决策流执行时，有20%的几率将测试决策流FL1274的第二执行结果反馈给调用设备，这样，能够提高决策流的通过率。

在上述基础上，所述方法还可以包括以下步骤S26-步骤S28所描述的内容。

步骤S26，根据所述调用设备发送的另一执行请求执行所述加权调用决策流和所述加权测试决策流，得到所述加权调用决策流的第三执行结果以及所述加权测试决策流的第四执行结果。

步骤S27，根据所述第三执行结果和所述第四执行结果生成目标分析报表并将所述目标分析报表发送给所述调用设备。

步骤S28，根据所述加权调用决策流的第一权重值以及所述加权测试决策流的第二权重值将所述第三执行结果或所述第四执行结果发送给所述调用设备。

可以理解，通过执行上述步骤S26-步骤S28，能够基于权重分配后的决策流继续进行业务处理，然后将执行结果和目标分析报表反馈给调用设备，以供调用设备继续进行权重分配。这样，能够基于目标分析报表不断地进行业务验证，并调整调用决策流和测试决策流的权重，减少因决策流策略发布造成的损失。

例如，如果目标分析报表表征测试决策流FL1274的通过率高于调用决策流FL1273的通过率，则可以将测试决策流FL1274的第二权重值调整为0.5，将调用决策流FL1273的第一权重值调整为0.5。这样，可以逐步调整测试决策流和调用决策流的权重值，实现业务的平滑过渡。

在上述基础上，所述方法还可以包括以下步骤S291和步骤S292所描述的内容。

步骤S291，接收所述调用设备基于所述测试分析报表发送的决策流切换指令。

步骤S292，根据所述决策流切换指令将所述调用决策流替换为其中一条测试决策流替换成所述调用决策流，并将所述替换前的调用决策流确定为测试决策流。

例如，可以将测试决策流FL1274作为调用决策流，并将之前的调用决策流FL1273作为测试决策流，这样，在基于FL1274进行业务处理时，能够提高通过率，减少因决策流策略发布造成的损失。

此外，测试分析报表可以根据设定时段内的执行结果生成，因而能够灵活地生成测试分析报表，便于调用设备基于测试分析报表进行业务验证和分析。

在上述基础上，请结合参阅图2，提供了与上述决策流测试方法对应的决策流测试装置200的功能模块框图，所述决策流测试装置200包括决策配置模块210、决策确定模块220、决策执行模块230、报表生成模块240和权重分配模块250。

所述决策配置模块210用于预先配置针对目标业务需求的多条初始决策流；

所述决策确定模块220用于将所述多条初始决策流中的其中一条决策流确定为调用决策流，其他决策流确定为测试决策流；其中，每条测试决策流预先分配有执行概率；

所述决策执行模块230用于在检测到所述调用设备发送的针对所述目标业务需求的执行请求时，执行所述调用决策流并根据每条测试决策流对应的执行概率执行每条测试决策流，获得所述调用决策流对应的第一执行结果以及每条测试决策流对应的第二执行结果；

所述报表生成模块240用于根据所述第一执行结果和所述第二执行结果生成测试分析报表并将所述测试分析报表以及所述第一执行结果发送给所述调用设备；

所述权重分配模块250用于接收所述调用设备基于所述测试分析报表以及所述第一执行结果发送的权重分配指令，根据所述权重分配指令对所述调用决策流和每条测试决策流进行权重分配。

在一种可替换的实施方式中，所述权重分配模块250，具体用于：

对所述权重分配指令进行解析，得到所述权重分配指令中包括的与所述调用决策流对应的第一权重值以及与每条测试决策流对应的第二权重值；

将所述第一权重值分配给所述调用决策流得到加权调用决策流并将每个第二权重值分配给对应的测试决策流得到加权测试决策流；

其中，所述第一权重值和所述第二权重值之和为1。

在一种可替换的实施方式中，

所述决策执行模块230，还用于：根据所述调用设备发送的另一执行请求执行所述加权调用决策流和所述加权测试决策流，得到所述加权调用决策流的第三执行结果以及所述加权测试决策流的第四执行结果；

所述报表生成模块240，还用于：根据所述第三执行结果和所述第四执行结果生成目标分析报表并将所述目标分析报表发送给所述调用设备；根据所述加权调用决策流的第一权重值以及所述加权测试决策流的第二权重值将所述第三执行结果或所述第四执行结果发送给所述调用设备。

在一种可替换的实施方式中，所述报表生成模块240，具体用于：

从所述第一执行结果中确定出所述调用决策流在设定时段内的第一结果参数；其中，所述第一结果参数包括第一调用量、第一通过率、第一置信区间以及第一显著度；

从所述第二执行结果中确定出所述测试决策流在所述设定时段内的第二结果参数；其中，所述第二结果参数包括第二调用量、第二通过率、第二置信区间以及第二显著度；

将所述第一结果参数和所述第二结果参数整合到预设格式的分析报表中得到所述测试分析列表。

在一种可替换的实施方式中，所述装置还包括决策切换模块260，用于：

接收所述调用设备基于所述测试分析报表发送的决策流切换指令；

根据所述决策流切换指令将所述调用决策流替换为其中一条测试决策流替换成所述调用决策流，并将所述替换前的调用决策流确定为测试决策流。

关于上述功能模块的说明请参阅对步骤S21-步骤S28以及步骤S291和步骤S292的描述，在此不作更多说明。

请结合参阅图3，为决策流测试装置200所在的风控决策引擎300的硬件结构示意图，风控决策引擎300包括互相之间通信的处理器310和存储器320，所述处理器310用于从所述存储器320中获取计算机程序，并执行所述计算机程序以实现上述的决策流测试方法。

综上，在本实施例所提供的上述方案中，能够在不影响调用决策流正常执行以及调用设备获取第一执行结果的前提下并行执行多条测试决策流，并生成用于对比调用决策流和测试决策流的执行结果的测试分析报表。从而使得调用设备根据测试分析报表和第一执行结果对调用决策流和测试决策流的权重进行灵活的线上调整，这样能够减少配置调用决策流的耗时。

以上仅为本申请的实施例而已，并不用于限制本申请。对于本领域技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本申请的权利要求范围之内。

Claims (10)

1.一种应用于风控决策引擎的决策流测试方法，其特征在于，应用于与调用设备通信的风控决策引擎，所述方法包括：

预先配置针对目标业务需求的多条初始决策流；

将所述多条初始决策流中的其中一条决策流确定为调用决策流，其他决策流确定为测试决策流；其中，每条测试决策流预先分配有执行概率；

在检测到所述调用设备发送的针对所述目标业务需求的执行请求时，执行所述调用决策流并根据每条测试决策流对应的执行概率执行每条测试决策流，获得所述调用决策流对应的第一执行结果以及每条测试决策流对应的第二执行结果；

根据所述第一执行结果和所述第二执行结果生成测试分析报表并将所述测试分析报表以及所述第一执行结果发送给所述调用设备；

接收所述调用设备基于所述测试分析报表以及所述第一执行结果发送的权重分配指令，根据所述权重分配指令对所述调用决策流和每条测试决策流进行权重分配。

2.根据权利要求1所述的决策流测试方法，其特征在于，根据所述权重分配指令对所述调用决策流和每条测试决策流进行权重分配，包括：

对所述权重分配指令进行解析，得到所述权重分配指令中包括的与所述调用决策流对应的第一权重值以及与每条测试决策流对应的第二权重值；

将所述第一权重值分配给所述调用决策流得到加权调用决策流并将每个第二权重值分配给对应的测试决策流得到加权测试决策流；

其中，所述第一权重值和所述第二权重值之和为1。

3.根据权利要求2所述的决策流测试方法，其特征在于，所述方法还包括：

根据所述调用设备发送的另一执行请求执行所述加权调用决策流和所述加权测试决策流，得到所述加权调用决策流的第三执行结果以及所述加权测试决策流的第四执行结果；

根据所述第三执行结果和所述第四执行结果生成目标分析报表并将所述目标分析报表发送给所述调用设备；

根据所述加权调用决策流的第一权重值以及所述加权测试决策流的第二权重值将所述第三执行结果或所述第四执行结果发送给所述调用设备。

4.根据权利要求1所述的决策流测试方法，其特征在于，根据所述第一执行结果和所述第二执行结果生成测试分析报表，包括：

从所述第一执行结果中确定出所述调用决策流在设定时段内的第一结果参数；其中，所述第一结果参数包括第一调用量、第一通过率、第一置信区间以及第一显著度；

从所述第二执行结果中确定出所述测试决策流在所述设定时段内的第二结果参数；其中，所述第二结果参数包括第二调用量、第二通过率、第二置信区间以及第二显著度；

将所述第一结果参数和所述第二结果参数整合到预设格式的分析报表中得到所述测试分析列表。

5.根据权利要求1所述的决策流测试方法，其特征在于，所述方法还包括：

接收所述调用设备基于所述测试分析报表发送的决策流切换指令；

根据所述决策流切换指令将所述调用决策流替换为其中一条测试决策流替换成所述调用决策流，并将所述替换前的调用决策流确定为测试决策流。

6.一种应用于风控决策引擎的决策流测试装置，其特征在于，应用于与调用设备通信的风控决策引擎，所述装置包括：

决策配置模块，用于预先配置针对目标业务需求的多条初始决策流；

决策确定模块，用于将所述多条初始决策流中的其中一条决策流确定为调用决策流，其他决策流确定为测试决策流；其中，每条测试决策流预先分配有执行概率；

决策执行模块，用于在检测到所述调用设备发送的针对所述目标业务需求的执行请求时，执行所述调用决策流并根据每条测试决策流对应的执行概率执行每条测试决策流，获得所述调用决策流对应的第一执行结果以及每条测试决策流对应的第二执行结果；

报表生成模块，用于根据所述第一执行结果和所述第二执行结果生成测试分析报表并将所述测试分析报表以及所述第一执行结果发送给所述调用设备；

权重分配模块，用于接收所述调用设备基于所述测试分析报表以及所述第一执行结果发送的权重分配指令，根据所述权重分配指令对所述调用决策流和每条测试决策流进行权重分配。

7.根据权利要求6所述的决策流测试装置，其特征在于，所述权重分配模块，具体用于：

对所述权重分配指令进行解析，得到所述权重分配指令中包括的与所述调用决策流对应的第一权重值以及与每条测试决策流对应的第二权重值；

将所述第一权重值分配给所述调用决策流得到加权调用决策流并将每个第二权重值分配给对应的测试决策流得到加权测试决策流；

其中，所述第一权重值和所述第二权重值之和为1。

8.根据权利要求7所述的决策流测试装置，其特征在于，

所述决策执行模块，还用于：根据所述调用设备发送的另一执行请求执行所述加权调用决策流和所述加权测试决策流，得到所述加权调用决策流的第三执行结果以及所述加权测试决策流的第四执行结果；

所述报表生成模块，还用于：根据所述第三执行结果和所述第四执行结果生成目标分析报表并将所述目标分析报表发送给所述调用设备；根据所述加权调用决策流的第一权重值以及所述加权测试决策流的第二权重值将所述第三执行结果或所述第四执行结果发送给所述调用设备。

9.根据权利要求6所述的决策流测试装置，其特征在于，所述报表生成模块，具体用于：

从所述第一执行结果中确定出所述调用决策流在设定时段内的第一结果参数；其中，所述第一结果参数包括第一调用量、第一通过率、第一置信区间以及第一显著度；

从所述第二执行结果中确定出所述测试决策流在所述设定时段内的第二结果参数；其中，所述第二结果参数包括第二调用量、第二通过率、第二置信区间以及第二显著度；

将所述第一结果参数和所述第二结果参数整合到预设格式的分析报表中得到所述测试分析列表。

10.根据权利要求6所述的决策流测试装置，其特征在于，所述装置还包括决策切换模块，用于：

接收所述调用设备基于所述测试分析报表发送的决策流切换指令；

根据所述决策流切换指令将所述调用决策流替换为其中一条测试决策流替换成所述调用决策流，并将所述替换前的调用决策流确定为测试决策流。

Images