CN116957813A - 风控策略测试方法、装置、电子设备及可读存储介质 - Google Patents
风控策略测试方法、装置、电子设备及可读存储介质 Download PDFInfo
- Publication number
- CN116957813A CN116957813A CN202311207547.4A CN202311207547A CN116957813A CN 116957813 A CN116957813 A CN 116957813A CN 202311207547 A CN202311207547 A CN 202311207547A CN 116957813 A CN116957813 A CN 116957813A
- Authority
- CN
- China
- Prior art keywords
- control strategy
- wind control
- data
- historical
- test
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012360 testing method Methods 0.000 title claims abstract description 218
- 238000011217 control strategy Methods 0.000 title claims abstract description 203
- 238000004088 simulation Methods 0.000 claims abstract description 50
- 238000012216 screening Methods 0.000 claims abstract description 42
- 238000000034 method Methods 0.000 claims description 41
- 238000004590 computer program Methods 0.000 claims description 3
- 230000000694 effects Effects 0.000 abstract description 10
- 230000003993 interaction Effects 0.000 description 16
- 230000008569 process Effects 0.000 description 13
- 238000010586 diagram Methods 0.000 description 11
- 238000004891 communication Methods 0.000 description 10
- 238000012545 processing Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 5
- 230000009471 action Effects 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000001960 triggered effect Effects 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 238000013102 re-test Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 238000010998 test method Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 238000013075 data extraction Methods 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
- G06Q40/06—Asset management; Financial planning or analysis
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Finance (AREA)
- Accounting & Taxation (AREA)
- Development Economics (AREA)
- Operations Research (AREA)
- Game Theory and Decision Science (AREA)
- Human Resources & Organizations (AREA)
- Entrepreneurship & Innovation (AREA)
- Economics (AREA)
- Marketing (AREA)
- Strategic Management (AREA)
- Technology Law (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本申请公开了风控策略测试方法、装置、电子设备及可读存储介质。响应针对目标风控策略的测试指令,获得目标风控策略的配置信息,配置信息包括目标风控策略的节点描述信息以及所需使用测试数据的筛选条件;基于配置信息从镜像系统存储的历史数据中获得测试数据,其中,每条测试数据包括历史入参数据和历史执行结果;针对每条测试数据,将测试数据中的历史入参数据作为目标风控策略的入参数据,得到模拟执行结果;基于模拟执行结果和历史执行结果生成对比结果;基于对比结果生成目标风控策略的测试结果。基于本申请公开的方案,能够确定出风控策略的可靠性以及是否达到预期的业务效果。
Description
技术领域
本申请属于数据处理技术领域,尤其涉及一种风控策略测试方法、装置、电子设备及可读存储介质。
背景技术
金融机构为了降低风险,需要针对各个业务环节设置风控策略。随着业务的发展和需求的变化,需要对风控策略进行升级迭代。为了验证风控策略的可靠性以及是否达到预期的业务效果,需要在上线风控策略之前,对其进行测试。如何对待上线的风控策略进行测试,是本领域技术人员面临的技术难题。
发明内容
有鉴于此,本申请的目的在于提供一种风控策略测试方法、装置、电子设备及可读存储介质。
为实现上述目的,本申请提供如下技术方案:
第一方面,本申请提供一种风控策略测试方法,应用于测试系统,包括:
响应针对目标风控策略的测试指令,获得所述目标风控策略的配置信息,所述配置信息包括所述目标风控策略的节点描述信息以及所需使用测试数据的筛选条件;
基于所述配置信息从镜像系统存储的历史数据中获得测试数据,其中,每条所述测试数据包括历史入参数据和历史执行结果;
针对每条测试数据,将所述测试数据中的历史入参数据作为所述目标风控策略的入参数据,得到模拟执行结果;
基于所述模拟执行结果和所述历史执行结果生成对比结果;
基于所述对比结果生成所述目标风控策略的测试结果。
可选的,所述节点描述信息包括:渠道信息、金融产品信息和业务节点信息;
所述基于所述配置信息从镜像系统存储的历史数据中获得测试数据,包括:从所述镜像系统存储的历史数据中,筛选出与所述节点描述信息所包含的渠道信息、金融产品信息和业务节点信息匹配的备选数据;基于所述配置信息所包含的筛选条件对所述备选数据进行筛选,得到测试数据。
可选的,所述目标风控策略的配置信息还包括统计指标;
所述基于所述模拟执行结果和所述历史执行结果生成对比结果,包括:基于各条测试数据对应的模拟执行结果,生成每个所述统计指标的预测值;基于所述各条测试数据所包含的历史执行结果,生成每个所述统计指标的历史值;针对每个统计指标,确定出所述统计指标的预测值相对于历史值的差异。
可选的,所述基于所述对比结果生成所述目标风控策略的测试结果,包括:
获得针对所述目标风控策略的期望目标,所述期望目标包括所述统计指标的期望区间;
针对每个统计指标,判断所述统计指标的预测值相对于历史值的差异是否位于相应的期望区间。
可选的,所述基于所述模拟执行结果和所述历史执行结果生成对比结果,还包括:
针对每条测试数据,比较所述测试数据所包含的历史执行结果和所述测试数据对应的模拟执行结果,确定出两者之间的差异。
可选的,针对所述目标风控策略的测试指令的生成过程,包括:
响应风控策略查询指令,基于所述风控策略查询指令中的关键字获得备选风控策略,显示所述备选风控策略的标识;
响应选择操作,将被选中的备选风控策略确定为所述目标风控策略,显示所述目标风控策略的标识和相应的测试启动控件,其中,所述测试启动控件被选中时,生成针对所述目标风控策略的测试指令。
可选的,在上述方法的基础上,还包括:
对业务数据库的从库存储的数据进行筛选,将筛选出的数据同步至所述镜像系统。
第二方面,本申请提供一种风控策略测试装置,包括:
配置信息获取模块,用于响应针对目标风控策略的测试指令,获得所述目标风控策略的配置信息,所述配置信息包括所述目标风控策略的节点描述信息以及所需使用测试数据的筛选条件;
测试数据获取模块,用于基于所述配置信息从镜像系统存储的历史数据中获得测试数据,其中,每条所述测试数据包括历史入参数据和历史执行结果;
策略执行模块,用于针对每条测试数据,将所述测试数据中的历史入参数据作为所述目标风控策略的入参数据,得到模拟执行结果;
对比模块,用于基于所述模拟执行结果和所述历史执行结果生成对比结果;
分析模块,用于基于所述对比结果生成所述目标风控策略的测试结果。
第三方面,本申请提供一种电子设备,包括处理器和存储器;
所述存储器,用于存储程序;
所述处理器,用于执行所述程序,实现如上述任意一种方法的各个步骤。
第四方面,本申请提供一种可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时,实现如上述任意一种方法的各个步骤。
由此可见,本申请的有益效果为:
本申请公开的风控策略测试方法,响应针对目标风控策略的测试指令,获得目标风控策略的配置信息,该配置信息包括目标风控策略的节点描述信息以及所需使用测试数据的筛选条件,之后基于该配置信息从镜像系统存储的历史数据中获得测试数据(每条测试数据包括历史入参数据和历史执行结果),针对每条测试数据,将该测试数据中的历史入参数据作为目标风控策略的入参数据,得到模拟执行结果,之后基于模拟执行结果和历史执行结果生成对比结果,基于对比结果生成目标风控策略的测试结果。可以看到,本申请公开的风控策略测试方法,利用镜像系统存储的历史数据(已发布的风控策略使用和产生的真实数据),对待上线的风控策略进行测试,测试过程所使用的入参数据、以及生成测试结果所使用的参考数据均为真实数据,因此能够准确地确定出待上线的风控策略是否可靠,以及是否达到预期的业务效果。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请公开的一种风控策略测试方法的流程图;
图2为本申请公开的用于新建风控策略的配置信息的一个人机交互界面的示意图;
图3为本申请公开的用于新建风控策略的配置信息的另一个人机交互界面的示意图;
图4为本申请公开的用于查询风控策略的人机交互界面的示意图;
图5为本申请公开的用于显示备选风控策略的人机交互界面的示意图;
图6为本申请公开的用于显示批量测试数据的对比结果的人机交互界面的示意图;
图7为本申请公开的用于显示指标差异的人机交互界面的示意图;
图8为本申请公开的用于显示单条测试数据的对比结果的人机交互界面的示意图;
图9为本申请公开的一种风控策略测试装置的结构示意图;
图10为本申请公开的一种电子设备的硬件结构图。
具体实施方式
本申请提供一种风控策略测试方法、装置、电子设备及可读存储介质,利用历史数据对待上线的风控策略进行测试,以确定风控策略的可靠性以及是否达到预期的业务效果。
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
参见图1,图1为本申请公开的一种风控策略测试方法的流程图。该方法由测试系统执行,该测试系统可以为服务器或者服务器集群,也可以为其他电子设备。该方法包括步骤S101至步骤S105。
S101:响应针对目标风控策略的测试指令,获得目标风控策略的配置信息。
本申请中将待测试的风控策略称为目标风控策略。其中,目标风控策略的配置信息包括目标风控策略的节点描述信息以及所需使用测试数据的筛选条件。
在一种可能的实现方式中,针对目标风控策略的测试指令可以是:技术人员针对目标风控策略配置的定时任务被触发时产出的指令。
在另一种可能的实现方式中,针对目标风控策略的测试指令的生成过程,包括:
第一,响应风控策略查询指令,基于风控策略查询指令中的关键字获得备选风控策略,显示备选风控策略的标识;
第二,响应选择操作,将被选中的备选风控策略确定为目标风控策略,显示目标风控策略的标识和相应的测试启动控件,其中,该测试启动控件被选中时,生成针对目标风控策略的测试指令。
基于上述第二种实现方式,技术人员输入风控策略查询指令,就可以触发测试系统显示相应的备选风控策略的标识,之后技术人员在备选风控策略中进行选择操作,测试系统将被选中的备选风控策略确定为目标风控策略,显示目标风控策略的标识和测试启动控件,当测试启动控件被选中时,生成针对目标风控策略的测试指令。
需要说明的是,测试系统支持针对风控策略的精确查询和模糊查询。
每个风控策略具备策略标识,各个风控策略的策略标识具有唯一性。如果风控策略查询指令中的关键字为风控策略的策略标识,那么测试系统执行精确查询;如果风控策略查询指令中的关键词为除策略标识之外的其他关键字,那么测试系统执行模糊查询。
可选的,风控策略的策略标识包括:在新建风控策略的配置信息过程中,针对风控策略设置的风控策略编号和/或风控策略名称。用于模糊查询风控策略的关键字包括但不限于以下关键字中的一种或多种:渠道信息、金融产品信息、业务节点信息、生成方式、创建人员信息、创建时间和是否已测试的信息。
S102:基于配置信息从镜像系统存储的历史数据中获得测试数据。
其中,每条测试数据包括历史入参数据和历史执行结果。
需要说明的是,镜像系统存储的历史数据是:已发布的风控策略(包括在线上运行的风控策略,还可以包括已下线的风控策略)在执行过程中使用和产生的数据。每条历史数据包括:输入风控策略的数据(即入参数据),本申请中称为历史入参数据;已发布的风控策略基于入参数据生成的执行结果,本申请中称为历史执行结果。相应的,测试数据包括历史入参数据和历史执行结果。
这里以申请授信环节的风控策略为例:入参数据包括用户标识、申请编号(可以理解为业务序列号或者流水号)、用户期望的授信额度、贷款期数等业务数据,还包括用于确定该用户的风险等级的风险数据;执行结果包括是否批准贷款、授信额度和利率。
S103:针对每条测试数据,将测试数据中的历史入参数据作为目标风控策略的入参数据,得到模拟执行结果。
也就是说,针对多条测试数据中的每条测试数据,分别执行:将该测试数据中的历史入参数据作为目标风控策略的入参数据,执行目标风控策略,得到执行结果,为了与已发布的风控策略生成的执行结果相区分,将执行目标风控策略生成的执行结果称为模拟执行结果。
S104:基于模拟执行结果和历史执行结果生成对比结果。
在一种可能的实现方式中,目标风控策略的配置信息还包括统计指标。
相应的,基于模拟执行结果和历史执行结果生成对比结果,采用如下方案:
第一,基于各条测试数据对应的模拟执行结果,生成每个统计指标的预测值;
第二,基于各条测试数据所包含的历史执行结果,生成每个统计指标的历史值;
第三,针对每个统计指标,确定出该统计指标的预测值相对于历史值的差异。
这里仍以申请授信环节的风控策略为例。
执行申请授信环节的风控策略生成的执行结果包括:是否批准贷款、授信额度和利率。假设获取1000条测试数据对目标风控策略进行测试。预先配置的统计指标包括:通过率、拒绝率、平均授信额度和平均定价(也就是平均利率)。
对前述1000条测试数据对应的模拟执行结果中的是否批准贷款信息进行统计,以便生成通过率的预测值以及拒绝率的预测值;对前述1000条测试数据对应的模拟执行结果中的授信额度进行统计,以便生成平均授信额度的预测值;对前述1000条测试数据对应的模拟执行结果中的利率进行统计,以便生成平均定价的预测值。
对前述1000条测试数据所包含历史执行结果中的是否批准贷款信息进行统计,以便生成通过率的历史值以及拒绝率的历史值;对前述1000条测试数据所包含历史执行结果中的授信额度进行统计,以便生成平均授信额度的历史值;对前述1000条测试数据所包含历史执行结果中的利率进行统计,以便生成平均定价的历史值。
确定出通过率的预测值相对于历史值的差异,确定出拒绝率的预测值相对于历史值的差异,确定出平均授信额度的预测值相对于历史值的差异,确定出平均定价的预测值相对于历史值的差异。
在另一种可能的实现方式中,基于模拟执行结果和历史执行结果生成对比结果,还包括:
针对每条测试数据,比较该条测试数据所包含的历史执行结果和该条测试数据对应的模拟执行结果,确定出两者之间的差异。
例如:比较测试数据所包含的历史执行结果和该条测试数据对应的模拟执行结果,确定模拟执行结果相对于历史执行结果是否新增字段、是否删减字段,是否有字段值不同的字段。进一步的,如果有新增字段,则输出新增字段的字段名,如果有删减字段,则输出删减的字段的字段名,如果有字段值不同的字段,则输出相应的字段名,还可以输出字段值。
S105:基于对比结果生成目标风控策略的测试结果。
在一种可能的实现方式中,基于对比结果生成目标风控策略的测试结果,采用如下方案:
第一,获得针对目标风控策略的期望目标,其中,期望目标包括统计指标的期望区间;
第二,针对每个统计指标,判断统计指标的预测值相对于历史值的差异是否位于相应的期望区间。
这里仍以申请授信环节的风控策略为例。
预先配置的统计指标包括:通过率、拒绝率、平均授信额度和平均定价(也就是平均利率)。针对目标风控策略的对比结果包括:通过率的预测值相对于历史值的差异、拒绝率的预测值相对于历史值的差异、平均授信额度的预测值相对于历史值的差异、以及平均定价的预测值相对于历史值的差异。期望目标包括:通过率的期望区间、拒绝率的期望区间、平均授信额度的期望区间以及平均定价的期望区间。
判断通过率的预测值相对于历史值的差异是否位于通过率的期望区间,判断拒绝率的预测值相对于历史值的差异是否位于拒绝率的期望区间,判断平均授信额度的预测值相对于历史值的差异是否位于平均授信额度的期望区间,判断平均定价的预测值相对于历史值的差异是否位于平均定价的期望区间。技术人员基于前述的判断结果,可以确定出目标风控策略是否可靠、是否达到预期的业务效果。例如:当有预设数量的统计指标的预测值相对于历史值的差异位于相应的期望区间,则确定目标风控策略可靠,且达到预期的业务效果。
实施中,除了上述公开的基于对比结果生成目标风控策略的测试结果外,还可以基于模拟执行结果生成目标风控策略的测试结果。具体包括:
获得针对统计指标的目标区间;
针对每个统计指标,判断该统计指标的预测值是否位于相应的目标区间。
这里仍以申请授信环节的风控策略为例。
预先配置的统计指标包括:通过率、拒绝率、平均授信额度和平均定价(也就是平均利率)。基于各条测试数据对应的模拟执行结果,生成通过率的预测值、拒绝率的预测值、平均授信额度的预测值和平均定价的预测值;判断通过率的预测值是否位于通过率的目标区间,判断拒绝率的预测值是否位于拒绝率的目标区间,判断平均授信额度的预测值是否位于平均授信额度的目标区间,判断平均定价的预测值是否位于平均定价的目标区间。技术人员基于前述的判断结果,可以确定出目标风控策略是否可靠、是否达到预期的业务效果。例如:当有预设数量的统计指标的预测值位于相应的目标区间,则确定目标风控策略可靠,且达到预期的业务效果。
本申请公开的风控策略测试方法,响应针对目标风控策略的测试指令,获得目标风控策略的配置信息,该配置信息包括目标风控策略的节点描述信息以及所需使用测试数据的筛选条件,之后基于该配置信息从镜像系统存储的历史数据中获得测试数据(每条测试数据包括历史入参数据和历史执行结果),针对每条测试数据,将该测试数据中的历史入参数据作为目标风控策略的入参数据,得到模拟执行结果,之后模拟执行结果和历史执行结果生成对比结果,基于对比结果生成目标风控策略的测试结果。可以看到,本申请公开的风控策略测试方法,利用镜像系统存储的历史数据(已发布的风控策略使用和产生的真实数据),对待上线的风控策略进行测试,测试过程所使用的入参数据、以及生成测试结果所使用的参考数据均为真实数据,因此能够准确地确定出待上线的风控策略是否可靠,以及是否达到预期的业务效果。
在一种可能的实现方式中,目标风控策略的节点描述信息包括:渠道信息、金融产品信息和业务节点信息。
相应的,基于配置信息从镜像系统存储的历史数据中获得测试数据,采用如下方案:
第一,从镜像系统存储的历史数据中,筛选出与节点描述信息所包含的渠道信息、金融产品信息和业务节点信息匹配的备选数据;
第二,基于配置信息所包含的筛选条件对备选数据进行筛选,得到测试数据。
其中,渠道信息用于指示业务数据的来源,例如:渠道包括但不限于自营渠道(渠道标识可以设置为20002)、固定输入渠道(渠道标识可以设置为10002)和分成渠道(渠道标识可以设置为30002)。金融产品信息用于指示业务数据是在哪个金融产品产生的。业务节点信息用于指示业务数据是在哪个业务节点产生的,业务节点包括但不限于:授信审批、贷款发放、客户还款、贷款额度释放。
需要说明的是,筛选条件包括一个或多个条件组,每个条件组包括一个或者多个条件,同一个条件组内的多个条件之间可以为“与”或者“或”的逻辑关系,多个条件组之间可以为“与”或者“或”的逻辑关系。
可选的,筛选条件包括针对入参数据的条件组和/或针对执行结果的条件组。
可选的,筛选条件还包括针对时间的条件组。
其中,针对入参数据的条件组可以包括一个或者多个条件,多个条件之间可以为“与”或者“或”的逻辑关系;针对执行结果的条件组可以包括一个或者多个条件,多个条件之间可以为“与”或者“或”的逻辑关系;针对时间的条件组可以包括一个或者多个条件,多个条件之间可以为“与”或者“或”的逻辑关系。
技术人员针对风控策略设置配置信息的过程中,根据业务场景需求设置筛选条件。相应的,基于节点描述信息从镜像系统存储的历史数据中筛选出备选历史数据后,进一步根据筛选条件(具体为针对入参数据的条件组和/或针对执行结果的条件组,还可以包括针对时间的条件组),从备选历史数据中筛选出测试数据。
这里以申请授信环节的风控策略为例,待上线的风控策略的配置信息中的筛选条件包括:针对入参数据的条件组、针对执行结果的条件组、以及针对时间的条件组。例如,针对入参数据的条件组包括关于客户的平均月收入的条件(如大于或等于10000元,这仅是一个举例)、关于客户每月所需还贷总金额的条件(如小于或等于4000元,这仅是一个举例);针对执行结果的条件组包括关于授信额度的条件(如大于或等于8000元,且小于或等于12000元,这仅是一个举例)、关于定价的条件(如年利率大于或等于3%,且小于或等于4.5%,这仅是一个举例);针对时间的条件组包括关于授信通过时间的条件(如在2022年7月1日至2022年12月31日之间,这仅是一个举例);前述的各个条件为“与”的逻辑关系,那么从备选数据中筛选出满足上述条件的数据,筛选出的数据即为测试数据。
本申请上述公开的基于配置信息从镜像系统存储的历史数据中获得测试数据的方案,首先根据配置信息中的节点描述信息,从镜像系统存储的历史数据中筛选出备选数据,之后进一步根据配置信息中的筛选条件对备选数据进行筛选,得到针对目标风控策略的测试数据。基于该方案,技术人员可以根据业务场景需求设置筛选条件,使得获得的测试数据与业务场景需求相匹配,从而使得测试结果更加准确。
进一步的,筛选条件包括针对入参数据的条件组和/或针对执行结果的条件组,还可以包括针对时间的条件组。技术人员根据业务场景需求设置筛选条件,从而根据入参数据和/或执行结果(还可以包括时间),在备选数据中筛选出满足个性化业务场景需求的数据作为测试数据。
例如,技术人员更关注待发布的风控策略对高价值用户的影响,那么技术人员在针对该风控策略设置筛选条件的过程中,可以设置针对入参数据的条件组,且针对入参数据的条件组包括能够表征客户的经济状况的条件(例如客户的平均月收入)。
在本申请的另一个实施例中,还包括:对业务数据库的从库存储的数据进行筛选,将筛选出的数据同步至镜像系统。
实施中,测试系统可以按照预设时间间隔执行上述操作,实现将符合条件的数据同步至镜像系统,以便后续基于镜像系统存储的数据(也就是历史数据)对待上线的风控策略(也就是目标风控策略)进行测试。需要说明的是,正常情况下,业务数据库和其从库的数据是一致的。在上述实施例中,测试系统对从库存储的数据进行筛选,再将筛选出的数据同步至镜像系统,可以避免对业务数据库的频繁访问,提高业务数据库的安全性。
作为一种可选的实施方式,业务数据库基于主从同步机制将数据同步至从库;利用Canal组件获取从库的Binlog日志,并对Binlog日志进行解析,以便获得从库的增量数据,将从库的增量数据存储至中间件(例如:中间件采用kafka,当然这仅是中间件的一个举例);异步读取中间件存储的数据,将符合条件(例如:条件为预设时间段内产生的数据,当然这仅是一个举例)的数据复制转发到镜像系统。
Binlog日志也称为binary log日志,是一种数据库增量日志,用于记录数据库的变更操作,包括插入操作、更新操作和删除操作。Binlog日志用于数据恢复、数据同步和数据库备份等操作。Canal组件用于获取Binlog日志,通过解析Binlog日志,提供增量数据的订阅和消费。Kafka是一种高吞吐量的分布式发布订阅消息系统。
本申请上述公开的将业务数据同步至镜像系统的方案,具有以下优势:
高可用性:基于主从同步机制,可以实现业务数据库的高可用性,具体的,当业务数据库出现故障时,可以由从库接管业务数据库的工作,保证系统的可用性。
数据一致性:利用Canal组件获取从库的Binlog日志,并解析Binlog日志,以获得从库的增量数据,将增量数据存储至中间件,可以保证从库和中间件数据的一致性。
灵活性高:利用Canal组件解析Binlog日志,可以灵活地支持多种数据抽取和转换操作,从而满足不同的业务需求。
数据处理效率高:Kafka是一种高吞吐量的分布式发布订阅消息系统,将Kafka作为中间件,实现了数据的分布式处理,并且可以并行处理数据,提高数据处理效率。
可扩展性:将Kafka作为中间件,可以方便地扩展节点,从而可以随着数据量的增加而扩展处理能力,保证系统的可扩展性。
安全性:通过将符合条件的数据复制并转发到镜像系统,可以保证数据的安全性,并且,也可以避免对业务数据库的频繁访问,提高系统的安全性。
下面以申请授信环节的风控策略(在下文中简称为授信风控策略)为例,对本申请公开的方案进行更为详细的描述。
第一,技术人员新建待测试的授信风控策略的配置信息。
技术人员输入新建指令后,测试系统输出如图2和图3所示的人机交互界面,技术人员在图2所述的人机交互界面输入授信风控策略的基础信息,在图3所示的人机交互界面输入授信风控策略所需使用测试数据的筛选条件。图2和图3所示人机交互界面中的输入控件包括输入框控件和下拉框控件。
在图3所示的人机交互界面中,技术人员可以通过名称为“满足以下所有条件组”选择控件和名称为“满足以下任意条件组”选择控件设置多个条件组之间的逻辑关系,技术人员可以通过下拉框控件设置同一条件组中的多个条件之间的逻辑关系,技术人员可以通过删除条件控件删除条件组包含的条件,技术人员可以通过增加条件控件在条件组中增加条件。在图3所示的人机交互界面中,还设置有用于添加单个条件的控件和用于添加条件组的控件。另外,技术人员需要上传授信风控策略,或者提供授信风控策略的访问路径。
第二,技术人员启动针对授信风控策略的测试。
测试系统输出如图4所示的人机交互界面,如果技术人员输入风控策略的风控策略编号或者风控策略名称,则触发测试系统执行精确查询,如果技术人员输入其他关键字,则触发测试系统执行模糊查询。图4所示人机交互界面中的输入控件包括输入框控件和下拉框控件。
图5所示的人机交互界面呈现有备选风控策略的相关信息。如果技术人员选中某个风控策略对应的名称为“测试”的控件,则生成针对该风控策略的测试指令,测试系统响应该测试指令,执行本申请上文公开的测试方法,生成对比结果。
如果技术人员选中某个风控策略对应的名称为“修改”的控件,则测试系统输出如图2和图3所示的人机交互界面,技术人员可以修改该风控策略的配置信息。
需要说明的是,如果某个风控策略已执行过测试,那么针对该风控策略显示名称为“重新测试”的控件和名称为“查看明细”的控件。如果技术人员选中名称为“重新测试”的控件,则测试系统再次执行本申请上文公开的测试方法,生成对比结果。如果技术人员选中名称为“查看明细”的控件,则测试系统显示最近一次测试产生的对比结果。
图6为用于显示批量测试数据的对比结果的人机交互界面的示意图,当技术人员选中图6所示人机交互界面中名称为“统计结果”的控件时,测试系统显示如图7所示的人机交互界面。当技术人员在图6所示人机交互界面中,选中对比结果所在列中名称为“点击查看”的控件时,测试系统显示如图8所示的单条测试数据的对比结果。当技术人员在图6所示人机交互界面中,选中历史执行结果所在列中名称为“点击查看”的控件时,测试系统显示相应的历史执行结果。当技术人员在图6所示人机交互界面中,选中模拟执行结果所在列中名称为“点击查看”的控件时,测试系统显示相应的模拟执行结果。
参见图9,图9为本申请公开的一种风控策略测试装置的结构示意图。该风控策略测试装置包括:
配置信息获取模块10,用于响应针对目标风控策略的测试指令,获得目标风控策略的配置信息,其中,配置信息包括目标风控策略的节点描述信息以及所需使用测试数据的筛选条件;
测试数据获取模块20,用于基于配置信息从镜像系统存储的历史数据中获得测试数据,其中,每条测试数据包括历史入参数据和历史执行结果;
策略执行模块30,用于针对每条测试数据,将测试数据中的历史入参数据作为目标风控策略的入参数据,得到模拟执行结果;
对比模块40,用于基于模拟执行结果和历史执行结果生成对比结果;
分析模块50,用于基于对比结果生成目标风控策略的测试结果。
本申请公开的风控策略测试装置,利用镜像系统存储的历史数据(已发布的风控策略使用和产生的真实数据),对待上线的风控策略进行测试,测试过程所使用的入参数据、以及生成测试结果所使用的参考数据均为真实数据,因此能够准确地确定出待上线的风控策略是否可靠,以及是否达到预期的业务效果。
可选的,节点描述信息包括渠道信息、金融产品信息和业务节点信息。
相应的,测试数据获取模块20具体用于:从镜像系统存储的历史数据中,筛选出与节点描述信息所包含的渠道信息、金融产品信息和业务节点信息匹配的备选数据;基于配置信息所包含的筛选条件对备选数据进行筛选,得到测试数据。
可选的,筛选条件包括针对入参数据的条件组和/或针对执行结果的条件组。
可选的,筛选条件还包括针对时间的条件组。
可选的,目标风控策略的配置信息还包括统计指标。
相应的,对比模块40具体用于:基于各条测试数据对应的模拟执行结果,生成每个统计指标的预测值;基于各条测试数据所包含的历史执行结果,生成每个统计指标的历史值;针对每个统计指标,确定出统计指标的预测值相对于历史值的差异。
可选的,对比模块40还用于:针对每条测试数据,比较测试数据所包含的历史执行结果和测试数据对应的模拟执行结果,确定出两者之间的差异。
可选的,分析模块50具体用于:获得针对目标风控策略的期望目标,期望目标包括统计指标的期望区间;针对每个统计指标,判断统计指标的预测值相对于历史值的差异是否位于相应的期望区间。
可选的,分析模块50可以替换为,用于:获得针对统计指标的目标区间;针对每个统计指标,判断该统计指标的预测值是否位于相应的目标区间。
可选的,本申请公开的风控策略测试装置还包括数据同步模块。数据同步模块用于:对业务数据库的从库存储的数据进行筛选,将筛选出的数据同步至所述镜像系统。
可选的,数据同步模块具体用于:利用Canal组件获取从库的Binlog日志,并对Binlog日志进行解析,以便获得从库的增量数据,将从库的增量数据存储至中间件;异步读取中间件存储的数据,将符合条件的数据复制转发到镜像系统。
本申请还提供一种电子设备。
参见图10,图10示出了电子设备的硬件结构,该电子设备包括:处理器100、存储器200、通信接口300和通信总线400。
在本申请实施例中,处理器100、存储器200、通信接口300、通信总线400的数量为至少一个,且处理器100、存储器200和通信接口300通过通信总线400完成相互间的通信。通信总线400可以是ISA(Industry Standard Architecture,工业标准体系结构)总线、PCI(Peripheral Component Interconnect,外设部件互连标准)总线或EISA(ExtendedIndustry Standard Architecture,扩展工业标准结构)总线等。所述总线可以分为地址总线、数据总线、控制总线等。
需要说明的是,本领域技术人员可以理解,图10中示出的电子设备的结构并不构成对电子设备的限定,电子设备可以包括比图10所示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
下面结合图10对电子设备的各个构成部件进行具体的介绍。
处理器100是电子设备的控制中心,利用各种接口和线路连接整个电子设备的各个部分,通过运行或执行存储在存储器200内的软件程序和/或模块,以及调用存储在存储器200内的数据,执行电子设备的各种功能和处理数据,从而对电子设备进行整体监控。
处理器100可能是一个中央处理器(Central Processing Unit,CPU),或者是特定集成电路ASIC(Application Specific Integrated Circuit),或者是被配置成实施本申请实施例的一个或多个集成电路等;
存储器200可能包含内存,例如高速随机存取存储器(Random-Access Memory,RAM)和只读存储器(Read-Only Memory,ROM),也可能还包括大容量存储设备,例如至少1个磁盘存储器等。
其中,存储器200存储有程序,处理器100可调用存储器存储的程序,所述程序用于:
响应针对目标风控策略的测试指令,获得所述目标风控策略的配置信息,所述配置信息包括所述目标风控策略的节点描述信息以及所需使用测试数据的筛选条件;
基于所述配置信息从镜像系统存储的历史数据中获得测试数据,其中,每条所述测试数据包括历史入参数据和历史执行结果;
针对每条测试数据,将所述测试数据中的历史入参数据作为所述目标风控策略的入参数据,得到模拟执行结果;
基于所述模拟执行结果和所述历史执行结果生成对比结果;
基于所述对比结果生成所述目标风控策略的测试结果。
可选的,所述程序的细化功能和扩展功能可参照上文描述。
本申请实施例还提供一种可读存储介质,该可读存储介质可存储有适于处理器执行的程序,所述程序用于:
响应针对目标风控策略的测试指令,获得所述目标风控策略的配置信息,所述配置信息包括所述目标风控策略的节点描述信息以及所需使用测试数据的筛选条件;
基于所述配置信息从镜像系统存储的历史数据中获得测试数据,其中,每条所述测试数据包括历史入参数据和历史执行结果;
针对每条测试数据,将所述测试数据中的历史入参数据作为所述目标风控策略的入参数据,得到模拟执行结果;
基于所述模拟执行结果和所述历史执行结果生成对比结果;
基于所述对比结果生成所述目标风控策略的测试结果。
可选的,所述程序的细化功能和扩展功能可参照上文描述。
需要说明的是,说明书中的各个实施例记载的技术特征可以相互替代或组合,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同或相似的部分互相参见即可。本申请各实施例方法中的步骤可以根据实际需要进行顺序调整、合并和删减。本申请各实施例装置及设备中的模块和子模块可以根据实际需要进行合并、划分和删减。
本申请所提供的几个实施例中,应该理解到,所揭露的设备,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,模块或子模块的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个子模块或模块可以结合或者可以集成到另一个模块,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或模块的间接耦合或通信连接,可以是电性,机械或其它的形式。
作为分离部件说明的模块或子模块可以是或者也可以不是物理上分开的,作为模块或子模块的部件可以是或者也可以不是物理模块或子模块,即可以位于一个地方,或者也可以分布到多个网络模块或子模块上。可以根据实际的需要选择其中的部分或者全部模块或子模块来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能模块或子模块可以集成在一个处理模块中,也可以是各个模块或子模块单独物理存在,也可以两个或两个以上模块或子模块集成在一个模块中。上述集成的模块或子模块既可以采用硬件的形式实现,也可以采用软件功能模块或子模块的形式实现。
还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。各个实施例中的各技术特征可以排列组合构成新的实施例。对于实施例公开的风控策略测试装置、电子设备及可读存储介质而言,由于其与实施例公开的风控策略测试方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下,在其它实施例中实现。因此,本申请将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (10)
1.一种风控策略测试方法,应用于测试系统,其特征在于,所述方法包括:
响应针对目标风控策略的测试指令,获得所述目标风控策略的配置信息,所述配置信息包括所述目标风控策略的节点描述信息以及所需使用测试数据的筛选条件;
基于所述配置信息从镜像系统存储的历史数据中获得测试数据,其中,每条所述测试数据包括历史入参数据和历史执行结果;
针对每条测试数据,将所述测试数据中的历史入参数据作为所述目标风控策略的入参数据,得到模拟执行结果;
基于所述模拟执行结果和所述历史执行结果生成对比结果;
基于所述对比结果生成所述目标风控策略的测试结果。
2.根据权利要求1所述的方法,其特征在于,所述节点描述信息包括:渠道信息、金融产品信息和业务节点信息;
所述基于所述配置信息从镜像系统存储的历史数据中获得测试数据,包括:从所述镜像系统存储的历史数据中,筛选出与所述节点描述信息所包含的渠道信息、金融产品信息和业务节点信息匹配的备选数据;基于所述配置信息所包含的筛选条件对所述备选数据进行筛选,得到测试数据。
3.根据权利要求1或2所述的方法,其特征在于,所述目标风控策略的配置信息还包括统计指标;
所述基于所述模拟执行结果和所述历史执行结果生成对比结果,包括:基于各条测试数据对应的模拟执行结果,生成每个所述统计指标的预测值;基于所述各条测试数据所包含的历史执行结果,生成每个所述统计指标的历史值;针对每个统计指标,确定出所述统计指标的预测值相对于历史值的差异。
4.根据权利要求3所述的方法,其特征在于,所述基于所述对比结果生成所述目标风控策略的测试结果,包括:
获得针对所述目标风控策略的期望目标,所述期望目标包括所述统计指标的期望区间;
针对每个统计指标,判断所述统计指标的预测值相对于历史值的差异是否位于相应的期望区间。
5.根据权利要求3所述的方法,其特征在于,所述基于所述模拟执行结果和所述历史执行结果生成对比结果,还包括:
针对每条测试数据,比较所述测试数据所包含的历史执行结果和所述测试数据对应的模拟执行结果,确定出两者之间的差异。
6.根据权利要求1所述的方法,其特征在于,针对所述目标风控策略的测试指令的生成过程,包括:
响应风控策略查询指令,基于所述风控策略查询指令中的关键字获得备选风控策略,显示所述备选风控策略的标识;
响应选择操作,将被选中的备选风控策略确定为所述目标风控策略,显示所述目标风控策略的标识和相应的测试启动控件,其中,所述测试启动控件被选中时,生成针对所述目标风控策略的测试指令。
7.根据权利要求1所述的方法,其特征在于,还包括:
对业务数据库的从库存储的数据进行筛选,将筛选出的数据同步至所述镜像系统。
8.一种风控策略测试装置,其特征在于,包括:
配置信息获取模块,用于响应针对目标风控策略的测试指令,获得所述目标风控策略的配置信息,所述配置信息包括所述目标风控策略的节点描述信息以及所需使用测试数据的筛选条件;
测试数据获取模块,用于基于所述配置信息从镜像系统存储的历史数据中获得测试数据,其中,每条所述测试数据包括历史入参数据和历史执行结果;
策略执行模块,用于针对每条测试数据,将所述测试数据中的历史入参数据作为所述目标风控策略的入参数据,得到模拟执行结果;
对比模块,用于基于所述模拟执行结果和所述历史执行结果生成对比结果;
分析模块,用于基于所述对比结果生成所述目标风控策略的测试结果。
9.一种电子设备,其特征在于,包括处理器和存储器;
所述存储器,用于存储程序;
所述处理器,用于执行所述程序,实现如权利要求1至7中任一项所述的方法的各个步骤。
10.一种可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时,实现如权利要求1至7中任一项所述的方法的各个步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311207547.4A CN116957813B (zh) | 2023-09-19 | 2023-09-19 | 风控策略测试方法、装置、电子设备及可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311207547.4A CN116957813B (zh) | 2023-09-19 | 2023-09-19 | 风控策略测试方法、装置、电子设备及可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN116957813A true CN116957813A (zh) | 2023-10-27 |
CN116957813B CN116957813B (zh) | 2023-12-15 |
Family
ID=88449516
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311207547.4A Active CN116957813B (zh) | 2023-09-19 | 2023-09-19 | 风控策略测试方法、装置、电子设备及可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116957813B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117194277A (zh) * | 2023-11-08 | 2023-12-08 | 北京轻松怡康信息技术有限公司 | 保险产品测试数据生成方法、装置、设备及存储介质 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115794090A (zh) * | 2022-11-16 | 2023-03-14 | 深圳依时货拉拉科技有限公司 | 风控测试的方法、装置、计算机设备及计算机可读存储介质 |
CN116342256A (zh) * | 2023-03-30 | 2023-06-27 | 上海数禾信息科技有限公司 | 风控策略测试方法、装置、计算机设备和存储介质 |
-
2023
- 2023-09-19 CN CN202311207547.4A patent/CN116957813B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115794090A (zh) * | 2022-11-16 | 2023-03-14 | 深圳依时货拉拉科技有限公司 | 风控测试的方法、装置、计算机设备及计算机可读存储介质 |
CN116342256A (zh) * | 2023-03-30 | 2023-06-27 | 上海数禾信息科技有限公司 | 风控策略测试方法、装置、计算机设备和存储介质 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117194277A (zh) * | 2023-11-08 | 2023-12-08 | 北京轻松怡康信息技术有限公司 | 保险产品测试数据生成方法、装置、设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN116957813B (zh) | 2023-12-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10452625B2 (en) | Data lineage analysis | |
CN111221726A (zh) | 一种测试数据生成方法、装置、存储介质和智能设备 | |
US8799854B2 (en) | Reusing software development assets | |
CN116957813B (zh) | 风控策略测试方法、装置、电子设备及可读存储介质 | |
CN111694615B (zh) | 数据配置的方法、装置、设备及存储介质 | |
CN112612813A (zh) | 一种测试数据的生成方法和装置 | |
CN114138651A (zh) | 测试数据的生成方法及装置 | |
CN117851404A (zh) | 一种基于自配置的报表生成方法、装置、介质和设备 | |
CN112990769A (zh) | 业务处理方法、装置、电子设备和存储介质 | |
CN113138906A (zh) | 一种调用链数据采集方法、装置、设备及存储介质 | |
CN113010208A (zh) | 一种版本信息的生成方法、装置、设备及存储介质 | |
CN112732242A (zh) | 宽表加工脚本的生成方法及装置 | |
CN117033417A (zh) | 服务数据的处理方法、介质和计算机设备 | |
CN116228402A (zh) | 一种金融征信特征仓库技术支持系统 | |
CN114756224A (zh) | 一种活动执行方法及装置 | |
CN112348403B (zh) | 风控模型构建方法、装置及电子设备 | |
CN116089490A (zh) | 数据分析方法、装置、终端和存储介质 | |
CN112256978B (zh) | 一种基于数据模型的数据处理方法、装置、介质 | |
CN114721945A (zh) | 基于图数据库的分配方法及其装置、电子设备及存储介质 | |
CN114691882A (zh) | 多源数据实时计算方法、装置、存储介质和设备 | |
CN114493352A (zh) | 一种决策流程的处理方法及系统 | |
CN109840213B (zh) | 一种gui测试的测试数据创建方法、装置、终端及存储介质 | |
CN113868141A (zh) | 数据测试方法、装置、电子设备及存储介质 | |
CN112199269A (zh) | 一种数据处理的方法以及相关装置 | |
CN116703184B (zh) | 数据处理方法、数据处理装置、电子设备及可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |