CN113468211A - 报表校验方法、装置、电子设备及存储介质 - Google Patents

Abstract

本发明提供一种报表校验方法、装置、电子设备及存储介质，对于待校验的一个报表，将其作为当前报表校验其中的非法数据；校验通过则对该当前报表设置报送标记；校验未通过，则溯源当前报表的源表，进而由相关的数据负责人对非法数据进行订正，并通过报表加工系统基于订正数据对当前报表再加工，在接收到指标已订正的指令的情况下，则将报表加工系统所返回的再加工后的报表作为当前报表继续返回校验。基于本发明，能够实现海量报表校验，提高报表报送的通过率。

Description

报表校验方法、装置、电子设备及存储介质

技术领域

本发明涉及软件技术领域，更具体地说，涉及一种报表校验方法、装置、电子设备、及存储介质。

背景技术

随着国家金融数据监管治理水平的不断提高，监管常态化日益普遍，非现场监管的场景也越来越多。

目前的监管报送机制存在流程缺陷和技术空白。即，报送的报表在报送前，其质量没有统一量化的审查机制，很多问题需要等到人行等监管机构检查完毕才能暴露出来，此时补救为时已晚。

发明内容

有鉴于此，为解决上述问题，本发明提供一种报表校验方法、装置、电子设备、及存储介质，技术方案如下：

本发明一方面提供一种报表校验方法，所述方法包括：

获取待校验的第一报表，并将所述第一报表作为当前报表；

校验所述当前报表中的非法数据；

如果校验到所述非法数据，溯源所述非法数据所在的源表，并在接收到用于指示已订正的指令的情况下，获取报表加工系统所返回的第二报表，所述第二报表是所述报表加工系统基于所述非法数据在所述源表中对应的订正数据对所述当前报表再加工得到的；

将所述第二报表作为当前报表，返回执行所述校验所述当前报表中的非法数据，这一步骤；

如果未校验到所述非法数据，对所述当前报表设置报送标志。

优选的，所述获取待校验的第一报表，包括：

接收所述报表加工系统下发的报表；

基于强化学习的时序差分算法对所述报表加工系统所下发的报表进行分析，以确定报表执行计划；

按照所述报表执行计划确定所述第一报表。

优选的，所述获取待校验的第一报表，还包括：

响应紧急调度指令，以将所述紧急调度指令所指示的报表插队所述报表执行计划中。

优选的，所述方法还包括：

如果校验到所述非法数据，生成所述当前报表的错误日志并输出。

优选的，所述方法还包括：

响应前端控制系统针对目标报表的报送指令；

如果所述报送指令的类型为普通报送指令，在所述目标报表被设置有报送标记的情况下，对所述目标报表执行报送操作；

如果所述报送指标的类型为强制报送指令，对所述目标报表进行报送操作。

本发明另一方面提供一种报表校验装置，所述装置包括：

校验触发模块，用于获取待校验的第一报表，并将所述第一报表作为当前报表；

报表校验模块，用于校验所述当前报表中的非法数据；如果校验到所述非法数据，溯源所述非法数据所在的源表，并在接收到用于指示已订正的指令的情况下，获取报表加工系统所返回的第二报表，所述第二报表是所述报表加工系统基于所述非法数据在所述源表中对应的订正数据对所述当前报表再加工得到的；如果未校验到所述非法数据，对所述当前报表设置报送标志；

所述校验触发模块，还用于将所述第二报表作为当前报表。

优选的，用于获取待校验的第一报表的所述校验触发模块，具体用于：

接收所述报表加工系统下发的报表；基于强化学习的时序差分算法对所述报表加工系统所下发的报表进行分析，以确定报表执行计划；按照所述报表执行计划确定所述第一报表。

优选的，所述装置还包括：

报表报送模块，用于响应前端控制系统针对目标报表的报送指令；如果所述报送指令的类型为普通报送指令，在所述目标报表被设置有报送标记的情况下，对所述目标报表执行报送操作；如果所述报送指标的类型为强制报送指令，对所述目标报表进行报送操作。

本发明另一方面提供一种电子设备，所述电子设备包括：至少一个存储器和至少一个处理器；所述存储器存储有程序，所述处理器调用所述存储器存储的程序，所述程序用于实现任意一项所述的报表校验方法。

本发明另一方面提供一种存储介质，所述存储介质中存储有计算机可执行指令，所述计算机可执行指令用于执行任意一项所述的报表校验方法。

相较于现有技术，本发明实现的有益效果为：

本发明提供一种报表校验方法、装置、电子设备及存储介质，对于待校验的一个报表，将其作为当前报表校验其中的非法数据；校验通过则对该当前报表设置报送标记；校验未通过，则溯源当前报表的源表，进而由相关的数据负责人对非法数据进行订正，并通过报表加工系统基于订正数据对当前报表再加工，在接收到指标已订正的指令的情况下，则将报表加工系统所返回的再加工后的报表作为当前报表继续返回校验。基于本发明，能够实现海量报表校验，提高报表报送的通过率。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。

图1为本发明实施例提供的报表校验方法的方法流程图；

图2为本发明实施例提供的报表校验方法的部分方法流程图；

图3为本发明实施例提供的报表校验方法的另一方法流程图；

图4为本发明实施例提供的报表校验装置的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

为使本发明的上述目的、特征和优点能够更加明显易懂，下面结合附图和具体实施方式对本发明作进一步详细的说明。

现阶段，向人行等监管机构报送报表的工作，特别是在非现场检查场景中，存在流程缺陷和技术空白。即：报送的报表在报送前，其质量没有统一量化的审查机制，很多问题需要等到人行等监管机构检查完毕才能暴露出来，此时补救为时已晚。

报表校验看似一个简单的字符串判定问题，其本质却是一个大数据与多边协调的综合难题——每日上千万条记录需要校验，这对我行服务器是一个巨大的考验，与此同时，合理合规地订正报表中的非法数据需要与业务部门、数据仓库、报表加工系统精准协调。而本发明则可以解决海量数据校验与多部门协调的技术难题。

本发明实施例提供一种报表校验方法，该方法的方法流程图如图1所示，包括如下步骤：

S10，获取待校验的第一报表，并将第一报表作为当前报表。

本发明实施例中，可以将报表加工系统下发的每个报表依次作为第一报表进行后续的处理。

为实现承担报表的存储任务，报表加工系统所下发的报表存入数据库。因此，可以向数据库发出针对某报表校验申请，获得数据库针对该校验申请返回的报表，该报表即第一报表。

具体实现过程中，步骤S10“获取待校验的第一报表”可以采用如下步骤，方法流程图如图2所示：

S101，接收报表加工系统下发的报表。

S102，基于强化学习的时序差分算法对报表加工系统所下发的报表进行分析，以确定报表执行计划。

S103，按照报表执行计划确定第一报表。

本发明实施例中，对于报表加工系统所下发的报表，可以使用强化学习的时序差分算法，对报表的数据规模、历史数据质量、规则更新频度、监管频度等因素进行分析评估来动态生成当日的报表执行计划。例如，对于报表维度的审核，若监管频度不高、历史数据质量良好则适当降低校验频度，如从每日校验较低为每周抽检；对于字段维度的审核，若某些字段数据历史数据质量良好，规则复杂，则适当降低校验频度，如从每日校验较低为每周抽检。基于此，就可以有效降低对大算力的依赖性。

需要说明的是，时序差分算法是一种无模型的强化学习算法，其集成动态规划和蒙特卡罗方法的优点，从而对状态值和策略进行预测。

另外，本发明还提供手动调度前端界面以及紧急调度响应功能。目的是为了应对紧急情况下插队校验并报送的场景。即对于将手动调度前端界面中所指定的报表产生紧急调度指令，进而通过响应该指令能够将所指定的报表插队到报表执行计划中，当然，该紧急调度指令还可以指定插队位置等。

另外，报表执行计划中规定需要校验的报表、以及报表被校验时的次序。因此，基于该报表执行计划，可以依次选择一个报表作为待校验的第一报表。

S20，校验当前报表中的非法数据。

本发明实施例中，为检测当前报表的合法性，从校验规则池中调取与当前报表相匹配的校验规则来进行校验工作。具体的，业务人员可在前端界面进行校验规则池的维护：同一批次同一报表的规则需有至少2人录入，由至少1名业务主管签署准出，准出后的规则进入校验规则池，待各项条件满足后启用。

需要说明的是，本发明实施例中所有校验操作的校验规则均来自于校验规则池。

S30，如果校验到非法数据，溯源非法数据所在的源表，并在接收到用于指示已订正的指令的情况下，获取报表加工系统所返回的第二报表，第二报表是报表加工系统基于非法数据在源表中对应的订正数据对当前报表再加工得到的。

本发明实施例中，如果当前报表被校验到存在非法数据，即确定该当前报表未能通过校验，由此即执行以下操作：1)停止该报表报送人行流程；2)进行后续的数据溯源和数据复核。

关于数据溯源，通过血缘分析对当前报表中的非法数据进行溯源分析，从源头上得到加工出该非法数据的有关内容，即确定该非法数据涉及的源表和对应的数据负责人，通知该数据负责人源表存在非法数据，通知报表负责人本轮报送的报表未通过校验，通知报表加工系统本轮报送的报表未通过校验并请求保存历史数据。

当然，一旦当前报表校验未通过，可以针对其生成相应的错误日志并输出，而在通知报表负责人本轮报送的报表未通过校验的同时，还可以同时通知其错误日志的查找路径，以供其审核。

进一步，数据负责人承担非法数据的订正任务，数据负责人对源表内容修订后，将订正数据上传到数据仓库。报表加工系统基于数据仓库中的订正数据重新加工当前报表得到第二报表。进而，一旦接收到数据负责人输入的用于指示已订正的指令，可以从报表加工系统处获得该第二报表，从而继续将该第二报表作为当前报表进行校验。

若仍未能通过校验，则1)停止该报表报送人行流程；2)进行后续的数据溯源和数据复核。

S40，将第二报表作为当前报表，返回执行校验当前报表中的非法数据，这一步骤；

S50，如果未校验到非法数据，对当前报表设置报送标志。

本发明实施例中，如果当前报表在首次校验时即未被校验到存在非法数据，即对第一报表进行一次校验即确定通过校验，此时可以将表征校验通过的校验结果通知报表责任人，并确定该当前报表准出，即设置报送标记。

而如果当前报表在第N(N>1，N为正整数)次校验时才未被校验到存在非法数据，即第一报表经过N-1次再加工才通过校验，此时可以将表征校验通过的校验结果通知报表责任人、数据责任人和报表加工系统，并确定当前报表准出，即设置报送标记。

需要说明的是，对于报表责任人、数据责任人和报表加工系统所接收的通知操作，可以实现相关信息的预警，借助前端控制系统，本发明的预警支持业务人员的转发，这便于快速生成解决方案。

还需要说明的是，对于校验通过的报表，即设置有报送标记的报表，本发明实施例可以对其再处理以生成统计报表。具体的：

可以设置统计规则池，通过读取该统计规则池中的规则，读取相关的、设置有报送标记的报表，进而进行统计报表的生成操作。由于统计报表一般为特定部门业务需要，因此，为实现报表数据的保密性与合规性，统计报表仅被发送到特定部门或特定人员的邮箱处。

在其他一些实施例中，对于校验通过的报表，可以自动按照人行或其他监管机构要求的加密规则对报表进行加密，并以指定方式将加密后的报表发送到指定存放位置。在图1所示报表校验方法的基础上，还包括如下步骤，方法流程图如图3所示：

S60，响应前端控制系统针对目标报表的报送指令。

S70，如果报送指令的类型为普通报送指令，在目标报表被设置有报送标记的情况下，对目标报表执行报送操作。

S80，如果报送指标的类型为强制报送指令，对目标报表进行报送操作。

本发明实施例中，报表负责人可以通过其前端控制系统控制报表的报送流程。对于目标报表，在前端控制系统未接收到该报表的报送标志前，该报表处于强制报送模式，若报表负责人选择强制报送，在会提交强制报送指令；反之，在前端控制系统接收到该报表的报送标志后，该报表处于准许报送模式，报表负责人点击报送后，即提交普通报送指令。

进一步，响应强制报送指令时，对目标报表直接执行报送操作。对目标报表进行压缩和加密，将处理完毕的目标报表发送至人行，同时，将该系列操作记录日志、并向报表责任人反馈报送信息。此外，还将目标报表的文件信息转换为符合报送标准的安全认证信息，将该安全认证信息存储至人行指定接收位置。

响应普通报送指令时，首先对该目标报表进行报送标记的核验，在确认无误后再执行报送操作。对目标报表进行压缩和加密，将处理完毕的目标报表发送至人行，同时，将该系列操作记录日志、并向报表责任人反馈报送信息。此外，还将目标报表的文件信息转换为符合报送标准的安全认证信息，将该安全认证信息存储至人行指定接收位置。

需要说明的是，本发明还可以适应性提供银行场合的用户管理功能。具体的：

每个银行员工都首先是普通用户，支持最基础的登录功能和信息查看功能。普通用户可以向数据责任管理员和报表责任管理员提出权限升级申请。成功申请后，其身份将升级为数据责任人与报表责任人。此外，普通用户也可以向校验规则管理员提交申请成为校验规则录入员。

对于数据责任管理员和数据责任人。数据责任管理员负责管理维护数据责任人的各项信息。数据责任人除了负责解决非法数据问题外，还需要向数据责任管理员提交字段认领申请，保证所有字段均能分配到数据责任人。一般来说，报表责任人可以承担数据责任管理员角色，数据负责人也可以向报表责任管理员申请成为数据责任管理员。

对于报表责任管理员和报表责任人。报表责任管理员负责管理维护报表责任人的各项信息，由管理中心统一更新。报表责任人负责把关报表报送最后一道程序。

对于校验规则管理员和校验规则录入员。校验规则录入员可向报表责任人申请成为校验规则管理员。校验规则录入员具有录入校验规则权限，而校验规则管理员除了能够管理校验规则录入员外，还需要对录入的规则做最后的审核。

本发明在不消耗大量算力资源的情况下，实现了报表在报送前的严格校验，存在非法数据的报表也能够有完善的处理机制。报送报表质量有了质的提升。从企业维度看，本发明极大地降低了企业面临的监管风险，同时大幅度促进提高了企业的数据质量；从国家维度看，本发明响应了国家提高金融监管水平的号召，有利于国家金融系统的健康发展。

基于上述实施例提供的报表校验方法，本发明实施例则对应提供一种执行上述报表校验方法的装置，该装置的结构示意图如图4所示，包括：

校验触发模块10，用于获取待校验的第一报表，并将第一报表作为当前报表；

报表校验模块20，用于校验当前报表中的非法数据；如果校验到非法数据，溯源非法数据所在的源表，并在接收到用于指示已订正的指令的情况下，获取报表加工系统所返回的第二报表，第二报表是报表加工系统基于非法数据在源表中对应的订正数据对当前报表再加工得到的；如果未校验到非法数据，对当前报表设置报送标志；

校验触发模块10，还用于将第二报表作为当前报表。

可选的，用于获取待校验的第一报表的校验触发模块10，具体用于：

接收报表加工系统下发的报表；基于强化学习的时序差分算法对报表加工系统所下发的报表进行分析，以确定报表执行计划；按照报表执行计划确定第一报表。

可选的，校验触发模块10，还用于：

响应紧急调度指令，以将紧急调度指令所指示的报表插队报表执行计划中。

可选的，报表校验模块20，还用于：

如果校验到非法数据，生成当前报表的错误日志并输出。

可选的，上述装置还包括：

报表报送模块，用于响应前端控制系统针对目标报表的报送指令；如果报送指令的类型为普通报送指令，在目标报表被设置有报送标记的情况下，对目标报表执行报送操作；如果报送指标的类型为强制报送指令，对目标报表进行报送操作。

本发明实施例中，各模块的细化功能可以参见上述报表校验方法实施例的对应公开部分，在此不再赘述。

基于上述实施例提供的报表校验方法，本发明实施例则对应提供一种电子设备，该电子设备包括：至少一个存储器和至少一个处理器；存储器存储有程序，处理器调用存储器存储的程序，程序用于实现报表校验方法。

基于上述实施例提供的报表校验方法，本发明实施例则对应提供一种存储介质，该存储介质中存储有计算机可执行指令，计算机可执行指令用于执行报表校验方法。

以上对本发明所提供的一种报表校验方法、装置、电子设备及存储介质进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

需要说明的是，本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。

还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备所固有的要素，或者是还包括为这些过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种报表校验方法，其特征在于，所述方法包括：

获取待校验的第一报表，并将所述第一报表作为当前报表；

校验所述当前报表中的非法数据；

如果校验到所述非法数据，溯源所述非法数据所在的源表，并在接收到用于指示已订正的指令的情况下，获取报表加工系统所返回的第二报表，所述第二报表是所述报表加工系统基于所述非法数据在所述源表中对应的订正数据对所述当前报表再加工得到的；

将所述第二报表作为当前报表，返回执行所述校验所述当前报表中的非法数据，这一步骤；

如果未校验到所述非法数据，对所述当前报表设置报送标志。

2.根据权利要求1所述的方法，其特征在于，所述获取待校验的第一报表，包括：

接收所述报表加工系统下发的报表；

基于强化学习的时序差分算法对所述报表加工系统所下发的报表进行分析，以确定报表执行计划；

按照所述报表执行计划确定所述第一报表。

3.根据权利要求2所述的方法，其特征在于，所述获取待校验的第一报表，还包括：

响应紧急调度指令，以将所述紧急调度指令所指示的报表插队所述报表执行计划中。

4.根据权利要求1所述的方法，其特征在于，所述方法还包括：

如果校验到所述非法数据，生成所述当前报表的错误日志并输出。

5.根据权利要求1所述的方法，其特征在于，所述方法还包括：

响应前端控制系统针对目标报表的报送指令；

如果所述报送指令的类型为普通报送指令，在所述目标报表被设置有报送标记的情况下，对所述目标报表执行报送操作；

如果所述报送指标的类型为强制报送指令，对所述目标报表进行报送操作。

6.一种报表校验装置，其特征在于，所述装置包括：

校验触发模块，用于获取待校验的第一报表，并将所述第一报表作为当前报表；

报表校验模块，用于校验所述当前报表中的非法数据；如果校验到所述非法数据，溯源所述非法数据所在的源表，并在接收到用于指示已订正的指令的情况下，获取报表加工系统所返回的第二报表，所述第二报表是所述报表加工系统基于所述非法数据在所述源表中对应的订正数据对所述当前报表再加工得到的；如果未校验到所述非法数据，对所述当前报表设置报送标志；

所述校验触发模块，还用于将所述第二报表作为当前报表。

7.根据权利要求6所述的装置，其特征在于，用于获取待校验的第一报表的所述校验触发模块，具体用于：

接收所述报表加工系统下发的报表；基于强化学习的时序差分算法对所述报表加工系统所下发的报表进行分析，以确定报表执行计划；按照所述报表执行计划确定所述第一报表。

8.根据权利要求6所述的装置，其特征在于，所述装置还包括：

报表报送模块，用于响应前端控制系统针对目标报表的报送指令；如果所述报送指令的类型为普通报送指令，在所述目标报表被设置有报送标记的情况下，对所述目标报表执行报送操作；如果所述报送指标的类型为强制报送指令，对所述目标报表进行报送操作。

9.一种电子设备，其特征在于，所述电子设备包括：至少一个存储器和至少一个处理器；所述存储器存储有程序，所述处理器调用所述存储器存储的程序，所述程序用于实现权利要求1-5任意一项所述的报表校验方法。

10.一种存储介质，其特征在于，所述存储介质中存储有计算机可执行指令，所述计算机可执行指令用于执行权利要求1-5任意一项所述的报表校验方法。

Images