CN115760352A - 数据报送系统、方法和计算机可读存储介质 - Google Patents
数据报送系统、方法和计算机可读存储介质 Download PDFInfo
- Publication number
- CN115760352A CN115760352A CN202211541402.3A CN202211541402A CN115760352A CN 115760352 A CN115760352 A CN 115760352A CN 202211541402 A CN202211541402 A CN 202211541402A CN 115760352 A CN115760352 A CN 115760352A
- Authority
- CN
- China
- Prior art keywords
- delivery
- data
- submission
- reporting
- value table
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Financial Or Insurance-Related Operations Such As Payment And Settlement (AREA)
Abstract
本发明提供了一种数据报送系统、方法和计算机可读存储介质。所述系统包括:报送码值表管理模块,用于根据设定规则生成报送码值表的报送内容,以及根据所述设定规则新增报送内容、修改报送内容、删除报送内容,其中,所述报送码值表的报送内容包括:报送表编码、所述报送表编码对应的名称、是否需要报送;报文自动报送模块,用于根据所述报送码值表自动获取报送数据并进行上报。本发明的数据报送系统中,通过报送码值表管理模块生成既能够满足不同金融机构的上报需求,又能满足规则设定方不定期变化的上报要求的报送内容,进而通过报文自动报送模块根据包含报送内容的报送码值表自动获取报送数据进行上报,能够实现准确且高效的数据报送。
Description
技术领域
本发明涉及计算机应用技术领域,更为具体而言,涉及一种数据报送系统、方法和计算机可读存储介质。
背景技术
中国人民银行对不同的金融机构的报送数据内容要求不同,并且,中国人民银行还会因为监管要求的变动推出新的报送数据要求,目前向中国人民银行进行利率报备采用的是人工手动报送的方法,但是由于人民银行手动报送存在易出错、时效差、人工成本投入高等问题,需要一种既符合人民银行利率报备监管报送发文要求,又能够保障金融机构按期合规及时自动化的进行监管报送需求的报送技术。
发明内容
为解决上述现有技术存在的问题或部分问题,本发明实施方式提供了一种数据报送系统、方法和计算机可读存储介质,基于设定规则生成既满足不同金融机构差异的上报需求,又满足规则设定方不定期变化的上报要求的报送内容,进而根据包含报送内容的报送码值表自动获取报送数据进行上报,能够准确且高效地向规则设定方报送满足上报需求的报送数据。
根据本发明的第一方面,本发明实施方式提供了一种数据报送系统,其包括:报送码值表管理模块,用于根据设定规则生成报送码值表的报送内容,以及根据所述设定规则新增报送内容、修改报送内容、删除报送内容,其中,所述报送码值表的报送内容包括:报送表编码、所述报送表编码对应的名称、是否需要报送;报文自动报送模块,用于根据所述报送码值表自动获取报送数据并进行上报。
根据本发明上述实施方式,通过报送码值表管理模块生成既能够满足不同金融机构的上报需求,又能满足规则设定方不定期变化的上报要求的报送内容,进而根据包含报送内容的报送码值表自动获取报送数据进行上报,能够实现准确且高效的数据报送。
在本发明的一些实施方式中,所述数据报送系统还包括:系统初始化模块,用于获取初始配置信息,以及进行业务初始化验证。
在本发明的一些实施方式中,所述初始配置信息包括:数据库连接的连接信息、认证信息、加密机的接口信息;所述业务初始化验证包括:登录接口查询的初始化验证、报送窗口查询的初始化验证、业务状态查询报文的初始化验证。
根据本发明上述实施方式,通过系统初始化模块将系统内部依赖的初始配置信息去耦合,使数据报送系统面向使用方提供便捷、产品化的使用基础。
在本发明的一些实施方式中,根据所述报送码值表获取报送数据并进行上报包括:获取登录接口的token(令牌)值;如果所述token值有效,则根据所述报送码值表和报送批次进行报送窗口查询,确定当前报送批次是否可报送;如果确定所述当前批次可报送,则根据报送任务列表获取所述报送任务列表的表间并行、表内串行的报送数据并进行上报。
根据本发明上述实施方式,通过在token值有效的情况下获取报送数据,能够保证当前信息交互的有效性,同时,通过获取表间并行、表内串行的报送数据并进行上报,可以提高报送效率,并实现同一个表中多个切片的顺序上报的需求。
在本发明的一些实施方式中,所述报送数据包括消息标识和报送日志流水表,其中,所述报送日志流水表包括:报送日期、所述报送表编码和状态码。
根据本发明上述实施方式,根据报送数据中的消息标识可以有效的识别机构与规则设定方之间唯一的一条交互协议,确保出现问题时快速地定位具体的交互协议。
在本发明的一些实施方式中,所述报文自动报送模块还用于执行下述操作:当确认所述报送数据准确并再次提交所述报送数据时,将强制提交的说明文档与所述报送数据一同进行上报。
在本发明的一些实施方式中,所述数据报送系统还包括:报文报送检查模块,根据独立检查信息对所述报送数据进行校验,并将所述报送数据的校验结果和上报结果同步至订阅人员。
在本发明的一些实施方式中,所述数据报送系统还包括:报文手动报送模块,用于在确定所述报送数据存在差异时,进行手动上报。
根据本发明的第二方面,本发明实施方式提供了一种数据报送方法,其包括:根据设定规则生成报送码值表的报送内容,以及根据所述设定规则新增报送内容、修改报送内容、删除报送内容,其中,所述报送码值表的报送内容包括:报送表编码、所述报送表编码对应的中文名、是否需要报送;根据所述报送码值表自动获取报送数据并进行上报。
根据本发明上述实施方式,基于设定规则生成既能够满足不同金融机构的上报需求,又能满足规则设定方不定期变化的上报要求的报送内容,进而根据包含报送内容的报送码值表自动获取报送数据进行上报,能够实现准确且高效的数据报送。
在本发明的一些实施方式中,所述数据报送方法还包括:获取初始配置信息,以及进行业务初始化验证。
在本发明的一些实施方式中,所述初始配置信息包括:数据库连接的连接信息、认证信息、加密机的接口信息;所述业务初始化验证包括:登录接口查询的初始化验证、报送窗口查询的初始化验证、业务状态查询报文的初始化验证。
根据本发明上述实施方式,通过将系统内部依赖的初始配置信息去耦合,能够面向使用方提供便捷、产品化的使用基础。
在本发明的一些实施方式中,根据所述报送码值表获取报送数据并进行上报包括:获取登录接口的token值;如果所述token值有效,则根据所述报送码值表和报送批次进行报送窗口查询,确定当前报送批次是否可报送;如果确定所述当前批次可报送,则根据报送任务列表获取所述报送任务列表的表间并行、表内串行的报送数据并进行上报。
根据本发明上述实施方式,通过在token值有效的情况下获取报送数据,能够保证当前信息交互的有效性,同时,通过获取表间并行、表内串行的报送数据并进行上报,可以提高报送效率,并实现同一个表中多个切片的顺序上报的需求。
在本发明的一些实施方式中,所述报送数据包括消息标识和报送日志流水表,其中,所述报送日志流水表包括:报送日期、所述报送表编码和状态码。
根据本发明上述实施方式,根据报送数据中的消息标识可以有效的识别机构与规则设定方之间唯一的一条交互协议,确保出现问题时快速地定位具体的交互协议。
在本发明的一些实施方式中,所述数据报送方法还包括:当确认所述报送数据准确并再次提交所述报送数据时,将强制提交的说明文档与所述报送数据一同进行上报。
在本发明的一些实施方式中,所述数据报送方法还包括:根据独立检查信息对所述报送数据进行校验,并将所述报送数据的校验结果和上报结果同步至订阅人员。
在本发明的一些实施方式中,所述数据报送方法还包括:在确定所述报送数据存在差异时,进行手动上报。
根据本发明的第三方面,本发明实施方式提供一种计算机可读存储介质,其上存储有计算机可读指令,所述计算机可读指令被处理器执行时,使得计算机执行如下操作:所述操作包括如上任意一种实施方式所述数据报送方法所包含的步骤。
由上述可知,实施本发明提供的数据报送系统、方法和计算机可读存储介质,基于设定规则生成既能够满足不同金融机构的上报需求,又能满足规则设定方不定期变化的上报要求的报送内容,进而根据包含报送内容的报送码值表自动获取报送数据进行上报,能够实现准确且高效的数据报送,保障金融机构按期合规地进行高质量的监管报送。
附图说明
图1是根据本发明一种实施方式的数据报送系统的架构图;
图2是根据本发明一种实施方式的数据报送方法的流程示意图。
具体实施方式
以下结合附图和具体实施方式对本发明的各个方面进行详细阐述。其中,众所周知的模块、单元及其相互之间的连接、链接、通信或操作没有示出或未作详细说明。并且,所描述的特征、架构或功能可在一个或一个以上实施方式中以任何方式组合。本领域技术人员应当理解,下述的各种实施方式只用于举例说明,而非用于限制本发明的保护范围。还可以容易理解,本文所述和附图所示的各实施方式中的模块或单元或处理方式可以按各种不同配置进行组合和设计。
下面对本文中使用的术语进行简要说明。
token:计算机身份认证中的令牌。
FTP:Funds Transfer Pricing,内部资金转移定价,商业银行内部资金中心与业务经营单位按照一定规则全额有偿转移资金,达到核算业务资金成本或收益等目的的一种内部经营管理模式。
息差:主要是指贷款利息收入与存款利息支出之间的利息差。
利差:利率之间的差。
CSV格式:逗号分隔值文件格式。
RedisAtomicLong:Redis中的一个实现类,该类具有原子性,通过该类下的incr方法产生自增长的ID数值。
Mysql:一个关系型数据库管理系统。
jdbc:Java DataBase Connectivity,Java数据库连接,一种用于数据库访问的应用程序API。
http:Hyper Text Transfer Protocol,超文本传输协议。
https:Hypertext Transfer Protocol Secure,以安全为目标的HTTP通道,在HTTP的基础上通过传输加密和身份认证保证传输过程的安全性。
URL:Uniform Resource Locator,统一资源定位符。
加密机:通过国家商用密码主管部门鉴定并批准使用的国内自主开发的主机加密设备。
redis:Remote Dictionary Server,远程字典服务,一个开源的key-value存储系统。
MsgId:Message Identification,消息标识。
Airflow:一个可编程、调度和监控的工作流平台。
md5:Message-Digest Algorithm,信息摘要算法,md5信息摘要算法第五版。
图1是根据本发明一种实施方式的数据报送系统的架构图。
如图1所示,所述数据报送系统包括:
报送码值表管理模块110,用于根据设定规则生成报送码值表的报送内容,以及根据所述设定规则新增报送内容、修改报送内容、删除报送内容,其中,所述报送码值表的报送内容包括:报送表编码、所述报送表编码对应的名称、是否需要报送。
在一些实施方式中,设定规则是由中国人民银行对不同金融机构的报送要求,并且,根据设定规则生成的报送内容包括但不限于:报送表编码、报送表编码对应的名称、是否需要报送,同时,该报送内容还包括但不限于下述一种或多种:客户信息、机构信息、贷款业务、存款业务、同业业务、融资性票据、FTP定价、人民币利差息差。其中,所述报送内容例如包含上述8个主题,总计37张数据表,423个数据项。
在进一步实施方式中,在报送内容增加的业务场景下,业务人员只需在报送码值表管理模块110中新增报送数据,填入新增的报送表编码,变动表编码对应的名称,并将是否报送列选择为“是”后保存,后续该修改对应的机构将通过报文自动报送模块120自动地将修改后的报送码值表表的报送数据上报至中国人民银行。由此,可以在不对各个金融机构进行数据上送的核心代码进行修改的基础上,实现报送数据内容的变动,从而减少因核心代码的修改带来的直接业务冲击,以保证业务的稳定性。
报送码值表管理模块110基于设定规则生成既能够满足不同金融机构的上报需求,又能满足规则设定方不定期变化的上报要求的报送内容,进而根据包含报送内容的报送码值表自动获取报送数据进行上报,能够实现准确且高效的数据报送。举例而言,针对中国人民银行的规则设定,金融机构可以根据中国人民银行的上报要求配置报送数据的内容,并且,在中国人民银行的监管要求变动时,金融机构可以依据中国人民银行最新的发文要求及时更改报送数据的内容,由此,报送数据内容既能满足不同金融机构的上报需求,又能满足中国人民银行不定期变化的上报要求。
报文自动报送模块120,用于根据所述报送码值表自动获取报送数据并进行上报。在一些实施方式中,报文自动报送模块120依据报送码值表中中国人民银行要求的全部报送范围和每个数据报送方对应的“是否报送”字段确定每个数据报送方的报送范围,自动从任何一种能够按照日期批次和表的维度输出数据的CSV格式的计算引擎中获取报送数据,例如,从离线数仓中获取报送数据,并且可以获取多种数据源例如execl、txt、关系型数据库Mysql、Oracle等。
在进一步实施方式中,报文自动报送模块120根据报送码值表确定的报送范围,自动检查离线数仓数据源的数据产出,根据数据产出按天生成表的切片级的上报任务列表,并将上报任务列表和该上报任务列表中的报送数据进行上报。
在更进一步的实施方式中,报送数据包括但不限于消息标识和报送日志流水表。所述消息标识是数据报送方和规则设定方之间协议全局唯一的MsgId,在可选的实施方式中,该MsgId是18位的数值,MsgId由14位的“年月日时分秒”和4位“自增长ID”组成,其中,自增长ID的数值基于redis的RedisAtomicLong的关键字生成。由此,可以有效识别数据报送方和规则设定方之间的唯一的一条交互协议,确保问题发生时快速定位具体的交互协议。
其中,所述报送日志流水表是基于中国人民银行发布的《数据交换管理平台接入互联规范》v1.1.2以及《利率报备监测分析系统数据报送标准》v1.0.1的要求和自动上报过程生成的报送日志流水表,该报送日志流水表包括但不限于:报送日期、报送表编码和状态码。其中,所述状态码是根据《利率报备监测分析系统数据报送标准》中的上报流程的各种交互报文转换得到的统一的状态码[0-9],该状态码[0-9]及其对应的含义如表1所示。
表1
如上表1所示,状态码0是第一阶段,即任务上报初始化状态:依旧配置的报送码值表按天生成报送码值表的切片级的上报任务列表的初始化状态,该初始化状态用于标识金融机构在某一天所有的上报任务列表切片级别的上报任务的初始状态。其中,表是需要上报的数据类型,切片是对应的表下需要上报的数据量。该第一阶段的更新维度是日期+表+切片维度,该第一阶段上报某个批次某个表下的某个切片的数据任务的初始化状态。
第二阶段是报文数据(即报送数据)上报状态:调度系统Airflow将按照预设的报送并发度进行表间并行表内串行的切片级数据上报,该上报状态为下述唯一标志的状态码中的一种状态:1-303,数据报送已发送未响应;2-303,数据报送成功;3-303,数据报送失败。该第二阶段的更新维度是日期+表+切片维度,该第二阶段上报某个批次某个表下的某个切片的数据上报的上报状态。
第三阶段是数据校验阶段,任务状态码唯一锁定为4-304数据校验结果成功或5-304数据校验结果失败。该第三阶段的更新维度是日期加表级别,该第三阶段反馈的是金融机构接口的某个批次中某个表的数据校验结果成功或者失败。
此外,中国人民银行针对某个批次的数据上报表可以人工进行审核打回,状态码标记为9即数据二次人工审核未通过;金融机构针对二次人工审核未通过的表可以自行解释数据,并按需进行二次上报、或者强制进行数据报文的提交,如果强制提交,则状态码会被唯一锁定为下述状态码中的一种:6-305报表强制提交已发送未响应、7-305报表强制提交成功、8-305报表强制提交失败。
根据上述报送日志流水表可以将整个数据报送系统对批次、表、切片级的数据进行统一的生命周期管理,将相应的报文生命周期进行高阶封装,对业务人员的操作进行高阶的抽象,使业务人员处理的异常问题场景下降。
采用本发明实施方式的上述数据报送系统,通过报送码值表管理模块生成既能够满足不同数据报送方的上报需求,又能满足规则设定方不定期变化的上报要求的报送内容,进而根据包含报送内容的报送码值表自动获取报送数据进行上报,能够实现准确且高效的数据报送。
在进一步的实施方式中,报文自动报送模块120还用于执行下述操作:当确认所述报送数据准确并再次提交所述报送数据时,将强制提交的说明文档与所述报送数据一同进行上报。此外,报文自动报送模块120还用于针对报文二次上报、报文多次上报、报文人工打回等场景的报文数据上报。由此,通过结合针对多种数据报送场景的自动报送,可以满足不同金融机构的组合使用,实现及时稳定的数据上报。
如图1所示,在一些实施方式中,数据报送系统还可以包括:系统初始化模块130、报文报送检查模块140和报文手动报送模块150。
其中,系统初始化模块130用于获取初始配置信息,以及进行业务初始化验证。在一些实施方式中,所述初始配置信息包括但不限于下述一种或多种:数据库连接的连接信息、认证信息、加密机的接口信息;所述业务初始化验证包括但不限于下述一种或多种:对于中国人民银行提供的登录接口进行登录接口查询的初始化验证、报送窗口查询的初始化验证、业务状态查询报文的初始化验证。其中,数据库连接的连接信息可以包括但不限于Mysql数据库的jdbc的连接信息;认证信息包括但不限于中国人民银行分配的金融结构认证信息;加密机的接口信息包括但不限于加密机的http接口信息。在可选的实施方式中,数据库连接的连接信息包含在金融机构(数据报送方)的本地Mysql初始配置信息中,该初始配置信息包括但不限于:金融机构ip、用户名称、密码、端口、数据库的连接信息;中国人民银行分配的金融结构认证信息包括但不限于:中国人民银行金融城域网为金融机构分配的账号、密码、上行的基于https的URL接口信息。
在进一步实施方式中,基于上述初始配置信息可以进行业务初始化验证,具体而言,基于Mysql的jdbc的连接信息可以进行Mysql连接的初始化功能验证;基于中国人民银行分配的金融结构认证信息,可以在网络打通的情况下进行网络方向的技术性联通性功能验证;基于加密机的接口信息可以进行证书绑定签名、数据证书下载等加密机的主体功能的验证。在其他实施方式中,业务初始化验证还包括但不限于:登录接口查询的初始化验证、报送窗口查询的初始化验证、业务状态查询报文的初始化验证。
通过系统初始化模块130将系统内部依赖的初始配置信息这样的外部信息去耦合,使数据报送系统面向使用方提供便捷、产品化的使用基础。
在更进一步的实施方式中,系统初始化模块130对登录接口查询进行初始化验证时,能够确定业务的登录接口及该登录接口的token值,在此基础上,报文自动报送模块120在对报送数据进行报送前,获取系统初始化模块130确定的登录接口的token值,并在确定所述token值有效时,根据报送码值表和报送批次进行报送窗口查询,确定当前报送批次是否可报送;然后在确定所述当前批次可报送时,根据报送任务列表获取所述报送任务列表的表间并行、表内串行的报送数据并进行上报。其中,token值可以保证数据报送系统与中国人民银行交互的会话有效性,例如token值具有24小时的时效性,24小时之内的协议交互可以通过此token值作为交互认证的标识依据。其中,报送批次是报送任务列表和报送时间组合。
通过在token值有效的情况下获取报送数据,能够保证当前信息交互的有效性,同时,表间并行的机制能够保证进行上报的机构实现多个表间并行的数据上送,从而提高报送效率,表内串行能够实现同一个表中多个切片的顺序上报的需求。
在更进一步的实施方式中,报文自动报送模块120在获取基于系统初始化模块130得到的登录接口的token值后,将该token值保存到redis。由此,后续所有需要使用此token值的接口都可以通过redis实现token值共享。
其中,报文报送检查模块140用于根据独立检查信息对所述报送数据进行校验,并将所述报送数据的校验结果和上报结果同步至订阅人员。在一些实施方式中,基于调度系统Airflow将业务数据校验、最晚上报时间T+3汇报检查整合为独立检查信息,每日将业务数据校验结果以及报送数据的上报结果通过邮件、短信、电话等多种通信方式及时同步至相关订阅人员。举例而言,针对1号需要上报的报送数据,其最晚上报时间是4号,则在2号、3号进行检查,如果发现该报送数据没有上报,则通过上述通信方式进行告警处理。由此,可以减少数据少报、晚报、错报、漏报等情形的发生。
在进一步实施方式中,针对上报任务列表中的数据报文,记录数据报文的md5值,如果数据发生变动则及时通知相关人员,以提示数据报文发生修改,从而减少错报的情形。同时,通过对比上报的报送码值表和真实的报文报送日志流水表,保证上报的一致性,防止漏报情形的发生。
其中,报文手动报送模块150,用于在确定所述报送数据存在差异时,进行手动上报。举例而言,中国人民银行系统会进行系统级的维护,且维护时间不固定,因而金融机构请求报文发出后,可能收不到人行系统的反馈报文。对此,业务人员根据报送日志流水表和报送码值表确认报送数据存在差异时,将请求的MsgId和请求的类型重新发送到人行系统,查询到MsgId对应的报文的最终状态,再依据上述最终状态更新报送日志流水表中的对应的记录值。由此,可以进一步保证上报的一致性,防止漏报情形的发生。
图2是根据本发明一种实施方式的数据报送方法的流程示意图。
如图2所示,在本发明的一种实施方式中,所述数据报送方法可包括:步骤S21和步骤S22,下面对上述步骤进行具体的描述。
在步骤S21中,根据设定规则生成报送码值表的报送内容,以及根据所述设定规则新增报送内容、修改报送内容、删除报送内容,其中,所述报送码值表的报送内容包括:报送表编码、所述报送表编码对应的中文名、是否需要报送。
在一些实施方式中,设定规则是由中国人民银行对不同金融机构的报送要求,并且,根据设定规则生成的报送内容包括但不限于:报送表编码、报送表编码对应的名称、是否需要报送。
在步骤S22中,根据所述报送码值表自动获取报送数据并进行上报。在一些实施方式中,根据报送码值表中中国人民银行要求的全部报送范围和每个数据报送方对应的“是否报送”字段确定每个数据报送方的报送范围,自动从任何一种能够按照日期批次和表的维度输出数据的CSV格式的计算引擎中获取报送数据,例如,从离线数仓中获取报送数据。
在进一步实施方式中,根据报送码值表确定的报送范围,自动检查离线数仓数据源的数据产出,根据数据产出按天生成报送码值表的切片级的上报任务列表,并将上报任务列表和该上报任务列表中的报送数据进行上报。
在更进一步的实施方式中,报送数据包括但不限于消息标识和报送日志流水表,其中,所述消息标识是数据报送方和规则设定方之间协议全局唯一的MsgId。由此,可以有效识别数据报送方和规则设定方之间的唯一的一条交互协议,确保问题发生时快速定位具体的交互协议。
采用本发明实施方式的上述数据报送方法,基于设定规则生成既能够满足不同金融机构的上报需求,又能满足规则设定方不定期变化的上报要求的报送内容,进而根据包含报送内容的报送码值表自动获取报送数据进行上报,能够实现准确且高效的数据报送。
在进一步的实施方式中,数据报送方法还包括:当确认所述报送数据准确并再次提交所述报送数据时,将强制提交的说明文档与所述报送数据一同进行上报;以及,针对报文二次上报、报文多次上报、报文人工打回等场景的报文数据上报。由此,通过结合针对多种数据报送场景的自动报送,可以满足不同金融机构的组合使用,实现及时稳定的数据上报。
在一些实施方式中,数据报送方法还包括:获取初始配置信息,以及进行业务初始化验证。在一些实施方式中,所述初始配置信息包括但不限于下述一种或多种:数据库连接的连接信息、认证信息、加密机的接口信息;所述业务初始化验证包括但不限于下述一种或多种:对于中国人民银行提供的登录接口进行登录接口查询的初始化验证、报送窗口查询的初始化验证、业务状态查询报文的初始化验证。其中,数据库连接的连接信息可以包括但不限于Mysql数据库的jdbc的连接信息;认证信息包括但不限于中国人民银行分配的金融结构认证信息;加密机的接口信息包括但不限于加密机的http接口信息。在可选的实施方式中,数据库连接的连接信息包含在金融机构(数据报送方)的本地Mysql初始配置信息中,该初始配置信息包括但不限于:金融机构ip、用户、密码、端口、数据库的连接信息;中国人民银行分配的金融结构认证信息包括但不限于:中国人民银行金融城域网为金融机构分配的账号、密码、上行的基于https的URL接口信息。
在进一步实施方式中,基于上述初始配置信息可以进行业务初始化验证,具体而言,基于Mysql的jdbc的连接信息可以进行Mysql连接的初始化功能验证;基于中国人民银行分配的金融结构认证信息,可以在网络打通的情况下进行网络方向的技术性联通性功能验证;基于加密机的接口信息可以进行证书绑定签名、数据证书下载等加密机的主体功能的验证。在其他实施方式中,业务初始化验证还包括但不限于:登录接口查询的初始化验证、报送窗口查询的初始化验证、业务状态查询报文的初始化验证。
通过将系统内部依赖的初始配置信息这样的外部信息去耦合,能够面向使用方提供便捷、产品化的使用基础。
在更进一步的实施方式中,根据报送码值表获取报送数据并进行上报具体可以包括如下步骤:获取登录接口的token值;如果所述token值有效,则根据所述报送码值表和报送批次进行报送窗口查询,确定当前报送批次是否可报送;如果确定所述当前批次可报送,则根据报送任务列表获取所述报送任务列表的表间并行、表内串行的报送数据并进行上报。
通过在token值有效的情况下获取报送数据,能够保证当前信息交互的有效性,同时,表间并行的机制能够保证进行上报的机构实现多个表间并行的数据上送,从而提高报送效率,表内串行能够实现同一个表中多个切片的顺序上报的需求。
在更进一步的实施方式中,在获取登录接口的token值后,将该token值保存到redis。由此,后续所有需要使用此token值的接口都可以通过redis实现token值共享。
在一些实施方式中,数据报送方法还包括:根据独立检查信息对所述报送数据进行校验,并将所述报送数据的校验结果和上报结果同步至订阅人员。在一些实施方式中,基于调度系统Airflow将业务数据校验、最晚上报时间T+3汇报检查整合为独立检查信息,每日将业务数据校验结果以及报送数据的上报结果通过邮件、短信、电话等多种通信方式及时同步至相关订阅人员。由此,可以减少数据少报、晚报、错报、漏报等情形的发生。
在进一步实施方式中,针对上报任务列表中的数据报文,记录数据报文的md5值,如果数据发生变动则及时通知相关人员,以提示数据报文发生修改,从而减少错报的情形。同时,通过对比上报的报送码值表和真实的报文报送日志流水表,保证上报的一致性,防止漏报情形的发生。
在一些实施方式中,数据报送方法还包括:在确定所述报送数据存在差异时,进行手动上报。举例而言,中国人民银行系统会进行系统级的维护,且维护时间不固定,因而金融机构请求报文发出后,可能收不到人行系统的反馈报文。对此,业务人员根据报送日志流水表和报送码值表确认报送数据存在差异时,将请求的MsgId和请求的类型重新发送到人行系统,查询到MsgId对应的报文的最终状态,再依据上述最终状态更新报送日志流水表中的对应的记录值。由此,可以进一步保证上报的一致性,防止漏报情形的发生。
采用本发明实施方式的上述数据报送方法,将数据采集、统计计算、校验、修正以及汇总统计全链路覆盖,可以实现全链路数据自动化上报处理,解决业务人工上报存在的易出错、上报不及时等问题,保障数据上报方按期合规地进行高质量的监管报送。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到本发明可借助软件结合硬件平台的方式来实现。基于这样的理解,本发明的技术方案对背景技术做出贡献的全部或者部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施方式或者实施方式的某些部分所述的方法。
对应的,本发明实施方式还提供一种计算机可读存储介质,其上存储有计算机可读指令或程序,所述计算机可读指令或程序被处理器执行时,使得计算机执行如下操作:所述操作包括如上任意一种实施方式所述数据报送方法所包含的步骤,在此不再赘述。其中,所述存储介质可以包括:例如,光盘、硬盘、软盘、闪存、磁带等。
最后应说明的是:以上实施方式仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施方式对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施方式所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施方式技术方案的精神和范围。因此本发明的保护范围应以权利要求为准。
Claims (15)
1.一种数据报送系统,其特征在于,所述数据报送系统包括:
报送码值表管理模块,用于根据设定规则生成报送码值表的报送内容,以及根据所述设定规则新增报送内容、修改报送内容、删除报送内容,其中,所述报送码值表的报送内容包括:报送表编码、所述报送表编码对应的名称、是否需要报送;
报文自动报送模块,用于根据所述报送码值表自动获取报送数据并进行上报。
2.根据权利要求1所述的数据报送系统,其特征在于,所述数据报送系统还包括:
系统初始化模块,用于获取初始配置信息,以及进行业务初始化验证。
3.根据权利要求2所述的数据报送系统,其特征在于,
所述初始配置信息包括:数据库连接的连接信息、认证信息、加密机的接口信息;
所述业务初始化验证包括:登录接口查询的初始化验证、报送窗口查询的初始化验证、业务状态查询报文的初始化验证。
4.根据权利要求3所述的数据报送系统,其特征在于,根据所述报送码值表获取报送数据并进行上报包括:
获取登录接口的token令牌值;
如果所述token值有效,则根据所述报送码值表和报送批次进行报送窗口查询,确定当前报送批次是否可报送;
如果确定所述当前批次可报送,则根据报送任务列表获取所述报送任务列表的表间并行、表内串行的报送数据并进行上报。
5.根据权利要求1所述的数据报送系统,其特征在于,所述报送数据包括消息标识和报送日志流水表,其中,所述报送日志流水表包括:报送日期、所述报送表编码和状态码。
6.根据权利要求1所述的数据报送系统,其特征在于,所述报文自动报送模块还用于执行下述操作:
当确认所述报送数据准确并再次提交所述报送数据时,将强制提交的说明文档与所述报送数据一同进行上报。
7.根据权利要求1所述的数据报送系统,其特征在于,所述数据报送系统还包括:
报文报送检查模块,用于根据独立检查信息对所述报送数据进行校验,并将所述报送数据的校验结果和上报结果同步至订阅人员。
8.根据权利要求1所述的数据报送系统,其特征在于,所述数据报送系统还包括:
报文手动报送模块,用于在确定所述报送数据存在差异时,进行手动上报。
9.一种数据报送方法,其特征在于,所述数据报送方法包括:
根据设定规则生成报送码值表的报送内容,以及根据所述设定规则新增报送内容、修改报送内容、删除报送内容,其中,所述报送码值表的报送内容包括:报送表编码、所述报送表编码对应的中文名、是否需要报送;
根据所述报送码值表自动获取报送数据并进行上报。
10.根据权利要求9所述的数据报送方法,其特征在于,所述数据报送方法还包括:获取初始配置信息,以及进行业务初始化验证;
其中,所述初始配置信息包括:数据库连接的连接信息、认证信息、加密机的接口信息;
其中,所述业务初始化验证包括:登录接口查询的初始化验证、报送窗口查询的初始化验证、业务状态查询报文的初始化验证。
11.根据权利要求10所述的数据报送方法,其特征在于,根据所述报送码值表获取报送数据并进行上报包括:
获取登录接口的token值;
如果所述token值有效,则根据所述报送码值表和报送批次进行报送窗口查询,确定当前报送批次是否可报送;
如果确定所述当前批次可报送,则根据报送任务列表获取所述报送任务列表的表间并行、表内串行的报送数据并进行上报。
12.根据权利要求9所述的数据报送方法,其特征在于,所述数据报送方法还包括:
当确认所述报送数据准确并再次提交所述报送数据时,将强制提交的说明文档与所述报送数据一同进行上报。
13.根据权利要求9所述的数据报送方法,其特征在于,所述数据报送方法还包括:
根据独立检查信息对所述报送数据进行校验,并将所述报送数据的校验结果和上报结果同步至订阅人员。
14.根据权利要求9所述的数据报送方法,其特征在于,所述数据报送方法还包括:
在确定所述报送数据存在差异时,进行手动上报。
15.一种计算机可读存储介质,所述计算机可读存储介质储存计算机可读指令,其特征在于,所述计算机可读指令由处理器执行以实现如权利要求9至14中任一项所述的数据报送方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211541402.3A CN115760352A (zh) | 2022-12-02 | 2022-12-02 | 数据报送系统、方法和计算机可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211541402.3A CN115760352A (zh) | 2022-12-02 | 2022-12-02 | 数据报送系统、方法和计算机可读存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115760352A true CN115760352A (zh) | 2023-03-07 |
Family
ID=85342894
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211541402.3A Pending CN115760352A (zh) | 2022-12-02 | 2022-12-02 | 数据报送系统、方法和计算机可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115760352A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117573682A (zh) * | 2023-10-30 | 2024-02-20 | 中国人寿保险股份有限公司江苏省分公司 | 一种基于监管数据标准校验报送数据及报送文件的方法 |
-
2022
- 2022-12-02 CN CN202211541402.3A patent/CN115760352A/zh active Pending
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117573682A (zh) * | 2023-10-30 | 2024-02-20 | 中国人寿保险股份有限公司江苏省分公司 | 一种基于监管数据标准校验报送数据及报送文件的方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11599555B2 (en) | Data manifest as a blockchain service | |
US10608829B1 (en) | Blockchain timestamp agreement | |
US11290441B1 (en) | Systems and methods for blockchain validation of user identity and authority | |
US10887081B2 (en) | Audit trail configuration in a blockchain | |
US10985907B2 (en) | Identifying faults in a blockchain ordering service | |
US11296864B2 (en) | Identifying faults in a blockchain ordering service | |
US11917050B1 (en) | Systems and methods for generating a blockchain-based user profile | |
CN111008402A (zh) | 区块链时间戳协定 | |
WO2021233049A1 (zh) | 基于区块链的数据处理方法、装置、设备及可读存储介质 | |
US10942974B2 (en) | System for synchronous document captures into an asynchronous archive and document-level archiving reconciliation | |
CN112005236A (zh) | 区块链网络上的文档访问 | |
CN111427957A (zh) | 区块链投票信息校验方法、装置、设备以及存储介质 | |
CN112040429B (zh) | 一种基于分布式存储的短信管理系统及方法 | |
WO2021047309A1 (zh) | 数据处理方法、系统、设备及存储介质 | |
CN114257636A (zh) | 一种统一消息发布系统 | |
CN115760352A (zh) | 数据报送系统、方法和计算机可读存储介质 | |
CN110807209B (zh) | 一种数据处理方法、设备及存储介质 | |
CN110889763B (zh) | 一种基于大数据的金融管理系统 | |
US10942916B2 (en) | Fraud prevention via database referencing | |
CN112184531B (zh) | 实现办件智能无感推送的方法及系统 | |
CN114742563A (zh) | 一种自动化交易风控系统 | |
CN112261035A (zh) | 基于区块链的信息管理方法、防控中心节点及复工平台 | |
CN111553787A (zh) | 基于区块链的服务信息生成方法、装置、设备及存储介质 | |
CN118094633B (zh) | 基于区块链的数据处理方法、装置、电子设备及介质 | |
KR20110035556A (ko) | Mos를 이용한 금융정보 제공 서비스 시스템 및 서비스 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |