CN117874087A - 一种数据报送方法、装置、服务器 - Google Patents
一种数据报送方法、装置、服务器 Download PDFInfo
- Publication number
- CN117874087A CN117874087A CN202410131005.1A CN202410131005A CN117874087A CN 117874087 A CN117874087 A CN 117874087A CN 202410131005 A CN202410131005 A CN 202410131005A CN 117874087 A CN117874087 A CN 117874087A
- Authority
- CN
- China
- Prior art keywords
- error
- target
- verification result
- current round
- result
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 67
- 238000012795 verification Methods 0.000 claims abstract description 313
- 238000001514 detection method Methods 0.000 claims description 11
- 238000012216 screening Methods 0.000 claims description 3
- 238000000605 extraction Methods 0.000 claims description 2
- 238000004891 communication Methods 0.000 description 18
- 230000006870 function Effects 0.000 description 8
- 230000007246 mechanism Effects 0.000 description 7
- 230000002776 aggregation Effects 0.000 description 6
- 238000004220 aggregation Methods 0.000 description 6
- 238000012937 correction Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 238000012545 processing Methods 0.000 description 6
- 238000004590 computer program Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000012423 maintenance Methods 0.000 description 4
- 239000013589 supplement Substances 0.000 description 4
- 230000001960 triggered effect Effects 0.000 description 4
- 238000012550 audit Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000000977 initiatory effect Effects 0.000 description 2
- 239000000047 product Substances 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 108010001267 Protein Subunits Proteins 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000006386 memory function Effects 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 238000003058 natural language processing Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 230000001172 regenerating effect Effects 0.000 description 1
- 230000001105 regulatory effect Effects 0.000 description 1
- 230000001502 supplementing effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/252—Integrating or interfacing systems involving database management systems between a Database Management System and a front-end application
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
- G06Q40/02—Banking, e.g. interest calculation or account maintenance
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- General Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- Physics & Mathematics (AREA)
- Accounting & Taxation (AREA)
- Finance (AREA)
- General Engineering & Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Development Economics (AREA)
- General Business, Economics & Management (AREA)
- Technology Law (AREA)
- Strategic Management (AREA)
- Marketing (AREA)
- Economics (AREA)
- Computational Linguistics (AREA)
- Debugging And Monitoring (AREA)
Abstract
本申请提出一种数据报送方法、装置、服务器,属于大数据技术领域。该方法包括:将当前轮次的报文发送至目标报送系统;接收当前轮次的初始校验结果;根据初始校验结果提取得到当前轮次的错误数据集合;根据当前轮次的错误数据集合,对当前轮次的初始校验结果中的属于第一类错误的错误说明字段进行填充,得到第一目标校验结果;利用当前轮次的错误数据集合,检测是否满足终止条件;在确定满足终止条件的情况下,检测第一目标校验结果中是否存在第二类错误;在确定第一目标校验结果中存在第二类错误的情况下,将第一目标校验结果发送至业务终端;接收业务终端反馈的第二目标校验结果;将第二目标校验结果、当前轮次的报文发送至目标报送系统。
Description
技术领域
本说明书属于大数据技术领域,尤其涉及一种数据报送方法、装置、服务器。
背景技术
根据金融数据监管的要求,目标金融机构需要定期向中心金融机构发送报文,以报送本期内产生的金融数据。每期发送报文后,中心金融机构会向目标金融机构反馈针对报文的校验结果。在现有技术中,目标金融机构的业务人员需要根据校验结果核对报文对应的金融数据,订正错误的金融数据,或者对无需修正的金融数据填写错误说明。进一步,在每期校验结果中,有一些数据错误是反复出现的,业务人员每次都需要人工核对后填写相同的错误说明,因此会浪费大量时间与人力成本,影响数据报送的效率。
针对上述技术问题,目前尚未提出有效的解决方案。
发明内容
本申请提供了一种数据报送方法、装置、服务器,能够提升数据报送效率。
本申请实施例的目的是提供一种数据报送方法,包括:
将当前轮次的报文发送至目标报送系统;并接收所述目标报送系统针对当前轮次的报文反馈的当前轮次的初始校验结果;
根据当前轮次的初始校验结果,提取得到当前轮次的错误数据集合;
根据当前轮次的错误数据集合,对当前轮次的初始校验结果中的属于第一类错误的错误说明字段进行填充,得到第一目标校验结果;
利用当前轮次的错误数据集合,检测是否满足终止条件;
在确定满足终止条件的情况下,检测所述第一目标校验结果中是否存在第二类错误;
在确定所述第一目标校验结果中存在第二类错误的情况下,将所述第一目标校验结果发送至业务终端;并接收所述业务终端反馈的第二目标校验结果;其中,所述业务终端用于对所述第一目标校验结果中的属于第二类错误的错误说明字段进行填充,以得到所述第二目标校验结果;
将所述第二目标校验结果、当前轮次的报文发送至所述目标报送系统。
进一步地,所述方法的另一个实施例中,在利用当前轮次的错误数据集合,检测是否满足终止条件之后,所述方法还包括:
在确定不满足终止条件的情况下,将所述第一目标校验结果发送至所述业务终端;其中,所述业务终端用于根据所述第一目标校验结果对当前轮次的全量数据进行修改以得到更新后的全量数据;
获取并根据更新后的全量数据,生成更新后的报文;
将更新后的报文发送至所述目标报送系统;
接收所述目标报送系统针对更新后的报文反馈的更新后的初始校验结果。
进一步地,所述方法的另一个实施例中,在检测所述第一目标校验结果中是否存在第二类错误之后,所述方法还包括:在确定所述第一目标校验结果中不存在第二类错误的情况下,将所述第一目标校验结果、当前轮次的报文发送至所述目标报送系统。
进一步地,所述方法的另一个实施例中,所述利用当前轮次的错误数据集合,检测是否满足终止条件,包括:
获取上一轮次的错误数据集合;
检测当前轮次的错误数据集合与上一轮次的错误数据集合是否一致;
在确定当前轮次的错误数据集合与上一轮次的错误数据集合一致的情况下,确定满足终止条件。
进一步地,所述方法的另一个实施例中,所述初始校验结果包括:校验规则编号、错误说明字段;其中,所述错误说明字段为空白字段;
相应的,根据当前轮次的错误数据集合,对当前轮次的初始校验结果中的属于第一类错误的错误说明字段进行填充,得到第一目标校验结果,包括:
获取规则清单;
根据所述初始校验结果中的校验规则编号,从所述规则清单的校验规则中,确定出目标校验规则;
利用所述目标校验规则与所述错误数据集合,从所述初始校验结果中确定出第一类错误;
利用所述规则清单的错误说明,对所述初始校验结果中属于第一类错误的错误说明字段进行填充,得到第一目标校验结果。
进一步地,所述方法的另一个实施例中,所述利用所述目标校验规则与所述错误数据集合,从所述初始校验结果中确定出第一类错误,包括:
利用所述目标校验规则,对所述错误数据集合进行校验,得到中间结果;
从所述错误数据集合中,筛选出中间结果为满足校验规则的错误数据,作为第一类错误。
进一步地,所述方法的另一个实施例中,所述利用所述规则清单的错误说明,对所述初始校验结果中属于第一类错误的错误说明字段进行填充,得到第一目标校验结果,包括:
根据第一类错误的校验规则编号,从所述规则清单中,确定出第一类错误的错误说明;
将第一类错误的错误说明填充至所述初始校验结果中相对应的错误说明字段,得到第一目标校验结果。
进一步地,所述方法的另一个实施例中,所述规则清单通过如下方式构建:
获取第一历史校验结果;并确定所述第一历史校验结果中各个校验结果的出现次数;
从所述第一历史校验结果中,提取出出现次数大于预设次数阈值的校验结果,作为第二历史校验结果;
确定所述第二历史校验结果对应的错误说明与校验规则,构建规则清单。
进一步地,所述方法的另一个实施例中,所述方法还包括:利用所述第二目标校验结果对所述规则清单进行更新,得到更新后的规则清单。
进一步地,所述方法的另一个实施例中,所述利用所述第二目标校验结果对所述规则清单进行更新,得到更新后的规则清单,包括:将所述第二目标校验结果加入到所述第一历史校验结果中,得到更新后的第一历史校验结果;确定更新后的第一历史校验结果中各个校验结果的出现次数;从更新后的第一历史校验结果中,提取出出现次数大于预设次数阈值的校验结果,作为更新后的第二历史校验结果;利用更新后的第二历史校验结果,对所述规则清单进行更新,得到更新后的规则清单。
本申请实施例的目的是提供一种数据报送装置,所述装置包括:
第一发送模块,用于将当前轮次的报文发送至目标报送系统;并接收所述目标报送系统针对当前轮次的报文反馈的当前轮次的初始校验结果;
提取模块,用于根据当前轮次的初始校验结果,提取得到当前轮次的错误数据集合;
填充模块,用于根据当前轮次的错误数据集合,对当前轮次的初始校验结果中的属于第一类错误的错误说明字段进行填充,得到第一目标校验结果;
第一检测模块,用于利用当前轮次的错误数据集合,检测是否满足终止条件;
第二检测模块,用于在确定满足终止条件的情况下,检测所述第一目标校验结果中是否存在第二类错误;
第二发送模块,用于在确定所述第一目标校验结果中存在第二类错误的情况下,将所述第一目标校验结果发送至业务终端;并接收所述业务终端反馈的第二目标校验结果;其中,所述业务终端用于对所述第一目标校验结果中的属于第二类错误的错误说明字段进行填充,以得到所述第二目标校验结果;
第三发送模块,用于将所述第二目标校验结果、当前轮次的报文发送至所述目标报送系统。
本申请实施例的目的是提供一种计算机可读存储介质,其上存储有计算机指令,所述计算机可读存储介质被处理器执行所述指令时实现上述数据报送方法。
本申请实施例的目的是提供一种服务器,包括至少一个处理器及用于存储处理器可执行指令的存储器,所述处理器执行所述指令时实现上述数据报送方法。
基于本申请提供的数据报送方法,通过将当前轮次的报文发送至目标报送系统;并接收所述目标报送系统针对当前轮次的报文反馈的当前轮次的初始校验结果;根据当前轮次的初始校验结果,提取得到当前轮次的错误数据集合;根据当前轮次的错误数据集合,对当前轮次的初始校验结果中的属于第一类错误的错误说明字段进行填充,得到第一目标校验结果;利用当前轮次的错误数据集合,检测是否满足终止条件;在确定满足终止条件的情况下,检测所述第一目标校验结果中是否存在第二类错误;在确定所述第一目标校验结果中存在第二类错误的情况下,将所述第一目标校验结果发送至业务终端;并接收所述业务终端反馈的第二目标校验结果;其中,所述业务终端用于对所述第一目标校验结果中的属于第二类错误的错误说明字段进行填充,以得到所述第二目标校验结果;将所述第二目标校验结果、当前轮次的报文发送至所述目标报送系统。可针对在历史上反复出现的第一类错误进行自动填充错误说明,提升报送效率。
附图说明
为了更清楚地说明本说明书实施例,下面将对实施例中所需要使用的附图作简单地介绍,下面描述中的附图仅仅是本说明书中记载的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本说明书实施例提供的一种数据报送方法的流程的一种实施例的示意图;
图2为本说明书提供的一个具体场景示例中的确定错误数据集合的筛选页面示意图;
图3为本说明书提供的一个具体场景示例中的数据报送方法流程示意图;
图4为本说明书实施例提供的一种数据报送装置的一种实施例的示意图;
图5为本说明书实施例提供的服务器的结构的一种实施例的示意图。
具体实施方式
为了使本技术领域的人员更好地理解本说明书中的技术方案,下面将结合本说明书实施例中的附图,对本说明书实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本说明书一部分实施例,而不是全部的实施例。基于本说明书中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都应当属于本说明书保护的范围。
根据金融数据监管的要求,目标金融机构需要定期向中心金融机构发送报文,以报送本期内产生的金融数据。每期发送报文后,中心金融机构会向目标金融机构反馈针对报文的校验结果。在现有技术中,目标金融机构的业务人员需要根据校验结果核对报文对应的金融数据,订正错误的金融数据,或者对无需修正的金融数据填写错误说明。进一步,在每期校验结果中,有一些数据错误是反复出现的,业务人员每次都需要人工核对后填写相同的错误说明,因此会浪费大量时间与人力成本,影响数据报送的效率。
针对现有方法存在的上述问题以及产生上述问题的具体原因,本申请考虑提出一种数据报送方法,实现针对第一类错误的错误说明字段的自动填充,减少人工填充第一类错误的错误说明字段的人工成本,提升报送效率。
基于上述思路,本说明书提出一种数据报送方法,该方法包括:将当前轮次的报文发送至目标报送系统;并接收所述目标报送系统针对当前轮次的报文反馈的当前轮次的初始校验结果;根据当前轮次的初始校验结果,提取得到当前轮次的错误数据集合;根据当前轮次的错误数据集合,对当前轮次的初始校验结果中的属于第一类错误的错误说明字段进行填充,得到第一目标校验结果;利用当前轮次的错误数据集合,检测是否满足终止条件;在确定满足终止条件的情况下,检测所述第一目标校验结果中是否存在第二类错误;在确定所述第一目标校验结果中存在第二类错误的情况下,将所述第一目标校验结果发送至业务终端;并接收所述业务终端反馈的第二目标校验结果;其中,所述业务终端用于对所述第一目标校验结果中的属于第二类错误的错误说明字段进行填充,以得到所述第二目标校验结果;将所述第二目标校验结果、当前轮次的报文发送至所述目标报送系统。
需要说明的是,本申请中所涉及到的与用户相关的信息数据均为在用户知晓且同意的前提下获取和使用的。并且,对于上述信息数据的获取、存储、使用、处理等均符合国家法律法规的相关规定。
参阅图1所示,本说明书提出一种数据报送方法,该方法应用于目标金融机构的服务器。具体实施时,该方法可以包括以下内容。
S101:将当前轮次的报文发送至目标报送系统;并接收所述目标报送系统针对当前轮次的报文反馈的当前轮次的初始校验结果。
在一些实施例中,目标金融机构具体可以为银行。目标报送系统为中心金融机构建立的用于接收报文的系统,中心金融机构是目标金融机构的监管机构。目标金融机构定期将报文发送至目标报送系统,中心金融机构通过目标报送系统接收到报文后,通过分析报文,实现对目标金融机构的监管,及时发现目标金融机构的违规行为与违规数据。
在一些实施例中,目标金融机构在进行多种交易处理后,会产生针对交易处理的全量数据,全量数据存储于数据库中。目标金融机构的服务器可以与数据库进行数据交互,读取或修改全量数据。目标金融机构还具有对应的业务终端,目标金融机构的业务人员使用业务终端,同样可以与数据库进行数据交互,读取或者修改全量数据。
在一些实施例中,当前轮次的报文通过如下方式得到:从数据库中读取到当前轮次的全量数据,按照预设的报文格式,根据当前轮次的全量数据生成当前轮次的报文。
在一些实施例中,在目标金融机构的服务器将当前轮次的报文发送至目标报送系统之后,目标报送系统会对当前轮次的报文的正确性进行校验,生成当前轮次的初始校验结果,并返回给目标金融机构的服务器。其中,初始校验结果是针对报文中的错误数据的校验结果。
在一些实施例中,初始校验结果包括:错误数据对应的校验规则编号、错误数据对应的错误说明字段、错误数据在全量数据中的位置信息。其中,所述错误说明字段为空白字段。
S102:根据当前轮次的初始校验结果,提取得到当前轮次的错误数据集合。
在一些实施例中,根据初始校验结果中错误数据在全量数据中的位置信息,就可以从数据库存储的全量数据中,检索出错误数据,构成错误数据集合。错误数据与初始校验结果中的校验结果一一对应。
在一些实施例中,初始校验结果对应的错误数据包括第一类错误、第二类错误、第三类错误。
第一类错误并非数据本身的错误,是由于历史原因导致的数据缺失错误,不需要对数据本身进行修改,但是需要在错误说明字段写入错误说明(即针对该错误的解释说明)。并且第一类错误是在历史校验结果中重复出现、并且出现次数较多的错误。在现有技术中,业务人员通过业务终端对第一类错误进行核查,每次都需要手动写入重复的错误说明,因此效率低下。而基于本申请记载的方式,针对第一类错误,可自动填充错误说明,因此提升了数据处理的效率。
第二类错误并非数据本身的错误,是由于历史原因导致的数据缺失错误,不需要对数据本身进行修改,但是需要在错误说明字段写入错误说明(即针对该错误的解释说明)。并且第二类错误是在历史校验结果从未出现过、或者出现次数较少的错误。第二类错误无法自动填充,需要业务人员通过业务终端填充错误说明。
第三类错误属于数据本身的错误,可通过订正的方式进行消除。
在一些实施例中,校验规则指的是对错误数据进行校验的代码语句,具体可以为SQL语句或者Python语句。校验规则与校验规则编号一一对应。校验规则用于校验错误数据是否属于第一类错误(是否满足第一类错误的错误说明),在满足校验规则的情况下,说明该错误数据属于第一类错误。在不满足校验规则的情况下,说明该错误数据属于第三类错误。
例如,当校验规则为A0001时,其对应的错误数据为“资源数据发行量”(资源数据可以为债券),其触发的校验预警为“资源数据发行量不能为空值”。但是,由于历史原因,1992年发行的资源数据发行量全部丢失。此时,校验规则可以为“资源数据发行的日期等于1992”对应的Python语句;如果满足校验规则,说明该错误数据是由于历史原因导致的数据缺失,属于第一类错误,不需要对数据本身进行修改,但是需要在错误说明字段写入错误说明“由于历史原因,1992年发行的资源数据发行量全部丢失,因此为空值”,以向中心金融机构提供合理的解释。如果不满足校验规则,例如该资源数据发行的日期等于1993,说明该数据错误是需要修改的,可能是在生成报文的过程中数据被遗漏而导致的,属于第三类错误,因此利用业务终端对全量数据进行修改或补入,最终可消除第三类错误。
S103:根据当前轮次的错误数据集合,对当前轮次的初始校验结果中的属于第一类错误的错误说明字段进行填充,得到第一目标校验结果。
在一些实施例中,根据当前轮次的错误数据集合,对当前轮次的初始校验结果中的属于第一类错误的错误说明字段进行填充,得到第一目标校验结果,具体包括:
S1:获取规则清单;
S2:根据所述初始校验结果中的校验规则编号,从所述规则清单的校验规则中,确定出目标校验规则;
S3:利用所述目标校验规则与所述错误数据集合,从所述初始校验结果中确定出第一类错误;
S4:利用所述规则清单的错误说明,对所述初始校验结果中属于第一类错误的错误说明字段进行填充,得到第一目标校验结果。
在一些实施例中,规则清单通过如下方式预先构建:
S1:获取第一历史校验结果;并确定所述第一历史校验结果中各个校验结果的出现次数;
S2:从所述第一历史校验结果中,提取出出现次数大于预设次数阈值的校验结果,作为第二历史校验结果;
S3:确定所述第二历史校验结果对应的错误说明与校验规则,构建规则清单。
在一些实施例中,第一历史校验结果是指所有历史轮次对应的初始校验结果。第一历史校验结果中至少包括表单名称、校验规则编号、错误说明;其中,表单名称表示该错误数据所位于的表单名称,表单名称可根据错误数据在全量数据中的位置信息而确定;错误说明由业务人员通过业务终端输入。第一历史校验结果还包括“表单名称+校验规则编号+错误说明拼接后的结果”。如果某几个校验结果的表单名称、校验规则编号、错误说明均相同,说明它们是重复数据,可对其出现次数进行累加,出现次数等于重复数据的个数。如果某一个校验结果的表单名称、校验规则编号、错误说明不存在重复,则其出现次数等于1。
在一些实施例中,将预设次数阈值设定为5次,提取出出现次数大于5次的校验结果,作为第二历史校验结果。第二历史校验结果在历史上出现次数较多,说明其经常出现并且每次都会触发相同的校验预警,其对应的错误类型为第一类错误。业务人员根据第二历史校验结果对应的错误数据,通过业务终端输入错误说明、校验语句,并发送至服务器,服务器将错误说明、校验语句写入第二历史校验结果中与校验规则编号相对应的位置,得到规则清单。规则清单中包括:表单名称、校验规则编号、错误说明、校验规则。
在一些实施例中,根据所述初始校验结果中的校验规则编号,从所述规则清单的校验规则中,确定出目标校验规则,具体包括:从规则清单中,选出和初始校验结果中的校验规则编号相同的校验规则,作为目标校验规则。
在一些实施例中,利用所述目标校验规则与所述错误数据集合,从所述初始校验结果中确定出第一类错误,具体包括:
S1:利用所述目标校验规则,对所述错误数据集合进行校验,得到中间结果;
S2:从所述错误数据集合中,筛选出中间结果为满足校验规则的错误数据,作为第一类错误。
在一些实施例中,利用目标校验规则的校验规则编号,去匹配错误数据集合中错误数据的校验规则编号,在匹配一致的情况下,利用目标校验规则去校验错误数据,得到中间结果;其中,在错误数据满足目标校验规则的情况下,得到“满足校验规则”的中间结果;在错误数据不满足目标校验规则的情况下,得到“不满足校验规则”的中间结果。
在一些实施例中,利用所述规则清单的错误说明,对所述初始校验结果中属于第一类错误的错误说明字段进行填充,得到第一目标校验结果,具体包括:
S1:根据第一类错误的校验规则编号,从所述规则清单中,确定出第一类错误的错误说明;
S2:将第一类错误的错误说明填充至所述初始校验结果中相对应的错误说明字段,得到第一目标校验结果。
针对第一目标校验结果,其中填充了错误说明的错误数据属于第一类错误。没有填充错误说明的错误数据(即错误说明字段依旧为空值的错误数据)属于第二类错误数据或者第三类错误数据,它们的校验规则编号没有出现在规则清单中,因此匹配失败,无法自动填充错误说明。
S104:利用当前轮次的错误数据集合,检测是否满足终止条件。
在一些实施例中,在将当前轮次的报文发送至目标报送系统之前,所述方法还包括:
S1:检测所述服务器当前是否满足检测触发条件;
S2:在确定所述服务器当前满足检测触发条件的情况下,执行将当前轮次的报文发送至目标报送系统。
在一些实施例中,检测所述服务器当前是否满足检测触发条件,具体包括:
S1:检测所述服务器在预设时间内向所述目标报送系统发送报文的次数是否大于等于1;
S2:在确定所述服务器在预设时间内向所述目标报送系统发送报文的次数大于等于1的情况下,确定所述服务器当前满足检测触发条件。
在一些实施例中,报文报送的频率可以设定为日频、半日频。在日频的情况下,预设时间为当天0时0分至当前时刻,如果服务器在预设时间内向目标报送系统发送报文的次数大于等于1,说明当前轮次不是第一轮次,因此后续可得到上一轮次的错误数据集合。如果服务器在预设时间内向目标报送系统发送报文的次数小于1,说明当前轮次为第一轮次,因此不存在上一轮次的错误数据集合,此时需要将第一目标校验结果发送至业务终端,业务终端根据第一目标校验结果对当前全量数据进行修改后,利用修改后的全量数据生成更新后的报文(即第2轮次的报文),并将更新后的报文发送至目标报送系统。
在一些实施例中,利用当前轮次的错误数据集合,检测是否满足终止条件,具体包括:
S1:获取上一轮次的错误数据集合;
S2:检测当前轮次的错误数据集合与上一轮次的错误数据集合是否一致;
S3:在确定当前轮次的错误数据集合与上一轮次的错误数据集合一致的情况下,确定满足终止条件。
在一些实施例中,可通过计算当前轮次的错误数据集合、上一轮次的错误数据集合的相似度参数来检测二者是否一致。
在一些实施例中,如果当前轮次的错误数据集合与上一轮次的错误数据集合一致,说明当前轮次的错误数据集合中不存在第三类错误,因此无需对当前轮次的报文进行更新了,即满足终止条件。
在一些实施例中,如果当前轮次的错误数据集合与上一轮次的错误数据集合不一致,说明当前轮次的错误数据集合中可能存在第三类错误,因此需要继续对当前轮次的报文进行更新。
在一些实施例中,在利用当前轮次的错误数据集合,检测是否满足终止条件之后,所述方法还包括:
S1:在确定不满足终止条件的情况下,将所述第一目标校验结果发送至所述业务终端;其中,所述业务终端用于根据所述第一目标校验结果对当前轮次的全量数据进行修改以得到更新后的全量数据;
S2:获取并根据更新后的全量数据,生成更新后的报文;
S3:将更新后的报文发送至所述目标报送系统;
S4:接收所述目标报送系统针对更新后的报文反馈的更新后的初始校验结果。
在一些实施例中,在确定不满足终止条件的情况下,说明当前轮次的错误数据集合中可能存在第三类错误,将第一目标校验结果发送至所述业务终端;业务人员利用第一目标校验结果中空白的错误说明字段,检测出当前轮次的全量数据中的第三类错误,并利用业务终端改正第三类错误,以得到更新后的全量数据;然后,服务器从数据库中获取并根据更新后的全量数据,开启下一轮的报送,生成更新后的报文(即下一轮次的报文);将更新后的报文发送至所述目标报送系统;接收所述目标报送系统针对更新后的报文反馈的更新后的初始校验结果(即下一轮次的初始校验结果);根据更新后的初始校验结果,提取得到下一轮次的错误数据集合,根据下一轮次的错误数据集合,对更新后的初始校验结果中的属于第一类错误的错误说明字段进行填充,得到更新后的第一目标校验结果;利用下一轮次的错误数据集合,检测是否满足终止条件;在确定满足终止条件的情况下,说明下一轮次的错误数据集合已经不存在第三类错误,检测更新后的初始校验结果中是否存在第二类错误;在确定更新后的初始校验结果中存在第二类错误的情况下,将更新后的第一目标校验结果发送至业务终端;并接收所述业务终端反馈的更新后的第二目标校验结果;其中,所述业务终端用于对更新后的第一目标校验结果中的属于第二类错误的错误说明字段进行填充,以得到更新后的第二目标校验结果;将更新后的第二目标校验结果、下一轮次的报文发送至所述目标报送系统。
S105:在确定满足终止条件的情况下,检测所述第一目标校验结果中是否存在第二类错误。
在一些实施例中,通过检测第一目标校验结果中是否存在空白的(未填充的)错误说明字段确定是否存在第二类错误,在存在空白的错误说明字段的情况下,空白的错误说明字段对应的错误数据,均是未出现在规则清单中的错误数据,它们均为第二类错误。在不存在空白的错误说明字段的情况下,说明当前轮次的错误数据集合中的错误数据均出现在规则清单中,它们均为第一类错误,不存在第二类错误。
在一些实施例中,在检测所述第一目标校验结果中是否存在第二类错误之后,所述方法还包括:在确定所述第一目标校验结果中不存在第二类错误的情况下,将所述第一目标校验结果、当前轮次的报文发送至所述目标报送系统。
S106:在确定所述第一目标校验结果中存在第二类错误的情况下,将所述第一目标校验结果发送至业务终端;并接收所述业务终端反馈的第二目标校验结果;其中,所述业务终端用于对所述第一目标校验结果中的属于第二类错误的错误说明字段进行填充,以得到所述第二目标校验结果。
在一些实施例中,在确定所述第一目标校验结果中存在第二类错误的情况下,将第一目标校验结果发送至业务终端;业务人员通过业务终端,对第一目标校验结果中的属于第二类错误的错误说明字段进行填充(即对空白的错误说明字段进行填充),得到第二目标校验结果;业务终端将第二目标校验结果发送至服务器。
在一些实施例中,还可以将第一目标校验结果、当前轮次的错误数据集合一起发送至业务终端,用于生成第二目标校验结果。
在一些实施例中,在确定所述第一目标校验结果中存在第二类错误的情况下,还可以确定出从第一目标校验结果中确定出第一类错误的校验规则编号,并在当前轮次的错误数据集合中,筛选出相同的第一类错误的校验规则编号对应的错误数据,标注为“无需审核”;针对剩余错误数据,标注为“需要审核”;然后将标注后的错误数据集合、第一目标校验结果一起发送至业务终端,以便于业务终端重点关注标注有“需要审核”的错误数据,而无需关注标注有“无需审核”的错误数据。
S107:将所述第二目标校验结果、当前轮次的报文发送至所述目标报送系统。
在一些实施例中,服务器将第二目标校验结果、当前轮次的报文发送至所述目标报送系统。第二目标校验结果中包括针对当前轮次的报文中的第一类错误、第二类错误的错误说明,最终完成本周期内报文的报送。
在一些实施例中,在得到第二目标校验结果之后,所述方法还包括:利用所述第二目标校验结果对所述规则清单进行更新,得到更新后的规则清单。
在一些实施例中,利用所述第二目标校验结果对所述规则清单进行更新,得到更新后的规则清单,具体包括:
S1:将所述第二目标校验结果加入到所述第一历史校验结果中,得到更新后的第一历史校验结果;
S2:确定更新后的第一历史校验结果中各个校验结果的出现次数;
S3:从更新后的第一历史校验结果中,提取出出现次数大于预设次数阈值的校验结果,作为更新后的第二历史校验结果;
S4:利用更新后的第二历史校验结果,对所述规则清单进行更新,得到更新后的规则清单。
在一些实施例中,将第二目标校验结果加入到第一历史校验结果中,得到更新后的第一历史校验结果;然后,重新统计更新后的第一历史校验结果中各个校验结果的出现次数;提取出出现次数大于预设次数阈值(5次)的校验结果,作为更新后的第二历史校验结果;针对更新后的第二历史校验结果中的新增结果,确定其对应的错误说明与校验规则,加入到规则清单中,得到了更新后的规则清单。
基于上述实施例,在具体实施之前,根据历史校验结果中出现次数较多的第一类错误,确定其对应的错误说明与校验规则,构建规则清单;在具体实施时,利用根据初始校验结果中的校验规则编号,与规则清单中的校验规则编号进行匹配,在匹配一致的情况下,确定出目标校验规则,并将满足目标检测规则的错误数据作为第一类错误,自动填充第一类错误的错误说明,并利用业务终端填充第二类错误的错误说明,得到第二目标校验结果,最终将第二目标校验结果、当前轮次的报文发送至所述目标报送系统。可减少人工核查第一类错误、填充第一类错误的错误说明的步骤,提升报送效率。
在一个具体的场景示例中,用SQL或其他可以实现的编程语言对数据库中的所有第一历史校验结果进行遍历,第一历史校验结果中包括至少包括“表单名称”、“校验规则编号”及“错误说明”,其中,表单名称可以指示该校验结果对应的错误数据存储于哪张表单,例如,债券业务的报送中,一共涉及四张表单,依次是“存量债券发行余额信息”“存量债券投资余额信息”“债券发行发生额信息”“债券投资发生额信息”。将“表单名称”、“校验规则编号”及“错误说明”这三个字段中的数据提取出来,统一存至一张新建表格中,将该新建表格称为“基准表”,基准表还应包含“表单名称+校验规则编号+错误说明”字段(即将三个字段拼接在一起作为一个新字段)及“出现次数”字段,统计基准表中每种“表单名称+校验规则编号+错误说明”的出现次数,存至对应行的该字段,随后对完整的基准表进行多字段去重处理,以去除表中的重复行,对于每种“表单名称”、“校验规则编号”、“错误说明”及“表单名称+校验规则编号+错误说明”字段仅保留一条带有出现次数的记录。由此完成的基准表的构建。
在基准建设完成后,则不需对数据库中现有表格再进行遍历,只需对每次新入库的校验结果遍历并写入“基准表”即可,写入后也对三个字段的数据进行拼接并写入“表单名称+校验规则编号+错误说明”字段,并重新计算各行的“出现次数”,之后再进行去重处理,以完成对“基准表”的同步更新,在此不再赘述。
在数据库中建立一张新表,用于存储“校验规则编号”对应的校验规则,将该表称为“逻辑清单”,逻辑清单即规则清单。逻辑清单应包含如下字段:序号、表单名称、校验规则编号、错误说明、校验规则,其中“校验规则”字段初始赋空值。
将“基准表”中“出现次数”大于5的行中“表单名称”、“校验规则编号”及“错误说明”字段作为处置对象,统一存至数据库中的“逻辑清单”中的相应字段。业务人员通过业务终端输入校验规则至“校验规则”字段。
每次有新入库的校验结果时,需要对“基准表”中的“出现次数”列中的数据进行遍历,当大于5时,判断“基准表”中该校验规则及该条错误说明是否在现有“逻辑清单”中。具体判断规则为:
(1)先判断“表单名称”,如果不在逻辑清单中,这将该行的“表单名称”、“校验规则编号”、“错误说明”存储至“逻辑清单”中;
(2)当“表单名称”在逻辑清单中时,进一步判断该行对应的“校验规则编号”是否在逻辑清单中,若不在则也将该行信息存储至“逻辑清单”;
(3)若“表单名称”、“校验规则编号”都在逻辑清单中,则进一步判断该行“错误说明”字段在不在“逻辑清单”中,若不在则继续将该行的相关信息写入“逻辑清单”,以完成对表格的同步更新;
(4)后台应设置消息弹框,当“逻辑清单”中“表单名称”、“校验规则编号”、“错误说明”不为空,而“校验规则”字段为空时,向业务终端发送消息弹窗,提醒业务人员及时维护该表,补充对应校验规则。
逻辑清单和基准表建设好后,可增设“校验结果维护”接口,用于维护并更新“基准表”和“逻辑清单”。具体为每期报送结束后,可通过此接口上传本期报送给中心金融机构的最终版校验结果,完成校验结果入库。上传后会对自动对逻辑清单和基准表进行更新,无需手动操作。基于上述内容,构建报文报送系统,简称系统。
为了得到不同轮次的校验结果和错误数据集合,在系统中设置“重制并输出错误数据集合”按钮/接口,该接口自动关联现有的“发起明细数据查询”接口。用于上传每期报送时,将不同轮次的报文上传给目标报送系统后得到的不同轮次的校验结果。点击该按钮后,将自动生成依据当前轮次的报文生成的“校验结果X”和“过滤版错误数据集合X”(X为数字,X表示当前轮次)。具体操作和原理如下。
初始校验结果中所包含的字段都是固定的,其主要包含序号、表单名称、校验规则编号、校验规则类型、校验规则描述、校验字段、触发条数、校验结果类型、错误说明、示例数据行号。
目前生成错误数据集合的方式为:在系统中“发起明细数据查询”后选择“聚合表”,全量数据以聚合表的形式存储在数据库中,依据“查询名称”或者“查询编号”选择想要查询哪张聚合表里的数据,随后选择“数据范围”和“批量日期”,还可输入“校验规则编号”,用于查询该校验规则编号下的所有错误数据。其中“查询名称”及“查询编号”是可模糊匹配的,可以依据关键字模糊搜索,也可精确搜索。具体可参阅图2所示,数据范围选择“校验错误数据”(即错误数据),批量日期即错误数据生成日期,规则代码输入对应的校验规则代码(本实施例以JS1381为例进行说明),BOM机构表示目标金融机构(总行)的分支金融机构的机构编号,金融机构代码表示目标金融机构的代码,内部币种为待查询的资源数据(如债券)的币种,债券代码为待查询的资源数据(如债券)的代码,查询编号输入ZQ可在“查询信息编号”中模糊匹配到多条出现ZQ的数据,查询类型默认从聚合表中查询出错误数据,查询名称即为查询信息名称,包括聚合表的名称。查询数量为选填项,表示查询得到的数据的最大数量。错误数据的查看格式默认为csv格式。点击提交查询,即可得到错误数据集合。
由于实际业务信息统计系统中采用“聚合名称”这一字段,为后台开发人员自行设置,不一定完全与初始校验结果中的表单名称相同,例如初始校验结果中的存量债券发行余额信息,在实际业务信息统计系统中的聚合名称为债券发行余额表,因此依据表单名称去匹配查询范围无法实现的。示例数据行号的规则为“金融机构代码_查询编号_批量日期”,因此可以根据示例数据行号来对应出要查询的表格和批量日期,进而确定出错误数据的位置信息。例如,示例数据行号为“91100000100003692T_CLZQFX_20231031”。
具体的方法为:在“重制并输出错误数据集合”按钮下设置接口关联至“发起明细数据查询”功能,上传初始校验结果后,系统自动逐行读取初始校验结果:
(1)自第二行起读取“示例数据行号”中的两个下划线之间的英文表名作为“查询编号”,具体判断是否为英文表名的方法有很多种,可以读取整个字符串然后取出两个下划线中间的部分判断为英文表名,也可以依次读取示例数据行号的每个字符,判断是否属于英文字母,且其前面不是数字,后面不是下划线,则保留该字符,以这种方式读出英文字符串作为英文表名,还有很多其他方式,如自然语言处理等;
(2)读取“示例数据行号”中的日期作为查询的“批量日期”,具体判断方法有很多种,可以模糊匹配“20%”读取自20起的八位字符,也可读取第二个下划线后的八位等等;
(3)该接口默认查询类型为聚合表,默认数据范围为“校验错误数据”,上传初始校验结果后无特殊需求无需手动选择;
(4)读取初始校验结果中的“校验规则编号”作为查询的“规则代码”。
即,将查询编号、批量日期、校验规则编号作为查询时输入的“错误数据在全量数据中的位置信息”,以提取出错误数据集合。
上传初始校验结果并点击“重制并输出错误数据集合”后,系统自动将初始校验结果中的校验规则编号与当前“逻辑清单”中的校验规则编号相匹配,若能匹配一致则进一步提取“逻辑清单”中对应的“校验规则”对提取到的错误数据进行判断:如果本期数据中,取到的校验规则编号对应的错误数据集合全部符合“逻辑清单”中的该条校验规则,则将“逻辑清单”中该校验规则对应的“错误说明”赋给初始校验结果中该校验规则编号所在行的“错误说明”字段;如果提取到的错误数据中有不符合“校验规则”的,则初始校验结果中的“错误说明”字段仍保持空值,得到“校验结果X”;且将该校验规则对应的错误数据存储在“过滤版错误数据集合X”表格内,“校验结果X”和“过滤版错误数据集合X”一起输出。注意,“过滤版错误数据集合X”仅包含未能自动补充错误说明的校验规则编号对应的错误数据,不包括已经自动补充错误说明的错误数据。
最终将输出两份文件,一份是自动填报好错误数据满足与历史上触发同样校验规则的、错误原因相同的“校验结果X”表格,一份是包含所有“错误说明”列为空的“过滤版错误数据集合X”表格。业务人员只需依据这份“过滤版错误数据集合X”表格,关注“校验结果X”表格果中“错误说明”为空的那些行,对相关错误数据进行修改即可,对于已填好错误说明的部分,无需修改、订正。
每轮点击“重制并输出错误数据集合”后,会出来一条记录,记录中应至少包含任务号、查询类型、查询信息编号、查询信息名称、查询用户、查询用户机构、提交时间、状态、记录数、错误信息、当前核查次数,当前“过滤版错误数据集合X”是否等于上一版(是/否)等,上方应同样有“下载结果”选项。每轮上传后,系统会存储当前生成的“校验结果X”和“过滤版错误数据集合X”,并判断当前生成的“过滤版错误数据集合X”是否等于上一轮次的“过滤版错误数据集合X-1”。因为当前错误数据修改订正后仍存在,即为需要向中心金融机构填充错误说明的数据(即第一类错误和/或第二类错误),第三类错误订正后下轮不会重复出现,就算下一轮还有第三类错误,依照上一轮次的校验结果中的校验规则,订正后只可能会触发其他校验,但也不会再出现触发校验、条数和数据都一模一样的错误。因此可以把“过滤版错误数据集合X”是否等于上一轮次的“过滤版错误数据集合X-1”当做判断结束核查的依据:字段值为“是”时,说明可订正的第三类错误均已完成,剩下的就是补充相应的“错误说明”字段。点击“下载结果”即可得到“校验结果X”和“过滤版错误数据集合X”。
每轮上传校验结果时,系统会自动显示上传的次数,当次数为1时,会默认“过滤版错误数据集合X”是否等于上一轮次的“过滤版错误数据集合X-1”的结果字段为否,因为没有上一轮次的“过滤版错误数据集合X-1”可以比对,直接下载两份结果并订正即可。
这样得到的“过滤版校验错误数据X”,全部为需要业务人员订正的部分。在现有技术中,对于每个校验规则编号下的错误数据,需要业务人员手动去数据库逐条取出,作出判断是否属于需要订正的第三类错误,然后拼接在一起进行订正。有了这版“过滤版校验错误数据X”后,业务人员无需再手动遍历并检查所有错误数据,而只需关注“过滤版校验错误数据X”,效率上得到了很大提升。且一般订正好的数据不会再触发预警。
以此类推,在目标报送系统的初始校验结果出来后,将初始校验结果报告上传至“重制并输出错误数据集合”接口,重点关注那些无法自动填充的错误数据。把相应的错误数据订正后,重新生成报文,上传目标报送系统,得到新的校验结果,再重复上述操作,直至“过滤版错误数据集合X”等于上一轮次的“过滤版错误数据集合X-1”,再由业务终端补充“校验结果X”中空白的错误说明,得到了最终版的校验结果,此时说明本期报送的核查工作完成。将当前报文、最终版的校验结果上传目标报送系统,完成本期报送。
此外,再将最终版的校验结果上传至“校验结果维护”接口,以完成对“基准表”和“逻辑清单”的更新和维护。
当“校验结果X”中的错误说明全部自动填充且“过滤版错误数据集合X”中无内容时,说明本期报送的最终版的校验结果无更新内容,则无需进行上述维护操作。
当前报送的真实现状是,每期最终报送后,最终版的校验结果中的“校验规则编号”和“错误说明”均为和本期重复的,很少发生变化,因此通过这种方式,可以过滤掉大部分重复触发的校验预警,业务人员只需在每轮报送时对“过滤版错误数据集合X”进行重点核查即可,大大减轻了业务人员的人工核查压力。
在一个具体的场景示例中,可参阅图3所示的流程进行数据报送。首先,将当前轮次的报文发送至目标报送系统;并接收所述目标报送系统针对当前轮次的报文反馈的当前轮次的初始校验结果;根据当前轮次的初始校验结果,提取得到当前轮次的错误数据集合;根据当前轮次的错误数据集合,对当前轮次的初始校验结果中的属于第一类错误的错误说明字段进行填充,得到第一目标校验结果;利用当前轮次的错误数据集合是否等于上一轮次的错误数据集合,检测是否满足终止条件,在“是”的情况下满足终止条件;在满足终止条件的情况下,检测所述第一目标校验结果中是否存在第二类错误;在确定所述第一目标校验结果中存在第二类错误的情况下,将所述第一目标校验结果发送至业务终端,业务终端对所述第一目标校验结果中的属于第二类错误的错误说明字段进行填充,得到所述第二目标校验结果,并将第二目标校验结果返回;将所述第二目标校验结果、当前轮次的报文发送至所述目标报送系统。在确定所述第一目标校验结果中不存在第二类错误的情况下,将第一目标校验结果、当前轮次的报文直接发送至所述目标报送系统。在不满足终止条件的情况下,将所述第一目标校验结果发送至所述业务终端;业务终端根据第一目标校验结果,对数据库中当前轮次的全量数据进行修改,得到更新后的全量数据;服务器获取并根据更新后的全量数据,生成更新后的报文,将更新后的报文发送至所述目标报送系统,接收所述目标报送系统针对更新后的报文反馈的更新后的初始校验结果,然后根据更新后的初始校验结果,提取得到当更新后的错误数据集合,以进行当前轮次的检测与填充错误说明。
基于上述数据报送方法,本说明书还提出一种数据报送装置的实施例,参阅图4所示,所述数据报送装置具体包括以下模块:第一发送模块401、提取模块402、填充模块403、第一检测模块404、第二检测模块405、第二发送模块406、第三发送模块407。
第一发送模块401,用于将当前轮次的报文发送至目标报送系统;并接收所述目标报送系统针对当前轮次的报文反馈的当前轮次的初始校验结果;
提取模块402,用于根据当前轮次的初始校验结果,提取得到当前轮次的错误数据集合;
填充模块403,用于根据当前轮次的错误数据集合,对当前轮次的初始校验结果中的属于第一类错误的错误说明字段进行填充,得到第一目标校验结果;
第一检测模块404,用于利用当前轮次的错误数据集合,检测是否满足终止条件;
第二检测模块405,用于在确定满足终止条件的情况下,检测所述第一目标校验结果中是否存在第二类错误;
第二发送模块406,用于在确定所述第一目标校验结果中存在第二类错误的情况下,将所述第一目标校验结果发送至业务终端;并接收所述业务终端反馈的第二目标校验结果;其中,所述业务终端用于对所述第一目标校验结果中的属于第二类错误的错误说明字段进行填充,以得到所述第二目标校验结果;
第三发送模块407,用于将所述第二目标校验结果、当前轮次的报文发送至所述目标报送系统。
在一些实施例中,所述装置还用于:在确定不满足终止条件的情况下,将所述第一目标校验结果发送至所述业务终端;其中,所述业务终端用于根据所述第一目标校验结果对当前轮次的全量数据进行修改以得到更新后的全量数据;获取并根据更新后的全量数据,生成更新后的报文;将更新后的报文发送至所述目标报送系统;接收所述目标报送系统针对更新后的报文反馈的更新后的初始校验结果。
在一些实施例中,所述装置还用于:在确定所述第一目标校验结果中不存在第二类错误的情况下,将所述第一目标校验结果、当前轮次的报文发送至所述目标报送系统。
在一些实施例中,所述第一检测模块404,具体用于获取上一轮次的错误数据集合;检测当前轮次的错误数据集合与上一轮次的错误数据集合是否一致;在确定当前轮次的错误数据集合与上一轮次的错误数据集合一致的情况下,确定满足终止条件。
在一些实施例中,所述填充模块403,具体用于获取规则清单;根据所述初始校验结果中的校验规则编号,从所述规则清单的校验规则中,确定出目标校验规则;利用所述目标校验规则与所述错误数据集合,从所述初始校验结果中确定出第一类错误;利用所述规则清单的错误说明,对所述初始校验结果中属于第一类错误的错误说明字段进行填充,得到第一目标校验结果。
在一些实施例中,所述装置还用于通过如下方式预先构建规则清单:获取第一历史校验结果;并确定所述第一历史校验结果中各个校验结果的出现次数;从所述第一历史校验结果中,提取出出现次数大于预设次数阈值的校验结果,作为第二历史校验结果;确定所述第二历史校验结果对应的错误说明与校验规则,构建规则清单。
在一些实施例中,所述装置还用于利用所述第二目标校验结果对所述规则清单进行更新,得到更新后的规则清单。
需要说明的是,上述实施例阐明的单元、装置或模块等,具体可以由计算机芯片或实体实现,或者由具有某种功能的产品来实现。为了描述的方便,描述以上装置时以功能分为各种模块分别描述。当然,在实施本说明书时可以把各模块的功能在同一个或多个软件和/或硬件中实现,也可以将实现同一功能的模块由多个子模块或子单元的组合实现等。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
本说明书实施例还提供一种数据报送方法的计算机存储介质,所述计算机存储介质存储有计算机程序指令,在所述计算机程序指令被处理器执行时实现:将当前轮次的报文发送至目标报送系统;并接收所述目标报送系统针对当前轮次的报文反馈的当前轮次的初始校验结果;根据当前轮次的初始校验结果,提取得到当前轮次的错误数据集合;根据当前轮次的错误数据集合,对当前轮次的初始校验结果中的属于第一类错误的错误说明字段进行填充,得到第一目标校验结果;利用当前轮次的错误数据集合,检测是否满足终止条件;在确定满足终止条件的情况下,检测所述第一目标校验结果中是否存在第二类错误;在确定所述第一目标校验结果中存在第二类错误的情况下,将所述第一目标校验结果发送至业务终端;并接收所述业务终端反馈的第二目标校验结果;其中,所述业务终端用于对所述第一目标校验结果中的属于第二类错误的错误说明字段进行填充,以得到所述第二目标校验结果;将所述第二目标校验结果、当前轮次的报文发送至所述目标报送系统。
在本实施例中,上述存储介质包括但不限于随机存取存储器(Random AccessMemory,RAM)、只读存储器(Read-Only Memory,ROM)、缓存(Cache)、硬盘(Hard DiskDrive,HDD)或者存储卡(Memory Card)。所述存储器可以用于存储计算机程序指令。网络通信单元可以是依照通信协议规定的标准设置的,用于进行网络连接通信的接口。
在本实施例中,该计算机存储介质存储的程序指令具体实现的功能和效果,可以与其它实施方式对照解释,在此不再赘述。
本申请还提供一种计算机程序产品,所述计算机程序产品包括计算机程序,所述计算机程序被处理器执行时实现:将当前轮次的报文发送至目标报送系统;并接收所述目标报送系统针对当前轮次的报文反馈的当前轮次的初始校验结果;根据当前轮次的初始校验结果,提取得到当前轮次的错误数据集合;根据当前轮次的错误数据集合,对当前轮次的初始校验结果中的属于第一类错误的错误说明字段进行填充,得到第一目标校验结果;利用当前轮次的错误数据集合,检测是否满足终止条件;在确定满足终止条件的情况下,检测所述第一目标校验结果中是否存在第二类错误;在确定所述第一目标校验结果中存在第二类错误的情况下,将所述第一目标校验结果发送至业务终端;并接收所述业务终端反馈的第二目标校验结果;其中,所述业务终端用于对所述第一目标校验结果中的属于第二类错误的错误说明字段进行填充,以得到所述第二目标校验结果;将所述第二目标校验结果、当前轮次的报文发送至所述目标报送系统。
本说明书还提供一种服务器,包括处理器以及用于存储处理器可执行指令的存储器,所述处理器具体实施时可以根据指令执行以下步骤:将当前轮次的报文发送至目标报送系统;并接收所述目标报送系统针对当前轮次的报文反馈的当前轮次的初始校验结果;根据当前轮次的初始校验结果,提取得到当前轮次的错误数据集合;根据当前轮次的错误数据集合,对当前轮次的初始校验结果中的属于第一类错误的错误说明字段进行填充,得到第一目标校验结果;利用当前轮次的错误数据集合,检测是否满足终止条件;在确定满足终止条件的情况下,检测所述第一目标校验结果中是否存在第二类错误;在确定所述第一目标校验结果中存在第二类错误的情况下,将所述第一目标校验结果发送至业务终端;并接收所述业务终端反馈的第二目标校验结果;其中,所述业务终端用于对所述第一目标校验结果中的属于第二类错误的错误说明字段进行填充,以得到所述第二目标校验结果;将所述第二目标校验结果、当前轮次的报文发送至所述目标报送系统。
为了能够更加准确地完成上述指令,参阅图5所示,本说明书实施例还提供了另一种具体的服务器,其中,所述服务器包括网络通信端口501、处理器502以及存储器503,上述结构通过内部线缆相连,以便各个结构可以进行具体的数据交互。
其中,所述网络通信端口501,具体可以用于将当前轮次的报文发送至目标报送系统;并接收所述目标报送系统针对当前轮次的报文反馈的当前轮次的初始校验结果。
所述处理器502,具体可以用于根据当前轮次的初始校验结果,提取得到当前轮次的错误数据集合;根据当前轮次的错误数据集合,对当前轮次的初始校验结果中的属于第一类错误的错误说明字段进行填充,得到第一目标校验结果;利用当前轮次的错误数据集合,检测是否满足终止条件;在确定满足终止条件的情况下,检测所述第一目标校验结果中是否存在第二类错误;在确定所述第一目标校验结果中存在第二类错误的情况下,将所述第一目标校验结果发送至业务终端;并接收所述业务终端反馈的第二目标校验结果;其中,所述业务终端用于对所述第一目标校验结果中的属于第二类错误的错误说明字段进行填充,以得到所述第二目标校验结果;将所述第二目标校验结果、当前轮次的报文发送至所述目标报送系统。
所述存储器503,具体可以用于存储相应的指令程序。
在本实施例中,所述网络通信端口501可以是与不同的通信协议进行绑定,从而可以发送或接收不同数据的虚拟端口。例如,所述网络通信端口可以是负责进行web数据通信的端口,也可以是负责进行FTP数据通信的端口,还可以是负责进行邮件数据通信的端口。此外,所述网络通信端口还可以是实体的通信接口或者通信芯片。例如,其可以为无线移动网络通信芯片,如GSM、CDMA等;其还可以为Wifi芯片;其还可以为蓝牙芯片。
在本实施例中,所述处理器502可以按任何适当的方式实现。例如,处理器可以采取例如微处理器或处理器以及存储可由该(微)处理器执行的计算机可读程序代码(例如软件或固件)的计算机可读介质、逻辑门、开关、专用集成电路(Application SpecificIntegrated Circuit,ASIC)、可编程逻辑控制器和嵌入微控制器的形式等等。本说明书并不作限定。
在本实施例中,所述存储器503可以包括多个层次,在数字系统中,只要能保存二进制数据的都可以是存储器;在集成电路中,一个没有实物形式的具有存储功能的电路也叫存储器,如RAM、FIFO等;在系统中,具有实物形式的存储设备也叫存储器,如内存条、TF卡等。
虽然本说明书提供了如实施例或流程图所述的方法操作步骤,但基于常规或者无创造性的手段可以包括更多或者更少的操作步骤。实施例中列举的步骤顺序仅仅为众多步骤执行顺序中的一种方式,不代表唯一的执行顺序。在实际中的装置或客户端产品执行时,可以按照实施例或者附图所示的方法顺序执行或者并行执行(例如并行处理器或者多线程处理的环境,甚至为分布式数据处理环境)。术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、产品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、产品或者设备所固有的要素。在没有更多限制的情况下,并不排除在包括所述要素的过程、方法、产品或者设备中还存在另外的相同或等同要素。第一,第二等词语用来表示名称,而并不表示任何特定的顺序。
本领域技术人员也知道,除了以纯计算机可读程序代码方式实现控制器以外,完全可以通过将方法步骤进行逻辑编程来使得控制器以逻辑门、开关、专用集成电路、可编程逻辑控制器和嵌入微控制器等的形式来实现相同功能。因此这种控制器可以被认为是一种硬件部件,而对其内部包括的用于实现各种功能的装置也可以视为硬件部件内的结构。或者甚至,可以将用于实现各种功能的装置视为既可以是实现方法的软件模块又可以是硬件部件内的结构。
本说明书可以在由计算机执行的计算机可执行指令的一般上下文中描述,例如程序模块。一般地,程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、组件、数据结构、类等等。也可以在分布式计算环境中实践本说明书,在这些分布式计算环境中,由通过通信网络而被连接的远程处理设备来执行任务。在分布式计算环境中,程序模块可以位于包括存储设备在内的本地和远程计算机存储介质中。
通过以上的实施例的描述可知,本领域的技术人员可以清楚地了解到本说明书可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解,本说明书的技术方案本质上可以以软件产品的形式体现出来,该计算机软件产品可以存储在存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,移动终端,服务器,或者网络设备等)执行本说明书各个实施例或者实施例的某些部分所述的方法。
本说明书中的各个实施例采用递进的方式描述,各个实施例之间相同或相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。本说明书可用于众多通用或专用的计算机系统环境或配置中。例如:个人计算机、服务器计算机、手持设备或便携式设备、平板型设备、多处理器系统、基于微处理器的系统、置顶盒、可编程的电子设备、网络PC、小型计算机、大型计算机、包括以上任何系统或设备的分布式计算环境等等。
虽然通过实施例描绘了本说明书,本领域普通技术人员知道,本说明书有许多变形和变化而不脱离本说明书的精神,希望所附的权利要求包括这些变形和变化而不脱离本说明书的精神。
Claims (13)
1.一种数据报送方法,其特征在于,包括:
将当前轮次的报文发送至目标报送系统;并接收所述目标报送系统针对当前轮次的报文反馈的当前轮次的初始校验结果;
根据当前轮次的初始校验结果,提取得到当前轮次的错误数据集合;
根据当前轮次的错误数据集合,对当前轮次的初始校验结果中的属于第一类错误的错误说明字段进行填充,得到第一目标校验结果;
利用当前轮次的错误数据集合,检测是否满足终止条件;
在确定满足终止条件的情况下,检测所述第一目标校验结果中是否存在第二类错误;
在确定所述第一目标校验结果中存在第二类错误的情况下,将所述第一目标校验结果发送至业务终端;并接收所述业务终端反馈的第二目标校验结果;其中,所述业务终端用于对所述第一目标校验结果中的属于第二类错误的错误说明字段进行填充,以得到所述第二目标校验结果;
将所述第二目标校验结果、当前轮次的报文发送至所述目标报送系统。
2.根据权利要求1所述的方法,其特征在于,在利用当前轮次的错误数据集合,检测是否满足终止条件之后,所述方法还包括:
在确定不满足终止条件的情况下,将所述第一目标校验结果发送至所述业务终端;其中,所述业务终端用于根据所述第一目标校验结果对当前轮次的全量数据进行修改以得到更新后的全量数据;
获取并根据更新后的全量数据,生成更新后的报文;
将更新后的报文发送至所述目标报送系统;
接收所述目标报送系统针对更新后的报文反馈的更新后的初始校验结果。
3.根据权利要求1所述的方法,其特征在于,在检测所述第一目标校验结果中是否存在第二类错误之后,所述方法还包括:
在确定所述第一目标校验结果中不存在第二类错误的情况下,将所述第一目标校验结果、当前轮次的报文发送至所述目标报送系统。
4.根据权利要求1所述的方法,其特征在于,利用当前轮次的错误数据集合,检测是否满足终止条件,包括:
获取上一轮次的错误数据集合;
检测当前轮次的错误数据集合与上一轮次的错误数据集合是否一致;
在确定当前轮次的错误数据集合与上一轮次的错误数据集合一致的情况下,确定满足终止条件。
5.根据权利要求1所述的方法,其特征在于,所述初始校验结果包括:校验规则编号、错误说明字段;其中,所述错误说明字段为空白字段;
相应的,根据当前轮次的错误数据集合,对当前轮次的初始校验结果中的属于第一类错误的错误说明字段进行填充,得到第一目标校验结果,包括:
获取规则清单;
根据所述初始校验结果中的校验规则编号,从所述规则清单的校验规则中,确定出目标校验规则;
利用所述目标校验规则与所述错误数据集合,从所述初始校验结果中确定出第一类错误;
利用所述规则清单的错误说明,对所述初始校验结果中属于第一类错误的错误说明字段进行填充,得到第一目标校验结果。
6.根据权利要求5所述的方法,其特征在于,利用所述目标校验规则与所述错误数据集合,从所述初始校验结果中确定出第一类错误,包括:
利用所述目标校验规则,对所述错误数据集合进行校验,得到中间结果;
从所述错误数据集合中,筛选出中间结果为满足校验规则的错误数据,作为第一类错误。
7.根据权利要求5所述的方法,其特征在于,利用所述规则清单的错误说明,对所述初始校验结果中属于第一类错误的错误说明字段进行填充,得到第一目标校验结果,包括:
根据第一类错误的校验规则编号,从所述规则清单中,确定出第一类错误的错误说明;
将第一类错误的错误说明填充至所述初始校验结果中相对应的错误说明字段,得到第一目标校验结果。
8.根据权利要求5所述的方法,其特征在于,所述规则清单通过如下方式构建:
获取第一历史校验结果;并确定所述第一历史校验结果中各个校验结果的出现次数;
从所述第一历史校验结果中,提取出出现次数大于预设次数阈值的校验结果,作为第二历史校验结果;
确定所述第二历史校验结果对应的错误说明与校验规则,构建规则清单。
9.根据权利要求5所述的方法,其特征在于,所述方法还包括:
利用所述第二目标校验结果对所述规则清单进行更新,得到更新后的规则清单。
10.根据权利要求8或9所述的方法,其特征在于,利用所述第二目标校验结果对所述规则清单进行更新,得到更新后的规则清单,包括:
将所述第二目标校验结果加入到所述第一历史校验结果中,得到更新后的第一历史校验结果;
确定更新后的第一历史校验结果中各个校验结果的出现次数;
从更新后的第一历史校验结果中,提取出出现次数大于预设次数阈值的校验结果,作为更新后的第二历史校验结果;
利用更新后的第二历史校验结果,对所述规则清单进行更新,得到更新后的规则清单。
11.一种数据报送装置,其特征在于,包括:
第一发送模块,用于将当前轮次的报文发送至目标报送系统;并接收所述目标报送系统针对当前轮次的报文反馈的当前轮次的初始校验结果;
提取模块,用于根据当前轮次的初始校验结果,提取得到当前轮次的错误数据集合;
填充模块,用于根据当前轮次的错误数据集合,对当前轮次的初始校验结果中的属于第一类错误的错误说明字段进行填充,得到第一目标校验结果;
第一检测模块,用于利用当前轮次的错误数据集合,检测是否满足终止条件;
第二检测模块,用于在确定满足终止条件的情况下,检测所述第一目标校验结果中是否存在第二类错误;
第二发送模块,用于在确定所述第一目标校验结果中存在第二类错误的情况下,将所述第一目标校验结果发送至业务终端;并接收所述业务终端反馈的第二目标校验结果;其中,所述业务终端用于对所述第一目标校验结果中的属于第二类错误的错误说明字段进行填充,以得到所述第二目标校验结果;
第三发送模块,用于将所述第二目标校验结果、当前轮次的报文发送至所述目标报送系统。
12.一种服务器,其特征在于,包括处理器及用于存储处理器可执行指令的存储器,所述处理器执行所述指令时实现权利要求1至10任一项所述方法的步骤。
13.一种计算机可读存储介质,其特征在于,其上存储有计算机指令,所述指令被处理器执行时实现权利要求1至10任一项所述方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410131005.1A CN117874087A (zh) | 2024-01-30 | 2024-01-30 | 一种数据报送方法、装置、服务器 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410131005.1A CN117874087A (zh) | 2024-01-30 | 2024-01-30 | 一种数据报送方法、装置、服务器 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117874087A true CN117874087A (zh) | 2024-04-12 |
Family
ID=90582844
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202410131005.1A Pending CN117874087A (zh) | 2024-01-30 | 2024-01-30 | 一种数据报送方法、装置、服务器 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117874087A (zh) |
-
2024
- 2024-01-30 CN CN202410131005.1A patent/CN117874087A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108647357B (zh) | 数据查询的方法及装置 | |
CN110399380B (zh) | 一种数据处理方法、电子装置及存储介质 | |
CN104866599A (zh) | 可视化报表的生产方法和系统 | |
US9691065B2 (en) | Automated transactions clearing system and method | |
CN116415206B (zh) | 运营商多数据融合方法、系统、电子设备及计算机存储介质 | |
CN107633015A (zh) | 一种数据处理方法、装置及设备 | |
KR101737578B1 (ko) | 자동 생성된 sql 구문에 대한 자동 튜닝 방법 및 장치 | |
CN108073707B (zh) | 金融业务数据更新方法、装置及计算机可读取存储介质 | |
CN112612775A (zh) | 一种数据存储方法、装置、计算机设备及存储介质 | |
CN113886590A (zh) | 数据汇总方法、装置、计算机设备及存储介质 | |
CN107169767B (zh) | 交易冲正方法和系统 | |
CN109324963B (zh) | 自动测试收益结果的方法及终端设备 | |
CN116756129A (zh) | 数据补录方法、装置、存储介质及电子设备 | |
CN117874087A (zh) | 一种数据报送方法、装置、服务器 | |
CN111274248A (zh) | 一种计费数据的生成方法及装置 | |
CN116821119A (zh) | 一种报文解析代码的生成方法、装置及服务器 | |
CN112070470B (zh) | 一种年报申报方法、装置、电子设备及存储介质 | |
CN111797590B (zh) | 数据核对方法、装置和设备 | |
CN111241082B (zh) | 数据修正方法及装置 | |
CN114511314A (zh) | 一种支付账户管理的方法、装置、计算机设备和存储介质 | |
CN114490415A (zh) | 业务测试方法、计算机设备、存储介质和计算机程序产品 | |
CN109785099B (zh) | 一种自动对业务数据信息进行处理的方法及系统 | |
CN112232962A (zh) | 交易指标处理方法、装置和设备 | |
CN110956552A (zh) | 保险问题处理方法、装置、设备及存储介质 | |
CN107180047B (zh) | 文件的生成方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |