CN110147378A - 数据核对方法、装置、计算机设备及存储介质 - Google Patents

数据核对方法、装置、计算机设备及存储介质 Download PDF

Info

Publication number
CN110147378A
CN110147378A CN201910262628.1A CN201910262628A CN110147378A CN 110147378 A CN110147378 A CN 110147378A CN 201910262628 A CN201910262628 A CN 201910262628A CN 110147378 A CN110147378 A CN 110147378A
Authority
CN
China
Prior art keywords
data
message
business
verification
statistics
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910262628.1A
Other languages
English (en)
Other versions
CN110147378B (zh
Inventor
周罡
祁亚欣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ping An Technology Shenzhen Co Ltd
Original Assignee
Ping An Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ping An Technology Shenzhen Co Ltd filed Critical Ping An Technology Shenzhen Co Ltd
Priority to CN201910262628.1A priority Critical patent/CN110147378B/zh
Publication of CN110147378A publication Critical patent/CN110147378A/zh
Application granted granted Critical
Publication of CN110147378B publication Critical patent/CN110147378B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23Updating
    • G06F16/2365Ensuring data consistency and integrity
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2458Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
    • G06F16/2462Approximate or statistical queries

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Probability & Statistics with Applications (AREA)
  • Computer Security & Cryptography (AREA)
  • Fuzzy Systems (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Computational Linguistics (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开了数据核对方法、装置、计算机设备及存储介质。方法包括:若到达预设数据获取任务中的获取时间点,通过所述数据获取任务获取报文数据及上游业务数据;通过预设的报文数据统计任务对所述报文数据进行统计以得到报文统计数据;通过预设的业务数据统计任务对所述上游业务数据进行统计以得到业务统计数据;根据预设的数据核对模型对所述报文统计数据及所述业务统计数据进行核对以生成数据核对表。本发明基于风险管控技术,能够对报文数据进行核对以确保数据的准确性,在实际应用过程中取得了良好的技术效果。

Description

数据核对方法、装置、计算机设备及存储介质
技术领域
本发明涉及计算机技术领域,尤其涉及一种数据核对方法、装置、计算机设备及存储介质。
背景技术
企业在对业务数据进行上报时,会获取企业所统计得到的业务数据并生成相应报文数据以进行上报,然而由于在多个系统之间进行数据交互并生成报文数据的过程中容易产生统计误差,导致所生成的报文数据与原始数据信息存在误差,报文数据中存在误报、漏报、错报的数据,因而报文数据准确性不足使企业在对业务数据进行上报时给企业带来损失。因而,现有的技术方法中存在数据的准确性不足的问题。
发明内容
本发明实施例提供了一种数据核对方法、装置、计算机设备及存储介质,旨在解决现有现有技术方法中所存在的数据准确性不足的问题。
第一方面,本发明实施例提供了一种数据核对方法,其包括:
若到达预设数据获取任务中的获取时间点,通过所述数据获取任务获取报文数据及上游业务数据,其中,所述数据获取任务中包括报文数据获取地址及上游业务数据获取地址;
通过预设的报文数据统计任务对所述报文数据进行统计以得到报文统计数据,其中,所述报文数据统计任务包括报文字段映射信息及报文统计规则,所述报文字段映射信息中包含多个报文字段;
通过预设的业务数据统计任务对所述上游业务数据进行统计以得到业务统计数据,其中,所述业务数据统计任务包括业务数据字段及业务数据统计规则;
根据预设的数据核对模型对所述报文统计数据及所述业务统计数据进行核对以生成数据核对表,其中,所述数据核对模型中包括包含多个数据核对字段的预设表格。
第二方面,本发明实施例提供了一种数据核对装置,其包括:
数据获取单元,用于若到达预设数据获取任务中的获取时间点,通过所述数据获取任务获取报文数据及上游业务数据,其中,所述数据获取任务中包括报文数据获取地址及上游业务数据获取地址;
报文数据统计单元,用于通过预设的报文数据统计任务对所述报文数据进行统计以得到报文统计数据,其中,所述报文数据统计任务包括报文字段映射信息及报文统计规则,所述报文字段映射信息中包含多个报文字段;
业务数据统计单元,用于通过预设的业务数据统计任务对所述上游业务数据进行统计以得到业务统计数据,其中,所述业务数据统计任务包括业务数据字段及业务数据统计规则;
数据核对表生成单元,用于根据预设的数据核对模型对所述报文统计数据及所述业务统计数据进行核对以生成数据核对表,其中,所述数据核对模型中包括包含多个数据核对字段的预设表格。
第三方面,本发明实施例又提供了一种计算机设备,其包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述第一方面所述的数据核对方法。
第四方面,本发明实施例还提供了一种计算机可读存储介质,其中所述计算机可读存储介质存储有计算机程序,所述计算机程序当被处理器执行时使所述处理器执行上述第一方面所述的数据核对方法。
本发明实施例提供了一种数据核对方法、装置、计算机设备及存储介质。通过数据获取任务获取报文数据及上游业务数据,并分别统计得到报文统计数据及业务统计数据,通过对报文统计数据及业务统计数据进行核对并生成数据核对表。通过上述数据核对方法,能够对报文数据进行核对以确保数据的准确性,在实际应用过程中取得了良好的技术效果。
附图说明
为了更清楚地说明本发明实施例技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的数据核对方法的流程示意图;
图2为本发明实施例提供的数据核对方法的子流程示意图;
图3为本发明实施例提供的数据核对方法的另一子流程示意图;
图4为本发明实施例提供的数据核对方法的另一子流程示意图;
图5为本发明实施例提供的数据核对方法的另一流程示意图;
图6为本发明实施例提供的数据核对装置的示意性框图;
图7为本发明实施例提供的数据核对装置的子单元示意性框图;
图8为本发明实施例提供的数据核对装置的另一子单元示意性框图;
图9为本发明实施例提供的数据核对装置的另一子单元示意性框图;
图10为本发明实施例提供的数据核对装置的另一示意性框图;
图11为本发明实施例提供的计算机设备的示意性框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
应当理解,当在本说明书和所附权利要求书中使用时,术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在,但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解,在此本发明说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本发明。如在本发明说明书和所附权利要求书中所使用的那样,除非上下文清楚地指明其它情况,否则单数形式的“一”、“一个”及“该”意在包括复数形式。
还应当进一步理解,在本发明说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。
请参阅图1,图1是本发明实施例提供的数据核对方法的流程示意图。该数据核对方法应用于管理服务器中,该方法通过安装于管理服务器中的应用软件进行执行,管理服务器即是用于执行数据核对方法以对数据信息进行核对的企业终端。
如图1所示,该方法包括步骤S110~S140。
S110、若到达预设数据获取任务中的获取时间点,通过所述数据获取任务获取报文数据及上游业务数据。
若到达预设数据获取任务中的获取时间点,通过所述数据获取任务获取报文数据及上游业务数据。具体的,报文数据即是企业在对业务数据进行上报时所生成的数据信息,报文数据根据上游业务数据对应生成,上游业务数据即是直接从上游其他机构或部门所获取得到的数据信息,上游业务数据中包含一个或多个上游业务数据表。
可预先设置对报文数据及上游业务数据进行获取的数据获取任务,若到达数据获取任务中的获取时间点,则启动数据获取任务获取报文数据及上游业务数据,数据获取任务中包括报文数据获取地址及上游业务数据获取地址,具体的,通过向报文数据获取地址发送数据获取请求即可获取得到报文数据,通过向上游业务数据获取地址发送数据获取请求即可获取得到上游业务数据。其中,获取时间点可设置为报文数据生成后的某个时间。
例如,可设置获取时间点为报文数据生成后第二天的5:00,则报文数据生成后第二天5:00通过执行数据获取任务获取报文数据及上游业务数据。
S120、通过预设的报文数据统计任务对所述报文数据进行统计以得到报文统计数据。
通过预设报文数据统计任务对所述报文数据进行统计以得到报文统计数据。报文数据统计任务即是用于对所获取到的报文数据进行统计的任务,报文数据统计任务在获取得到报文数据后即被执行,报文统计数据即是根据报文数据所统计得到的数据信息。其中,报文数据统计任务中包括报文字段映射信息及报文统计规则,报文字段映射信息中包含多个报文字段。具体的,报文数据可分为多个上报段进行存储,报文数据中包含多份报文,每一份报文均根据上报段对应拆分成多个部分进行存储。
报文数据中所包含的多个信息段如表1中所示。
编号 上报段名称
1 基础段
2 担保合同信息段
3 被担保人信息段
4 债权人及主合同信息段
5 反担保人信息段
6 实际在保责任信息段
7 代偿概况信息段
8 代偿明细信息段
9 追偿明细信息段
10 保费缴纳概况信息段
11 保费缴纳明细信息段
表1
如表1中所示,上报段名称为基础段即是该份报文中所包含的基础信息,基础段中所包含报文的基础信息包括业务流水号、机构编码、客户姓名及客户身份证号等信息,每一份报文中均包含基础段对应的基础信息,但每一份报文中并非包含表1中所有非基础段对应的信息。
在一实施例中,如图2所示,步骤S120包括子步骤S121、S122和S123。
S121、通过所述报文数据统计任务中的报文字段映射信息获取每一报文字段所包含的上报段信息。
通过所述报文数据统计任务中的报文字段映射信息获取每一报文字段相对应的上报段信息。具体的,在报文数据进行统计所得到的报文统计数据中包含多个报文字段,每一报文字段与一个上报段信息相映射,报文字段与上报段信息的映射关系即是报文数据统计任务中的报文字段映射信息,通过文字段映射信息即可获取每一报文字段对应的上报段信息,上报段信息中包含一个或多个上报段名称,上报段信息中还可以包括上报段名称中的字段信息。
例如,报文字段映射信息如表2所示。
表2
S122、获取每一所述报文字段的上报段信息在所述报文数据中对应的目标报文数据信息。
获取每一所述报文字段的上报段信息在所述报文数据中对应的目标报文数据信息。每一报文字段均与对应的上报段信息相对应,则根据与报文字段对应的上报段信息中的具体内容即可对应获取报文数据中与每一报文字段相对应的目标报文数据信息。
例如,放款总金额这一报文字段所对应的上报段信息为“担保合同信息段-放款金额字段”,则取所述报文数据中担保合同信息段的放款金额字段所对应的金额作为与放款总金额这一报文字段相对应的目标报文数据信息。
S123、根据所述报文数据统计任务中的报文统计规则对所述目标报文数据信息进行统计以得到报文统计数据。
根据所述报文数据统计任务中的报文统计规则对所述目标报文数据信息进行统计以得到报文统计数据。具体的,报文统计规则即是用于对所获取得到的目标报文数据信息进行统计的规则信息,报文统计规则中包括对金额的累加以及对户数的计算。
例如,报文统计规则中代偿总金额的统计规则即是将目标报文数据信息中与代偿概况信息段的代偿金额字段所对应的金额进行累加,以统计得到代偿总金额。
S130、通过预设的业务数据统计任务对所述上游业务数据进行统计以得到业务统计数据。
通过预设业务数据统计任务对所述上游业务数据进行统计以得到业务统计数据。上游业务数据中包含一个或多个上游业务数据表,通过预设业务数据统计任务即可从一个或多个上游业务数据表中获取相应的数据并进行统计,以实现对所述上游业务数据进行统计以得到业务统计数据,其中,业务数据统计任务包括业务数据字段及业务数据统计规则,通过业务数据字段即可从上游业务数据中获取与业务数据字段相对应的业务数据信息,业务数据统计规则即是用于对业务数据信息进行统计的具体规则。
在一实施例中,如图3所示,步骤S130包括子步骤S131和S132。
S131、通过所述业务数据统计任务中的业务数据字段获取所述上游业务数据中对应的目标业务数据信息。
通过预设业务数据统计任务中的业务数据字段获取所述上游业务数据中对应的业务数据信息。上游业务数据对应的一个或多个上游业务数据表中,每一个上游业务数据表均包含若干个数据字段,通过业务数据统计任务中的业务数据字段与上游业务数据表中的数据字段进行匹配,即可获取上游业务数据表中与每一业务数据字段相对应的信息作为业务数据信息。
例如,业务数据统计任务中的某一业务数据字段为“追偿账户数”,上游业务数据中包括第一季度上游业务数据表、第二季度上游业务数据表、第三季度上游业务数据表,则分别获取三个上游业务数据表中与“追偿账户数”这一业务数据字段相对应的数据信息作为该业务数据字段对应的业务数据信息。
S132、根据所述业务数据统计任务中的业务数据统计规则对所述目标业务数据信息进行统计以得到业务统计数据。
根据所述业务数据统计任务中的业务数据统计规则对所获取的业务数据信息进行统计以得到业务统计数据。具体的,业务数据统计规则即是用于对所获取得到的业务数据信息进行统计的规则信息,业务数据统计规则中包括对金额的累加以及对户数的累加。
例如,业务数据统计规则中对“追偿账户数”进行统计规则为对业务数据信息中所有与追偿账户数相对应的数据信息进行累加,则将分别从三个上游业务数据表中所获取的与“追偿账户数”这一业务数据字段相对应的数据信息进行累加,即可得到“追偿账户数”对应的业务统计数据。
S140、根据预设的数据核对模型对所述报文统计数据及所述业务统计数据进行核对以生成数据核对表。
根据预设数据核对模型对所述报文统计数据及所述业务统计数据进行核对以生成数据核对表。具体的,所述数据核对模型即是用于对所述报文统计数据及所述业务统计数据进行核对的模型信息,其中,数据核对模型中包括包含多个数据核对字段的预设表格。
在一实施例中,如图4所示,步骤S140包括子步骤S141和S142。
S141、根据所述数据核对字段与所述报文字段及所述业务数据字段的对应关系,将报文统计数据及业务统计数据添加至预设表格中。
根据所述数据核对字段与所述报文字段及所述业务数据字段的对应关系,将报文统计数据及业务统计数据添加至预设表格中。具体的,预设表格中包含有多个数据核对字段,预设表格中每一数据核对字段均与一个报文字段及一个业务数据字段相对应,则可根据数据核对字段与报文字段及业务数据字段的对应关系,将报文统计数据及业务统计数据添加至预设表格中。
S142、对所述报文统计数据及所述业务统计数据进行逐一核对,并对报文统计数据与业务统计数据存在差异的数据核对字段添加异常标记以得到数据核对表。
对所述报文统计数据及所述业务统计数据进行逐一核对,并对报文统计数据与业务统计数据存在差异的数据核对字段添加异常标记以得到数据核对表。每一个数据核对字段均包含报文统计数据中与该数据核对字段对应的一个数据信息,以及业务统计数据中与该数据核对字段对应的一个数据信息,将统一数据核对字段所包含的两部分数据信息进行核对以判断两部分数据信息是否相等,即可获取报文统计数据与业务统计数据存在差异的数据核对字段,并对存在差异的数据核对字段添加异常标记,即可最终得到数据核对表。具体的,异常标记可以是颜色标记、文字标记或其他任何形式的标记信息。
例如,所得到的一份数据核对表如表3所示。
表3
在一实施例中,如图5所示,步骤S140之后还包括步骤S150。
S150、根据所述数据核对表获取存在差异的报文统计数据及业务统计数据以向用户发出报警提示信息。
根据所述数据核对表获取存在差异的报文统计数据及业务统计数据以向用户发出报警提示信息。为对用户进行提醒,可根据所述数据核对表获取存在差异的报文统计数据及业务统计数据,并生成报警提示信息发送至用户。用户获取报警提示信息后即可准确获取报文数据中存在差错的数据信息并及时处理,避免将存在差错的报文数据进行上报以给企业带来损失,大幅提高了生成报文数据的准确性。
通过数据获取任务获取报文数据及上游业务数据,并分别统计得到报文统计数据及业务统计数据,通过对报文统计数据及业务统计数据进行核对并生成数据核对表。通过上述数据核对方法,能够对报文数据进行核对以确保数据的准确性,在实际应用过程中取得了良好的技术效果。
本发明实施例还提供一种数据核对装置,该数据核对装置用于执行前述数据核对方法的任一实施例。具体地,请参阅图6,图6是本发明实施例提供的数据核对装置的示意性框图。该数据核对装置可以配置于管理服务器中。
如图6所示,数据核对装置100包括数据获取单元110、报文数据统计单元120、业务数据统计单元130和数据核对表生成单元140。
数据获取单元110,用于若到达预设数据获取任务中的获取时间点,通过所述数据获取任务获取报文数据及上游业务数据。
若到达预设数据获取任务中的获取时间点,通过所述数据获取任务获取报文数据及上游业务数据。具体的,报文数据即是企业在对业务数据进行上报时所生成的数据信息,报文数据根据上游业务数据对应生成,上游业务数据即是直接从上游其他机构或部门所获取得到的数据信息,上游业务数据中包含一个或多个上游业务数据表。
可预先设置对报文数据及上游业务数据进行获取的数据获取任务,若到达数据获取任务中的获取时间点,则启动数据获取任务获取报文数据及上游业务数据,数据获取任务中包括报文数据获取地址及上游业务数据获取地址,具体的,通过向报文数据获取地址发送数据获取请求即可获取得到报文数据,通过向上游业务数据获取地址发送数据获取请求即可获取得到上游业务数据。其中,获取时间点可设置为报文数据生成后的某个时间。
报文数据统计单元120,用于通过预设的报文数据统计任务对所述报文数据进行统计以得到报文统计数据。
通过预设报文数据统计任务对所述报文数据进行统计以得到报文统计数据。报文数据统计任务即是用于对所获取到的报文数据进行统计的任务,报文数据统计任务在获取得到报文数据后即被执行,报文统计数据即是根据报文数据所统计得到的数据信息。其中,报文数据统计任务中包括报文字段映射信息及报文统计规则,报文字段映射信息中包含多个报文字段。具体的,报文数据可分为多个上报段进行存储,报文数据中包含多份报文,每一份报文均根据上报段对应拆分成多个部分进行存储。
其他发明实施例中,如图7所示,所述报文数据统计单元120包括子单元:上报段信息获取单元121、目标报文数据获取单元122和报文统计数据获取单元123。
上报段信息获取单元121,用于通过所述报文数据统计任务中的报文字段映射信息获取每一报文字段所包含的上报段信息。
通过所述报文数据统计任务中的报文字段映射信息获取每一报文字段相对应的上报段信息。具体的,在报文数据进行统计所得到的报文统计数据中包含多个报文字段,每一报文字段与一个上报段信息相映射,报文字段与上报段信息的映射关系即是报文数据统计任务中的报文字段映射信息,通过文字段映射信息即可获取每一报文字段对应的上报段信息,上报段信息中包含一个或多个上报段名称,上报段信息中还可以包括上报段名称中的字段信息。
目标报文数据获取单元122,用于获取每一所述报文字段的上报段信息在所述报文数据中对应的目标报文数据信息。
获取每一所述报文字段的上报段信息在所述报文数据中对应的目标报文数据信息。每一报文字段均与对应的上报段信息相对应,则根据与报文字段对应的上报段信息中的具体内容即可对应获取报文数据中与每一报文字段相对应的目标报文数据信息。
报文统计数据获取单元123,用于根据所述报文数据统计任务中的报文统计规则对所述目标报文数据信息进行统计以得到报文统计数据。
根据所述报文数据统计任务中的报文统计规则对所述目标报文数据信息进行统计以得到报文统计数据。具体的,报文统计规则即是用于对所获取得到的目标报文数据信息进行统计的规则信息,报文统计规则中包括对金额的累加以及对户数的计算。
业务数据统计单元130,用于通过预设的业务数据统计任务对所述上游业务数据进行统计以得到业务统计数据。
通过预设业务数据统计任务对所述上游业务数据进行统计以得到业务统计数据。上游业务数据中包含一个或多个上游业务数据表,通过预设业务数据统计任务即可从一个或多个上游业务数据表中获取相应的数据并进行统计,以实现对所述上游业务数据进行统计以得到业务统计数据,其中,业务数据统计任务包括业务数据字段及业务数据统计规则,通过业务数据字段即可从上游业务数据中获取与业务数据字段相对应的业务数据信息,业务数据统计规则即是用于对业务数据信息进行统计的具体规则。
其他发明实施例中,如图8所示,所述业务数据统计单元130包括子单元:目标业务数据获取单元131和业务统计数据获取单元132。
目标业务数据获取单元131,用于通过所述业务数据统计任务中的业务数据字段获取所述上游业务数据中对应的目标业务数据信息。
通过预设业务数据统计任务中的业务数据字段获取所述上游业务数据中对应的业务数据信息。上游业务数据对应的一个或多个上游业务数据表中,每一个上游业务数据表均包含若干个数据字段,通过业务数据统计任务中的业务数据字段与上游业务数据表中的数据字段进行匹配,即可获取上游业务数据表中与每一业务数据字段相对应的信息作为业务数据信息。
业务统计数据获取单元132,用于根据所述业务数据统计任务中的业务数据统计规则对所述目标业务数据信息进行统计以得到业务统计数据。
根据所述业务数据统计任务中的业务数据统计规则对所获取的业务数据信息进行统计以得到业务统计数据。具体的,业务数据统计规则即是用于对所获取得到的业务数据信息进行统计的规则信息,业务数据统计规则中包括对金额的累加以及对户数的累加。
数据核对表生成单元140,用于根据预设的数据核对模型对所述报文统计数据及所述业务统计数据进行核对以生成数据核对表。
根据预设数据核对模型对所述报文统计数据及所述业务统计数据进行核对以生成数据核对表。具体的,所述数据核对模型即是用于对所述报文统计数据及所述业务统计数据进行核对的模型信息,其中,数据核对模型中包括包含多个数据核对字段的预设表格。
其他发明实施例中,如图9所示,所述数据核对表生成单元140包括子单元:数据添加单元141和数据核对单元142。
数据添加单元141,用于根据所述数据核对字段与所述报文字段及所述业务数据字段的对应关系,将报文统计数据及业务统计数据添加至预设表格中。
根据所述数据核对字段与所述报文字段及所述业务数据字段的对应关系,将报文统计数据及业务统计数据添加至预设表格中。具体的,预设表格中包含有多个数据核对字段,预设表格中每一数据核对字段均与一个报文字段及一个业务数据字段相对应,则可根据数据核对字段与报文字段及业务数据字段的对应关系,将报文统计数据及业务统计数据添加至预设表格中。
数据核对单元142,用于对所述报文统计数据及所述业务统计数据进行逐一核对,并对报文统计数据与业务统计数据存在差异的数据核对字段添加异常标记以得到数据核对表。
对所述报文统计数据及所述业务统计数据进行逐一核对,并对报文统计数据与业务统计数据存在差异的数据核对字段添加异常标记以得到数据核对表。每一个数据核对字段均包含报文统计数据中与该数据核对字段对应的一个数据信息,以及业务统计数据中与该数据核对字段对应的一个数据信息,将统一数据核对字段所包含的两部分数据信息进行核对以判断两部分数据信息是否相等,即可获取报文统计数据与业务统计数据存在差异的数据核对字段,并对存在差异的数据核对字段添加异常标记,即可最终得到数据核对表。具体的,异常标记可以是颜色标记、文字标记或其他任何形式的标记信息。
其他发明实施例中,如图10所示,所述数据核对装置还包括子单元:报警提示单元150。
报警提示单元150,用于根据所述数据核对表获取存在差异的报文统计数据及业务统计数据以向用户发出报警提示信息。
根据所述数据核对表获取存在差异的报文统计数据及业务统计数据以向用户发出报警提示信息。为对用户进行提醒,可根据所述数据核对表获取存在差异的报文统计数据及业务统计数据,并生成报警提示信息发送至用户。用户获取报警提示信息后即可准确获取报文数据中存在差错的数据信息并及时处理,避免将存在差错的报文数据进行上报以给企业带来损失,大幅提高了生成报文数据的准确性。
通过数据获取任务获取报文数据及上游业务数据,并分别统计得到报文统计数据及业务统计数据,通过对报文统计数据及业务统计数据进行核对并生成数据核对表。通过上述数据核对方法,能够对报文数据进行核对以确保数据的准确性,在实际应用过程中取得了良好的技术效果。
上述数据核对装置可以实现为计算机程序的形式,该计算机程序可以在如图11所示的计算机设备上运行。
请参阅图11,图11是本发明实施例提供的计算机设备的示意性框图。
参阅图11,该计算机设备500包括通过系统总线501连接的处理器502、存储器和网络接口505,其中,存储器可以包括非易失性存储介质503和内存储器504。
该非易失性存储介质503可存储操作系统5031和计算机程序5032。该计算机程序5032被执行时,可使得处理器502执行数据核对方法。
该处理器502用于提供计算和控制能力,支撑整个计算机设备500的运行。
该内存储器504为非易失性存储介质503中的计算机程序5032的运行提供环境,该计算机程序5032被处理器502执行时,可使得处理器502执行数据核对方法。
该网络接口505用于进行网络通信,如提供数据信息的传输等。本领域技术人员可以理解,图11中示出的结构,仅仅是与本发明方案相关的部分结构的框图,并不构成对本发明方案所应用于其上的计算机设备500的限定,具体的计算机设备500可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
其中,所述处理器502用于运行存储在存储器中的计算机程序5032,以实现如下功能:若到达预设数据获取任务中的获取时间点,通过所述数据获取任务获取报文数据及上游业务数据;通过预设的报文数据统计任务对所述报文数据进行统计以得到报文统计数据;通过预设的业务数据统计任务对所述上游业务数据进行统计以得到业务统计数据;根据预设的数据核对模型对所述报文统计数据及所述业务统计数据进行核对以生成数据核对表。
在一实施例中,处理器502在执行通过预设的报文数据统计任务对所述报文数据进行统计以得到报文统计数据的步骤时,执行如下操作:通过所述报文数据统计任务中的报文字段映射信息获取每一报文字段所包含的上报段信息;获取每一所述报文字段的上报段信息在所述报文数据中对应的目标报文数据信息;根据所述报文数据统计任务中的报文统计规则对所述目标报文数据信息进行统计以得到报文统计数据。
在一实施例中,处理器502在执行通过预设的业务数据统计任务对所述上游业务数据进行统计以得到业务统计数据的步骤时,执行如下操作:通过所述业务数据统计任务中的业务数据字段获取所述上游业务数据中对应的目标业务数据信息;根据所述业务数据统计任务中的业务数据统计规则对所述目标业务数据信息进行统计以得到业务统计数据。
在一实施例中,处理器502在执行根据预设的数据核对模型对所述报文统计数据及所述业务统计数据进行核对以生成数据核对表的步骤时,执行如下操作:根据所述数据核对字段与所述报文字段及所述业务数据字段的对应关系,将报文统计数据及业务统计数据添加至预设表格中;对所述报文统计数据及所述业务统计数据进行逐一核对,并对报文统计数据与业务统计数据存在差异的数据核对字段添加异常标记以得到数据核对表。
在一实施例中,处理器502在执行根据预设的数据核对模型对所述报文统计数据及所述业务统计数据进行核对以生成数据核对表的步骤之后,还执行如下操作:根据所述数据核对表获取存在差异的报文统计数据及业务统计数据以向用户发出报警提示信息。
本领域技术人员可以理解,图11中示出的计算机设备的实施例并不构成对计算机设备具体构成的限定,在其他实施例中,计算机设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。例如,在一些实施例中,计算机设备可以仅包括存储器及处理器,在这样的实施例中,存储器及处理器的结构及功能与图11所示实施例一致,在此不再赘述。
应当理解,在本发明实施例中,处理器502可以是中央处理单元(CentralProcessing Unit,CPU),该处理器502还可以是其他通用处理器、数字信号处理器(DigitalSignal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。其中,通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
在本发明的另一实施例中提供计算机可读存储介质。该计算机可读存储介质可以为非易失性的计算机可读存储介质。该计算机可读存储介质存储有计算机程序,其中计算机程序被处理器执行时实现以下步骤:若到达预设数据获取任务中的获取时间点,通过所述数据获取任务获取报文数据及上游业务数据;通过预设的报文数据统计任务对所述报文数据进行统计以得到报文统计数据;通过预设的业务数据统计任务对所述上游业务数据进行统计以得到业务统计数据;根据预设的数据核对模型对所述报文统计数据及所述业务统计数据进行核对以生成数据核对表。
在一实施例中,所述通过预设的报文数据统计任务对所述报文数据进行统计以得到报文统计数据的步骤,包括:通过所述报文数据统计任务中的报文字段映射信息获取每一报文字段所包含的上报段信息;获取每一所述报文字段的上报段信息在所述报文数据中对应的目标报文数据信息;根据所述报文数据统计任务中的报文统计规则对所述目标报文数据信息进行统计以得到报文统计数据。
在一实施例中,所述通过预设的业务数据统计任务对所述上游业务数据进行统计以得到业务统计数据的步骤,包括:通过所述业务数据统计任务中的业务数据字段获取所述上游业务数据中对应的目标业务数据信息;根据所述业务数据统计任务中的业务数据统计规则对所述目标业务数据信息进行统计以得到业务统计数据。
在一实施例中,所述根据预设的数据核对模型对所述报文统计数据及所述业务统计数据进行核对以生成数据核对表的步骤,包括:根据所述数据核对字段与所述报文字段及所述业务数据字段的对应关系,将报文统计数据及业务统计数据添加至预设表格中;对所述报文统计数据及所述业务统计数据进行逐一核对,并对报文统计数据与业务统计数据存在差异的数据核对字段添加异常标记以得到数据核对表。
在一实施例中,所述根据预设的数据核对模型对所述报文统计数据及所述业务统计数据进行核对以生成数据核对表的步骤之后,还包括:根据所述数据核对表获取存在差异的报文统计数据及业务统计数据以向用户发出报警提示信息。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,上述描述的设备、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
在本发明所提供的几个实施例中,应该理解到,所揭露的设备、装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为逻辑功能划分,实际实现时可以有另外的划分方式,也可以将具有相同功能的单元集合成一个单元,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口、装置或单元的间接耦合或通信连接,也可以是电的,机械的或其它的形式连接。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本发明实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以是两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分,或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个计算机可读存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的计算机可读存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-OnlyMemory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到各种等效的修改或替换,这些修改或替换都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以权利要求的保护范围为准。

Claims (10)

1.一种数据核对方法,其特征在于,包括:
若到达预设数据获取任务中的获取时间点,通过所述数据获取任务获取报文数据及上游业务数据,其中,所述数据获取任务中包括报文数据获取地址及上游业务数据获取地址;
通过预设的报文数据统计任务对所述报文数据进行统计以得到报文统计数据,其中,所述报文数据统计任务包括报文字段映射信息及报文统计规则,所述报文字段映射信息中包含多个报文字段;
通过预设的业务数据统计任务对所述上游业务数据进行统计以得到业务统计数据,其中,所述业务数据统计任务包括业务数据字段及业务数据统计规则;
根据预设的数据核对模型对所述报文统计数据及所述业务统计数据进行核对以生成数据核对表,其中,所述数据核对模型中包括包含多个数据核对字段的预设表格。
2.根据权利要求1所述的数据核对方法,其特征在于,所述通过预设的报文数据统计任务对所述报文数据进行统计以得到报文统计数据,包括:
通过所述报文数据统计任务中的报文字段映射信息获取每一报文字段所包含的上报段信息;
获取每一所述报文字段的上报段信息在所述报文数据中对应的目标报文数据信息;
根据所述报文数据统计任务中的报文统计规则对所述目标报文数据信息进行统计以得到报文统计数据。
3.根据权利要求1所述的数据核对方法,其特征在于,所述通过预设的业务数据统计任务对所述上游业务数据进行统计以得到业务统计数据,包括:
通过所述业务数据统计任务中的业务数据字段获取所述上游业务数据中对应的目标业务数据信息;
根据所述业务数据统计任务中的业务数据统计规则对所述目标业务数据信息进行统计以得到业务统计数据。
4.根据权利要求1所述的数据核对方法,其特征在于,所述数据核对模型中包括预设表格,所述预设表格中包含有多个数据核对字段,所述预设表格中每一数据核对字段均与一个报文字段及一个业务数据字段相对应,所述根据预设的数据核对模型对所述报文统计数据及所述业务统计数据进行核对以生成数据核对表,包括:
根据所述数据核对字段与所述报文字段及所述业务数据字段的对应关系,将报文统计数据及业务统计数据添加至预设表格中;
对所述报文统计数据及所述业务统计数据进行逐一核对,并对报文统计数据与业务统计数据存在差异的数据核对字段添加异常标记以得到数据核对表。
5.根据权利要求1所述的数据核对方法,其特征在于,所述根据预设的数据核对模型对所述报文统计数据及所述业务统计数据进行核对以生成数据核对表之后,还包括:
根据所述数据核对表获取存在差异的报文统计数据及业务统计数据以向用户发出报警提示信息。
6.一种数据核对装置,其特征在于,包括:
数据获取单元,用于若到达预设数据获取任务中的获取时间点,通过所述数据获取任务获取报文数据及上游业务数据,其中,所述数据获取任务中包括报文数据获取地址及上游业务数据获取地址;
报文数据统计单元,用于通过预设的报文数据统计任务对所述报文数据进行统计以得到报文统计数据,其中,所述报文数据统计任务包括报文字段映射信息及报文统计规则,所述报文字段映射信息中包含多个报文字段;
业务数据统计单元,用于通过预设的业务数据统计任务对所述上游业务数据进行统计以得到业务统计数据,其中,所述业务数据统计任务包括业务数据字段及业务数据统计规则;
数据核对表生成单元,用于根据预设的数据核对模型对所述报文统计数据及所述业务统计数据进行核对以生成数据核对表,其中,所述数据核对模型中包括包含多个数据核对字段的预设表格。
7.根据权利要求6所述的数据核对装置,其特征在于,所述报文数据统计单元,包括:
上报段信息获取单元,用于通过所述报文数据统计任务中的报文字段映射信息获取每一报文字段所包含的上报段信息;
目标报文数据获取单元,用于获取每一所述报文字段的上报段信息在所述报文数据中对应的目标报文数据信息;
报文统计数据获取单元,用于根据所述报文数据统计任务中的报文统计规则对所述目标报文数据信息进行统计以得到报文统计数据。
8.根据权利要求6所述的数据核对装置,其特征在于,所述业务数据统计单元,包括:
目标业务数据获取单元,用于通过所述业务数据统计任务中的业务数据字段获取所述上游业务数据中对应的目标业务数据信息;
业务统计数据获取单元,用于根据所述业务数据统计任务中的业务数据统计规则对所述目标业务数据信息进行统计以得到业务统计数据。
9.一种计算机设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至5中任一项所述的数据核对方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序当被处理器执行时使所述处理器执行如权利要求1至5任一项所述的数据核对方法。
CN201910262628.1A 2019-04-02 2019-04-02 数据核对方法、装置、计算机设备及存储介质 Active CN110147378B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910262628.1A CN110147378B (zh) 2019-04-02 2019-04-02 数据核对方法、装置、计算机设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910262628.1A CN110147378B (zh) 2019-04-02 2019-04-02 数据核对方法、装置、计算机设备及存储介质

Publications (2)

Publication Number Publication Date
CN110147378A true CN110147378A (zh) 2019-08-20
CN110147378B CN110147378B (zh) 2024-05-31

Family

ID=67589396

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910262628.1A Active CN110147378B (zh) 2019-04-02 2019-04-02 数据核对方法、装置、计算机设备及存储介质

Country Status (1)

Country Link
CN (1) CN110147378B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112053235A (zh) * 2020-09-04 2020-12-08 中国银行股份有限公司 一种数据核对方法及装置
CN112581276A (zh) * 2020-12-24 2021-03-30 中国农业银行股份有限公司 一种数据处理方法及装置
CN112597143A (zh) * 2020-12-28 2021-04-02 中国农业银行股份有限公司 一种数据检测方法、装置和电子设备
CN112965981A (zh) * 2021-03-15 2021-06-15 中国平安财产保险股份有限公司 数据核对方法、装置、计算机设备和存储介质
CN113742329A (zh) * 2021-09-09 2021-12-03 中国平安人寿保险股份有限公司 数据核对方法、装置、设备及存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104156832A (zh) * 2014-08-28 2014-11-19 国家电网公司 系统间数据核对方法及装置
CN106326219A (zh) * 2015-06-16 2017-01-11 阿里巴巴集团控股有限公司 核对业务系统数据的方法、装置及系统
CN107909464A (zh) * 2017-10-31 2018-04-13 中国银行股份有限公司 跨行支付对账预警方法、装置、计算机设备及存储介质
US20180205672A1 (en) * 2017-01-17 2018-07-19 Futurewei Technologies, Inc. Database functions-defined network switch and database system
CN108628901A (zh) * 2017-03-23 2018-10-09 深圳市优朋普乐传媒发展有限公司 一种数据更新方法及装置
CN109150720A (zh) * 2017-06-19 2019-01-04 中兴通讯股份有限公司 业务链报文转发方法、装置、设备及计算机可读存储介质
CN109474578A (zh) * 2018-10-17 2019-03-15 平安健康保险股份有限公司 报文消息校验方法、装置、计算机设备和存储介质

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104156832A (zh) * 2014-08-28 2014-11-19 国家电网公司 系统间数据核对方法及装置
CN106326219A (zh) * 2015-06-16 2017-01-11 阿里巴巴集团控股有限公司 核对业务系统数据的方法、装置及系统
US20180205672A1 (en) * 2017-01-17 2018-07-19 Futurewei Technologies, Inc. Database functions-defined network switch and database system
CN108628901A (zh) * 2017-03-23 2018-10-09 深圳市优朋普乐传媒发展有限公司 一种数据更新方法及装置
CN109150720A (zh) * 2017-06-19 2019-01-04 中兴通讯股份有限公司 业务链报文转发方法、装置、设备及计算机可读存储介质
CN107909464A (zh) * 2017-10-31 2018-04-13 中国银行股份有限公司 跨行支付对账预警方法、装置、计算机设备及存储介质
CN109474578A (zh) * 2018-10-17 2019-03-15 平安健康保险股份有限公司 报文消息校验方法、装置、计算机设备和存储介质

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112053235A (zh) * 2020-09-04 2020-12-08 中国银行股份有限公司 一种数据核对方法及装置
CN112581276A (zh) * 2020-12-24 2021-03-30 中国农业银行股份有限公司 一种数据处理方法及装置
CN112597143A (zh) * 2020-12-28 2021-04-02 中国农业银行股份有限公司 一种数据检测方法、装置和电子设备
CN112965981A (zh) * 2021-03-15 2021-06-15 中国平安财产保险股份有限公司 数据核对方法、装置、计算机设备和存储介质
CN112965981B (zh) * 2021-03-15 2023-06-20 中国平安财产保险股份有限公司 数据核对方法、装置、计算机设备和存储介质
CN113742329A (zh) * 2021-09-09 2021-12-03 中国平安人寿保险股份有限公司 数据核对方法、装置、设备及存储介质

Also Published As

Publication number Publication date
CN110147378B (zh) 2024-05-31

Similar Documents

Publication Publication Date Title
CN110147378A (zh) 数据核对方法、装置、计算机设备及存储介质
CN109242261B (zh) 基于大数据评估保全风险的方法及终端设备
CN109272219A (zh) 绩效考核方法、装置、计算机设备及存储介质
Guide Release 2.5
CN105763505B (zh) 基于用户账号的操作方法及装置
CN110060143A (zh) 业务对接方法、装置、计算机设备及存储介质
CN110223173A (zh) 交易链路异常处理方法以及相关设备
CN108710668A (zh) 业务统计方法、装置、计算机设备及存储介质
CN110188980A (zh) 企业风险评分方法、装置、计算机设备及存储介质
CN110223030A (zh) 提醒策略匹配方法、装置、计算机设备及存储介质
CN110349039A (zh) 投诉风险评估方法、系统、计算机设备及可读存储介质
CN109255716A (zh) 债券评级方法、装置、计算机设备及存储介质
CN108694672A (zh) 订单处理方法、装置、计算机设备及存储介质
CN109376979A (zh) 测算绩效的方法、装置、计算机设备及存储介质
CN109885458A (zh) 基于cat的监控方法、装置、计算机系统及存储介质
CN109241074A (zh) 稽核数据自动加工方法、装置、计算机设备及存储介质
CN112950379A (zh) 报价风险监控方法、装置、设备及存储介质
CN110443565A (zh) 风险报告生成方法、装置、计算机设备及存储介质
CN109190862B (zh) 操作风险联动方法、系统、计算机设备和存储介质
CN110472981A (zh) 风险订单识别方法、装置、计算机设备及存储介质
US20130073439A1 (en) Methods and systems for patent valuation using financial ratios
CN110072201A (zh) 短信发送方法、装置、计算机设备及存储介质
CN112132349A (zh) 绩效数据处理方法、装置、计算机设备及计算机可读介质
CN106909553B (zh) 一种数据有效性确定方法及装置
CN110197061A (zh) 业务数据监控方法、装置、计算机设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant