CN113886368A - 一种补录数据检核方法、装置、设备及存储介质 - Google Patents
一种补录数据检核方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN113886368A CN113886368A CN202111371542.6A CN202111371542A CN113886368A CN 113886368 A CN113886368 A CN 113886368A CN 202111371542 A CN202111371542 A CN 202111371542A CN 113886368 A CN113886368 A CN 113886368A
- Authority
- CN
- China
- Prior art keywords
- additional recording
- task
- checking
- control
- entry
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/214—Database migration support
Abstract
本发明提供一种补录数据检核方法、装置、设备及存储介质,所述方法包括:获取待检核的补录任务信息表;根据所述补录任务信息表,确定所述补录任务信息表对应的控制条件信息;基于所述控制条件信息对所述补录任务信息表中的各个补录任务分别进行检核,得到对应的检核结果。本发明的补录数据检核方法,通过预先生成补录任务信息表,在进行补录数据检核时,根据所述补录任务信息表确定对应的控制条件信息,并利用所述控制条件信息进行补录数据检核,可以自动识别仍需补录数据的补录任务,解决了没有统一补录数据识别标准的问题,还能够提高补录数据检核的准确性和效率,从而保证数据迁移的准确性和高效性。
Description
技术领域
本发明涉及数据处理技术领域,特别涉及一种补录数据检核方法、装置、设备及存储介质。
背景技术
为了向客户提供优质、快速的服务,银行一般采用数据和系统集中部署在数据中心的IT架构策略。目前,在新建的IT系统投产前会将旧系统中的业务数据迁移至新系统中,但是由于数据量较大,在数据迁移过程中会出现遗漏数据的情况,例如遗漏产品主合同所衍生的合同详细信息、子合同、费用信息等数据,对这些遗漏的数据需要进行数据分析和数据补录。
现有技术中,在数据补录过程中,对数据补录任务的管控方法为:通过各领域的技术或业务人员对领域内涉及的数据库表和详细数据进行分析,判断需要补录的表和数据,并将各自的分析结果反馈到项目管控人员,进行统一进度管控。现有技术中对数据补录过程没有有效且相对完整的管控方法,完全依赖技术或业务人员的经验和能力,没有统一的补录任务标准,从而导致对于补录数据的识别准确性较低,且项目管控人员无法全面掌控数据补录的情况和进展,导致数据迁移的效率较低、准确性较差,难以保证新建的IT系统在上线时的数据完整性。
发明内容
针对现有技术的上述问题,本发明的目的在于提供一种补录数据检核方法、装置、设备及存储介质,能够提高补录数据检核的准确性和效率。
为了解决上述问题,本发明提供一种补录数据检核方法,包括:
获取待检核的补录任务信息表;
根据所述补录任务信息表,确定所述补录任务信息表对应的控制条件信息;
基于所述控制条件信息对所述补录任务信息表中的各个补录任务分别进行检核,得到对应的检核结果。
进一步地,所述根据所述补录任务信息表,确定所述补录任务信息表对应的控制条件信息包括:
确定所述补录任务信息表对应的补录任务类型;
基于所述补录任务类型确定所述补录任务信息表对应的控制条件信息。
进一步地,所述基于所述补录任务类型确定所述补录任务信息表对应的控制条件信息包括:
当所述补录任务类型为栏位控制类型时,所述控制条件信息包括控制栏位名称字段及其对应的控制栏位内容;
当所述补录任务类型为数目控制类型时,所述控制条件信息包括补录数量控制信息;
当所述补录任务类型为混合控制类型时,所述控制条件信息包括补录数量控制信息、控制栏位名称字段及其对应的控制栏位内容。
进一步地,所述基于所述控制条件信息对所述补录任务信息表中的各个补录任务分别进行检核,得到对应的检核结果包括:
当所述补录任务类型为栏位控制类型时,针对所述补录任务信息表中的各个补录任务,获取所述补录任务对应的所述控制栏位名称字段的实际栏位内容;
判断所述实际栏位内容与所述控制栏位内容是否匹配;
若不匹配,则确定检核结果为通过;若匹配,则判断补录记录日志中是否存在与所述补录任务对应的补录记录数据;
若存在,则确定检核结果为通过;若不存在,则确定检核结果为不通过。
进一步地,所述基于所述控制条件信息对所述补录任务信息表中的各个补录任务分别进行检核,得到对应的检核结果包括:
当所述补录任务类型为数目控制类型时,针对所述补录任务信息表中的各个补录任务,基于所述补录数量控制信息获取所述补录任务对应的目标补录数量;
确定补录记录日志中与所述补录任务对应的补录记录数据的数量;
判断所述补录记录数据的数量与所述目标补录数量是否匹配;
若匹配,则确定检核结果为通过;若不匹配,则确定检核结果为不通过。
进一步地,所述基于所述控制条件信息对所述补录任务信息表中的各个补录任务分别进行检核,得到对应的检核结果包括:
当所述补录任务类型为混合控制类型时,针对所述补录任务信息表中的各个补录任务,分别执行第一检核过程和第二检核过程;若所述第一检核过程和所述第二检核过程的检核结果均为通过,则确定检核结果为通过;若所述第一检核过程或所述第二检核过程的检核结果为不通过,则确定检核结果为不通过;
其中,所述第一检核过程包括:
获取所述补录任务对应的所述控制栏位名称字段的实际栏位内容;
判断所述实际栏位内容与所述控制栏位内容是否匹配;
若不匹配,则确定检核结果为通过;若匹配,则判断补录记录日志中是否存在与所述补录任务对应的补录记录数据;
若存在,则确定检核结果为通过;若不存在,则确定检核结果为不通过;
所述第二检核过程包括:
基于所述补录数量控制信息获取所述补录任务对应的目标补录数量;
确定补录记录日志中与所述补录任务对应的补录记录数据的数量;
判断所述补录记录数据的数量与所述目标补录数量是否匹配;
若匹配,则确定检核结果为通过;若不匹配,则确定检核结果为不通过。
进一步地,所述方法还包括:
当存在至少一个补录任务的检核结果为不通过时,将检核结果为不通过的补录任务的数据信息保存至补录任务明细表,
以及将所述补录任务信息表的补录检核状态设置为异常状态。
进一步地,所述方法还包括:
构建补录数据控制表,所述补录数据控制表包括补录任务类型字段;
基于用户的配置指令,配置所述补录任务类型字段对应的补录任务类型;
根据所述补录任务类型,为所述补录数据控制表配置对应的控制条件信息,得到目标补录数据控制表;
基于所述目标补录数据控制表生成补录任务信息表。
本发明另一方面提供一种补录数据检核装置,包括:
补录任务信息表获取模块,用于获取待检核的补录任务信息表;
控制条件信息确定模块,用于根据所述补录任务信息表,确定所述补录任务信息表对应的控制条件信息;
数据检核模块,用于基于所述控制条件信息对所述补录任务信息表中的各个补录任务分别进行检核,得到对应的检核结果。
本发明另一方面提供一种电子设备,包括处理器和存储器,所述存储器中存储有至少一条指令或至少一段程序,所述至少一条指令或所述至少一段程序由所述处理器加载并执行以实现如上述的补录数据检核方法。
本发明另一方面提供一种计算机可读存储介质,所述计算机可读存储介质中存储有至少一条指令或至少一段程序,所述至少一条指令或所述至少一段程序由处理器加载并执行以实现如上述的补录数据检核方法。
由于上述技术方案,本发明具有以下有益效果:
根据本发明实施例的补录数据检核方法,通过预先生成补录任务信息表,在进行补录数据检核时,根据所述补录任务信息表确定对应的控制条件信息,并利用所述控制条件信息进行补录数据检核,可以自动识别仍需补录数据的补录任务,解决了没有统一补录数据识别标准的问题,还能够提高补录数据检核的准确性和效率,从而保证数据迁移的准确性和高效性。
附图说明
为了更清楚地说明本发明的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍。显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他附图。
图1是本发明一个实施例提供的补录数据检核方法的流程图;
图2是本发明另一个实施例提供的补录数据检核方法的流程图;
图3是本发明另一个实施例提供的补录数据检核方法的流程图;
图4是本发明一个实施例提供的补录数据检核装置的结构示意图;
图5是本发明另一个实施例提供的补录数据检核装置的结构示意图;
图6是本发明一个实施例提供的电子设备的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、装置、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其他步骤或单元。
下面结合附图,对本发明的一些实施方式作详细说明。
参考说明书附图1,其示出了本发明一个实施例提供的一种补录数据检核方法的流程,该方法可以应用于IT系统业务数据迁移的场景中,对新系统中的补录任务进行管控。具体的如图1所示,所述方法可以包括以下步骤:
S110:获取待检核的补录任务信息表。
本发明实施例中,所述补录任务信息表包括数据迁移后需要进行数据补录的补录任务信息,可以根据数据迁移后新系统的数据预先生成所述补录任务信息表,并存储至数据库中,当需要进行补录数据检核时再从数据库中获取所述补录任务信息表。需要说明的是,本发明实施例对补录任务的具体内容不作限制。示例性地,补录任务可以包括对公信贷业务领域“出口融信通-从合同”补录任务、对公信贷业务领域“保函-合同”补录任务、对公信贷业务领域“出口融信通-业务与担保品关系”补录任务等等。
本发明实施例中,可以间隔预设时长定时获取待检核的补录任务信息表,以进行补录数据检核,例如每天对补录任务信息表进行一次检核;也可以不定时获取待检核的补录任务信息表,并进行补录数据检核;或者还可以基于用户发出的数据检核指令获取待检核的补录任务信息表,以进行补录数据检核,本发明实施例对此不作限制。
在一个可能的实施例中,结合参考说明书附图2,所述步骤S110之前还可以包括生成补录任务信息表的过程,具体地,如图2所示,所述生成补录任务信息表的过程可以包括以下步骤:
S210:构建补录数据控制表,所述补录数据控制表包括补录任务类型字段。
具体地,可以预先定义补录数据控制表的结构,所述补录数据控制表可以包括信息字段和控制字段,所述信息字段可以包括业务产品领域、产品名称、数据库名、数据表名和主键外键信息等字段,所述控制字段可以包括补录任务类型、控制条件信息等字段,所述控制条件信息可以包括控制栏位名称字段及其对应的控制栏位内容,或者所述控制条件信息可以包括补录数量控制信息。
可选择地,所述控制条件信息可以为一个或者多个,其中,所述控制栏位名称和对应的控制栏位内容组成一个控制条件信息。示例性地,如考虑到易用性,可以设置三个控制条件信息。
可选择地,如考虑到可扩展性,可以定义控制条件子表,并与所述补录数据控制表关联,所述控制条件子表可以包括至少一个控制条件信息字段。
具体地,所述补录数据控制表定义完成后,可以进行补录数据控制表初始化,具体可以基于新系统中各个业务领域的数据表信息和数据库结构定义文件,导入到补录数据控制表中,确保业务产品领域信息、产品名称信息、数据库名、数据表名,主键外键信息完整。导入后可以由相应业务领域的领域架构师或专家进行确认。
S220:基于用户的配置指令,配置所述补录任务类型字段对应的补录任务类型。
具体地,补录数据控制表初始化完成后,可以基于用户的配置指令确定对应的补录任务类型,并进行配置。在实际应用中,可以由各业务领域的领域架构师或专家对初始化导入后的补录数据控制表设置补录任务类型,示例性地,可以提供补录数据检核的可视化界面,当获取到各业务领域的领域架构师或专家基于所述可视化页面输入或者选择的所述补录数据控制表对应的补录任务类型时,生成配置指令,并基于所述配置指令进行补录任务类型配置。
S230:根据所述补录任务类型,为所述补录数据控制表配置对应的控制条件信息,得到目标补录数据控制表。
具体地,当所述补录数据控制表的补录任务类型为栏位控制类型(CF类任务)时,可以定义配置至少一个控制栏位名称和对应的控制栏位内容,例如所述控制栏位名称可以为“担保方式”,所述控制栏位内容可以为“抵押质押方式”。当所述补录数据控制表的补录任务类型为数目控制类型(CC类任务)时,可以定义配置至少一个补录数量控制信息,例如所述补录数量控制信息可以为旧系统的存量数据数目或者可以为关联的某个其他主信息的数据数目。当所述补录数据控制表的补录任务类型为混合控制类型(CX类任务)时,可以定义配置至少一个控制栏位名称和对应的控制栏位内容,和至少一个补录数量控制信息。当所述补录数据控制表的补录任务类型为UC类任务时,无需定义配置控制条件信息。
S240:基于所述目标补录数据控制表生成补录任务信息表。
具体地,可以预先定义补录任务信息表的结构,所述补录任务信息表可以包括补录任务信息(任务标识信息,任务名称等)、所属领域、产品信息、补录任务类型和补录检核状态等字段,可以将所述目标补录数据控制表的内容直接带入补录任务信息表的结构中,即可得到补录任务信息表的内容,其中任务标识信息为主键,任务名称为产品领域+产品名称+表中文名。当所述目标补录数据控制表的补录任务类型为UC类型时,无需生成补录任务信息表。
本发明实施例通过利用预先构建的可配置的补录数据控制表结构,基于用户的不同配置指令配置不同的补录任务类型,以及对应的控制条件信息,最终生成不同补录任务类型的补录任务信息表,利用一个补录数据控制表结构可以生成多个补录任务信息表,普适性好,可以减少设计开发成本,节约系统资源。
需要说明的是,上述生成补录任务信息表的方法不构成对本发明实施例的限定,本发明实施例的补录任务信息表还可以通过其它方法生成。
S120:根据所述补录任务信息表,确定所述补录任务信息表对应的控制条件信息。
本发明实施例中,可以基于补录任务信息表中的数据信息将补录任务信息表分为不同补录任务类型,针对不同补录任务类型的补录任务信息表可以确定不同类型的控制条件信息,针对一个补录任务信息表可以确定一个或多个控制条件信息,本发明实施例对所述补录任务信息表对应的控制条件信息的数量不作限制。
具体地,所述根据所述补录任务信息表,确定所述补录任务信息表对应的控制条件信息可以包括:
获取所述补录任务信息表对应的补录任务类型;
基于所述补录任务类型确定所述补录任务信息表对应的控制条件信息。
具体地,所述基于所述补录任务类型确定所述补录任务信息表对应的控制条件信息可以包括:
当所述补录任务类型为栏位控制类型时,所述控制条件信息包括控制栏位名称字段及其对应的控制栏位内容;
当所述补录任务类型为数目控制类型时,所述控制条件信息包括补录数量控制信息;
当所述补录任务类型为混合控制类型时,所述控制条件信息包括补录数量控制信息、控制栏位名称字段及其对应的控制栏位内容。
本发明实施例中,所述补录任务信息表可以包括补录任务信息(任务标识信息,任务名称等)、所属领域、产品信息、补录任务类型和补录检核状态等字段,可以通过补录任务类型字段对应的字段信息确定所述补录任务信息表对应的补录任务类型,所述补录任务类型字段对应的字段信息可以基于用户的配置指令进行预先配置。
本发明实施例中,所述补录任务类型可以包括栏位控制类型(CF类任务,Control-Field:可控补录任务-栏位控制类型)、数目控制类型(CC类任务,Control-Count:可控补录任务-数目控制类型)、混合控制类型(CX类任务,Control-miX:可控补录任务-混合控制类型)以及UC类任务(Un-Control:不可控补录任务)。
其中,栏位控制类型任务需要补录的数目由主信息的某个栏位值决定。以对公信贷业务领域“出口融信通-从合同”补录任务为例,如果合同的“担保方式”栏位为“信用方式”,则该合同不需要补录从合同信息;如果合同的“担保方式”栏位为“抵押质押方式”,则该合同需要补录至少1条从合同信息。
数目控制类型任务需要补录的数目由旧系统有基础信息的数字或其他主信息的数目决定。根据旧系统有基础信息的数字决定补录数目举例:以对公信贷业务领域“保函-合同”补录任务为例,旧系统的存量数据数目,决定了需要补录的数据数目;根据其他主信息的数目决定补录数目举例:以对公信贷业务领域“出口融信通-业务与担保品关系”补录任务为例,每条合同需要补录至少1条业务与担保品关系,故业务与担保品关系的补录数目至少应大于等于合同数目。
混合控制类型任务是指在一个补录任务中同时存在CC类和CF类情况。
UC类任务是指无基础信息,需要补录数目未知的类型。以短期融资券(CommercialPaper,CP)“贸金押品-押品概况信息”为例,无旧系统相关基础信息。
本发明实施例中,所述基于所述补录任务类型确定所述补录任务信息表对应的控制条件信息可以为根据所述补录任务类型以及所述补录任务信息表的数据来确定所述控制条件信息,也可以为获取根据所述补录任务类型预先配置的所述补录任务信息表对应控制条件信息,本发明实施例对此不作限制。
示例性地,假设所述补录任务信息表为栏位控制类型,表中数据为对公信贷业务领域“出口融信通-从合同”补录任务,那么可以确定所述控制条件信息的控制栏位名称字段为“担保方式”,对应的控制栏位内容为“抵押质押方式”,假设所述补录任务信息表为数目控制类型,表中数据为对公信贷业务领域“保函-合同”补录任务,那么可以确定所述控制条件信息的补录数量控制信息为“旧系统的存量数据数目”,假设所述补录任务信息表为数目控制类型,表中数据为对公信贷业务领域“出口融信通-业务与担保品关系”补录任务,那么可以确定所述控制条件信息的补录数量控制信息为“关联的合同数目”。
示例性地,也可以在生成所述补录任务信息表之前,基于用户的配置指令配置补录任务类型及对应的控制条件信息,在生成所述补录任务信息表时,将所述控制条件信息导入所述补录任务信息表中作为对应的控制条件信息。
本发明实施例通过对补录任务信息表的补录任务类型进行划分,并基于所述补录任务类型确定对应的控制条件信息,可以快速准确地确定出各个补录任务信息表对应的控制条件信息,从而能够进一步提高补录数据检核的准确性和效率。
S130:基于所述控制条件信息对所述补录任务信息表中的各个补录任务分别进行检核,得到对应的检核结果。
本发明实施例中,针对不同补录任务类型的补录任务信息表,可以采用不同的检核策略进行数据检核。当所述补录任务信息表中的各个补录任务均检核通过,则所述补录任务信息表检核通过,如果存在至少一个补录任务检核不通过,所述补录任务信息表检核不通过。
本发明实施例中,可以利用数据补录产生的补录记录日志对各个补录任务分别进行检核,如通过补录系统进行数据补录,则可以利用补录系统的补录日志进行检核,如通过表格方式导入补录,则可以利用补录的表格进行检核。
本发明实施例中,所述基于所述控制条件信息对所述补录任务信息表中的各个补录任务分别进行检核,得到对应的检核结果可以包括:
当所述补录任务类型为栏位控制类型时,针对所述补录任务信息表中的各个补录任务,获取所述补录任务对应的所述控制栏位名称字段的实际栏位内容;
判断所述实际栏位内容与所述控制栏位内容是否匹配;
若不匹配,则确定检核结果为通过;若匹配,则判断补录记录日志中是否存在与所述补录任务对应的补录记录数据;
若存在,则确定检核结果为通过;若不存在,则确定检核结果为不通过。
具体地,可以判断所述实际栏位内容与所述控制栏位内容是否相同;当不相同时,说明所述补录任务不需要进行数据补录,则检核通过;当相同时,说明所述补录任务需要进行数据补录,此时可以判断补录记录日志中是否存在对应的记录,如果存在,说明所述补录任务已经完成补录,则检核通过,如果不存在,说明所述补录任务还需补录数据,则检核不通过。
需要说明的是,当所述控制条件信息为多个时,可以针对每个控制条件信息分别对各个补录任务进行检核,如果均检核通过则确定所述补录任务的检核结果为通过。
本发明实施例中,所述基于所述控制条件信息对所述补录任务信息表中的各个补录任务分别进行检核,得到对应的检核结果还可以包括:
当所述补录任务类型为数目控制类型时,针对所述补录任务信息表中的各个补录任务,基于所述补录数量控制信息获取所述补录任务对应的目标补录数量;
确定补录记录日志中与所述补录任务对应的补录记录数据的数量;
判断所述补录记录数据的数量与所述目标补录数量是否匹配;
若匹配,则确定检核结果为通过;若不匹配,则确定检核结果为不通过。
具体地,可以根据所述补录数量控制信息确定所述补录任务对应的目标补录数量,以及对应的匹配策略,利用所述匹配策略对所述补录记录数据的数量与所述目标补录数量进行匹配,得到匹配结果。
在实际应用中,可以预先定义多个补录数量控制信息及其对应的匹配策略,当确定所述补录任务信息表的补录数量控制信息后,即可确定对应的匹配策略。也可以在确定所述补录任务信息表的补录数量控制信息后,对所述补录数量控制信息的内容进行分析来确定对应的匹配策略。
需要说明的是,不同的补录数量控制信息可以对应不同的匹配策略,也可以对应相同的匹配策略,本发明实施例对此不作限制。
示例性地,假设所述补录任务信息表对应的补录数量控制信息为“旧系统的存量数据数目”,则所述补录任务对应的目标补录数量即为旧系统中所述补录任务对应的存量数据数目,所述匹配策略为判断补录任务对应的补录记录数据的数量与所述目标补录数量是否相同,如果相同即认为二者匹配,说明所述补录任务已经完成补录,检核通过,如果不相同即认为二者不匹配,说明所述补录任务还存在需要补录的数据,检核不通过。假设所述补录任务信息表对应的补录数量控制信息为“关联的合同数目”,则所述补录任务对应的目标补录数量即为与所述补录任务关联的合同数目,所述匹配策略为判断补录任务对应的补录记录数据的数量是否大于或等于所述目标补录数量,如果补录记录数据的数量大于或等于目标补录数量即认为二者匹配,说明所述补录任务已经完成补录,检核通过,如果补录记录数据的数量小于目标补录数量即认为二者不匹配,说明所述补录任务还存在需要补录的数据,检核不通过。
需要说明的是,当所述控制条件信息为多个时,可以针对每个控制条件信息分别对各个补录任务进行检核,如果均检核通过则确定所述补录任务的检核结果为通过。
本发明实施例中,所述基于所述控制条件信息对所述补录任务信息表中的各个补录任务分别进行检核,得到对应的检核结果还可以包括:
当所述补录任务类型为混合控制类型时,针对所述补录任务信息表中的各个补录任务,分别执行第一检核过程和第二检核过程;若所述第一检核过程和所述第二检核过程的检核结果均为通过,则确定检核结果为通过;若所述第一检核过程或所述第二检核过程的检核结果为不通过,则确定检核结果为不通过;
其中,所述第一检核过程包括:
获取所述补录任务对应的所述控制栏位名称字段的实际栏位内容;
判断所述实际栏位内容与所述控制栏位内容是否匹配;
若不匹配,则确定检核结果为通过;若匹配,则判断补录记录日志中是否存在与所述补录任务对应的补录记录数据;
若存在,则确定检核结果为通过;若不存在,则确定检核结果为不通过;
所述第二检核过程包括:
基于所述补录数量控制信息获取所述补录任务对应的目标补录数量;
确定补录记录日志中与所述补录任务对应的补录记录数据的数量;
判断所述补录记录数据的数量与所述目标补录数量是否匹配;
若匹配,则确定检核结果为通过;若不匹配,则确定检核结果为不通过。
具体地,所述第一检核过程的具体内容可以参考补录任务类型为栏位控制类型时的检核过程,所述第二检核过程的具体内容可以参考补录任务类型为数目控制类型的检核过程,本发明实施例在此不再赘述。需要说明的是,所述第一检核过程和所述第二检核过程可以按照上述顺序先后进行,或者也可以同时进行,或者还可以以其他顺序进行,本发明实施例对此不作限制。
在一个可能的实施例中,如图3所示,所述方法还可以包括以下步骤:
S140:当存在至少一个补录任务的检核结果为不通过时,将检核结果为不通过的补录任务的数据信息保存至补录任务明细表,以及将所述补录任务信息表的补录检核状态设置为异常状态。
具体地,所述补录任务明细表可以包括补录任务涉及的详细信息,如数据库表信息、数据主键值、补录数据实际条数等等。当所有补录任务的检核结果均为通过时,可以将所述补录任务信息表的补录检核状态设置为通过状态。
具体地,当存在至少一个补录任务的检核结果为不通过时,说明所述补录任务信息表中还存在需要进行数据补录的补录任务,所述补录数据任务表未检核通过,将所述补录任务信息表的补录检核状态设置为异常状态,可以使得用户可以快速确定所述补录任务信息表的状态,将检核结果为不通过的补录任务的数据信息保存至补录任务明细表中,可以使得用户能够有针对性性地进行数据补录,提高数据补录的效率,还能够使用户快速了解补录任务的数量和类型,并对不同类型的补录任务进行跟踪,以便对数据补录的进度进行有效的管控,提高了数据补录任务管理的有效性和高效性,从而提高数据迁移过程的效率。
具体地,还可以将所述补录任务信息表和所述补录任务明细表以整体视图的方式进行展示,方便用户查看数据补录工作现状,使得用户能够通过全局视图及时有效的掌控数据补录的情况和进展,保证数据迁移的准确性和高效性。
综上所述,根据本发明实施例的补录数据检核方法,通过预先生成补录任务信息表,在进行补录数据检核时,根据所述补录任务信息表确定对应的控制条件信息,并利用所述控制条件信息进行补录数据检核,可以自动识别仍需补录数据的补录任务,解决了没有统一补录数据识别标准的问题,还能够提高补录数据检核的准确性和效率,从而保证数据迁移的准确性和高效性。
参考说明书附图4,其示出了本发明一个实施例提供的一种补录数据检核装置400的结构。如图4所示,所述装置400可以包括:
补录任务信息表获取模块410,用于获取待检核的补录任务信息表;
控制条件信息确定模块420,用于根据所述补录任务信息表,确定所述补录任务信息表对应的控制条件信息;
数据检核模块430,用于基于所述控制条件信息对所述补录任务信息表中的各个补录任务分别进行检核,得到对应的检核结果。
在一个可能的实施例中,如图5所示,所述装置400还可以包括:
数据处理模块440,用于当存在至少一个补录任务的检核结果为不通过时,将检核结果为不通过的补录任务的数据信息保存至补录任务明细表,以及将所述补录任务信息表的补录检核状态设置为异常状态。
在一个可能的实施例中,所述装置400还可以包括:
补录数据控制表构建模块,用于构建补录数据控制表,所述补录数据控制表包括补录任务类型字段;
补录任务类型配置模块,用于基于用户的配置指令,配置所述补录任务类型字段对应的补录任务类型;
控制条件信息配置模块,用于根据所述补录任务类型,为所述补录数据控制表配置对应的控制条件信息,得到目标补录数据控制表;
补录任务信息表生成模块,用于基于所述目标补录数据控制表生成补录任务信息表。
需要说明的是,上述实施例提供的装置,在实现其功能时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将设备的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的装置与相应方法实施例属于同一构思,其具体实现过程详见对应方法实施例,这里不再赘述。
本发明一个实施例还提供了一种电子设备,该电子设备包括处理器和存储器,该存储器中存储有至少一条指令或至少一段程序,该至少一条指令或该至少一段程序由该处理器加载并执行以实现如上述方法实施例所提供的补录数据检核方法。
存储器可用于存储软件程序以及模块,处理器通过运行存储在存储器的软件程序以及模块,从而执行各种功能应用以及数据处理。存储器可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、功能所需的应用程序等;存储数据区可存储根据所述设备的使用所创建的数据等。此外,存储器可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地,存储器还可以包括存储器控制器,以提供处理器对存储器的访问。
本发明实施例提供的方法实施例可以在终端、服务器或者类似的运算装置中执行,即上述电子设备可以包括终端、服务器或者类似的运算装置。以运行在服务器上为例,如图6所示,其示出了本发明实施例提供的实现补录数据检核方法的服务器的结构示意图。该服务器600可因配置或性能不同而产生比较大的差异,可以包括一个或一个以上中央处理器(Central Processing Unit,CPU)610(例如,一个或一个以上处理器)和存储器630,一个或一个以上存储应用程序623或数据622的存储介质620(例如一个或一个以上海量存储设备)。其中,存储器630和存储介质620可以是短暂存储或持久存储。存储在存储介质620的程序可以包括一个或一个以上模块,每个模块可以包括对服务器中的一系列指令操作。更进一步地,中央处理器610可以设置为与存储介质620通信,在服务器600上执行存储介质620中的一系列指令操作。服务器600还可以包括一个或一个以上电源660,一个或一个以上有线或无线网络接口650,一个或一个以上输入输出接口640,和/或,一个或一个以上操作系统621,例如Windows ServerTM,Mac OS XTM,UnixTM,LinuxTM,FreeBSDTM等等。
输入输出接口640可以用于经由一个网络接收或者发送数据。上述的网络具体实例可包括服务器600的通信供应商提供的无线网络。在一个实例中,输入输出接口640包括一个网络适配器(Network Interface Controller,NIC),其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中,输入输出接口640可以为射频(RadioFrequency,RF)模块,其用于通过无线方式与互联网进行通讯,所述无线通信可以使用任一通信标准或协议,包括但不限于全球移动通讯系统(Global System of Mobilecommunication,GSM)、通用分组无线服务(General Packet Radio Service,GPRS)、码分多址(Code Division Multiple Access,CDMA)、宽带码分多址(Wideband Code DivisionMultiple Access,WCDMA)、长期演进(Long Term Evolution,LTE)、电子邮件、短消息服务(Short Messaging Service,SMS)等。
本领域技术人员可以理解,图6所示的结构仅为示意,服务器600还可包括比图6中所示更多或者更少的组件,或者具有与图6所示不同的配置。
本发明一个实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质可设置于电子设备之中以保存用于实现一种补录数据检核方法相关的至少一条指令或至少一段程序,该至少一条指令或该至少一段程序由该处理器加载并执行以实现上述方法实施例提供的补录数据检核方法。
可选地,在本发明实施例中,上述存储介质可以包括但不限于:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
本发明一个实施例还提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行上述各种可选实现例中提供的补录数据检核方法。
需要说明的是:上述本发明实施例先后顺序仅仅为了描述,不代表实施例的优劣。且上述对本说明书特定实施例进行了描述。其他实施例在所附权利要求书的范围内。在一些情况下,在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中,多任务处理和并行处理也是可以的或者可能是有利的。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (11)
1.一种补录数据检核方法,其特征在于,包括:
获取待检核的补录任务信息表;
根据所述补录任务信息表,确定所述补录任务信息表对应的控制条件信息;
基于所述控制条件信息对所述补录任务信息表中的各个补录任务分别进行检核,得到对应的检核结果。
2.根据权利要求1所述的方法,其特征在于,所述根据所述补录任务信息表,确定所述补录任务信息表对应的控制条件信息包括:
获取所述补录任务信息表对应的补录任务类型;
基于所述补录任务类型确定所述补录任务信息表对应的控制条件信息。
3.根据权利要求2所述的方法,其特征在于,所述基于所述补录任务类型确定所述补录任务信息表对应的控制条件信息包括:
当所述补录任务类型为栏位控制类型时,所述控制条件信息包括控制栏位名称字段及其对应的控制栏位内容;
当所述补录任务类型为数目控制类型时,所述控制条件信息包括补录数量控制信息;
当所述补录任务类型为混合控制类型时,所述控制条件信息包括补录数量控制信息、控制栏位名称字段及其对应的控制栏位内容。
4.根据权利要求3所述的方法,其特征在于,所述基于所述控制条件信息对所述补录任务信息表中的各个补录任务分别进行检核,得到对应的检核结果包括:
当所述补录任务类型为栏位控制类型时,针对所述补录任务信息表中的各个补录任务,获取所述补录任务对应的所述控制栏位名称字段的实际栏位内容;
判断所述实际栏位内容与所述控制栏位内容是否匹配;
若不匹配,则确定检核结果为通过;若匹配,则判断补录记录日志中是否存在与所述补录任务对应的补录记录数据;
若存在,则确定检核结果为通过;若不存在,则确定检核结果为不通过。
5.根据权利要求3所述的方法,其特征在于,所述基于所述控制条件信息对所述补录任务信息表中的各个补录任务分别进行检核,得到对应的检核结果包括:
当所述补录任务类型为数目控制类型时,针对所述补录任务信息表中的各个补录任务,基于所述补录数量控制信息获取所述补录任务对应的目标补录数量;
确定补录记录日志中与所述补录任务对应的补录记录数据的数量;
判断所述补录记录数据的数量与所述目标补录数量是否匹配;
若匹配,则确定检核结果为通过;若不匹配,则确定检核结果为不通过。
6.根据权利要求3所述的方法,其特征在于,所述基于所述控制条件信息对所述补录任务信息表中的各个补录任务分别进行检核,得到对应的检核结果包括:
当所述补录任务类型为混合控制类型时,针对所述补录任务信息表中的各个补录任务,分别执行第一检核过程和第二检核过程;若所述第一检核过程和所述第二检核过程的检核结果均为通过,则确定检核结果为通过;若所述第一检核过程或所述第二检核过程的检核结果为不通过,则确定检核结果为不通过;
其中,所述第一检核过程包括:
获取所述补录任务对应的所述控制栏位名称字段的实际栏位内容;
判断所述实际栏位内容与所述控制栏位内容是否匹配;
若不匹配,则确定检核结果为通过;若匹配,则判断补录记录日志中是否存在与所述补录任务对应的补录记录数据;
若存在,则确定检核结果为通过;若不存在,则确定检核结果为不通过;
所述第二检核过程包括:
基于所述补录数量控制信息获取所述补录任务对应的目标补录数量;
确定补录记录日志中与所述补录任务对应的补录记录数据的数量;
判断所述补录记录数据的数量与所述目标补录数量是否匹配;
若匹配,则确定检核结果为通过;若不匹配,则确定检核结果为不通过。
7.根据权利要求1所述的方法,其特征在于,所述方法还包括:
当存在至少一个补录任务的检核结果为不通过时,将检核结果为不通过的补录任务的数据信息保存至补录任务明细表,
以及将所述补录任务信息表的补录检核状态设置为异常状态。
8.根据权利要求1所述的方法,其特征在于,所述方法还包括:
构建补录数据控制表,所述补录数据控制表包括补录任务类型字段;
基于用户的配置指令,配置所述补录任务类型字段对应的补录任务类型;
根据所述补录任务类型,为所述补录数据控制表配置对应的控制条件信息,得到目标补录数据控制表;
基于所述目标补录数据控制表生成补录任务信息表。
9.一种补录数据检核装置,其特征在于,包括:
补录任务信息表获取模块,用于获取待检核的补录任务信息表;
控制条件信息确定模块,用于根据所述补录任务信息表,确定所述补录任务信息表对应的控制条件信息;
数据检核模块,用于基于所述控制条件信息对所述补录任务信息表中的各个补录任务分别进行检核,得到对应的检核结果。
10.一种电子设备,其特征在于,所述电子设备包括处理器和存储器,所述存储器中存储有至少一条指令或至少一段程序,所述至少一条指令或所述至少一段程序由所述处理器加载并执行以实现如权利要求1-8任意一项所述的补录数据检核方法。
11.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有至少一条指令或至少一段程序,所述至少一条指令或至少一段程序由处理器加载并执行以实现如权利要求1-8任意一项所述的补录数据检核方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111371542.6A CN113886368A (zh) | 2021-11-18 | 2021-11-18 | 一种补录数据检核方法、装置、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111371542.6A CN113886368A (zh) | 2021-11-18 | 2021-11-18 | 一种补录数据检核方法、装置、设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113886368A true CN113886368A (zh) | 2022-01-04 |
Family
ID=79015764
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111371542.6A Pending CN113886368A (zh) | 2021-11-18 | 2021-11-18 | 一种补录数据检核方法、装置、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113886368A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114462364A (zh) * | 2022-02-07 | 2022-05-10 | 北京百度网讯科技有限公司 | 录入信息的方法和装置 |
-
2021
- 2021-11-18 CN CN202111371542.6A patent/CN113886368A/zh active Pending
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114462364A (zh) * | 2022-02-07 | 2022-05-10 | 北京百度网讯科技有限公司 | 录入信息的方法和装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110287709B (zh) | 用户操作权限控制方法、装置、设备及介质 | |
CN112511571B (zh) | 一种Web漏洞扫描方法、装置、系统、设备及存储介质 | |
CN107153643B (zh) | 数据表连接方法及装置 | |
CN109460252B (zh) | 基于git的配置文件处理方法、装置和计算机设备 | |
CN111177121A (zh) | 订单数据反馈方法、装置、计算机设备及存储介质 | |
CN113886368A (zh) | 一种补录数据检核方法、装置、设备及存储介质 | |
CN111209061B (zh) | 用户信息的填写方法、装置、计算机设备和存储介质 | |
CN113065887B (zh) | 资源处理方法、装置、计算机设备和存储介质 | |
CN114090113A (zh) | 数据源处理插件动态加载的方法、装置、设备及存储介质 | |
CN112507010B (zh) | 业务数据处理方法、装置、计算机设备和存储介质 | |
CN109241103A (zh) | 数据扩展查询方法、电子装置及计算机可读存储介质 | |
CN107688586B (zh) | 客户数据屏蔽处理方法和装置 | |
CN111897843A (zh) | 物联网数据流转策略的配置方法、装置和计算机设备 | |
US20060031194A1 (en) | Decision support implementation for workflow applications | |
CN111858020A (zh) | 用户资源限制方法、装置及计算机存储介质 | |
CN106936643B (zh) | 一种设备联动方法以及终端设备 | |
CN110969430B (zh) | 可疑用户的识别方法、装置、计算机设备和存储介质 | |
CN110188490B (zh) | 提高数据仿真效率的方法及装置、存储介质和电子装置 | |
EP3860175B1 (en) | Terminal configuration method and device | |
CN111708795A (zh) | 对象标识生成方法、更新方法、装置、计算机设备和介质 | |
CN115269161B (zh) | 一种异常流程逆向回滚方法和系统 | |
CN111401837A (zh) | 事件处理方法和系统、计算机可读存储介质 | |
CN108062327B (zh) | 客户端的匹配方法和装置 | |
CN112766768B (zh) | 合同流程管理方法、装置、电子设备以及可读存储介质 | |
CN110795220B (zh) | 一种任务合并方法、装置和计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |