CN108733820A - 数据调整方法及装置 - Google Patents
数据调整方法及装置 Download PDFInfo
- Publication number
- CN108733820A CN108733820A CN201810493344.9A CN201810493344A CN108733820A CN 108733820 A CN108733820 A CN 108733820A CN 201810493344 A CN201810493344 A CN 201810493344A CN 108733820 A CN108733820 A CN 108733820A
- Authority
- CN
- China
- Prior art keywords
- data
- error
- field
- repaired
- data record
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请提供了一种数据调整方法,在目标业务对数据表的处理出现错误时,该方法确定出数据表的错误内容,然后根据错误内容中的错误类型,确定修复脚本模板,修复脚本模板中包含有待修复字段以及待修复数据记录,再将错误内容中的错误字段作为待修复字段,并将错误内容中错误范围所包含的数据记录作为待修复数据记录,从而得到目标修复脚本,执行目标修复脚本,以对错误范围内的数据记录的错误字段进行修复。可见,该种方法可以对迁移后出现错误的数据进行修复,且该种修复方法可以使用预设的修复脚本模板,较为方便快捷。另外,本申请还提供了一种数据调整装置,用以保证所述方法在实际中的应用及实现。
Description
技术领域
本申请涉及数据处理技术领域,更具体地,是一种数据调整方法及装置。
背景技术
数据迁移是将某一系统中的数据转移至另一系统中,以供另一系统执行业务功能时进行调用。数据存储在数据库中的数据表中,因此数据迁移具体指的是将一个系统中的数据库表向另一个系统中的数据库表转移的过程。为了便于描述,可以将迁移之前的系统称为第一系统,将迁移之后的系统称为第二系统。
两个系统从业务层到数据层的设计可能均有差异,结构的差异导致第二系统对数据表的要求与第一系统不同,如果迁移的数据并没有满足第二系统的要求,则会导致第二系统运行结果的错误。因此,需要一种技术方案,在运行结果出现问题的情况下,对迁移之后的出现错误的数据进行调整。
发明内容
有鉴于此,本申请提供了一种数据调整方法,用于对迁移之后出现错误的数据进行调整。
为实现所述目的,本申请提供的技术方案如下:
第一方面,本申请提供了一种数据调整方法,包括:
若目标业务对数据表的处理结果出现错误,则确定数据表的错误内容;其中所述错误内容包括错误类型、错误字段以及错误范围;
确定与所述错误内容中的错误类型对应的修复脚本模板;其中所述修复脚本模板包括待修复字段及待修复数据记录;
将所述错误内容中的错误字段作为所述修复脚本模板中的待修复字段,并将所述错误内容中的错误范围内的数据记录作为所述修复脚本模板中的待修复数据记录,以得到目标修复脚本;
执行所述目标修复脚本,以对所述错误范围内的数据记录的错误字段进行修复。
第二方面,本申请提供了一种数据调整装置,包括:
错误内容确定单元,用于若目标业务对数据表的处理结果出现错误,则确定数据表的错误内容;其中所述错误内容包括错误类型、错误字段以及错误范围;
修复模板确定单元,用于确定与所述错误内容中的错误类型对应的修复脚本模板;其中所述修复脚本模板包括待修复字段及待修复数据记录;
修复脚本生成单元,用于将所述错误内容中的错误字段作为所述修复脚本模板中的待修复字段,并将所述错误内容中的错误范围内的数据记录作为所述修复脚本模板中的待修复数据记录,以得到目标修复脚本;
修复脚本执行单元,用于执行所述目标修复脚本,以对所述错误范围内的数据记录的错误字段进行修复。
由以上技术方案可知,本申请提供了一种数据调整方法,在目标业务对数据表的处理出现错误时,该方法确定出数据表的错误内容,然后根据错误内容中的错误类型,确定修复脚本模板,修复脚本模板中包含有待修复字段以及待修复数据记录,再将错误内容中的错误字段作为待修复字段,并将错误内容中错误范围所包含的数据记录作为待修复数据记录,从而得到目标修复脚本,执行目标修复脚本,以对错误范围内的数据记录的错误字段进行修复。可见,该种方法可以对迁移后出现错误的数据进行修复,且该种修复方法可以使用预设的修复脚本模板,较为方便快捷。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本申请提供的数据调整方法的一个流程图;
图2为本申请提供的错误内容的一种具体示例图;
图3为本申请提供的数据调整方法的又一个流程图;
图4为本申请提供的修复报表的一种具体示例图;
图5为本申请提供的数据调整装置的一种结构示意图;
图6为本申请提供的数据调整装置的另一种结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
数据可能会进行迁移,由一个系统迁移至另一个系统。数据迁移可以但不局限于发生在旧系统升级为新系统的场景中。数据为系统实现业务功能所需要的数据,因此也可以称为业务数据。数据迁移过程中,由于两个系统的功能业务存在差异,原来系统中的数据与新系统并不适配,导致新系统在运行过程中出现问题。
因此,本申请提供了一种数据调整方法,该方法可以基于系统运行出现的错误,对数据进行调整修复,以保证迁移后数据的准确性。具体地,见图1,其示出了本申请提供的数据调整方法的一种流程。如图1所示,该数据调整方法的流程可以具体包括步骤S101~S104。
S101:若目标业务对数据表的处理结果出现错误,则确定数据表的错误内容;其中错误内容包括数据表的错误类型、错误字段以及错误范围。
其中,数据由某一系统迁移至另一系统,由该另一个系统对数据进行调用并按照目标业务的处理逻辑进行处理。数据迁移可以发生在但不局限于系统升级的场景中。以银行系统为例,银行核心系统在升级过程中,需要将旧系统使用的业务数据导入至新系统中,升级后的系统需要使用这些业务数据实现新的业务功能。为了便于描述,可以将数据迁移之前的系统称为第一系统,将数据迁移之后的系统称为第二系统。
第二系统在对数据进行处理的过程中,可能会出现错误,导致错误的原因是第一系统与第二系统之间从业务层到数据层的设计可能都存在差异,迁移后的数据并不能与第二系统匹配。例如,第二系统包含第一系统中不存在的业务,该项业务所需要的某字段并没有包含在原来的数据表中。又如,第一系统中的某业务可能在第二系统中被删除了,第二系统中并不需要该业务关联的字段,该字段的存在可能会导致第二系统在实现某项业务时出现问题。又如,第一系统与第二系统的业务可能一致,但数据层的设计不完全相同,如数据类型需要进行转换。当然,以上三种差异仅仅是举例说明,在实际应用中并不局限于此。
由于系统之间的差异,数据由第一系统迁移至第二系统后,第二系统对某项业务的处理可能会出现错误。为了便于描述,可以将处理结果出现错误的业务称为目标业务。为了测试哪些业务可能会出现问题,可以对第二系统可以实现的业务编写测试实例,并进行依次测试。以银行系统为例,测试实例可以包括存款、贷款及支付等多项业务。当然,以上处理结果也并非局限于测试过程中的处理结果,也可以是系统实际运行过程中的处理结果。
在测试过程中会产生处理结果,如果对处理结果进行检查后发现与标准的处理结果不一致,则可以确定该处理结果出现问题。例如,某项贷款业务为计算每期的还款额度,若第二系统计算出的还款额度与第一系统计算出的还款额度不同(默认第一系统计算的还款额度为准确值),则可以确定该项业务为目标业务,该处理结果出现错误。
如果在测试过程发现某项业务的处理结果出现问题,则需要按照以下方式对导致该问题的迁移数据进行修复。首先确定数据表中导致该项错误的错误内容。错误内容包括错误字段、错误类型、错误的数据记录范围。以下分别对该三项内容依次进行说明。
第一,关于错误字段。错误字段表示的是导致处理结果错误的具体是数据表中的哪个或哪些字段。
在一种实现方式中,确定错误内容中的错误字段的方式包括:若目标业务对数据表的处理结果出现错误,则依据所述目标业务的处理逻辑确定数据表的关联字段;获得所述目标业务从数据表中对所述关联字段的调用值,以及确定所述关联字段的准确值;以及将所述调用值与所述准确值进行比对,并将比对结果不一致的关联字段确定为错误字段。
具体地,如果发现处理结果出现错误,则首先确定目标业务的处理逻辑是怎样的。处理逻辑可以表示出其目标业务的处理过程需要使用到数据表中哪个或哪些字段,为了便于描述可以将该个或该些字段称为关联字段,关联字段即需要排查的字段,也就是说需要在关联字段中确定出到底出现迁移错误的是哪个或哪些字段。
为了确定出现迁移错误的字段,需要将这些字段在目标业务中使用到的值与这些字段的准确值进行比对,比对不一致的即是错误字段。需要说明的是,目标业务中使用到的值是基于数据表中的字段得到的值,但该值可能与字段的准确值比对结果不一致,出现这种情况的原因可能包括多种。
例如,从数据表中读取目标业务的某个关联字段的值,但该关联字段的值在迁移过程中出现问题。又如,从数据表中读取目标业务的某个关联字段的值,但该关联字段在数据迁移过程中被删除。再如,从数据表中读取目标业务的某个关联字段的值,但该关联字段在数据迁移过程中被复制,从而数据表中出现相同的该关联字段,导致目标业务从数据表中读取字段值时读取错误,所读取到的值为空或者为两个相同的值。
因此需要对这些错误的关联字段进行处理,这些错误的关联字段即被确定为错误字段。
第二,关于错误类型。错误类型表示的是错误具体原因。具体地,根据实际应用情况可以预先设置多种错误类型,在确定错误内容时可以通过分析处理结果,在该多种错误类型中确定某种错误类型为该步骤中数据表的错误类型。
例如,预先设置的错误类型可以包括字段值错误、字段值多余、缺少字段值等等。字段值错误指的是,关联字段的值在迁移过程中出现问题,如关联字段值的内容变化,关联字段值的数据类型变化。缺少字段值指的是,关联字段在数据迁移过程中被删除。字段值多余指的是,关联字段在数据迁移过程中被复制,或者关联字段在数据迁移过程中应该被删除但并未被删除。当然,错误类型还可以是其他,本申请并做具体限定,在实际应用中可以根据应用情况来设置。
因此,确定错误内容中的错误类型的一种实现方式可以概括为:确定与所述错误字段关联的备选错误类型,并对所述备选错误类型依次排查,以确定所述错误内容中的错误类型。
具体地,在排查时首先确定出错误字段,再排查该错误字段的错误类型为哪一种。如果错误类型的字段值错误,则所确定的错误类型中还需要包括准确的字段值,具体地可以将该字段在迁移之前的字段值确定为准确的字段值。例如字段A的错误类型为字段值错误,迁移后的字段值为错误的字段值为100,其在迁移之前的字段值为10,该字段值为准确的字段值。
第三,关于错误的数据记录范围。错误的数据记录范围指的是,数据表中哪些数据记录的字段出现了错误。确定错误的数据记录范围的一种方式可以是,确定所述处理结果中出现错误的数据记录,并将确定出的数据记录作为所述错误内容中的错误数据记录。也就是说,处理结果中可以包括数据记录范围都有哪些,通过检查该数据记录范围内哪些数据记录的处理结果是错误的,便可以确定出错误的数据记录范围是什么。其中,数据记录可以通过数据记录的某项标识表示,则数据记录的范围可以通过标识的范围表示,例如标识为数据记录在数据表中的某个字段为银行卡账号,银行卡账号不同则表示的是不同的数据记录,银行卡账号范围表示的就是数据记录的范围。
例如,以银行系统的贷款业务为例,计算某个机构中所有银行卡账号的每期还款额度时,处理结果中该机构中所有银行卡账号的计算结果均出现错误,则错误的数据记录范围为该机构下的所有银行卡账号。
为了便于理解上述错误字段、错误类型及错误的数据记录范围,以下通过某个示例进行说明。
例如目标业务属于贷款业务,具体为计算每期的还款额度。系统使用迁移后的数据计算全行所有机构银行卡账号的还款额度,发现计算结果与迁移之前计算的结果不一致,例如本次计算结果要比迁移之前计算的结果高出10倍,则说明迁移后的数据可能有误,进而需要确定出错误的字段、错误类型、以及错误的数据记录范围。
假设贷款业务为无息还款,处理逻辑为用总贷款额度除以贷款期数得到每期还款额度。根据处理逻辑可以确定出该目标业务需要使用到的字段至少包括:总贷款额度以及贷款期数两个字段,这两个字段为关联字段。然后获得目标业务从数据表中读取到的该两个字段的字段值,假设读取到的总贷款额度为600万,读取到的贷款期数为120期,将该两个字段值与迁移之前的字段值进行对比后发现总贷款额度有误,迁移之前的字段值为60万,进而可以确定出错误字段为总贷款额度。另外,对错误字段的错误类型进行排查分析后发现,该错误类型属于备选错误类型中的字段值错误。另外,对计算结果进行分析后发现,全行所有机构银行卡账号的还款额度均出现错误,则可以将错误的数据记录范围确定为:全行所有机构的银行卡账号。
确定出的错误内容可以保存在数据表中。见图2,其示出了错误类型为数据取值错误的错误内容几个具体示例。如图2所示,数据表中的字段可以包括数据问题情况说明、数据修复业务范围、错误数据取值及拟修复数据取值。其中数据问题情况说明表示的是错误字段;数据修复业务范围表示的是错误的数据记录;错误数据取值及拟修复数据取值表示的是错误类型,由于是将错误数据取值修改为拟修复数据取值,可以明确的是该错误类型是数据取值错误。图2示出了四个错误内容,即数据表CUS1中的AA字段出现了迁移错误,在这个数据表中需要修复的数据记录为全行所有客户的数据记录,需要将AA字段的值由1修复为3;数据表CUS2中的BB字段出现了迁移错误,在这个数据表中需要修复的数据记录为本机构下所有账号的数据记录,需要将BB字段的值由1修复为0;数据表CUS1中的CC字段出现了迁移错误,在这个数据表中需要修复的数据记录为本机构下所有客户的数据记录,需要将CC字段的值由1修复为2;数据表CUS2中的DD字段出现了迁移错误,在这个数据表中需要修复的数据记录为出现错误的数据记录,需要将DD字段的值由1修复为C。
S102:确定与错误内容中的错误类型对应的修复脚本模板;其中修复脚本模板包括待修复字段及待修复数据记录。
其中,可以预先为每种错误类型设置对应的修复脚本模板,修复脚本模板中包含可以实现修复功能的程序编码,不同错误类型对应的程序编码的修复功能是不同的。因此,需要根据错误内容中的错误类型确定出对应的修复脚本模板。
例如,错误类型为字段值错误,则对应的修复脚本模板为替换字段值的脚本模板;错误类型为字段值多余,则对应的修复脚本模板为删除字段值的脚本模板;错误类型为缺少字段值,则对应的修复脚本模板为添加字段值的脚本模板。
按照错误类型可以确定出与错误类型对应的修复脚本模板,修复脚本模板提供了修复的主要实现逻辑,但是其中包括有待修复字段以及待修复数据记录,该两个字段是需要进行设置的,因此可以执行步骤S103对该两个字段进行设置。
S103:将错误内容中的错误字段作为修复脚本模板中的待修复字段,并将错误内容中的错误范围内的数据记录作为修复脚本模板中的待修复数据记录,以得到目标修复脚本。
其中,修复脚本模板中的待修复字段可以是空白值,将错误字段设置为待修复字段即可;修复脚本模板中的待修复数据记录也可以是空白值,将错误范围所包含的数据记录设置为待修复数据记录即可。经过上述设置以后,便可以得到修复脚本,为了便于描述,可以将该修复脚本称为目标修复脚本。
需要说明的是,若错误类型为字段取值错误,则确定的修复脚本模板包含有修复前的字段值及修复后的字段值,这两个字段值可以包含在错误类型中,根据错误类型确定修复脚本模板后,便可以将该错误类型中包含的修复前的字段值及修复后的字段值填入修复脚本模板中。
例如,错误类型为字段值错误,则确定出的修复脚本模板如下所示:
Update“待修复字段对应的数据表”Set“待修复字段”=“修复后的字段值”
Where“待修复字段”=“修复前的字段值”;
AND键值=“待修复的数据记录范围”。
若一条错误内容为图2中的第一条数据记录,根据该条数据记录将修复脚本模板中的某些需要替换的内容进行替换,则得到的修复脚本模板为:
Update“数据库表CUS1”Set“AA字段”=“3”
Where“AA字段”=“1”;
AND键值=“全行所有客户数据记录对应的键值”。
若一条错误记录为图2中的第二条数据记录,根据该条数据记录将修复脚本模板中的某些需要替换的内容进行替换,则得到的修复脚本模板为:
Update“数据库表CUS2”Set“BB字段”=“0”
Where“AA字段”=“1”;
AND键值=“本机构下所有账号数据记录对应的键值”。
若一条错误记录为图2中的第三条数据记录,根据该条数据记录将修复脚本模板中的某些需要替换的内容进行替换,则得到的修复脚本模板为:
Update“数据库表CUS1”Set“CC字段”=“2”
Where“AA字段”=“1”;
AND键值=“本机构下所有客户数据记录对应的键值”。
若一条错误记录为图2中的第四条数据记录,根据该条数据记录将修复脚本模板中的某些需要替换的内容进行替换,则得到的修复脚本模板为:
Update“数据库表CUS2”Set“DD字段”=“C”
Where“AA字段”=“1”;
AND键值=“处理结果为错误的数据记录对应的键值”。
需要说明的是,以上仅仅是对数据值错误这种错误类型对应的修复脚本模板进行了说明。但是,错误类型还可以是字段值多余,这种错误类型对应的修复脚本模板作用为删除某个字段;错误类型还可以是缺少字段值,这种错误类型对应的修复脚本模板作用为添加某个字段。
S104:执行目标修复脚本,以对错误范围内的数据记录的错误字段进行修复。
其中,目标修复脚本中包含修复代码,运行该修复代码,修复程序便可以将数据库中的数据表的错误字段进行修复。
由以上技术方案可知,本申请提供了一种数据调整方法,在目标业务对数据表的处理出现错误时,该方法确定出数据表的错误内容,然后根据错误内容中的错误类型,确定修复脚本模板,修复脚本模板中包含有待修复字段以及待修复数据记录,再将错误内容中的错误字段作为待修复字段,并将错误内容中错误范围所包含的数据记录作为待修复数据记录,从而得到目标修复脚本,执行目标修复脚本,以对错误范围内的数据记录的错误字段进行修复。可见,该种方法可以对迁移后出现错误的数据进行修复,且该种修复方法可以使用预设的修复脚本模板,较为方便快捷。
修复后的数据可以进行展示,以提示用户是否修复成功。见图3,其示出了本申请提供的数据调整方法的另一个流程,该流程在图1所示的流程基础上,还可以包括步骤S105。需要说明的是,有关步骤S101~S104的说明可以参见图1所示,以下并不赘述,仅对步骤S105进行说明。
S105:在修复后的数据表中,查询已修复的数据记录的标识字段;生成包含错误类型、错误字段、错误范围、已修复的数据记录的标识字段、修复是否成功的修复报表;以及展示所述修复报表。
其中,为了表示已修复的数据记录有哪些,可以在修复之后的数据表中查询已经修复的数据记录的标识字段,例如标识字段可以是账号、客户号等。将错误类型、错误字段、错误范围、已修复数据记录的标识、以及修复是否成功这些字段生成修复报表进行展示。
见图4,其示出了本申请提供的包含上述字段的修复报表的一个示例图。客户号1至客户号7、账号1至账号5、客户号A1至客户号A5、账号A1及账号A2这些都是从数据表中查询到的已经修复的数据记录的标识字段。表示这些标识字段对应的数据记录被成功修复。
见图5,其示出了本申请提供的一种数据调整装置的结构,具体包括:错误内容确定单元501、修复模板确定单元502、修复脚本生成单元503及修复脚本执行单元504。
错误内容确定单元501,用于若目标业务对数据表的处理结果出现错误,则确定数据表的错误内容;其中所述错误内容包括错误类型、错误字段以及错误范围;
修复模板确定单元502,用于确定与所述错误内容中的错误类型对应的修复脚本模板;其中所述修复脚本模板包括待修复字段及待修复数据记录;
修复脚本生成单元503,用于将所述错误内容中的错误字段作为所述修复脚本模板中的待修复字段,并将所述错误内容中的错误范围内的数据记录作为所述修复脚本模板中的待修复数据记录,以得到目标修复脚本;
修复脚本执行单元504,用于执行所述目标修复脚本,以对所述错误范围内的数据记录的错误字段进行修复。
在一个示例中,所述错误内容确定单元包括:
错误字段确定子单元,用于若目标业务对数据表的处理结果出现错误,则依据所述目标业务的处理逻辑确定数据表的关联字段;获得所述目标业务从数据表中对所述关联字段的调用值,以及确定所述关联字段的准确值;以及将所述调用值与所述准确值进行比对,并将比对结果不一致的关联字段确定为错误字段。
在一个示例中,所述错误内容确定单元包括:
错误类型确定子单元,用于确定与所述错误字段关联的备选错误类型;以及对所述备选错误类型依次排查,以确定所述错误内容中的错误类型。
在一个示例中,所述错误内容确定单元包括:
错误数据记录确定子单元,用于确定所述处理结果中出现错误的数据记录;以及将确定出的数据记录作为所述错误内容中的错误数据记录。
见图6,其示出了本申请提供的数据调整装置的一种结构,在图5所示的结构基础上,还可以包括修复报表展示单元505。
修复报表展示单元505,用于在修复后的数据表中,查询已修复的数据记录的标识字段;生成包含错误类型、错误字段、错误范围、已修复的数据记录的标识字段、修复是否成功的修复报表;以及展示所述修复报表。
需要说明的是,本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。
还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括上述要素的过程、方法、物品或者设备中还存在另外的相同要素。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下,在其它实施例中实现。因此,本申请将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (10)
1.一种数据调整方法,其特征在于,包括:
若目标业务对数据表的处理结果出现错误,则确定数据表的错误内容;其中所述错误内容包括错误类型、错误字段以及错误范围;
确定与所述错误内容中的错误类型对应的修复脚本模板;其中所述修复脚本模板包括待修复字段及待修复数据记录;
将所述错误内容中的错误字段作为所述修复脚本模板中的待修复字段,并将所述错误内容中的错误范围内的数据记录作为所述修复脚本模板中的待修复数据记录,以得到目标修复脚本;
执行所述目标修复脚本,以对所述错误范围内的数据记录的错误字段进行修复。
2.根据权利要求1所述的数据调整方法,其特征在于,确定错误内容中的错误字段的方式包括:
若目标业务对数据表的处理结果出现错误,则依据所述目标业务的处理逻辑确定数据表的关联字段;
获得所述目标业务从数据表中对所述关联字段的调用值,以及确定所述关联字段的准确值;
将所述调用值与所述准确值进行比对,并将比对结果不一致的关联字段确定为错误字段。
3.根据权利要求2所述的数据调整方法,其特征在于,确定错误内容中的错误类型的方式包括:
确定与所述错误字段关联的备选错误类型;
对所述备选错误类型依次排查,以确定所述错误内容中的错误类型。
4.根据权利要求1所述的数据调整方法,其特征在于,确定错误内容中的错误范围的方式包括:
确定所述处理结果中出现错误的数据记录;
将确定出的数据记录作为所述错误内容中的错误数据记录。
5.根据权利要求1所述的数据调整方法,其特征在于,还包括:
在修复后的数据表中,查询已修复的数据记录的标识字段;
生成包含错误类型、错误字段、错误范围、已修复的数据记录的标识字段、修复是否成功的修复报表;
展示所述修复报表。
6.一种数据调整装置,其特征在于,包括:
错误内容确定单元,用于若目标业务对数据表的处理结果出现错误,则确定数据表的错误内容;其中所述错误内容包括错误类型、错误字段以及错误范围;
修复模板确定单元,用于确定与所述错误内容中的错误类型对应的修复脚本模板;其中所述修复脚本模板包括待修复字段及待修复数据记录;
修复脚本生成单元,用于将所述错误内容中的错误字段作为所述修复脚本模板中的待修复字段,并将所述错误内容中的错误范围内的数据记录作为所述修复脚本模板中的待修复数据记录,以得到目标修复脚本;
修复脚本执行单元,用于执行所述目标修复脚本,以对所述错误范围内的数据记录的错误字段进行修复。
7.根据权利要求6所述的数据调整装置,其特征在于,所述错误内容确定单元包括:
错误字段确定子单元,用于若目标业务对数据表的处理结果出现错误,则依据所述目标业务的处理逻辑确定数据表的关联字段;获得所述目标业务从数据表中对所述关联字段的调用值,以及确定所述关联字段的准确值;以及将所述调用值与所述准确值进行比对,并将比对结果不一致的关联字段确定为错误字段。
8.根据权利要求7所述的数据调整装置,其特征在于,所述错误内容确定单元包括:
错误类型确定子单元,用于确定与所述错误字段关联的备选错误类型;以及对所述备选错误类型依次排查,以确定所述错误内容中的错误类型。
9.根据权利要求6所述的数据调整装置,其特征在于,所述错误内容确定单元包括:
错误数据记录确定子单元,用于确定所述处理结果中出现错误的数据记录;以及将确定出的数据记录作为所述错误内容中的错误数据记录。
10.根据权利要求6所述的数据调整装置,其特征在于,还包括:
修复报表展示单元,用于在修复后的数据表中,查询已修复的数据记录的标识字段;生成包含错误类型、错误字段、错误范围、已修复的数据记录的标识字段、修复是否成功的修复报表;以及展示所述修复报表。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810493344.9A CN108733820A (zh) | 2018-05-22 | 2018-05-22 | 数据调整方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810493344.9A CN108733820A (zh) | 2018-05-22 | 2018-05-22 | 数据调整方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN108733820A true CN108733820A (zh) | 2018-11-02 |
Family
ID=63938572
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810493344.9A Pending CN108733820A (zh) | 2018-05-22 | 2018-05-22 | 数据调整方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108733820A (zh) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110109897A (zh) * | 2019-04-15 | 2019-08-09 | 深圳壹账通智能科技有限公司 | 数据库脚本生成方法、装置、计算机设备和存储介质 |
CN111488335A (zh) * | 2020-03-17 | 2020-08-04 | 上海维信荟智金融科技有限公司 | 基于规则的数据自动修复方法及系统 |
CN112307106A (zh) * | 2020-11-11 | 2021-02-02 | 天津汇商共达科技有限责任公司 | 一种数据预处理方法及装置 |
CN112347095A (zh) * | 2020-11-16 | 2021-02-09 | 建信金融科技有限责任公司 | 数据表的处理方法、装置和服务器 |
CN113313424A (zh) * | 2021-06-25 | 2021-08-27 | 中国农业银行股份有限公司 | 账务数据的处理方法及装置 |
CN113468158A (zh) * | 2021-07-13 | 2021-10-01 | 广域铭岛数字科技有限公司 | 数据修复方法、系统、电子设备及介质 |
CN114170044A (zh) * | 2022-02-11 | 2022-03-11 | 北京金堤科技有限公司 | 自动申报方法、装置、存储介质及电子设备 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101185075A (zh) * | 2005-03-31 | 2008-05-21 | 瑞士银行股份有限公司 | 用于使第二数据库与第一数据库同步的计算机网络系统及相应过程 |
CN104572999A (zh) * | 2015-01-07 | 2015-04-29 | 北京数码大方科技股份有限公司 | 基于异构数据的错误数据的检测方法和装置 |
-
2018
- 2018-05-22 CN CN201810493344.9A patent/CN108733820A/zh active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101185075A (zh) * | 2005-03-31 | 2008-05-21 | 瑞士银行股份有限公司 | 用于使第二数据库与第一数据库同步的计算机网络系统及相应过程 |
CN104572999A (zh) * | 2015-01-07 | 2015-04-29 | 北京数码大方科技股份有限公司 | 基于异构数据的错误数据的检测方法和装置 |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110109897A (zh) * | 2019-04-15 | 2019-08-09 | 深圳壹账通智能科技有限公司 | 数据库脚本生成方法、装置、计算机设备和存储介质 |
CN111488335A (zh) * | 2020-03-17 | 2020-08-04 | 上海维信荟智金融科技有限公司 | 基于规则的数据自动修复方法及系统 |
CN112307106A (zh) * | 2020-11-11 | 2021-02-02 | 天津汇商共达科技有限责任公司 | 一种数据预处理方法及装置 |
CN112347095A (zh) * | 2020-11-16 | 2021-02-09 | 建信金融科技有限责任公司 | 数据表的处理方法、装置和服务器 |
CN112347095B (zh) * | 2020-11-16 | 2023-04-21 | 建信金融科技有限责任公司 | 数据表的处理方法、装置和服务器 |
CN113313424A (zh) * | 2021-06-25 | 2021-08-27 | 中国农业银行股份有限公司 | 账务数据的处理方法及装置 |
CN113468158A (zh) * | 2021-07-13 | 2021-10-01 | 广域铭岛数字科技有限公司 | 数据修复方法、系统、电子设备及介质 |
CN113468158B (zh) * | 2021-07-13 | 2023-10-31 | 广域铭岛数字科技有限公司 | 数据修复方法、系统、电子设备及介质 |
CN114170044A (zh) * | 2022-02-11 | 2022-03-11 | 北京金堤科技有限公司 | 自动申报方法、装置、存储介质及电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108733820A (zh) | 数据调整方法及装置 | |
CN109271321B (zh) | 一种贡献代码数统计方法及装置 | |
CN107330776B (zh) | 一种记账及异常记账明细检测方法及装置 | |
CN107193683B (zh) | 数据库备份的校验方法及装置 | |
CN108647357B (zh) | 数据查询的方法及装置 | |
CN105989059A (zh) | 数据记录核对方法及装置 | |
US9208006B2 (en) | Recovery Maturity Model (RMM) for readiness-based control of disaster recovery testing | |
JP6251383B2 (ja) | 債務不履行となる企業の蓋然性の計算 | |
CN107633015A (zh) | 一种数据处理方法、装置及设备 | |
CN111444073A (zh) | 用于测试金融数据库性能的方法、装置和系统 | |
CN111190814B (zh) | 软件测试用例的生成方法、装置、存储介质及终端 | |
CN114219321A (zh) | 一种信息系统投产准备方法及装置 | |
CN111309586A (zh) | 一种命令测试方法、装置及其存储介质 | |
US20100146334A1 (en) | Fault tolerant update propagation to views | |
CN111858600A (zh) | 数据宽表构建方法、装置、设备及存储介质 | |
CN108897765A (zh) | 一种数据批量导入方法及其系统 | |
CN113312259B (zh) | 一种接口测试方法及装置 | |
CN110399309A (zh) | 一种测试数据生成方法及装置 | |
CN112882956A (zh) | 一种通过数据组合计算自动生成全场景自动化测试案例的方法、装置、存储介质及电子设备 | |
CN106803202B (zh) | 一种待测试交易记录的提取方法和装置 | |
CN106227502A (zh) | 一种获取硬盘固件版本的方法及装置 | |
CN115391464A (zh) | 分布式数据库灾备测试方法、系统及计算机设备 | |
JP2013196609A (ja) | データ分析支援装置およびデータ分析支援処理プログラム | |
CN112631852A (zh) | 宏检查方法、装置、电子设备和计算机可读存储介质 | |
CN105989021A (zh) | 一种文件处理方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20181102 |