CN112199371A - 一种数据迁移方法、装置、计算机设备和存储介质 - Google Patents
一种数据迁移方法、装置、计算机设备和存储介质 Download PDFInfo
- Publication number
- CN112199371A CN112199371A CN202010986066.8A CN202010986066A CN112199371A CN 112199371 A CN112199371 A CN 112199371A CN 202010986066 A CN202010986066 A CN 202010986066A CN 112199371 A CN112199371 A CN 112199371A
- Authority
- CN
- China
- Prior art keywords
- tables
- data
- indexes
- source
- verification
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000013508 migration Methods 0.000 title claims abstract description 57
- 230000005012 migration Effects 0.000 title claims abstract description 57
- 238000000034 method Methods 0.000 title claims abstract description 36
- 238000012795 verification Methods 0.000 claims abstract description 133
- 238000012986 modification Methods 0.000 claims description 16
- 230000004048 modification Effects 0.000 claims description 16
- 230000003993 interaction Effects 0.000 claims description 7
- 238000000586 desensitisation Methods 0.000 claims description 6
- 238000004590 computer program Methods 0.000 claims description 3
- 230000004044 response Effects 0.000 claims 2
- 238000012423 maintenance Methods 0.000 description 14
- 238000010586 diagram Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 238000012217 deletion Methods 0.000 description 3
- 230000037430 deletion Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2282—Tablespace storage structures; Management thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
- G06F16/24553—Query execution of query operations
- G06F16/24558—Binary matching operations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Computational Linguistics (AREA)
- Software Systems (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明公开了一种数据迁移方法、装置、计算机设备和存储介质。该方法包括:获取根据历史数据生成的多个源表,其中,所述源表中包括多个标准统计指标,以及各标准统计指标对应的源表数据;根据各源表获取多个核验指标分别对应的标准核验结果;根据各源表生成实账户明细表和多个中间信息表,并根据实账户明细表和多个中间信息表,获取多个核验指标分别对应的目标核验结果;将各核验指标对应的目标核验结果分别与标准核验结果进行比对,如果确定比对成功,则将实账户明细表和多个中间信息表进行本地存储。使用本发明的技术方案,可以实现准确、迅速的完成多源数据的迁移。
Description
技术领域
本发明实施例涉及数据处理技术,尤其涉及一种数据迁移方法、装置、计算机设备和存储介质。
背景技术
维修资金用于对房屋共用物业维修提供资金支持,随着数字经济的发展,原有的各地方通过各自的系统对维修资金进行管理的方式已经无法适应维修资金的监管需求,需要将维修资金的历史数据迁移至维修资金业务管理系统中。维修资金业务管理系统是对房屋的维修资金进行管理的系统,可以实现维修资金的缴存、支取以及退款等操作。
现有技术中,将历史数据迁移至新系统中,通常通过分析新旧系统中,数据表结构的映射关系以及编码规则、数据字典等,实现数据的迁移。现有技术中进行数据迁移的方式,迁移成本较高,准确率较低,当数据量较大时,迁移效率较低。
发明内容
本发明实施例提供一种数据迁移方法、装置、计算机设备和存储介质,以实现准确、迅速的完成多源数据的迁移。
第一方面,本发明实施例提供了一种数据迁移方法,该方法包括:
获取根据历史数据生成的多个源表,其中,所述源表中包括多个标准统计指标,以及各标准统计指标对应的源表数据;
根据各源表获取多个核验指标分别对应的标准核验结果;
根据各源表生成实账户明细表和多个中间信息表,并根据实账户明细表和多个中间信息表,获取多个核验指标分别对应的目标核验结果;
将各核验指标对应的目标核验结果分别与标准核验结果进行比对,如果确定比对成功,则将实账户明细表和多个中间信息表进行本地存储。
第二方面,本发明实施例还提供了一种数据迁移装置,该装置包括:
源表获取模块,用于获取根据历史数据生成的多个源表,其中,所述源表中包括多个标准统计指标,以及各标准统计指标对应的源表数据;
标准核验结果获取模块,用于根据各源表获取多个核验指标分别对应的标准核验结果;
目标核验结果获取模块,用于根据各源表生成实账户明细表和多个中间信息表,并根据实账户明细表和多个中间信息表,获取多个核验指标分别对应的目标核验结果;
核验结果比对模块,用于将各核验指标对应的目标核验结果分别与标准核验结果进行比对,如果确定比对成功,则将实账户明细表和多个中间信息表进行本地存储。
第三方面,本发明实施例还提供了一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现如本发明实施例中任一所述的数据迁移方法。
第四方面,本发明实施例还提供了一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行如本发明实施例中任一所述的数据迁移方法。
本发明实施例通过获取历史数据生成的源表,并对各源表计算多个核验指标分别对应的标准核验结果,将源表转换为实账户明细表和多个中间信息表后,计算转换后的实账户明细表和各中间信息表在各核验指标下的目标核验结果,将各核验指标的目标核验结果与标准核验结果进行比对,比对成功后将实账户明细表和各中间信息表进行本地存储。解决了现有技术中进行数据迁移的方式,迁移成本较高,准确率较低,当数据量较大时,迁移效率较低的问题,实现了准确、迅速的完成多源数据迁移的效果。
附图说明
图1是本发明实施例一中的一种数据迁移方法的流程图;
图2是本发明实施例二中的一种数据迁移方法的流程图;
图3是本发明实施例三中的一种数据迁移装置的结构示意图;
图4是本发明实施例四中的一种计算机设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1是本发明实施例一提供的一种数据迁移方法的流程图,本实施例可适用于将历史数据迁移至新系统中的情况,该方法可以由数据迁移装置来执行,该装置可以由软件和/或硬件来实现,并一般集成在计算机设备中。
如图1所示,本发明实施例的技术方案,具体包括如下步骤:
S110、获取根据历史数据生成的多个源表,其中,所述源表中包括多个标准统计指标,以及各标准统计指标对应的源表数据。
其中,历史数据是需要迁移的数据,源表是根据历史数据生成的、包含多个标准统计指标的数据表。标准统计指标是原表中需要进行统计的各项指标,示例性的,当历史数据是维修资金数据时,标准统计指标可以是小区名称、楼栋名称、单元号、房屋号码、建筑面积、房屋类型、产权证号、业主姓名、证件号码、手机号码、缴存标准、交易金额以及票据号等,但本发明实施例对标准统计指标的数量和具体形式不进行限制。源表数据是指标准统计指标对应的数据。
在本发明实施例中,根据历史数据生成多个源表,可以通过数据识别在历史数据中获取与各标准统计指标对应的数据,从而生成源表;也可以根据用户的录入操作生成源表,本发明实施例对生成源表的具体方式不进行限制。
S120、根据各源表获取多个核验指标分别对应的标准核验结果。
其中,核验指标用于对数据迁移的准确性进行核验,标准核验结果是根据各源表中的各源表数据,在各核验指标下计算得到的统计结果。
在本发明一个可选的实施例中,所述核验指标可以包括以下至少一项:交易明细总数、小区总数、楼栋总数、单元总数、房屋总数、总发生额、小区总账、楼栋总账、单元总账、房屋总账、发生额是否为负数以及余额是否为负数。
其中,交易明细总数是各源表中存在交易金额的源表的总数,小区总数是根据各源表中的小区名称统计得到的小区的总数量,楼栋总数是根据各源表中的楼栋名称统计得到的楼栋的总数量,单元总数是根据各源表中的单元号统计得到的单元的总数量,房屋总数与源表的数量相匹配,总发生额是各源表中交易金额的总数。小区总账是各源表中,以小区为计量单位,各小区对应的交易金额的总数。楼栋总账是各源表中,以不同的楼栋为计量单位,各楼栋对应的交易金额的总数。单元总账是各源表中,以不同的单元为计量单位,各单元对应的交易金额的总数。房屋总账是各源表中,以不同的房屋为计量单位,各房屋对应的交易金额的总数。发生额是否为负数是指预设时间段内的源表所对应的余额与各交易金额之和的差值是否为负数。余额是否为负数是指根据各源表计算当前维修资金账户的余额是否为负数。
在本发明实施例中,如果确定源表与数据迁移后生成的数据表在各项核验指标下的核验结果都相同,则说明数据迁移前后数据一致,提高了数据迁移的准确性。
S130、根据各源表生成实账户明细表和多个中间信息表,并根据实账户明细表和多个中间信息表,获取多个核验指标分别对应的目标核验结果。
其中,实账户明细表是统计各房屋对应的维修资金账户的缴存、支出的明细表。中间信息表是与小区、楼栋、单元以及房屋等相对应的各类信息的数据表。
在本发明一个可选的实施例中,所述中间信息表可以包括以下至少一项:小区信息表、楼栋信息表、单元信息表、房屋信息表以及业主信息表。
其中,小区信息表是根据各源表中与小区相关的各类信息而生成的统计表,示例性的,小区信息表中的各项统计指标可以包括:小区编号、小区名称、小区地址、建筑面积以及房屋数量等。相对应的,楼栋信息表、单元信息表、房屋信息表以及业主信息表,分别是根据各源表中与楼栋、单元、房屋以及业主相关的各类信息而生成的统计表。
在本发明实施例中,将源表转换成实账户明细表和多个中间信息表之后,需要判断转换过程时候存在错误,因此,需要计算生成的各数据表在各项核验指标下的目标核验结果。
S140、将各核验指标对应的目标核验结果分别与标准核验结果进行比对,如果确定比对成功,则将实账户明细表和多个中间信息表进行本地存储。
在本发明实施例中,将数据迁移前各核验指标对应的标准核验结果,与数据迁移后各核验指标对应的目标核验结果进行比对,当各核验指标对应的目标核验结果与标准核验结果全部比对成功时,说明转换获得的实账户明细表和各中间信息表中不存在数据错误,可以存储到本地数据库中。
本实施例的技术方案,通过获取历史数据生成的源表,并对各源表计算多个核验指标分别对应的标准核验结果,将源表转换为实账户明细表和多个中间信息表后,计算转换后的实账户明细表和各中间信息表在各核验指标下的目标核验结果,将各核验指标的目标核验结果与标准核验结果进行比对,比对成功后将实账户明细表和各中间信息表进行本地存储。解决了现有技术中进行数据迁移的方式,迁移成本较高,准确率较低,当数据量较大时,迁移效率较低的问题,实现了准确、迅速的完成多源数据迁移的效果。
实施例二
图2是本发明实施例二提供的一种数据迁移方法的流程图,本发明实施例在上述实施例的基础上,对根据各源表生成实账户明细表和中间信息表的过程进行了进一步的具体化,并加入了生成分户表和上级信息表的步骤、数据脱敏的步骤以及数据修改的步骤。
相应的,如图2所示,本发明实施例的技术方案,具体包括如下步骤:
S210、获取根据历史数据生成的多个源表,其中,所述源表中包括多个标准统计指标,以及各标准统计指标对应的源表数据。
S220、根据各源表获取多个核验指标分别对应的标准核验结果。
S230、在各标准统计指标中,分别获取与实账户明细表对应的明细统计指标,以及各中间信息表对应的信息统计指标匹配的目标标准统计指标。
示例性的,当生成小区信息表时,可以将标准统计指标中与小区信息相关的指标作为目标标准统计指标。
S240、根据目标标准统计指标以及所述目标标准统计指标对应的源表数据,生成实账户明细表和多个中间信息表。
在本发明实施例中,根据与实账户明细表对应的明细统计指标,以及明细统计指标对应的源表数据,生成实账户明细表。根据与中间信息表对应的信息统计指标,以及信息统计指标对应的源表数据,生成中间信息表。
S250、根据实账户明细表和多个中间信息表,获取多个核验指标分别对应的目标核验结果。
S260、将各核验指标对应的目标核验结果分别与标准核验结果进行比对,如果确定比对成功,则将实账户明细表和多个中间信息表进行本地存储。
S270、根据实账户明细表生成分户表,根据多个中间信息表生成多个上级信息表。
其中,分户表是在实账户明细表的基础上生成的,以小区、楼栋或者单元为统计单位生成的维修资金账户的缴存、支出的明细表。上级信息表是根据中间信息表生成的账号登记表、维修资金账户统计信息表等。本发明实施例对根据实账户明细表和中间信息表生成的具体表格类型不进行限制。
S280、对实账户明细表、各中间信息表、分户表以及各上级信息表中,与客户信息相关的数据进行脱敏处理。
其中,脱敏处理是指对某些敏感信息通过脱敏规则进行数据的变形,实现敏感隐私数据的可靠保护。
在本发明实施例中,可以对业主姓名、证件号码、手机号码以及房屋地址等数据进行脱敏处理,以更好地保护房主信息,避免房主信息泄露。
S290、判断是否接收到用户在人机交互界面发出的数据修改指令,如果是,则执行S2110,否则执行S2100。
在本发明实施例中,当实账户明细表、各中间信息表、分户表或者各上级信息表中的数据需要进行修改时,可以通过用户在人机交互界面上输入或者点击数据修改按键等方式,对数据进行修改;也可以通过在数据库中使用update等修改数据指令,对数据进行修改,本发明实施例对数据修改的方式不进行限制。
S2100、判断是否接收到数据库中的修改数据指令,如果是,则执行S2110,否则执行S290。
S2110、对实账户明细表、各中间信息表、分户表或者各上级信息表中的至少一项数据进行修改。
需要进行说明的是,本发明实施例中,当需要对实账户明细表、各中间信息表、分户表或者各上级信息表进行数据的增、删时,同样可以通过用户在人机交互界面上输入或者点击数据增、删按键等方式,或通过在数据库中直接增、删数据的方式来实现。
本实施例的技术方案,通过获取历史数据生成的源表,并对各源表计算多个核验指标分别对应的标准核验结果,将源表转换为实账户明细表和多个中间信息表后,计算转换后的实账户明细表和各中间信息表在各核验指标下的目标核验结果,将各核验指标的目标核验结果与标准核验结果进行比对,比对成功后将实账户明细表和各中间信息表进行本地存储,根据实账户明细表和各中间信息表分别生成分户表和上级信息表,对各表中的数据进行脱敏处理,当需要对表中数据进行修改时,可以根据人机交互界面中用户的修改指令进行修改,或直接在数据库中进行修改。解决了现有技术中进行数据迁移的方式,迁移成本较高,准确率较低,当数据量较大时,迁移效率较低的问题,实现了准确、迅速的完成多源数据迁移的效果。
实施例三
图3是本发明实施例三提供的一种数据迁移装置的结构示意图,该装置可以由软件和/或硬件来实现,并一般集成在计算机设备中。该装置包括:源表获取模块310、标准核验结果获取模块320、目标核验结果获取模块330以及核验结果比对模块340。其中:
源表获取模块310,用于获取根据历史数据生成的多个源表,其中,所述源表中包括多个标准统计指标,以及各标准统计指标对应的源表数据;
标准核验结果获取模块320,用于根据各源表获取多个核验指标分别对应的标准核验结果;
目标核验结果获取模块330,用于根据各源表生成实账户明细表和多个中间信息表,并根据实账户明细表和多个中间信息表,获取多个核验指标分别对应的目标核验结果;
核验结果比对模块340,用于将各核验指标对应的目标核验结果分别与标准核验结果进行比对,如果确定比对成功,则将实账户明细表和多个中间信息表进行本地存储。
本实施例的技术方案,通过获取历史数据生成的源表,并对各源表计算多个核验指标分别对应的标准核验结果,将源表转换为实账户明细表和多个中间信息表后,计算转换后的实账户明细表和各中间信息表在各核验指标下的目标核验结果,将各核验指标的目标核验结果与标准核验结果进行比对,比对成功后将实账户明细表和各中间信息表进行本地存储。解决了现有技术中进行数据迁移的方式,迁移成本较高,准确率较低,当数据量较大时,迁移效率较低的问题,实现了准确、迅速的完成多源数据迁移的效果。
在上述实施例的基础上,所述目标核验结果获取模块330,包括:
统计指标获取单元,用于在各标准统计指标中,分别获取与实账户明细表对应的明细统计指标,以及各中间信息表对应的信息统计指标匹配的目标标准统计指标;
数据表生成单元,用于根据目标标准统计指标以及所述目标标准统计指标对应的源表数据,生成实账户明细表和多个中间信息表。
在上述实施例的基础上,所述装置,还包括:
上级表生成单元,用于根据实账户明细表生成分户表,根据多个中间信息表生成多个上级信息表。
在上述实施例的基础上,所述装置,还包括:
数据脱敏模块,用于对实账户明细表、各中间信息表、分户表以及各上级信息表中,与客户信息相关的数据进行脱敏处理。
在上述实施例的基础上,所述装置,还包括:
数据修改模块,用于响应于用户在人机交互界面发出的数据修改指令,和/或响应于数据库中的修改数据指令,对实账户明细表、各中间信息表、分户表或者各上级信息表中的至少一项数据进行修改。
在上述实施例的基础上,所述核验指标包括以下至少一项:
交易明细总数、小区总数、楼栋总数、单元总数、房屋总数、总发生额、小区总账、楼栋总账、单元总账、房屋总账、发生额是否为负数以及余额是否为负数。
在上述实施例的基础上,所述中间信息表包括以下至少一项:
小区信息表、楼栋信息表、单元信息表、房屋信息表以及业主信息表。
本发明实施例所提供的数据迁移装置可执行本发明任意实施例所提供的数据迁移方法,具备执行方法相应的功能模块和有益效果。
实施例四
图4为本发明实施例四提供的一种计算机设备的结构示意图,如图4所示,该计算机设备包括处理器70、存储器71、输入装置72和输出装置73;计算机设备中处理器70的数量可以是一个或多个,图4中以一个处理器70为例;计算机设备中的处理器70、存储器71、输入装置72和输出装置73可以通过总线或其他方式连接,图4中以通过总线连接为例。
存储器71作为一种计算机可读存储介质,可用于存储软件程序、计算机可执行程序以及模块,如本发明实施例中的数据迁移方法对应的模块(例如,数据迁移装置中的源表获取模块310、标准核验结果获取模块320、目标核验结果获取模块330以及核验结果比对模块340)。处理器70通过运行存储在存储器71中的软件程序、指令以及模块,从而执行计算机设备的各种功能应用以及数据处理,即实现上述的数据迁移方法。该方法包括:
获取根据历史数据生成的多个源表,其中,所述源表中包括多个标准统计指标,以及各标准统计指标对应的源表数据;
根据各源表获取多个核验指标分别对应的标准核验结果;
根据各源表生成实账户明细表和多个中间信息表,并根据实账户明细表和多个中间信息表,获取多个核验指标分别对应的目标核验结果;
将各核验指标对应的目标核验结果分别与标准核验结果进行比对,如果确定比对成功,则将实账户明细表和多个中间信息表进行本地存储。
存储器71可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序;存储数据区可存储根据终端的使用所创建的数据等。此外,存储器71可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中,存储器71可进一步包括相对于处理器70远程设置的存储器,这些远程存储器可以通过网络连接至计算机设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置72可用于接收输入的数字或字符信息,以及产生与计算机设备的用户设置以及功能控制有关的键信号输入。输出装置73可包括显示屏等显示设备。
实施例五
本发明实施例五还提供一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行一种数据迁移方法,该方法包括:
获取根据历史数据生成的多个源表,其中,所述源表中包括多个标准统计指标,以及各标准统计指标对应的源表数据;
根据各源表获取多个核验指标分别对应的标准核验结果;
根据各源表生成实账户明细表和多个中间信息表,并根据实账户明细表和多个中间信息表,获取多个核验指标分别对应的目标核验结果;
将各核验指标对应的目标核验结果分别与标准核验结果进行比对,如果确定比对成功,则将实账户明细表和多个中间信息表进行本地存储。
当然,本发明实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的方法操作,还可以执行本发明任意实施例所提供的数据迁移方法中的相关操作。
通过以上关于实施方式的描述,所属领域的技术人员可以清楚地了解到,本发明可借助软件及必需的通用硬件来实现,当然也可以通过硬件实现,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
值得注意的是,上述数据迁移装置的实施例中,所包括的各个单元和模块只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本发明的保护范围。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。
Claims (15)
1.一种数据迁移方法,其特征在于,包括:
获取根据历史数据生成的多个源表,其中,所述源表中包括多个标准统计指标,以及各标准统计指标对应的源表数据;
根据各源表获取多个核验指标分别对应的标准核验结果;
根据各源表生成实账户明细表和多个中间信息表,并根据实账户明细表和多个中间信息表,获取多个核验指标分别对应的目标核验结果;
将各核验指标对应的目标核验结果分别与标准核验结果进行比对,如果确定比对成功,则将实账户明细表和多个中间信息表进行本地存储。
2.根据权利要求1所述的方法,其特征在于,所述根据各源表生成实账户明细表和多个中间信息表,包括:
在各标准统计指标中,分别获取与实账户明细表对应的明细统计指标,以及各中间信息表对应的信息统计指标匹配的目标标准统计指标;
根据目标标准统计指标以及所述目标标准统计指标对应的源表数据,生成实账户明细表和多个中间信息表。
3.根据权利要求1所述的方法,其特征在于,将实账户明细表和多个中间信息表进行本地存储之后,包括:
根据实账户明细表生成分户表,根据多个中间信息表生成多个上级信息表。
4.根据权利要求3所述的方法,其特征在于,根据多个中间信息表生成多个上级信息表之后,还包括:
对实账户明细表、各中间信息表、分户表以及各上级信息表中,与客户信息相关的数据进行脱敏处理。
5.根据权利要求3所述的方法,其特征在于,根据多个中间信息表生成多个上级信息表之后,还包括:
响应于用户在人机交互界面发出的数据修改指令,和/或响应于数据库中的修改数据指令,对实账户明细表、各中间信息表、分户表或者各上级信息表中的至少一项数据进行修改。
6.根据权利要求1-5任一项所述的方法,其特征在于,所述核验指标包括以下至少一项:
交易明细总数、小区总数、楼栋总数、单元总数、房屋总数、总发生额、小区总账、楼栋总账、单元总账、房屋总账、发生额是否为负数以及余额是否为负数。
7.根据权利要求6所述的方法,其特征在于,所述中间信息表包括以下至少一项:
小区信息表、楼栋信息表、单元信息表、房屋信息表以及业主信息表。
8.一种数据迁移装置,其特征在于,包括:
源表获取模块,用于获取根据历史数据生成的多个源表,其中,所述源表中包括多个标准统计指标,以及各标准统计指标对应的源表数据;
标准核验结果获取模块,用于根据各源表获取多个核验指标分别对应的标准核验结果;
目标核验结果获取模块,用于根据各源表生成实账户明细表和多个中间信息表,并根据实账户明细表和多个中间信息表,获取多个核验指标分别对应的目标核验结果;
核验结果比对模块,用于将各核验指标对应的目标核验结果分别与标准核验结果进行比对,如果确定比对成功,则将实账户明细表和多个中间信息表进行本地存储。
9.根据权利要求8所述的装置,其特征在于,所述目标核验结果获取模块,包括:
统计指标获取单元,用于在各标准统计指标中,分别获取与实账户明细表对应的明细统计指标,以及各中间信息表对应的信息统计指标匹配的目标标准统计指标;
数据表生成单元,用于根据目标标准统计指标以及所述目标标准统计指标对应的源表数据,生成实账户明细表和多个中间信息表。
10.根据权利要求8所述的装置,其特征在于,所述装置,还包括:
上级表生成单元,用于根据实账户明细表生成分户表,根据多个中间信息表生成多个上级信息表。
11.根据权利要求10所述的装置,其特征在于,所述装置,还包括:
数据脱敏模块,用于对实账户明细表、各中间信息表、分户表以及各上级信息表中,与客户信息相关的数据进行脱敏处理。
12.根据权利要求10所述的装置,其特征在于,所述装置,还包括:
数据修改模块,用于响应于用户在人机交互界面发出的数据修改指令,和/或响应于数据库中的修改数据指令,对实账户明细表、各中间信息表、分户表或者各上级信息表中的至少一项数据进行修改。
13.根据权利要求8-12任一项所述的装置,其特征在于,所述核验指标包括以下至少一项:
交易明细总数、小区总数、楼栋总数、单元总数、房屋总数、总发生额、小区总账、楼栋总账、单元总账、房屋总账、发生额是否为负数以及余额是否为负数。
14.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1-7中任一所述的数据迁移方法。
15.一种包含计算机可执行指令的存储介质,其特征在于,所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-7中任一所述的数据迁移方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010986066.8A CN112199371A (zh) | 2020-09-18 | 2020-09-18 | 一种数据迁移方法、装置、计算机设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010986066.8A CN112199371A (zh) | 2020-09-18 | 2020-09-18 | 一种数据迁移方法、装置、计算机设备和存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112199371A true CN112199371A (zh) | 2021-01-08 |
Family
ID=74015498
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010986066.8A Pending CN112199371A (zh) | 2020-09-18 | 2020-09-18 | 一种数据迁移方法、装置、计算机设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112199371A (zh) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040122865A1 (en) * | 2001-05-30 | 2004-06-24 | Martin Stahl | Method, system, and computer program for migrating content from source database to target database |
JP2012141847A (ja) * | 2011-01-04 | 2012-07-26 | Hitachi Solutions Ltd | データ移行システム、データ移行装置、及びデータ移行方法 |
CN108363751A (zh) * | 2018-01-29 | 2018-08-03 | 武汉迎风聚智科技有限公司 | 一种住房公积金业务系统的检测方法及系统 |
CN108961026A (zh) * | 2018-07-04 | 2018-12-07 | 中国建设银行股份有限公司 | 账务核算处理方法、装置及电子设备 |
-
2020
- 2020-09-18 CN CN202010986066.8A patent/CN112199371A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040122865A1 (en) * | 2001-05-30 | 2004-06-24 | Martin Stahl | Method, system, and computer program for migrating content from source database to target database |
JP2012141847A (ja) * | 2011-01-04 | 2012-07-26 | Hitachi Solutions Ltd | データ移行システム、データ移行装置、及びデータ移行方法 |
CN108363751A (zh) * | 2018-01-29 | 2018-08-03 | 武汉迎风聚智科技有限公司 | 一种住房公积金业务系统的检测方法及系统 |
CN108961026A (zh) * | 2018-07-04 | 2018-12-07 | 中国建设银行股份有限公司 | 账务核算处理方法、装置及电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112650762B (zh) | 数据质量监控的方法、装置、电子设备以及存储介质 | |
CN107798038B (zh) | 数据响应方法及数据响应设备 | |
CN111553656A (zh) | 基于大数据的资金结算方法、装置、电子设备和介质 | |
CN111858608A (zh) | 一种数据管理方法、装置、服务器和存储介质 | |
CN111078695B (zh) | 计算企业内元数据关联关系的方法及装置 | |
CN111680108A (zh) | 一种数据存储方法、装置及一种数据获取方法、装置 | |
CN108446989B (zh) | 手续费确定方法及终端设备 | |
CN113642300A (zh) | 一种报表生成方法、装置、电子设备及计算机可读介质 | |
CN108376320A (zh) | 履职数据管理方法及装置 | |
CN111047434A (zh) | 一种操作记录生成方法、装置、计算机设备和存储介质 | |
CA3060692A1 (en) | Behaviour recognition method and apparatus, electronic device and storage medium | |
CN114328452A (zh) | 数据稽核方法、装置、平台、电子设备及存储介质 | |
CN116957813B (zh) | 风控策略测试方法、装置、电子设备及可读存储介质 | |
CN114048136A (zh) | 测试类型确定方法、装置、服务器、介质及产品 | |
CN109344050B (zh) | 一种基于结构树的接口参数分析方法及装置 | |
CN112199371A (zh) | 一种数据迁移方法、装置、计算机设备和存储介质 | |
CN116955148A (zh) | 业务系统测试方法、装置、设备、存储介质及产品 | |
CN114860759A (zh) | 一种数据处理方法、装置、设备及可读存储介质 | |
CN115033456A (zh) | 一种内网前端性能监控方法、装置、计算机设备及存储介质 | |
CN110851446B (zh) | 数据表的生成方法、装置、计算机设备及存储介质 | |
CN113743791A (zh) | 一种业务工单的业务考评方法、装置、电子设备和介质 | |
CN114139621A (zh) | 确定模型分类性能标识的方法、装置、设备及存储介质 | |
CN113626438A (zh) | 一种数据表管理的方法、装置、计算机设备及存储介质 | |
CN111222739A (zh) | 核电站的任务分配方法及核电站的任务分配系统 | |
CN116720300B (zh) | 一种排水管网模型系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |