CN116383177A - 一种数据的版本变化记录方法及装置 - Google Patents
一种数据的版本变化记录方法及装置 Download PDFInfo
- Publication number
- CN116383177A CN116383177A CN202310359615.2A CN202310359615A CN116383177A CN 116383177 A CN116383177 A CN 116383177A CN 202310359615 A CN202310359615 A CN 202310359615A CN 116383177 A CN116383177 A CN 116383177A
- Authority
- CN
- China
- Prior art keywords
- data
- version
- information
- version information
- data unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 49
- 238000004590 computer program Methods 0.000 description 5
- 238000004140 cleaning Methods 0.000 description 3
- 238000013480 data collection Methods 0.000 description 3
- 238000013523 data management Methods 0.000 description 3
- 238000011161 development Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000005457 optimization Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 238000010276 construction Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000001105 regulatory effect Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000013439 planning Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/219—Managing data history or versioning
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
- Optical Recording Or Reproduction (AREA)
Abstract
本发明提供一种数据的版本变化记录方法及装置,其中,数据的版本变化记录方法包括:当存在表的数据变化时,获取表版本信息;所述表版本信息包括版本号;根据所述表版本信息以及数据单元信息,生成数据版本信息;其中,所述数据单元信息包括多个表之间的关联信息,多个所述表根据所述关联信息形成数据单元,所述数据版本信息包括多个所述表版本信息;以及根据所述数据版本信息中最大的所述版本号对应的所述表版本信息,生成数据单元版本;其中,所述数据单元版本用于表示所述数据单元的数据变化。本发明可以解决数据的变更历史情况难以掌握的问题。
Description
技术领域
本发明涉及数据处理技术领域,特别涉及一种数据的版本变化记录方法及装置。
背景技术
计算机的普及带来了市场监管信息化的飞速发展,从而使得电子数据变得非常的普遍。随着数据量的不断增大,数据所包含的维度也越来越复杂,数据如有变更,只能看到最新状态的数据,但变更历史情况很难掌握。即使进行了数据备份,也只能获取到备份点上的数据情况,无法掌握数据的历史变化情况,则无法全面的对数据的变化情况进行分析。
发明内容
为了解决上述技术问题,提出了本发明。本发明的实施例提供了一种数据的版本变化记录方法及装置,可以解决数据的变更历史情况难以掌握的问题。
根据本发明的一个方面,提供了一种数据的版本变化记录方法,包括当存在表的数据变化时,获取表版本信息;所述表版本信息包括版本号;根据所述表版本信息以及数据单元信息,生成数据版本信息;其中,所述数据单元信息包括多个表之间的关联信息,多个所述表根据所述关联信息形成数据单元,所述数据版本信息包括多个所述表版本信息;以及根据所述数据版本信息中最大的所述版本号对应的所述表版本信息,生成数据单元版本;其中,所述数据单元版本用于表示所述数据单元的数据变化。
在一实施例中,所述根据所述数据版本信息中最大的所述版本号对应的所述表版本信息,生成数据单元版本还包括:按照预设间隔时间,根据所述数据版本信息中最大的所述版本号对应的所述表版本信息,生成所述数据单元版本。
在一实施例中,所述当存在表的数据变化时,获取表版本信息包括:当所述表的数据被增加或删除或修改时,调用接口,形成所述表版本信息;或当所述表的数据被增加或删除或修改时,通过触发器形成所述表版本信息。
在一实施例中,所述数据的版本变化记录方法还包括:获取单表数据查询指令;以及根据所述单表数据查询指令,调用所述表版本信息。
在一实施例中,所述数据的版本变化记录方法还包括:获取数据单元查询指令;以及根据所述数据单元查询指令,调用所述数据单元版本。
在一实施例中,在所述根据所述表版本信息以及数据单元信息,生成数据版本信息之前,所述数据的版本变化记录方法还包括:根据表与表之间的关联信息以及业务需求,将多个表组成数据单元;其中,所述根据所述表版本信息以及数据单元信息,生成数据版本信息包括:根据所述表版本信息,获取发生第一数据变化的所述表对应的所述数据单元;获取所述数据单元内存在数据变化的所有所述表的所有所述表版本信息;根据所有所述表版本信息,生成所述数据版本信息。
在一实施例中,所述当存在表的数据变化时,获取表版本信息包括:当所述表的数据被增加或删除或修改时,获取所述表版本信息;其中,所述表版本信息表示记录所述数据被增加或删除或修改的信息;其中,所述根据所述表版本信息以及数据单元信息,生成数据版本信息包括:根据所述表版本信息对应的所述表的表名,在所述数据单元信息中查询所述表存在关联信息的其他表;根据所述表以及存在关联信息的其他表,生成所述数据版本信息。
在一实施例中,在所述当存在表的数据变化时,获取表版本信息之前,所述数据的版本变化记录方法还包括:当存在单条数据发生增加或删除或修改时,记录所述单条数据的变化信息;定位存储发生增加或删除或修改的所述单条数据的所述表;将所述变化信息写入所述表的所述表版本信息中。
在一实施例中,所述数据的版本变化记录方法还包括:获取所述表的初始表版本信息以及初始数据单元版本;在所述根据所述数据版本信息中最大的所述版本号对应的所述表版本信息,生成数据单元版本之后,所述数据的版本变化记录方法还包括:根据所述表的初始表版本信息以及所述表版本信息,获取所述表的表增量信息;以及根据所述初始数据单元版本以及所述数据单元版本,获取数据版本增量信息。
根据本发明的另一个方面,提供了一种数据的版本变化记录装置,包括:获取模块,用于当存在表的数据变化时,获取表版本信息;所述表版本信息包括版本号;第一生成模块,用于根据所述表版本信息以及数据单元信息,生成数据版本信息;其中,所述数据单元信息包括多个表之间的关联信息,多个所述表根据所述关联信息形成数据单元,所述数据版本信息包括多个所述表版本信息;以及第二生成模块,用于根据所述数据版本信息中最大的所述版本号对应的所述表版本信息,生成数据单元版本;其中,所述数据单元版本用于表示所述数据单元的数据变化。
本发明实施例提供了一种数据的版本变化记录方法及装置,通过抽取表信息,生成数据单元版本,不仅可以记录每一个表的历史版本,还可以查看整个数据单元的大版本变化,通过单表、数据单元清晰记录数据版本,提供清晰的数据变化历史,追溯数据历史版本,追溯数据结构的变化情况,为存储优化提供依据,也可为后续的数据归集清洗提供依据。
附图说明
通过结合附图对本发明实施例进行更详细的描述,本发明的上述以及其他目的、特征和优势将变得更加明显。附图用来提供对本发明实施例的进一步理解,并且构成说明书的一部分,与本发明实施例一起用于解释本发明,并不构成对本发明的限制。在附图中,相同的参考标号通常代表相同部件或步骤。
图1是本发明一示例性实施例提供的数据的版本变化记录方法的流程示意图。
图2是本发明一示例性实施例提供的数据的版本变化记录装置的结构示意图。
具体实施方式
下面,将参考附图详细地描述根据本发明的示例实施例。显然,所描述的实施例仅仅是本发明的一部分实施例,而不是本发明的全部实施例,应理解,本发明不受这里描述的示例实施例的限制。
申请概述
计算机的普及带来了市场监管信息化的飞速发展,从而使得电子数据变得非常的普遍。随着数据量的不断增大,数据所包含的维度也越来越复杂,数据如有变更,只能看到最新状态的数据,但变更历史情况很难掌握。即使进行了数据备份,也只能获取到备份点上的数据情况,无法对数据的变化情况掌握及分析。目前我国信息化建设处于快速发展阶段,规模不断扩大,各环节流通的数据体量攀升非常快,数据整合也非常频繁,如果每类数据能说明其历史变更情况,可极大的提高提供数据的可靠性。
因此,本申请提供一种数据的版本变化记录方法及装置,通过抽取表信息,生成数据单元版本,不仅可以记录每一个表的历史版本,还可以查看整个数据单元的大版本变化,通过单表、数据单元清晰记录数据版本,提供清晰的数据变化历史,追溯数据历史版本,追溯数据结构的变化情况,为存储优化提供依据,也可为后续的数据归集清洗提供依据。
示例性方法
图1是本发明一示例性实施例提供的数据的版本变化记录方法的流程示意图,如图1所示,数据的版本变化记录方法包括
步骤100:当存在表的数据变化时,获取表版本信息。
表版本信息包括版本号。
表版本信息表示当表的数据发生变化,例如增加、删除、修改时,根据数据的变化信息,生成一个类似于日志的表版本信息。表版本信息中记录了单个表的数据变化情况,以及数据变化后的版本号。根据表版本信息可以获知对应表的数据变化情况,以及获取发生数据变化的表的版本号。版本号可以按照常规版本号设置方法设置。每一次单表发生变化时,均会产生一个对应的表版本信息。
步骤200:根据表版本信息以及数据单元信息,生成数据版本信息。
其中,数据单元信息包括多个表之间的关联信息,多个表根据关联信息形成数据单元,数据版本信息包括多个表版本信息。
根据表与表之间的关联关系以及业务实际情况,配置数据单元,以数据单元的配置,将关系数据进行固化,以在数据发生变化时,形成数据版本信息。将多个表组成一个小单元,称之为数据单元。例如,企业与人员的组成关系,一般是人员里有字段属于哪一个企业,两个字段之间相互关联,一个是企业表,一个是人员表,人员属于哪一个企业,则相当于这两个表之间的对应关系。
而数据版本信息,则是汇集了这个数据单元中的多个表版本信息,并且记录了表与表之间的关联信息。即,每个数据版本信息对应一个数据单元,该数据单元中包括多个具有关联关系的表,这些表之间根据关联信息组成数据单元,当该数据单元中有表发生数据变化时,会生成表版本信息,数据版本信息集成了这个数据单元中的所有表版本信息,即记录所有表的版本变化情况。按照数据单元配置,可以追溯数据结构的变化情况。
当表与表之间组成数据单元后,一个表内的数据发生变化,在记录数据版本信息时是按照整体的单元作为一个版本进行记录。例如,若是企业信息没有发生变化,但是人员信息发生了变化,也会认定这个数据单元发生数据变化,产生了新的版本。
步骤300:根据数据版本信息中最大的版本号对应的表版本信息,生成数据单元版本。
其中,数据单元版本用于表示数据单元的数据变化。
数据单元版本可以表示该数据单元对应的版本号,数据版本信息中集成了整个数据单元的数据变化,而在这个数据单元上,根据表与表之间的关系,可以追溯所有表对应的表版本信息。从数据版本信息中集成的所有表版本信息里,找到最大版本号,以该最大版本号形成最终的代表性数据单元版本。最大版本号可以理解为最新版本号。即,生成数据版本信息时不随时生成数据单元版本,而是定时从大量表版本信息中抽取特定的记录,生成整体数据单元的数据单元版本,用于记录该数据单元的变化情况。若是数据单元中每一个小表发生变化,都重新记录为数据单元版本,则会与表版本信息重复,因此,可以定时抽取数据版本信息中最大版本号生成数据单元版本,不仅可以清析的查看数据修改的记录,并以符合业务的形式进行展示,帮助数据管理部门追溯数据,合理规划存储,而且可以降低存储量,提高系统性能。例如,企业信息包括企业表和企业人员表,不仅记录企业表的变化、企业人员表的变化,还可以记录企业信息这个数据单元发生的变化,工作人员可以快速了解企业信息的变化、企业表的具体变化和企业人员表的具体变化,并且可以根据实际需求选择性追溯单表或数据单元的数据变化情况。
通过构建单表、数据单元的形式,不仅可以清晰记录每一个表中数据变化的情况,而且可以根据表与表之间的关联关系,将关系数据进行固化,抽出特定版本号,形成数据单元版本号,记录每一个数据单元的变化情况,从单表变化、数据单元变化双重维度对数据版本进行追溯查看,并且数据结构化更加便于查询和整理。
在一实施例中,上述步骤300还可以包括:按照预设间隔时间,根据数据版本信息中最大的版本号对应的表版本信息,生成数据单元版本。
例如,预设间隔时间为一天,在每一天特定时间点抽取当前表版本信息中最大的版本号,也即最新的版本号,以该版本号作为当前数据单元的版本号。抽取特定版本号生成数据单元的版本号,即数据单元版本,可以避免数据单元版本和单表的版本号大量重复记录,减少冗余数据。因此,设置预设间隔时间抽取版本号,不仅可以清析的查看数据修改的记录,并以符合业务的形式进行展示,帮助数据管理部门追溯数据,合理规划存储,而且可以降低存储量,提高系统性能。
在一实施例中,上述步骤100可以包括:当表的数据被增加或删除或修改时,调用接口,形成表版本信息;或当表的数据被增加或删除或修改时,通过触发器形成表版本信息。
基本功能开发,当增、删、改表内数据时,可以调用接口,形成基于单表的表版本信息。或者,触发器用于ETL抽取及数据库直接操作时,当数据进行修改时,通过触发器形成基于单表的表版本信息。通过触发器还可以判断是否已在接口中进行了版本记录。例如,在对性能要求较高时,可以选择采用接口记录表版本信息的方式,进行数据处理。
在一实施例中,数据的版本变化记录方法还可以包括:获取单表数据查询指令;以及根据单表数据查询指令,调用表版本信息。
如需要查看单表的数据变化情况,则可以直接根据单表数据查询指令,查询单表版本,在单表数据维度,对数据版本信息进行追溯查看。
在一实施例中,数据的版本变化记录方法还可以包括:获取数据单元查询指令;以及根据数据单元查询指令,调用数据单元版本。
如需要查看该数据单元的整体数据变化情况,则可以输入数据单元查询指令,根据数据单元查询指令,调用数据单元维度的版本数据进行查看,基于数据单元的构建形式,可以将关系数据进行固化,从而增加大维度的数据监控方式,对于数据管理和数据查询而言更加便捷。
在一实施例中,在上述步骤200之前,数据的版本变化记录方法还可以包括:根据表与表之间的关联信息以及业务需求,将多个表组成数据单元;其中,上述步骤200可以包括:根据表版本信息,获取发生第一数据变化的表对应的数据单元;获取数据单元内存在数据变化的所有表的所有表版本信息;根据所有表版本信息,生成数据版本信息。
根据表与表之间的关联关系以及业务实际情况,配置数据单元,以数据单元的配置,将关系数据进行固化,以在数据发生变化时,形成数据版本信息。将多个表组成一个小单元,称之为数据单元。例如,企业与人员的组成关系,形成企业信息,一般是人员里有字段属于哪一个企业,两个字段之间相互关联,一个是企业表,一个是人员表,人员属于哪一个企业,则相当于这两个表之间的对应关系,因此,企业信息可以称之为数据单元,企业表和人员表则是该数据单元中的两个具有关联信息的单表。而数据版本信息,则是汇集了这个数据单元中的多个表版本信息,并且记录了表与表之间的关联信息。即,每个数据版本信息对应一个数据单元,该数据单元中包括多个具有关联关系的表,这些表之间根据关联信息组成数据单元,当该数据单元中有表发生数据变化时,会生成表版本信息,数据版本信息集成了这个数据单元中的所有表版本信息,即记录所有表的版本变化情况。按照数据单元配置,可以追溯数据结构的变化情况。
在一实施例中,上述步骤100可以包括:当表的数据被增加或删除或修改时,获取表版本信息;其中,表版本信息表示记录数据被增加或删除或修改的信息;其中,上述步骤200可以包括:根据表版本信息对应的表的表名,在数据单元信息中查询表存在关联信息的其他表;根据表以及存在关联信息的其他表,生成数据版本信息。
由于数据单元是由具有关联信息的多个表组合而成,即数据单元中的单表与单表之间均存在某种对应的关联关系,当其中一个表的数据被增加或删除或修改时,获取该表的表版本信息,但表版本信息是在单表的维度,对一个单表进行数据变化记录。在数据单元的维度,则需要根据该数据被增加或删除或修改的表的表名,在数据单元中查询与其存在关联信息的其他表,集成所有表的表版本信息,成为数据版本信息,数据版本信息可以反应整个数据单元的数据变化情况。
在一实施例中,在上述步骤100之前,数据的版本变化记录方法还可以包括:当存在单条数据发生增加或删除或修改时,记录单条数据的变化信息;定位存储发生增加或删除或修改的单条数据的表;将变化信息写入表的表版本信息中。
当单条数据发生增加或删除或修改时,可以根据发生数据变化的单条数据,反向查找对应的表,将单条数据的变化信息写入表的表版本信息中。例如,周期性生成表版本信息,在周期内所有单条数据的变化情况均写入同一个表版本信息中,而从表版本信息中,可以清楚查找每一个单条数据的变化记录。增加多一维度追溯数据版本信息,即单条数据、单表、数据单元,进一步构建多元化数据结构。
在一实施例中,数据的版本变化记录方法还可以包括:获取表的初始表版本信息以及初始数据单元版本;在上述步骤300之后,数据的版本变化记录方法还可以包括:根据表的初始表版本信息以及表版本信息,获取表的表增量信息;以及根据初始数据单元版本以及数据单元版本,获取数据版本增量信息。
记录表的初始版本信息和数据单元的初始数据单元版本,用于对比后续发生变化后的表的版本号和数据单元版本,可实时生成数据版本增量信息,用于直观了解版本的更新变化情况。
示例性装置
图2是本发明一示例性实施例提供的数据的版本变化记录装置的结构示意图,如图2所示,数据的版本变化记录装置8包括:获取模块81,用于当存在表的数据变化时,获取表版本信息;表版本信息包括版本号;第一生成模块82,用于根据表版本信息以及数据单元信息,生成数据版本信息;其中,数据单元信息包括多个表之间的关联信息,多个表根据关联信息形成数据单元,数据版本信息包括多个表版本信息;以及第二生成模块83,用于根据数据版本信息中最大的版本号对应的表版本信息,生成数据单元版本;其中,数据单元版本用于表示数据单元的数据变化。
本发明实施例提供了一种数据的版本变化记录装置,通过抽取表信息,生成数据单元版本,不仅可以记录每一个表的历史版本,还可以查看整个数据单元的大版本变化,通过单表、数据单元清晰记录数据版本,提供清晰的数据变化历史,追溯数据历史版本,追溯数据结构的变化情况,为存储优化提供依据,也可为后续的数据归集清洗提供依据。
在一实施例中,上述第二生成模块83还可以配置为:按照预设间隔时间,根据数据版本信息中最大的版本号对应的表版本信息,生成数据单元版本。
在一实施例中,上述获取模块81可以配置为:当表的数据被增加或删除或修改时,调用接口,形成表版本信息;或当表的数据被增加或删除或修改时,通过触发器形成表版本信息。
在一实施例中,上述数据的版本变化记录装置8还可以配置为:获取单表数据查询指令;以及根据单表数据查询指令,调用表版本信息。
在一实施例中,上述数据的版本变化记录装置8还可以配置为:获取数据单元查询指令;以及根据数据单元查询指令,调用数据单元版本。
在一实施例中,上述数据的版本变化记录装置8还可以配置为:根据表与表之间的关联信息以及业务需求,将多个表组成数据单元;其中,上述第一生成模块82可以对应配置为:根据表版本信息,获取发生第一数据变化的表对应的数据单元;获取数据单元内存在数据变化的所有表的所有表版本信息;根据所有表版本信息,生成数据版本信息。
在一实施例中,上述获取模块81可以配置为:当表的数据被增加或删除或修改时,获取表版本信息;其中,表版本信息表示记录数据被增加或删除或修改的信息;其中,上述第一生成模块82可以对应配置为:根据表版本信息对应的表的表名,在数据单元信息中查询表存在关联信息的其他表;根据表以及存在关联信息的其他表,生成数据版本信息。
在一实施例中,上述数据的版本变化记录装置8还可以配置为:当存在单条数据发生增加或删除或修改时,记录单条数据的变化信息;定位存储发生增加或删除或修改的单条数据的表;将变化信息写入表的表版本信息中。
在一实施例中,上述数据的版本变化记录装置8还可以配置为:获取表的初始表版本信息以及初始数据单元版本;根据表的初始表版本信息以及表版本信息,获取表的表增量信息;以及根据初始数据单元版本以及数据单元版本,获取数据版本增量信息。
本发明实施例提供了一种数据的版本变化记录装置。装置实施例可以通过软件实现,也可以通过硬件或者软硬件结合的方式实现。从硬件层面而言,除了CPU、内存、网络接口、以及非易失性存储器之外,实施例中装置所在的设备通常还可以包括其他硬件,如负责处理报文的转发芯片等等。以软件实现为例,作为一个逻辑意义上的装置,是通过其所在设备的CPU将非易失性存储器中对应的计算机程序指令读取到内存中运行形成的。
根据本发明的另一个方面,提供了一种计算机可读存储介质,存储介质存储有计算机程序,计算机程序用于执行上述任一实施例的数据的版本变化记录方法。
除了上述方法和设备以外,本发明的实施例还可以是计算机程序产品,其包括计算机程序指令,所述计算机程序指令在被处理器运行时使得所述处理器执行本说明书上述“示例性方法”部分中描述的根据本发明各种实施例的数据的版本变化记录方法中的步骤。
根据本发明的另一个方面,提供了一种电子设备,电子设备包括:处理器;用于存储处理器可执行指令的存储器;处理器,用于执行上述任一实施例的数据的版本变化记录方法。
此外,本发明的实施例还可以是计算机可读存储介质,其上存储有计算机程序指令,所述计算机程序指令在被处理器运行时使得所述处理器执行本说明书上述“示例性方法”部分中描述的根据本发明各种实施例的数据的版本变化记录方法中的步骤。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明保护的范围之内。
Claims (10)
1.一种数据的版本变化记录方法,其特征在于,包括:
当存在表的数据变化时,获取表版本信息;所述表版本信息包括版本号;
根据所述表版本信息以及数据单元信息,生成数据版本信息;其中,所述数据单元信息包括多个表之间的关联信息,多个所述表根据所述关联信息形成数据单元,所述数据版本信息包括多个所述表版本信息;以及
根据所述数据版本信息中最大的所述版本号对应的所述表版本信息,生成数据单元版本;其中,所述数据单元版本用于表示所述数据单元的数据变化。
2.根据权利要求1所述的数据的版本变化记录方法,其特征在于,所述根据所述数据版本信息中最大的所述版本号对应的所述表版本信息,生成数据单元版本还包括:
按照预设间隔时间,根据所述数据版本信息中最大的所述版本号对应的所述表版本信息,生成所述数据单元版本。
3.根据权利要求1所述的数据的版本变化记录方法,其特征在于,所述当存在表的数据变化时,获取表版本信息包括:
当所述表的数据被增加或删除或修改时,调用接口,形成所述表版本信息;或
当所述表的数据被增加或删除或修改时,通过触发器形成所述表版本信息。
4.根据权利要求1所述的数据的版本变化记录方法,其特征在于,所述数据的版本变化记录方法还包括:
获取单表数据查询指令;以及
根据所述单表数据查询指令,调用所述表版本信息。
5.根据权利要求1所述的数据的版本变化记录方法,其特征在于,所述数据的版本变化记录方法还包括:
获取数据单元查询指令;以及
根据所述数据单元查询指令,调用所述数据单元版本。
6.根据权利要求1所述的数据的版本变化记录方法,其特征在于,在所述根据所述表版本信息以及数据单元信息,生成数据版本信息之前,所述数据的版本变化记录方法还包括:
根据表与表之间的关联信息以及业务需求,将多个表组成数据单元;
其中,所述根据所述表版本信息以及数据单元信息,生成数据版本信息包括:
根据所述表版本信息,获取发生第一数据变化的所述表对应的所述数据单元;
获取所述数据单元内存在数据变化的所有所述表的所有所述表版本信息;
根据所有所述表版本信息,生成所述数据版本信息。
7.根据权利要求1所述的数据的版本变化记录方法,其特征在于,所述当存在表的数据变化时,获取表版本信息包括:
当所述表的数据被增加或删除或修改时,获取所述表版本信息;其中,所述表版本信息表示记录所述数据被增加或删除或修改的信息;
其中,所述根据所述表版本信息以及数据单元信息,生成数据版本信息包括:
根据所述表版本信息对应的所述表的表名,在所述数据单元信息中查询所述表存在关联信息的其他表;
根据所述表以及存在关联信息的其他表,生成所述数据版本信息。
8.根据权利要求1所述的数据的版本变化记录方法,其特征在于,在所述当存在表的数据变化时,获取表版本信息之前,所述数据的版本变化记录方法还包括:
当存在单条数据发生增加或删除或修改时,记录所述单条数据的变化信息;
定位存储发生增加或删除或修改的所述单条数据的所述表;
将所述变化信息写入所述表的所述表版本信息中。
9.根据权利要求1所述的数据的版本变化记录方法,其特征在于,所述数据的版本变化记录方法还包括:
获取所述表的初始表版本信息以及初始数据单元版本;
在所述根据所述数据版本信息中最大的所述版本号对应的所述表版本信息,生成数据单元版本之后,所述数据的版本变化记录方法还包括:
根据所述表的初始表版本信息以及所述表版本信息,获取所述表的表增量信息;以及
根据所述初始数据单元版本以及所述数据单元版本,获取数据版本增量信息。
10.一种数据的版本变化记录装置,其特征在于,包括:
获取模块,用于当存在表的数据变化时,获取表版本信息;所述表版本信息包括版本号;
第一生成模块,用于根据所述表版本信息以及数据单元信息,生成数据版本信息;其中,所述数据单元信息包括多个表之间的关联信息,多个所述表根据所述关联信息形成数据单元,所述数据版本信息包括多个所述表版本信息;以及
第二生成模块,用于根据所述数据版本信息中最大的所述版本号对应的所述表版本信息,生成数据单元版本;其中,所述数据单元版本用于表示所述数据单元的数据变化。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310359615.2A CN116383177A (zh) | 2023-04-03 | 2023-04-03 | 一种数据的版本变化记录方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310359615.2A CN116383177A (zh) | 2023-04-03 | 2023-04-03 | 一种数据的版本变化记录方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116383177A true CN116383177A (zh) | 2023-07-04 |
Family
ID=86970628
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310359615.2A Pending CN116383177A (zh) | 2023-04-03 | 2023-04-03 | 一种数据的版本变化记录方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116383177A (zh) |
-
2023
- 2023-04-03 CN CN202310359615.2A patent/CN116383177A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7401321B2 (en) | Method and apparatus for processing information on software defects during computer software development | |
US11868373B2 (en) | Method and apparatus for monitoring an in-memory computer system | |
CN102323945B (zh) | 一种基于sql的数据库管理方法和装置 | |
US8024305B2 (en) | Updating a data warehouse schema based on changes in an observation model | |
US8280907B2 (en) | System and method for managing access to data in a database | |
CN102142024B (zh) | 在分布式数据库中使用递增捕捉来进行逻辑数据备份和回退 | |
EP2270692A1 (en) | Lifecycle-based horizontal partitioning | |
US20110125705A1 (en) | Auto-generation of code for performing a transform in an extract, transform, and load process | |
CN104375928A (zh) | 异常日志管理方法及系统 | |
CN101127034A (zh) | 面向变化的电子表格应用 | |
CN112948504B (zh) | 数据采集方法、装置、计算机设备和存储介质 | |
CN111708895B (zh) | 一种知识图谱系统的构建方法及装置 | |
CN112416957A (zh) | 基于数据模型层的数据增量更新方法、装置及计算机设备 | |
CN106780157B (zh) | 基于Ceph的电网多时态模型存储与管理系统及方法 | |
CN113641651A (zh) | 一种业务数据管理方法、系统及计算机存储介质 | |
CN114238085A (zh) | 接口测试方法、装置、计算机设备、存储介质 | |
CN113177056A (zh) | 多数据库的业务数据一致性的检验方法、设备和存储介质 | |
CN111259082B (zh) | 大数据环境下实现全量数据同步的方法 | |
CN113010208A (zh) | 一种版本信息的生成方法、装置、设备及存储介质 | |
CN116521796A (zh) | 分布式数据库系统及数据读取方法、装置 | |
CN116383177A (zh) | 一种数据的版本变化记录方法及装置 | |
CN114356945A (zh) | 数据处理方法、装置、计算机设备和存储介质 | |
CN113407261A (zh) | 数据配置方法、装置和计算机设备 | |
CN114547173B (zh) | 一种数据仓库构建方法、装置、设备及计算机存储介质 | |
CN117555969A (zh) | 基于Hive的血缘信息管理方法、装置及计算机设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |