CN114860787A - 数据管理方法、装置、电子设备及可读存储介质 - Google Patents
数据管理方法、装置、电子设备及可读存储介质 Download PDFInfo
- Publication number
- CN114860787A CN114860787A CN202210325378.3A CN202210325378A CN114860787A CN 114860787 A CN114860787 A CN 114860787A CN 202210325378 A CN202210325378 A CN 202210325378A CN 114860787 A CN114860787 A CN 114860787A
- Authority
- CN
- China
- Prior art keywords
- record
- time
- data
- change
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2457—Query processing with adaptation to user needs
- G06F16/24573—Query processing with adaptation to user needs using data annotations, e.g. user-defined metadata
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2228—Indexing structures
- G06F16/2264—Multidimensional index structures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2228—Indexing structures
- G06F16/2272—Management thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2291—User-Defined Types; Storage management thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2458—Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
- G06F16/2474—Sequence data queries, e.g. querying versioned data
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Software Systems (AREA)
- Computational Linguistics (AREA)
- Probability & Statistics with Applications (AREA)
- Mathematical Physics (AREA)
- Fuzzy Systems (AREA)
- Library & Information Science (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请公开了一种数据管理方法、装置、电子设备及可读存储介质,应用于计算机技术领域。其中,方法包括预先为业务模型赋予包括对象标识信息、开始有效期时间和结束有效期时间的时间管理属性。当检测业务对象数据变更,获取目标业务对象的目标对象标识信息和变更时间信息;根据目标对象标识信息和变更时间信息生成新增变更记录;根据目标对象标识信息和变更时间信息,确定新增变更记录插入在目标业务对象的生命周期记录的目标位置;将新增变更记录插入至目标位置,同时基于变更时间信息更新新增变更记录或相邻记录的有效期时间,可使生命周期记录中的每一条数据记录的时间连续,有利于提高数据查询效率,便于业务决策。
Description
技术领域
本申请涉及计算机技术领域,特别是涉及一种数据管理方法、装置、电子设备及可读存储介质。
背景技术
在互联网大数据时代,运行在互联网上的软件系统时时刻刻都在产生大量数据,产生的数据会因为需求的变动而引起数据变动,从而导致旧数据被覆盖,被覆盖的数据无法追溯。而对于审计、档案管理、人力资源等业务领域,时间查询是使用频率非常高的需求,为了实现对数据时间的查询,相关技术会记录数据变更日志,人工定期进行数据过滤和解析,并把整理好的日志记录汇总提供给业务部门,业务部门根据变更记录,进行业务决策。
但是,日志信息记录,难以以产品的形式呈现,也无法表示完整的业务意义,例如,人力资源领域员工的部门变动,数据只会记录员工当前所在的最新的部门,变动之前的部门信息无法再查询,对于按部门计薪的业务,需要根据员工不同时段所在的部门计时发薪,由于员工数据变更的覆盖,历史信息无法查询,导致这类业务难以实现。进一步的,由于需要采用人工方式进行数据汇总,无法实时且高效地展示数据最新状态,业务决策难度大,并且方案可复用性低,效率低下。
鉴于此,如何提高数据查询效率,是所属领域技术人员需要解决的技术问题。
发明内容
本申请提供了一种数据管理方法、装置、电子设备及可读存储介质,可有效提高数据查询效率。
为解决上述技术问题,本发明实施例提供以下技术方案:
本发明实施例一方面提供了一种数据管理方法,包括:
预先为业务模型设置时间管理属性,所述时间管理属性包括对象标识信息、开始有效期时间和结束有效期时间;
当检测业务对象数据变更,获取目标业务对象的目标对象标识信息和变更时间信息;
根据所述目标对象标识信息和所述变更时间信息生成新增变更记录;
根据所述目标对象标识信息和所述变更时间信息,确定所述新增变更记录插入在所述目标业务对象的生命周期记录的目标位置;
将所述新增变更记录插入至所述目标位置,同时基于所述变更时间信息更新所述新增变更记录或相邻记录的有效期时间,以使所述生命周期记录中的每一条数据记录的时间连续。
可选的,所述根据所述目标对象标识信息和所述变更时间信息,确定所述新增变更记录插入在所述目标业务对象的生命周期记录的目标位置,包括:
根据所述目标对象标识信息,获取所述目标业务对象的生命周期记录;
获取所述生命周期记录的第一条数据记录和最后一条数据记录;
若所述变更时间信息中的开始有效时间小于等于所述第一条数据记录的开始有效时间重合,则所述目标位置为所述生命周期记录的头部;
若所述变更时间信息中的结束有效时间大于等于所述最后一条数据记录的结束有效时间重合,则所述目标位置为所述生命周期记录的尾部;
若所述变更时间信息中的开始有效时间大于所述第一条数据记录的开始有效时间,且所述变更时间信息中的结束有效时间小于所述最后一条数据记录的结束有效时间,则所述目标位置为所述头部与所述尾部之间。
可选的,所述将所述新增变更记录插入至所述目标位置,同时基于所述变更时间信息更新所述新增变更记录或相邻记录的有效期时间,包括:
所述目标位置为头部,则将所述新增变更记录插入所述生命周期的头部,且所述新增变更记录的结束有效期时间为所述第一条数据记录的开始有效期时间-1;
所述目标位置为尾部,则将所述新增变更记录插入所述生命周期的尾部,且更新所述最后一条数据记录的结束有效期时间为所述新增变更记录的开始有效期时间-1;
所述目标位置为所述头部与所述尾部之间,将所述新增变更记录插入至所述目标位置,同时基于所述变更时间信息更新所述新增变更记录的上一条记录的结束有效期时间。
可选的,所述基于所述变更时间信息更新所述新增变更记录或相邻记录的有效期时间之后,还包括:
当接收到数据查询指令,通过解析所述数据查询指令得到查询时间信息和/或待查询对象标识信息;所述查询时间信息为查询时间段或查询时间;
基于所述查询时间信息,获取所有业务对象相匹配的数据记录;
基于所述待查询对象标识信息,获取所述待查询对象标识信息对应的业务对象的生命周期时间轴数据;
基于所述查询时间信息和所述待查询对象标识信息,获取所述待查询对象标识信息对应的业务对象位于所述查询时间信息处的数据记录。
可选的,所述基于所述变更时间信息更新所述新增变更记录或相邻记录的有效期时间之后,还包括:
当接收到数据删除指令,通过解析所述数据删除指令得到删除时间信息和/或待删除对象标识信息;所述删除时间信息为删除时间段或删除时间;
基于所述删除时间信息,删除所有业务对象位于所述删除时间信息处的所有数据记录;
基于所述待删除对象标识信息,删除所述待删除对象标识信息对应的业务对象的生命周期时间轴数据;
基于所述删除时间信息和所述待删除对象标识信息,删除所述待删除对象标识信息对应的业务对象位于所述删除时间信息处的数据记录。
可选的,所述删除所有业务对象位于所述删除时间信息处的所有数据记录之前,还包括:
对每个业务对象,获取当前业务对象位于所述删除时间信息处的每一数据记录的相邻数据记录;
更新每一条相邻数据记录的有效期时间,以使所述生命周期记录中的每一条数据记录的时间连续。
本发明实施例另一方面提供了一种数据管理装置,包括:
属性赋予模块,用于预先为业务模型设置时间管理属性,所述时间管理属性包括对象标识信息、开始有效期时间和结束有效期时间;
信息获取模块,用于当检测业务对象数据变更,获取目标业务对象的目标对象标识信息和变更时间信息;
变更记录生成模块,用于根据所述目标对象标识信息和所述变更时间信息生成新增变更记录;
插入位置确定模块,用于根据所述目标对象标识信息和所述变更时间信息,确定所述新增变更记录插入在所述目标业务对象的生命周期记录的目标位置;
变更记录模块,用于将所述新增变更记录插入至所述目标位置,同时基于所述变更时间信息更新所述新增变更记录或相邻记录的有效期时间,以使所述生命周期记录中的每一条数据记录的时间连续。
可选的,所述插入位置确定模块进一步用于:根据所述目标对象标识信息,获取所述目标业务对象的生命周期记录;获取所述生命周期记录的第一条数据记录和最后一条数据记录;若所述变更时间信息中的开始有效时间小于等于所述第一条数据记录的开始有效时间重合,则所述目标位置为所述生命周期记录的头部;若所述变更时间信息中的结束有效时间大于等于所述最后一条数据记录的结束有效时间重合,则所述目标位置为所述生命周期记录的尾部;若所述变更时间信息中的开始有效时间大于所述第一条数据记录的开始有效时间,且所述变更时间信息中的结束有效时间小于所述最后一条数据记录的结束有效时间,则所述目标位置为所述头部与所述尾部之间。
本发明实施例还提供了一种电子设备,包括处理器,所述处理器用于执行存储器中存储的计算机程序时实现如前任一项所述数据管理方法的步骤。
本发明实施例最后还提供了一种可读存储介质,所述可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如前任一项所述数据管理方法的步骤。
本申请提供的技术方案的优点在于,通过预先为每个业务对象赋予对象标识信息、开始有效期时间和结束有效期时间,对于同一个业务对象来说,所有的数据记录都使用同一个对象标识信息进行标识,基于变更时间信息将其插入该业务对象整个生命周期记录的相位时间点位置,并记录数据对象每一次变更前后的状态,这样每一次的模型维度变更,都有时间有效期的记录,任意业务模型都可以实现时间轴逻辑,从而可记录业务对象完整的生命周期状态,不仅可保证对象数据的完整性,还可保证同一个数据变更记录时间是连续的,不会重合,可以在任意时间点追溯模型数据的状态,可实时且高效地展示数据最新状态,无需人工进行数据汇总,可有效提升数据查询效率,便于业务决策。
此外,本发明实施例还针对数据管理方法提供了相应的实现装置、电子设备及可读存储介质,进一步使得所述方法更具有实用性,所述装置、电子设备及可读存储介质具有相应的优点。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性的,并不能限制本公开。
附图说明
为了更清楚的说明本发明实施例或相关技术的技术方案,下面将对实施例或相关技术描述中所需要使用的附图作简单的介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种数据管理方法的流程示意图;
图2为本发明实施例提供的一种UML类图设计示意图;
图3为本发明实施例提供的一种示意性场景的全生命周期的时间轴示意图;
图4为本发明实施例提供的一种时间轴数据处理流程示意图;
图5为本发明实施例提供的一种数据查询方法的流程示意图;
图6为本发明实施例提供的一种数据删除方法的流程示意图;
图7为本发明实施例提供的数据管理装置的一种具体实施方式结构图;
图8为本发明实施例提供的电子设备的一种具体实施方式结构图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面结合附图和具体实施方式对本发明作进一步的详细说明。显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”“第四”等是用于区别不同的对象,而不是用于描述特定的顺序。此外术语“包括”和“具有”以及他们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可包括没有列出的步骤或单元。
在介绍了本发明实施例的技术方案后,下面详细的说明本申请的各种非限制性实施方式。
首先参见图1,图1为本发明实施例提供的一种数据管理方法的流程示意图,本发明实施例可包括以下内容:
S101:预先为业务模型设置时间管理属性。
其中,业务模型为表现业务数据的实体,对应数据库中的数据表。对每个业务模型具备的性质的描述可称为该业务模型的属性,为了实现时间轴上的数据管理,创建业务模型时需要对每个业务模型设置时间管理属性,时间管理属性对应的每个字段必须不能为空,时间管理属性可包括对象标识信息如对象ID(OID)、开始有效期时间(effectiveStartDate)和结束有效期时间(effectiveEndDate)。也就是说,对象ID、effectiveStartDate和effectiveEndDate不能为空。对象ID用来表示业务对象的唯一标识符。数据类型可以是任意,但是要保证唯一性,同一个业务对象,发生多次的数据状态变更记录,这些变更记录共享该业务对象ID,通过业务对象ID,把所有的变更记录汇总到一起,表示该对象的全部生命周期状态。开始有效期时间,表示本条数据记录的开始有效期时间,单位是天,例如:开始有效期时间2020-12-20。也就是说本条记录从2020-12-20号开始生效。结束有效期时间,表示本条数据记录的结束有效期时间单位是天,例如:结束有效期时间,2021-02-15,表示本条数据有效期截止到2021-02-15。每次业务对象数据发生变更,会创建一条物理的数据记录,同一个业务数据对象发生的变化记录,共享一个对象ID。为了保证同一个业务模型对应的业务对象的时间具有连续性,业务对象的每一笔数据记录的effectiveStartDate一定要满足等于上一条数据记录的effectiveEndDate+1的条件。以部门信息变更为例,不同时间部门负责人变迁记录,业务模型如下所示:
表1业务模型表
在具体实现中,请参阅图2所示,可UML类图实现,可定义TimeLine接口、TimeLineHandle接口和IdentifyFunction接口。TimeLine作为核心接口,其定义了三个关键字段,即effectiveStartDate,effectiveEndDate和OID。TimeLineHandle接口用于定义时间轴对象的处理,负责增删改查业务逻辑的实现。IdentifyFunction接口用于定义OID的生成规则,OID可以为任意的数据类型。为了标识具有时间轴的业务对象,数据库表的设计可按照下述方式实现:为所有的时间轴模型对象指定规范,便于沟通交流,时间轴模型表结构可按照_tl结尾,也即所有具备时间轴业属性的业务模型都以_tl结尾作为规范。只要满足该规范,则认定该表中一定存在三个表字段,也即effective_start_date,effective_end_date,oid字段命名规范要符合数据库标准。
S102:当检测业务对象数据变更,获取目标业务对象的目标对象标识信息和变更时间信息。
在本实施例中,业务对象数据变更包括在时间轴的任意一个时间点插入业务对象的新增数据记录,或者是对时间轴的某个时间点的数据记录进行变更。目标业务对象是指要进行数据记录新增或数据记录修改或数据记录删除的业务模型或者是业务对象,目标对象标识信息是用于标识目标业务对象,变更时间信息包括该条变更数据记录的开始有效期时间和结束有效期时间,开始有效期时间是必须在下发数据变更指令时指定的,结束有效期时间可采用默认值。
S103:根据目标对象标识信息和变更时间信息生成新增变更记录。
本实施例的新增变更记录在用户下发数据变更指令之后,基于数据变更指令携带的目标对象标识信息和开始有效期时间生成新增变更记录,该新增变更记录以目标对象标识信息进行标识,若数据变更指令无结束有效期时间,则新增变更记录中的结束有效期时间为默认值。
S104:根据目标对象标识信息和变更时间信息,确定新增变更记录插入在目标业务对象的生命周期记录的目标位置。
本实施例的目标对象标识信息用于定位业务模型,变更时间信息用于基于开始有效期时间在对应业务模型也即目标业务对象的生命周期记录所处的时间点,该时间点即为新增变更记录插入至生命周期记录的位置。
S105:将新增变更记录插入至目标位置,同时基于变更时间信息更新新增变更记录或相邻记录的有效期时间,以使生命周期记录中的每一条数据记录的时间连续。
在上个步骤确定新增变更记录位于目标业务对象的生命周期记录时间轴的位置之后,将其插入,从而实现支持在数据对象生命周期内,任意时间点插入一条新的数据记录。为了保证业务对象整个的生命周期,所有时间轴记录必须是连续性的,不会重合,需要基于变更时间信息更新新增变更记录或相邻记录的有效期时间。
在本实施例中,通过在数据模型上增加时间轴维度,记录模型完整的生命周期状态,每一次的模型维度变更,都有时间有效期的记录,所以可以在任意时间点追溯模型数据的状态,可永久查询。该任意时间点可为未来的某一时间点,尽管日志记录方式也可记录对象的变更状态,通过设置跟踪模型中所有的属性变化,每当属性值变化,产生一条日志记录,记录该属性值的前后变化值。但是,日志方案无法记录未来变化信息,只能记录当前态。以部门负责人的业务场景为例,当前部门D的负责人为A,一个月后D部门的负责人变更为B,但是在当前状态下,仍旧是A,因为数据还未发生变化,只有一个月后数据状态发生了变化,才会产生日志记录。如果采用本实施例所提供的技术方案,可以创建未来计划,生成一个新的部门信息,部门负责人为B,生效时间为下个月的某一天,时间轴模型完全以时间点驱动,不受其他因素约束,如图3所示。
在本发明实施例提供的技术方案中,通过预先为每个业务对象赋予对象标识信息、开始有效期时间和结束有效期时间,对于同一个业务对象来说,所有的数据记录都使用同一个对象标识信息进行标识,基于变更时间信息将其插入该业务对象整个生命周期记录的相位时间点位置,并记录数据对象每一次变更前后的状态,这样每一次的模型维度变更,都有时间有效期的记录,任意业务模型都可以实现时间轴逻辑,从而可记录业务对象完整的生命周期状态,不仅可保证对象数据的完整性,还可保证同一个数据变更记录时间是连续的,不会重合,可以在任意时间点追溯模型数据的状态,可实时且高效地展示数据最新状态,无需人工进行数据汇总,可有效提升数据查询效率,便于业务决策。
在上述实施例中,对于目标位置如何确定并不作任何限定,基于上述实施例,本申请还提供了根据目标对象标识信息和变更时间信息,确定新增变更记录插入在目标业务对象的生命周期记录的目标位置的一种可选的实施方式,如图4所示,可包括:
根据目标对象标识信息,获取目标业务对象的生命周期记录;
获取生命周期记录的第一条数据记录和最后一条数据记录;
若变更时间信息中的开始有效时间小于等于第一条数据记录的开始有效时间重合,则目标位置为生命周期记录的头部;
若变更时间信息中的结束有效时间大于等于最后一条数据记录的结束有效时间重合,则目标位置为生命周期记录的尾部;
若变更时间信息中的开始有效时间大于第一条数据记录的开始有效时间,且变更时间信息中的结束有效时间小于最后一条数据记录的结束有效时间,则目标位置为头部与尾部之间。
相应的,将新增变更记录插入至目标位置,同时基于变更时间信息更新新增变更记录或相邻记录的有效期时间,包括:
目标位置为头部,则将新增变更记录插入生命周期的头部,且新增变更记录的结束有效期时间为第一条数据记录的开始有效期时间-1;
目标位置为尾部,则将新增变更记录插入生命周期的尾部,且更新最后一条数据记录的结束有效期时间为新增变更记录的开始有效期时间-1;
目标位置为头部与尾部之间,将新增变更记录插入至目标位置,同时基于变更时间信息更新新增变更记录的上一条记录的结束有效期时间。
在本实施例中,可把业务对象时间轴的第一条数据定义为First,简称F;最后一条数据定义为Last,简称为L;中间的变化记录为Middle,简称M;新增的时间轴记录为New,简称N;时间轴数据的更新,必传字段effectiveStartDate,存在下述三种情况的操作:
若尾部新增一条变化记录N,修改数据L的effectiveEndDate,修改的值为N的effectiveStartDate-1天,即:effectiveEndDate=effectiveStartDate-1,插入的新记录effectiveEndDate=9999-12-31。
若头部新增一条变化记录,新增数据N的effectiveEndDate是数据F的effectiveStartDate-1。
若在生命周期的历史记录中插入一笔新的记录,首先按照时间条件查询,找到插入的时间点,查询条件可为effectiveStartDate小于N的effectiveStartDate,按照时间排序降序,取出第一笔数据Mn,新增的数据则插入到Mn的后面,把数据Mn的effectiveEndDate赋值给N的effectiveEndDate,并且修改Mn的effectiveEndDate值为N的effectiveStartDate-1。
为了进一步提升用户使用体验,基于上述实施例,本实施例还提供了数据查询方法,可包括下述内容:
当接收到数据查询指令,通过解析数据查询指令得到查询时间信息和/或待查询对象标识信息;查询时间信息为查询时间段或查询时间;基于查询时间信息,获取所有业务对象相匹配的数据记录;基于待查询对象标识信息,获取待查询对象标识信息对应的业务对象的生命周期时间轴数据;基于查询时间信息和待查询对象标识信息,获取待查询对象标识信息对应的业务对象位于查询时间信息处的数据记录。
在本实施例中,时间轴数据的查询通过开始有效期时间和结束有效期时间来实现,支持按天或者时间范围查询,假设查询条件范围是startDate、endDate,通过时间轴实现的查询条件为:[effectiveStartDate<=endDate and effectiveEndDate>=startDate],如果要查询某一天的时间轴数据,则startDate=endDate。如果指定时间范围,只查询该时间范围内的数据记录,如果不指定时间范围,指定OID表示查询该对象的全部数据记录。
为了进一步提升用户使用体验,基于上述实施例,本实施例还提供了数据删除方法,可包括下述内容:
当接收到数据删除指令,通过解析数据删除指令得到删除时间信息和/或待删除对象标识信息;删除时间信息为删除时间段或删除时间;基于删除时间信息,删除所有业务对象位于删除时间信息处的所有数据记录;基于待删除对象标识信息,删除待删除对象标识信息对应的业务对象的生命周期时间轴数据;基于删除时间信息和待删除对象标识信息,删除待删除对象标识信息对应的业务对象位于删除时间信息处的数据记录。
为了保证业务对象的生命周期记录的时间连续性,在删除所有业务对象位于删除时间信息处的所有数据记录之前,还可包括:
对每个业务对象,获取当前业务对象位于删除时间信息处的每一数据记录的相邻数据记录;更新每一条相邻数据记录的有效期时间,以使生命周期记录中的每一条数据记录的时间连续。
在本实施例中,删除生命周期记录的时间轴的某条数据记录,指定删除某一条时间记录Dn,需要查询删除记录的上一笔记录数据Dn-1,并且把Dn-1的effectiveEndDate值修改为数据Dn的effectiveEndDate,保证时间连续性。
为了使所属领域技术人员更加清楚本申请的数据查询技术方案,本申请还结合图5及图6提供了一个示意性例子中的数据查询方法,可包括下述内容:
用户在用户端选择新增变更记录对应的业务对象和变更时间信息,并将携带该业务对象和变更时间信息的数据变更指令发送给业务系统,业务系统检查该业务对象对应的时间轴日期的合法性,并将该数据变更指令发送给时间轴属性处理器,时间轴属性处理器基于该数据变更指令判断该数据变更记录在该业务对象的生命周期记录时间轴的插入位置,将该变更记录插入至时间轴的相应位置,并在数据库中查询该数据变更记录相邻时间的数据记录,时间轴属性处理器对该数据记录进行校验并更新该数据记录的有效期时间,然后将新增的数据记录和更新有效期时间的数据记录更新在数据库中,并向用户端反馈新增信息。
用户在用户端选择待查询业务对象和查询日期范围,并将携带该待查询业务对象和查询日期范围的数据查询指令发送给业务系统,业务系统检查待查询业务对象对应的时间轴日期的合法性,并将该数据查询指令发送给时间轴属性处理器,时间轴属性处理器基于该数据查询指令在数据库中查询相应的数据记录,并将该数据记录反馈至用户端。
用户在用户端选择待删除业务对象和删除日期范围,并将携带该待删除业务对象和删除日期范围的数据删除指令发送给业务系统,业务系统检查待删除业务对象对应的时间轴日期的合法性,并将该数据删除指令发送给时间轴属性处理器,时间轴属性处理器基于该数据删除指令在数据库中查询相应的数据记录以及待删除时间记录相邻的数据记录,删除待删除记录,并对相邻的数据记录的有效期时间进行更新,并将更新后的数据记录在数据库进行更新,同时向用户端反馈删除执行成功的行数。
由上可知,本实施例通过在数据模型上增加时间轴维度,记录模型完整的生命周期状态,每一次的模型维度变更,都有时间有效期的记录,所以可以在任意时间点追溯模型数据的状态,便于数据查询和数据删除,更加便于数据管理。
需要说明的是,本申请中各步骤之间没有严格的先后执行顺序,只要符合逻辑上的顺序,则这些步骤可以同时执行,也可按照某种预设顺序执行,图1、图4-6只是一种示意方式,并不代表只能是这样的执行顺序。
本发明实施例还针对数据管理方法提供了相应的装置,进一步使得方法更具有实用性。其中,装置可从功能模块的角度和硬件的角度分别说明。下面对本发明实施例提供的数据管理装置进行介绍,下文描述的数据管理装置与上文描述的数据管理方法可相互对应参照。
基于功能模块的角度,参见图7,图7为本发明实施例提供的数据管理装置在一种具体实施方式下的结构图,该装置可包括:
属性赋予模块701,用于预先为业务模型设置时间管理属性,时间管理属性包括对象标识信息、开始有效期时间和结束有效期时间;
信息获取模块702,用于当检测业务对象数据变更,获取目标业务对象的目标对象标识信息和变更时间信息;
变更记录生成模块703,用于根据目标对象标识信息和变更时间信息生成新增变更记录;
插入位置确定模块704,用于根据目标对象标识信息和变更时间信息,确定新增变更记录插入在目标业务对象的生命周期记录的目标位置;
变更记录模块705,用于将新增变更记录插入至目标位置,同时基于变更时间信息更新新增变更记录或相邻记录的有效期时间,以使生命周期记录中的每一条数据记录的时间连续。
可选的,在本实施例的一些实施方式中,上述插入位置确定模块704还可用于:根据目标对象标识信息,获取目标业务对象的生命周期记录;获取生命周期记录的第一条数据记录和最后一条数据记录;若变更时间信息中的开始有效时间小于等于第一条数据记录的开始有效时间重合,则目标位置为生命周期记录的头部;若变更时间信息中的结束有效时间大于等于最后一条数据记录的结束有效时间重合,则目标位置为生命周期记录的尾部;若变更时间信息中的开始有效时间大于第一条数据记录的开始有效时间,且变更时间信息中的结束有效时间小于最后一条数据记录的结束有效时间,则目标位置为头部与尾部之间。
作为上述实施例的一种可选的实施方式,上述变更记录模块705还可用于:目标位置为头部,则将新增变更记录插入生命周期的头部,且新增变更记录的结束有效期时间为第一条数据记录的开始有效期时间-1;目标位置为尾部,则将新增变更记录插入生命周期的尾部,且更新最后一条数据记录的结束有效期时间为新增变更记录的开始有效期时间-1;目标位置为头部与尾部之间,将新增变更记录插入至目标位置,同时基于变更时间信息更新新增变更记录的上一条记录的结束有效期时间。
可选的,在本实施例的另一些实施方式中,上述装置还可包括查询模块,该模块可用于:当接收到数据查询指令,通过解析数据查询指令得到查询时间信息和/或待查询对象标识信息;查询时间信息为查询时间段或查询时间;基于查询时间信息,获取所有业务对象相匹配的数据记录;基于待查询对象标识信息,获取待查询对象标识信息对应的业务对象的生命周期时间轴数据;基于查询时间信息和待查询对象标识信息,获取待查询对象标识信息对应的业务对象位于查询时间信息处的数据记录。
可选的,在本实施例的其他一些实施方式中,上述装置例如还可包括删除模块,该模块可用于:当接收到数据删除指令,通过解析数据删除指令得到删除时间信息和/或待删除对象标识信息;删除时间信息为删除时间段或删除时间;基于删除时间信息,删除所有业务对象位于删除时间信息处的所有数据记录;基于待删除对象标识信息,删除对象标识信息对应的业务对象的生命周期时间轴数据;基于删除时间信息和待删除对象标识信息,删除待删除对象标识信息对应的业务对象位于删除时间信息处的数据记录。
作为上述实施例的一种可选的实施方式,上述删除模块还可进一步用于:对每个业务对象,获取当前业务对象位于删除时间信息处的每一数据记录的相邻数据记录;更新每一条相邻数据记录的有效期时间,以使生命周期记录中的每一条数据记录的时间连续。
本发明实施例所述数据管理装置的各功能模块的功能可根据上述方法实施例中的方法具体实现,其具体实现过程可以参照上述方法实施例的相关描述,此处不再赘述。
由上可知,本发明实施例可有效提高数据查询效率。
上文中提到的数据管理装置是从功能模块的角度描述,进一步的,本申请还提供一种电子设备,是从硬件角度描述。图8为本申请实施例提供的电子设备在一种实施方式下的结构示意图。如图8所示,该电子设备包括存储器80,用于存储计算机程序;处理器81,用于执行计算机程序时实现如上述任一实施例提到的数据管理方法的步骤。
其中,处理器81可以包括一个或多个处理核心,比如4核心处理器、8核心处理器,处理器81还可为控制器、微控制器、微处理器或其他数据处理芯片等。处理器81可以采用DSP(Digital Signal Processing,数字信号处理)、FPGA(Field-Programmable GateArray,现场可编程门阵列)、PLA(Programmable Logic Array,可编程逻辑阵列)中的至少一种硬件形式来实现。处理器81也可以包括主处理器和协处理器,主处理器是用于对在唤醒状态下的数据进行处理的处理器,也称CPU(Central Processing Unit,中央处理器);协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中,处理器81可以集成有GPU(Graphics Processing Unit,图像处理器),GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中,处理器81还可以包括AI(ArtificialIntelligence,人工智能)处理器,该AI处理器用于处理有关机器学习的计算操作。
存储器80可以包括一个或多个计算机可读存储介质,该计算机可读存储介质可以是非暂态的。存储器80还可包括高速随机存取存储器以及非易失性存储器,比如一个或多个磁盘存储设备、闪存存储设备。存储器80在一些实施例中可以是电子设备的内部存储单元,例如服务器的硬盘。存储器80在另一些实施例中也可以是电子设备的外部存储设备,例如服务器上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(SecureDigital,SD)卡,闪存卡(Flash Card)等。进一步地,存储器80还可以既包括电子设备的内部存储单元也包括外部存储设备。存储器80不仅可以用于存储安装于电子设备的应用软件及各类数据,例如:执行漏洞处理方法的程序的代码等,还可以用于暂时地存储已经输出或者将要输出的数据。本实施例中,存储器80至少用于存储以下计算机程序801,其中,该计算机程序被处理器81加载并执行之后,能够实现前述任一实施例公开的数据管理方法的相关步骤。另外,存储器80所存储的资源还可以包括操作系统802和数据803等,存储方式可以是短暂存储或者永久存储。其中,操作系统802可以包括Windows、Unix、Linux等。数据803可以包括但不限于数据管理结果对应的数据等。
在一些实施例中,上述电子设备还可包括有显示屏82、输入输出接口83、通信接口84或者称为网络接口、电源85以及通信总线86。其中,显示屏82、输入输出接口83比如键盘(Keyboard)属于用户接口,可选的用户接口还可以包括标准的有线接口、无线接口等。可选地,在一些实施例中,显示器可以是LED显示器、液晶显示器、触控式液晶显示器以及OLED(Organic Light-Emitting Diode,有机发光二极管)触摸器等。显示器也可以适当的称为显示屏或显示单元,用于显示在电子设备中处理的信息以及用于显示可视化的用户界面。通信接口84可选的可以包括有线接口和/或无线接口,如WI-FI接口、蓝牙接口等,通常用于在电子设备与其他电子设备之间建立通信连接。通信总线86可以是外设部件互连标准(peripheral component interconnect,简称PCI)总线或扩展工业标准结构(extendedindustry standard architecture,简称EISA)总线等。该总线可以分为地址总线、数据总线、控制总线等。为便于表示,图8中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
本领域技术人员可以理解,图8中示出的结构并不构成对该电子设备的限定,可以包括比图示更多或更少的组件,例如还可包括实现各类功能的传感器87。
本发明实施例所述电子设备的各功能模块的功能可根据上述方法实施例中的方法具体实现,其具体实现过程可以参照上述方法实施例的相关描述,此处不再赘述。
由上可知,本发明实施例可有效提高数据查询效率。
可以理解的是,如果上述实施例中的数据管理方法以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,执行本申请各个实施例方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、电可擦除可编程ROM、寄存器、硬盘、多媒体卡、卡型存储器(例如SD或DX存储器等)、磁性存储器、可移动磁盘、CD-ROM、磁碟或者光盘等各种可以存储程序代码的介质。
基于此,本发明实施例还提供了一种可读存储介质,存储有计算机程序,所述计算机程序被处理器执行时如上任意一实施例所述数据管理方法的步骤。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其它实施例的不同之处,各个实施例之间相同或相似部分互相参见即可。对于实施例公开的硬件包括装置及电子设备而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
专业人员还可以进一步意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
以上对本申请所提供的一种数据管理方法、装置、电子设备及可读存储介质进行了详细介绍。本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想。应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以对本申请进行若干改进和修饰,这些改进和修饰也落入本申请权利要求的保护范围内。
Claims (10)
1.一种数据管理方法,其特征在于,包括:
预先为业务模型设置时间管理属性,所述时间管理属性包括对象标识信息、开始有效期时间和结束有效期时间;
当检测业务对象数据变更,获取目标业务对象的目标对象标识信息和变更时间信息;
根据所述目标对象标识信息和所述变更时间信息生成新增变更记录;
根据所述目标对象标识信息和所述变更时间信息,确定所述新增变更记录插入在所述目标业务对象的生命周期记录的目标位置;
将所述新增变更记录插入至所述目标位置,同时基于所述变更时间信息更新所述新增变更记录或相邻记录的有效期时间,以使所述生命周期记录中的每一条数据记录的时间连续。
2.根据权利要求1所述的数据管理方法,其特征在于,所述根据所述目标对象标识信息和所述变更时间信息,确定所述新增变更记录插入在所述目标业务对象的生命周期记录的目标位置,包括:
根据所述目标对象标识信息,获取所述目标业务对象的生命周期记录;
获取所述生命周期记录的第一条数据记录和最后一条数据记录;
若所述变更时间信息中的开始有效时间小于等于所述第一条数据记录的开始有效时间重合,则所述目标位置为所述生命周期记录的头部;
若所述变更时间信息中的结束有效时间大于等于所述最后一条数据记录的结束有效时间重合,则所述目标位置为所述生命周期记录的尾部;
若所述变更时间信息中的开始有效时间大于所述第一条数据记录的开始有效时间,且所述变更时间信息中的结束有效时间小于所述最后一条数据记录的结束有效时间,则所述目标位置为所述头部与所述尾部之间。
3.根据权利要求2所述的数据管理方法,其特征在于,所述将所述新增变更记录插入至所述目标位置,同时基于所述变更时间信息更新所述新增变更记录或相邻记录的有效期时间,包括:
所述目标位置为头部,则将所述新增变更记录插入所述生命周期记录的头部,且所述新增变更记录的结束有效期时间为所述第一条数据记录的开始有效期时间-1;
所述目标位置为尾部,则将所述新增变更记录插入所述生命周期记录的尾部,且更新所述最后一条数据记录的结束有效期时间为所述新增变更记录的开始有效期时间-1;
所述目标位置为所述头部与所述尾部之间,将所述新增变更记录插入至所述目标位置,同时基于所述变更时间信息更新所述新增变更记录的上一条记录的结束有效期时间。
4.根据权利要求1至3任意一项所述的数据管理方法,其特征在于,所述基于所述变更时间信息更新所述新增变更记录或相邻记录的有效期时间之后,还包括:
当接收到数据查询指令,通过解析所述数据查询指令得到查询时间信息和/或待查询对象标识信息;所述查询时间信息为查询时间段或查询时间;
基于所述查询时间信息,获取所有业务对象相匹配的数据记录;
基于所述待查询对象标识信息,获取所述待查询对象标识信息对应的业务对象的生命周期时间轴数据;
基于所述查询时间信息和所述待查询对象标识信息,获取所述待查询对象标识信息对应的业务对象位于所述查询时间信息处的数据记录。
5.根据权利要求4所述的数据管理方法,其特征在于,所述基于所述变更时间信息更新所述新增变更记录或相邻记录的有效期时间之后,还包括:
当接收到数据删除指令,通过解析所述数据删除指令得到删除时间信息和/或待删除对象标识信息;所述删除时间信息为删除时间段或删除时间;
基于所述删除时间信息,删除所有业务对象位于所述删除时间信息处的所有数据记录;
基于所述待删除对象标识信息,删除所述待删除对象标识信息对应的业务对象的生命周期时间轴数据;
基于所述删除时间信息和所述待删除对象标识信息,删除所述待删除对象标识信息对应的业务对象位于所述删除时间信息处的数据记录。
6.根据权利要求5所述的数据管理方法,其特征在于,所述删除所有业务对象位于所述删除时间信息处的所有数据记录之前,还包括:
对每个业务对象,获取当前业务对象位于所述删除时间信息处的每一数据记录的相邻数据记录;
更新每一条相邻数据记录的有效期时间,以使所述生命周期记录中的每一条数据记录的时间连续。
7.一种数据管理装置,其特征在于,包括:
属性赋予模块,用于预先为业务模型设置时间管理属性,所述时间管理属性包括对象标识信息、开始有效期时间和结束有效期时间;
信息获取模块,用于当检测业务对象数据变更,获取目标业务对象的目标对象标识信息和变更时间信息;
变更记录生成模块,用于根据所述目标对象标识信息和所述变更时间信息生成新增变更记录;
插入位置确定模块,用于根据所述目标对象标识信息和所述变更时间信息,确定所述新增变更记录插入在所述目标业务对象的生命周期记录的目标位置;
变更记录模块,用于将所述新增变更记录插入至所述目标位置,同时基于所述变更时间信息更新所述新增变更记录或相邻记录的有效期时间,以使所述生命周期记录中的每一条数据记录的时间连续。
8.根据权利要求7所述的数据管理装置,其特征在于,所述插入位置确定模块进一步用于:根据所述目标对象标识信息,获取所述目标业务对象的生命周期记录;获取所述生命周期记录的第一条数据记录和最后一条数据记录;若所述变更时间信息中的开始有效时间小于等于所述第一条数据记录的开始有效时间重合,则所述目标位置为所述生命周期记录的头部;若所述变更时间信息中的结束有效时间大于等于所述最后一条数据记录的结束有效时间重合,则所述目标位置为所述生命周期记录的尾部;若所述变更时间信息中的开始有效时间大于所述第一条数据记录的开始有效时间,且所述变更时间信息中的结束有效时间小于所述最后一条数据记录的结束有效时间,则所述目标位置为所述头部与所述尾部之间。
9.一种电子设备,其特征在于,包括处理器和存储器,所述处理器用于执行所述存储器中存储的计算机程序时实现如权利要求1至6任一项所述数据管理方法的步骤。
10.一种可读存储介质,其特征在于,所述可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至6任一项所述数据管理方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210325378.3A CN114860787A (zh) | 2022-03-30 | 2022-03-30 | 数据管理方法、装置、电子设备及可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210325378.3A CN114860787A (zh) | 2022-03-30 | 2022-03-30 | 数据管理方法、装置、电子设备及可读存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114860787A true CN114860787A (zh) | 2022-08-05 |
Family
ID=82630190
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210325378.3A Pending CN114860787A (zh) | 2022-03-30 | 2022-03-30 | 数据管理方法、装置、电子设备及可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114860787A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115544048A (zh) * | 2022-11-29 | 2022-12-30 | 福建慧政通信息科技有限公司 | 一种监督数据变化的方法及终端 |
CN117246609A (zh) * | 2023-11-15 | 2023-12-19 | 浙江恒逸石化有限公司 | 丝锭打码方法、装置、电子设备和存储介质 |
-
2022
- 2022-03-30 CN CN202210325378.3A patent/CN114860787A/zh active Pending
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115544048A (zh) * | 2022-11-29 | 2022-12-30 | 福建慧政通信息科技有限公司 | 一种监督数据变化的方法及终端 |
CN115544048B (zh) * | 2022-11-29 | 2023-03-21 | 福建慧政通信息科技有限公司 | 一种监督数据变化的方法及终端 |
CN117246609A (zh) * | 2023-11-15 | 2023-12-19 | 浙江恒逸石化有限公司 | 丝锭打码方法、装置、电子设备和存储介质 |
CN117246609B (zh) * | 2023-11-15 | 2024-01-30 | 浙江恒逸石化有限公司 | 丝锭打码方法、装置、电子设备和存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN114860787A (zh) | 数据管理方法、装置、电子设备及可读存储介质 | |
CN104520815A (zh) | 一种任务调度的方法、装置及设备 | |
CN110688104A (zh) | 可视化流程处理方法、装置、电子设备及可读存储介质 | |
CN113282795B (zh) | 数据结构图生成及更新方法、装置、电子设备及存储介质 | |
CN107657051A (zh) | 一种图片标签的生成方法、终端设备及存储介质 | |
CN113703781B (zh) | 存储系统接口生成方法、装置、电子设备及可读存储介质 | |
CN103109264A (zh) | 创建配置文件模板 | |
CN110955481A (zh) | 一种标签任务的生成方法、装置、存储介质及电子设备 | |
CN108763511B (zh) | 页面中图层排版方法、装置、电子设备及存储介质 | |
CN108446371B (zh) | 数据回导方法、装置、计算机设备及存储介质 | |
CN106033474A (zh) | 一种数据同步更新方法、装置及电子设备 | |
CN113312529A (zh) | 一种数据可视化方法、装置、计算机设备及存储介质 | |
CN102347851A (zh) | 事件处理方法及服务器 | |
CN113077142A (zh) | 智能学员画像方法、系统及终端设备 | |
CN113741931B (zh) | 软件升级方法、装置、电子设备及可读存储介质 | |
CN113434585B (zh) | 资源保存方法及设备 | |
CN106570004B (zh) | 一种数据管理方法及装置 | |
CN113688004A (zh) | 云平台时序监控数据管理方法、装置、设备及存储介质 | |
CN114020717A (zh) | 分布式存储系统的性能数据获取方法、装置、设备及介质 | |
CN112508535A (zh) | 一种基于jbpm的用于审批的工作流的改进方法及装置 | |
CN111258628A (zh) | 一种规则文件比对方法、装置、可读存储介质及终端设备 | |
CN113762821B (zh) | 货物信息的处理方法、装置、设备以及存储介质 | |
CN114328072B (zh) | 一种曝光数据采集方法及装置 | |
CN113656486B (zh) | 生成可视化对象的方法、装置、终端设备及存储介质 | |
CN110602737B (zh) | 区域性拆迁识别方法、装置、计算机设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |