CN113792052A - 数据模型处理方法及装置 - Google Patents
数据模型处理方法及装置 Download PDFInfo
- Publication number
- CN113792052A CN113792052A CN202111092947.6A CN202111092947A CN113792052A CN 113792052 A CN113792052 A CN 113792052A CN 202111092947 A CN202111092947 A CN 202111092947A CN 113792052 A CN113792052 A CN 113792052A
- Authority
- CN
- China
- Prior art keywords
- data model
- database table
- management
- production
- consistent
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2282—Tablespace storage structures; Management thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/219—Managing data history or versioning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/23—Updating
- G06F16/2365—Ensuring data consistency and integrity
Abstract
本发明提供一种数据模型处理方法及装置,通过比对本次待投产的数据模型的版本与上一次投产的数据模型的版本,当前的投产脚本与管理态的变更脚本比对不一致,修改本次待投产的数据模型的数据库表结构,得到管理态的数据模型;比对投产后的管理态的数据模型与生产环境中的数据模型的一致性,得到比对结果;根据比对结果对管理态的数据模型进行处理。在本方案中,通过比对本次待投产的数据模型的版本与上一次投产的数据模型的版本、当前的投产脚本与管理态的变更脚本,以及投产后的数据模型与生产环境中的数据模型的一致性,能够自动快速、有效、且准确的核实数据架构管理系统中的数据模型和生产环境中的数据模型中的数据库表结构的一致性。
Description
技术领域
本发明涉及数据管理技术领域,尤其涉及一种数据模型处理方法及装置。
背景技术
目前,系统研发人员首先在数据架构管理系统中设计完数据模型,在测试环境测试完备,同时通过了有权人员对数据模型合理性,规范性,完整性和共享性的审核审批,然后提交数据库执行脚本由生产运行人员在生产环境投产实施。
在实际应用中,数据架构管理系统的数据库表结构中的相关数据会被银行其他系统如大数据平台等消费,因此,必须保证其如实反映生产环境的数据模型的数据库表结构。由于,数据架构管理系统和生产环境并未打通,生产环境执行的SQL脚本完全由系统研发人员手工编写,因此,可能会出现数据架构管理系统中的数据模型和生产环境中的数据模型中的数据库表结构不一致的情况。
在现有技术中,为确保数据架构管理系统中的数据模型和生产环境中的数据模型中的数据库表结构的一致性,通常采用人工比对的方式进行核对,不仅耗时耗力,还容易出错。此外,如果数据量多大,也无法通过人工进行全量检查数据的正确性。
发明内容
有鉴于此,本发明实施例提供一种数据模型处理方法及装置,以实现自动快速、有效、且准确的核实数据架构管理系统中的数据模型和生产环境中的数据模型中的数据库表结构的一致性的目的。
为实现上述目的,本发明实施例提供如下技术方案:
本发明实施例第一方面公开了一种数据模型处理方法,所述方法包括:
获取本次待投产的数据模型;
将所述本次待投产的数据模型的版本与上一次投产的数据模型的版本进行对比,将生成的本次数据模型变更脚本作为管理态的变更脚本;
将当前的投产脚本与所述管理态的变更脚本进行比较,若不一致,则修改本次待投产的数据模型的数据库表结构,得到管理态的数据模型;
在所述管理态的数据模型投产后,比对投产后的管理态的数据模型与生产环境中的数据模型的一致性,得到比对结果;
根据所述比对结果对所述管理态的数据模型进行处理。
可选的,所述在所述管理态的数据模型投产后,比对投产后的第一数据模型与生产环境中的数据模型的一致性,得到比对结果,包括:
在所述管理态的数据模型投产后,基于预设周期,获取投产后的管理态的数据模型在指定应用系统中生效的第一数据库表的结构,所述预设周期至少包括每月、每季度、每半年和每一年中的一种或多种组合;
比对所述第一数据库表的结构与所述生产环境中的数据模型的第二数据表结构是否一致;
若一致,则得到所述第一数据库表和所述第二数据库表结构一致的比对结果;
若不一致,则得到所述第一数据库表和所述第二数据库表结构不一致的比对结果。
可选的,所述在所述管理态的数据模型投产后,比对投产后的管理态的数据模型与生产环境中的数据模型的一致性,得到比对结果,包括:
在所述管理态的数据模型投产后,实时获取投产后的管理态的数据模型在指定应用系统中生效的第一数据库表的结构;
比对所述第一数据库表的结构与所述生产环境中的数据模型的第二数据表结构是否一致;
若一致,则得到所述第一数据库表和所述第二数据库表结构一致的比对结果;
若不一致,则得到所述第一数据库表和所述第二数据库表结构不一致的比对结果。
可选的,所述在所述管理态的数据模型投产后,比对投产后的管理态的数据模型与生产环境中的数据模型的一致性,得到比对结果,包括:
在所述管理态的数据模型投产后,获取投产后的管理态的数据模型在指定应用系统中预设生效频次的第一数据库表的结构,所述预设生效频次至少包括生效一次;
比对所述第一数据库表的结构与所述生成环境中的数据模型的第二数据表结构是否一致;
若一致,则得到所述第一数据库表和所述第二数据库表结构一致的比对结果;
若不一致,则得到所述第一数据库表和所述第二数据库表结构不一致的比对结果。
可选的,所述比对所述第一数据库表的结构与所述生成环境中的数据模型的第二数据表结构是否一致,包括:
比对所述第一数据库表和所述第二数据库表的字段和属性是否一致,以及比对所述第一数据库表和所述第二数据库表的索引以及所述索引的字段、字段顺序是否一致;
若均一致,则确定所述第一数据库表和所述第二数据库表的结构一致;
若任一不一致,则确定所述第一数据库表和所述第二数据库表的结构不一致。
可选的,所述根据比对结果对所述管理态的数据模型进行处理,包括:
若比对结果为不一致,根据所述比对结果修改所述管理态的变更脚本;
将修改后的管理态的变更脚本与当前的投产脚本进行比较,若不一致,则修改本次待投产的数据模型的数据库表结构,得到新的管理态的数据模型。
本发明实施例第二方面公开了一种数据模型处理装置,所述装置包括:投产前处理模块和投产后处理模块;
所述投产前处理模块包括:
第一获取单元,用于获取本次待投产的数据模型;
第一生成单元,用于将所述本次待投产的数据模型的版本与上一次投产的数据模型的版本进行比较,将生成的本次数据模型变更脚本作为管理态的变更脚本;
第一对比单元,用于将当前的投产脚本与所述管理态的变更脚本进行对比,若不一致,则执行第二生成单元;
第二生成单元,用于修改本次待投产的数据模型的数据库表结构,得到管理态的数据模型;
所述投产后处理模块,用于在所述管理态的数据模型投产后,比对投产后的管理态的数据模型与生产环境中的数据模型的一致性,得到比对结果;根据所述比对结果对所述管理态的数据模型进行处理。
可选的,所述投产后处理模块包括:
第二获取单元,用于在所述管理态的数据模型投产后,基于预设周期,获取投产后的管理态的数据模型在指定应用系统中生效的第一数据库表的结构,所述预设周期至少包括每月、每季度、每半年和每一年中的一种或多种组合;或者,实时获取投产后的管理态的数据模型在指定应用系统中生效的第一数据库表的结构;或者,获取投产后的管理态的数据模型在指定应用系统中预设生效频次的第一数据库表的结构,所述预设生效频次至少包括生效一次;
第二对比单元,比对所述第一数据库表的结构与所述生成环境中的数据模型的第二数据表结构是否一致;若一致,则得到所述第一数据库表和所述第二数据库表结构一致的比对结果;若不一致,则得到所述第一数据库表和所述第二数据库表结构不一致的比对结果。
可选的,所述第二比对单元,具体用于:
比对所述第一数据库表和所述第二数据库表的字段和属性是否一致,以及比对所述第一数据库表和所述第二数据库表的索引以及所述索引的字段、字段顺序是否一致;若均一致,则确定所述第一数据库表和所述第二数据库表的结构一致;若任一不一致,则确定所述第一数据库表和所述第二数据库表的结构不一致。
可选的,所述根据比对结果对所述管理态的数据模型进行处理的投产后处理模块,具体用于:
若比对结果为不一致,根据所述比对结果修改所述管理态的变更脚本;将修改后的管理态的变更脚本与当前的投产脚本与所述管理态的变更脚本进行比较,若不一致,则修改本次待投产的数据模型的数据库表结构,得到新的管理态的数据模型。
基于上述本发明实施例提供的一种数据模型处理方法及装置,所述方法包括:获取本次待投产的数据模型;将所述本次待投产的数据模型的版本与上一次投产的数据模型的版本进行对比,将生成的本次数据模型变更脚本作为管理态的变更脚本;将当前的投产脚本与所述管理态的变更脚本进行比较,若不一致,则修改本次待投产的数据模型的数据库表结构,得到管理态的数据模型;在所述管理态的数据模型投产后,比对投产后的管理态的数据模型与生产环境中的数据模型的一致性,得到比对结果;根据比对结果对所述管理态的数据模型进行处理。在本方案中,通过比对本次待投产的数据模型的版本与上一次投产的数据模型的版本,以及比对当前的投产脚本与管理态的变更脚本,得到管理态的数据模型,在管理态的数据模型投产后,比对投产后的管理态的数据模型与生产环境中的数据模型的一致性,从而对管理态的数据模型进行处理,能够自动快速、有效、且准确的核实数据架构管理系统中的数据模型和生产环境中的数据模型中的数据库表结构的一致性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本发明实施例提供的一种数据模型处理方法的流程示意图;
图2为本发明实施例提供的一种比对投产后的第一数据模型与生产环境中的数据模型的一致性的流程示意图;
图3为本发明实施例提供的另一种比对投产后的第一数据模型与生产环境中的数据模型的一致性的流程示意图;
图4为本发明实施例提供的又一种比对投产后的第一数据模型与生产环境中的数据模型的一致性的流程示意图;
图5为本发明实施例提供的一种比对投产后的第一数据模型与生产环境中的数据模型的一致性的具体比对内容的流程示意图;
图6为本发明实施例提供的另一种数据模型处理方法的流程示意图;
图7为本发明实施例提供的一种应用场景图;
图8为本发明实施例提供的一种数据模型处理装置的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
在本申请中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。
为了便于理解本发明的技术方案,对本发明中出现的技术术语进行说明:
数据模型:广义的概念是指数据需求定义、设计及数据库开发的蓝图,它借助工具通过图形化的方式,向设计人员传达业务数据概念及信息需求,同时在业务信息与物理数据之间起着开发与沟通框架的作用。本发明主要指数据库的物理表结构,包括物理表的字段信息,主键信息,索引信息等。
管理态的数据模型:应用系统在数据架构管理系统中维护的物理表结构状态。
运行态的数据模型:应用系统在实际生产环境中的物理表结构状态。
由背景技术可知,为确保数据架构管理系统中的数据模型和生产环境中的数据模型中的数据库表结构的一致性,通常采用人工比对的方式进行核对,但是这种方式不仅耗时耗力,还容易出错。此外,如果数据量多大,也无法通过人工进行全量检查数据的正确性。
因此,本发明实施例提供一种数据模型处理方法及装置,在本方案中,通过比对本次待投产的数据模型的版本与上一次投产的数据模型的版本,以及比对当前的投产脚本与管理态的变更脚本,得到管理态的数据模型,在管理态的数据模型投产后,比对投产后的管理态的数据模型与生产环境中的数据模型的一致性,从而对管理态的数据模型进行处理,能够自动快速、有效、且准确的核实数据架构管理系统中的数据模型和生产环境中的数据模型中的数据库表结构的一致性。
如图1所示,为本发明实施例提供的一种数据模型处理方法的流程示意图,该方法主要包括以下步骤:
步骤S101:获取本次待投产的数据模型。
在具体实现步骤S101的过程中,进行数据模型投产时,需要在数据架构管理系统中选定本次要投产的数据模型,并进行获取,也就是说,获取本次待投产的数据模型。
步骤S102:将本次待投产的数据模型的版本与上一次投产的数据模型的版本进行对比,将生成的本次数据模型变更脚本作为管理态的变更脚本。
在具体实现步骤S102的过程中,对于当前已生效未投产的数据模型的版本,即对于本次待投产的数据模型的版本,将本次待生产的数据模型的版本与上一次投产的数据模型的版本进行比对,生成本次数据模型变更脚本,将生成的本次数据模型变更脚本作为管理态的变更脚本。
步骤S103:将当前的投产脚本与管理态的变更脚本进行比较。
在步骤S103中,当前的投产脚本为当前生产变更需要的投产脚本。
投产脚本包括但不限于投产的SQL脚本。
在具体实现步骤S103的过程中,获取当前的投产脚本,将当前的投产脚本与管理态的变更脚本进行比较。
步骤S104:判断当前的投产脚本与管理态的变更脚本是否一致,若不一致,执行步骤S105,若一致,返回执行步骤S101。
步骤S105:修改本次待投产的数据模型的数据库表结构,得到管理态的数据模型。
在具体实现步骤S105的过程中,确定当前的投产脚本与管理态的变更脚本不一致,则获取本次待投产的数据模型的数据库表结构,修改所获取的本次待投产的数据模型的数据库表结构,得到管理态的数据模型。
步骤S106:在管理态的数据模型投产后,比对投产后的管理态的数据模型与生产环境中的数据模型的一致性,得到比对结果。
在具体实现步骤S106的过程中,将管理态的数据模型进行投产,在管理态的数据模型投产后,比对投产后的管理态的数据模型与生产环境中的数据模型的一致性,得到比对结果。
步骤S107:根据比对结果对管理态的数据模型进行处理。
在具体实现步骤S107的过程中,根据比对结果对管理态的数据模型进行相应的处理,以保证投产后的管理态的数据模型与生产环境中的数据模型的一致性。
基于本发明实施例提供的一种数据模型处理方法,通过获取本次待投产的数据模型;将本次待投产的数据模型的版本与上一次投产的数据模型的版本进行对比,将生成的本次数据模型变更脚本作为管理态的变更脚本;将当前的投产脚本与管理态的变更脚本进行比较,若不一致,则修改本次待投产的数据模型的数据库表结构,得到管理态的数据模型;在管理态的数据模型投产后,比对投产后的管理态的数据模型与生产环境中的数据模型的一致性,得到比对结果;根据比对结果对管理态的数据模型进行处理。在本方案中,通过比对本次待投产的数据模型的版本与上一次投产的数据模型的版本,以及比对当前的投产脚本与管理态的变更脚本,得到管理态的数据模型,在管理态的数据模型投产后,比对投产后的管理态的数据模型与生产环境中的数据模型的一致性,从而对管理态的数据模型进行处理,能够自动快速、有效、且准确的核实数据架构管理系统中的数据模型和生产环境中的数据模型中的数据库表结构的一致性。
基于上述本发明实施例提供的一种数据模型处理方法,执行步骤S106在管理态的数据模型投产后,比对投产后的管理态的数据模型与生产环境中的数据模型的一致性,得到比对结果的过程。如图2所示,为本发明实施例提供的一种比对投产后的第一数据模型与生产环境中的数据模型的一致性的流程示意图,主要包括以下步骤:
步骤S201:在管理态的数据模型投产后,基于预设周期,获取投产后的管理态的数据模型在指定应用系统中生效的第一数据库表的结构。
在步骤S201中,预设周期至少包括每月、每季度、每半年和每一年中的一种或多种组合。
在具体实现步骤S201的过程中,将管理态的数据模型进行投产,在管理态的数据模型投产后,基于预设周期,获取投产后的管理态的数据模型在指定应用系统中生效的第一数据库表的结构。
步骤S202:比对第一数据库表的结构与生产环境中的数据模型的第二数据表结构是否一致,若一致,执行步骤S203,若不一致,执行步骤S204。
步骤S203:得到第一数据库表和第二数据库表结构一致的比对结果。
在具体实现步骤S203的过程中,确定第一数据库表的结构与生产环境中的数据模型的第二数据表结构一致,则得到第一数据库表和第二数据库表结构一致的比对结果。
步骤S204:得到第一数据库表和第二数据库表结构不一致的比对结果。
在具体实现步骤S204的过程中,确定第一数据库表的结构与生产环境中的数据模型的第二数据表结构不一致,则得到第一数据库表和第二数据库表结构不一致的比对结果。
基于本发明实施例提供的一种数据模型处理方法,通过比对投产后的管理态的数据模型在指定应用系统中生效的第一数据库表的结构与生产环境中的数据模型的第二数据表结构,得到对应的比对结果,从而为后续对管理态的数据模型的处理提供数据基础,进而能够自动快速、有效、且准确的核实数据架构管理系统中的数据模型和生产环境中的数据模型中的数据库表结构的一致性。
基于上述本发明实施例提供的一种数据模型处理方法,执行步骤S106在管理态的数据模型投产后,比对投产后的管理态的数据模型与生产环境中的数据模型的一致性,得到比对结果的过程。如图3所示,为本发明实施例提供的另一种比对投产后的第一数据模型与生产环境中的数据模型的一致性的流程示意图,主要包括以下步骤:
步骤S301:在管理态的数据模型投产后,实时获取投产后的管理态的数据模型在指定应用系统中生效的第一数据库表的结构。
在具体实现步骤S301的过程中,将管理态的数据模型进行投产,在管理态的数据模型投产后,实时获取投产后的管理态的数据模型在指定应用系统中生效的第一数据库表的结构。
步骤S302:比对第一数据库表的结构与生产环境中的数据模型的第二数据表结构是否一致,若一致,执行步骤S303,若不一致,执行步骤S304。
步骤S303:得到第一数据库表和第二数据库表结构一致的比对结果。
步骤S304:得到第一数据库表和第二数据库表结构不一致的比对结果。
上述步骤S302至步骤S304的执行原理和过程与图2中公开的步骤S202至步骤S204的执行原理和过程相同,可参见,这里不再赘述。
基于本发明实施例提供的一种数据模型处理方法,通过比对投产后的管理态的数据模型在指定应用系统中生效的第一数据库表的结构与生产环境中的数据模型的第二数据表结构,得到对应的比对结果,从而为后续对管理态的数据模型的处理提供数据基础,进而能够自动快速、有效、且准确的核实数据架构管理系统中的数据模型和生产环境中的数据模型中的数据库表结构的一致性。
基于上述本发明实施例提供的一种数据模型处理方法,执行步骤S106在管理态的数据模型投产后,比对投产后的管理态的数据模型与生产环境中的数据模型的一致性,得到比对结果的过程。如图4所示,为本发明实施例提供的又一种比对投产后的第一数据模型与生产环境中的数据模型的一致性的流程示意图,主要包括以下步骤:
步骤S401:在管理态的数据模型投产后,获取投产后的管理态的数据模型在指定应用系统中预设生效频次的第一数据库表的结构。
在步骤S401中,预设生效频次至少包括生效一次。
可选的,预设生效频次可以为生效两次。
在具体实现步骤S401的过程中,将管理态的数据模型进行投产,在管理态的数据模型投产后,获取投产后的管理态的数据模型在指定应用系统中预设生效频次的第一数据库表的结构。
步骤S402:比对第一数据库表的结构与生产环境中的数据模型的第二数据表结构是否一致,若一致,执行步骤S403,若不一致,执行步骤S404。
步骤S403:得到第一数据库表和第二数据库表结构一致的比对结果。
步骤S404:得到第一数据库表和第二数据库表结构不一致的比对结果。
上述步骤S402至步骤S404的执行原理和过程与图2中公开的步骤S202至步骤S204的执行原理和过程相同,可参见,这里不再赘述。
基于本发明实施例提供的一种数据模型处理方法,通过比对投产后的管理态的数据模型在指定应用系统中生效的第一数据库表的结构与生产环境中的数据模型的第二数据表结构,得到对应的比对结果,从而为后续对管理态的数据模型的处理提供数据基础,进而能够自动快速、有效、且准确的核实数据架构管理系统中的数据模型和生产环境中的数据模型中的数据库表结构的一致性。
基于上述本发明实施例提供的一种数据模型处理方法,执行步骤S202、步骤S302以及步骤S402比对第一数据库表的结构与生产环境中的数据模型的第二数据表结构是否一致的过程。如图5所示,为本发明实施例提供的一种比对投产后的第一数据模型与生产环境中的数据模型的一致性的具体比对内容的流程示意图,主要包括以下步骤:
步骤S501:比对第一数据库表和第二数据库表的字段和属性是否一致,以及比对第一数据库表和第二数据库表的索引以及索引的字段、字段顺序是否一致,若均一致,执行步骤S502,若任一不一致,执行步骤S503。
需要说明的是,只要第一数据库表和第二数据库表的字段和属性一致,以及第一数据库表和第二数据库表的索引以及索引的字段、字段顺序一致,就执行步骤S502。
只要第一数据库表和第二数据库表的字段和属性一致,第一数据库表和第二数据库表的索引以及索引的字段、字段顺序不一致,或者,第一数据库表和第二数据库表的字段和属性不一致,第一数据库表和第二数据库表的索引以及索引的字段、字段顺序一致,又或者,第一数据库表和第二数据库表的字段和属性不一致,以及第一数据库表和第二数据库表的索引以及索引的字段、字段顺序不一致,就执行步骤S503。
需要说明的是,当存在任一不一致时,返回不一致的数据库表,以及具体不一致的字段或索引。
步骤S502:确定第一数据库表和第二数据库表的结构一致。
在具体实现步骤S502的过程中,确定第一数据库表和第二数据库表的字段和属性一致,以及确定第一数据库表和第二数据库表的索引以及索引的字段、字段顺序一致,则确定第一数据库表和第二数据库表的结构一致。
步骤S503:确定第一数据库表和第二数据库表的结构不一致。
在具体实现步骤S503的过程中,确定第一数据库表和第二数据库表的字段和属性一致,以及确定第一数据库表和第二数据库表的索引以及索引的字段、字段顺序不一致,或者,确定第一数据库表和第二数据库表的字段和属性不一致,以及确定第一数据库表和第二数据库表的索引以及索引的字段、字段顺序一致,又或者,确定第一数据库表和第二数据库表的字段和属性不一致,以及确定第一数据库表和第二数据库表的索引以及索引的字段、字段顺序不一致,则确定第一数据库表和第二数据库表的结构不一致。
基于本发明实施例提供的一种数据模型处理方法,通过具体的比对投产后的第一数据模型与生产环境中的数据模型的一致性的比对内容进行相应的比对,得到对应的比对结果,从而为后续对管理态的数据模型的处理提供数据基础,进而能够自动快速、有效、且准确的核实数据架构管理系统中的数据模型和生产环境中的数据模型中的数据库表结构的一致性。
基于上述本发明实施例提供的一种数据模型处理方法,如图6所示,为本发明实施例提供的另一种数据模型处理方法的流程示意图,主要包括以下步骤:
步骤S601:获取本次待投产的数据模型。
步骤S602:将本次待投产的数据模型的版本与上一次投产的数据模型的版本进行对比,将生成的本次数据模型变更脚本作为管理态的变更脚本。
步骤S603:将当前的投产脚本与管理态的变更脚本进行比较。
步骤S604:判断当前的投产脚本与管理态的变更脚本是否一致,若不一致,执行步骤S605,若一致,返回执行步骤S601。
步骤S605:修改本次待投产的数据模型的数据库表结构,得到管理态的数据模型
步骤S606:在管理态的数据模型投产后,比对投产后的管理态的数据模型与生产环境中的数据模型的一致性,得到比对结果。
上述步骤S601至步骤S606的执行原理和过程与图1中公开的步骤S101至步骤S106的执行原理和过程相同,可参见,这里不再赘述。
步骤S607:判断比对结果是否一致,若一致,返回执行步骤S601,若不一致,执行步骤S608。
步骤S608:根据比对结果修改管理态的变更脚本。
在具体实现步骤S608的过程中,确定比对结果不一致,则根据比对结果修改管理态的变更脚本。
步骤S609:将修改后的管理态的变更脚本与当前的投产脚本进行比较,
在具体实现步骤S609的过程中,获取当前的投产脚本,将当前的投产脚本与修改后的管理态的变更脚本进行比较。
步骤S610:判断修改后的管理态的变更脚本与当前的投产脚本是否一致,若不一致,执行步骤611,若一致,返回执行步骤S601。
步骤S611:修改本次待投产的数据模型的数据库表结构,得到新的管理态的数据模型。
在具体实现步骤S611的过程中,确定修改后的管理态的变更脚本与当前的投产脚本不一致,则修改本次待投产的数据模型的数据库表结构,得到新的管理态的数据模型。
需要说明的是,执行图1中的步骤S101至步骤S106后,根据得到的比对结果为不一致,则根据比对结果修改前面得到的管理态的变更脚本,当修改后的管理态的变更脚本与当前的投产脚本不一致,则修改本次待投产的数据模型的数据库表结构,得到新的管理态的数据模型,整个过程为一个循环过程,后续进行数据模型处理时,可参照该过程进行处理。
基于本发明实施例提供的一种数据模型处理方法,根据得到的比对结果为不一致,根据比对结果修改前面得到的管理态的变更脚本,当修改后的管理态的变更脚本与当前的投产脚本不一致,则修改本次待投产的数据模型的数据库表结构,得到新的管理态的数据模型,从而基于新的管理态的数据模型对管理态的数据模型进行处理,能够自动快速、有效、且准确的核实数据架构管理系统中的数据模型和生产环境中的数据模型中的数据库表结构的一致性。
为了更好地理解上述本发明实施例提供的一种数据模型处理方法,如图7所示,为本发明实施例提供的一种应用场景图。
在图7中,为了核实数据架构管理系统中的数据模型和生产环境中的数据模型中的数据库表结构的一致性,通过“事前比对”和“事后检查”的方式来实现。
一、进行事前比对
获取本次待投产的数据模型,将本次待投产的数据模型的版本与上一次投产的数据模型的版本进行对比,并将生成的本次数据模型变更脚本作为管理态的变更脚本。
将处于运行态的当前的投产脚本与管理态的变更脚本进行比对,若当前的投产脚本与管理态的变更脚本不一致,则获取本次待投产的数据模型的数据库表结构,修改所获取的本次待投产的数据模型的数据库表结构,得到管理态的数据模型。
二、进行事后检查
将管理态的数据模型进行投产,在管理态的数据模型投产后,比对投产后的管理态的数据模型与生产环境中的数据模型的一致性,得到比对结果。
根据比对结果对管理态的数据模型进行处理。
基于本发明实施例提供的一种数据模型处理方法,通过比对本次待投产的数据模型的版本与上一次投产的数据模型的版本,以及比对当前的投产脚本与管理态的变更脚本,得到管理态的数据模型,在管理态的数据模型投产后,比对投产后的管理态的数据模型与生产环境中的数据模型的一致性,从而对管理态的数据模型进行处理,能够自动快速、有效、且准确的核实数据架构管理系统中的数据模型和生产环境中的数据模型中的数据库表结构的一致性。
与上述本发明实施例示出的一种数据模型处理方法相对应,本发明实施例还对应提供了一种数据模型处理装置,如图8所示,该数据模型处理装置包括:投产前处理模块81和投产后处理模块82。
所述投产前处理模块81包括:
第一获取单元,用于获取本次待投产的数据模型。
第一生成单元,用于将本次待投产的数据模型的版本与上一次投产的数据模型的版本进行比较,将生成的本次数据模型变更脚本作为管理态的变更脚本。
第一对比单元,用于将当前的投产脚本与管理态的变更脚本进行对比,若不一致,则执行第二生成单元。
第二生成单元,用于修改本次待投产的数据模型的数据库表结构,得到管理态的数据模型。
所述投产后处理模块82,用于在管理态的数据模型投产后,比对投产后的管理态的数据模型与生产环境中的数据模型的一致性,得到比对结果;根据比对结果对所述管理态的数据模型进行处理。
需要说明的是,上述本发明实施例公开的数据模型处理装置中的各个模块或各个单元具体的原理和执行过程,与上述本发明实施数据模型处理方法相同,可参见上述本发明实施例公开的数据模型处理方法中相应的部分,这里不再进行赘述。
基于本发明实施例提供的一种数据模型处理装置,通过获取本次待投产的数据模型;将本次待投产的数据模型的版本与上一次投产的数据模型的版本进行对比,将生成的本次数据模型变更脚本作为管理态的变更脚本;将当前的投产脚本与管理态的变更脚本进行比较,若不一致,则修改本次待投产的数据模型的数据库表结构,得到管理态的数据模型;在管理态的数据模型投产后,比对投产后的管理态的数据模型与生产环境中的数据模型的一致性,得到比对结果;根据比对结果对管理态的数据模型进行处理。在本方案中,通过比对本次待投产的数据模型的版本与上一次投产的数据模型的版本,以及比对当前的投产脚本与管理态的变更脚本,得到管理态的数据模型,在管理态的数据模型投产后,比对投产后的管理态的数据模型与生产环境中的数据模型的一致性,从而对管理态的数据模型进行处理,能够自动快速、有效、且准确的核实数据架构管理系统中的数据模型和生产环境中的数据模型中的数据库表结构的一致性。
可选的,基于上述图8示出的投产后处理模块82,所述投产后处理模块82还包括:第二获取单元和第二对比单元。
第二获取单元,用于在管理态的数据模型投产后,基于预设周期,获取投产后的管理态的数据模型在指定应用系统中生效的第一数据库表的结构,预设周期至少包括每月、每季度、每半年和每一年中的一种或多种组合;或者,实时获取投产后的管理态的数据模型在指定应用系统中生效的第一数据库表的结构;或者,获取投产后的管理态的数据模型在指定应用系统中预设生效频次的第一数据库表的结构,预设生效频次至少包括生效一次。
第二对比单元,比对第一数据库表的结构与生成环境中的数据模型的第二数据表结构是否一致;若一致,则得到第一数据库表和第二数据库表结构一致的比对结果;若不一致,则得到第一数据库表和第二数据库表结构不一致的比对结果。
基于本发明实施例提供的一种数据模型处理装置,通过比对投产后的管理态的数据模型在指定应用系统中生效的第一数据库表的结构与生产环境中的数据模型的第二数据表结构,得到对应的比对结果,从而为后续对管理态的数据模型的处理提供数据基础,进而能够自动快速、有效、且准确的核实数据架构管理系统中的数据模型和生产环境中的数据模型中的数据库表结构的一致性。
可选的,基于上述图8示出的投产后处理模块82,所述第二对比单元,具体用于:
比对第一数据库表和第二数据库表的字段和属性是否一致,以及比对第一数据库表和第二数据库表的索引以及索引的字段、字段顺序是否一致;若均一致,则确定第一数据库表和第二数据库表的结构一致;若任一不一致,则确定第一数据库表和第二数据库表的结构不一致。
基于本发明实施例提供的一种数据模型处理装置,通过具体的比对投产后的第一数据模型与生产环境中的数据模型的一致性的比对内容进行相应的比对,得到对应的比对结果,从而为后续对管理态的数据模型的处理提供数据基础,进而能够自动快速、有效、且准确的核实数据架构管理系统中的数据模型和生产环境中的数据模型中的数据库表结构的一致性。
可选的,基于上述图8示出的投产后处理模块82,所述根据比对结果对所述管理态的数据模型进行处理的投产后处理模块82,具体用于:
若比对结果为不一致,根据比对结果修改管理态的变更脚本;将修改后的管理态的变更脚本与当前的投产脚本与管理态的变更脚本进行比较,若不一致,则修改本次待投产的数据模型的数据库表结构,得到新的管理态的数据模型。
基于本发明实施例提供的一种数据模型处理装置,根据得到的比对结果为不一致,根据比对结果修改前面得到的管理态的变更脚本,当修改后的管理态的变更脚本与当前的投产脚本不一致,则修改本次待投产的数据模型的数据库表结构,得到新的管理态的数据模型,从而基于新的管理态的数据模型对管理态的数据模型进行处理,能够自动快速、有效、且准确的核实数据架构管理系统中的数据模型和生产环境中的数据模型中的数据库表结构的一致性。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统或系统实施例而言,由于其基本相似于方法实施例,所以描述得比较简单,相关之处参见方法实施例的部分说明即可。以上所描述的系统及系统实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
专业人员还可以进一步意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本公开的范围。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (10)
1.一种数据模型处理方法,其特征在于,所述方法包括:
获取本次待投产的数据模型;
将所述本次待投产的数据模型的版本与上一次投产的数据模型的版本进行对比,将生成的本次数据模型变更脚本作为管理态的变更脚本;
将当前的投产脚本与所述管理态的变更脚本进行比较,若不一致,则修改本次待投产的数据模型的数据库表结构,得到管理态的数据模型;
在所述管理态的数据模型投产后,比对投产后的管理态的数据模型与生产环境中的数据模型的一致性,得到比对结果;
根据所述比对结果对所述管理态的数据模型进行处理。
2.根据权利要求1所述的方法,其特征在于,所述在所述管理态的数据模型投产后,比对投产后的第一数据模型与生产环境中的数据模型的一致性,得到比对结果,包括:
在所述管理态的数据模型投产后,基于预设周期,获取投产后的管理态的数据模型在指定应用系统中生效的第一数据库表的结构,所述预设周期至少包括每月、每季度、每半年和每一年中的一种或多种组合;
比对所述第一数据库表的结构与所述生产环境中的数据模型的第二数据表结构是否一致;
若一致,则得到所述第一数据库表和所述第二数据库表结构一致的比对结果;
若不一致,则得到所述第一数据库表和所述第二数据库表结构不一致的比对结果。
3.根据权利要求1所述的方法,其特征在于,所述在所述管理态的数据模型投产后,比对投产后的管理态的数据模型与生产环境中的数据模型的一致性,得到比对结果,包括:
在所述管理态的数据模型投产后,实时获取投产后的管理态的数据模型在指定应用系统中生效的第一数据库表的结构;
比对所述第一数据库表的结构与所述生产环境中的数据模型的第二数据表结构是否一致;
若一致,则得到所述第一数据库表和所述第二数据库表结构一致的比对结果;
若不一致,则得到所述第一数据库表和所述第二数据库表结构不一致的比对结果。
4.根据权利要求1所述的方法,其特征在于,所述在所述管理态的数据模型投产后,比对投产后的管理态的数据模型与生产环境中的数据模型的一致性,得到比对结果,包括:
在所述管理态的数据模型投产后,获取投产后的管理态的数据模型在指定应用系统中预设生效频次的第一数据库表的结构,所述预设生效频次至少包括生效一次;
比对所述第一数据库表的结构与所述生成环境中的数据模型的第二数据表结构是否一致;
若一致,则得到所述第一数据库表和所述第二数据库表结构一致的比对结果;
若不一致,则得到所述第一数据库表和所述第二数据库表结构不一致的比对结果。
5.根据权利要求2至4中任一项所述的方法,其特征在于,所述比对所述第一数据库表的结构与所述生成环境中的数据模型的第二数据表结构是否一致,包括:
比对所述第一数据库表和所述第二数据库表的字段和属性是否一致,以及比对所述第一数据库表和所述第二数据库表的索引以及所述索引的字段、字段顺序是否一致;
若均一致,则确定所述第一数据库表和所述第二数据库表的结构一致;
若任一不一致,则确定所述第一数据库表和所述第二数据库表的结构不一致。
6.根据权利要求1至4中任一项所述的方法,其特征在于,所述根据比对结果对所述管理态的数据模型进行处理,包括:
若比对结果为不一致,根据所述比对结果修改所述管理态的变更脚本;
将修改后的管理态的变更脚本与当前的投产脚本进行比较,若不一致,则修改本次待投产的数据模型的数据库表结构,得到新的管理态的数据模型。
7.一种数据模型处理装置,其特征在于,所述装置包括:投产前处理模块和投产后处理模块;
所述投产前处理模块包括:
第一获取单元,用于获取本次待投产的数据模型;
第一生成单元,用于将所述本次待投产的数据模型的版本与上一次投产的数据模型的版本进行比较,将生成的本次数据模型变更脚本作为管理态的变更脚本;
第一对比单元,用于将当前的投产脚本与所述管理态的变更脚本进行对比,若不一致,则执行第二生成单元;
第二生成单元,用于修改本次待投产的数据模型的数据库表结构,得到管理态的数据模型;
所述投产后处理模块,用于在所述管理态的数据模型投产后,比对投产后的管理态的数据模型与生产环境中的数据模型的一致性,得到比对结果;根据所述比对结果对所述管理态的数据模型进行处理。
8.根据权利要求7所述的装置,其特征在于,所述投产后处理模块包括:
第二获取单元,用于在所述管理态的数据模型投产后,基于预设周期,获取投产后的管理态的数据模型在指定应用系统中生效的第一数据库表的结构,所述预设周期至少包括每月、每季度、每半年和每一年中的一种或多种组合;或者,实时获取投产后的管理态的数据模型在指定应用系统中生效的第一数据库表的结构;或者,获取投产后的管理态的数据模型在指定应用系统中预设生效频次的第一数据库表的结构,所述预设生效频次至少包括生效一次;
第二对比单元,比对所述第一数据库表的结构与所述生成环境中的数据模型的第二数据表结构是否一致;若一致,则得到所述第一数据库表和所述第二数据库表结构一致的比对结果;若不一致,则得到所述第一数据库表和所述第二数据库表结构不一致的比对结果。
9.根据权利要求8所述的装置,其特征在于,所述第二比对单元,具体用于:
比对所述第一数据库表和所述第二数据库表的字段和属性是否一致,以及比对所述第一数据库表和所述第二数据库表的索引以及所述索引的字段、字段顺序是否一致;若均一致,则确定所述第一数据库表和所述第二数据库表的结构一致;若任一不一致,则确定所述第一数据库表和所述第二数据库表的结构不一致。
10.根据权利要求7至9中任一项所述的装置,其特征在于,所述根据比对结果对所述管理态的数据模型进行处理的投产后处理模块,具体用于:
若比对结果为不一致,根据所述比对结果修改所述管理态的变更脚本;将修改后的管理态的变更脚本与当前的投产脚本与所述管理态的变更脚本进行比较,若不一致,则修改本次待投产的数据模型的数据库表结构,得到新的管理态的数据模型。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111092947.6A CN113792052A (zh) | 2021-09-17 | 2021-09-17 | 数据模型处理方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111092947.6A CN113792052A (zh) | 2021-09-17 | 2021-09-17 | 数据模型处理方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113792052A true CN113792052A (zh) | 2021-12-14 |
Family
ID=78878838
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111092947.6A Pending CN113792052A (zh) | 2021-09-17 | 2021-09-17 | 数据模型处理方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113792052A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117131004A (zh) * | 2023-07-05 | 2023-11-28 | 海通证券股份有限公司 | 数据库变更方法、装置及电子设备 |
-
2021
- 2021-09-17 CN CN202111092947.6A patent/CN113792052A/zh active Pending
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117131004A (zh) * | 2023-07-05 | 2023-11-28 | 海通证券股份有限公司 | 数据库变更方法、装置及电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2778929B1 (en) | Test script generation system | |
CN102236672B (zh) | 一种数据导入方法及装置 | |
CN110287200B (zh) | 对账方法、系统、计算机设备和存储介质 | |
CN104541295A (zh) | 集成的制造和测试处理平台 | |
CN110069279B (zh) | 一种直流控制保护程序的校验方法、装置及存储介质 | |
US20210224251A1 (en) | System for uploading information into a metadata repository | |
CN107741904A (zh) | 测试机自动配置方法、装置、设备及存储介质 | |
US8725701B2 (en) | Merger and acquisition data validation | |
CN109460661A (zh) | 一种逻辑安全漏洞检测方法、装置及终端设备 | |
CN113792052A (zh) | 数据模型处理方法及装置 | |
CN111522741A (zh) | 接口测试代码生成方法、装置、电子设备及可读存储介质 | |
Kumar et al. | Conceptualizing “COBieEvaluator” A rule based system for tracking asset changes using COBie datasheets | |
CN111858354A (zh) | 自动生成测试报告的方法、装置、存储介质及电子设备 | |
US8108823B2 (en) | User selected grid for logically representing an electronic circuit | |
Safonova | On one approach to modeling enterprise-wide function-oriented computer networks | |
CN102968305B (zh) | 逻辑处理方法、装置及测评系统 | |
Gurov et al. | Description of the modules of an optimal requirements management system for working with aviation projects | |
CN102591779B (zh) | 基于工作流的通用软件测试过程模型的建立方法 | |
CN115203300B (zh) | 一种数据验证方法及装置 | |
CN107562808A (zh) | 一种异构双链自动化数据的验证方法 | |
CN115809228A (zh) | 数据比对方法、装置、存储介质及电子设备 | |
US8056050B2 (en) | Method and system for guided inconsistency resolution in a model-driven software environment | |
CN105469287A (zh) | 一种工程投标报价电子数据导入系统及方法 | |
CN115600972A (zh) | 一种不良资产的核销方法、装置、设备及存储介质 | |
CN111966665B (zh) | 数据迁移测试方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |