CN109670091B - 一种基于数据标准的元数据智能维护方法和装置 - Google Patents
一种基于数据标准的元数据智能维护方法和装置 Download PDFInfo
- Publication number
- CN109670091B CN109670091B CN201811587875.0A CN201811587875A CN109670091B CN 109670091 B CN109670091 B CN 109670091B CN 201811587875 A CN201811587875 A CN 201811587875A CN 109670091 B CN109670091 B CN 109670091B
- Authority
- CN
- China
- Prior art keywords
- metadata
- data
- standard
- changed
- pool
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提供了一种基于数据标准的元数据智能维护方法和装置,涉及数据处理的技术领域,包括:扫描目标业务系统中的业务数据,得到扫描结果;若扫描结果为目标业务系统中的业务数据发送变化,则采集发生变化的业务数据的元数据;基于元数据的属性信息,将元数据与标准数据池中的标准数据元进行对比,标准数据池为基于预设数据元标准和标准数据元的数据元类型构建的数据池;若对比失败,则基于预设元数据标准对元数据进行修改,以实现对元数据的维护,解决了现有技术在对业务系统中业务数据的元数据进行维护时需要人工将元数据与标准数据元进行对比,导致维护效率较低的技术问题。
Description
技术领域
本发明涉及数据处理技术领域,尤其是涉及一种基于数据标准的元数据智能维护方法和装置。
背景技术
随着网络和信息技术的不断普及应用,业务系统的规划和建设已经成为政府及企业单位的重中之重,那么大量的业务系统建设都是基于各项目建设的需求进行的规划,特别是在政府及企业内部对业务系统的数据模型建设的一致性、准确性、规范性无从考证,且也不知如何去建设、检查、维护,即使政企单位有国标、部标、本地标准,但大量的人工识别、长期的维护所产生的价值与付出无从正比,导致了对业务系统中业务数据的元数据进行维护时维护效率较低,同时也导致数据标准的体系建设及真正达到信息共享、资源共用也成为了纸上谈兵。
针对上述问题,还未提出有效的解决方案。
发明内容
有鉴于此,本发明的目的在于提供一种基于数据标准的元数据智能维护方法和装置,以缓解了现有技术在对业务系统中业务数据的元数据进行维护时需要人工将元数据与标准数据元进行对比,导致维护效率较低的技术问题。
第一方面,本发明实施例提供了一种基于数据标准的元数据智能维护方法,该方法应用于服务器,包括:扫描目标业务系统中的业务数据,得到扫描结果,其中,所述扫描结果用于确定所述目标业务系统中的业务数据是否发送变化;若所述扫描结果为所述目标业务系统中的业务数据发送变化,则采集发生变化的业务数据的元数据;基于所述发生变化的业务数据的元数据的属性信息,将所述发生变化的业务数据的元数据与标准数据池中的标准数据元进行对比,其中,所述属性信息包括:字段类型,字段名称,字段长度,字段精度,注释号,所述标准数据池为基于预设数据元标准和标准数据元的数据元类型构建的数据池;若对比失败,则基于预设元数据标准对所述发生变化的业务数据的元数据进行修改,以实现对所述发生变化的业务数据的元数据的维护。
进一步地,基于预设元数据标准对所述发生变化的业务数据的元数据进行修改包括:若对比失败,则基于预设元数据标准,生成修改信息;将所述修改信息发送给所述目标业务系统,以使所述目标业务系统基于所述修改信息对发生变化的业务数据的元数据进行修改。
进一步地,所述方法还包括:若对比成功,则构建所述发生变化的业务数据的元数据与所述标准数据元的关系图谱。
进一步地,在扫描目标业务系统中的业务数据之前,所述方法还包括:基于所述预设数据元标准和所述标准数据元的数据元类型构建数据标准池;采集所述目标业务系统中的元数据,并基于所述目标业务系统中的元数据、所述目标业务系统中元数据的类型和所述目标业务系统中元数据的属性信息,构建元数据池;将所述元数据池中的每个元数据与所述数据标准池中的标准数据元进行对比,得到所述元数据池中的每个元数据与所述标准数据元的关系图谱。
进一步地,在构建数据标准池之后,所述方法还包括:
基于所述标准数据元和所述标准数据元的关联值域,生成所述数据元版本。
进一步地,在构建元数据池之后,所述方法还包括:基于所述元数据池中的元数据、所述元数据池中的元数据的数据类型和所述元数据池中的元数据的属性信息,生成元数据版本。
进一步地,在对发生变化的业务数据的元数据进行修改之后,所述方法还包括:将完成修改的所述发生变化的业务数据的元数据存储至所述元数据池中;基于完成修改的所述发生变化的业务数据的元数据、完成修改的所述发生变化的业务数据的元数据的数据类型和完成修改的所述发生变化的业务数据的元数据的属性信息,对所述数据元版本进行修改,得到目标数据元版本。
进一步地,在基于所述发生变化的业务数据的元数据的属性信息,将所述发生变化的业务数据的元数据与标准数据池中的标准数据元进行对比之后,所述方法还包括:为所述发生变化的业务数据的元数据标注对比结果。
第二方面,本发明实施例一种基于数据标准的元数据智能维护装置,该装置设置于服务器,包括:扫描单元,采集单元,对比单元和执行单元,其中,所述扫描单元用于扫描目标业务系统中的业务数据,得到扫描结果,其中,所述扫描结果用于确定所述目标业务系统中的业务数据是否发送变化;所述采集单元用于若所述扫描结果为所述目标业务系统中的业务数据发送变化,则采集发生变化的业务数据的元数据;述对比单元用于基于所述发生变化的业务数据的元数据的属性信息,将所述发生变化的业务数据的元数据与标准数据池中的标准数据元进行对比,其中,所述属性信息包括:字段类型,字段名称,字段长度,字段精度,注释号,所述标准数据池为基于预设数据元标准和标准数据元的数据元类型构建的数据池;所述执行单元用于若对比失败,则基于预设元数据标准对所述发生变化的业务数据的元数据进行修改,以实现对所述发生变化的业务数据的元数据的维护。
进一步地,所述执行单元还用于:若对比失败,则基于预设元数据标准,生成修改信息;将所述修改信息发送给所述目标业务系统,以使所述目标业务系统基于所述修改信息对发生变化的业务数据的元数据进行修改。
在本发明实施例中,首先,确定扫描目标业务系统,如果扫描出目标业务系统中的业务数据发生变话,则采集发生变化的业务数据的元数据,然后,基于所述发生变化的业务数据的元数据的属性信息,将所述发生变化的业务数据的元数据与标准数据池中的标准数据元进行对比,如果对比失败,则基于预设元数据标准对发生变化的业务数据的元数据进行修改,以实现对所述发生变化的业务数据的元数据的维护。通过服务器将元数据与标准数据元进行对比,以实现对业务系统中业务数据的元数据进行维护的目的,进而解决了现有技术在对业务系统中业务数据的元数据进行维护时需要人工将元数据与标准数据元进行对比,导致维护效率较低的技术问题,从而实现了提高对业务系统中业务数据的元数据进行维护的维护效率的技术效果。
本发明的其他特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。
为使本发明的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案,下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施方式,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种基于数据标准的元数据智能维护方法的流程图;
图2为本发明实施例提供的另一种基于数据标准的元数据智能维护方法的流程图;
图3为本发明实施例提供的另一种基于数据标准的元数据智能维护装置的示意图;
图4为本发明实施例提供的一种服务器的示意图.
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合附图对本发明的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
实施例一:
根据本发明实施例,提供了一种基于数据标准的元数据智能维护方法实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
图1是根据本发明实施例的一种基于数据标准的元数据智能维护方法,如图1所示,该方法包括如下步骤:
步骤S102,扫描目标业务系统中的业务数据,得到扫描结果,其中,所述扫描结果用于确定所述目标业务系统中的业务数据是否发送变化;
步骤S104,若所述扫描结果为所述目标业务系统中的业务数据发送变化,则采集发生变化的业务数据的元数据;
步骤S106,基于所述发生变化的业务数据的元数据的属性信息,将所述发生变化的业务数据的元数据与标准数据池中的标准数据元进行对比,其中,所述属性信息包括:字段类型,字段名称,字段长度,字段精度,注释号,所述标准数据池为基于预设数据元标准和标准数据元的数据元类型构建的数据池;
步骤S108,若对比失败,则基于预设元数据标准对所述发生变化的业务数据的元数据进行修改,以实现对所述发生变化的业务数据的元数据的维护。
在本发明实施例中,首先,确定扫描目标业务系统,如果扫描出目标业务系统中的业务数据发生变话,则采集发生变化的业务数据的元数据,然后,基于所述发生变化的业务数据的元数据的属性信息,将所述发生变化的业务数据的元数据与标准数据池中的标准数据元进行对比,如果对比失败,则基于预设元数据标准对发生变化的业务数据的元数据进行修改,以实现对所述发生变化的业务数据的元数据的维护。通过服务器将元数据与标准数据元进行对比,以实现对业务系统中业务数据的元数据进行维护的目的,进而解决了现有技术在对业务系统中业务数据的元数据进行维护时需要人工将元数据与标准数据元进行对比,导致维护效率较低的技术问题,从而实现了提高对业务系统中业务数据的元数据进行维护的维护效率的技术效果。
需要说明的是,上述的预设数据元标准包括:国家标准,行业标准,本地标准等。
另外,需要说明的是,上述步骤S102中的扫描行为,同一通过以下两种方式执行:
按照预设时间周期执行,该预设时间周期可以由工作人员根据实际情况自行设定,在本发明实施例中不做具体限定;
当业务系统出现业务数据变化时,业务系统向服务器发送扫描指令,以通知服务器对业务系统执行扫描行为。
通过两种方式可以满足元数据池的建设和元数据维护的不同采集需求,能够合理的利用服务器资源保障系统的业务系统和服务器的正常运行。
在本发明实施例中,如图2所示,步骤S108还包括如下步骤:
步骤S11,若对比失败,则基于预设元数据标准,生成修改信息;
步骤S12,将所述修改信息发送给所述目标业务系统,以使所述目标业务系统基于所述修改信息对发生变化的业务数据的元数据进行修改。
在本发明实施例中,如果发生变化的业务数据的元数据与标准数据池中的标准数据元对比失败,那么服务器可以根据预设数据元标准生成该发生变化的业务数据的元数据的修改信息。
将该修改信息发送给目标业务系统,以使工作人员能够根据该修改信息对发生变化的业务数据的元数据进行修改,得到更为符合预设数据元标准的元数据。
由于当下不同业务系统中的业务数据采用的数据元标准不同,因此无法实现不同业务系统之间的数据共享和资源共用,通过按照相同数据元标准对各个业务系统中的业务数据进行修改,从而能够实现不同业务系统之间的数据共享和数据共用。
另外,还需要说明的是,执行上述步骤S11至步骤S12时,除了将发生变化的业务数据的元数据与标准数据池中的标准数据元进行对比外,还能够对发生变化的业务数据的元数据字段进行同义词/近义词分析,若发生变化的业务数据的元数据字段不符合预设数据元标准的标准字段,且该字段为预设数据元标准的字段的近义词/同义词,那么服务器可以将该字段对应的预设数据元标准的标准字段添加至修改信息中。
在本发明实施例中,如图2所示,所述方法还包括如下步骤:
步骤S110,若对比成功,则构建所述发生变化的业务数据的元数据与所述标准数据元的关系图谱。
在本发明实施例中,如果发生变化的业务数据的元数据与标准数据池中的标准数据元对比成功,那么就构建发生变化的业务数据的元数据与标准数据元的关系图谱。
该关系图谱用于表征元数据、标准数据元和业务系统中的业务数据之间的关联关系,进而还能够从关系图谱中识别出能够进行共享的业务数据,为业务数据的共享奠定基础。
在本发明实施例中,在扫描目标业务系统中的业务数据之前,所述方法还包括:
步骤S21,基于所述预设数据元标准和所述标准数据元的数据元类型构建数据标准池;
步骤S22,采集所述目标业务系统中的元数据,并基于所述目标业务系统中的元数据、所述目标业务系统中元数据的类型和所述目标业务系统中元数据的属性信息,构建元数据池;
步骤S23,将所述元数据池中的每个元数据与所述数据标准池中的标准数据元进行对比,得到所述元数据池中的每个元数据与所述标准数据元的关系图谱。
需要说明的是,上述目标业务系统中的元数据的数据类型包括:业务元数据、技术元数据、管理元数据。
在本发明实施例中,在扫描目标业务系统中的业务数据之前,需要基于预设数据元标准和标准数据元的数据元类型构建数据标准池,以及需要采集目标业务系统中的元数据,并基于目标业务系统中的元数据、目标业务系统中元数据的类型和目标业务系统中元数据的属性信息,构建元数据池。
另外,还需要将元数据池中的每个元数据与数据标准池中的标准数据元进行对比,得到元数据池中的每个元数据与标准数据元的关系图谱。
通过构建数据标准池、元数据池和关系图谱,从而建立起各个业务系统中的业务数据之间的关联关系,以及各个业务数据的元数据之间的关联关系。
例如,首先,政府及企业首先需要基于国家标准、行业标准将标准数据元进行初始及装载入库,再基于数据元的类型进行合理的分类及管理,形成政企单位内部的标准池。
接着,服务器需要对政府及企业的已建业务系统进行元数据采集,形成元数据池。
最后,通过将元数据池中的每个元数据与数据标准池中的标准数据元进行对比,得到元数据池中的每个元数据与标准数据元的关系图谱。
在本发明实施例中,在构建数据标准池之后,所述方法还包括如下步骤:
步骤S31,基于所述标准数据元和所述标准数据元的关联值域,生成所述数据元版本。
在本发明实施例中,在构建数据标准池之后,可以根据标准数据元和标准数据元的关联值域,生成数据元版本。
该数据元版本能够使工作人员在对元数据进行维护时更加便捷,同时也方便工作人员对数据标准池中的标准数据元进行管理。
在本发明实施例中,在构建元数据池之后,所述方法还包括如下步骤:
步骤S41,基于所述元数据池中的元数据、所述元数据池中的元数据的数据类型和所述元数据池中的元数据的属性信息,生成元数据版本。
在本发明实施例中,在构建元数据池之后,还能够根据元数据池中的元数据、元数据池中的元数据的数据类型和元数据池中的元数据的属性信息,生成元数据版本。
该元数据版本用于表征元数据池中的元数据的内容,以及表征元数据池中的元数据是否符合预设数据元标准。
在本发明实施例中用,在对发生变化的业务数据的元数据进行修改之后,所述方法还包括如下步骤:
步骤S51,将完成修改的所述发生变化的业务数据的元数据存储至所述元数据池中;
步骤S52,基于完成修改的所述发生变化的业务数据的元数据、完成修改的所述发生变化的业务数据的元数据的数据类型和完成修改的所述发生变化的业务数据的元数据的属性信息,对所述数据元版本进行修改,得到目标数据元版本。
在本发明实施例中,当工作人员根据修改信息对发生变化的业务数据的元数据完成修改后,服务器将会把完成修改的发生变化的业务数据的元数据、完成修改的发生变化的业务数据的元数据的数据类型和完成修改的发生变化的业务数据的元数据的属性信息,对数据元版本进行修改,得到目标数据元版本。
通过将执行步骤S41后得到的元数据版本和目标元数据版本进行对比能够清楚的了解到发生变化的业务数据的元数据的修改变化,从而能够直观的分析每一次版本变化中的发生变化的业务数据的元数据的整改情况,判断业务系统中的业务数据对应的元数据是否达到最终百分之百符合预设数据元标准。
在本发明实施例中,在基于所述发生变化的业务数据的元数据的属性信息,将所述发生变化的业务数据的元数据与标准数据池中的标准数据元进行对比之后,所述方法还包括:
步骤S61,为所述发生变化的业务数据的元数据标注对比结果。
实施例二:
本发明还提供了一种基于数据标准的元数据智能维护装置,该装置设置与服务器,用于执行本发明实施例上述内容所提供的基于数据标准的元数据智能维护方法,以下是本发明实施例提供的基于数据标准的元数据智能维护装置的具体介绍。
如图3所示,该装置包括:扫描单元10,采集单元20,对比单元30和执行单元40,其中,
所述扫描单元10用于扫描目标业务系统中的业务数据,得到扫描结果,其中,所述扫描结果用于确定所述目标业务系统中的业务数据是否发送变化;
所述采集单元20用于若所述扫描结果为所述目标业务系统中的业务数据发送变化,则采集发生变化的业务数据的元数据;
所述对比单元30用于基于所述发生变化的业务数据的元数据的属性信息,将所述发生变化的业务数据的元数据与标准数据池中的标准数据元进行对比,其中,所述属性信息包括:字段类型,字段名称,字段长度,字段精度,注释号,所述标准数据池为基于预设数据元标准和标准数据元的数据元类型构建的数据池;
所述执行单元40用于若对比失败,则基于预设元数据标准对所述发生变化的业务数据的元数据进行修改,以实现对所述发生变化的业务数据的元数据的维护。
在本发明实施例中,首先,确定扫描目标业务系统,如果扫描出目标业务系统中的业务数据发生变话,则采集发生变化的业务数据的元数据,然后,基于所述发生变化的业务数据的元数据的属性信息,将所述发生变化的业务数据的元数据与标准数据池中的标准数据元进行对比,如果对比失败,则基于预设元数据标准对发生变化的业务数据的元数据进行修改,以实现对所述发生变化的业务数据的元数据的维护。通过服务器将元数据与标准数据元进行对比,以实现对业务系统中业务数据的元数据进行维护的目的,进而解决了现有技术在对业务系统中业务数据的元数据进行维护时需要人工将元数据与标准数据元进行对比,导致维护效率较低的技术问题,从而实现了提高对业务系统中业务数据的元数据进行维护的维护效率的技术效果。
可选地,所述执行单元还用于:若对比失败,则基于预设元数据标准,生成修改信息;将所述修改信息发送给所述目标业务系统,以使所述目标业务系统基于所述修改信息对发生变化的业务数据的元数据进行修改。
可选地,所述执行单元还用:若对比成功,则构建所述发生变化的业务数据的元数据与所述标准数据元的关系图谱。
可选地,所述装置还包括:构建单元,用于基于所述预设数据元标准和所述标准数据元的数据元类型构建数据标准池;采集所述目标业务系统中的元数据,并基于所述目标业务系统中的元数据、所述目标业务系统中元数据的类型和所述目标业务系统中元数据的属性信息,构建元数据池,其中,所述目标业务系统中的元数据的数据类型包括:业务元数据、技术元数据、管理元数据;将所述元数据池中的每个元数据与所述数据标准池中的标准数据元进行对比,得到所述元数据池中的每个元数据与所述标准数据元的关系图谱。
可选地,所述构建单元还用于:在构建数据标准池之后,基于所述标准数据元和所述标准数据元的关联值域,生成数据元版本。
可选地,所述构建单元还用于:在构建元数据池之后,基于所述元数据池中的元数据、所述元数据池中的元数据的数据类型和所述元数据池中的元数据的属性信息,生成元数据版本。
可选地,所述构建单元还用于:在对发生变化的业务数据的元数据进行修改之后,将完成修改的所述发生变化的业务数据的元数据存储至所述元数据池中;基于完成修改的所述发生变化的业务数据的元数据、完成修改的所述发生变化的业务数据的元数据的数据类型和完成修改的所述发生变化的业务数据的元数据的属性信息,对所述数据元版本进行修改,得到目标数据元版本。
可选地,所述装置还包括:标注单元,用于在基于所述发生变化的业务数据的元数据的属性信息,将所述发生变化的业务数据的元数据与标准数据池中的标准数据元进行对比之后,为所述发生变化的业务数据的元数据标注对比结果。
参见图4,本发明实施例还提供一种服务器100,包括:处理器60,存储器61,总线62和通信接口63,所述处理器60、通信接口63和存储器61通过总线62连接;处理器60用于执行存储器61中存储的可执行模块,例如计算机程序。
其中,存储器61可能包含高速随机存取存储器(RAM,RandomAccessMemory),也可能还包括非不稳定的存储器(non-volatile memory),例如至少一个磁盘存储器。通过至少一个通信接口63(可以是有线或者无线)实现该系统网元与至少一个其他网元之间的通信连接,可以使用互联网,广域网,本地网,城域网等。
总线62可以是ISA总线、PCI总线或EISA总线等。所述总线可以分为地址总线、数据总线、控制总线等。为便于表示,图4中仅用一个双向箭头表示,但并不表示仅有一根总线或一种类型的总线。
其中,存储器61用于存储程序,所述处理器60在接收到执行指令后,执行所述程序,前述本发明实施例任一实施例揭示的流过程定义的装置所执行的方法可以应用于处理器60中,或者由处理器60实现。
处理器60可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器60中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器60可以是通用处理器,包括中央处理器(Central Processing Unit,简称CPU)、网络处理器(Network Processor,简称NP)等;还可以是数字信号处理器(Digital SignalProcessing,简称DSP)、专用集成电路(Application Specific Integrated Circuit,简称ASIC)、现成可编程门阵列(Field-Programmable Gate Array,简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器61,处理器60读取存储器61中的信息,结合其硬件完成上述方法的步骤。
另外,在本发明实施例的描述中,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或一体地连接;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通。对于本领域的普通技术人员而言,可以具体情况理解上述术语在本发明中的具体含义。
在本发明的描述中,需要说明的是,术语“中心”、“上”、“下”、“左”、“右”、“竖直”、“水平”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。此外,术语“第一”、“第二”、“第三”仅用于描述目的,而不能理解为指示或暗示相对重要性。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上所述实施例,仅为本发明的具体实施方式,用以说明本发明的技术方案,而非对其限制,本发明的保护范围并不局限于此,尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化,或者对其中部分技术特征进行等同替换;而这些修改、变化或者替换,并不使相应技术方案的本质脱离本发明实施例技术方案的精神和范围,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应所述以权利要求的保护范围为准。
Claims (9)
1.一种基于数据标准的元数据智能维护方法,其特征在于,应用于服务器,包括:
扫描目标业务系统中的业务数据,得到扫描结果,其中,所述扫描结果用于确定所述目标业务系统中的业务数据是否发送变化;
若所述扫描结果为所述目标业务系统中的业务数据发生变化,则采集发生变化的业务数据的元数据;
基于所述发生变化的业务数据的元数据的属性信息,将所述发生变化的业务数据的元数据与标准数据池中的标准数据元进行对比,其中,所述属性信息包括:字段类型,字段名称,字段长度,字段精度,注释号,所述标准数据池为基于预设数据元标准和标准数据元的数据元类型构建的数据池;
若对比失败,则基于预设元数据标准和工作人员的修改操作对所述发生变化的业务数据的元数据进行修改,以实现对所述发生变化的业务数据的元数据的维护;
在扫描目标业务系统中的业务数据之前,所述方法还包括:
基于所述预设数据元标准和所述标准数据元的数据元类型构建数据标准池;
采集所述目标业务系统中的元数据,并基于所述目标业务系统中的元数据、所述目标业务系统中元数据的类型和所述目标业务系统中元数据的属性信息,构建元数据池,其中,所述目标业务系统中的元数据的数据类型包括:业务元数据、技术元数据、管理元数据;
将所述元数据池中的每个元数据与所述数据标准池中的标准数据元进行对比,得到所述元数据池中的每个元数据与所述标准数据元的关系图谱。
2.根据权利要求1所述的方法,其特征在于,基于预设元数据标准对所述发生变化的业务数据的元数据进行修改包括:
若对比失败,则基于所述预设数据元标准,生成修改信息;
将所述修改信息发送给所述目标业务系统,以使所述目标业务系统基于所述修改信息对发生变化的业务数据的元数据进行修改。
3.根据权利要求1或2所述的方法,其特征在于,所述方法还包括:
若对比成功,则构建所述发生变化的业务数据的元数据与所述标准数据元的关系图谱。
4.根据权利要求1所述的方法,其特征在于,在构建数据标准池之后,所述方法还包括:
基于所述标准数据元和所述标准数据元的关联值域,生成数据元版本。
5.根据权利要求4所述的方法,其特征在于,在构建元数据池之后,所述方法还包括:
基于所述元数据池中的元数据、所述元数据池中的元数据的数据类型和所述元数据池中的元数据的属性信息,生成元数据版本。
6.根据权利要求5所述的方法,其特征在于,在对发生变化的业务数据的元数据进行修改之后,所述方法还包括:
将完成修改的所述发生变化的业务数据的元数据存储至所述元数据池中;
基于完成修改的所述发生变化的业务数据的元数据、完成修改的所述发生变化的业务数据的元数据的数据类型和完成修改的所述发生变化的业务数据的元数据的属性信息,对所述数据元版本进行修改,得到目标数据元版本。
7.根据权利要求1所述的方法,其特征在于,在基于所述发生变化的业务数据的元数据的属性信息,将所述发生变化的业务数据的元数据与标准数据池中的标准数据元进行对比之后,所述方法还包括:
为所述发生变化的业务数据的元数据标注对比结果。
8.一种基于数据标准的元数据智能维护装置,其特征在于,设置于服务器,包括:扫描单元,采集单元,对比单元和执行单元,其中,
所述扫描单元用于扫描目标业务系统中的业务数据,得到扫描结果,其中,所述扫描结果用于确定所述目标业务系统中的业务数据是否发送变化;
所述采集单元用于若所述扫描结果为所述目标业务系统中的业务数据发送变化,则采集发生变化的业务数据的元数据;
所述对比单元用于基于所述发生变化的业务数据的元数据的属性信息,将所述发生变化的业务数据的元数据与标准数据池中的标准数据元进行对比,其中,所述属性信息包括:字段类型,字段名称,字段长度,字段精度,注释号,所述标准数据池为基于预设数据元标准和标准数据元的数据元类型构建的数据池;
所述执行单元用于若对比失败,则基于预设元数据标准和工作人员的修改操作对所述发生变化的业务数据的元数据进行修改,以实现对所述发生变化的业务数据的元数据的维护;
其中,所述装置还包括:构建单元,用于基于所述预设数据元标准和所述标准数据元的数据元类型构建数据标准池;采集所述目标业务系统中的元数据,并基于所述目标业务系统中的元数据、所述目标业务系统中元数据的类型和所述目标业务系统中元数据的属性信息,构建元数据池,其中,所述目标业务系统中的元数据的数据类型包括:业务元数据、技术元数据、管理元数据;将所述元数据池中的每个元数据与所述数据标准池中的标准数据元进行对比,得到所述元数据池中的每个元数据与所述标准数据元的关系图谱。
9.根据权利要求8所述的装置,其特征在于,所述执行单元还用于:
若对比失败,则基于预设元数据标准,生成修改信息;
将所述修改信息发送给所述目标业务系统,以使所述目标业务系统基于所述修改信息对发生变化的业务数据的元数据进行修改。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811587875.0A CN109670091B (zh) | 2018-12-24 | 2018-12-24 | 一种基于数据标准的元数据智能维护方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811587875.0A CN109670091B (zh) | 2018-12-24 | 2018-12-24 | 一种基于数据标准的元数据智能维护方法和装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109670091A CN109670091A (zh) | 2019-04-23 |
CN109670091B true CN109670091B (zh) | 2020-11-10 |
Family
ID=66147191
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811587875.0A Active CN109670091B (zh) | 2018-12-24 | 2018-12-24 | 一种基于数据标准的元数据智能维护方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109670091B (zh) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110929120B (zh) * | 2019-11-15 | 2022-09-09 | 北京明略软件系统有限公司 | 管理技术元数据的方法和装置 |
CN111381864A (zh) * | 2020-04-01 | 2020-07-07 | 中国铁塔股份有限公司 | 一种软件系统的配置方法及装置 |
CN111552713A (zh) * | 2020-04-30 | 2020-08-18 | 国网信息通信产业集团有限公司 | 一种数据校验方法及装置 |
CN112699160B (zh) * | 2021-03-23 | 2022-04-26 | 中国信息通信研究院 | 元数据模板升级方法、装置及可读存储介质 |
CN115374108B (zh) * | 2022-07-22 | 2023-06-20 | 北京三维天地科技股份有限公司 | 一种基于知识图谱技术的数据标准生成与自动映射方法 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101094051B (zh) * | 2007-06-27 | 2011-05-11 | 中国移动通信集团四川有限公司 | 数据一致性比对同步的系统和方法 |
CN103593443A (zh) * | 2013-11-18 | 2014-02-19 | 南京新模式软件集成有限公司 | 一种电子文件元数据扩展的方法 |
CN104699735A (zh) * | 2014-11-20 | 2015-06-10 | 国家电网公司 | 企业级数据中心的数据处理方法及装置 |
CN108959395B (zh) * | 2018-06-04 | 2020-11-06 | 广西大学 | 一种面向多源异构大数据的层次约减联合清洗方法 |
CN108959564B (zh) * | 2018-07-04 | 2020-11-27 | 玖富金科控股集团有限责任公司 | 数据仓库元数据管理方法、可读存储介质和计算机设备 |
-
2018
- 2018-12-24 CN CN201811587875.0A patent/CN109670091B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN109670091A (zh) | 2019-04-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109670091B (zh) | 一种基于数据标准的元数据智能维护方法和装置 | |
CN108776934B (zh) | 分布式数据计算方法、装置、计算机设备及可读存储介质 | |
CN107506451B (zh) | 用于数据交互的异常信息监控方法及装置 | |
CN109508352B (zh) | 一种报表数据的输出方法、装置、设备和存储介质 | |
CN109241358A (zh) | 元数据管理方法、装置、计算机设备及存储介质 | |
CN109086182B (zh) | 数据库自动告警的方法及终端设备 | |
CN108255620B (zh) | 一种业务逻辑处理方法、装置、业务服务器及系统 | |
CN114116065B (zh) | 获取拓扑图数据对象的方法、装置、及电子设备 | |
WO2020168756A1 (zh) | 集群日志特征提取方法、装置、设备及存储介质 | |
CN110134653B (zh) | 一种利用日志辅助数据库审计方法及系统 | |
CN111147306B (zh) | 一种物联网设备的故障分析方法、装置以及物联网平台 | |
CN110866259A (zh) | 一种基于多维度数据计算安全隐患评分方法和系统 | |
CN112818937B (zh) | Excel文件的识别方法、装置、电子设备及可读存储介质 | |
CN110807050B (zh) | 性能分析方法、装置、计算机设备及存储介质 | |
CN112434308A (zh) | 应用漏洞检测方法、装置、电子设备及计算机存储介质 | |
WO2020181819A1 (zh) | 智能调度方法、装置、计算机设备及存储介质 | |
CN107798086B (zh) | 服务器信息更新方法、装置、系统及电子设备 | |
CN107908525B (zh) | 告警处理方法、设备及可读存储介质 | |
CN114356712A (zh) | 数据处理方法、装置、设备、可读存储介质及程序产品 | |
CN112836124A (zh) | 一种画像数据获取方法、装置、电子设备及存储介质 | |
CN110866007B (zh) | 大数据应用和表的信息管理方法、系统和计算机设备 | |
CN107943912A (zh) | 一种响应式资源目录数据可视化管理方法、终端及装置 | |
KR102464688B1 (ko) | 모니터링 결과의 이벤트 등급 결정 방법 및 장치 | |
CN110888733A (zh) | 集群资源使用情况处理方法、装置及电子设备 | |
CN115422195A (zh) | 一种网络资产管理方法、装置、设备、存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |