CN110765205A - 基于区块链的元数据管理方法、系统和计算机存储介质 - Google Patents
基于区块链的元数据管理方法、系统和计算机存储介质 Download PDFInfo
- Publication number
- CN110765205A CN110765205A CN201910966337.0A CN201910966337A CN110765205A CN 110765205 A CN110765205 A CN 110765205A CN 201910966337 A CN201910966337 A CN 201910966337A CN 110765205 A CN110765205 A CN 110765205A
- Authority
- CN
- China
- Prior art keywords
- metadata
- block chain
- local database
- processing information
- instruction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000007726 management method Methods 0.000 title claims abstract description 221
- 238000012545 processing Methods 0.000 claims abstract description 129
- 238000000034 method Methods 0.000 claims description 38
- 238000004590 computer program Methods 0.000 claims description 25
- 230000001360 synchronised effect Effects 0.000 claims description 25
- 230000004048 modification Effects 0.000 claims description 22
- 238000012986 modification Methods 0.000 claims description 22
- 238000012217 deletion Methods 0.000 claims description 9
- 230000037430 deletion Effects 0.000 claims description 9
- 239000000284 extract Substances 0.000 claims description 7
- 238000010586 diagram Methods 0.000 description 15
- 238000013523 data management Methods 0.000 description 8
- 230000008569 process Effects 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 238000012544 monitoring process Methods 0.000 description 3
- 230000004075 alteration Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 230000007723 transport mechanism Effects 0.000 description 1
- 238000012384 transportation and delivery Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/23—Updating
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了基于区块链的元数据管理方法、系统和计算机存储介质,其中,基于区块链的元数据管理方法包括:获取元数据的处理信息;根据所述元数据的处理信息,向元数据管理合约模块发送相应操作指令及该元数据,以在区块链上完成所述元数据的处理信息所对应的操作,获取到可同步区块链上的元数据至本地数据库的指令后,同步区块链上的元数据至本地数据库。本发明的技术方案,能够去中心化的管理元数据,既保证了元数据的真实性,又杜绝了数据污染、篡改的现象,实现通过多个业务端对元数据进行管理、备份。
Description
技术领域
本发明涉及数据管理技术领域,尤其涉及基于区块链的元数据管理方法、系统和计算机存储介质。
背景技术
随着元数据量的增长和业务的需要,很多需求是需要联合多个企业或者单位的元数据才能完成,这样元数据由各方提供,即元数据分散在各个组织内部,数据的使用方无法保证使用的数据真实可靠,现有的元数据管理技术都是针对数据库或数据仓库的数据管理,目前的元数据管理方式产生以下弊端:
1、元数据中心化存储,无法保证真实性和不可篡改;
2、单点存储元数据,存在单点问题,系统的鲁棒性低;
3、元数据修改不易进行溯源,当客户端对数据进行修改后,无法找到历史数据、操作者信息及修改记录;
4、无法满足跨域的去中心化跨域管理场景。
发明内容
本发明旨在解决上面描述的问题。本发明的一个目的是提供一种解决以上问题中的任何一个的基于区块链的元数据管理方法、系统和计算机存储介质。具体地,本发明提供能够去中心化的管理元数据,既保证了元数据的真实性,又杜绝了数据污染、篡改的现象,实现通过多个业务端对元数据进行管理、备份的基于区块链的元数据管理方法及系统。
根据本发明的第一方面,本发明提供了一种基于区块链的元数据管理方法,应用于元数据管理节点,所述方法包括:
获取元数据的处理信息;
根据所述元数据的处理信息,向元数据管理合约模块发送相应操作指令及该元数据,以在区块链上完成所述元数据的处理信息所对应的操作,获取到可同步区块链上的元数据至本地数据库的指令后,同步区块链上的元数据至本地数据库。
上述的基于区块链的元数据管理方法还可以具有以下特征:
所述根据所述元数据的处理信息,向元数据管理合约模块发送相应操作指令及该元数据,以在区块链上完成所述元数据的处理信息所对应的操作,获取到可同步区块链上的元数据至本地数据库的指令后,同步区块链上的元数据至本地数据库包括:
当所述元数据的处理信息为创建元数据时,生产针对需创建的元数据的标识,将创建元数据的指令和该需创建的元数据发送给元数据管理合约模块,以将该需创建的元数据写入区块链,获取到可同步区块链上的元数据至本地数据库的指令后,获取区块信息,提取该元数据存入本地数据库;
当所述元数据的处理信息为修改元数据时,根据该元数据的标识,查询本地数据库,判断所述本地数据库中是否存储该元数据,如果有,将修改元数据的指令和修改后的元数据发送至元数据管理合约模块,以将修改后的元数据写入区块链,获取到可同步区块链上的元数据至本地数据库的指令后,获取区块信息,提取修改操作和元数据,将修改操作和元数据更新应用于本地数据库;
当所述元数据的处理信息为删除元数据时,根据该元数据的标识,查询本地数据库,判断所述本地数据库中是否存储该元数据,如果有,删除元数据的指令和该元数据的标识发送至元数据管理合约模块,获取到可同步区块链上的元数据至本地数据库的指令后,获取区块信息,提取删除操作和元数据信息,在本地数据库上删除该元数据;
当所述元数据的处理信息为访问元数据时,根据该元数据的标识,查询本地数据库,判断所述本地数据库中是否存储该元数据,如果有,返回该元数据的相关信息;
当所述元数据的处理信息为元数据溯源请求时,根据该元数据的标识,查询本地数据库,判断所述本地数据库中是否存储该元数据,如果有,将该元数据的溯源请求的指令和该元数据的标识发送至元数据管理合约模块,以从区块链处获得该元数据的溯源信息。
上述的基于区块链的元数据管理方法还可以具有以下特征:
所述方法还包括:当所述元数据管理节点为新增节点时,将区块链上所有元数据同步至该新增节点的本地数据库;
当所述元数据管理节点重启时,从重启前一次操作同步的元数据开始,继续同步。
根据本发明的第二方面,提供了一种基于区块链的元数据管理方法,应用于元数据管理节点,所述方法包括:
多个元数据管理节点中的至少一个元数据管理节点获取元数据的处理信息,根据所述元数据的处理信息,向元数据管理合约模块发送相应操作指令及该元数据,以在区块链上完成所述元数据的处理信息所对应的操作,获取到可同步区块链上的元数据至本地数据库的指令后,同步区块链上的元数据至本地数据库,
其他元数据管理节点获取可同步区块链上的元数据至本地数据库的指令,根据所述可同步区块链上的元数据至本地数据库的指令,提取区块链上的元数据的处理信息及该元数据,同步本地数据库中相应元数据的相关信息。
根据本发明的第三方面,提供了一种基于区块链的元数据管理方法,应用于区块链,所述方法包括:
元数据管理合约模块收到元数据处理信息的相应操作指令,根据所述相应的操作指令,在区块链上完成所述元数据的处理信息所对应的操作。
根据本发明的第四方面,提供了一种基于区块链的元数据管理系统,应用于元数据管理节点,所述系统包括:
元数据管理节点:用于获取元数据的处理信息,根据所述元数据的处理信息,向元数据管理合约模块发送相应操作指令及该元数据,以在区块链上完成所述元数据的处理信息所对应的操作,获取到可同步区块链上的元数据至本地数据库的指令后,同步区块链上的元数据至本地数据库。
根据本方面的第五方面,提供了一种基于区块链的元数据管理系统,应用于区块链,所述系统包括:
元数据管理合约模块:用于收到元数据处理信息的相应操作指令,根据所述相应的操作指令,在区块链上完成所述元数据的处理信息所对应的操作。
根据本方面的第六方面,提供了一种计算机存储介质,应用于元数据管理节点,包括处理器和存储器,所述存储器存储有计算机程序,所述处理器用以调用所述存储器中的计算机程序以实现如上述第一方面的技术方案中任一项所述的基于区块链的元数据管理方法的步骤。
根据本发明的第七方面,提供了一种计算机存储介质,应用于元数据管理节点,包括处理器和存储器,所述存储器存储有计算机程序,所述处理器用以调用所述存储器中的计算机程序以实现如上述第二方面的技术方案中所述的基于区块链的元数据管理方法的步骤。
根据本发明的第八方面,提供了一种计算机存储介质,应用于元数据管理节点,包括处理器和存储器,所述存储器存储有计算机程序,所述处理器用以调用所述存储器中的计算机程序以实现如上述第三方面的技术方案所述的基于区块链的元数据管理方法的步骤。
发明提供的基于元数据管理方法及其系统是一个去中心化的管理架构,通过元数据将数据的描述信息存入区块链而不是直接存储数据,降低区块链数据的容量,减少链上存储压力,同时元数据的管理节点通过区块链同步数据,保证了数据的一致性,也增加了系统鲁棒性;
通过将元数据存储在区块链中,既保证了元数据的真实性,又杜绝了数据污染、篡改的现象,而且每个元数据管理节点都可以是一个跨业务领域的数据节点,各个元数据管理节点都可以通过区块链同步元数据的信息,这样实现了通过多个业务端对元数据进行管理、备份。
本发明中供元数据本地存储的本地数据库,还用于存储同步后的链上的元数据,解决了元数据管理的单点问题,提高元数据管理系统的可靠性;通过直接在元数据管理节点的本地数据库中查询元数据的信息,还能够减少对区块链的访问压力,提高对元数据的访问效率。
参照附图来阅读对于示例性实施例的以下描述,本发明的其他特性特征和优点将变得清晰。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本文。
附图说明
构成本文的一部分的附图用来提供对本文的进一步理解,本文的示意性实施例及其说明用于解释本文,并不构成对本文的不当限定。在附图中:
图1是根据一示例性实施例示出的一种适用于元数据管理节点的基于元数据管理方法的流程图;
图2是元数据的处理信息为创建元数据时采用基于元数据管理方法的流程图;
图3是元数据的处理信息为修改元数据时采用基于元数据管理方法的流程图;
图4是元数据的处理信息为删除元数据时采用基于元数据管理方法的流程图;
图5是元数据的处理信息为访问元数据时采用基于元数据管理方法的流程图;
图6是元数据的处理信息为元数据溯源请求时采用基于元数据管理方法的流程图;
图7是根据一示例性实施例二示出的一种适用于元数据管理节点的基于元数据管理方法的流程图;
图8是根据一示例性实施例示出的一种适用于区块链的基于元数据管理方法的流程图;
图9是根据一示例性实施例示出的一种应用于应用于元数据管理节点的基于元数据管理系统的框图;
图10是根据一示例性实施例示出的一种应用于区块链的基于元数据管理系统的框图。
具体实施例
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互任意组合。
在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行。并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
实施例一
图1是根据一示例性实施例示出的一种基于元数据管理方法的流程图,应用于元数据管理节点,图1所示方法包括:
步骤101:获取元数据的处理信息;
在一个示例性实施例中,元数据管理节点可以对应一个业务领域用来管理数据的终端设备或者服务器,其中,元数据管理节点可以分为:元数据管理前端模块和管理节点后端模块,获取元数据的处理信息的可以为元数据管理节点的前端模块,其中,元数据是数据的描述信息,元数据的处理信息可以包括:创建元数据、修改元数据、删除元数据、访问元数据、元数据溯源请求。
步骤102:根据元数据的处理信息,向元数据管理合约模块发送相应操作指令及该元数据,以在区块链上完成元数据的处理信息所对应的操作;获取到可同步区块链上的元数据至本地数据库的指令后,同步区块链上的元数据至本地数据库。
在一个示例性实施例中,可以通过元数据管理节点的后端模块来接收该元数据的处理信息,根据该元数据的处理信息,该后端模块向元数据管理合约模块发送相应操作指令,数据管理合约模块接收到该元数据的处理信息后在区块链上完成该元数据的处理信息对应的操作,在数据管理合约模块在区块链上完成该元数据的处理信息对应的操作后,元数据管理模块对该元数据的处理信息在区块链上进行广播,元数据管理节点的后端模块获取到可同步区块链上的元数据至本地数据库的指令后,则同步区块链上的元数据至本地数据库,元数据将数据的描述信息存入区块链而不是直接存储数据,一方面,降低区块链数据的容量,减少链上存储压力;另一方面。保证了元数据管理节点中的元数据的具备不可篡改性、保证元数据的真实性。
元数据管理节点获取到可同步区块链上的元数据至本地数据库的指令的方式可以是:元数据管理节点以监听到区块链网络达成共识作为可同步区块链上的元数据至本地数据库的指令,也可以是由区块链将可同步区块链上的元数据至本地数据库的指令发送给元数据管理节点。
本文示例性实施例提供的方法,通过元数据将数据的描述信息存入区块链而不是直接存储数据,降低区块链数据的容量,减少链上存储压力,同时元数据的管理节点通过区块链同步数据,实现了一个去中心化的架构,通过管理合约模块将元数据信息存储在区块链中来建立存证流程,保证了元数据的真实性,杜绝了元数据被污染篡改的现象;另外,元数据管理节点通过本地数据库对元数据进行本地存储数据,解决了元数据管理的单点问题。
下面对本文示例性实施例提供的方法进行说明:
为了提高元数据管理系统的可靠,减少对区块链的访问压力,提高对元数据的访问效率,根据元数据的处理信息的不同,向元数据管理合约模块发送相应操作指令及该元数据,以在区块链上完成所述元数据的处理信息所对应的操作,获取到可同步区块链上的元数据至本地数据库的指令后,同步区块链上的元数据至本地数据库的执行方式也不同。
当采用基于元数据管理方法的创建元数据时,具体执行过程如图2所示包括:
步骤201:元数据的处理信息为创建元数据;
步骤202:生产针对需创建的元数据的标识,将创建元数据的指令和该需创建的元数据发送给元数据管理合约模块,以将该需创建的元数据写入区块链;
步骤203:获取到可同步区块链上的元数据至本地数据库的指令后,获取区块信息,提取该元数据存入本地数据库。
在一个示例性实施例中,元数据管理节点的后端模块接收的元数据的处理信息为创建元数据,该后端模块生产针对该创建的元数据的标识,并将创建元数据的指令和该需创建的元数据发送给元数据管理合约模块,以将该需创建的元数据写入到区块链上,后端模块可通过监听的方式获取到可同步区块链上的元数据至本地数据库的指令后,获取区块信息,后端模块提取该元数据,在元数据管理节点的本地数据库中保存该元数据,通过元数据将数据的描述信息存入区块链而不是直接存储数据,降低区块链数据的容量,减少链上存储压力。
当采用基于元数据管理方法的修改元数据时,具体执行过程如图3所示包括:
步骤301:元数据的处理信息为修改元数据;
步骤302:根据该元数据的标识,查询本地数据库;
步骤303:判断本地数据库中是否存储该元数据,如果有,执行下一步;如果没有,则转至执行步骤306:返回错误信息反馈。
步骤304:将修改元数据的指令和修改后的元数据发送至元数据管理合约模块,以将修改后的元数据写入区块链;
步骤305:获取到可同步区块链上的元数据至本地数据库的指令后,获取区块信息,提取修改操作和元数据,将修改操作和元数据更新应用于本地数据库。
在一个示例性实施例中,元数据管理节点的后端模块接收的元数据的处理信息为修改元数据,为了防止非法输入而随意访问区块链,元数据管理节点的后端模块根据该元数据的标识查询本地数据库,后端模块判断本地数据库中存储该元数据,则将修改元数据的指令和修改后的元数据发送至元数据管理合约模块,以将修改后的元数据写入区块链,后端模块可通过监听的方式获取到元数据管理合约模块在区块链上修改元数据的指令后,获取区块信息,提取修改操作和元数据,将修改操作和元数据更新应用于本地数据库,即将元数据管理节点的本地数据库中的该元数据替换为修改后的元数据,若是本地数据库中未存储该元数据,则返回错误信息反馈至前端模块,如:未查询到相关信息或者信息错误等提示信息,不再对区块链进行访问。
当采用基于元数据管理方法的删除元数据时,具体执行过程如图4所示包括:
步骤401:元数据的处理信息为删除元数据;
步骤402:根据该元数据的标识,查询本地数据库;
步骤403:判断本地数据库中是否存储该元数据,如果有,执行下一步;如果没有,则转至执行步骤406:返回错误信息反馈。
步骤404:删除元数据的指令和该元数据的标识发送至元数据管理合约模块;
步骤405:获取到可同步区块链上的元数据至本地数据库的指令后,获取区块信息,提取删除操作和元数据信息,在本地数据库上删除该元数据。
在一个示例性实施例中,元数据管理节点的后端模块接收的元数据的处理信息为删除元数据,为了防止非法输入而任意访问区块链来随意删除元数据,元数据管理节点的后端模块根据该元数据的标识查询本地数据库,后端模块判断本地数据库中是否存储该元数据,如果有,将删除元数据的指令和该元数据的标识发送至元数据管理合约模块,后端模块可通过监听的方式获取到获取到可同步区块链上的元数据至本地数据库的指令后,获取区块信息,提取删除操作和元数据信息,在本地数据库上对该元数据进行删除操作;若是本地数据库中未存储该元数据,则返回错误信息反馈至前端模块,如:未查询到相关信息或者信息错误等提示信息,不再对区块链进行访问。
当采用基于元数据管理方法的删除元数据时,具体执行过程如图5所示包括:
步骤501:元数据的处理信息为访问元数据,
步骤502:根据该元数据的标识,查询本地数据库;
步骤503:判断本地数据库中是否存储该元数据,如果有,执行下一步;如果没有,则转至执行步骤505:返回错误信息反馈。
步骤504:返回该元数据的相关信息。
在一个示例性实施例中,元数据管理节点的后端模块接收的元数据的处理信息为访问元数据,为了防止任意输入而任意访问区块链,元数据管理节点的后端模块根据该元数据的标识查询本地数据库,后端模块判断本地数据库中是否存储该元数据,如果有,将返回该元数据的相关信息,若是本地数据库中未存储该元数据,则返回错误信息反馈至前端模块,如:未查询到相关信息或者信息错误等提示信息,不再对区块链进行访问。
当采用基于元数据管理方法的删除元数据时,具体执行过程如图6所示包括:
步骤601:元数据的处理信息为元数据溯源请求;
步骤602:根据该元数据的标识,查询本地数据库;
步骤603:判断本地数据库中是否存储该元数据,如果有,执行下一步;如果没有,则转至执行步骤606:返回错误信息反馈。
步骤604:将该元数据的溯源请求的指令和该元数据的标识发送至元数据管理合约模块,以从区块链处获得该元数据的溯源信息;
步骤605:返回该元数据的溯源信息。
在一个示例性实施例中,元数据管理节点的后端模块接收的元数据的处理信息为元数据溯源请求,元数据管理节点的后端模块根据元数据的标识查询本地数据库,为了防止任意输入而任意访问区块链,后端模块判断本地数据库中是否存储该元数据,如果有,将该元数据的溯源请求的指令和该元数据的标识发送至元数据管理合约模块,以从区块链处获得该元数据的溯源信息,后端模块将该元数据的溯源信息,并返回至前端模块;若是本地数据库中未存储该元数据,则返回错误信息反馈至前端模块,如:未查询到相关信息或者信息错误等提示信息,不再对区块链进行访问,节约访问时间,从而提高查询效率
本文示例性实施例提供的方法,基于获取元数据的处理信息,向元数据管理合约模块发送相应操作指令及该元数据,以在区块链上完成元数据的处理信息所对应的操作,获取到可同步区块链上的元数据至本地数据库的指令后,提取该元数据的处理信息,并利用本地数据库存储元数据信息,一方面,完成各个元数据管理节点在本地的本地数据库中同步区块链上的元数据,以解决元数据单点存储的问题,增加系统的鲁棒性,实现提高元数据管理的可靠性;另一方面,元数据的处理信息在可在本地数据库中直接进行查询,减少对区块链的压力,提高元数据访问的效率。
元数据管理节点在从区块链中向本地数据库同步相应元数据的相关信息时,还会发生以下两种情况:
一、元数据管理节点为新增节点;
二、元数据管理节点发生重启。
在一个示例性实施例中,当元数据管理节点为新增节点时,将区块链上所有元数据同步至该新增节点的本地数据库;当元数据管理节点重启时,从重启前一次操作同步的元数据开始,继续同步。
元数据管理节点的后端模块通过元数据合约模块以从区块链向本地数据库中同步元数据的相关信息时,为了能够防止丢失元数据,需读取区块链的上一次同步的块高度,当上一次同步的块高度为零时,则判断元数据管理节点为新增节点,将区块链上所有的元数据同步至该新增节点的本地数据库中;当上一次同步的块高度为非零时,则判断元数据管理节点重启,从重启前一次操作同步的元数据开始,继续同步至本地数据库中。
实施例二
图7是实施例二示出的一种基于元数据管理方法的流程图,应用于元数据管理节点,图7所示方法包括:
步骤701:多个元数据管理节点中的至少一个元数据管理节点获取元数据的处理信息;
在一个示例性实施例中,每个元数据管理节点可以对应一个业务领域用来管理数据的终端设备或者服务器,其中,每个元数据管理节点可以分为:元数据管理前端模块和管理节点后端模块,获取元数据的处理信息的可以为元数据管理节点的前端模块,其中,元数据的处理信息可以包括:创建元数据、修改元数据、删除元数据、访问元数据、元数据溯源请求。
步骤702:根据元数据的处理信息,向元数据管理合约模块发送相应操作指令及该元数据,以在区块链上完成元数据的处理信息所对应的操作,获取到可同步区块链上的元数据至本地数据库的指令后,同步区块链上的元数据至本地数据库;
在一个示例性实施例中,可以通过元数据管理节点的后端模块来接收该元数据的处理信息,根据该元数据的处理信息,该后端模块向元数据管理合约模块发送相应操作指令,数据管理合约模块接收到该元数据的处理信息后在区块链上完成该元数据的处理信息对应的操作,在数据管理合约模块在区块链上完成该元数据的处理信息对应的操作后,元数据管理模块对该元数据的处理信息在区块链上进行广播,元数据管理节点的后端模块获取到可同步区块链上的元数据至本地数据库的指令后,则同步区块链上的元数据至本地数据库,从而保证了元数据管理节点中的元数据的具备不可篡改性、保证元数据的真实性。
步骤703:其他元数据管理节点获取可同步区块链上的元数据至本地数据库的指令,根据可同步区块链上的元数据至本地数据库的指令,提取区块链上的元数据的处理信息及该元数据,同步本地数据库中相应元数据的相关信息。
在一个示例性实施例中,在元数据管理模块对该元数据的处理信息在区块链上进行广播后,其他元数据管理节点也会同时获取可同步区块链上的元数据至本地数据库的指令,根据可同步区块链上的元数据至本地数据库的指令,提取区块链上的元数据的处理信息及该元数据,同步本地数据库中相应元数据的相关信息,通过多个业务端同步区块链上元数据对元数据进行管理,从而实现了通过多个业务端对元数据进行管理,保证了元数据的真实性,实现了一个去中心化的管理架构。
元数据管理节点获取到可同步区块链上的元数据至本地数据库的指令的方式可以是:元数据管理节点的后端模块监听到区块链网络达成共识,也可以是由区块链将可同步区块链上的元数据至本地数据库的指令发送给元数据管理节点。
为了提高元数据管理系统的可靠,减少对区块链的访问压力,提高对元数据的访问效率,根据元数据的处理信息的不同,向元数据管理合约模块发送相应操作指令及该元数据,以在区块链上完成元数据的处理信息所对应的操作,获取到可同步区块链上的元数据至本地数据库的指令后,同步区块链上的元数据至本地数据库方法与步骤102方法一致,这里不再赘述。
实施例三
图8是实施例三示出的一种基于区块链的元数据管理方法,应用于区块链。如图8所示,该方法包括:
步骤801:元数据管理合约模块收到元数据处理信息的相应操作指令;
步骤802:根据相应的操作指令,在区块链上完成元数据的处理信息所对应的操作。
在一个示例性实施例中,元数据管理合约模块收到元数据管理节点的后端模块发送过来的元数据处理信息的相应操作指令,在区块链上对元数据的处理信息进行对应的操作,目的是将所有元数据管理节点的元数据的处理信息存储在区块链上,保证所有元数据管理节点的元数据的一致性。
本文示例性实施例提供的方法,元数据管理合约模块收到元数据处理信息的相应操作指令,根据相应的操作指令,在区块链上完成元数据的处理信息所对应的操作,将元数据管理节点的元数据的处理信息存储在区块链上,保证所有元数据管理节点的元数据的一致性。
图9是根据一示例性实施例示出的一种基于区块链的元数据管理系统的框图,应用于元数据管理节点,如图9所示,元数据管理系统900包括前端模块901和后端模块902,该系统包括:
前端模块901:用于获取元数据的处理信息;
在一个示例性实施例中,元数据管理节点可以对应一个业务领域的存储数据的终端设备或者服务器,获取元数据的处理信息的可以为元数据管理节点的前端模块,其中,元数据是数据的描述信息,元数据的处理信息可以包括:创建元数据、修改元数据、删除元数据、访问元数据、元数据溯源请求。
后端模块902:根据元数据的处理信息,向元数据管理合约模块发送相应操作指令及该元数据,以在区块链上完成元数据的处理信息所对应的操作,获取到可同步区块链上的元数据至本地数据库903的指令后,同步区块链上的元数据至本地数据库903。
在一个示例性实施例中,可以通过元数据管理节点的后端模块来接收该元数据的处理信息,根据该元数据的处理信息,该后端模块向元数据管理合约模块发送相应操作指令,数据管理合约模块接收到该元数据的处理信息后在区块链上完成该元数据的处理信息对应的操作,在数据管理合约模块在区块链上完成该元数据的处理信息对应的操作后,元数据管理模块对该元数据的处理信息在区块链上进行广播,元数据管理节点的后端模块获取到可同步区块链上的元数据至本地数据库的指令后,则同步区块链上的元数据至本地数据库,一方面,元数据将数据的描述信息存入区块链而不是直接存储数据,降低区块链数据的容量,减少链上存储压力;另一方面。保证了元数据管理节点中的元数据的具备不可篡改性、保证元数据的真实性。
元数据管理节点获取到可同步区块链上的元数据至本地数据库的指令的方式可以是:元数据管理节点以监听到区块链网络达成共识作为可同步区块链上的元数据至本地数据库的指令,也可以是由区块链将可同步区块链上的元数据至本地数据库的指令发送给元数据管理节点。
本文示例性实施例提供的方法,获取元数据的处理信息,根据元数据的处理信息,向元数据管理合约模块发送相应操作指令,以在区块链上完成元数据的处理信息所对应的操作,实现了一个去中心化的架构,通过将元数据存储在区块链中来建立存证流程而不是直接存储数据,一方面,降低区块链数据的容量,减少链上存储压力;另一方面,保证了元数据的真实性,杜绝了元数据被污染篡改的现象;另外,元数据管理节点通过本地数据库对元数据进行本地存储,还解决了元数据管理的单点问题。
在一个示例性实施例中,后端模块902:还用于当元数据的处理信息为创建元数据时,生产针对需创建的元数据的标识,将创建元数据的指令和该需创建的元数据发送给元数据管理合约模块,以将该需创建的元数据写入区块链,获取到可同步区块链上的元数据至本地数据库903的指令后,获取区块信息,提取该元数据存入本地数据库903。
在一个示例性实施例中,后端模块902:还用于当元数据的处理信息为修改元数据时,根据该元数据的标识,查询本地数据库903,判断本地数据库903中是否存储该元数据,如果有,将修改元数据的指令和修改后的元数据发送至元数据管理合约模块,以将修改后的元数据写入区块链,获取到可同步区块链上的元数据至本地数据库903的指令后,获取区块信息,提取修改操作和元数据,将修改操作和元数据更新应用于本地数据库903。
在一个示例性实施例中,后端模块902:还用于当元数据的处理信息为删除元数据时,根据该元数据的标识,查询本地数据库903,判断本地数据库903中是否存储该元数据,如果有,删除元数据的指令和该元数据的标识发送至元数据管理合约模块,获取到可同步区块链上的元数据至本地数据库903的指令后,获取区块信息,提取删除操作和元数据信息,在本地数据库903上删除该元数据。
在一个示例性实施例中,后端模块902:还用于当元数据的处理信息为访问元数据时,根据该元数据的标识,查询本地数据库903,判断本地数据库903中是否存储该元数据,如果有,返回该元数据的相关信息。
在一个示例性实施例中,后端模块902:还用于当元数据的处理信息为元数据溯源请求时,根据该元数据的标识,查询本地数据库903,判断本地数据库903中是否存储该元数据,如果有,将该元数据的溯源请求的指令和该元数据的标识发送至元数据管理合约模块,以从区块链处获得该元数据的溯源信息。
在一个示例性实施例中,后端模块902:还用于当元数据管理节点为新增节点时,将区块链上所有元数据同步至该新增节点的本地数据库903;还用于当元数据管理节点重启时,从重启前一次操作同步的元数据开始,继续同步。
图10是根据一示例性实施例示出的一种基于区块链的元数据管理系统的框图,应用于区块链,如图10所示,该系统1000包括:
元数据管理合约模块1001:用于收到元数据处理信息的相应操作指令,根据相应的操作指令,在区块链上完成元数据的处理信息所对应的操作。
本文示例性实施例提供一种计算机存储介质,应用于元数据管理节点,包括处理器和存储器,存储器存储有计算机程序,处理器用以调用存储器中的计算机程序以实现上文实施例一的基于区块链的元数据管理方法。
本文示例性实施例提供一种计算机存储介质,应用于元数据管理节点,包括处理器和存储器,存储器存储有计算机程序,处理器用以调用存储器中的计算机程序以实现上文实施例二的基于区块链的元数据管理方法。
根据本文示例性实施例提供另一种计算机存储介质,应用于区块链,包括处理器和存储器,存储器存储有计算机程序,处理器用以调用存储器中的计算机程序以实现上文实施例三的基于区块链的元数据管理方法。
发明提供的基于元数据管理方法及其系统是一个去中心化的管理架构,通过元数据将数据的描述信息存入区块链而不是直接存储数据,降低区块链数据的容量,减少链上存储压力,同时元数据的管理节点通过同步区块链数据,保证了数据的一致性,也增加了系统鲁棒性;
通过将元数据存储在区块链中,既保证了元数据的真实性,又杜绝了数据污染、篡改的现象,而且每个元数据管理节点都可以是一个跨业务领域的数据节点,各个元数据管理节点都可以通过区块链同步元数据的信息,这样实现了通过多个业务端对元数据进行管理、备份。
本发明中供元数据本地存储的本地数据库,还用于存储同步后的链上的元数据,解决了元数据管理的单点问题,提高元数据管理系统的可靠性;通过直接在元数据管理节点的本地数据库中查询元数据的信息,还能够减少对区块链的访问压力,提高对元数据的访问效率。
本领域技术人员应明白,本发明的实施例可提供为方法、装置(设备)、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质上实施的计算机程序产品的形式。计算机存储介质包括在用于存储信息(诸如计算机可读指令、数据结构、程序模块或其他数据)的任何方法或技术中实施的易失性和非易失性、可移除和不可移除介质,包括但不限于RAM、ROM、EEPROM、闪存或其他存储器技术、CD-ROM、数字多功能盘(DVD)或其他光盘存储、磁盒、磁带、磁盘存储或其他磁存储装置、或者可以用于存储期望的信息并且可以被计算机访问的任何其他的介质等。此外,本领域普通技术人员公知的是,通信介质通常包含计算机可读指令、数据结构、程序模块或者诸如载波或其他传输机制之类的调制数据信号中的其他数据,并且可包括任何信息递送介质。
本发明是参照根据本发明实施例的方法、装置(设备)和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括……”限定的要素,并不排除在包括所述要素的物品或者设备中还存在另外的相同要素。
尽管已描述了本发明的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明的意图也包含这些改动和变型在内。
Claims (10)
1.一种基于区块链的元数据管理方法,应用于元数据管理节点,其特征在于,所述方法包括:
获取元数据的处理信息;
根据所述元数据的处理信息,向元数据管理合约模块发送相应操作指令及该元数据,以在区块链上完成所述元数据的处理信息所对应的操作,获取到可同步区块链上的元数据至本地数据库的指令后,同步区块链上的元数据至本地数据库。
2.如权利要求1所述的方法,其特征在于,所述根据所述元数据的处理信息,向元数据管理合约模块发送相应操作指令及该元数据,以在区块链上完成所述元数据的处理信息所对应的操作,获取到可同步区块链上的元数据至本地数据库的指令后,同步区块链上的元数据至本地数据库包括:
当所述元数据的处理信息为创建元数据时,生产针对需创建的元数据的标识,将创建元数据的指令和该需创建的元数据发送给元数据管理合约模块,以将该需创建的元数据写入区块链,获取到可同步区块链上的元数据至本地数据库的指令后,获取区块信息,提取该元数据存入本地数据库;
当所述元数据的处理信息为修改元数据时,根据该元数据的标识,查询本地数据库,判断所述本地数据库中是否存储该元数据,如果有,将修改元数据的指令和修改后的元数据发送至元数据管理合约模块,以将修改后的元数据写入区块链,获取到可同步区块链上的元数据至本地数据库的指令后,获取区块信息,提取修改操作和元数据,将修改操作和元数据更新应用于本地数据库;
当所述元数据的处理信息为删除元数据时,根据该元数据的标识,查询本地数据库,判断所述本地数据库中是否存储该元数据,如果有,删除元数据的指令和该元数据的标识发送至元数据管理合约模块,获取到可同步区块链上的元数据至本地数据库的指令后,获取区块信息,提取删除操作和元数据信息,在本地数据库上删除该元数据;
当所述元数据的处理信息为访问元数据时,根据该元数据的标识,查询本地数据库,判断所述本地数据库中是否存储该元数据,如果有,返回该元数据的相关信息;
当所述元数据的处理信息为元数据溯源请求时,根据该元数据的标识,查询本地数据库,判断所述本地数据库中是否存储该元数据,如果有,将该元数据的溯源请求的指令和该元数据的标识发送至元数据管理合约模块,以从区块链处获得该元数据的溯源信息。
3.如权利要求2所述的方法,其特征在于,所述方法还包括:
当所述元数据管理节点为新增节点时,将区块链上所有元数据同步至该新增节点的本地数据库;
当所述元数据管理节点重启时,从重启前一次操作同步的元数据开始,继续同步。
4.一种基于区块链的元数据管理方法,应用于元数据管理节点,其特征在于,所述方法包括:
多个元数据管理节点中的至少一个元数据管理节点获取元数据的处理信息,根据所述元数据的处理信息,向元数据管理合约模块发送相应操作指令及该元数据,以在区块链上完成所述元数据的处理信息所对应的操作,获取到可同步区块链上的元数据至本地数据库的指令后,同步区块链上的元数据至本地数据库,
其他元数据管理节点获取可同步区块链上的元数据至本地数据库的指令,根据所述可同步区块链上的元数据至本地数据库的指令,提取区块链上的元数据的处理信息及该元数据,同步本地数据库中相应元数据的相关信息。
5.一种基于区块链的元数据管理方法,应用于区块链,其特征在于,所述方法包括:
元数据管理合约模块收到元数据处理信息的相应操作指令,根据所述相应的操作指令,在区块链上完成所述元数据的处理信息所对应的操作。
6.一种基于区块链的元数据管理系统,应用于元数据管理节点,其特征在于,所述系统包括:
元数据管理节点:用于获取元数据的处理信息,根据所述元数据的处理信息,向元数据管理合约模块发送相应操作指令及该元数据,以在区块链上完成所述元数据的处理信息所对应的操作,获取到可同步区块链上的元数据至本地数据库的指令后,同步区块链上的元数据至本地数据库。
7.一种基于区块链的元数据管理系统,应用于区块链,其特征在于,所述系统包括:
元数据管理合约模块:用于收到元数据处理信息的相应操作指令,根据所述相应的操作指令,在区块链上完成所述元数据的处理信息所对应的操作。
8.一种计算机存储介质,应用于元数据管理节点,包括处理器和存储器,所述存储器存储有计算机程序,其特征在于,所述处理器用以调用所述存储器中的计算机程序以实现如权利要求1至3中任一所述的方法。
9.一种计算机存储介质,应用于元数据管理节点,包括处理器和存储器,所述存储器存储有计算机程序,其特征在于,所述处理器用以调用所述存储器中的计算机程序以实现如权利要求4所述的方法。
10.一种计算机存储介质,应用于区块链,包括处理器和存储器,所述存储器存储有计算机程序,其特征在于,所述处理器用以调用所述存储器中的计算机程序以实现如权利要求5所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910966337.0A CN110765205A (zh) | 2019-10-12 | 2019-10-12 | 基于区块链的元数据管理方法、系统和计算机存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910966337.0A CN110765205A (zh) | 2019-10-12 | 2019-10-12 | 基于区块链的元数据管理方法、系统和计算机存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110765205A true CN110765205A (zh) | 2020-02-07 |
Family
ID=69331954
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910966337.0A Pending CN110765205A (zh) | 2019-10-12 | 2019-10-12 | 基于区块链的元数据管理方法、系统和计算机存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110765205A (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112417517A (zh) * | 2020-11-19 | 2021-02-26 | 成都无右区块链科技有限公司 | 一种基于区块链的数据标准管理方法 |
CN112783871A (zh) * | 2021-03-16 | 2021-05-11 | 广东核电合营有限公司 | 标牌数据处理方法、装置、计算机设备和存储介质 |
CN113034281A (zh) * | 2021-03-16 | 2021-06-25 | 中国工商银行股份有限公司 | 基于区块链的业务数据处理方法、相关系统及节点 |
CN113364855A (zh) * | 2021-06-02 | 2021-09-07 | 网易(杭州)网络有限公司 | 区块链信息管理方法、装置、服务平台、设备及介质 |
CN113836233A (zh) * | 2021-09-26 | 2021-12-24 | 承德石油高等专科学校 | 一种基于区块链的审计数据存证溯源方法和终端 |
CN114553451A (zh) * | 2020-11-25 | 2022-05-27 | 中国移动通信有限公司研究院 | 数据处理方法、系统、数据检测装置及区块链平台 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109086325A (zh) * | 2018-06-29 | 2018-12-25 | 阿里巴巴集团控股有限公司 | 基于区块链的数据处理方法和装置 |
CN109379418A (zh) * | 2018-10-09 | 2019-02-22 | 上海点融信息科技有限责任公司 | 基于区块链处理业务系统的文件的方法、设备及存储介质 |
CN109542980A (zh) * | 2018-11-20 | 2019-03-29 | 北京磁云数字科技有限公司 | 一种区块链的数据处理方法、装置、设备及介质 |
CN109840429A (zh) * | 2019-01-08 | 2019-06-04 | 北京众享比特科技有限公司 | 智能合约部署、调用方法和装置 |
CN110263015A (zh) * | 2019-05-07 | 2019-09-20 | 深圳壹账通智能科技有限公司 | 基于区块链的数据溯源方法、装置、设备及可读存储介质 |
-
2019
- 2019-10-12 CN CN201910966337.0A patent/CN110765205A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109086325A (zh) * | 2018-06-29 | 2018-12-25 | 阿里巴巴集团控股有限公司 | 基于区块链的数据处理方法和装置 |
CN109379418A (zh) * | 2018-10-09 | 2019-02-22 | 上海点融信息科技有限责任公司 | 基于区块链处理业务系统的文件的方法、设备及存储介质 |
CN109542980A (zh) * | 2018-11-20 | 2019-03-29 | 北京磁云数字科技有限公司 | 一种区块链的数据处理方法、装置、设备及介质 |
CN109840429A (zh) * | 2019-01-08 | 2019-06-04 | 北京众享比特科技有限公司 | 智能合约部署、调用方法和装置 |
CN110263015A (zh) * | 2019-05-07 | 2019-09-20 | 深圳壹账通智能科技有限公司 | 基于区块链的数据溯源方法、装置、设备及可读存储介质 |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112417517A (zh) * | 2020-11-19 | 2021-02-26 | 成都无右区块链科技有限公司 | 一种基于区块链的数据标准管理方法 |
CN112417517B (zh) * | 2020-11-19 | 2023-11-28 | 成都无右区块链科技有限公司 | 一种基于区块链的数据标准管理方法 |
CN114553451A (zh) * | 2020-11-25 | 2022-05-27 | 中国移动通信有限公司研究院 | 数据处理方法、系统、数据检测装置及区块链平台 |
CN112783871A (zh) * | 2021-03-16 | 2021-05-11 | 广东核电合营有限公司 | 标牌数据处理方法、装置、计算机设备和存储介质 |
CN113034281A (zh) * | 2021-03-16 | 2021-06-25 | 中国工商银行股份有限公司 | 基于区块链的业务数据处理方法、相关系统及节点 |
CN113364855A (zh) * | 2021-06-02 | 2021-09-07 | 网易(杭州)网络有限公司 | 区块链信息管理方法、装置、服务平台、设备及介质 |
CN113836233A (zh) * | 2021-09-26 | 2021-12-24 | 承德石油高等专科学校 | 一种基于区块链的审计数据存证溯源方法和终端 |
CN113836233B (zh) * | 2021-09-26 | 2023-09-08 | 承德石油高等专科学校 | 一种基于区块链的审计数据存证溯源方法和终端 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110765205A (zh) | 基于区块链的元数据管理方法、系统和计算机存储介质 | |
CN110674146B (zh) | 一种数据同步方法、同步端、待同步端、设备及存储介质 | |
US20170161297A1 (en) | Data synchronization in a storage network | |
CN112019369A (zh) | 一种微服务框架下动态配置管理方法及系统 | |
CN111343241B (zh) | 一种图数据更新方法、装置及系统 | |
CN110888858B (zh) | 数据库的操作方法和装置、存储介质、电子装置 | |
CN106155775B (zh) | 消息处理方法、设备及系统 | |
CN105450682B (zh) | 一种用于数据同步保存、向客户端同步数据的方法、装置和系统 | |
CN107291768B (zh) | 一种索引建立的方法及装置 | |
WO2019076102A1 (zh) | 一种数据回滚方法、系统、设备及计算机可读存储介质 | |
CN110597918A (zh) | 一种账户管理方法、装置及计算机可读存储介质 | |
CN111124759A (zh) | 一种混合云架构下数据同步的方法、设备及介质 | |
US20160012070A1 (en) | Methods for managing a request to list previous versions of an object and devices thereof | |
CN103701653A (zh) | 一种接口热插拔配置数据的处理方法及网络配置服务器 | |
CN107357557B (zh) | 一种信息更新方法及装置 | |
CN111127206A (zh) | 一种基于智能合约的区块链数据访问控制方法及装置 | |
CN110798358B (zh) | 分布式服务标识方法、装置、计算机可读介质及电子设备 | |
CN110928923A (zh) | 一种基于区块链的数据存储方法及系统 | |
CN110099117B (zh) | 一种多版本dns区文件全量下发的方法和装置 | |
CN114710350A (zh) | 一种可调用资源的分配方法和装置 | |
CN114205329A (zh) | 一种设备编码方法及装置 | |
CN112860746A (zh) | 一种基于缓存削减的方法、设备及系统 | |
CN112445859A (zh) | 数据管理方法、装置和系统 | |
CN101895564A (zh) | 分布式文件系统中文件资源定位的方法、系统及装置 | |
CN105022796A (zh) | 一种文件遍历方法、装置及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200207 |