CN117200977B - 一种智慧城市领域区块链数据分层存储的方法及系统 - Google Patents
一种智慧城市领域区块链数据分层存储的方法及系统 Download PDFInfo
- Publication number
- CN117200977B CN117200977B CN202311465246.1A CN202311465246A CN117200977B CN 117200977 B CN117200977 B CN 117200977B CN 202311465246 A CN202311465246 A CN 202311465246A CN 117200977 B CN117200977 B CN 117200977B
- Authority
- CN
- China
- Prior art keywords
- data
- block
- metadata
- management
- blockchain
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 38
- 230000000903 blocking effect Effects 0.000 claims abstract description 29
- 238000007405 data analysis Methods 0.000 claims abstract description 24
- 230000008569 process Effects 0.000 claims abstract description 14
- 238000004891 communication Methods 0.000 claims abstract description 6
- 239000012634 fragment Substances 0.000 claims description 18
- 238000012795 verification Methods 0.000 claims description 13
- 230000007246 mechanism Effects 0.000 claims description 12
- 238000012545 processing Methods 0.000 claims description 9
- 238000004458 analytical method Methods 0.000 claims description 3
- 238000013475 authorization Methods 0.000 claims description 3
- 239000000284 extract Substances 0.000 claims description 3
- 238000004806 packaging method and process Methods 0.000 claims description 2
- 230000009286 beneficial effect Effects 0.000 abstract description 2
- 230000008520 organization Effects 0.000 abstract description 2
- 230000001737 promoting effect Effects 0.000 abstract 1
- 238000007689 inspection Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 238000012544 monitoring process Methods 0.000 description 4
- 230000000737 periodic effect Effects 0.000 description 4
- 238000002360 preparation method Methods 0.000 description 3
- 238000001914 filtration Methods 0.000 description 2
- 239000008186 active pharmaceutical agent Substances 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013075 data extraction Methods 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 238000012856 packing Methods 0.000 description 1
- 230000010076 replication Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提出一种智慧城市领域区块链数据分层存储的方法及系统,设置包括基础层,中间层和应用层的区块链网络系统;将物联网设备输送的原始数据分片存储在本地服务器上,制作对应的元数据,并将元数据发布给所在联盟链中的所有管理节点,数据分析节点对已上链的分片数据进行分析处理生成中间结果,将中间结果发生给所有管理节点,管理节点对数据打包成区块,并发布到所在联盟链中;管理节点将中间结果广播到公共区块链中缓存;所有管理节点竞争对公共区块链中缓存内容的成块机会,成块并上公共区块链。本发明确保数据的完整性,防范了数据的篡改和恶意攻击,提高了数据的组织结构和检索效率,保证了信息的时效性,有助于促进信息的共享和交流。
Description
技术领域
本发明属于信息技术领域,特别是涉及到一种智慧城市领域区块链数据分层存储的方法及系统。
背景技术
在应用区块链技术的智慧城市领域,数据上链实际会面临一系列特定的困难,这些困难主要与数据的来源复杂性、多样性以及大规模的实时数据处理需求相关。
以下是一些智慧城市数据上链时可能遇到的具体问题:
实时性需求:区块链网络的吞吐量有限,处理大规模实时数据可能导致交易拥堵和延迟。
大规模数据:智慧城市产生大量数据,包括传感器数据、摄像头数据等,需要处理和上链的数据量庞大。
隐私问题:涉及居民和城市层面的数据,隐私保护尤为关键。上链涉及隐私敏感的数据时,需要谨慎处理。
安全性:区块链系统需要保障数据的安全性,防范恶意攻击和数据篡改。
数据质量差异:不同来源的数据质量可能不同,需要确保上链的数据具有足够的准确性和可信度。
数据源验证:确保数据来源的真实性和可验证性,以防止虚假数据被上链。
发明内容
本发明提出一种智慧城市领域区块链数据分层存储的方法及系统,可以更有效地解决智慧城市领域数据上链存在的问题。
为达到上述目的,本发明的技术方案是这样实现的:
一种智慧城市领域区块链数据分层存储的方法,包括:
S1、设置包括基础层,中间层和应用层的区块链网络系统;基础层包括智慧城市领域的物联网设备和本地服务器;中间层包括多个中间子层,每一个中间子层使用相同或不同类型的联盟链作为数据上链的区块链类型,在每一个联盟链中设置有多个管理节点和若干个数据分析节点,管理节点和数据分析节点都是由本地服务器来实现;应用层包括一个公共区块链,每个联盟链中的每个管理节点都属于公共区块链的节点;
S2、将物联网设备输送的原始数据分片,每个物联网设备的所有分片数据包含相对独立的时间段;
S3、所述分片数据存储在本地服务器上,本地服务器为分片数据制作对应的元数据,并将元数据发布给所在联盟链中的所有管理节点,保存在管理节点的缓冲池中;
S4、所在联盟链中的数据分析节点对已上链的分片数据进行分析处理生成中间结果,将中间结果发生给所有管理节点,管理节点接收元数据并保存在缓冲池中;
S5、管理节点根据成块规则对缓冲池中的数据打包成区块,并发布到所在联盟链中;
S6、管理节点定期对所述中间结果进行是否可以公开的检查,如果可以公开,则管理节点将所述中间结果广播到公共区块链中缓存;
S7、所有管理节点竞争对公共区块链中缓存内容的成块机会,获得成块机会的管理节点成块并上公共区块链。
进一步的,步骤S3中,所述分片数据存储在本地服务器的方法包括:
S301、确定领域标识:
每个分片数据根据其内容所属的领域进行标识;
S302、本地服务器分配:
根据领域标识,将每个分片数据分配到相应领域的有足够的存储容量和性能来处理和存储分片数据的本地服务器;
S303、单一服务器存储:
本地服务器上按照领域和时间戳信息组织存储目录结构。
更进一步的,每个分片数据在不同的本地服务器上制作多个备份,确保备份之间的同步性,使得它们保持一致性。
进一步的,步骤S3中所述元数据包括:
时间戳:标识分片数据的时间段;
领域标识:指示分片数据所属的领域;
存储位置:记录分片数据的存储位置信息。
进一步的,步骤S3中管理节点接收元数据并保存在缓冲池中的方法具体包括:
S311、元数据接收:
联盟链中的管理节点接收从本地服务器发布的元数据;通过联盟链的通信协议或智能合约接口实现元数据的接收;
S312、元数据验证:
对接收到的元数据进行验证,确保元数据有效、完整且真实;
S313、缓冲池检查:
管理节点检查本地的缓冲池,查看是否已经包含相同或相似的元数据;如果已存在相同的元数据,进行冲突解决或版本控制;
S314、缓冲池存储:
将新的有效的元数据存储到缓冲池中;缓冲池作为临时存储区域,用于管理节点处理和组织即将上链的数据。
进一步的,步骤S4包括:数据分析节点开始对已上链的数据分片进行分析处理,数据分析节点根据具体的任务和算法,生成中间结果数据;中间结果包括统计信息、摘要、模型输出;数据分析节点将生成的中间结果存储在管理节点的缓冲池中。
进一步的,步骤S4中,数据分析节点对联盟链的访问,由管理节点进行身份验证并根据白名单进行授权管理。
进一步的,步骤S5具体包括:
S501、缓冲池检查:
管理节点检查缓冲池中的数据,确定哪些数据满足成块的条件;
S502、数据打包:
根据成块的规则,管理节点将符合条件的数据从缓冲池中提取,打包成一个区块;区块包含多个元数据和/或中间结果;
S503、区块构建:
构建区块的数据结构,包括区块头和区块体;区块头包括元数据,时间戳,先前区块的哈希;区块体包含打包的元数据和/或中间结果;
S504、对构建的区块进行数字签名,数字签名使用联盟链中相应节点的私钥;或者不进行数字签名;
S505、区块发布:
管理节点将构建好的区块发布到联盟链中;区块的发布通过调用联盟链的智能合约或其他发布机制来实现;
S506、联盟链验证:
联盟链中的节点接收并验证管理节点发布的区块;
S507、区块存储:
验证通过的区块存储在联盟链的区块链上,成为链的一部分;
S508、通知其他节点:
通知联盟链中的其他节点有新的区块已经上链;
S509、状态更新:
更新管理节点的状态,记录已经成功上链的区块。
进一步的,步骤S7具体包括:
S701、成块机会竞争:
所有管理节点在规定的时间间隔内竞争成块机会;竞争机制基于共识算法;
S702、区块提议:
获得成块机会的管理节点提出一个新的区块,包含了待上链的中间结果;
S703、共识达成:
竞争中获胜的管理节点通过共识算法与其他管理节点达成一致;
S704、区块签名:
获胜的管理节点对提议的区块进行数字签名;签名使用管理节点的私钥进行;
S705、区块广播:
获胜的管理节点将签名的区块广播给整个网络;
S706、网络验证:
其他管理节点接收并验证新区块的签名和内容,确保新区块符合共识规则;
S707、公共区块链存储:
其他管理节点接受并验证通过的区块后,将其存储在公共区块链上;
S708、用户访问:
新区块被成功添加到公共区块链,用户通过相应的接口访问其中的内容,查询、验证或使用已上链的中间结果。
本发明另一方面还提出了一种智慧城市领域区块链数据分层存储的系统,所述系统应用了上述智慧城市领域区块链数据分层存储的方法。
与现有技术相比,本发明具有如下的有益效果:
1、数据安全性提升:本发明通过采用区块链技术,实现了对数据的不可篡改性和安全性。每个区块都包含前一个区块的哈希值,形成链式结构,确保数据的完整性,防范了数据的篡改和恶意攻击。
2、隐私保护机制:本发明中包含了对中间结果的隐私保护机制,确保敏感信息不被公开。这有助于满足隐私法规和用户隐私保护的需求。
3、分层存储优化:本发明通过采用分层存储,可以更有效地管理和处理大规模的智慧城市数据。每个层次存储相应的数据,提高了数据的组织结构和检索效率。
4、分布式处理和容错性:本发明采用中间层的多个子层和联盟链节点的分布式结构,提高了系统的容错性。即使部分节点出现故障,整个系统依然可以正常运行。
5、实时更新和同步:本发明通过管理节点竞争成块机会,将区块广播至公共区块链,实现了数据的实时更新和全网的同步。用户可以迅速获取到最新的数据,保证了信息的时效性。
6、信任机制建立:本发明通过区块链的去中心化和不可篡改性,建立了信任机制。数据的透明性和可追溯性有助于建立起各参与方之间的信任关系。
7、公开透明和共享促进:本发明定期检查中间结果的可公开性,将符合条件的结果广播至公共区块链,实现了数据的公开透明。这有助于促进信息的共享和交流。
附图说明
图1是本发明实施例的流程示意图。
具体实施方式
需要说明的是,在不冲突的情况下,本发明中的实施例及实施例中的特征可以相互组合。
为使本发明专利的目的、特征更明显易懂,下面结合附图对本发明专利的具体实施方式作进一步的说明。
本实施例中,首先构建了应用于智慧城市的区块链网络系统,该系统包括三层结构:基础层,中间层和应用层;
基础层:物联网设备和本地服务器;物联网设备包括各类摄像头,例如交通摄像头、治安摄像头、工业摄像头等应用场景的视频获取设备;本地服务器是用于存储物联网设备所采集的视频数据的设备。除了由交通摄像头、治安摄像头等每小时生成的原始视频数据。也可以涵盖其他传感器数据,以更全面地捕捉城市数据。
中间层:包括了多个中间子层,不同的中间子层可以根据应用场景划分,也可以根据地理区域划分,每一个中间子层可以使用相同或不同类型的联盟链作为数据上链的区块链类型,在每一个联盟链中设置有多个管理节点和若干个数据分析节点。管理节点和数据分析节点都是由服务器来实现,管理节点是由服务器中的计算资源充足的服务器来担任的,用来执行数据成块,上链,访问管理等工作。数据分析节点是用来对原始数据进行分析产生中间结果的服务器,根据具体的分析任务的不同,可以有不同的服务器配置。
应用层:包括一个公共区块链,每个联盟链中的每个管理节点都属于公共区块链的节点。
基于上述架构,如图1所示,本发明所述方法包括:
步骤1:由交通摄像头、治安摄像头等每小时生成原始视频数据。也可以涵盖其他传感器数据,以更全面地捕捉城市数据。
步骤2:将每小时的原始视频数据分片,确保每个分片包含相对独立的时间段。采用智能分片算法,根据视频内容特征或事件边界进行分片,而不仅仅是固定时长。这样可以更好地捕捉城市事件和变化。
具体流程如下:
步骤2.1确定分片标准:
确定分片的时间间隔,例如每小时分成若干分片,每个分片包含相对独立的时间段。
步骤2.2分片开始:
按照确定的时间间隔,开始对原始视频数据进行分片。
步骤2.3时间段划分:
将每个分片划分为相对独立的时间段,确保时间段之间没有或只有少量重叠。
例如,每个分片包含5分钟的视频,确保相邻时间段没有数据重复。
步骤2.4分片数据提取:
从原始视频数据中提取相应时间段的内容,形成一个视频数据分片。
步骤3:每个分片保存在相应领域的本地服务器上(也可以制作多个备份,保存在不同的服务器上)。优选的,使用加密算法确保数据在存储过程中的机密性。考虑使用分布式存储系统,以增加容错性和可靠性。
具体步骤如下:
步骤3.1确定领域标识:
每个分片根据其内容所属的领域(如交通监控、治安监控)进行标识。
步骤3.2本地服务器分配:
根据领域标识,将每个分片分配到相应领域的本地服务器。
确保本地服务器有足够的存储容量和性能来处理和存储分片数据。
步骤3.3单一服务器存储:
将每个分片保存在相应领域的本地服务器上。
为避免混淆,可以按照领域和时间戳等信息组织存储目录结构。
优选的,可以包括以下步骤:
多服务器备份(可选):
可选地,在不同的本地服务器上制作多个备份。
备份可以提高数据的可靠性和冗余性,防止单点故障。
备份同步(可选):
如果制作了多个备份,确保备份之间的同步性,使得它们保持一致性。
同步可以通过定期的数据复制或其他备份机制来实现。
步骤4:本地服务器根据存储的数据分片,制作对应的元数据,并将元数据发布给对应联盟链中的所有管理节点。元数据应包括详细的时间戳、地理位置信息、摄像头类型等,以便在后续处理中获得更丰富的上下文。
详细过程如下:
步骤4.1元数据生成:
本地服务器根据存储的数据分片,生成对应的元数据。
元数据可以包括但不限于:
时间戳:标识分片的时间段。
领域标识:指示数据所属的领域,如交通监控、治安监控等。
存储位置:记录数据分片的存储位置信息。
步骤4.2元数据格式定义:
定义元数据的格式和结构,确保它包含足够的信息以后续的处理和识别。
步骤4.3元数据签名(可选):
可选地,对生成的元数据进行数字签名,以验证其完整性和真实性。
数字签名可以使用公钥加密算法来实现,确保元数据未被篡改。
步骤5:管理节点接收元数据并保存在缓冲池中;
具体流程如下:
步骤5.1元数据接收:
联盟链中的管理节点接收从本地服务器发布的元数据。
通过联盟链的通信协议或智能合约接口实现元数据的接收。
步骤5.2元数据验证:
对接收到的元数据进行验证,包括格式、签名(如果有的话)等。
确保元数据是有效、完整且真实的。
步骤5.3缓冲池检查:
管理节点检查本地的缓冲池,查看是否已经包含相同或相似的元数据。
如果已存在相同的元数据,可能需要进行冲突解决或版本控制。
步骤5.4缓冲池存储:
将新的有效元数据存储到缓冲池中。
缓冲池是一个临时存储区域,用于管理节点处理和组织即将上链的数据。
步骤6:数据分析节点对已上链的数据进行分析处理后,所生成的中间结果发生给管理节点,并保存在管理节点的缓冲池中;
具体流程如下:数据分析节点开始对已上链的数据分片进行分析处理,数据分析节点根据具体的任务和算法,生成中间结果数据。中间结果可能包括统计信息、摘要、模型输出等。数据分析节点将生成的中间结果存储在管理节点的缓冲池中。缓冲池是一个用于组织和管理待上链数据的临时存储区域。
步骤7:管理节点根据成块规则对缓冲池中的数据打包成区块,并发布到联盟链中;
具体流程如下:
步骤7.1缓冲池检查:
管理节点检查缓冲池中的数据,确定哪些数据满足成块的条件。
成块条件可以根据联盟链的规则和策略而定,如时间间隔、数据量等。
步骤7.2数据打包:
根据成块的规则,管理节点将符合条件的数据从缓冲池中提取,打包成一个区块。
区块包含多个元数据或中间结果,形成一个批处理。
步骤7.3区块构建:
构建区块的数据结构,包括区块头和区块体。
区块头包括元数据,时间戳,先前区块的哈希等信息。
区块体包含打包的元数据或中间结果。
步骤7.4区块签名(可选):
可选地,对构建的区块进行数字签名,以确保其完整性和真实性。
数字签名使用联盟链中相应节点的私钥。
步骤7.5区块发布:
管理节点将构建好的区块发布到联盟链中。
区块的发布可以通过调用联盟链的智能合约或其他适当的机制来实现。
步骤7.6联盟链验证:
联盟链中的节点接收并验证管理节点发布的区块。
确保区块的结构和签名是有效的。
步骤7.7区块存储:
验证通过的区块存储在联盟链的区块链上,成为链的一部分。
区块链的技术确保数据的安全性和不可篡改性。
步骤7.8通知其他节点:
可能需要通知联盟链中的其他节点有新的区块已经上链。
这可以通过内部消息机制或其他通信方式实现。
步骤7.9状态更新:
更新管理节点的状态,记录已经成功上链的区块。
可能需要记录每个区块的状态,如是否已经验证、是否已经处理等。
这一流程确保了管理节点根据成块规则对缓冲池中的数据进行打包,构建区块,并将区块发布到联盟链中,实现了数据的批量上链。
步骤8:管理节点根据白名单管理数据分析节点对联盟链的访问。
具体流程如下:
步骤8.1白名单定义:
在管理节点上定义一个白名单,列出被授权访问联盟链的数据分析节点。
白名单中包含允许访问的节点的身份信息或公钥等。
步骤8.2节点身份验证:
数据分析节点请求访问联盟链时,管理节点对其身份进行验证。
验证可以通过数字签名、身份证书等方式进行。
步骤8.3白名单检查:
验证通过后,管理节点检查数据分析节点的身份是否在白名单中。
如果身份在白名单中,表示节点被授权访问。
步骤8.4授权访问:
如果身份验证通过且在白名单中,管理节点授权数据分析节点访问联盟链。
授权可以通过颁发访问令牌或在联盟链中进行相应的权限设置来实现。
步骤9:管理节点定期对中间结果进行是否可以公开的检查,如果可以公开,则管理节点将可公开内容广播到公共区块链网络中。
具体流程:
步骤9.1定期检查
管理节点制定一个定期检查计划,以确定哪些中间结果可以公开。
定期性可以是按时间、事件触发等方式。
步骤9.2中间结果检查:
在定期检查触发时,管理节点对缓冲池中的中间结果进行检查。
判断哪些中间结果可以公开。
步骤9.3可公开条件:
定义中间结果可公开的条件,这可能包括某些敏感信息已被过滤、审查通过等条件。
步骤9.4中间结果过滤(可选):
可选地,对于不符合公开条件的中间结果,进行进一步的过滤或处理。
这可能涉及到隐私信息的删除、匿名化等手段。
步骤9.5中间结果广播准备:
对符合公开条件的中间结果进行广播准备。
确保广播的数据结构符合公共区块链的要求。
步骤9.6公共区块链访问:
管理节点访问公共区块链网络,准备将中间结果广播至公共区块链。
步骤9.7广播至公共区块链:
将符合条件的中间结果广播至公共区块链网络。
广播可以通过调用智能合约、使用公共区块链的API等方式实现。
步骤9.8公共区块链验证:
公共区块链网络的节点接收并验证管理节点广播的中间结果。
确保广播的数据符合公共区块链的规则和标准。
步骤10:所有管理节点竞争对公共区块链中缓存的公开内容的成块机会,获得成块机会的管理节点成块并上公共区块链,以供用户使用。
具体流程如下:
步骤10.1成块机会竞争:
所有管理节点在规定的时间间隔内竞争成块机会。
竞争机制可能基于共识算法,如Proof of Work(PoW)、Proof of Stake(PoS)等。
步骤10.2区块提议:
获得成块机会的管理节点提出一个新的区块,包含了待上链的中间结果。
区块的提议可以包括区块头和区块体。
步骤10.3共识达成:
竞争中获胜的管理节点需要通过共识算法与其他管理节点达成一致。
这确保了整个网络对新区块的接受。
步骤10.4区块签名:
获胜的管理节点对提议的区块进行数字签名。
签名可以使用管理节点的私钥进行。
步骤10.5区块广播:
获胜的管理节点将签名的区块广播给整个网络。
广播可以通过直接通知其他节点,或通过网络广播机制进行。
步骤10.6网络验证:
其他管理节点接收并验证新区块的签名和内容。
确保新区块符合共识规则。
步骤10.7公共区块链存储:
其他管理节点接受并验证通过的区块后,将其存储在公共区块链上。
区块链技术确保了数据的安全性和不可篡改性。
步骤10.8用户访问:
一旦新区块被成功添加到公共区块链,用户可以通过相应的接口访问其中的内容。用户可以查询、验证或使用已上链的中间结果。
这一流程确保了所有管理节点在竞争中获得成块机会,提出新的区块并将其成功上链至公共区块链,为用户提供了可访问的最新数据。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (8)
1.一种智慧城市领域区块链数据分层存储的方法,其特征在于,包括:
S1、设置包括基础层,中间层和应用层的区块链网络系统;基础层包括智慧城市领域的物联网设备和本地服务器;中间层包括多个中间子层,每一个中间子层使用相同或不同类型的联盟链作为数据上链的区块链类型,在每一个联盟链中设置有多个管理节点和若干个数据分析节点,管理节点和数据分析节点都是由本地服务器来实现;应用层包括一个公共区块链,每个联盟链中的每个管理节点都属于公共区块链的节点;
S2、将物联网设备输送的原始数据分片,每个物联网设备的所有分片数据包含相对独立的时间段;
S3、所述分片数据存储在本地服务器上,本地服务器为分片数据制作对应的元数据,并将元数据发布给所在联盟链中的所有管理节点,保存在管理节点的缓冲池中;
S4、所在联盟链中的数据分析节点对已上链的分片数据进行分析处理生成中间结果,将中间结果发生给所有管理节点,管理节点接收元数据并保存在缓冲池中;
S5、管理节点根据成块规则对缓冲池中的数据打包成区块,并发布到所在联盟链中;
S6、管理节点定期对所述中间结果进行是否可以公开的检查,如果可以公开,则管理节点将所述中间结果广播到公共区块链中缓存;
S7、所有管理节点竞争对公共区块链中缓存内容的成块机会,获得成块机会的管理节点成块并上公共区块链;
步骤S3中,所述分片数据存储在本地服务器的方法包括:
S301、确定领域标识:
每个分片数据根据其内容所属的领域进行标识;
S302、本地服务器分配:
根据领域标识,将每个分片数据分配到相应领域的有足够的存储容量和性能来处理和存储分片数据的本地服务器;
S303、单一服务器存储:
本地服务器上按照领域和时间戳信息组织存储目录结构;
步骤S5具体包括:
S501、缓冲池检查:
管理节点检查缓冲池中的数据,确定哪些数据满足成块的条件;
S502、数据打包:
根据成块的规则,管理节点将符合条件的数据从缓冲池中提取,打包成一个区块;区块包含多个元数据和/或中间结果;
S503、区块构建:
构建区块的数据结构,包括区块头和区块体;区块头包括元数据,时间戳,先前区块的哈希;区块体包含打包的元数据和/或中间结果;
S504、对构建的区块进行数字签名,数字签名使用联盟链中相应节点的私钥;或者不进行数字签名;
S505、区块发布:
管理节点将构建好的区块发布到联盟链中;区块的发布通过调用联盟链的智能合约来实现;
S506、联盟链验证:
联盟链中的节点接收并验证管理节点发布的区块;
S507、区块存储:
验证通过的区块存储在联盟链的区块链上,成为链的一部分;
S508、通知其他节点:
通知联盟链中的其他节点有新的区块已经上链;
S509、状态更新:
更新管理节点的状态,记录已经成功上链的区块。
2.根据权利要求1所述的智慧城市领域区块链数据分层存储的方法,其特征在于,每个分片数据在不同的本地服务器上制作多个备份,确保备份之间的同步性,使得它们保持一致性。
3.根据权利要求1所述的智慧城市领域区块链数据分层存储的方法,其特征在于,步骤S3中所述元数据包括:
时间戳:标识分片数据的时间段;
领域标识:指示分片数据所属的领域;
存储位置:记录分片数据的存储位置信息。
4.根据权利要求1所述的智慧城市领域区块链数据分层存储的方法,其特征在于,步骤S3中管理节点接收元数据并保存在缓冲池中的方法具体包括:
S311、元数据接收:
联盟链中的管理节点接收从本地服务器发布的元数据;通过联盟链的通信协议或智能合约接口实现元数据的接收;
S312、元数据验证:
对接收到的元数据进行验证,确保元数据有效、完整且真实;
S313、缓冲池检查:
管理节点检查本地的缓冲池,查看是否已经包含相同或相似的元数据;如果已存在相同的元数据,进行冲突解决或版本控制;
S314、缓冲池存储:
将新的有效的元数据存储到缓冲池中;缓冲池作为临时存储区域,用于管理节点处理和组织即将上链的数据。
5.根据权利要求1所述的智慧城市领域区块链数据分层存储的方法,其特征在于,步骤S4包括:数据分析节点开始对已上链的数据分片进行分析处理,数据分析节点根据具体的任务和算法,生成中间结果数据;中间结果包括统计信息、摘要、模型输出;数据分析节点将生成的中间结果存储在管理节点的缓冲池中。
6.根据权利要求1所述的智慧城市领域区块链数据分层存储的方法,其特征在于,步骤S4中,数据分析节点对联盟链的访问,由管理节点进行身份验证并根据白名单进行授权管理。
7.根据权利要求1所述的智慧城市领域区块链数据分层存储的方法,其特征在于,步骤S7具体包括:
S701、成块机会竞争:
所有管理节点在规定的时间间隔内竞争成块机会;竞争机制基于共识算法;
S702、区块提议:
获得成块机会的管理节点提出一个新的区块,包含了待上链的中间结果;
S703、共识达成:
竞争中获胜的管理节点通过共识算法与其他管理节点达成一致;
S704、区块签名:
获胜的管理节点对提议的区块进行数字签名;签名使用管理节点的私钥进行;
S705、区块广播:
获胜的管理节点将签名的区块广播给整个网络;
S706、网络验证:
其他管理节点接收并验证新区块的签名和内容,确保新区块符合共识规则;
S707、公共区块链存储:
其他管理节点接受并验证通过的区块后,将其存储在公共区块链上;
S708、用户访问:
新区块被成功添加到公共区块链,用户通过相应的接口访问其中的内容,查询、验证或使用已上链的中间结果。
8.一种智慧城市领域区块链数据分层存储的系统,其特征在于,所述系统应用了如权利要求1-7任一项所述的智慧城市领域区块链数据分层存储的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311465246.1A CN117200977B (zh) | 2023-11-07 | 2023-11-07 | 一种智慧城市领域区块链数据分层存储的方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311465246.1A CN117200977B (zh) | 2023-11-07 | 2023-11-07 | 一种智慧城市领域区块链数据分层存储的方法及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN117200977A CN117200977A (zh) | 2023-12-08 |
CN117200977B true CN117200977B (zh) | 2024-01-19 |
Family
ID=88983593
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311465246.1A Active CN117200977B (zh) | 2023-11-07 | 2023-11-07 | 一种智慧城市领域区块链数据分层存储的方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117200977B (zh) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110147994A (zh) * | 2019-04-13 | 2019-08-20 | 山东公链信息科技有限公司 | 一种基于同态加密的区块链的即时执行方法 |
CN110945853A (zh) * | 2018-12-07 | 2020-03-31 | 北京大学深圳研究生院 | 基于联盟链投票共识算法产生及管理多模标识网络的方法 |
CN112003886A (zh) * | 2020-07-03 | 2020-11-27 | 北京工业大学 | 一种基于区块链的物联网数据共享系统和方法 |
CN113468551A (zh) * | 2021-05-31 | 2021-10-01 | 南京邮电大学 | 一种基于联盟区块链的家用智能电表数据存储系统及方法 |
CN114079660A (zh) * | 2021-09-28 | 2022-02-22 | 中诚区块链研究院(南京)有限公司 | 一种高性能分布式存储区块数据、时间戳、跨链通信与数据协同方法 |
US11537592B1 (en) * | 2019-04-22 | 2022-12-27 | Wells Fargo Bank, N.A. | Metadata management through blockchain technology |
-
2023
- 2023-11-07 CN CN202311465246.1A patent/CN117200977B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110945853A (zh) * | 2018-12-07 | 2020-03-31 | 北京大学深圳研究生院 | 基于联盟链投票共识算法产生及管理多模标识网络的方法 |
CN110147994A (zh) * | 2019-04-13 | 2019-08-20 | 山东公链信息科技有限公司 | 一种基于同态加密的区块链的即时执行方法 |
US11537592B1 (en) * | 2019-04-22 | 2022-12-27 | Wells Fargo Bank, N.A. | Metadata management through blockchain technology |
CN112003886A (zh) * | 2020-07-03 | 2020-11-27 | 北京工业大学 | 一种基于区块链的物联网数据共享系统和方法 |
CN113468551A (zh) * | 2021-05-31 | 2021-10-01 | 南京邮电大学 | 一种基于联盟区块链的家用智能电表数据存储系统及方法 |
CN114079660A (zh) * | 2021-09-28 | 2022-02-22 | 中诚区块链研究院(南京)有限公司 | 一种高性能分布式存储区块数据、时间戳、跨链通信与数据协同方法 |
Also Published As
Publication number | Publication date |
---|---|
CN117200977A (zh) | 2023-12-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Lee et al. | Blockchain based privacy preserving multimedia intelligent video surveillance using secure Merkle tree | |
CN109766673B (zh) | 一种联盟式音视频版权区块链系统及音视频版权上链方法 | |
US10637669B2 (en) | Data and data lineage control, tracking, and verification | |
CN110800005B (zh) | 分片式、许可式、分布式分类账 | |
CN111444277B (zh) | 一种基于区块链技术的反恐情报协同共享平台及方法 | |
CN108512653A (zh) | 一种基于区块链的电子证据采集和服务方法 | |
CA2531518C (en) | Controlling access to an area | |
CN110032545A (zh) | 基于区块链的文件存储方法、系统及电子设备 | |
CN108540198B (zh) | 基于区块链技术的民航飞行数据防篡改记录方法及装置 | |
Ahmad et al. | Blockchain-based chain of custody: towards real-time tamper-proof evidence management | |
CN107508812A (zh) | 一种工控网络数据存储方法、调用方法及系统 | |
CN114065283A (zh) | 一种轻量级可循环再生的区块链存储方法及装置 | |
EP3709568A1 (en) | Deleting user data from a blockchain | |
CN112615847B (zh) | 基于区块链的数据共享和隐私保护方法 | |
Khodaei et al. | Scalable & resilient vehicle-centric certificate revocation list distribution in vehicular communication systems | |
Herlihy et al. | Enhancing accountability and trust in distributed ledgers | |
CN111970302B (zh) | 一种施工设备权限管理方法及系统 | |
CN109951490A (zh) | 基于区块链的网页防篡改方法、系统及电子设备 | |
CN110929229A (zh) | 一种基于区块链的office文档可信性验证方法及系统 | |
Yan et al. | Blockchain based digital evidence chain of custody | |
Khan et al. | OTIT: Towards secure provenance modeling for location proofs | |
CN114139203A (zh) | 基于区块链的异构身份联盟风险评估系统、方法及终端 | |
CN114528565B (zh) | 一种基于区块链的敏感数据高效上链算法 | |
US20240097879A1 (en) | Blockchain-based data management of distributed binary objects | |
CN114547701A (zh) | 一种基于区块链的防篡改识别芯片信息可信存储系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |