CN109451071B - 一种基于区块链的可信数据网格系统 - Google Patents

一种基于区块链的可信数据网格系统 Download PDF

Info

Publication number
CN109451071B
CN109451071B CN201811635945.5A CN201811635945A CN109451071B CN 109451071 B CN109451071 B CN 109451071B CN 201811635945 A CN201811635945 A CN 201811635945A CN 109451071 B CN109451071 B CN 109451071B
Authority
CN
China
Prior art keywords
data
block chain
module
storage
trusted
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811635945.5A
Other languages
English (en)
Other versions
CN109451071A (zh
Inventor
汪小益
李启雷
梁秀波
邱炜伟
李伟
尹可挺
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Qulian Technology Co Ltd
Original Assignee
Hangzhou Qulian Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Qulian Technology Co Ltd filed Critical Hangzhou Qulian Technology Co Ltd
Priority to CN201811635945.5A priority Critical patent/CN109451071B/zh
Publication of CN109451071A publication Critical patent/CN109451071A/zh
Application granted granted Critical
Publication of CN109451071B publication Critical patent/CN109451071B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/104—Peer-to-peer [P2P] networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
    • G06Q40/04—Trading; Exchange, e.g. stocks, commodities, derivatives or currency exchange
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/04—Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks
    • H04L63/0428—Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks wherein the data content is protected, e.g. by encrypting or encapsulating the payload
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/10—Network architectures or network communication protocols for network security for controlling access to devices or network resources
    • H04L63/101—Access control lists [ACL]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Business, Economics & Management (AREA)
  • Computer Hardware Design (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • Technology Law (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Storage Device Security (AREA)
  • Financial Or Insurance-Related Operations Such As Payment And Settlement (AREA)

Abstract

本发明公开了一种基于区块链的可信数据网格系统,可信数据网格系统结合区块链提供了区块链链下可信数据存储、交换和计算的服务。可信数据网格系统的服务组成包括软件开发包、数据岛、数据代理以及外部区块链。软件开发包提供了软件开发者使用可信数据网格系统的接口；数据岛提供了单节点数据的存储、计算以及网络管理等相关服务；数据代理服务提供了链下数据和链上数据元信息相锚定的方法；外部区块链主要是提供可信数据网格系统的权限控制、数据确权、数据交易等服务。本发明提供了一种全新的区块链链下数据可信管理方案，解决了现有区块链存储、交换大数据性能不足的问题。

Description

一种基于区块链的可信数据网格系统
技术领域
本发明涉及区块链技术、可信数据管理技术，尤其涉及一种基于区块链的可信数据网格系统。
背景技术
区块链技术，区块链是一种新型去中心化协议，能安全地存储数字货币交易或其他数据，信息不可伪造和篡改，区块链上的交易确认由区块链上的所有节点共同完成。区块链由于其共识算法、加密算法等机制能够有效的进行数据资产类数据的管理，例如版权数据、合同数据、游戏道具等。智能合约是部署在区块链上的一段可自动执行的程序，广泛意义上的智能合约包含编程语言、编译器、虚拟机、事件、状态机、容错机制等。结合区块链的智能合约能够有效对数据资产进行确权、交易、权限控制等服务。
然而现有的区块链账本是各节点全同步的账本、区块链上的数据对区块链参与方均可见这不利于数据的高度隐私保护。其次现有区块链只能够支持键值对数据格式存储，对视频、音频以及医疗影像等大文件的存储与交换效率较低，因此结合区块链的链下可信数据存储、交换需求迫切。
发明内容
针对现有区块链存储、交换大数据性能不足的问题，本发明提出了一种基于区块链的可信数据网格系统。该系统支持链下大数据安全存储、链上数据权限控制、P2P数据高效交换。
本发明的目的是通过以下技术方案来实现的：一种基于区块链的可信数据网格系统，包括如下模块：
(1)软件开发包SDK：接收、处理来自用户的服务调用请求。
(2)数据岛：该模块负责链下数据安全存储、交易、执行以及网络控制等任务。该模块包括访问接口、权限控制、交换引擎、执行引擎、网络模块和存储引擎等子模块，其中：访问接口负责数据岛提供的相关服务调用的入口；权限控制模块负责数据操作的安全管控；交换引擎负责节点之间的数据交换；执行引擎提供了数据岛内部数据的执行引擎；网络模块负责可信数据网格节点之间的网络连接以及数据传输工作，存储引擎支持海量数据存储。
(3)数据代理：该模块负责链下数据与链上的网络通信、数据的铆钉、权限控制等。本模块包括访问接口、账户管理、日志系统、交易管理、区块链适配器等子模块，其中：访问接口提供了数据岛与区块链直接的操作入口；账户管理提供了区块链账户的生成、注销、秘钥管理等服务；日志系统提供了交易的持久化功能；交易管理保障了链下调用与链上服务的交易一致性；区块链适配器提供了可信数据网格节点与不同常见区块链系统的对接功能。
(4)区块链：该模块负责可信数据网格系统的权限管理、数据确权、交易计费等功能。
进一步地，所述的数据岛子模块存储引擎支持文件存储、关系型数据存储、键值对存储、对象存储等异构数据存储。
进一步地，数据岛的网络模块支持P2P网络组网、点对点数据加密传输。
进一步地，所述的模块(3)中交易管理模块采用了一种补偿事务机制保证链上链下交易的一致性。
本发明的有益效果：
本发明的基于区块链的可信数据网格系统，允许用户链下存储海量数据，允许用户存储关系型和非关系型数据。所述的可信数据网格系统支持链下节点进行P2P寻址，点对点高速数据交换。所述的可信数据网格系统支持基于链下数据的计算、支持远程节点数据的可用不可见；在提高数据的可用性的前提下保证了原始数据的安全性。本发明的可信数据网格系统对可信数据交易、版权管理、存正溯源等区块链应用场景具有极大的效率提升。
附图说明
图1是基于区块链的可信数据网格系统的逻辑部署视图；
图2是基于区块链的可信数据网格系统的技术架构图。
具体实施方式
下面根据附图和具体实施例详细描述本发明，本发明的目的和效果将变得更加明显。以下结合附图和实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
如图1所示为本发明的基于区块链的可信数据网格系统的逻辑部署图，所述的基于区块链的可信数据网格系统需要协同区块链一起部署。区块链部分负责可信数据网格系统的权限控制、数据元信息管理、数据交易结算、访问记录管理等。可信数据网格系统网络由多个可信数据网格系统节点组成，参与该网络的机构部署一个节点。该节点可存储异构数据并负责机构间的数据安全交换服务。
如图2所示，一种基于区块链的可信数据网格系统，包括如下模块：
(1)软件开发包SDK:接收来自用户的服务调用请求。
(2)数据岛：该模块负责链下数据安全存储、交易、执行以及网络控制等任务。该模块包括访问接口、权限控制、交换引擎、执行引擎、网络模块和存储引擎等子模块，其中：访问接口负责数据岛提供的相关服务调用的入口；权限控制模块负责数据操作权限管控；交换引擎节点之间的数据交换；执行引擎提供了数据岛内部数据的执行引擎；网络模块负责可信数据网格节点之间的网络连接以及数据传输工作，存储引擎支持海量数据存储。
(3)数据代理：该模块负责链下数据与链上数据的铆钉、权限控制等。本模块包括访问接口、账户管理、日志系统、交易管理、区块链适配器等子模块，其中：访问接口提供了数据岛与区块链直接的操作入口；账户管理提供了区块链账户的生成、注销、秘钥管理等服务；日志系统提供了交易的持久化功能；交易管理提供了链下调用与链上服务的交易一致性；区块链适配器提供了可信数据网格节点与不同常见区块链系统的对接功能。
(4)区块链：该模块负责可信数据网格系统的权限管理、数据确权、交易计费等功能。
进一步地，所述的数据岛子模块存储引擎支持文件存储、关系型数据存储、键值对存储、对象存储等异构数据存储；
进一步地，数据岛的网络模块支持P2P网络组网、点对点数据加密传输。
进一步地，所述的交易管理模块采用了一种补偿事务机制保证链上链下交易的一致性。
本领域普通技术人员可以理解，以上所述仅为发明的优选实例而已，并不用于限制发明，尽管参照前述实例对发明进行了详细的说明，对于本领域的技术人员来说，其依然可以对前述各实例记载的技术方案进行修改，或者对其中部分技术特征进行等同替换。凡在发明的精神和原则之内，所做的修改、等同替换等均应包含在发明的保护范围之内。

Claims (4)

1.一种基于区块链的可信数据网格系统，其特征在于，包括如下模块：
(1)软件开发包SDK：接收、处理来自用户的服务调用请求；
(2)数据岛：该模块负责链下数据安全存储、交易、执行以及网络控制的任务；该模块包括访问接口、权限控制、交换引擎、执行引擎、网络模块和存储引擎的子模块，其中：访问接口负责数据岛提供的相关服务调用的入口；权限控制模块负责数据操作的安全管控；交换引擎负责节点之间的数据交换；执行引擎提供了数据岛内部数据的执行引擎；网络模块负责可信数据网格节点之间的网络连接以及数据传输工作，存储引擎支持海量数据存储；
(3)数据代理：该模块负责链下数据与链上的网络通信、数据的铆钉、权限控制；本模块包括访问接口、账户管理、日志系统、交易管理、区块链适配器的子模块，其中：访问接口提供了数据岛与区块链直接的操作入口；账户管理提供了区块链账户的生成、注销、秘钥管理的服务；日志系统提供了交易的持久化功能；交易管理保障了链下调用与链上服务的交易一致性；区块链适配器提供了可信数据网格节点与不同常见区块链系统的对接功能；
(4)区块链：该模块负责可信数据网格系统的权限管理、数据确权、交易计费的功能。
2.如权利要求1所述的一种基于区块链的可信数据网格系统，其特征在于，所述的数据岛存储引擎子模块支持文件存储、关系型数据存储、键值对存储、对象存储的异构数据存储。
3.如权利要求1所述的一种基于区块链的可信数据网格系统，其特征在于，数据岛的网络模块支持P2P网络组网、点对点数据加密传输。
4.如权利要求1所述的一种基于区块链的可信数据网格系统，其特征在于，数据代理模块中的交易管理模块采用了一种补偿事务机制保证链上链下交易的一致性。
CN201811635945.5A 2018-12-29 2018-12-29 一种基于区块链的可信数据网格系统 Active CN109451071B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811635945.5A CN109451071B (zh) 2018-12-29 2018-12-29 一种基于区块链的可信数据网格系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811635945.5A CN109451071B (zh) 2018-12-29 2018-12-29 一种基于区块链的可信数据网格系统

Publications (2)

Publication Number Publication Date
CN109451071A CN109451071A (zh) 2019-03-08
CN109451071B true CN109451071B (zh) 2021-05-11

Family

ID=65539770

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811635945.5A Active CN109451071B (zh) 2018-12-29 2018-12-29 一种基于区块链的可信数据网格系统

Country Status (1)

Country Link
CN (1) CN109451071B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110888630B (zh) * 2019-11-08 2023-05-26 杭州趣链科技有限公司 一种基于区块链的分布式可编程业务研发系统
CN112887346A (zh) * 2019-11-29 2021-06-01 阿里健康信息技术有限公司 一种服务网络系统、服务请求处理方法和存储介质
CN112822207B (zh) * 2021-01-29 2022-10-14 上海分布信息科技有限公司 一种区块链数据的管理方法及系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106055993A (zh) * 2016-08-13 2016-10-26 深圳市樊溪电子有限公司 一种用于区块链的加密存储系统及其使用方法
CN107169765A (zh) * 2017-05-11 2017-09-15 电子科技大学 一种基于业务信任度对区块链共识进行动态调整的方法
CN107392813A (zh) * 2017-09-12 2017-11-24 杭州趣链科技有限公司 一种基于区块链的学籍信息共享系统
CN108282539A (zh) * 2018-02-06 2018-07-13 北京奇虎科技有限公司 基于双层网络的去中心化存储系统
CN108769031A (zh) * 2018-05-31 2018-11-06 中化能源科技有限公司 基于区块链的边缘计算服务的实物存证溯源系统
MX2018004053A (es) * 2015-10-02 2018-12-17 Delta Energy & Communications Inc Red de malla de entrega y recepcion de datosdigitales complementarios y alternativos realizada a traves de la colocacion de dispositivos de monitoreo montados en transformadores mejorados.

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
MX2018004053A (es) * 2015-10-02 2018-12-17 Delta Energy & Communications Inc Red de malla de entrega y recepcion de datosdigitales complementarios y alternativos realizada a traves de la colocacion de dispositivos de monitoreo montados en transformadores mejorados.
CN106055993A (zh) * 2016-08-13 2016-10-26 深圳市樊溪电子有限公司 一种用于区块链的加密存储系统及其使用方法
CN107169765A (zh) * 2017-05-11 2017-09-15 电子科技大学 一种基于业务信任度对区块链共识进行动态调整的方法
CN107392813A (zh) * 2017-09-12 2017-11-24 杭州趣链科技有限公司 一种基于区块链的学籍信息共享系统
CN108282539A (zh) * 2018-02-06 2018-07-13 北京奇虎科技有限公司 基于双层网络的去中心化存储系统
CN108769031A (zh) * 2018-05-31 2018-11-06 中化能源科技有限公司 基于区块链的边缘计算服务的实物存证溯源系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
赋权与重构:区块链技术对数据孤岛的破解;周茂君等;《新闻与传播评论》;20181008;第58-67页 *

Also Published As

Publication number Publication date
CN109451071A (zh) 2019-03-08

Similar Documents

Publication Publication Date Title
CN109451071B (zh) 一种基于区块链的可信数据网格系统
US10649953B2 (en) Blockchain-based data migration method and apparatus
US11494270B2 (en) Data backup method, storage medium, and computing device
CN107733855B (zh) 一种可同时支持公有链、联盟链及私有链的区块链系统及应用方法
Schmidt Middleware for real-time and embedded systems
CN113114759B (zh) 一种实现多链互通的跨链方法及系统
CN101739301B (zh) Unix环境下进程间大量数据传输的方法
CN106060176A (zh) 一种基于混合云的云计算应用架构及云计算服务方法
CN111368330B (zh) 一种基于区块链的以太坊智能合约审计系统及方法
CN114255031A (zh) 用于执行交易的跨区块链的系统、跨链交易方法及设备
CN103488546A (zh) 一种支持多级别数据和数据库在线并发备份与恢复方法
CN105893320A (zh) 一种面向多核处理器的远程任务函数调用方法
CN110888630B (zh) 一种基于区块链的分布式可编程业务研发系统
CN103618762A (zh) 一种基于aop的企业服务总线状态预处理系统及方法
CN104252374A (zh) 基于架构改变的程序管控方法及装置
CN103152390A (zh) 分布式存储系统的节点配置方法、装置、节点及系统
CN109672519A (zh) 一种密码装置及其数据加解密方法
CN105357042A (zh) 一种高可用集群系统及其主节点和从节点
CN107577578A (zh) 统计nfs操作字时延的方法、装置、设备以及存储介质
JP2022553963A (ja) 同期処理方法及び関連装置
CN115759955A (zh) 一种基于区块链的业务流程执行引擎
CN117522581A (zh) 一种基于区块链的分布式资源交易平台
CN102984739A (zh) 故障信息处理方法及装置
EP4287102A1 (en) Cross-chain transaction processing method and apparatus, electronic device, and storage medium
CN113051618B (zh) 一种用于区块链的智能合约隐私数据处理系统及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant