CN109388643A - 一种基于区块链的快速数据检索系统及方法 - Google Patents
一种基于区块链的快速数据检索系统及方法 Download PDFInfo
- Publication number
- CN109388643A CN109388643A CN201811255286.2A CN201811255286A CN109388643A CN 109388643 A CN109388643 A CN 109388643A CN 201811255286 A CN201811255286 A CN 201811255286A CN 109388643 A CN109388643 A CN 109388643A
- Authority
- CN
- China
- Prior art keywords
- data
- block chain
- message queue
- module
- real time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种基于区块链的快速数据检索系统及方法,其中的一种基于区块链的快速数据检索方法,包括以下步骤:S1,注册模块,注册区块链候选节点,实时同步区块链数据,把区块链数据实时同步到待处理消息队列;S2,数据索引模块实时读取待处理消息队列数据,对数据进行脱敏处理,并对脱敏后的数据建立索引;S3,检索模块按照索引快速检索区块链数据,并获得数据交易编号,依据交易编号向区块链中获取实际数据并返回。本发明的基于区块链的快速数据检索系统及方法,旨在解决背景技术问题如何对区块链数据快速检索。
Description
技术领域
本发明涉及区块链,具体涉及一种基于区块链的快速数据检索系统及方法。
背景技术
区块链数据存储在区块上,不可篡改和伪造,对区块链上的数据查询是区块链应用的必备功能。但数据按照区块、账户或交易方式检索没有什么问题,如果需要对不同账户、不同交易、不同区块中的相关数据进行综合检索,则遇到了问题。如何对区块链数据快速检索,日渐成为区块链技术是否能够商业落地的阻碍。
区块链技术目前主要用于钱包交易,数字资产不只有数字货币,还存在大量有价值的数据,如医疗健康数据、食品药品溯源数据、版权数据等,这些业务数据如果存在区块链上,何快速检索存在问题,目前还没有一种成熟的区块链快速检索技术能够满足商业落地的要求。
发明内容
本发明针对上述问题,提供了一种基于区块链的快速数据检索系统及方法。
根据本发明的一个方面,提供了一种基于区块链的快速数据检索系统,包括:
注册模块:注册区块链候选节点,实时同步区块链数据,把区块链数据实时同步到待处理消息队列;
数据索引模块:实时读取待处理消息队列数据,对数据进行脱敏处理,并对脱敏后的数据建立索引;
检索模块:按照索引快速检索区块链数据,并获得数据交易编号,依据交易编号向区块链中获取实际数据并返回;
注册模块加入不同的区块链网络,只有注册为对应的候选节点,才能获得完整数据备份,获得数据完整备份之后不可能实时处理大量数据,只能把数据同步到不同的消息队列,解耦解析模块;解析模块对不同的队列的数据进行解析,把处理后的数据保存到目标库即搜索引擎中;搜索模块是从搜索模块中按照分词、索引的方式把数据快速的检索出来。
根据本发明的一个方面,提供了一种基于区块链的快速数据检索方法,包括以下步骤:
S1,注册模块,注册区块链候选节点,实时同步区块链数据,把区块链数据实时同步到待处理消息队列;
S2,数据索引模块实时读取待处理消息队列数据,对数据进行脱敏处理,并对脱敏后的数据建立索引;
S3,检索模块按照索引快速检索区块链数据,并获得数据交易编号,依据交易编号向区块链中获取实际数据并返回。
进一步地,所述步骤S1具体为:
注册模块注册区块链候选节点,更新源代码、编译、安装,通过命令注册,实时同步区块链数据,包括开发同步插件,实时获取未同步的区块列表,逐个同步区块中的数据,把区块链数据实时同步到待处理消息队列,包括采用消息队列插件,连接消息队列,把数据推送到消息队列。
更进一步地,所述步骤S2具体为:
数据索引模块实时读取待处理消息队列数据,包括订阅消息队列,获得消息后逐个读取并进行解析;对数据进行脱敏处理,过滤具体人的直接信息,包括个人姓名、身份证号、手机号、密码、住址;并对脱敏后的数据建立索引,包括把脱敏后的数据进行分词,根据分词建立索引,保存索引信息。
本发明的优点:
本发明的基于区块链的快速数据检索系统及方法,旨在解决背景技术问题如何对区块链数据快速检索。本发明主要是为了实现区块链数据的快速检索,满足商业落地对性能、功能上要求,解决个人医疗健康数据、食品药品溯源数据、版权数据等数据存在区块链上,数据格式不同,数据内容不同的问题。
除了上面所描述的目的、特征和优点之外,本发明还有其它的目的、特征和优点。下面将参照图,对本发明作进一步详细的说明。
附图说明
构成本申请的一部分的附图用来提供对本发明的进一步理解,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。
图1是本发明的一种基于区块链的快速数据检索系统结构框图;
图2是本发明的一种基于区块链的快速数据检索方法流程图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
实施例1
参考图1,如图1所示,一种基于区块链的快速数据检索系统,包括:
注册模块:注册区块链候选节点,实时同步区块链数据,把区块链数据实时同步到待处理消息队列;
数据索引模块:实时读取待处理消息队列数据,对数据进行脱敏处理,并对脱敏后的数据建立索引;
检索模块:按照索引快速检索区块链数据,并获得数据交易编号,依据交易编号向区块链中获取实际数据并返回;
注册模块加入不同的区块链网络,只有注册为对应的候选节点,才能获得完整数据备份,获得数据完整备份之后不可能实时处理大量数据,只能把数据同步到不同的消息队列,解耦解析模块;解析模块对不同的队列的数据进行解析,把处理后的数据保存到目标库即搜索引擎中;搜索模块是从搜索模块中按照分词、索引的方式把数据快速的检索出来。
实施例2
参考图2,如图2所示,一种基于区块链的快速数据检索方法,包括以下步骤:
S1,注册模块,注册区块链候选节点,实时同步区块链数据,把区块链数据实时同步到待处理消息队列;
S2,数据索引模块实时读取待处理消息队列数据,对数据进行脱敏处理,并对脱敏后的数据建立索引;
S3,检索模块按照索引快速检索区块链数据,并获得数据交易编号,依据交易编号向区块链中获取实际数据并返回。
所述步骤S1具体为:注册模块注册区块链候选节点,更新源代码、编译、安装,通过命令注册,如EOS节点注册命令:cleos --wallet-url http://127.0.0.1:8900 --urlhttp://192.168.154.157:8888
systemregproducerzero EOS5nquErGx97QiN6m5DspwLU8wNLmVAm78ccpz
V6Ht4nfcJhepy;实时同步区块链数据,包括开发同步插件,实时获取未同步的区块列表,逐个同步区块中的数据;把区块链数据实时同步到待处理消息队列,包括采用消息队列插件,连接消息队列,把数据推送到消息队列,如kafka消息队列;
所述步骤S2具体为:数据索引模块实时读取待处理消息队列数据,包括订阅消息队列,获得消息后逐个读取并进行解析;对数据进行脱敏处理,过滤具体人的直接信息,包括个人姓名、身份证号、手机号、密码、住址;并对脱敏后的数据建立索引,包括把脱敏后的数据进行分词,根据分词建立索引,保存索引信息,参考Solr索引建立;
所述步骤S3具体为:检索模块按照索引快速检索区块链数据;并获得数据交易编号即交易的哈希值,唯一标识一次交易,如:"transaction_id": "eb4b94b72718a369af09eb2e7885b3f494dd1d8a20278a6634611d5edd76b703"b),依据交易编号向区块链中获取实际数据并返回。
本发明的基于区块链的快速数据检索系统及方法,旨在解决背景技术问题如何对区块链数据快速检索。本发明主要是为了实现区块链数据的快速检索,满足商业落地对性能、功能上要求,解决个人医疗健康数据、食品药品溯源数据、版权数据等数据存在区块链上,数据格式不同,数据内容不同的问题。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (4)
1.一种基于区块链的快速数据检索系统,其特征在于,包括:
注册模块:注册区块链候选节点,实时同步区块链数据,把区块链数据实时同步到待处理消息队列;
数据索引模块:实时读取待处理消息队列数据,对数据进行脱敏处理,并对脱敏后的数据建立索引;
检索模块:按照索引快速检索区块链数据,并获得数据交易编号,依据交易编号向区块链中获取实际数据并返回;
注册模块加入不同的区块链网络,只有注册为对应的候选节点,才能获得完整数据备份,获得数据完整备份之后不可能实时处理大量数据,只能把数据同步到不同的消息队列,解耦解析模块;解析模块对不同的队列的数据进行解析,把处理后的数据保存到目标库即搜索引擎中;搜索模块是从搜索模块中按照分词、索引的方式把数据快速的检索出来。
2.一种基于区块链的快速数据检索方法,其特征在于,包括以下步骤:
S1,注册模块,注册区块链候选节点,实时同步区块链数据,把区块链数据实时同步到待处理消息队列;
S2,数据索引模块实时读取待处理消息队列数据,对数据进行脱敏处理,并对脱敏后的数据建立索引;
S3,检索模块按照索引快速检索区块链数据,并获得数据交易编号,依据交易编号向区块链中获取实际数据并返回。
3.根据权利要求2所述的基于区块链的快速数据检索方法,其特征在于,所述步骤S1具体为:
注册模块注册区块链候选节点,更新源代码、编译、安装,通过命令注册,实时同步区块链数据,包括开发同步插件,实时获取未同步的区块列表,逐个同步区块中的数据,把区块链数据实时同步到待处理消息队列,包括采用消息队列插件,连接消息队列,把数据推送到消息队列。
4.根据权利要求2所述的基于区块链的快速数据检索方法,其特征在于,所述步骤S2具体为:
数据索引模块实时读取待处理消息队列数据,包括订阅消息队列,获得消息后逐个读取并进行解析;对数据进行脱敏处理,过滤具体人的直接信息,包括个人姓名、身份证号、手机号、密码、住址;并对脱敏后的数据建立索引,包括把脱敏后的数据进行分词,根据分词建立索引,保存索引信息。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811255286.2A CN109388643A (zh) | 2018-10-26 | 2018-10-26 | 一种基于区块链的快速数据检索系统及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811255286.2A CN109388643A (zh) | 2018-10-26 | 2018-10-26 | 一种基于区块链的快速数据检索系统及方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN109388643A true CN109388643A (zh) | 2019-02-26 |
Family
ID=65427140
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811255286.2A Pending CN109388643A (zh) | 2018-10-26 | 2018-10-26 | 一种基于区块链的快速数据检索系统及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109388643A (zh) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110022211A (zh) * | 2019-04-01 | 2019-07-16 | 王龙 | 一种基于区块链的数据筛选系统 |
CN110069295A (zh) * | 2019-05-06 | 2019-07-30 | 百度在线网络技术(北京)有限公司 | 区块链处理方法、装置、设备和介质 |
CN110222053A (zh) * | 2019-05-21 | 2019-09-10 | 深圳壹账通智能科技有限公司 | 一种基于区块链的溯源数据的获取方法及相关设备 |
CN110275887A (zh) * | 2019-06-20 | 2019-09-24 | 深圳前海微众银行股份有限公司 | 一种基于区块链系统的数据处理方法、系统及装置 |
CN111078700A (zh) * | 2019-12-13 | 2020-04-28 | 山东众阳健康科技集团有限公司 | 一种基于区块链的数据同步方法及系统 |
CN111612440A (zh) * | 2020-03-11 | 2020-09-01 | 上海十进制网络信息科技有限公司 | 一种数字货币的流通方法、装置、服务器和可读存储介质 |
CN112506925A (zh) * | 2020-12-01 | 2021-03-16 | 浙商银行股份有限公司 | 一种基于区块链的数据检索系统及方法 |
CN113138989A (zh) * | 2021-03-12 | 2021-07-20 | 莘上信息技术(上海)有限公司 | 区块链数据检索方法及装置 |
CN113505319A (zh) * | 2021-07-27 | 2021-10-15 | 上海点融信息科技有限责任公司 | 为BaaS平台上的搜索引擎更新检索内容的方法、装置及介质 |
WO2022109847A1 (en) | 2020-11-25 | 2022-06-02 | Alipay (Hangzhou) Information Technology Co., Ltd. | Blockchain-based trusted platform |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107239479A (zh) * | 2017-03-28 | 2017-10-10 | 阿里巴巴集团控股有限公司 | 一种基于区块链的数据存储以及查询的方法及装置 |
CN107729383A (zh) * | 2017-09-18 | 2018-02-23 | 联动优势科技有限公司 | 一种索引库生成方法、数据验证方法、装置及平台 |
CN107943951A (zh) * | 2017-11-24 | 2018-04-20 | 中钞信用卡产业发展有限公司杭州区块链技术研究院 | 一种区块链业务信息的检索方法及系统 |
-
2018
- 2018-10-26 CN CN201811255286.2A patent/CN109388643A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107239479A (zh) * | 2017-03-28 | 2017-10-10 | 阿里巴巴集团控股有限公司 | 一种基于区块链的数据存储以及查询的方法及装置 |
CN107729383A (zh) * | 2017-09-18 | 2018-02-23 | 联动优势科技有限公司 | 一种索引库生成方法、数据验证方法、装置及平台 |
CN107943951A (zh) * | 2017-11-24 | 2018-04-20 | 中钞信用卡产业发展有限公司杭州区块链技术研究院 | 一种区块链业务信息的检索方法及系统 |
Cited By (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110022211B (zh) * | 2019-04-01 | 2020-11-24 | 天聚地合(苏州)数据股份有限公司 | 一种基于区块链的数据筛选系统 |
CN110022211A (zh) * | 2019-04-01 | 2019-07-16 | 王龙 | 一种基于区块链的数据筛选系统 |
CN110069295B (zh) * | 2019-05-06 | 2022-06-17 | 百度在线网络技术(北京)有限公司 | 区块链处理方法、装置、设备和介质 |
CN110069295A (zh) * | 2019-05-06 | 2019-07-30 | 百度在线网络技术(北京)有限公司 | 区块链处理方法、装置、设备和介质 |
CN110222053A (zh) * | 2019-05-21 | 2019-09-10 | 深圳壹账通智能科技有限公司 | 一种基于区块链的溯源数据的获取方法及相关设备 |
CN110222053B (zh) * | 2019-05-21 | 2023-03-21 | 深圳壹账通智能科技有限公司 | 一种基于区块链的溯源数据的获取方法及相关设备 |
CN110275887A (zh) * | 2019-06-20 | 2019-09-24 | 深圳前海微众银行股份有限公司 | 一种基于区块链系统的数据处理方法、系统及装置 |
CN111078700A (zh) * | 2019-12-13 | 2020-04-28 | 山东众阳健康科技集团有限公司 | 一种基于区块链的数据同步方法及系统 |
CN111612440A (zh) * | 2020-03-11 | 2020-09-01 | 上海十进制网络信息科技有限公司 | 一种数字货币的流通方法、装置、服务器和可读存储介质 |
CN111612440B (zh) * | 2020-03-11 | 2024-03-12 | 上海十进制网络信息科技有限公司 | 一种数字货币的流通方法、装置、服务器和可读存储介质 |
EP4066475A4 (en) * | 2020-11-25 | 2022-12-21 | Alipay (Hangzhou) Information Technology Co., Ltd. | TRUSTED BLOCKCHAIN-BASED PLATFORM |
WO2022109847A1 (en) | 2020-11-25 | 2022-06-02 | Alipay (Hangzhou) Information Technology Co., Ltd. | Blockchain-based trusted platform |
CN112506925A (zh) * | 2020-12-01 | 2021-03-16 | 浙商银行股份有限公司 | 一种基于区块链的数据检索系统及方法 |
CN113138989B (zh) * | 2021-03-12 | 2022-12-27 | 莘上信息技术(上海)有限公司 | 区块链数据检索方法及装置 |
CN113138989A (zh) * | 2021-03-12 | 2021-07-20 | 莘上信息技术(上海)有限公司 | 区块链数据检索方法及装置 |
CN113505319A (zh) * | 2021-07-27 | 2021-10-15 | 上海点融信息科技有限责任公司 | 为BaaS平台上的搜索引擎更新检索内容的方法、装置及介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109388643A (zh) | 一种基于区块链的快速数据检索系统及方法 | |
Jackoway et al. | Identification of live news events using Twitter | |
CN105138652B (zh) | 一种企业关联关系识别方法及系统 | |
US8370358B2 (en) | Tagging content with metadata pre-filtered by context | |
US20080250425A1 (en) | Systems and methods for interfacing multiple types of object identifiers and object identifier readers to multiple types of applications | |
WO2002080071A3 (en) | Optimized system and method for finding best fares | |
CN110276060B (zh) | 数据处理的方法以及装置 | |
CN109376146A (zh) | 一种基于区块链的搜索引擎系统及方法 | |
CN101287214A (zh) | 通过移动终端获取信息并应用的方法和系统 | |
CN105550359B (zh) | 一种基于垂直搜索的网页排序方法、装置及服务器 | |
US20130179421A1 (en) | System and Method for Collecting URL Information Using Retrieval Service of Social Network Service | |
CN104424202A (zh) | 对crm系统中的客户信息进行查重的方法及系统 | |
CN112506925A (zh) | 一种基于区块链的数据检索系统及方法 | |
JP4614854B2 (ja) | コミュニティ管理装置、及びコミュニティ管理プログラム | |
CN105792152A (zh) | 伪基站短信识别方法和装置 | |
CN102262633B (zh) | 一种面向全文检索的结构化数据安全检索方法 | |
CN109408594A (zh) | 一种基于区块链的跨链数据检索系统及方法 | |
US9665574B1 (en) | Automatically scraping and adding contact information | |
CN105930313A (zh) | 处理通知信息的方法和装置 | |
KR101556743B1 (ko) | 웹 수집에 기반한 관심 정보 생성 장치 및 그 방법 | |
CN116719997A (zh) | 政策信息推送方法、装置及电子设备 | |
CN106997369A (zh) | 数据清理方法及装置 | |
CN112307318A (zh) | 一种内容发布方法、系统及装置 | |
CN107862016A (zh) | 一种专题页面的配置方法 | |
CN106547764A (zh) | 网页数据去重的方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190226 |
|
RJ01 | Rejection of invention patent application after publication |