CN115205041B - 一种基于区块链的金融大数据处理系统及方法 - Google Patents
一种基于区块链的金融大数据处理系统及方法 Download PDFInfo
- Publication number
- CN115205041B CN115205041B CN202210831962.6A CN202210831962A CN115205041B CN 115205041 B CN115205041 B CN 115205041B CN 202210831962 A CN202210831962 A CN 202210831962A CN 115205041 B CN115205041 B CN 115205041B
- Authority
- CN
- China
- Prior art keywords
- financial data
- financial
- acquisition request
- node
- data acquisition
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
- G06Q40/04—Trading; Exchange, e.g. stocks, commodities, derivatives or currency exchange
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
- G06Q40/06—Asset management; Financial planning or analysis
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Abstract
本公开提供了一种基于区块链的金融大数据处理系统及方法,包括:金融数据应用节点,其用于向部署于区块链网络中的金融数据管控节点发送金融数据获取请求;同时,对接收到的金融数据解密,获得所需金融数据;金融数据管控节点,其用于接收金融数据获取请求,并将其发送至部署于区块链网络中的各个金融数据产生节点上;同时,接收各个金融数据产生节点提供的金融数据,并对金融数据进行相应处理,将最终得到的金融数据进行加密和可信存储,并将其通过可信通道发送至提交金融数据获取请求的金融数据应用节点;金融数据产生节点,其用于基于金融数据管控节点发送的金融数据获取请求收集数据,将收集到的金融数据通过可信通道发送至金融数据管控节点。
Description
技术领域
本公开属于大数据处理技术领域,尤其涉及一种基于区块链的金融大数据处理系统及方法。
背景技术
本部分的陈述仅仅是提供了与本公开相关的背景技术信息,不必然构成在先技术。
区块链是一个分布式的共享数据库,具有不可篡改、全程留痕、可以追溯等特征。这些特点保证区块链可以安全地传输和存储数据,所以可以应用于众多领域。金融数据是指金融行业所涉及的市场数据、公司数据、行业指数和定价数据。金融从业者想获取定向、准确、有效、安全的金融数据为市场分析提供参考。
但是,发明人发现,目前金融数据的应用方仍存在不能快速找到自己想要的金融数据的情况,并且金融数据的准确性、有效性以及传输安全性也有待提高。因此,如何应用区块链技术为金融数据应用方提供定向、准确、有效、安全的金融数据,是本领域技术人员目前急需解决的技术问题。
发明内容
本公开为了解决上述问题,提供了一种基于区块链的金融大数据处理系统及方法,所述方案能够为金融数据应用方提供定向、准确、有效的金融数据,并保证金融数据传输的安全性。
根据本公开实施例的第一个方面,提供了一种基于区块链的金融大数据处理系统,包括:
金融数据应用节点,其用于向部署于区块链网络中的金融数据管控节点发送金融数据获取请求;同时,对接收到的所述金融数据解密,获得所需金融数据;
金融数据管控节点,其用于接收所述金融数据获取请求,并将其发送至部署于区块链网络中的各个金融数据产生节点上;同时,接收各个金融数据产生节点提供的金融数据,并对金融数据进行甄别、去重及整合,将最终得到的金融数据进行加密和可信存储,并将其通过可信通道发送至提交金融数据获取请求的所述金融数据应用节点;
金融数据产生节点,其用于基于所述金融数据管控节点发送的金融数据获取请求收集数据,将收集到的金融数据通过可信通道发送至所述金融数据管控节点。
根据本公开实施例的第二个方面,提供了一种基于区块链的金融大数据处理方法,其利用了上述的一种基于区块链的金融大数据处理系统,包括:
区块链网络中的金融数据应用节点向区块链网络中金融数据管控节点发送金融数据获取请求;
所述金融数据管控节点接收到所述金融数据获取请求,将其发送至区块链网络中的各个金融数据产生节点上;
所述金融数据产生节点依照所述金融数据管控节点发送的金融数据获取请求收集数据,将收集到的金融数据通过可信通道发送至所述金融数据管控节点;
所述金融数据管控节点接收各个金融数据产生节点提供的金融数据,并对金融数据进行甄别、去重及整合,将最终得到的金融数据进行加密和可信存储,并将其通过可信通道发送至提交金融数据获取请求的所述金融数据应用节点;
所述金融数据应用节点对接收到的所述金融数据解密,获取所需金融数据。
根据本公开实施例的第三个方面,提供了一种计算机可读存储介质,其上存储有程序,该程序被处理器执行时实现如上所述的一种基于区块链的金融大数据处理方法。
根据本公开实施例的第四个方面,提供了一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的程序,所述处理器执行所述程序时实现如上所述的一种基于区块链的金融大数据处理方法。
与现有技术相比,本公开的有益效果是:
本公开所述方案提供一种基于区块链的金融大数据处理系统及方法,金融数据管控节点按金融数据应用节点发送的金融数据获取请求来收集金融数据,可以为金融数据应用节点提供精准定向的金融数据;金融数据管控节点对各个金融数据产生节点发送的金融数据进行甄别、去重、整合,有助于为金融数据应用节点提供准确、有效、有条理的金融数据;金融数据管控节点在接收金融数据获取请求后,先在金融数据存储区中查找历史数据,再收集最新的金融数据,大大提高了金融数据收集的效率,并保证了金融数据的时效性;金融数据应用节点利用自身掌握的信息与金融数据管控节点发送过来的加密随机标识符结合,解压金融数据压缩包,既能验证金融数据应用节点,又提高了金融数据传输的安全性。
本公开附加方面的优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本公开的实践了解到。
附图说明
构成本公开的一部分的说明书附图用来提供对本公开的进一步理解,本公开的示意性实施例及其说明用于解释本公开,并不构成对本公开的不当限定。
图1为本公开实施例中所述的基于区块链的金融大数据处理系统结构示意图;
图2为本公开实施例中所述的基于区块链的金融大数据处理方法流程图。
具体实施方式
下面结合附图与实施例对本公开做进一步说明。
应该指出,以下详细说明都是示例性的,旨在对本公开提供进一步的说明。除非另有指明,本文使用的所有技术和科学术语具有与本公开所属技术领域的普通技术人员通常理解的相同含义。
需要注意的是,这里所使用的术语仅是为了描述具体实施方式,而非意图限制根据本公开的示例性实施方式。如在这里所使用的,除非上下文另外明确指出,否则单数形式也意图包括复数形式,此外,还应当理解的是,当在本说明书中使用术语“包含”和/或“包括”时,其指明存在特征、步骤、操作、器件、组件和/或它们的组合。
在不冲突的情况下,本公开中的实施例及实施例中的特征可以相互组合。
实施例一:
本实施例的目的是提供一种基于区块链的金融大数据处理系统。
如图1所示,一种基于区块链的金融大数据处理系统,包括:
金融数据应用节点,其用于向部署于区块链网络中的金融数据管控节点发送金融数据获取请求;同时,对接收到的所述金融数据解密,获得所需金融数据;
金融数据管控节点,其用于接收所述金融数据获取请求,并将其发送至部署于区块链网络中的各个金融数据产生节点上;同时,接收各个金融数据产生节点提供的金融数据,并对金融数据进行甄别、去重及整合,将最终得到的金融数据进行加密和可信存储,并将其通过可信通道发送至提交金融数据获取请求的所述金融数据应用节点;
金融数据产生节点,其用于基于所述金融数据管控节点发送的金融数据获取请求收集数据,将收集到的金融数据通过可信通道发送至所述金融数据管控节点。
进一步的,所述金融数据应用节点向部署于区块链网络中的金融数据管控节点发送金融数据获取请求,具体为:
所述金融数据应用节点发出金融数据获取请求,将所述金融数据获取请求利用非对称加密算法加密后经可信通道发送至所述金融数据管控节点;
所述金融数据应用节点将所述金融数据获取请求中金融数据类型的数字代码进行可信存储,并记录发送所述金融数据获取请求的日期。
进一步的,所述金融数据管控节点接收所述金融数据获取请求,并将其发送至部署于区块链网络中的各个金融数据产生节点上,具体为:
所述金融数据管控节点将所述加密后的金融数据获取请求解密,得到所述金融数据应用节点的金融数据获取请求;
根据所述金融数据获取请求在金融数据存储区中查找历史金融数据,将符合所述金融数据获取请求的历史金融数据存储至待整合区;
汇总在金融数据存储区没有历史金融数据和缺少近期数据的金融数据获取请求信息,形成最新的金融数据获取请求;
将最新的金融数据获取请求加密后经可信通道发送至各个金融数据产生节点。
进一步的,所述金融数据产生节点基于所述金融数据管控节点发送的金融数据获取请求收集数据,将收集到的金融数据通过可信通道发送至所述金融数据管控节点,具体为:
所述金融数据产生节点将所述加密后的金融数据获取请求解密,基于其整理可用的金融数据;
所述金融数据产生节点记录整理出的金融数据的基本信息,联同整理出的金融数据打包形成金融数据压缩包;
所述金融数据产生节点将金融数据压缩包经可信通道发送至所述金融数据管控节点。
进一步的,所述接收各个金融数据产生节点提供的金融数据,并对金融数据进行甄别、去重、整合,将最终得到的金融数据进行加密和可信存储,具体为:
所述金融数据管控节点将待整合区的所有金融数据去重、整合,将重复的金融数据删除,将各个类别的金融数据按照时间顺序整合,将所述整合完毕的金融数据先存入金融数据存储区,将金融数据存储区中同一类型的过时的金融数据替换掉,保证金融数据存储区中金融数据的准确性和时效性,再将所述整合完毕的数据放入待发送区。
进一步的,所述金融数据管控节点将加密后的金融数据压缩包和加密后的随机标识符通过可信通道发送至提交金融数据获取请求的所述金融数据应用节点,具体为:
所述金融数据管控节点将待发送区的金融数据打包,并生成一组随机标识符,运用所述随机标识符和所述金融数据类型的数字代码为所述金融数据压缩包加密,将所述随机标识符运用所述金融数据应用节点的名称和提交金融数据获取请求的日期加密;
所述金融数据管控节点将加密后的金融数据压缩包和加密后的随机标识符经可信通道发送至提交金融数据获取请求的金融数据应用节点。
进一步的,所述金融数据应用节点对接收到的所述金融数据解密,获得所需金融数据,具体为:
所述金融数据应用节点接收到所述金融数据压缩包和加密后的随机标识符,首先利用自身名称和提交金融数据获取请求的日期对加密后的随机标识符解密,获取随机标识符;
将随机标识符与提交的金融数据获取请求中金融数据类型的数字代码结合作为所述金融数据压缩包的解压密码,将所述金融数据压缩包解压,获取所需的金融数据。
具体的,为了便于理解,以下结合附图对本实施例所述方案进行详细说明:
一种基于区块链的金融大数据处理系统,如图1所示,本实施例提出了一种基于区块链的金融大数据应用平台,其中包括金融数据应用节点、金融数据管控节点、金融数据产生节点,所述金融数据应用节点是本公开的主要服务对象,本实施例所述方案旨在为金融数据应用方提供定向、准确、有效的金融数据,并保证金融数据传输的安全性;所述金融数据管控节点用于接收所述金融数据应用节点的金融数据获取请求,将金融数据获取请求发送至各个金融数据产生节点,再将所述金融数据产生节点提供的金融数据进行甄别、去重、整合,把最终处理好的金融数据发送至所述金融数据应用节点;所述金融数据产生节点用于提供所述金融数据应用节点所需的金融数据,将收集到的金融数据发送至所述金融数据管控节点统一整合。具体的,如图2所示,所述系统执行如下过程:
S1:区块链网络中的金融数据应用节点向区块链网络中金融数据管控节点发送金融数据获取请求;
其中,所述S1具体包括:
所述金融数据应用节点撰写金融数据获取请求,将所述金融数据获取请求利用非对称加密算法加密后经可信通道发送至所述金融数据管控节点;
所述金融数据应用节点须将所述金融数据获取请求中金融数据类型的数字代码进行可信存储,并记录发送所述金融数据获取请求的日期。
S2:所述金融数据管控节点接收到所述金融数据获取请求,将其发送至区块链网络中的各个金融数据产生节点上;
其中,所述S2具体包括:
所述金融数据管控节点将所述加密后的金融数据获取请求解密,得到所述金融数据应用节点的金融数据获取请求;
根据所述金融数据获取请求在金融数据存储区中查找历史金融数据,将符合所述金融数据获取请求的历史金融数据存储至待整合区;
汇总在金融数据存储区没有历史金融数据和缺少近期数据的金融数据获取请求信息,形成最新的金融数据获取请求;
将最新的金融数据获取请求加密后经可信通道发送至各个金融数据产生节点。
S3:所述金融数据产生节点依照所述金融数据管控节点发送的金融数据获取请求收集数据,将收集到的金融数据通过可信通道发送至所述金融数据管控节点;
其中,所述S3具体包括:
所述金融数据产生节点将所述加密后最新的金融数据获取请求解密,依照其整理可用的金融数据;
所述金融数据产生节点记录整理出的金融数据的基本信息,联同整理出的金融数据打包形成金融数据压缩包;
所述金融数据产生节点将金融数据压缩包经可信通道发送至所述金融数据管控节点。
S4:所述金融数据管控节点接收各个金融数据产生节点提供的金融数据,并对金融数据进行甄别、去重、整合,将最终得到的金融数据进行加密和可信存储,并将其通过可信通道发送至提交金融数据获取请求的所述金融数据应用节点;
其中,所述S4具体包括:
所述金融数据管控节点对各个金融数据产生节点发送的金融数据压缩包解压,检测其中是否含有所述金融数据的基本信息记录,若不含所述金融数据的基本信息记录,则标记为不合格的金融数据,并向对应的金融数据产生节点发送不合格提示,若同一金融数据产生节点连续三次提供的金融数据判定为不合格,则不再接收该金融数据产生节点发送的金融数据;
所述金融数据管控节点将所有合格的金融数据放入各个金融数据产生节点对应的待甄别区,对待甄别区的所有金融数据进行甄别,去除所述金融数据中的错误数据和无效数据,将剩余的有效金融数据放入S2中所述的待整合区。对于金融数据产生节点发送的数据,每次都计算有效率:
所述金融数据管控节点将各个金融数据产生节点发送的金融数据的有效率反馈至各个金融数据产生节点。对于连续三次有效率都低于50%的金融数据产生节点,所述金融数据管控节点不再接收该金融数据产生节点发送的金融数据;对于连续三次有效率都高于95%的金融数据产生节点,所述金融数据管控节点将该金融数据产生节点标记为可信金融数据产生节点,此后金融数据管控节点将优先接收、整理可信金融数据产生节点发送的金融数据;
所述金融数据管控节点将待整合区的所有金融数据去重、整合,将重复的金融数据删除,将各个类别的金融数据按照时间顺序整合,将所述整合完毕的金融数据先存入金融数据存储区,将金融数据存储区中同一类型的过时的金融数据替换掉,保持金融数据存储区中金融数据的准确性和时效性,再将所述整合完毕的数据放入待发送区;
所述金融数据管控节点将待发送区的金融数据打包,并生成一组随机标识符,运用所述随机标识符和所述金融数据类型的数字代码为所述金融数据压缩包加密,将所述随机标识符运用S1中所述金融数据应用节点的名称和提交金融数据获取请求的日期加密;
所述金融数据管控节点将加密后的金融数据压缩包和加密后的随机标识符经可信通道发送至S1中提交金融数据获取请求的金融数据应用节点。
S5:所述金融数据应用节点对接收到的所述金融数据解密,获取所需金融数据。
其中,所述S5具体包括:
所述金融数据应用节点接收到所述金融数据压缩包和加密后的随机标识符,首先利用自身名称和提交金融数据获取请求的日期对加密后的随机标识符解密,获取随机标识符;
将随机标识符与提交的金融数据获取请求中金融数据类型的数字代码结合作为所述金融数据压缩包的解压密码,将所述金融数据压缩包解压,获取所需的金融数据。
其中随机标识符与提交的金融数据获取请求中金融数据类型的数字代码结合方式如下所述:
1)生成的随机标识符有九个字符,其中包括大、小写字母和数字,要求第五位字符为0-9之间的数字。
2)随机标识符一共有九个字符,则九个字符之间有10个空隙,从前到后分别用0-9进行编号。将先前提交获取请求的金融数据类型的数字代码放入随机标识符第五个字符为编号的空隙中,构成解开金融数据压缩包的密码。
例:随机标识符为:“B7dI3NaJ5”,应用节点先前提交获取请求的金融数据类型的数字代码为:“123456”,则金融数据包的解开密码即为:“B7d123456I3NaJ5”。
实施例二:
本实施例的目的是提供一种基于区块链的金融大数据处理方法。
一种基于区块链的金融大数据处理方法,其利用了上述的一种基于区块链的金融大数据处理系统,包括:
S1:区块链网络中的金融数据应用节点向区块链网络中金融数据管控节点发送金融数据获取请求;
S2:所述金融数据管控节点接收到所述金融数据获取请求,将其发送至区块链网络中的各个金融数据产生节点上;
S3:所述金融数据产生节点依照所述金融数据管控节点发送的金融数据获取请求收集数据,将收集到的金融数据通过可信通道发送至所述金融数据管控节点;
S4:所述金融数据管控节点接收各个金融数据产生节点提供的金融数据,并对金融数据进行甄别、去重及整合,将最终得到的金融数据进行加密和可信存储,并将其通过可信通道发送至提交金融数据获取请求的所述金融数据应用节点;
S5:所述金融数据应用节点对接收到的所述金融数据解密,获取所需金融数据。
上述技术方案的效果为:金融数据管控节点按金融数据应用节点发送的金融数据获取请求来收集金融数据,有助于为金融数据应用节点提供精准定向的金融数据;金融数据管控节点对各个金融数据产生节点发送的金融数据进行甄别、去重及整合,有助于为金融数据应用节点提供准确、有效、有条理的金融数据;金融数据管控节点在接收金融数据获取请求后,先在金融数据存储区中查找历史数据,再收集最新的金融数据,大大提高了金融数据收集的效率,并保证了金融数据的时效性;金融数据应用节点利用自身掌握的信息与金融数据管控节点发送过来的加密随机标识符结合,解压金融数据压缩包,既能验证金融数据应用节点,又提高了金融数据传输的安全性。
在本公开的一个或多个实施例中,所述区块链网络中的金融数据应用节点向区块链网络中金融数据管控节点发送金融数据获取请求,具体包括:
S101:所述金融数据应用节点撰写金融数据获取请求,将所述金融数据获取请求利用非对称加密算法加密后经可信通道发送至所述金融数据管控节点;
S102:所述金融数据应用节点须将所述金融数据获取请求中金融数据类型的数字代码进行可信存储,并记录发送所述金融数据获取请求的日期。
上述技术方案的效果为:所述金融数据应用节点将具体的金融数据获取请求发送至所述金融数据管控节点,可以保证获得自身所需的金融数据。所述金融数据应用节点将金融数据获取请求经非对称加密算法加密后经可信通道发送至所述金融数据管控节点,可以有效地防止金融数据获取请求被恶意破解,保障了传输的安全性。所述金融数据应用节点将发送的金融数据获取请求中金融数据类型的数字代码和发送日期进行可信存储,是为对后期金融数据管控节点发送的加密后的随机标识符和金融数据压缩包解密,获取所需金融数据,只有提交了金融数据获取请求并将其金融数据类型的数字代码和发送日期进行可信存储的金融应用节点才可以对后期金融数据管控节点发送的加密后的随机标识符和金融数据压缩包正确解密,其他金融数据应用节点没有对应的金融数据类型的数字代码和发送日期,则无法解密,所以该方法首先可以对金融数据应用节点进行验证,其次也可以保障数据传输的安全性,即使金融数据压缩包被第三方恶意截获也难以破解。
在本公开的一个或多个实施例中,所述金融数据管控节点接收到所述金融数据获取请求,将其发送至区块链网络中的各个金融数据产生节点上,具体包括:
S201:所述金融数据管控节点将所述加密后的金融数据获取请求解密,得到所述金融数据应用节点的金融数据获取请求;
S202:根据所述金融数据获取请求在金融数据存储区中查找历史金融数据,将符合所述金融数据获取请求的历史金融数据存储至待整合区;
S203:汇总在金融数据存储区没有历史数据和缺少近期数据的金融数据获取请求信息,形成最新的金融数据获取请求;
S204:将最新的金融数据获取请求加密后经可信通道发送至各个金融数据产生节点。
上述技术方案的效果为:所述金融数据管控节点首先按照金融数据获取请求在金融数据存储区中查找历史数据,再把未查找到的和缺少近期数据的金融数据信息汇成最新的金融数据数据获取请求,发送至各个金融数据产生节点,可以有效减少搜集金融数据的时间,提高搜集效率,还可以保证金融数据的时效性。
在本公开的一个或多个实施例中,所述金融数据产生节点依照所述金融数据管控节点发送的金融数据获取请求收集数据,将收集到的金融数据通过可信通道发送至所述金融数据管控节点,具体包括:
S301:所述金融数据产生节点将所述加密后最新的金融数据获取请求解密,依照其整理可用的金融数据;
S302:所述金融数据产生节点记录整理出的金融数据的基本信息清单,联同整理出的金融数据打包形成金融数据压缩包;
S303:所述金融数据产生节点将金融数据压缩包经可信通道发送至所述金融数据管控节点。
上述技术方案的效果为:所述金融数据产生节点在按最新的金融数据获取请求搜集自身可获取的金融数据后,将其整理打包后列出基本信息清单,联同整理好的金融数据经可信通道发送至所述金融数据管控节点。所述金融数据管控节点可以通过查看金融数据基本信息清单来清点金融数据,有效提高金融数据整理效率,且易于发现还有哪些金融数据未搜集到。
在本公开的一个或多个实施例中,所述金融数据管控节点接收各个金融数据产生节点提供的金融数据,并对金融数据进行甄别、去重、整合,将最终得到的金融数据进行加密和可信存储,并将其通过可信通道发送至提交金融数据获取请求的所述金融数据应用节点,具体包括:
S401:所述金融数据管控节点对各个金融数据产生节点发送的金融数据压缩包解压,检测其中是否含有所述金融数据的基本信息清单,若不含所述金融数据的基本信息清单,则标记为不合格的金融数据,并向对应的金融数据产生节点发送不合格提示,若同一金融数据产生节点连续三次提供的金融数据判定为不合格,则不再接收该金融数据产生节点发送的金融数据;
S402:所述金融数据管控节点将所有合格的金融数据放入各个金融数据产生节点对应的待甄别区,对待甄别区的所有金融数据进行甄别,去除所述金融数据中的错误数据和无效数据,将剩余的有效金融数据放入S2中所述的待整合区。对于金融数据产生节点发送的数据,每次都计算有效率:
所述金融数据管控节点将各个金融数据产生节点发送的金融数据的有效率反馈至各个金融数据产生节点。对于连续三次有效率都低于50%的金融数据产生节点,所述金融数据管控节点不再接收该金融数据产生节点发送的金融数据;对于连续三次有效率都高于95%的金融数据产生节点,所述金融数据管控节点将该金融数据产生节点标记为可信金融数据产生节点,此后金融数据管控节点将优先接收、整理可信金融数据产生节点发送的金融数据;
S403:所述金融数据管控节点将待整合区的所有金融数据去重、整合,将重复的金融数据数据删除,将各个类别的金融数据按照时间顺序整合,将所述整合完毕的金融数据先存入金融数据存储区,将金融数据存储区中同一类型的过时的金融数据替换掉,保持金融数据存储区中金融数据的准确性和时效性,再将所述整合完毕的数据放入待发送区;
S404:所述金融数据管控节点将待发送区的金融数据打包,并生成一组随机标识符,生成的随机标识符有九个字符,其中包括大、小写字母和数字,要求第五位字符为0-9之间的数字。运用所述随机标识符和所述金融数据类型的数字代码为所述金融数据压缩包加密,将所述随机标识符运用S1中所述金融数据应用节点的名称和提交金融数据获取请求的日期加密;
S405:所述金融数据管控节点将加密后的金融数据压缩包和加密后的随机标识符经可信通道发送至S1中提交金融数据获取请求的金融数据应用节点。
上述技术方案的效果为:所述金融数据管控节点将从各个金融数据产生节点接收到的金融数据进行甄别,可以有效去除错误数据和无效数据,显著提高金融数据的准确度。所述金融数据管控节点计算各个金融数据产生节点发送来的金融数据的有效率,并反馈至各个金融数据产生节点,并根据各个金融数据产生节点提供的金融数据的有效率来决定今后对各个金融数据产生节点发送的金融数据的处理办法,该方法可有效敦促各个金融数据产生节点持续产出有效的金融数据。所述金融数据管控节点将有效金融数据去重、整合,再将其存入金融数据存储区,替换同一类型过时的金融数据,有助于为金融数据应用节点提供有效、有条理、具有时效性的金融数据,且有助于提高搜集金融数据的效率。所述金融数据管控节点生成一组随机标识符,并将随机标识符与金融数据压缩包中金融数据类型的数字代码作为金融数据压缩包的加密密码,且以提交金融数据获取请求的金融数据应用节点的名称和提交请求的日期作为随机标识符的加密密码,该方法对所述金融数据应用节点进行了两重验证,即所述金融数据应用节点首先需要利用自身的名称以及提交金融数据获取请求的日期作为密码获取随机标识符,再利用随机标识符和提交的金融数据获取请求中金融数据类型的数字代码作为密码打开金融数据压缩包,保证了金融数据应用节点的准确对应,只有提交了金融数据获取请求并将其金融数据类型的数字代码和发送日期进行可信存储的金融应用节点才可以对金融数据管控节点发送的加密后的随机标识符和金融数据压缩包正确解密,其他金融数据应用节点没有对应的金融数据类型的数字代码和发送日期,则无法解密;除此之外,该方法有效提高了金融数据的传输安全性,由于密码的复杂性,即使金融数据压缩包被第三方窃取,也难以获得解压后的金融数据。
在本公开的一个或多个实施例中,所述金融数据应用节点对接收到的所述金融数据解密,获取所需金融数据,具体包括:
S501:所述金融数据应用节点接收到所述金融数据压缩包和加密后的随机标识符,首先利用自身名称和提交金融数据获取请求的日期对加密后的随机标识符解密,获取随机标识符;
S502:将随机标识符与提交的金融数据获取请求中金融数据类型的数字代码结合作为所述金融数据压缩包的解压密码,将所述金融数据压缩包解压,获取所需的金融数据。
其中随机标识符与提交的金融数据获取请求中金融数据类型的数字代码结合方式如下所述:
1)生成的随机标识符有九个字符,其中包括大、小写字母和数字,要求第五位字符为0-9之间的数字。
2)随机标识符一共有九个字符,则九个字符之间有10个空隙,从前到后分别用0-9进行编号。将先前提交获取请求的金融数据类型的数字代码放入随机标识符第五个字符为编号的空隙中,构成解开金融数据压缩包的密码。
例:随机标识符为:“B7dI3NaJ5”,应用节点先前提交获取请求的金融数据类型的数字代码为:“123456”,则金融数据包的解开密码即为:“B7d123456I3NaJ5”。
上述技术方案的效果为:所述金融数据应用节点首先利用自身的名称以及提交金融数据获取请求的日期作为密码获取随机标识符,再利用随机标识符和提交的金融数据获取请求中金融数据类型的数字代码作为密码打开金融数据压缩包,获取提交的金融数据获取请求中对应的金融数据,只有提交了金融数据获取请求并将其金融数据类型的数字代码和发送日期进行可信存储的金融应用节点才可以对金融数据管控节点发送的加密后的随机标识符和金融数据压缩包正确解密,其他金融数据应用节点没有对应的金融数据类型的数字代码和发送日期,则无法解密。所以该方法不仅对金融数据应用节点进行了验证,还有效提高了金融数据传输的安全性,由于密码的复杂性,即使金融数据压缩包被第三方窃取,也难以获得解压后的金融数据。
在更多实施例中,还提供:
一种电子设备,包括存储器和处理器以及存储在存储器上并在处理器上运行的计算机指令,所述计算机指令被处理器运行时,完成实施例二中所述的方法。为了简洁,在此不再赘述。
应理解,本实施例中,处理器可以是中央处理单元CPU,处理器还可以是其他通用处理器、数字信号处理器DSP、专用集成电路ASIC,现成可编程门阵列FPGA或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
存储器可以包括只读存储器和随机存取存储器,并向处理器提供指令和数据、存储器的一部分还可以包括非易失性随机存储器。例如,存储器还可以存储设备类型的信息。
一种计算机可读存储介质,用于存储计算机指令,所述计算机指令被处理器执行时,完成实施例二中所述的方法。
实施例二中的方法可以直接体现为硬件处理器执行完成,或者用处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器、闪存、只读存储器、可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器,处理器读取存储器中的信息,结合其硬件完成上述方法的步骤。为避免重复,这里不再详细描述。
本领域普通技术人员可以意识到,结合本实施例描述的各示例的单元即算法步骤,能够以电子硬件或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
上述实施例提供的一种基于区块链的金融大数据处理系统及方法可以实现,具有广阔的应用前景。
以上所述仅为本公开的优选实施例而已,并不用于限制本公开,对于本领域的技术人员来说,本公开可以有各种更改和变化。凡在本公开的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本公开的保护范围之内。
Claims (8)
1.一种基于区块链的金融大数据处理系统,其特征在于,包括:
金融数据应用节点,其用于向部署于区块链网络中的金融数据管控节点发送金融数据获取请求;同时,对接收到的金融数据解密,获得所需金融数据;
金融数据管控节点,其用于接收所述金融数据获取请求,并将其发送至部署于区块链网络中的各个金融数据产生节点上;同时,接收各个金融数据产生节点提供的金融数据,并对金融数据进行甄别、去重及整合,将最终得到的金融数据进行加密和可信存储,并将其通过可信通道发送至提交金融数据获取请求的所述金融数据应用节点;
金融数据产生节点,其用于基于所述金融数据管控节点发送的金融数据获取请求收集数据,将收集到的金融数据通过可信通道发送至所述金融数据管控节点;具体为:
所述金融数据产生节点将加密后的金融数据获取请求解密,基于其整理可用的金融数据;
所述金融数据产生节点记录整理出的金融数据的基本信息,联同整理出的金融数据打包形成金融数据压缩包;
所述金融数据产生节点将金融数据压缩包经可信通道发送至所述金融数据管控节点;
所述金融数据管控节点接收所述金融数据获取请求,并将其发送至部署于区块链网络中的各个金融数据产生节点上,具体为:
所述金融数据管控节点将所述加密后的金融数据获取请求解密,得到所述金融数据应用节点的金融数据获取请求;
根据所述金融数据获取请求在金融数据存储区中查找历史金融数据,将符合所述金融数据获取请求的历史金融数据存储至待整合区;
汇总在金融数据存储区没有历史金融数据和缺少近期数据的金融数据获取请求信息,形成最新的金融数据获取请求;
将最新的金融数据获取请求加密后经可信通道发送至各个金融数据产生节点;
所述金融数据管控节点接收各个金融数据产生节点提供的金融数据,并对金融数据进行甄别、去重、整合,将最终得到的金融数据进行加密和可信存储,具体为:
所述金融数据管控节点将待整合区的所有金融数据去重、整合,将重复的金融数据删除,将各个类别的金融数据按照时间顺序整合,将所述整合完毕的金融数据先存入金融数据存储区,将金融数据存储区中同一类型的过时的金融数据替换掉,保证金融数据存储区中金融数据的准确性和时效性,再将所述整合完毕的数据放入待发送区。
2.如权利要求1所述的一种基于区块链的金融大数据处理系统,其特征在于,所述金融数据应用节点向部署于区块链网络中的金融数据管控节点发送金融数据获取请求,具体为:
所述金融数据应用节点发出金融数据获取请求,将所述金融数据获取请求利用非对称加密算法加密后经可信通道发送至所述金融数据管控节点;
所述金融数据应用节点将所述金融数据获取请求中金融数据类型的数字代码进行可信存储,并记录发送所述金融数据获取请求的日期。
3.如权利要求1所述的一种基于区块链的金融大数据处理系统,其特征在于,所述接收各个金融数据产生节点提供的金融数据,并对金融数据进行甄别、去重及整合,将最终得到的金融数据进行加密和可信存储,并将其通过可信通道发送至提交金融数据获取请求的所述金融数据应用节点,具体为:
所述金融数据管控节点将待发送区的金融数据打包,并生成一组随机标识符,运用所述随机标识符和金融数据类型的数字代码为所述金融数据压缩包加密,将所述随机标识符运用所述金融数据应用节点的名称和提交金融数据获取请求的日期加密;
所述金融数据管控节点将加密后的金融数据压缩包和加密后的随机标识符经可信通道发送至提交金融数据获取请求的金融数据应用节点。
4.如权利要求3所述的一种基于区块链的金融大数据处理系统,其特征在于,生成的随机标识符包括由大、小写字母和数字组成的九个字符,要求第五位字符为0-9之间的数字。
5.如权利要求1所述的一种基于区块链的金融大数据处理系统,其特征在于,所述金融数据应用节点对接收到的所述金融数据解密,获得所需金融数据,具体为:
所述金融数据应用节点接收到所述金融数据压缩包和加密后的随机标识符,首先利用自身名称和提交金融数据获取请求的日期对加密后的随机标识符解密,获取随机标识符;
将随机标识符与提交的金融数据获取请求中金融数据类型的数字代码结合作为所述金融数据压缩包的解压密码,将所述金融数据压缩包解压,获取所需的金融数据。
6.一种基于区块链的金融大数据处理方法,其利用了如权利要求1-5任一项所述的基于区块链的金融大数据处理系统,其特征在于,包括:
区块链网络中的金融数据应用节点向区块链网络中金融数据管控节点发送金融数据获取请求;
所述金融数据管控节点接收到所述金融数据获取请求,将其发送至区块链网络中的各个金融数据产生节点上;
所述金融数据产生节点依照所述金融数据管控节点发送的金融数据获取请求收集数据,将收集到的金融数据通过可信通道发送至所述金融数据管控节点;
所述金融数据管控节点接收各个金融数据产生节点提供的金融数据,并对金融数据进行甄别、去重及整合,将最终得到的金融数据进行加密和可信存储,并将其通过可信通道发送至提交金融数据获取请求的所述金融数据应用节点;
所述金融数据应用节点对接收到的所述金融数据解密,获取所需金融数据。
7.一种计算机可读存储介质,其上存储有程序,其特征在于,该程序被处理器执行时实现如权利要求6所述的一种基于区块链的金融大数据处理方法。
8.一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的程序,其特征在于,所述处理器执行所述程序时实现如权利要求6所述的一种基于区块链的金融大数据处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210831962.6A CN115205041B (zh) | 2022-07-15 | 2022-07-15 | 一种基于区块链的金融大数据处理系统及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210831962.6A CN115205041B (zh) | 2022-07-15 | 2022-07-15 | 一种基于区块链的金融大数据处理系统及方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115205041A CN115205041A (zh) | 2022-10-18 |
CN115205041B true CN115205041B (zh) | 2023-07-07 |
Family
ID=83582517
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210831962.6A Active CN115205041B (zh) | 2022-07-15 | 2022-07-15 | 一种基于区块链的金融大数据处理系统及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115205041B (zh) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20130082719A (ko) * | 2011-12-15 | 2013-07-22 | 주식회사 코스콤 | 금융 데이터 조회 시스템 및 방법 |
CN106991164A (zh) * | 2017-03-31 | 2017-07-28 | 北京京东金融科技控股有限公司 | 基于区块链的用于金融数据处理的方法、装置及电子设备 |
CN111523888A (zh) * | 2020-04-16 | 2020-08-11 | 武汉有牛科技有限公司 | 基于区块链技术的链上数据及信息溯源系统 |
CN111612261A (zh) * | 2020-05-28 | 2020-09-01 | 洋浦美诺安电子科技有限责任公司 | 基于区块链的金融大数据分析系统 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9213966B2 (en) * | 2012-06-22 | 2015-12-15 | Intuit Inc. | Regulation compliant data integration for financial institutions |
US20150227629A1 (en) * | 2014-02-13 | 2015-08-13 | Christian Klensch | Financial reporting system with reduced data redundancy |
US11526938B2 (en) * | 2016-03-31 | 2022-12-13 | Refinitiv Us Organization Llc | Systems and methods for providing financial data to financial instruments in a distributed ledger system |
CN105933359A (zh) * | 2016-07-11 | 2016-09-07 | 深圳数字动能信息技术有限公司 | 海量金融数据传输方法及系统 |
CN109688190B (zh) * | 2018-10-23 | 2022-07-26 | 深圳壹账通智能科技有限公司 | 传输金融数据的方法、装置、计算机设备和存储介质 |
CN111369335A (zh) * | 2020-03-10 | 2020-07-03 | 江苏荣泽信息科技股份有限公司 | 一种基于区块链的金融数据处理方法 |
CN111432365B (zh) * | 2020-03-19 | 2020-12-29 | 武汉谦屹达管理咨询有限公司 | 一种应用5g网络和区块链的金融大数据处理方法及系统 |
CN111429278B (zh) * | 2020-03-19 | 2021-08-06 | 宁波智正伟盈信息科技有限公司 | 一种基于5g和区块链的金融大数据处理系统及方法 |
CN112367629B (zh) * | 2020-11-27 | 2021-08-31 | 深圳信息职业技术学院 | 一种基于5g和区块链的金融大数据处理方法及其系统平台 |
CN112927078A (zh) * | 2021-03-03 | 2021-06-08 | 关莉莉 | 区块链金融大数据分析处理系统及方法和交易平台系统 |
CN113347183A (zh) * | 2021-06-01 | 2021-09-03 | 永旗(北京)科技有限公司 | 一种区块链金融大数据处理方法 |
-
2022
- 2022-07-15 CN CN202210831962.6A patent/CN115205041B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20130082719A (ko) * | 2011-12-15 | 2013-07-22 | 주식회사 코스콤 | 금융 데이터 조회 시스템 및 방법 |
CN106991164A (zh) * | 2017-03-31 | 2017-07-28 | 北京京东金融科技控股有限公司 | 基于区块链的用于金融数据处理的方法、装置及电子设备 |
CN111523888A (zh) * | 2020-04-16 | 2020-08-11 | 武汉有牛科技有限公司 | 基于区块链技术的链上数据及信息溯源系统 |
CN111612261A (zh) * | 2020-05-28 | 2020-09-01 | 洋浦美诺安电子科技有限责任公司 | 基于区块链的金融大数据分析系统 |
Also Published As
Publication number | Publication date |
---|---|
CN115205041A (zh) | 2022-10-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CA3066678C (en) | Processing data queries in a logically sharded data store | |
EP2731045B1 (en) | Client computer for querying a database stored on a server via a network | |
US20060041533A1 (en) | Encrypted table indexes and searching encrypted tables | |
US11265148B1 (en) | Blockchain anonymous tokenization system | |
US20150288665A1 (en) | Secure Linkage Of Databases | |
US8995655B2 (en) | Method for creating asymmetrical cryptographic key pairs | |
CN111262835B (zh) | 敏感数据的脱敏存储方法及装置 | |
US20100198846A1 (en) | Method for order invariant correlated encrypting of data and sql queries for maintaining data privacy and securely resolving customer defects | |
CN106228084A (zh) | 基于角色的敏感字段动态调整的数据保护方法和系统 | |
Li et al. | Integrity-verifiable conjunctive keyword searchable encryption in cloud storage | |
CN105303123A (zh) | 一种基于分块混淆的动态数据隐私保护系统及方法 | |
CN105659231A (zh) | 实现对数据的访问 | |
CA3065767C (en) | Cryptographic key generation for logically sharded data stores | |
CN103607420A (zh) | 面向云存储的安全电子医疗系统 | |
CN111340483A (zh) | 一种基于区块链的数据管理方法及相关设备 | |
US20230153292A1 (en) | Ensuring consistent metadata across computing devices | |
CN111507706B (zh) | 数据浏览、存储的方法、装置、计算机设备以及存储介质 | |
CN110175318A (zh) | 一种保险理赔附件生成方法及装置 | |
CN115205041B (zh) | 一种基于区块链的金融大数据处理系统及方法 | |
CN112437082A (zh) | 一种基于区块链的数据发送方法 | |
EP2775420A1 (en) | Semantic search over encrypted data | |
CN116303437A (zh) | 基于区块链的医疗数据分级存储和共享方法 | |
CN112632592B (zh) | 一种基于tee技术的区块链可信隐私计算能力提升系统 | |
CN110543774B (zh) | 一种云环境下xml档案隐私数据保护方法及系统 | |
CN114584374A (zh) | 一种基于区块链的大数据隐私共享安全保护系统及方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |