CN113094352B - 数据湖区块链数据库系统构建方法及装置 - Google Patents
数据湖区块链数据库系统构建方法及装置 Download PDFInfo
- Publication number
- CN113094352B CN113094352B CN202110342171.2A CN202110342171A CN113094352B CN 113094352 B CN113094352 B CN 113094352B CN 202110342171 A CN202110342171 A CN 202110342171A CN 113094352 B CN113094352 B CN 113094352B
- Authority
- CN
- China
- Prior art keywords
- data
- block
- target object
- database system
- type
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/211—Schema design and management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提供一种数据湖区块链数据库系统构建方法及装置，该方法包括：获取至少一个目标对象的第一类型数据及第二类型数据；根据第一类型数据获取交易账本数据，将交易账本数据存储到与目标对象对应的第一区块；对第二类型数据进行语义分析得到语义信息数据，将语义信息数据存储到与目标对象对应的第二区块；获取与第一区块相关的第二区块，将第一区块和与第一区块相关的第二区块中的数据进行融合并进行区块存储得到与目标对象对应的融合区块；为融合区块建立索引标签，从而构建得到数据湖区块链数据库系统。本发明提供的数据湖区块链数据库系统构建方法及装置，实现了基于区块链和数据湖的超融合分布式数据库系统的构建，可以满足各种处理需求。
Description
技术领域
本发明涉及区块链及数据库技术领域，尤其涉及一种数据湖区块链数据库系统构建方法及装置。
背景技术
随着数据湖技术和区块链技术的发展，未来数据湖将会成为企业数据存储的新的方式，区块链将是未来价值互链网的基石，构建一种可信的数据湖环境下的区块链数据库系统将是未来数据库技术的发展趋势。同时，大数据在人们的生活中也发挥着越来越重要的作用。因此，构建一种适于大数据分析的区块链数据库系统成为亟需解决的问题。
发明内容
针对现有技术存在的问题，本发明提供一种数据湖区块链数据库系统构建方法及装置。
本发明提供一种数据湖区块链数据库系统构建方法，包括：获取至少一个目标对象的第一类型数据及第二类型数据；其中，所述第一类型数据包括区块链数据，所述第一类型数据和所述第二类型数据携带有目标对象标识；根据所述区块链数据获取交易账本数据，根据所述目标对象标识将所述交易账本数据存储到与所述目标对象对应的至少一个第一区块；对所述第二类型数据进行语义分析，得到语义信息数据，根据所述目标对象标识将所述语义信息数据存储到与所述目标对象对应的至少一个第二区块；在与所述目标对象对应的所述第一区块和所述第二区块中，获取与所述第一区块相关的所述第二区块，将所述第一区块和与所述第一区块相关的所述第二区块中的数据进行融合并进行区块存储得到与所述目标对象对应的融合区块；为所述融合区块建立索引标签，从而构建得到所述数据湖区块链数据库系统。
根据本发明提供的一种数据湖区块链数据库系统构建方法，所述获取与所述第一区块相关的所述第二区块，具体包括：将所述第一区块中的所述区块链数据与所述第二区块中的所述语义信息数据进行相关性分析，根据相关性分析的结果获取与所述第一区块相关的所述第二区块。
根据本发明提供的一种数据湖区块链数据库系统构建方法，所述将所述第一区块中的所述区块链数据与所述第二区块中的所述语义信息数据进行相关性分析，根据相关性分析的结果获取与所述第一区块相关的所述第二区块，具体包括：获取所述第一区块中的所述区块链数据的第一关键字信息；获取所述第二区块中的所述语义信息数据的第二关键字信息；将所述第一关键字信息和所述第二关键字信息进行信息匹配，获取与所述第一关键字信息匹配成功的所述第二关键字信息；将与所述第一关键字信息匹配成功的所述第二关键字信息对应的所述第二区块作为与所述第一区块相关的所述第二区块。
根据本发明提供的一种数据湖区块链数据库系统构建方法，所述获取至少一个目标对象的第一类型数据及第二类型数据，具体包括：接收所述至少一个目标对象的联盟链数据和/或私有链数据，从而获取所述第一类型数据；接收所述至少一个目标对象的数据库数据，从而获取所述第二类型数据。
根据本发明提供的一种数据湖区块链数据库系统构建方法，所述第二类型数据包括非结构化数据和/或半结构化数据。
根据本发明提供的一种数据湖区块链数据库系统构建方法，所述非结构化数据包括音频数据、图片数据、视频数据及文本数据中的至少一种。
根据本发明提供的一种数据湖区块链数据库系统构建方法，所述方法还包括：
基于与所述目标对象对应的所述融合区块进行人工智能分析处理，并将处理结果返回给所述目标对象。
本发明还提供一种数据湖区块链数据库系统构建装置，包括：源数据获取模块，用于：获取至少一个目标对象的第一类型数据及第二类型数据；其中，所述第一类型数据包括区块链数据，所述第一类型数据和所述第二类型数据携带有目标对象标识；第一区块构建模块，用于：根据所述区块链数据获取交易账本数据，根据所述目标对象标识将所述交易账本数据存储到与所述目标对象对应的至少一个第一区块；第二区块构建模块，用于：对所述第二类型数据进行语义分析，得到语义信息数据，根据所述目标对象标识将所述语义信息数据存储到与所述目标对象对应的至少一个第二区块；融合区块构建模块，用于：在与所述目标对象对应的所述第一区块和所述第二区块中，获取与所述第一区块相关的所述第二区块，将所述第一区块和与所述第一区块相关的所述第二区块中的数据进行融合并进行区块存储得到与所述目标对象对应的融合区块；索引标签构建模块，用于：为所述融合区块建立索引标签，从而构建得到所述数据湖区块链数据库系统。
本发明还提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上述任一种所述数据湖区块链数据库系统构建方法的步骤。
本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如上述任一种所述数据湖区块链数据库系统构建方法的步骤。
本发明提供的数据湖区块链数据库系统构建方法及装置，通过获取目标对象的第一类型数据和第二类型数据，根据第一类型数据获取交易账本数据，根据第二类型数据获取语义信息数据，根据交易账本数据构建第一区块，根据语义信息数据构建第二区块，根据第一区块和第二区块构建融合区块，并为融合区块构建索引标签，实现了基于区块链和数据湖的超融合分布式数据库系统的构建，可以满足各种处理需求。
附图说明
为了更清楚地说明本发明或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明提供的数据湖区块链数据库系统构建方法的流程示意图之一；
图2是本发明提供的数据湖区块链数据库系统构建方法的流程示意图之二；
图3是本发明提供的数据湖区块链数据库系统构建装置的结构示意图；
图4是本发明提供的电子设备的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合本发明中的附图，对本发明中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
下面结合图1-图4描述本发明的数据湖区块链数据库系统构建方法及装置。
图1是本发明提供的数据湖区块链数据库系统构建方法的流程示意图之一。如图1所示，所述方法包括：
步骤101、获取至少一个目标对象的第一类型数据及第二类型数据；其中，所述第一类型数据包括区块链数据，所述第一类型数据和所述第二类型数据携带有目标对象标识。
本发明提供的数据湖区块链数据库系统基于数据湖技术和区块链技术。数据湖区块链数据库系统是指运行在数据湖环境下的区块链数据库系统。
首先获取至少一个目标对象的第一类型数据及第二类型数据并存储于数据湖，其中，目标对象如企业、联盟等的设备，可以从企业、联盟等的多个设备获取第一类型数据和第二类型数据。比如，第一类型数据和第二类型数据可以分别来自于不同设备。第一类型数据包括区块链数据，可以基于目标对象构建的区块链获取区块链数据。第二类型数据可以是除区块链数据之外的其他数据。为区分不同的目标对象，第一类型数据和第二类型数据携带有目标对象标识，目标对象标识用于表示不同的目标对象，可以理解的，在目标对象具有多个设备时，还可以设置设备标识，并令第一类型数据和第二类型数据携带设备标识。
步骤102、根据所述区块链数据获取交易账本数据，根据所述目标对象标识将所述交易账本数据存储到与所述目标对象对应的至少一个第一区块。
区块链数据中包括记录的交易账本数据，交易账本数据通常以结构化数据的格式存储(也可以非结构化数据或半结构化数据的形式存储)。如果区块链数据中的结构化数据均是交易账本数据，则可以通过获取区块链数据中的结构化数据获取交易账本数据。另外，区块链数据中还可以对交易账本数据设置数据标识，表明相应的数据是交易账本数据，则可以根据区块链数据中的数据标识获取交易账本数据。
根据目标对象标识获取目标对象的交易账本数据，并将交易账本数据存储到与目标对象对应的第一区块，第一区块可以为多个。可以对第一区块中的交易账本数据进行分析处理。
步骤103、对所述第二类型数据进行语义分析，得到语义信息数据，根据所述目标对象标识将所述语义信息数据存储到与所述目标对象对应的至少一个第二区块。
对第二类型数据进行语义分析，得到语义信息数据。语义分析可以根据不同的处理需求采用不同的处理模式，如可以通过提取语义关键词进行语义分析等。这些语义信息数据未来可以用于智能分析所用，如语义计算、知识图谱、智能计算等。
根据目标对象标识获取与目标对象对应的语义信息数据，并将语义信息数据存储到与目标对象对应的第二区块，第二区块可以为多个。可以对第二区块中的语义信息数据进行分析处理。
步骤104、在与所述目标对象对应的所述第一区块和所述第二区块中，获取与所述第一区块相关的所述第二区块，将所述第一区块和与所述第一区块相关的所述第二区块中的数据进行融合并进行区块存储得到与所述目标对象对应的融合区块。
在与目标对象对应的第一区块和第二区块中，获取与第一区块相关的第二区块，将第一区块和与第一区块相关的第二区块中的数据进行融合并进行区块存储得到与目标对象对应的融合区块。可以通过语义融合第一区块和第二区块形成融合区块，语义融合是指将第一区块和第二区块通过各种语义方式融合成融合模块的方法。比如，通过语义分析获取第一区块和第二区块的相关性，进而将第一区块和与第一区块相关的第二区块中的数据进行融合，存储于区块中形成融合区块。所形成的融合区块中，包括第一区块中的交易账本数据及第二区块中的语义信息数据。可以对融合区块中的交易账本数据及语义信息数据进行综合处理。满足大数据分析等处理需求。
步骤105、为所述融合区块建立索引标签，从而构建得到所述数据湖区块链数据库系统。
为融合区块建立索引标签，索引标签用于快速检索及处理融合区块中的数据。索引标签如可以包括目标对象标识及语义的分布式索引信息。
本发明提供的数据湖区块链数据库系统构建方法，通过获取目标对象的第一类型数据和第二类型数据，根据第一类型数据获取交易账本数据，根据第二类型数据获取语义信息数据，根据交易账本数据构建第一区块，根据语义信息数据构建第二区块，根据第一区块和第二区块构建融合区块，并为融合区块构建索引标签，实现了基于区块链和数据湖的超融合分布式数据库系统的构建，可以满足各种处理需求。
根据本发明提供的一种数据湖区块链数据库系统构建方法，所述获取与所述第一区块相关的所述第二区块，具体包括：将所述第一区块中的所述区块链数据与所述第二区块中的所述语义信息数据进行相关性分析，根据相关性分析的结果获取与所述第一区块相关的所述第二区块。
在获取与第一区块相关的第二区块时，可以通过将第一区块中的区块链数据与第二区块中的语义信息数据进行相关性分析，根据相关性分析的结果获取与第一区块相关的第二区块。若根据相关性分析的结果获知第二区块中的语义信息数据与第一区块中的区块链数据相关，则第二区块与第一区块相关。若根据相关性分析的结果获知第二区块中的语义信息数据与第一区块中的区块链数据不相关，则第二区块与第一区块不相关。
本发明提供的数据湖区块链数据库系统构建方法，通过将第一区块中的区块链数据与第二区块中的语义信息数据进行相关性分析，根据相关性分析的结果获取与第一区块相关的第二区块，提高了与第一区块相关的第二区块判断的准确性，从而提高了所构建的数据库系统中数据的准确性。
根据本发明提供的一种数据湖区块链数据库系统构建方法，所述将所述第一区块中的所述区块链数据与所述第二区块中的所述语义信息数据进行相关性分析，根据相关性分析的结果获取与所述第一区块相关的所述第二区块，具体包括：获取所述第一区块中的所述区块链数据的第一关键字信息；获取所述第二区块中的所述语义信息数据的第二关键字信息；将所述第一关键字信息和所述第二关键字信息进行信息匹配，获取与所述第一关键字信息匹配成功的所述第二关键字信息；将与所述第一关键字信息匹配成功的所述第二关键字信息对应的所述第二区块作为与所述第一区块相关的所述第二区块。
可以通过关键字信息获取与第一区块相关的第二区块，关键字信息的类型如可以包括用户名。获取第一区块中的区块链数据的第一关键字信息，第一关键字信息如包括用户A和用户B，即区块链数据中的交易账本数据是用户A和用户B所产生。获取第二区块中的语义信息数据的第二关键字信息，如果第二关键字信息包括用户A和用户B，则说明这个第二区块是和第一区块相关的区块。如果第二关键字信息包括用户C和用户D，而不包括用户A和用户B，则说明这个第二区块是和第一区块不相关的区块。
关键字信息可以根据不同的需求设置不同的类型，如关键字信息还可以设置为交易类型，分别根据交易账本数据和语义信息数据获取交易类型关键字信息，若第二区块的交易类型关键字信息与第一区块的交易类型关键字信息匹配，则说明第二区块为与第一区块相关的区块，否则第二区块不为与第一区块相关的区块。
关键字信息的其他类型可以根据需要设定，此处不再赘述。也可以不设定关键字类型而直接提取关键字信息进行匹配。
本发明提供的数据湖区块链数据库系统构建方法，通过分别获取第一区块中的区块链数据的第一关键字信息以及第二区块中的语义信息数据的第二关键字信息，并通过将第一关键字信息和第二关键字信息进行信息匹配获取与第一区块相关的第二区块，进一步提高了与第一区块相关的第二区块判断的准确性，从而进一步提高了所构建的数据库系统中数据的准确性。
根据本发明提供的一种数据湖区块链数据库系统构建方法，所述获取至少一个目标对象的第一类型数据及第二类型数据，具体包括：接收所述至少一个目标对象的联盟链数据和/或私有链数据，从而获取所述第一类型数据；接收所述至少一个目标对象的数据库数据，从而获取所述第二类型数据。
交易账本数据可以包括所有现存的比特币、以太坊、超级账本、Libra等区块链的各种交易账本。语义信息数据可以包括除了第一区块中的交易账本数据之外的、希望上链的数据，尤其是用于人工智能未来进行智能计算所需的数据。根据第一类型数据获取交易账本数据，根据第二类型数据获取语义信息数据。第一类型数据可以通过接收目标对象的联盟链和/或私有链的数据获取。第二类型数据可以是目标对象存储在数据库中的其他数据，可以通过接收目标对象的数据库中的数据获取。
本发明提供的数据湖区块链数据库系统构建方法，通过接收至少一个目标对象的联盟链数据和/或私有链数据，从而获取第一类型数据，接收至少一个目标对象的数据库数据，从而获取第二类型数据，实现了目标对象的多样化数据获取。
根据本发明提供的一种数据湖区块链数据库系统构建方法，所述第二类型数据包括非结构化数据和/或半结构化数据。
第二区块和现有的交易区块(包括第一区块)有本质区别，它包含完全不同于现有交易区块的，从半结构化数据甚至非结构化数据中提取的需要上链的语义信息数据(也可从结构化数据中提取)，这些语义信息数据未来用于智能分析所用，如语义计算、知识图谱、智能计算等。
本发明提供的数据湖区块链数据库系统构建方法，通过基于非结构化数据和/或半结构化数据提取语义信息数据，满足了多样化分析需求。
根据本发明提供的一种数据湖区块链数据库系统构建方法，所述非结构化数据包括音频数据、图片数据、视频数据及文本数据中的至少一种。
未来人工智能和大数据分析的需要，许多的信息来自于半结构化数据和音频、图片、视频、文本等非结构化数据，需要从这些数据中抽取它们的一些语义信息组成第二区块进行上链，供未来智能分析和处理所用。
本发明提供的数据湖区块链数据库系统构建方法，通过基于音频数据、图片数据、视频数据及文本数据等数据提取语义信息数据，丰富了数据来源。
根据本发明提供的一种数据湖区块链数据库系统构建方法，所述方法还包括：基于与所述目标对象对应的所述融合区块进行人工智能分析处理，并将处理结果返回给所述目标对象。
可以根据不同的分析需求基于与目标对象对应的融合区块进行人工智能分析处理，并将处理结果返回给目标对象，以满足不同需求。
本发明提供的数据湖区块链数据库系统构建方法，通过基于与目标对象对应的融合区块进行人工智能分析处理，并将处理结果返回给目标对象，实现了信息闭环。
图2是本发明提供的数据湖区块链数据库系统构建方法的流程示意图之二。如图2所示，本发明提供的数据湖区块链数据库系统构建方法包括如下步骤：
(1)所有企业都将它们的全部数据，作为数据湖的数据源存储到数据湖中。
(2)数据湖里存储了来自不同企业的结构化数据、半结构化数据以及非结构化数据。
(3)数据湖里面会对所有的区块链交易所形成的账本形成一个个的交易区块(第一区块，如Tx1、Tx2等)。这些交易区块一般来自于结构化数据。
(4)未来人工智能和大数据分析的需要，许多的信息来自于半结构化数据和音频、图片、视频、文本等非结构化数据，需要从这些数据中抽取它们的一些语义信息组成其它区块(第二区块，如TR1、TR2等)进行上链，供未来智能分析和处理所用。
(5)交易区块和与本交易区块相关的其它区块可以融合成一个供未来智能计算所需的相关的融合区块。
(6)相关的交易区块和其它区块，通过各种语义技术，形成一个个的语义信息更加丰富、更加完整的融合区块MG1、MG2等。
(7)为了适应分布式环境，需要对各种融合区块进行语义索引，从而构建一个全球视图的语义分布式索引，确保各个融合区块有唯一的索引并包含其它更加丰富的语义信息。
(8)包含语义分布式索引以及大量融合区块的数据，构成了一种基于区块链和分布式环境的数据湖区块链数据库系统。
本发明提供一种基于区块链与数据湖的超融合分布式数据系统构建方法，可以实现来自不同企业的数据汇聚到数据湖后，在数据湖中通过分析形成交易区块和其它区块，通过语义融合交易区块和其它区块形成融合区块，并通过语义分布式索引形成区块的索引关系，最后形成一种数据湖区块链数据库系统。
本发明提供的数据湖区块链数据库系统构建方法，其精髓是:(1)面向未来大数据分析的需求，尤其是人工智能分析的需要，从许多的半结构化数据和非结构化数据中抽取了很多的语义信息上链，供未来的各种智能计算所用；(2)该方法将为在数据湖环境下构建一种区块链数据库系统提供思路，并为未来分布式环境下构建数据湖区块链数据库系统带来好的前景和思路。
下面对本发明提供的数据湖区块链数据库系统构建装置进行描述，下文描述的数据湖区块链数据库系统构建装置与上文描述的数据湖区块链数据库系统构建方法可相互对应参照。
图3是本发明提供的数据湖区块链数据库系统构建装置的结构示意图。如图3所示，所述装置包括源数据获取模块10、第一区块构建模块20、第二区块构建模块30、融合区块构建模块40及索引标签构建模块50，其中：源数据获取模块10用于：获取至少一个目标对象的第一类型数据及第二类型数据；其中，所述第一类型数据包括区块链数据，所述第一类型数据和所述第二类型数据携带有目标对象标识；第一区块构建模块20用于：根据所述区块链数据获取交易账本数据，根据所述目标对象标识将所述交易账本数据存储到与所述目标对象对应的至少一个第一区块；第二区块构建模块30用于：对所述第二类型数据进行语义分析，得到语义信息数据，根据所述目标对象标识将所述语义信息数据存储到与所述目标对象对应的至少一个第二区块；融合区块构建模块40用于：在与所述目标对象对应的所述第一区块和所述第二区块中，获取与所述第一区块相关的所述第二区块，将所述第一区块和与所述第一区块相关的所述第二区块中的数据进行融合并进行区块存储得到与所述目标对象对应的融合区块；索引标签构建模块50用于：为所述融合区块建立索引标签，从而构建得到所述数据湖区块链数据库系统。
本发明提供的数据湖区块链数据库系统构建装置，通过获取目标对象的第一类型数据和第二类型数据，根据第一类型数据获取交易账本数据，根据第二类型数据获取语义信息数据，根据交易账本数据构建第一区块，根据语义信息数据构建第二区块，根据第一区块和第二区块构建融合区块，并为融合区块构建索引标签，实现了基于区块链和数据湖的超融合分布式数据库系统的构建，可以满足各种处理需求。
根据本发明提供的一种数据湖区块链数据库系统构建装置，融合区块构建模块40在用于获取与所述第一区块相关的所述第二区块时，具体用于：将所述第一区块中的所述区块链数据与所述第二区块中的所述语义信息数据进行相关性分析，根据相关性分析的结果获取与所述第一区块相关的所述第二区块。
本发明提供的数据湖区块链数据库系统构建装置，通过将第一区块中的区块链数据与第二区块中的语义信息数据进行相关性分析，根据相关性分析的结果获取与第一区块相关的第二区块，提高了与第一区块相关的第二区块判断的准确性，从而提高了所构建的数据库系统中数据的准确性。
根据本发明提供的一种数据湖区块链数据库系统构建装置，融合区块构建模块40在用于将所述第一区块中的所述区块链数据与所述第二区块中的所述语义信息数据进行相关性分析，根据相关性分析的结果获取与所述第一区块相关的所述第二区块时，具体用于：获取所述第一区块中的所述区块链数据的第一关键字信息；获取所述第二区块中的所述语义信息数据的第二关键字信息；将所述第一关键字信息和所述第二关键字信息进行信息匹配，获取与所述第一关键字信息匹配成功的所述第二关键字信息；将与所述第一关键字信息匹配成功的所述第二关键字信息对应的所述第二区块作为与所述第一区块相关的所述第二区块。
本发明提供的数据湖区块链数据库系统构建装置，通过分别获取第一区块中的区块链数据的第一关键字信息以及第二区块中的语义信息数据的第二关键字信息，并通过将第一关键字信息和第二关键字信息进行信息匹配获取与第一区块相关的第二区块，进一步提高了与第一区块相关的第二区块判断的准确性，从而进一步提高了所构建的数据库系统中数据的准确性。
根据本发明提供的一种数据湖区块链数据库系统构建装置，源数据获取模块10在用于获取至少一个目标对象的第一类型数据及第二类型数据时，具体用于：接收所述至少一个目标对象的联盟链数据和/或私有链数据，从而获取所述第一类型数据；接收所述至少一个目标对象的数据库数据，从而获取所述第二类型数据。
本发明提供的数据湖区块链数据库系统构建装置，通过接收至少一个目标对象的联盟链数据和/或私有链数据，从而获取第一类型数据，接收至少一个目标对象的数据库数据，从而获取第二类型数据，实现了目标对象的多样化数据获取。
根据本发明提供的一种数据湖区块链数据库系统构建装置，所述第二类型数据包括非结构化数据和/或半结构化数据。
本发明提供的数据湖区块链数据库系统构建装置，通过基于非结构化数据和/或半结构化数据提取语义信息数据，满足了多样化分析需求。
根据本发明提供的一种数据湖区块链数据库系统构建装置，所述非结构化数据包括音频数据、图片数据、视频数据及文本数据中的至少一种。
本发明提供的数据湖区块链数据库系统构建装置，通过基于音频数据、图片数据、视频数据及文本数据等数据提取语义信息数据，丰富了数据来源。
根据本发明提供的一种数据湖区块链数据库系统构建装置，所述装置还包括分析处理模块，所述分析处理模块用于：基于与所述目标对象对应的所述融合区块进行人工智能分析处理，并将处理结果返回给所述目标对象。
本发明提供的数据湖区块链数据库系统构建装置，通过基于与目标对象对应的融合区块进行人工智能分析处理，并将处理结果返回给目标对象，实现了信息闭环。
图4是本发明提供的电子设备的结构示意图，如图4所示，该电子设备可以包括：处理器(processor)410、通信接口(Communications Interface)420、存储器(memory)430和通信总线440，其中，处理器410，通信接口420，存储器430通过通信总线440完成相互间的通信。处理器410可以调用存储器430中的逻辑指令，以执行数据湖区块链数据库系统构建方法，该方法包括：获取至少一个目标对象的第一类型数据及第二类型数据；其中，所述第一类型数据包括区块链数据，所述第一类型数据和所述第二类型数据携带有目标对象标识；根据所述区块链数据获取交易账本数据，根据所述目标对象标识将所述交易账本数据存储到与所述目标对象对应的至少一个第一区块；对所述第二类型数据进行语义分析，得到语义信息数据，根据所述目标对象标识将所述语义信息数据存储到与所述目标对象对应的至少一个第二区块；在与所述目标对象对应的所述第一区块和所述第二区块中，获取与所述第一区块相关的所述第二区块，将所述第一区块和与所述第一区块相关的所述第二区块中的数据进行融合并进行区块存储得到与所述目标对象对应的融合区块；为所述融合区块建立索引标签，从而构建得到所述数据湖区块链数据库系统。
此外，上述的存储器430中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
另一方面，本发明还提供一种计算机程序产品，所述计算机程序产品包括存储在非暂态计算机可读存储介质上的计算机程序，所述计算机程序包括程序指令，当所述程序指令被计算机执行时，计算机能够执行上述各方法所提供的数据湖区块链数据库系统构建方法，该方法包括：获取至少一个目标对象的第一类型数据及第二类型数据；其中，所述第一类型数据包括区块链数据，所述第一类型数据和所述第二类型数据携带有目标对象标识；根据所述区块链数据获取交易账本数据，根据所述目标对象标识将所述交易账本数据存储到与所述目标对象对应的至少一个第一区块；对所述第二类型数据进行语义分析，得到语义信息数据，根据所述目标对象标识将所述语义信息数据存储到与所述目标对象对应的至少一个第二区块；在与所述目标对象对应的所述第一区块和所述第二区块中，获取与所述第一区块相关的所述第二区块，将所述第一区块和与所述第一区块相关的所述第二区块中的数据进行融合并进行区块存储得到与所述目标对象对应的融合区块；为所述融合区块建立索引标签，从而构建得到所述数据湖区块链数据库系统。
又一方面，本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现以执行上述各提供的数据湖区块链数据库系统构建方法，该方法包括：获取至少一个目标对象的第一类型数据及第二类型数据；其中，所述第一类型数据包括区块链数据，所述第一类型数据和所述第二类型数据携带有目标对象标识；根据所述区块链数据获取交易账本数据，根据所述目标对象标识将所述交易账本数据存储到与所述目标对象对应的至少一个第一区块；对所述第二类型数据进行语义分析，得到语义信息数据，根据所述目标对象标识将所述语义信息数据存储到与所述目标对象对应的至少一个第二区块；在与所述目标对象对应的所述第一区块和所述第二区块中，获取与所述第一区块相关的所述第二区块，将所述第一区块和与所述第一区块相关的所述第二区块中的数据进行融合并进行区块存储得到与所述目标对象对应的融合区块；为所述融合区块建立索引标签，从而构建得到所述数据湖区块链数据库系统。
以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (10)
1.一种数据湖区块链数据库系统构建方法，其特征在于，包括：
获取至少一个目标对象的第一类型数据及第二类型数据；其中，所述第一类型数据包括区块链数据，所述第一类型数据和所述第二类型数据携带有目标对象标识；
根据所述区块链数据获取交易账本数据，根据所述目标对象标识将所述交易账本数据存储到与所述目标对象对应的至少一个第一区块；
对所述第二类型数据进行语义分析，得到语义信息数据，根据所述目标对象标识将所述语义信息数据存储到与所述目标对象对应的至少一个第二区块；
在与所述目标对象对应的所述第一区块和所述第二区块中，获取与所述第一区块相关的所述第二区块，将所述第一区块和与所述第一区块相关的所述第二区块中的数据进行融合并进行区块存储得到与所述目标对象对应的融合区块；
为所述融合区块建立索引标签，从而构建得到所述数据湖区块链数据库系统。
2.根据权利要求1所述的数据湖区块链数据库系统构建方法，其特征在于，所述获取与所述第一区块相关的所述第二区块，具体包括：
将所述第一区块中的所述区块链数据与所述第二区块中的所述语义信息数据进行相关性分析，根据相关性分析的结果获取与所述第一区块相关的所述第二区块。
3.根据权利要求2所述的数据湖区块链数据库系统构建方法，其特征在于，所述将所述第一区块中的所述区块链数据与所述第二区块中的所述语义信息数据进行相关性分析，根据相关性分析的结果获取与所述第一区块相关的所述第二区块，具体包括：
获取所述第一区块中的所述区块链数据的第一关键字信息；
获取所述第二区块中的所述语义信息数据的第二关键字信息；
将所述第一关键字信息和所述第二关键字信息进行信息匹配，获取与所述第一关键字信息匹配成功的所述第二关键字信息；
将与所述第一关键字信息匹配成功的所述第二关键字信息对应的所述第二区块作为与所述第一区块相关的所述第二区块。
4.根据权利要求1所述的数据湖区块链数据库系统构建方法，其特征在于，所述获取至少一个目标对象的第一类型数据及第二类型数据，具体包括：
接收所述至少一个目标对象的联盟链数据和/或私有链数据，从而获取所述第一类型数据；
接收所述至少一个目标对象的数据库数据，从而获取所述第二类型数据。
5.根据权利要求1所述的数据湖区块链数据库系统构建方法，其特征在于，所述第二类型数据包括非结构化数据和/或半结构化数据。
6.根据权利要求5所述的数据湖区块链数据库系统构建方法，其特征在于，所述非结构化数据包括音频数据、图片数据、视频数据及文本数据中的至少一种。
7.根据权利要求1所述的数据湖区块链数据库系统构建方法，其特征在于，所述方法还包括：
基于与所述目标对象对应的所述融合区块进行人工智能分析处理，并将处理结果返回给所述目标对象。
8.一种数据湖区块链数据库系统构建装置，其特征在于，包括：
源数据获取模块，用于：获取至少一个目标对象的第一类型数据及第二类型数据；其中，所述第一类型数据包括区块链数据，所述第一类型数据和所述第二类型数据携带有目标对象标识；
第一区块构建模块，用于：根据所述区块链数据获取交易账本数据，根据所述目标对象标识将所述交易账本数据存储到与所述目标对象对应的至少一个第一区块；
第二区块构建模块，用于：对所述第二类型数据进行语义分析，得到语义信息数据，根据所述目标对象标识将所述语义信息数据存储到与所述目标对象对应的至少一个第二区块；
融合区块构建模块，用于：在与所述目标对象对应的所述第一区块和所述第二区块中，获取与所述第一区块相关的所述第二区块，将所述第一区块和与所述第一区块相关的所述第二区块中的数据进行融合并进行区块存储得到与所述目标对象对应的融合区块；
索引标签构建模块，用于：为所述融合区块建立索引标签，从而构建得到所述数据湖区块链数据库系统。
9.一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1至7任一项所述数据湖区块链数据库系统构建方法的步骤。
10.一种非暂态计算机可读存储介质，其上存储有计算机程序，其特征在于，该计算机程序被处理器执行时实现如权利要求1至7任一项所述数据湖区块链数据库系统构建方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110342171.2A CN113094352B (zh) | 2021-03-30 | 2021-03-30 | 数据湖区块链数据库系统构建方法及装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110342171.2A CN113094352B (zh) | 2021-03-30 | 2021-03-30 | 数据湖区块链数据库系统构建方法及装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113094352A CN113094352A (zh) | 2021-07-09 |
| CN113094352B true CN113094352B (zh) | 2022-12-02 |
Family
ID=76671299
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110342171.2A Active CN113094352B (zh) | 2021-03-30 | 2021-03-30 | 数据湖区块链数据库系统构建方法及装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113094352B (zh) |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108628942A (zh) * | 2018-03-27 | 2018-10-09 | 深圳市网心科技有限公司 | 区块链节点设备、分布式数据库的数据读取及写入方法 |
| CN110162523A (zh) * | 2019-04-04 | 2019-08-23 | 阿里巴巴集团控股有限公司 | 数据存储方法、系统、装置及设备 |
| CN111464319A (zh) * | 2020-06-15 | 2020-07-28 | 支付宝(杭州)信息技术有限公司 | 一种基于中心化块链式账本的交易存储、签名校验方法 |
-
2021
- 2021-03-30 CN CN202110342171.2A patent/CN113094352B/zh active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108628942A (zh) * | 2018-03-27 | 2018-10-09 | 深圳市网心科技有限公司 | 区块链节点设备、分布式数据库的数据读取及写入方法 |
| CN110162523A (zh) * | 2019-04-04 | 2019-08-23 | 阿里巴巴集团控股有限公司 | 数据存储方法、系统、装置及设备 |
| CN111464319A (zh) * | 2020-06-15 | 2020-07-28 | 支付宝(杭州)信息技术有限公司 | 一种基于中心化块链式账本的交易存储、签名校验方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN113094352A (zh) | 2021-07-09 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110908997B (zh) | 数据血缘构建方法、装置、服务器及可读存储介质 | |
| Motahari Nezhad et al. | Protocol-aware matching of web service interfaces for adapter development | |
| US9626623B2 (en) | Method of automated discovery of new topics | |
| US9916368B2 (en) | Non-exclusionary search within in-memory databases | |
| CN111026874A (zh) | 知识图谱的数据处理方法及服务器 | |
| Ali et al. | Requirements traceability for object oriented systems by partitioning source code | |
| CN112035599B (zh) | 基于垂直搜索的查询方法、装置、计算机设备及存储介质 | |
| CN104765729A (zh) | 一种跨平台微博社区账户匹配方法 | |
| CN110263104A (zh) | Json字符串处理方法及装置 | |
| CN114969819A (zh) | 数据资产风险发现方法和装置 | |
| Cheng et al. | MISDA: web services discovery approach based on mining interface semantics | |
| CN110245074A (zh) | 一种日志记录的生成方法、装置、存储介质和服务器 | |
| CN109672586A (zh) | 一种dpi业务流量识别方法、装置与计算机可读存储介质 | |
| CN113094352B (zh) | 数据湖区块链数据库系统构建方法及装置 | |
| CN111984797A (zh) | 客户身份识别装置及方法 | |
| CN109657060B (zh) | 安全生产事故案例推送方法及系统 | |
| CN114124586B (zh) | 一种网络威胁检测方法及装置 | |
| CN110765276A (zh) | 知识图谱中的实体对齐方法及装置 | |
| CN112765329B (zh) | 一种社交网络关键节点发现方法及系统 | |
| EP4002152A1 (en) | Data tagging and synchronisation system | |
| CN111159213A (zh) | 一种数据查询方法、装置、系统和存储介质 | |
| Eyal-Salman et al. | Identifying traceability links between product variants and their features | |
| CN112463890B (zh) | 基于区块链和机器学习的跨系统数据共享方法 | |
| CN116975050A (zh) | 一种数据处理方法、装置、设备以及计算机可读存储介质 | |
| CN113963407A (zh) | 基于业务场景的人脸识别结果判断方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |