CN111046115B - 基于知识图谱的异构数据库互联管理方法 - Google Patents

基于知识图谱的异构数据库互联管理方法 Download PDF

Info

Publication number
CN111046115B
CN111046115B CN201911352821.0A CN201911352821A CN111046115B CN 111046115 B CN111046115 B CN 111046115B CN 201911352821 A CN201911352821 A CN 201911352821A CN 111046115 B CN111046115 B CN 111046115B
Authority
CN
China
Prior art keywords
data
knowledge
database
graph
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911352821.0A
Other languages
English (en)
Other versions
CN111046115A (zh
Inventor
肖明
杨念
黄冠铭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sichuan Winshare Education Science & Technology Co ltd
Original Assignee
Sichuan Winshare Education Science & Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sichuan Winshare Education Science & Technology Co ltd filed Critical Sichuan Winshare Education Science & Technology Co ltd
Priority to CN201911352821.0A priority Critical patent/CN111046115B/zh
Publication of CN111046115A publication Critical patent/CN111046115A/zh
Application granted granted Critical
Publication of CN111046115B publication Critical patent/CN111046115B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/28—Databases characterised by their database models, e.g. relational or object models
    • G06F16/284—Relational databases
    • G06F16/288—Entity relationship models
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22—Indexing; Data structures therefor; Storage structures
    • G06F16/2228—Indexing structures
    • G06F16/2272—Management thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22—Indexing; Data structures therefor; Storage structures
    • G06F16/2282—Tablespace storage structures; Management thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Computing Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供一种基于知识图谱的异构数据库互联管理方法，包括但不限于将数据文件分为一类数据模块和二类数据模块，并为各数据分配ID、地址和优先级的步骤；为每个数据建立索引数据，所述索引块包含数据块的ID、地址和优先级信息的步骤；及构建包含所有索引数据信息的信息数据，从而完成数据库的的构建的捕捉；该基于知识图谱的异构数据库互联管理方法将知识图谱技术与异构数据库很好的进行了结合同一，解决了现有的三元组的存储方式很难用传统的关系型数据库解决的问题，并提供了更加完善的数据库使用全流程权限管理及针对于数据修改时的权限管理两种模式，从而在在兼顾了使用便捷性的同时提高了系统的安全性能。

Description

基于知识图谱的异构数据库互联管理方法
技术领域
本发明具体涉及一种基于知识图谱的异构数据库互联管理方法。
背景技术
知识图谱在图书情报界称为知识域可视化或知识领域映射地图，是显示知识发展进程与结构关系的一系列各种不同的图形，用可视化技术描述知识资源及其载体，挖掘、分析、构建、绘制和显示知识及它们之间的相互联系。知识图谱是通过将应用数学、图形学、信息可视化技术、信息科学等学科的理论与方法与计量学引文分析、共现分析等方法结合，并利用可视化的图谱形象地展示学科的核心结构、发展历史、前沿领域以及整体知识架构达到多学科融合目的的现代理论。异构数据库系统是相关的多个数据库系统的集合，可以实现数据的共享和透明访问，几个数据库系统在加入异构数据库系统之前本身就已经存在，拥有自己的数据库管理系统、外构数据库的各个组成部分具有自身的自治性，实现数据共享的同时，每个数据库系统仍有自己的应用特性、完整性控制和安全性控制。
异构数据库系统的目标在于实现不同数据库之间的数据信息资源、硬件设备资源和人力资源的合并和共享。其中关键的一点就是以局部数据库模式为基础，建立全局的数据模式或全局外视图。这种全局模式对于建立高级的决策支持系统尤为重要。
虽然算法和理论不断成熟，知识图谱的存储和查询仍面临很多挑战。由于三元组的存储方式很难用传统的关系型数据库解决，现有的存储方案多是围绕非关系型数据库和图数据库展开，但这也给性能和存储方式带来问题；因此急需一种基于知识图谱的异构数据库互联管理方法已解决上述问题。
发明内容
本发明的目的在于针对现有技术的不足，提供一种基于知识图谱的异构数据库互联管理方法，该基于知识图谱的异构数据库互联管理方法可以很好地解决上述问题。
为达到上述要求，本发明采取的技术方案是：提供一种基于知识图谱的异构数据库互联管理方法，该基于知识图谱的异构数据库互联管理方法包括如下步骤：
S1：将数据文件分为一类数据模块和二类数据模块，并为各数据分配ID、地址和优先级；
S2：为每个数据建立索引数据，所述索引块包含数据块的ID、地址和优先级信息；
S3：构建包含所有索引数据信息的信息数据，从而完成数据库的的构建；
S4：构建用于为不同的数据库提供对应驱动程序的驱动模块，并实现三元组操作；
S5：构建用于在所述数据库驱动模块的基础上进行抽象的知识图谱抽象模块；
S6：构造异构数据库知识图谱的节点关系表，确定知识图谱计算场景，确定所述知识图谱计算场景所需的节点的类型和属性；
S7：从所述节点关系表中，提取与所述知识图谱计算场景对应的至少一个计算节点；
S8：从所述异构分布式知识图谱中过滤出与所述至少一个计算节点对应的节点数据；
S9：对过滤出的所述节点数据进行数据处理，得到基于异构分布式知识图谱的数据处理结果；
S10：将所述信息数据加载到内存，依据信息数据携带的索引数据信息将索引数据加载到内存；
S11：查询到待访问数据的索引数据，若该数据存在于内存，则根据索引数据携带的内存地址访问数据；
S12：若该数据块存在于外存，则根据索引块携带的外存地址访问数据。
该基于知识图谱的异构数据库互联管理方法将知识图谱技术与异构数据库很好的进行了结合同一，解决了现有的三元组的存储方式很难用传统的关系型数据库解决的问题，并提供了更加完善的数据库使用全流程权限管理及针对于数据修改时的权限管理两种模式，从而在在兼顾了使用便捷性的同时提高了系统的安全性能。
附图说明
此处所说明的附图用来提供对本申请的进一步理解，构成本申请的一部分，在这些附图中使用相同的参考标号来表示相同或相似的部分，本申请的示意性实施例及其说明用于解释本申请，并不构成对本申请的不当限定。在附图中：
图1示意性地示出了根据本申请一个实施例的基于知识图谱的异构数据库互联管理方法的流程示意图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚，以下结合附图及具体实施例，对本申请作进一步地详细说明。
在以下描述中，对“一个实施例”、“实施例”、“一个示例”、“示例”等等的引用表明如此描述的实施例或示例可以包括特定特征、结构、特性、性质、元素或限度，但并非每个实施例或示例都必然包括特定特征、结构、特性、性质、元素或限度。另外，重复使用短语“根据本申请的一个实施例”虽然有可能是指代相同实施例，但并非必然指代相同的实施例。
为简单起见，以下描述中省略了本领域技术人员公知的某些技术特征。
根据本申请的一个实施例，提供一种基于知识图谱的异构数据库互联管理方法，如图1所示，包括如下步骤：
S1：将数据文件分为一类数据模块和二类数据模块，并为各数据分配ID、地址和优先级；
S2：为每个数据建立索引数据，所述索引块包含数据块的ID、地址和优先级信息；
S3：构建包含所有索引数据信息的信息数据，从而完成数据库的的构建；
S4：构建用于为不同的数据库提供对应驱动程序的驱动模块，并实现三元组操作；
S5：构建用于在所述数据库驱动模块的基础上进行抽象的知识图谱抽象模块；
S6：构造异构数据库知识图谱的节点关系表，确定知识图谱计算场景，确定所述知识图谱计算场景所需的节点的类型和属性；
S7：从所述节点关系表中，提取与所述知识图谱计算场景对应的至少一个计算节点；
S8：从所述异构分布式知识图谱中过滤出与所述至少一个计算节点对应的节点数据；
S9：对过滤出的所述节点数据进行数据处理，得到基于异构分布式知识图谱的数据处理结果；
S10：将所述信息数据加载到内存，依据信息数据携带的索引数据信息将索引数据加载到内存；
S11：查询到待访问数据的索引数据，若该数据存在于内存，则根据索引数据携带的内存地址访问数据；
S12：若该数据块存在于外存，则根据索引块携带的外存地址访问数据。
根据本申请的一个实施例，该基于知识图谱的异构数据库互联管理方法还包括数据修改时权限管理的步骤和全流程权限管理的步骤。
根据本申请的一个实施例，该基于知识图谱的异构数据库互联管理方法的数据修改时权限管理的步骤具体包括：
S13：利用非对称算法对数据进行加密；
S14：获得需要配置有权限用户的加密算法和参数，并构建访问权限结构；
S15：在进行数据修改时对用户的访问控制权限进行检查；
S16：在用户具有访问控制权限后，获取用户的修改权限；
S17：在所述修改权限通过验证后，接收用户写入的数据并进行修改。
根据本申请的一个实施例，该基于知识图谱的异构数据库互联管理方法的全流程权限管理的步骤具体包括：
S18：构建至少与一个数据库连接的权限管理模块；
S19：所述权限管理模块中设置有至少一个逻辑实体以及存储有不同用户对每个逻辑实体的访问权限，每个所述逻辑实体与至少两个数据表对应；
S20：每个逻辑实体的描述信息中包括但不限于对应数据表的类型和对应每个数据表所属于的数据库标识。
根据本申请的一个实施例，该基于知识图谱的异构数据库互联管理方法还包括如下步骤：
S21：所述权限管理模块获取连接的数据库中数据表的元数据；
S22：所述权限管理模块所述元数据确定数据表对应的目标逻辑实体；
S23：所述权限管理模块确定用户对所述目标逻辑实体的访问权限；
S24：所述权限管理模块根据用户对所述目标逻辑实体的访问权限在所述数据表所属于的数据库中配置用户对所述数据表的访问权限。
根据本申请的一个实施例，该基于知识图谱的异构数据库互联管理方法的一类数据模块的优先级低于所述二类数据模块。
根据本申请的一个实施例，该基于知识图谱的异构数据库互联管理方法的地址初始赋值为数据模块待存入的外存地址。
根据本申请的一个实施例，该基于知识图谱的异构数据库互联管理方法的知识图谱抽象模块通过组织调用驱动中的三元组操作来提供调用接口。
根据本申请的一个实施例，该基于知识图谱的异构数据库互联管理方法中依据索引数据携带的数据信息将二类数据模块中优先级高的加载到内存，并将被加载二类数据模块的索引数据内的地址更新为所在内存地址。
根据本申请的一个实施例，该基于知识图谱的异构数据库互联管理方法将知识图谱技术与异构数据库很好的进行了结合同一，解决了现有的三元组的存储方式很难用传统的关系型数据库解决的问题，并提供了更加完善的数据库使用全流程权限管理及针对于数据修改时的权限管理两种模式，从而在在兼顾了使用便捷性的同时提高了系统的安全性能。
以上所述实施例仅表示本发明的几种实施方式，其描述较为具体和详细，但并不能理解为对本发明范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明保护范围。因此本发明的保护范围应该以所述权利要求为准。

Claims (9)

1.一种基于知识图谱的异构数据库互联管理方法，其特征在于，包括如下步骤：
S1：将数据文件分为一类数据模块和二类数据模块，并为各数据分配ID、地址和优先级；
S2：为每个数据建立索引数据，索引块包含数据块的ID、 地址和优先级信息；
S3：构建包含所有索引数据信息的信息数据，从而完成数据库的构建；
S4：构建用于为不同的数据库提供对应驱动程序的驱动模块，并实现三元组操作；
S5：构建用于在数据库驱动模块的基础上进行抽象的知识图谱抽象模块；
S6：构造异构数据库知识图谱的节点关系表，确定知识图谱计算场景，确定所述知识图谱计算场景所需的节点的类型和属性；
S7：从所述节点关系表中，提取与所述知识图谱计算场景对应的至少一个计算节点；
S8：从异构分布式知识图谱中过滤出与所述至少一个计算节点对应的节点数据；
S9：对过滤出的所述节点数据进行数据处理，得到基于异构分布式知识图谱的数据处理结果；
S10：将所述信息数据加载到内存，依据信息数据携带的索引数据信息将索引数据加载到内存；
S11：查询到待访问数据的索引数据，若该数据存在于内存，则根据索引数据携带的内存地址访问数据；
S12：若该数据块存在于外存，则根据索引块携带的外存地址访问数据。
2.根据权利要求1所述的基于知识图谱的异构数据库互联管理方法，其特征在于，还包括数据修改时权限管理的步骤和全流程权限管理的步骤。
3.根据权利要求2所述的基于知识图谱的异构数据库互联管理方法，其特征在于，所述数据修改时权限管理的步骤具体包括：
S13：利用非对称算法对数据进行加密；
S14：获得需要配置有权限用户的加密算法和参数，并构建访问权限结构；
S15：在进行数据修改时对用户的访问控制权限进行检查；
S16：在用户具有访问控制权限后，获取用户的修改权限；
S17：在所述修改权限通过验证后，接收用户写入的数据并进行修改。
4.根据权利要求2所述的基于知识图谱的异构数据库互联管理方法，其特征在于，全流程权限管理的步骤具体包括：
S18：构建至少与一个数据库连接的权限管理模块；
S19：所述权限管理模块中设置有至少一个逻辑实体以及存储有不同用户对每个逻辑实体的访问权限，每个所述逻辑实体与至少两个数据表对应；
S20：每个逻辑实体的描述信息中包括但不限于对应数据表的类型和对应每个数据表所属于的数据库标识。
5.根据权利要求4所述的基于知识图谱的异构数据库互联管理方法，其特征在于，还包括如下步骤：
S21：所述权限管理模块获取连接的数据库中数据表的元数据；
S22：所述权限管理模块所述元数据确定数据表对应的目标逻辑实体；
S23：所述权限管理模块确定用户对所述目标逻辑实体的访问权限；
S24：所述权限管理模块根据用户对所述目标逻辑实体的访问权限在所述数据表所属于的数据库中配置用户对所述数据表的访问权限。
6.根据权利要求1所述的基于知识图谱的异构数据库互联管理方法，其特征在于：所述一类数据模块的优先级低于所述二类数据模块 。
7.根据权利要求1所述的基于知识图谱的异构数据库互联管理方法，其特征在于：地址初始赋值为数据模块待存入的外存地址。
8.根据权利要求1所述的基于知识图谱的异构数据库互联管理方法，其特征在于：所述知识图谱抽象模块通过组织调用驱动中的三元组操作来提供调用接口。
9.根据权利要求1所述的基于知识图谱的异构数据库互联管理方法，其特征在于：依据索引数据携带的数据信息将二类数据模块中优先级高的加载到内存，并将被加载二类数据模块的索引数据内的地址更新为所在内存地址。
CN201911352821.0A 2019-12-24 2019-12-24 基于知识图谱的异构数据库互联管理方法 Active CN111046115B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911352821.0A CN111046115B (zh) 2019-12-24 2019-12-24 基于知识图谱的异构数据库互联管理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911352821.0A CN111046115B (zh) 2019-12-24 2019-12-24 基于知识图谱的异构数据库互联管理方法

Publications (2)

Publication Number Publication Date
CN111046115A CN111046115A (zh) 2020-04-21
CN111046115B true CN111046115B (zh) 2023-08-08

Family

ID=70239358

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911352821.0A Active CN111046115B (zh) 2019-12-24 2019-12-24 基于知识图谱的异构数据库互联管理方法

Country Status (1)

Country Link
CN (1) CN111046115B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112906064B (zh) * 2020-07-31 2022-05-17 支付宝(杭州)信息技术有限公司 生成描述信息的方法及装置
CN115129942A (zh) * 2022-05-24 2022-09-30 湖北省计量测试技术研究院 一种利用图数据结构进行计量检测数据存储的方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107330125A (zh) * 2017-07-20 2017-11-07 云南电网有限责任公司电力科学研究院 基于知识图谱技术的海量非结构化配网数据集成方法
CN109255031A (zh) * 2018-09-20 2019-01-22 苏州友教习亦教育科技有限公司 基于知识图谱的数据处理方法
CN109783484A (zh) * 2018-12-29 2019-05-21 北京航天云路有限公司 基于知识图谱的数据服务平台的构建方法及系统
CN110472068A (zh) * 2019-08-20 2019-11-19 星环信息科技（上海）有限公司 基于异构分布式知识图谱的大数据处理方法、设备及介质
CN110489560A (zh) * 2019-06-19 2019-11-22 民生科技有限责任公司 基于知识图谱技术的小微企业画像生成方法及装置

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8014997B2 (en) * 2003-09-20 2011-09-06 International Business Machines Corporation Method of search content enhancement
US11487771B2 (en) * 2014-06-25 2022-11-01 Microsoft Technology Licensing, Llc Per-node custom code engine for distributed query processing

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107330125A (zh) * 2017-07-20 2017-11-07 云南电网有限责任公司电力科学研究院 基于知识图谱技术的海量非结构化配网数据集成方法
CN109255031A (zh) * 2018-09-20 2019-01-22 苏州友教习亦教育科技有限公司 基于知识图谱的数据处理方法
CN109783484A (zh) * 2018-12-29 2019-05-21 北京航天云路有限公司 基于知识图谱的数据服务平台的构建方法及系统
CN110489560A (zh) * 2019-06-19 2019-11-22 民生科技有限责任公司 基于知识图谱技术的小微企业画像生成方法及装置
CN110472068A (zh) * 2019-08-20 2019-11-19 星环信息科技（上海）有限公司 基于异构分布式知识图谱的大数据处理方法、设备及介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Yu Lei 等.Knowledge Graph provision for Heterogeneous Service Network.《2019 IEEE World Congress on Services》.2019,第135-140页. *

Also Published As

Publication number Publication date
CN111046115A (zh) 2020-04-21

Similar Documents

Publication Publication Date Title
KR100970823B1 (ko) 그래프 분석 및 동기화를 위한 방법 및 시스템
US8930382B2 (en) High performance secure data access in a parallel processing system
RU2564850C2 (ru) Система и способы обеспечения улучшенной модели безопасности
CN110225095B (zh) 一种数据处理方法、装置及系统
US9104728B2 (en) Query language to traverse a path in a graph
CN111026874A (zh) 知识图谱的数据处理方法及服务器
EP3547634B1 (en) Method and apparatus for determining access permission, and terminal
US11811839B2 (en) Managed distribution of data stream contents
CN111046115B (zh) 基于知识图谱的异构数据库互联管理方法
CN102314565B (zh) 数据匿名化装置和方法
US8326877B2 (en) Region-based security
WO2014110940A1 (en) A method, apparatus and system for storing, reading the directory index
CN112416923A (zh) 一种元数据管理方法及装置、设备、存储介质
US7693845B2 (en) Database systems, methods and computer program products using type based selective foreign key association to represent multiple but exclusive relationships in relational databases
US11080332B1 (en) Flexible indexing for graph databases
CN107526627A (zh) 一种虚拟资源生命周期信息管理方法和装置
CN110928963A (zh) 针对运维业务数据表的列级权限知识图谱构建方法
US20080295145A1 (en) Identifying non-orthogonal roles in a role based access control system
CN108182208A (zh) 一种数据交换方法及平台
Al Bouna et al. The image protector-a flexible security rule specification toolkit
US20160149794A1 (en) Automatic network routing engine agnostic of underlying inventory or network management system
CN115664785A (zh) 一种大数据平台数据脱敏系统
CN113986545A (zh) 用户与角色关联方法及装置
CN114510465B (zh) 数据管理方法、装置及计算机可读存储介质
CN115242641B (zh) 策略下发结果预览方法、装置以及计算机设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant