CN104573107A - 一种网络安全应用NoSQL数据库与关系型数据库融合接口方法 - Google Patents

一种网络安全应用NoSQL数据库与关系型数据库融合接口方法 Download PDF

Info

Publication number
CN104573107A
CN104573107A CN201510050947.8A CN201510050947A CN104573107A CN 104573107 A CN104573107 A CN 104573107A CN 201510050947 A CN201510050947 A CN 201510050947A CN 104573107 A CN104573107 A CN 104573107A
Authority
CN
China
Prior art keywords
data
database
network security
nosql
interface
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510050947.8A
Other languages
English (en)
Inventor
任光裕
马旸
蔡冰
俞宙
罗雅琼
王林汝
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
JIANGSU BRANCH NATIONAL COMPUTER NETWORK AND INFORMATION SECURITY MANAGEMENT CENTER
Original Assignee
JIANGSU BRANCH NATIONAL COMPUTER NETWORK AND INFORMATION SECURITY MANAGEMENT CENTER
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by JIANGSU BRANCH NATIONAL COMPUTER NETWORK AND INFORMATION SECURITY MANAGEMENT CENTER filed Critical JIANGSU BRANCH NATIONAL COMPUTER NETWORK AND INFORMATION SECURITY MANAGEMENT CENTER
Priority to CN201510050947.8A priority Critical patent/CN104573107A/zh
Publication of CN104573107A publication Critical patent/CN104573107A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/28Databases characterised by their database models, e.g. relational or object models
    • G06F16/284Relational databases
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems

Abstract

本发明提供了一种网络安全应用NoSQL数据库与关系型数据库融合接口方法,包括中央处理器、网络安全应用、网络安全应用接口、NoSQL数据库、NoSQL数据库接口、关系型数据库以及关系型数据库接口,所述的中央处理器通过NoSQL数据库接口与NoSQL数据库连接,中央处理器通过关系型数据库接口与关系型数据库连接,并在另一端通过网络安全应用接口与网络安全应用进行连接,发明在传统数据架构中增加了一个数据处理中间层,整合了NoSQL数据库和关系型数据库的数据访问接口,为应用提供统一的数据访问接口,简化了应用开发复杂度,降低了应用与数据间的耦合,提升了开发效率。

Description

一种网络安全应用 NoSQL 数据库与关系型数据库融合接口方法
技术领域
本发明涉及网络安全应用领域,尤其涉及一种网络安全应用NoSQL数据库与关系型数据库融合接口方法。
背景技术
在传统的网络安全应用中,因为数据应用的特点,通常需要分别使用不同类型的数据库来完成不同数据资源的存储、管理、检索、处理等功能;例如:大量需要最终显示到终端的处理结果因为数量超出传统关系型数据库处理极限,需要存储到分布式NoSQL数据库中;在增、删、查(多表关联、分组、排序、嵌入子查询等)、改、事务、锁、存储过程、函数等处理过程中,分布式NoSQL数据库无法满足要求。在通常的网络安全应用开发过程中,处理上述矛盾需要将不同处理需求的数据分别存储在不同的数据库系统中,在应用中通过多个数据资源接口访问存储在不同数据库系统中的数据,这样增加了编程的复杂性。
在现有的应用开发过程中,需要同时使用NoSQL数据库和关系型数据库两种不同类型的数据库,应用程序在进行数据操作时需要连接两个以上的数据源,为了综合NoSQL数据库和关系型数据库处理的优势,需要同时使用两种数据库提供的接口进行数据访问,编程过程复杂,在对数据进行存储和操作的过程中,需要应用自行判断使用哪种数据库,增加了应用和数据之间的耦合,提高了应用迁移的复杂度。
发明内容
本发明提供了一种网络安全应用NoSQL数据库与关系型数据库融合接口方法,在传统数据架构中增加了一个数据处理中间层,整合了NoSQL数据库和关系型数据库的数据访问接口,为应用提供统一的数据访问接口,简化了应用开发复杂度,降低了应用与数据间的耦合,提升了开发效率。
为解决上述技术问题,本申请实施例提供了一种网络安全应用NoSQL数据库与关系型数据库融合接口方法,包括中央处理器、网络安全应用、网络安全应用接口、NoSQL数据库、NoSQL数据库接口、关系型数据库以及关系型数据库接口,所述的中央处理器通过NoSQL数据库接口与NoSQL数据库连接,中央处理器通过关系型数据库接口与关系型数据库连接,并在另一端通过网络安全应用接口与网络安全应用进行连接。
作为本方案的优选实施例,所述的融合接口具有数据写入和数据操作两种功能。
作为本方案的优选实施例,在数据写入的过程中,所述的中央处理器对NoSQL数据库和关系型数据库进行控制逻辑,控制逻辑通过对数据量的判断,自动选择将数据存储在关系型数据库还是NoSQL数据中,同时维护一个记录表,记录所有存入系统的数据存储在哪个数据库中。
作为本方案的优选实施例,在数据操作的过程中,所述的中央处理器根据访问的数据集在记录表中与数据库的对应关系,自动将该访问请求发送给指定数据库,数据集默认存储在关系型数据库中,当数据集的数据量超过设定的阀值,则将该数据集转入NoSQL数据库中,并修改记录表中的对应记录。
作为本方案的优选实施例,所述的控制逻辑分为请求解析、执行引擎和数据控制三部分。
作为本方案的优选实施例,所述的请求解析将应用程序发出的数据请求分为数据写入请求和数据操作请求两类,分别对应数据写入和数据操作两套任务流;所述的执行引擎负责按照任务流对数据进行操作;所述的数据控制将关系型数据库中的数据进行格式转换后导入NoSQL数据库,并通过数据同步控制技术保障导入数据与原始数据的一致性。
本申请实施例中提供的一个或多个技术方案,至少具有如下技术效果或优点:
在传统数据架构中增加了一个数据处理中间层,整合了NoSQL数据库和关系型数据库的数据访问接口,为应用提供统一的数据访问接口,简化了应用开发复杂度,降低了应用与数据间的耦合,提升了开发效率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施的结构示意图;
图2是传统网络安全应用数据访问示意图;
图3是本申请实施的数据访问示意图;
图4是数据写入示意图;
图5是数据操作示意图;
图1-图5中,1、中央处理器,2、网络安全应用,3、网络安全应用接口,4、NoSQL数据库,5、NoSQL数据库,6、关系型数据库,7关系型数据库接口,8、请求解析,9、执行引擎,10、数据控制,11、控制逻辑,12、数据记录表。
具体实施方式
本发明提供了一种网络安全应用NoSQL数据库与关系型数据库融合接口技术。
为了更好的理解上述技术方案,下面将结合说明书附图以及具体的实施方式对上述技术方案进行详细的说明。
如图1所示,一种网络安全应用NoSQL数据库与关系型数据库融合接口技术,包括中央处理器1、网络安全应用2、网络安全应用接口3、NoSQL数据库4、NoSQL数据库接口5、关系型数据库6以及关系型数据库接口7,所述的中央处理器1通过NoSQL数据库接口5与NoSQL数据库4连接,中央处理器1通过关系型数据库接口7与关系型数据库6连接,并在另一端通过网络安全应用接口3与网络安全应用2进行连接。
其中,在实际应用中,所述的融合接口具有数据写入和数据操作两种功能。
其中,在实际应用中,在数据写入的过程中,所述的中央处理器1对NoSQL数据库4和关系型数据库6进行控制逻辑11,控制逻辑11通过对数据量的判断,自动选择将数据存储在关系型数据库6还是NoSQL数据4中,同时维护一个记录表12,记录所有存入系统的数据存储在哪个数据库中。
其中,在实际应用中,在数据操作的过程中,所述的中央处理器1根据访问的数据集在记录表12中与数据库的对应关系,自动将该访问请求发送给指定数据库,数据集默认存储在关系型数据库6中,当数据集的数据量超过设定的阀值,则将该数据集转入NoSQL数据库4中,并修改记录表12中的对应记录。
其中,在实际应用中,所述的控制逻辑11分为请求解析8、执行引擎9和数据控制10三部分。
其中,在实际应用中,所述的请求解析8将应用程序发出的数据请求分为数据写入请求和数据操作请求两类,分别对应数据写入和数据操作两套任务流;所述的执行引擎9负责按照任务流对数据进行操作;所述的数据控制10将关系型数据库6中的数据进行格式转换后导入NoSQL数据库4,并通过数据同步控制技术保障导入数据与原始数据的一致性。
以上所述,仅是本发明的较佳实施例而已,并非对本发明作任何形式上的限制,虽然本发明已以较佳实施例揭露如上,然而并非用以限定本发明,任何熟悉本专业的技术人员,在不脱离本发明技术方案范围内,当可利用上述揭示的技术内容作出些许更动或修饰为等同变化的等效实施例,但凡是未脱离本发明技术方案的内容,依据本发明的技术实质对以上实施例所作的任何简单修改、等同变化与修饰,均仍属于本发明技术方案的范围内。

Claims (6)

1.一种网络安全应用NoSQL数据库与关系型数据库融合接口方法,包括中央处理器(1)、网络安全应用(2)、网络安全应用接口(3)、NoSQL数据库(4)、NoSQL数据库接口(5)、关系型数据库(6)以及关系型数据库接口(7),其特征在于,所述的中央处理器(1)通过NoSQL数据库接口(5)与NoSQL数据库(4)连接,中央处理器(1)通过关系型数据库接口(7)与关系型数据库(6)连接,并在另一端通过网络安全应用接口(3)与网络安全应用(2)进行连接。
2.根据权利要求1所述的一种网络安全应用NoSQL数据库与关系型数据库融合接口方法,其特征在于,所述的融合接口具有数据写入和数据操作两种功能。
3.根据权利要求2所述的一种网络安全应用NoSQL数据库与关系型数据库融合接口方法,其特征在于,在数据写入的过程中,所述的中央处理器(1)对NoSQL数据库(4)和关系型数据库(6)进行控制逻辑(11),控制逻辑(11)通过对数据量的判断,自动选择将数据存储在关系型数据库(6)还是NoSQL数据(4)中,同时维护一个记录表(12),记录所有存入系统的数据存储在哪个数据库中。
4.根据权利要求2或3所述的一种网络安全应用NoSQL数据库与关系型数据库融合接口方法,其特征在于,在数据操作的过程中,所述的中央处理器(1)根据访问的数据集在记录表(12)中与数据库的对应关系,自动将该访问请求发送给指定数据库,数据集默认存储在关系型数据库(6)中,当数据集的数据量超过设定的阀值,则将该数据集转入NoSQL数据库(4)中,并修改记录表(12)中的对应记录。
5.据权利要求1所述的一种网络安全应用NoSQL数据库与关系型数据库融合接口方法,其特征在于,所述的控制逻辑(11)分为请求解析(8)、执行引擎(9)和数据控制(10)三部分。
6.根据权利要求5所述的一种网络安全应用NoSQL数据库与关系型数据库融合接口方法,其特征在于,所述的请求解析(8)将应用程序发出的数据请求分为数据写入请求和数据操作请求两类,分别对应数据写入和数据操作两套任务流;所述的执行引擎(9)负责按照任务流对数据进行操作;所述的数据控制(10)将关系型数据库(6)中的数据进行格式转换后导入NoSQL数据库(4),并通过数据同步控制技术保障导入数据与原始数据的一致性。
CN201510050947.8A 2015-02-02 2015-02-02 一种网络安全应用NoSQL数据库与关系型数据库融合接口方法 Pending CN104573107A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510050947.8A CN104573107A (zh) 2015-02-02 2015-02-02 一种网络安全应用NoSQL数据库与关系型数据库融合接口方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510050947.8A CN104573107A (zh) 2015-02-02 2015-02-02 一种网络安全应用NoSQL数据库与关系型数据库融合接口方法

Publications (1)

Publication Number Publication Date
CN104573107A true CN104573107A (zh) 2015-04-29

Family

ID=53089169

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510050947.8A Pending CN104573107A (zh) 2015-02-02 2015-02-02 一种网络安全应用NoSQL数据库与关系型数据库融合接口方法

Country Status (1)

Country Link
CN (1) CN104573107A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108182291A (zh) * 2018-01-30 2018-06-19 国网江苏省电力有限公司扬州供电分公司 一种基于NoSql数据库同关系型数据库的数据交互机制
CN111339466A (zh) * 2020-02-25 2020-06-26 天津满运软件科技有限公司 接口管理方法、装置、电子设备及可读存储介质
CN111973989A (zh) * 2020-08-21 2020-11-24 北京像素软件科技股份有限公司 一种游戏引擎框架、实体创建方法,服务器及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201522706U (zh) * 2009-09-09 2010-07-07 中国工商银行股份有限公司 元数据管理系统
CN102023979A (zh) * 2009-09-09 2011-04-20 中国工商银行股份有限公司 元数据管理方法及系统
US20150026189A1 (en) * 2013-07-19 2015-01-22 International Business Machines Corporation Index structure for a relational database table

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201522706U (zh) * 2009-09-09 2010-07-07 中国工商银行股份有限公司 元数据管理系统
CN102023979A (zh) * 2009-09-09 2011-04-20 中国工商银行股份有限公司 元数据管理方法及系统
US20150026189A1 (en) * 2013-07-19 2015-01-22 International Business Machines Corporation Index structure for a relational database table

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108182291A (zh) * 2018-01-30 2018-06-19 国网江苏省电力有限公司扬州供电分公司 一种基于NoSql数据库同关系型数据库的数据交互机制
CN111339466A (zh) * 2020-02-25 2020-06-26 天津满运软件科技有限公司 接口管理方法、装置、电子设备及可读存储介质
CN111973989A (zh) * 2020-08-21 2020-11-24 北京像素软件科技股份有限公司 一种游戏引擎框架、实体创建方法,服务器及存储介质

Similar Documents

Publication Publication Date Title
CN106202452B (zh) 大数据平台的统一数据资源管理系统与方法
US9223817B2 (en) Virtual repository management
CN102541694B (zh) 一种数据库备份的方法及装置
CN103559217B (zh) 一种面向异构数据库的海量组播数据入库实现方法
CN103714123B (zh) 企业云存储分块对象重复数据删除和重组版本控制方法
CN104598376A (zh) 一种数据驱动的分层自动化测试系统和方法
CN101957865A (zh) 一种异构系统间数据交换与共享技术
CN107391635A (zh) 数据同步系统及方法
EP2800013B1 (en) Integration database framework
CN102750354B (zh) 一种非结构化数据查询操作语言的解析与处理方法
CN103345502A (zh) 分布式数据库的事务处理方法和系统
CN104573107A (zh) 一种网络安全应用NoSQL数据库与关系型数据库融合接口方法
KR20190063835A (ko) 인-메모리 데이터베이스의 실시간 데이터 변경 처리 시스템
CN105512188A (zh) 数据连接方法和数据连接系统
CN103778239A (zh) 一种多数据库数据管理方法及系统
CN114218218A (zh) 基于数据仓库的数据处理方法、装置、设备及存储介质
CN105353988A (zh) 一种元数据读写方法及装置
CN103106260A (zh) 一种面向角色的虚拟文件系统的建立方法
CN104298761A (zh) 一种异构软件系统间主数据匹配的实现方法
CN103294794A (zh) 一种在线归档和访问文件的系统
CN103440300A (zh) 基于事件对文件进行管理的操作系统和方法
CN104125235A (zh) 一种集成多协议的一体化存储方法
CN103761188B (zh) 一种电子文件管理系统的自动化测试方法
CN115510072A (zh) 一种基于多租户SaaS应用平台的主数据引擎
CN104808970A (zh) 一种实现国际化软件的方法和系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20150429