CN106331079A - 面向数据的体系结构doa系统 - Google Patents

面向数据的体系结构doa系统 Download PDF

Info

Publication number
CN106331079A
CN106331079A CN201610694438.3A CN201610694438A CN106331079A CN 106331079 A CN106331079 A CN 106331079A CN 201610694438 A CN201610694438 A CN 201610694438A CN 106331079 A CN106331079 A CN 106331079A
Authority
CN
China
Prior art keywords
data
interface
doa
management module
application
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610694438.3A
Other languages
English (en)
Inventor
贺剑敏
李东海
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ming Yuan Technology (beijing) Ltd By Share Ltd
Original Assignee
Ming Yuan Technology (beijing) Ltd By Share Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ming Yuan Technology (beijing) Ltd By Share Ltd filed Critical Ming Yuan Technology (beijing) Ltd By Share Ltd
Priority to CN201610694438.3A priority Critical patent/CN106331079A/zh
Publication of CN106331079A publication Critical patent/CN106331079A/zh
Priority to US16/326,396 priority patent/US20190227987A1/en
Priority to PCT/CN2017/094114 priority patent/WO2018032942A1/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/564—Enhancement of application control based on intercepted application data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25—Integrating or interfacing systems involving database management systems
    • G06F16/252—Integrating or interfacing systems involving database management systems between a Database Management System and a front-end application
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/13—File access structures, e.g. distributed indices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26—Power supply means, e.g. regulation thereof
    • G06F1/32—Means for saving power
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14—Error detection or correction of the data by redundancy in operation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/11—File system administration, e.g. details of archiving or snapshots
    • G06F16/113—Details of archiving
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25—Integrating or interfacing systems involving database management systems
    • G06F16/258—Data format conversion from or to a database
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0751—Error or fault detection not based on redundancy

Abstract

本发明实施例涉及一种DOA系统，所述系统包括：数据资源池，包括多个数据管理模块，用于对数据进行存储；管理中心，包括接口管理模块和多个数据接口，每个数据接口对应一个数据管理模块；接口管理模块用于面向数据管理模块配置相应的数据接口，并且根据数据请求信息得到被请求数据的路由信息；所述数据请求信息中包括发起所述数据请求信息的应用的属性信息；所述数据接口用于，根据所述路由信息获取存储在所述数据管理模块中的被请求数据，并根据所述属性信息对所述被请求数据进行编译处理，得到所述应用支持的数据结构的数据；DOA资源总线，通过所述数据接口与所述数据管理模块相连接，用于将所述编译处理得到的数据传输到所述应用。

Description

面向数据的体系结构DOA系统
技术领域
本发明涉及计算机领域，尤其涉及一种面向数据的体系结构(Data OrientedArchitecture，DOA)系统。
背景技术
近些年,面向服务的体系结构(Service-oriented architecture,SOA)已经广泛应用。它将应用程序功能作为服务发送给最终用户或者其他服务。它可以根据需求通过网络对松散耦合的粗粒度应用组件进行分布式部署、组合和使用。服务层是SOA的基础，可以直接被应用调用，从而有效控制系统中与软件代理交互的人为依赖性。
然而大数据时代，受体系结构的局限，信息技术领域长期存在的问题在大数据时代愈发突出：系统间的信息难以共享；已建系统的功能扩展困难；海量、异构、多源、动态、实时变化和爆发式增长的大数据难管理，难分析，难挖掘；面向业务的软件工程开发过程复杂，维护困难，生命周期短；信息安全关系到国家安全、社会稳定、企业利益和个人隐私，在互联网开放环境下，问题更为突出；数据提供者的利益得不到保障等。即便是SOA所提供的松散耦合的方式也无法满足大数据时代的需求。
发明内容
本发明实施例提供了一种DOA系统，通过管理中心实现系统资源池中的数据完全解耦，便于数据共享。应用调用数据时可通过接口管理模块直接从数据管理模块中调用相应数据，以实现不同的功能应用，系统功能的扩展不受传统数据之间耦合的关系限制，维护成本低，扩展性好。
本发明实施例提供了一种面向数据的体系结构DOA系统，包括：
数据资源池，包括多个数据管理模块，用于对数据进行存储；
管理中心，包括接口管理模块和多个数据接口，每个数据接口对应一个数据管理模块；
所述接口管理模块用于面向所述数据管理模块配置相应的数据接口，并且根据数据请求信息得到被请求数据的路由信息；所述数据请求信息中包括发起所述数据请求信息的应用的属性信息；
所述数据接口用于，根据所述路由信息获取存储在所述数据管理模块中的被请求数据，并根据所述属性信息对所述被请求数据进行编译处理，得到所述应用支持的数据结构的数据；
DOA资源总线，通过所述数据接口与所述数据管理模块相连接，用于将所述编译处理得到的数据传输到所述应用。
优选的，所述管理中心还包括：数据注册中心，用于构建所述数据资源池的数据存储逻辑。
进一步优选的，所述接口管理模块与所述数据注册中心相连接；
所述接口管理模块识别所述DOA资源总线上传输的待存储数据；
所述接口管理模块从所述数据注册中心获取所述数据存储逻辑，并根据所述数据存储逻辑生成所述待存储数据的路由信息；
所述接口管理模块根据所述路由信息确定用于捕获所述待存储数据的第一数据接口；
所述第一数据接口从所述DOA资源总线上获取所述待存储数据，封装为标准化数据结构的数据，发送到与所述第一数据接口相连接的数据管理模块进行存储。
优选的，所述管理中心还包括：数据权限中心，用于对数据进行权限管理；
所述权限管理包括：数据安全属性定义、数据合法性鉴别、数据访问权限定义、用户权限认证、应用授权和用户授权。
优选的，所述管理中心还包括：数据异常控制中心，用于对所述多个数据管理模块中存储的数据的数据一致性进行处理。
优选的，所述管理中心还包括：应用接口单元，用于提供面向应用的接口。
进一步优选的，所述应用接口单元与所述接口管理模块相连接；
所述应用接口单元接收所述应用发送的数据请求信息，并将所述数据请求信息发送到所述接口管理模块。
优选的，所述接口管理模块还用于，捕获所述DOA系统中数据管理模块上线的信息。
优选的，所述接口管理模块还用于，获取所述DOA系统中数据管理模块下线的信息。
本发明实施例提供的DOA系统，系统资源池中的数据完全解耦，便于数据共享。应用对调用数据时可通过管理中心直接调用数据，以实现不同的功能应用，系统功能的扩展不受传统数据之间耦合的关系限制，维护成本低，扩展性好。
附图说明
图1为本发明实施例一提供的DOA系统的示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面结合附图对本发明具体实施例作进一步的详细描述。
下面以图1为例详细说明本发明实施例提供的DOA系统。
如图1所示，本实施例的DOA系统包括：
数据资源池1，其中包括多个数据管理模块10-1、10-2……10-N，用于对数据进行存储，数据包括元数据和业务数据。每个资源管理模块可以是一个或一组数据存储服务器、或数据存储服务器集群构成。
管理中心2，包括接口管理模块21和多个数据接口20-1、20-2……20-N，每个数据接口对应一个数据管理模块；
其中，接口管理模块21用于面向所述数据管理模块配置相应的数据接口，并且在应用请求数据时，根据数据请求信息得到被请求数据的路由信息；数据请求信息中包括发起数据请求信息的应用的属性信息。
在一个具体实现方式中，路由信息被接口管理模块21发送到相应的数据接口，比如路由信息指向数据管理模块10-2，则路由信息发送到数据接口20-2。
数据接口用于，根据路由信息获取存储在数据管理模块中的被请求数据，并根据发起数据请求信息的应用的属性信息对所述被请求数据进行编译处理，得到所述应用支持的数据结构的数据；
DOA资源总线3，通过所述数据接口与所述数据管理模块相连接，用于将所述编译处理得到的数据传输到所述应用。
因此，通过管理中心2实质上实现了应用和数据之间的隔离，无论应用支持的数据结构是怎样，数据的存储都是基于标准化语言的数据的数据结构的，所以系统内存储的数据是能够被不同的应用所共享使用的。数据与数据之间离散解耦的，相互之间没有耦合关系，因此在系统中增减应用时，数据存储不会受到影响。
在系统中如果需要增加数据存储空间，加入了新的数据管理模块时，接口管理模块21捕获DOA系统中数据管理模块上线的信息。
比如，当数据管理模块10-2在系统中上线时，会发送上线提示消息到DOA资源总线3，接口管理模块21获取在DOA资源总线3传送的上线提示消息，从而得到数据管理模块10-2上线的信息。
接口管理模块21对数据管理模块10-2的进行数据接口配置，面向接口管理模块21配置数据接口20-2。
在系统中如果某数据管理模块发生故障等情况下线时，接口管理模块21获取DOA系统中数据管理模块下线的信息。
在一种具体的实现方式中，接口管理模块21定期向系统中的各个数据管理模块轮询发送消息，并接收各个数据管理模块的反馈信息，当在设定时间内收不到数据管理模块的反馈信息时，判定该数据管理模块下线。优选的，在设定时间内，可以向该数据管理模块多次发送消息。
当接口管理模块21判定一个数据管理模块下线时，生成并记录该数据管理模块中存储的数据失效的信息。
此外，管理中心2还包括：数据注册中心23、数据权限中心24、数据异常控制中心25和应用接口单元26。下面逐一对这些模块进行介绍。
数据注册中心23用于构建数据资源池的数据存储逻辑。
接口管理模块21与数据注册中心23相连接。
在向数据管理模块中存入数据时，接口管理模块21识别DOA资源总线3上传输的待存储数据；接口管理模块21从数据注册中心23获取数据存储逻辑，并根据数据存储逻辑生成待存储数据的路由信息。
在多个数据接口中，根据路由信息确定用于捕获待存储数据的第一数据接口；第一数据接口从DOA资源总线3上获取待存储数据，封装为标准化数据结构的数据，发送到与第一数据接口相连接的数据管理模块进行存储。
数据权限中心24，用于对数据进行权限管理。
权限管理的范围可以包括：数据安全属性定义、数据合法性鉴别、数据访问权限定义、用户权限认证、应用授权和用户授权。
对数据进行权限管理可以是在数据向数据管理模块中写入的同时完成，也可以是直接对数据管理模块中的数据进行操作。
数据异常控制中心25，用于对多个数据管理模块中存储的数据的数据一致性进行处理。
具体的，数据异常控制中心能够用于侦测各种异常情况，并根据设定的处理机制对异常情况作出相应的异常处理动作。
其中，异常处理动作包括发出异常信号、使用预备数据替换异常数据，及请求数据注册中心23刷新相应信息等等。
应用接口单元26，用于提供面向应用的接口。
应用接口单元26与接口管理模块21相连接，接收应用发送的数据请求信息，并将数据请求信息发送到接口管理模块21。
本发明实施例提供了一种DOA系统，系统资源池中的数据完全解耦，便于数据共享。应用对调用数据时可通过管理中心直接调用数据，以实现不同的功能应用，系统功能的扩展不受传统数据之间耦合的关系限制，维护成本低，扩展性好。
专业人员应该还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明实施例的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
以上所述的具体实施方式，对本发明实施例的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明实施例的具体实施方式而已，并不用于限定本发明实施例的保护范围，凡在本发明实施例的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明实施例的保护范围之内。

Claims (9)

1.一种面向数据的体系结构DOA系统，其特征在于，所述系统包括：
数据资源池，包括多个数据管理模块，用于对数据进行存储；
管理中心，包括接口管理模块和多个数据接口，每个数据接口对应一个数据管理模块；
所述接口管理模块用于面向所述数据管理模块配置相应的数据接口，并且根据数据请求信息得到被请求数据的路由信息；所述数据请求信息中包括发起所述数据请求信息的应用的属性信息；
所述数据接口用于，根据所述路由信息获取存储在所述数据管理模块中的被请求数据，并根据所述属性信息对所述被请求数据进行编译处理，得到所述应用支持的数据结构的数据；
DOA资源总线，通过所述数据接口与所述数据管理模块相连接，用于将所述编译处理得到的数据传输到所述应用。
2.根据权利要求1所述的DOA系统，其特征在于，所述管理中心还包括：数据注册中心，用于构建所述数据资源池的数据存储逻辑。
3.根据权利要求2所述的DOA系统，其特征在于，所述接口管理模块与所述数据注册中心相连接；
所述接口管理模块识别所述DOA资源总线上传输的待存储数据；
所述接口管理模块从所述数据注册中心获取所述数据存储逻辑，并根据所述数据存储逻辑生成所述待存储数据的路由信息；
所述接口管理模块根据所述路由信息确定用于捕获所述待存储数据的第一数据接口；
所述第一数据接口从所述DOA资源总线上获取所述待存储数据，封装为标准化数据结构的数据，发送到与所述第一数据接口相连接的数据管理模块进行存储。
4.根据权利要求1所述的DOA系统，其特征在于，所述管理中心还包括：数据权限中心，用于对数据进行权限管理；
所述权限管理包括：数据安全属性定义、数据合法性鉴别、数据访问权限定义、用户权限认证、应用授权和用户授权。
5.根据权利要求1所述的DOA系统，其特征在于，所述管理中心还包括：数据异常控制中心，用于对所述多个数据管理模块中存储的数据的数据一致性进行处理。
6.根据权利要求1所述的DOA系统，其特征在于，所述管理中心还包括：应用接口单元，用于提供面向应用的接口。
7.根据权利要求6所述的DOA系统，其特征在于，所述应用接口单元与所述接口管理模块相连接；
所述应用接口单元接收所述应用发送的数据请求信息，并将所述数据请求信息发送到所述接口管理模块。
8.根据权利要求1所述的DOA系统，其特征在于，所述接口管理模块还用于，捕获所述DOA系统中数据管理模块上线的信息。
9.根据权利要求1所述的DOA系统，其特征在于，所述接口管理模块还用于，获取所述DOA系统中数据管理模块下线的信息。
CN201610694438.3A 2016-08-19 2016-08-19 面向数据的体系结构doa系统 Pending CN106331079A (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201610694438.3A CN106331079A (zh) 2016-08-19 2016-08-19 面向数据的体系结构doa系统
US16/326,396 US20190227987A1 (en) 2016-08-19 2017-07-24 Data-Oriented Architecture (DOA) System
PCT/CN2017/094114 WO2018032942A1 (zh) 2016-08-19 2017-07-24 面向数据的体系结构doa系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610694438.3A CN106331079A (zh) 2016-08-19 2016-08-19 面向数据的体系结构doa系统

Publications (1)

Publication Number Publication Date
CN106331079A true CN106331079A (zh) 2017-01-11

Family

ID=57744419

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610694438.3A Pending CN106331079A (zh) 2016-08-19 2016-08-19 面向数据的体系结构doa系统

Country Status (3)

Country Link
US (1) US20190227987A1 (zh)
CN (1) CN106331079A (zh)
WO (1) WO2018032942A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018032942A1 (zh) * 2016-08-19 2018-02-22 明算科技（北京）股份有限公司 面向数据的体系结构doa系统
CN113312242A (zh) * 2021-06-29 2021-08-27 中国农业银行股份有限公司 接口信息管理方法、装置、设备及存储介质
CN113312242B (zh) * 2021-06-29 2024-05-17 中国农业银行股份有限公司 接口信息管理方法、装置、设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100315292A1 (en) * 2009-06-12 2010-12-16 Samsung Electronics, Co., Ltd. Direction of arrival estimation apparatus and method thereof
CN104054308A (zh) * 2012-12-24 2014-09-17 华为技术有限公司 应用层资源选择的方法、装置和系统
CN104076906A (zh) * 2014-07-17 2014-10-01 成都理工大学 一种面向数据的信息技术系统

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102368272B (zh) * 2011-11-15 2013-07-24 中国科学院地理科学与资源研究所 一种数据库系统实现栅格数据类型的方法及其系统
US20160210313A1 (en) * 2015-01-16 2016-07-21 Futurewei Technologies, Inc. System for high-throughput handling of transactions in a data-partitioned, distributed, relational database management system
CN106357605B (zh) * 2016-08-19 2019-11-26 明算科技（北京）股份有限公司 一种面向数据的体系结构doa系统
CN106331079A (zh) * 2016-08-19 2017-01-11 明算科技（北京）股份有限公司 面向数据的体系结构doa系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100315292A1 (en) * 2009-06-12 2010-12-16 Samsung Electronics, Co., Ltd. Direction of arrival estimation apparatus and method thereof
CN104054308A (zh) * 2012-12-24 2014-09-17 华为技术有限公司 应用层资源选择的方法、装置和系统
CN104076906A (zh) * 2014-07-17 2014-10-01 成都理工大学 一种面向数据的信息技术系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
程付超: "面向海量遥感数据的分布式混合计算技术研究", 《中国博士学位论文全文数据库》 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018032942A1 (zh) * 2016-08-19 2018-02-22 明算科技（北京）股份有限公司 面向数据的体系结构doa系统
CN113312242A (zh) * 2021-06-29 2021-08-27 中国农业银行股份有限公司 接口信息管理方法、装置、设备及存储介质
CN113312242B (zh) * 2021-06-29 2024-05-17 中国农业银行股份有限公司 接口信息管理方法、装置、设备及存储介质

Also Published As

Publication number Publication date
US20190227987A1 (en) 2019-07-25
WO2018032942A1 (zh) 2018-02-22

Similar Documents

Publication Publication Date Title
CN107241360A (zh) 一种数据安全共享交换方法和数据安全共享交换平台系统
US20150215350A1 (en) System and method for distributed virtual assistant platforms
Gohar et al. A patient-centric healthcare framework reference architecture for better semantic interoperability based on blockchain, cloud, and IoT
CN108369504A (zh) 被分发到变化拓扑的由模型驱动的更新
CN111213340A (zh) 选择用于密码功能的证明委托并使其安全
US10970411B2 (en) Database preference sharing and management
CN105917690A (zh) 基于网络功能虚拟化(nfv)在网络中模块间通信的系统、方法和计算机程序
CN101174213A (zh) 用于应用的基础服务体系结构
CN107633168B (zh) 自动化密码管理
KR20090097176A (ko) 증명서 취득에 의하여 야기되는 취약점을 조사하고 완화하기 위한 전략
JP2008538428A5 (zh)
US20210383187A1 (en) Decentralized machine learning system and a method to operate the same
CN107408096A (zh) 对硬件块的适应性存取控制
CN113839814B (zh) 去中心化的Kubernetes集群联邦实现方法及系统
Mijić et al. Unified iot platform architecture platforms as major iot building blocks
CN106357605B (zh) 一种面向数据的体系结构doa系统
CN107438067A (zh) 一种基于mesos容器云平台的多租户构建方法及系统
CN106331079A (zh) 面向数据的体系结构doa系统
Zou et al. A layered virtual organization architecture for grid
Bigini et al. Toward the interplanetary health layer for the internet of medical things with distributed ledgers and storages
CN110807188A (zh) 一种基于区块链的权限管理方法及系统
CN109981649A (zh) 一种基于安全认证网关的云存储安全访问方法，系统，终端及存储介质
CN115134378A (zh) 一种区块链智慧医疗系统
Li et al. An EMR sharing and privacy protection mechanism based on medical consortium blockchain
Ali Süzen et al. Protecting the privacy of IoT-based health records using blockchain technology

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170111