CN104199979A - 一种模型化的数据源管理系统及其方法 - Google Patents

一种模型化的数据源管理系统及其方法 Download PDF

Info

Publication number
CN104199979A
CN104199979A CN201410493950.2A CN201410493950A CN104199979A CN 104199979 A CN104199979 A CN 104199979A CN 201410493950 A CN201410493950 A CN 201410493950A CN 104199979 A CN104199979 A CN 104199979A
Authority
CN
China
Prior art keywords
audit
data source
node
cloud
source
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410493950.2A
Other languages
English (en)
Inventor
郑葵荣
安宏伟
艾建文
季统凯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
G Cloud Technology Co Ltd
Original Assignee
G Cloud Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by G Cloud Technology Co Ltd filed Critical G Cloud Technology Co Ltd
Priority to CN201410493950.2A priority Critical patent/CN104199979A/zh
Publication of CN104199979A publication Critical patent/CN104199979A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21Design, administration or maintenance of databases
    • G06F16/211Schema design and management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/28Databases characterised by their database models, e.g. relational or object models
    • G06F16/284Relational databases

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及计算机应用技术领域,特别涉及一种模型化的数据源管理系统及其方法。本发明的系统由客户端的数据源模型和审计工作流以及云源服务端组件构成;数据源模型由云源、操作集和工作集构成,云源是表示一个数据源模型的最小单位,体现数据源模型最基本的构成及其生命周期;操作集是云源可实现的操作的集合;工作集是将数据源模型和审计工作流进行连接的一种标志的集合;审计工作流根据用户角色、分工的不同,对审计流程进行节点及信息的管理。云源服务端组件提供访问服务,集安全校验、任务管理和数据存储于一体,接收、处理具体的指令同时做出结果反馈。本发明将各云源及其备份还原操作统一管理,可应用于多种关系型数据库的管理系统中。

Description

一种模型化的数据源管理系统及其方法
技术领域
本发明涉及计算机应用技术领域,特别涉及一种模型化的数据源管理系统及其方法。
背景技术
随着计算机应用技术的发展,数据源的管理有异于传统的点对点单一方式,用户越来越关注产品使用的便捷性及安全性。在数据库维护中,用户需要一定的技术基础,但数据库的备份还原是非常重要的操作,人为的维护仍然存在一定的风险,而有时导致的结果是不可预测,甚至是不可恢复的。
发明内容
本发明解决的技术问题之一在于针对传统数据库维护方式不能满足日益发展的用户服务需求以及保障安全性的问题,提供一种模型化的数据源管理系统;实现分布式云源端的统一管理,保证分布式云源的资源可调度性,流程制度化,核心操作自动化。
本发明解决的技术问题之二在于针对传统数据库维护方式不能满足日益发展的用户服务需求以及保障安全性的问题,提供一种模型化的数据源管理方法;实现分布式云源端的统一管理,保证分布式云源的资源可调度性,流程制度化,核心操作自动化。
本发明解决上述技术问题之一的技术方案是:
所述的系统由客户端和云源服务端组件构成;所述的云源服务端组件提供访问服务,包括安全校验、任务管理和数据存储,在各云源服务端接收、处理具体的指令同时做出结果反馈;
所述的客户端负责管理数据源模型及审计工作流的生命周期,并向服务端发送指令及数据包以完成工作任务;
所述的系统同时提供相应的开发和集成接口;
所述的客户端包括数据源模型和审计工作流;
所述的数据源模型由云源、操作集和工作集构成,作为系统的基础;云源是表示一个数据源模型的最小单位,可以体现数据源模型最基本的构成及其生命周期;操作集是云源可实现的操作的集合,包括数据、表空间和控制文件等内容的备份及其还原操作;工作集是以审计工作流为核心,并建立在操作集的基础上,将数据源模型和审计工作流进行连接的一种标志的集合;
所述的审计工作流可根据用户角色、分工的不同对审计流程进行节点及信息的管理;所述的节点包括校验节点和审计管理节点,其中,校验节点通过调用云源信息及其操作集,对源及操作进行预校验处理;校验节点任务完成后,审计管理节点根据经办用户和审计用户的权限信息,对审计细目进行调控和流转;审计通过后,发起数据库备份还原申请。
所述的数据源模型提供CRUD访问接口,用于查询及维护云源信息。
本发明解决上述技术问题之二的技术方案是:
由云源服务端组件提供访问服务,包括安全校验、任务管理和数据存储,在各云源服务端接收、处理具体的指令同时做出结果反馈;
由客户端负责管理数据源模型及审计工作流的生命周期,并向服务端发送指令及数据包以完成工作任务;
同时提供相应的开发和集成接口;
所述的客户端设有数据源模型和审计工作流;
所述的数据源模型由云源、操作集和工作集构成,作为系统的基础;由云源表示一个数据源模型的最小单位,体现数据源模型最基本的构成及其生命周期;操作集作为云源可实现的操作的集合,包括数据、表空间和控制文件等内容的备份及其还原操作;工作集作为以审计工作流为核心,作为一种标志集合建立在操作集的基础上,将数据源模型和审计工作流进行连接;
所述的审计工作流根据用户角色、分工的不同对审计流程进行节点及信息的管理;所述的节点分为校验节点和审计管理节点,其中,校验节点通过调用云源信息及其操作集,对源及操作进行预校验处理;校验节点任务完成后,审计管理节点根据经办用户和审计用户的权限信息,对审计细目进行调控和流转;审计通过后,发起数据库备份还原申请。
审计工作流的详细流程是:
第一步,封装云源对象请求校验;
第二步,源预校验:通过TCP/IP与服务端对应的云源节点建立连接并校验;
第三步,操作预校验:在源预校验节点通过的基础上,获取操作集对象并请求校验;
第四步,审计管理:在操作预校验节点通过的基础上,进入用户审计流转环节;根据业务功能分配情况,审计管理节点调用用户操作权限信息、用户服务在用情况,对该审计细目进行资源分配;
第五步,备份还原申请:在审计管理节点有可用资源的情况下,进行备份或还原申请信息的补充录入。
云源服务端组件中服务端详细业务流程为:
第一步,服务端处于监听状态;
第二步,接收到来自客户端工作集发送的指令及数据请求包;
第三步,服务端进行来源安全校验及数据请求包拆包处理;
第四步,检验数据请求包的内容合规性;
第五步,服务端添加请求任务至队列,每台云源服务端的任务均以单线程模式执行,保证任务质量;
第六步,实时记录任务情况;
第七步,根据备份/还原指令,执行对应的操作命令和脚本,对云源数据、表空间及控制文件等内容进行备份存储或更新动作;
第八步,任务完成时,服务端向管理用户发送任务执行状况;
第九步,日志记录,完成。
针对数据源管理的分布性及数据库维护的安全性要求,本发明通过模型、流及组件的方式,将三者紧密结合并贯彻整个系统中。数据源模型将源信息集中管理,统一了分布式云源端的入口;审计工作流规范了用户行为,保证了流程制度化以及分布式云源的资源可调度性;服务端组件提供数据库维护的核心操作,集安全校验、任务管理和数据存储于一体,大幅度降低了数据库维护的不可预测性。通过本发明将各云源及其备份还原操作统一管理,大幅度降低了人为数据库维护操作中带来的风险,同时可应用于多种关系型数据库的管理系统中。
附图说明
下面结合附图对本发明进一步说明:
图1是本发明的总体结构图;
图2是本发明总体流程框图;
图3是审计工作流各节点的序列图;
图4是云源服务端组件的处理活动图。
具体实施方式
如图1、2所示,表示了分布式备份还原管理方法的总体结构和流程框图,由数据源模型、审计工作流和云源服务端组件构成;
数据源模型:由云源、操作集和工作集构成,是该管理方法的基础;同时提供了CRUD访问接口,用于查询及维护云源信息。
云源:表示一个数据源模型的最小单位,可以体现数据源模型最基本的构成及其生命周期;
操作集:云源可实现的操作的集合,本发明内包括了数据、表空间、控制文件等内容的备份及其还原操作;
工作集:以审计工作流为核心,并建立在操作集的基础上,是将数据源模型和审计工作流进行连接的一种标志的集合。
审计工作流:根据用户角色、分工的不同,对审计流程进行节点及信息的管理。校验节点通过调用云源信息及其操作集,对源及操作进行预校验处理,该节点要求用户录入合规的数据源用户密码进行信息权限匹配;校验节点任务完成后,审计管理节点根据经办用户和审计用户的权限信息,对审计细目进行调控和流转;审计通过后,发起数据库备份还原申请。
云源服务端组件:提供访问服务,集安全校验、任务管理和数据存储于一体,在各云源服务端接收、处理具体的指令同时做出结果反馈。
客户端:负责管理数据源模型及审计工作的生命周期,并向服务端发送指令及数据包以完成工作任务;
图3表示了审计工作流各节点的序列流程,审计工作流的详细流程是:
第一步,封装云源对象请求校验;
第二步,源预校验:通过TCP/IP与服务端对应的云源节点建立连接并校验;
第三步,操作预校验:在源预校验节点通过的基础上,获取操作集对象并请求校验;
第四步,审计管理:在操作预校验节点通过的基础上,进入用户审计流转环节。根据业务功能分配情况,审计管理节点调用用户操作权限信息、用户服务在用情况,对该审计细目进行资源分配;
第五步,备份还原申请:在审计管理节点有可用资源的情况下,进行备份或还原申请信息的补充录入;
图4表示了云源服务端组件的处理活动状态,云源服务端组件中服务端详细业务流程为:
第一步,服务端处于监听状态;
第二步,接收到来自客户端工作集发送的指令及数据请求包;
第三步,服务端进行来源安全校验及数据请求包拆包处理;
第四步,检验数据请求包的内容合规性;
第五步,服务端添加请求任务至队列,每台云源服务端的任务均以单线程模式执行,保证任务质量;
第六步,实时记录任务情况;
第七步,根据备份/还原指令,执行对应的操作命令和脚本,对云源数据、表空间及控制文件等内容进行备份存储或更新动作;
第八步,任务完成时,服务端向管理用户发送任务执行状况;
第九步,日志记录,完成。
本发明针对传统数据库维护方式不能满足日益发展的用户服务需求以及保障安全性的问题,提供了一种模型化的数据源管理系统及其方法。实现了分布式云源端的统一管理,保证了分布式云源的资源可调度性,流程制度化,核心操作自动化,大幅度降低了数据库维护的不可预测性。

Claims (5)

1.一种模型化的数据源管理系统,其特征在于:所述的系统由客户端和云源服务端组件构成;所述的云源服务端组件提供访问服务,包括安全校验、任务管理和数据存储,在各云源服务端接收、处理具体的指令同时做出结果反馈;
所述的客户端负责管理数据源模型及审计工作流的生命周期,并向服务端发送指令及数据包以完成工作任务;
所述的系统同时提供相应的开发和集成接口;
所述的客户端包括数据源模型和审计工作流;
所述的数据源模型由云源、操作集和工作集构成,作为系统的基础;云源是表示一个数据源模型的最小单位,可以体现数据源模型最基本的构成及其生命周期;操作集是云源可实现的操作的集合,包括数据、表空间和控制文件等内容的备份及其还原操作;工作集是以审计工作流为核心,并建立在操作集的基础上,将数据源模型和审计工作流进行连接的一种标志的集合;
所述的审计工作流可根据用户角色、分工的不同对审计流程进行节点及信息的管理;所述的节点包括校验节点和审计管理节点,其中,校验节点通过调用云源信息及其操作集,对源及操作进行预校验处理;校验节点任务完成后,审计管理节点根据经办用户和审计用户的权限信息,对审计细目进行调控和流转;审计通过后,发起数据库备份还原申请。
2.根据权利要求1所述的模型化的数据源管理系统,其特征在于:所述的数据源模型提供CRUD访问接口,用于查询及维护云源信息。
3.一种权利要求1所述的数据源管理系统的数据源管理方法,其特征在于:
由云源服务端组件提供访问服务,包括安全校验、任务管理和数据存储,在各云源服务端接收、处理具体的指令同时做出结果反馈;
由客户端负责管理数据源模型及审计工作流的生命周期,并向服务端发送指令及数据包以完成工作任务;
同时提供相应的开发和集成接口;
所述的客户端设有数据源模型和审计工作流;
所述的数据源模型由云源、操作集和工作集构成,作为系统的基础;由云源表示一个数据源模型的最小单位,体现数据源模型最基本的构成及其生命周期;操作集作为云源可实现的操作的集合,包括数据、表空间和控制文件等内容的备份及其还原操作;工作集作为以审计工作流为核心,作为一种标志集合建立在操作集的基础上,将数据源模型和审计工作流进行连接;
所述的审计工作流根据用户角色、分工的不同对审计流程进行节点及信息的管理;所述的节点分为校验节点和审计管理节点,其中,校验节点通过调用云源信息及其操作集,对源及操作进行预校验处理;校验节点任务完成后,审计管理节点根据经办用户和审计用户的权限信息,对审计细目进行调控和流转;审计通过后,发起数据库备份还原申请。
4.根据权利要求3所述的数据源管理方法,其特征在于:审计工作流的详细流程是:
第一步,封装云源对象请求校验;
第二步,源预校验:通过TCP/IP与服务端对应的云源节点建立连接并校验;
第三步,操作预校验:在源预校验节点通过的基础上,获取操作集对象并请求校验;
第四步,审计管理:在操作预校验节点通过的基础上,进入用户审计流转环节;根据业务功能分配情况,审计管理节点调用用户操作权限信息、用户服务在用情况,对该审计细目进行资源分配;
第五步,备份还原申请:在审计管理节点有可用资源的情况下,进行备份或还原申请信息的补充录入。
5.根据权利要求3或4所述的数据源管理方法,其特征在于:云源服务端组件中服务端详细业务流程为:
第一步,服务端处于监听状态;
第二步,接收到来自客户端工作集发送的指令及数据请求包;
第三步,服务端进行来源安全校验及数据请求包拆包处理;
第四步,检验数据请求包的内容合规性;
第五步,服务端添加请求任务至队列,每台云源服务端的任务均以单线程模式执行,保证任务质量;
第六步,实时记录任务情况;
第七步,根据备份/还原指令,执行对应的操作命令和脚本,对云源数据、表空间及控制文件等内容进行备份存储或更新动作;
第八步,任务完成时,服务端向管理用户发送任务执行状况;
第九步,日志记录,完成。
CN201410493950.2A 2014-09-24 2014-09-24 一种模型化的数据源管理系统及其方法 Pending CN104199979A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410493950.2A CN104199979A (zh) 2014-09-24 2014-09-24 一种模型化的数据源管理系统及其方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410493950.2A CN104199979A (zh) 2014-09-24 2014-09-24 一种模型化的数据源管理系统及其方法

Publications (1)

Publication Number Publication Date
CN104199979A true CN104199979A (zh) 2014-12-10

Family

ID=52085272

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410493950.2A Pending CN104199979A (zh) 2014-09-24 2014-09-24 一种模型化的数据源管理系统及其方法

Country Status (1)

Country Link
CN (1) CN104199979A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108491254A (zh) * 2018-02-07 2018-09-04 链家网(北京)科技有限公司 一种数据仓库的调度方法及装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101330383A (zh) * 2007-06-19 2008-12-24 瑞达信息安全产业股份有限公司 一种基于用户身份及行为可信的网络资源监管系统
US20110145580A1 (en) * 2009-12-15 2011-06-16 Microsoft Corporation Trustworthy extensible markup language for trustworthy computing and data services
CN102611699A (zh) * 2012-02-22 2012-07-25 浪潮(北京)电子信息产业有限公司 一种云操作系统中访问控制的方法和系统
CN103593422A (zh) * 2013-11-01 2014-02-19 国云科技股份有限公司 一种异构数据库的虚拟访问管理方法
CN103605698A (zh) * 2013-11-06 2014-02-26 广东电子工业研究院有限公司 一种用于分布异构数据资源整合的云数据库系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101330383A (zh) * 2007-06-19 2008-12-24 瑞达信息安全产业股份有限公司 一种基于用户身份及行为可信的网络资源监管系统
US20110145580A1 (en) * 2009-12-15 2011-06-16 Microsoft Corporation Trustworthy extensible markup language for trustworthy computing and data services
CN102611699A (zh) * 2012-02-22 2012-07-25 浪潮(北京)电子信息产业有限公司 一种云操作系统中访问控制的方法和系统
CN103593422A (zh) * 2013-11-01 2014-02-19 国云科技股份有限公司 一种异构数据库的虚拟访问管理方法
CN103605698A (zh) * 2013-11-06 2014-02-26 广东电子工业研究院有限公司 一种用于分布异构数据资源整合的云数据库系统

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108491254A (zh) * 2018-02-07 2018-09-04 链家网(北京)科技有限公司 一种数据仓库的调度方法及装置

Similar Documents

Publication Publication Date Title
JP5298117B2 (ja) 分散コンピューティングにおけるデータマージング
CN105574082A (zh) 基于Storm的流处理方法及系统
CN110188573B (zh) 分区授权方法、装置、设备及计算机可读存储介质
US8346856B2 (en) Client environment creation system, client environment creation method, client environment creation program and storage medium
CN103329129A (zh) 支持云环境的多租户审计感知
CN103559118A (zh) 一种基于aop与注解信息系统的安全审计方法
US8738767B2 (en) Mainframe management console monitoring
CN105490831A (zh) Idc/isp信息安全管理系统及其信息管理方法
CN105094961A (zh) 一种基于quartz框架的任务调度管理系统及其方法
CN104504014A (zh) 基于大数据平台的数据处理方法和装置
KR101357135B1 (ko) 로그 정보 수집 장치
CN103618762A (zh) 一种基于aop的企业服务总线状态预处理系统及方法
US8738768B2 (en) Multiple destinations for mainframe event monitoring
CN115242644A (zh) 一种微服务开发治理系统
US8793213B2 (en) Embedded data marts for central data warehouse
CN108804241A (zh) 跨平台任务调度方法、系统、计算机设备和存储介质
CN109299913A (zh) 员工薪资方案生成方法及装置
CN108897551A (zh) 一种资源引用关系树的生成方法及装置
CN109474706B (zh) 一种数据安全集中服务方法和系统
CN106648964A (zh) 数据库备份方法及系统
CN104881749A (zh) 面向多租户的数据管理方法和数据存储系统
CN113836237A (zh) 对数据库的数据操作进行审计的方法及装置
CN104123135B (zh) 一种统一后台接口的方法及装置
CN103744880B (zh) 一种基于云计算的dna数据管理方法及系统
CN104199979A (zh) 一种模型化的数据源管理系统及其方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20141210