CN113392154A - 基于soa构架与分布式部署的数据库的数据系统 - Google Patents

基于soa构架与分布式部署的数据库的数据系统 Download PDF

Info

Publication number
CN113392154A
CN113392154A CN202010931629.3A CN202010931629A CN113392154A CN 113392154 A CN113392154 A CN 113392154A CN 202010931629 A CN202010931629 A CN 202010931629A CN 113392154 A CN113392154 A CN 113392154A
Authority
CN
China
Prior art keywords
data
database
management
distributed
internet
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010931629.3A
Other languages
English (en)
Inventor
岳建平
郑周军
张弛
薛勇
魏鸿飞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chongqing High Tech Industry Research Institute Co Ltd
Original Assignee
Chongqing High Tech Industry Research Institute Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chongqing High Tech Industry Research Institute Co Ltd filed Critical Chongqing High Tech Industry Research Institute Co Ltd
Priority to CN202010931629.3A priority Critical patent/CN113392154A/zh
Publication of CN113392154A publication Critical patent/CN113392154A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/12Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/51Discovery or management thereof, e.g. service location protocol [SLP] or web services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/56Provisioning of proxy services
    • H04L67/562Brokering proxy services

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Computing Systems (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开了基于SOA构架与分布式部署的数据库的数据系统,涉及系统集成技术领域。包括;物联网设备协议中间件、平台服务端、总线集成和数据库,实现多业务类型的物联网设备协议中间件,用于屏蔽底层硬件设备及网络平台的差异,支持物联网应用开发、运行时能共享和开放互联互通的通用协议;通过SOA分布式集群结构模式,支撑多操作系统部署、支持多业务应用程序生成、支持数据库集群管理、支持物联网中间件通用数据接入协议,使综合管理系统可以从不同规格的平台之间获取工企业生产过程中的相关数据,并提出优化建议和实施方案,从而促进企业实现设备互联、业务协同、只能分析,主力企业效益提升。

Description

基于SOA构架与分布式部署的数据库的数据系统
技术领域
本发明涉及系统集成技术领域,具体为基于SOA构架与分布式部署的数据库的数据系统。
背景技术
随着制造业的不断发展,工厂、车间的数字化、智能化不断深入,但由于不同工企业之间缺乏统一数据库标准规范,导致不同平台间数据无法快速,深度结合,造成各平台间的联网、数据采集和集中管控困难,导致企业综合管理能力不足,工企业效益的提升受到一定限制。
现有的工企业管理平台中,对数据的采集、存储和分析能力不足,构件相应的数学模型后往往需要通过工作人员经验对现行生产分布进行调整,这种参考方式稳定性差,对工企业资源分布的优化程度有限。
发明内容
针对现有技术的不足,本发明提供了基于SOA构架与分布式部署的数据库的数据系统,以解决上述背景技术中提出的问题。
为实现上述目的,本发明提供如下技术方案:基于SOA构架与分布式部署的数据库的数据系统,包括;物联网设备协议中间件、平台服务端、总线集成和数据库;
实现多业务类型的物联网设备协议中间件,用于屏蔽底层硬件设备及网络平台的差异,支持物联网应用开发、运行时能共享和开放互联互通的通用协议;
平台服务端,用于快速开发部署数据采集用电子表单模板,工业企业内部非实时数据采集,并能够设计各种填报表单样式、能采用多种html控件录入数据,进行数据校验;
总线集成,用于将各类企业内部现有的生产业务系统、生产监控等系统的软件应用层数据进行采集,并形成统一数据标准格式;
数据库,实现分布式数据库事务处理、多库事务、消息事务、服务链路级事务及各种组合。
进一步优化本技术方案,所述系统基于现有工业互联网基础构架,实现物联设备通用协议的SOA中间件、企业生产管理非即时数据的远程报送、企业应用软件接口服务ESB总线系统、基于多数据源的企业主数据管理平台,数据管理、操作工具、页面模式等须与大数据系统兼容匹配。
进一步优化本技术方案,所述物联网设备协议中间件构建于物联网传输层与应用层之间。
进一步优化本技术方案,所述平台服务端包括智能计算系统、数据存储计算系统和数据采集处理系统。
进一步优化本技术方案,所述智能计算系统,即数据分析挖掘层,包括:基于机器学习算法、深度学习算法的人工智能与数字孪生建模、文本及自然语言处理的功能,并构建相应的知识管理服务库。
进一步优化本技术方案,所述数据存储计算系统,即并行计算层和数据存储层,并行计算层应有基于spark SQL引擎(交互查询)的离线计算及流式计算功能;数据存储层具有基于分布式数据仓库、关系型数据库、时序数据库,并具有分布式文件集成管理的数据统一存储服务构架。
进一步优化本技术方案,所述数据采集处理系统,即数据接入层和数据处理层,数据接入层具备定期批量采集、实时采集、日志/非结构化等操作标准构件;数据处理层应具备数据清洗、数据转化、数据加载、任务调度等功能。
进一步优化本技术方案,所述数据库包括多类型企业内部关系型数据库和对象数据库,支持的数据库包括:Oracle、Mysql、PostgreSQL及SQLServer、 Mongodb、Access等。
进一步优化本技术方案,所述平台服务端的运维管理系统具有完善的系统管理、日志管理、权限管理、节点管理、运行监控的功能。
进一步优化本技术方案,所述平台服务端的安全保障系统具备物理安全、运行安全、数据安全、网络安全、系统安全管理等功能。
与现有技术相比,本发明提供了基于SOA构架与分布式部署的数据库的数据系统,具备以下有益效果:
1、该基于SOA构架与分布式部署的数据库的数据系统,通过SOA分布式集群结构模式,支撑多操作系统部署、支持多业务应用程序生成、支持数据库集群管理、支持物联网中间件通用数据接入协议,使综合管理系统可以从不同规格的平台之间获取工企业生产过程中的相关数据,并提出优化建议和实施方案,从而促进企业实现设备互联、业务协同、只能分析,主力企业效益提升。
2、该基于SOA构架与分布式部署的数据库的数据系统,通过智能计算系统从同和的工企业生产相关数据中构件数学模型,并从过往数学模型中总结各平台数据变化相关趋势,对现有数据进行比对分析,完成生产数据的提前预测和意见导向,优化工企业生产资源分布。
附图说明
图1为本发明的系统框图;
图2为本发明的物联网设备协议中间件架构图;
具体实施方式
下面将结合本发明的实施例,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
实施例:
请参考图1-2所示,基于SOA构架与分布式部署的数据库的数据系统,包括物联网设备协议中间件、平台服务端、总线集成和数据库;
实现多业务类型的物联网设备协议中间件,用于屏蔽底层硬件设备及网络平台的差异,支持物联网应用开发、运行时能共享和开放互联互通的通用协议;
平台服务端,用于快速开发部署数据采集用电子表单模板,工业企业内部非实时数据采集,并能够设计各种填报表单样式、能采用多种html控件录入数据,进行数据校验;
总线集成,用于将各类企业内部现有的生产业务系统、生产监控等系统的软件应用层数据进行采集,并形成统一数据标准格式;
数据库,实现分布式数据库事务处理、多库事务、消息事务、服务链路级事务及各种组合。
作为本实施例的具体优化方案,所述系统基于现有工业互联网基础构架,实现物联设备通用协议的SOA中间件、企业生产管理非即时数据的远程报送、企业应用软件接口服务ESB总线系统、基于多数据源的企业主数据管理平台,数据管理、操作工具、页面模式等须与大数据系统兼容匹配,使系统可以将不同管理平台连接为一个整体。
作为本实施例的具体优化方案,所述物联网设备协议中间件构建于物联网传输层与应用层之间,对物联网传输数据和应用数据进行连接,以方便软件各部件之间的沟通。
作为本实施例的具体优化方案,所述平台服务端包括智能计算系统、数据存储计算系统和数据采集处理系统,以对工企业各平台间的数据进行存储和采集,进而构件数学模型,进行分析和导向。
作为本实施例的具体优化方案,所述智能计算系统,即数据分析挖掘层,包括:基于机器学习算法、深度学习算法的人工智能与数字孪生建模、文本及自然语言处理的功能,并构建相应的知识管理服务库,对已采集的数据进行模型构件,得出相应的数学模型,对现行的工企业生产提供数据辅助。
作为本实施例的具体优化方案,所述数据存储计算系统,即并行计算层和数据存储层,并行计算层应有基于spark SQL引擎(交互查询)的离线计算及流式计算功能;数据存储层具有基于分布式数据仓库、关系型数据库、时序数据库,并具有分布式文件集成管理的数据统一存储服务构架,对采集到的工企业数据进行分类存储,方便工作中对数据进行查询。
作为本实施例的具体优化方案,所述数据采集处理系统,即数据接入层和数据处理层,数据接入层具备定期批量采集、实时采集、日志/非结构化等操作标准构件;数据处理层应具备数据清洗、数据转化、数据加载、任务调度等功能,对工企业生产数据进行定期定量采集,保证数据的有效性。
作为本实施例的具体优化方案,所述数据库包括多类型企业内部关系型数据库和对象数据库,支持的数据库包括:Oracle、Mysql、PostgreSQL及 SQLServer、Mongodb、Access等,是系统可以与不同平台中的不同数据库连通,提高数据采集和使用效率。
作为本实施例的具体优化方案,所述平台服务端的运维管理系统具有完善的系统管理、日志管理、权限管理、节点管理、运行监控的功能。
作为本实施例的具体优化方案,所述平台服务端的安全保障系统具备物理安全、运行安全、数据安全、网络安全、系统安全管理等功能。
本发明的有益效果是:通过SOA分布式集群结构模式,支撑多操作系统部署、支持多业务应用程序生成、支持数据库集群管理、支持物联网中间件通用数据接入协议,使综合管理系统可以从不同规格的平台之间获取工企业生产过程中的相关数据,并提出优化建议和实施方案,从而促进企业实现设备互联、业务协同、只能分析,主力企业效益提升;通过智能计算系统从同和的工企业生产相关数据中构件数学模型,并从过往数学模型中总结各平台数据变化相关趋势,对现有数据进行比对分析,完成生产数据的提前预测和意见导向,优化工企业生产资源分布。
本系统中涉及到的相关模块均为硬件系统模块或者为现有技术中计算机软件程序或协议与硬件相结合的功能模块,该功能模块所涉及到的计算机软件程序或协议的本身均为本领域技术人员公知的技术,其不是本系统的改进之处;本系统的改进为各模块之间的相互作用关系或连接关系,即为对系统的整体的构造进行改进,以解决本系统所要解决的相应技术问题。
值得注意的是,上述搜索装置的实施例中,所包括的各个单元和模块只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本发明的保护范围。
注意,上述仅为本发明的较佳实施例及所运用技术原理,本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。

Claims (10)

1.基于SOA构架与分布式部署的数据库的数据系统,其特征在于,包括;物联网设备协议中间件、平台服务端、总线集成和数据库;
实现多业务类型的物联网设备协议中间件,用于屏蔽底层硬件设备及网络平台的差异,支持物联网应用开发、运行时能共享和开放互联互通的通用协议;
平台服务端,用于快速开发部署数据采集用电子表单模板,工业企业内部非实时数据采集,并能够设计各种填报表单样式、能采用多种html控件录入数据,进行数据校验;
总线集成,用于将各类企业内部现有的生产业务系统、生产监控等系统的软件应用层数据进行采集,并形成统一数据标准格式;
数据库,实现分布式数据库事务处理、多库事务、消息事务、服务链路级事务及各种组合。
2.根据权利要求1所述的基于SOA构架与分布式部署的数据库的数据系统,其特征在于,所述系统基于现有工业互联网基础构架,实现物联设备通用协议的SOA中间件、企业生产管理非即时数据的远程报送、企业应用软件接口服务ESB总线系统、基于多数据源的企业主数据管理平台,数据管理、操作工具、页面模式等须与大数据系统兼容匹配。
3.根据权利要求1所述的基于SOA构架与分布式部署的数据库的数据系统,其特征在于,所述物联网设备协议中间件构建于物联网传输层与应用层之间。
4.根据权利要求1所述的基于SOA构架与分布式部署的数据库的数据系统,其特征在于,所述平台服务端包括智能计算系统、数据存储计算系统和数据采集处理系统。
5.根据权利要求4所述的基于SOA构架与分布式部署的数据库的数据系统,其特征在于,所述智能计算系统,即数据分析挖掘层,包括:基于机器学习算法、深度学习算法的人工智能与数字孪生建模、文本及自然语言处理的功能,并构建相应的知识管理服务库。
6.根据权利要求4所述的基于SOA构架与分布式部署的数据库的数据系统,其特征在于,所述数据存储计算系统,即并行计算层和数据存储层,并行计算层应有基于spark SQL引擎(交互查询)的离线计算及流式计算功能;数据存储层具有基于分布式数据仓库、关系型数据库、时序数据库,并具有分布式文件集成管理的数据统一存储服务构架。
7.根据权利要求4所述的基于SOA构架与分布式部署的数据库的数据系统,其特征在于,所述数据采集处理系统,即数据接入层和数据处理层,数据接入层具备定期批量采集、实时采集、日志/非结构化等操作标准构件;数据处理层应具备数据清洗、数据转化、数据加载、任务调度等功能。
8.根据权利要求1所述的基于SOA构架与分布式部署的数据库的数据系统,其特征在于,所述数据库包括多类型企业内部关系型数据库和对象数据库,支持的数据库包括:Oracle、Mysql、PostgreSQL及SQLServer、Mongodb、Access等。
9.根据权利要求1所述的基于SOA构架与分布式部署的数据库的数据系统,其特征在于,所述平台服务端的运维管理系统具有完善的系统管理、日志管理、权限管理、节点管理、运行监控的功能。
10.根据权利要求1所述的基于SOA构架与分布式部署的数据库的数据系统,其特征在于,所述平台服务端的安全保障系统具备物理安全、运行安全、数据安全、网络安全、系统安全管理等功能。
CN202010931629.3A 2020-09-08 2020-09-08 基于soa构架与分布式部署的数据库的数据系统 Pending CN113392154A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010931629.3A CN113392154A (zh) 2020-09-08 2020-09-08 基于soa构架与分布式部署的数据库的数据系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010931629.3A CN113392154A (zh) 2020-09-08 2020-09-08 基于soa构架与分布式部署的数据库的数据系统

Publications (1)

Publication Number Publication Date
CN113392154A true CN113392154A (zh) 2021-09-14

Family

ID=77616463

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010931629.3A Pending CN113392154A (zh) 2020-09-08 2020-09-08 基于soa构架与分布式部署的数据库的数据系统

Country Status (1)

Country Link
CN (1) CN113392154A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113965599A (zh) * 2021-09-24 2022-01-21 珠海许继芝电网自动化有限公司 基于通用管理业务模型的设备管理系统及方法
CN115617898A (zh) * 2022-12-21 2023-01-17 中国科学院长春光学精密机械与物理研究所 基于soa架构的靶场测控数据处理系统、方法及计算机设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102034151A (zh) * 2010-12-13 2011-04-27 东莞市高鑫机电科技服务有限公司 基于soa的企业协同管理系统业务流程设计方法及系统
CN102271156A (zh) * 2011-07-20 2011-12-07 武汉爱迪智能工程有限公司 基于物联网的数据共享服务系统
CN103902286A (zh) * 2014-03-12 2014-07-02 郑州轻工业学院 基于soa的层级式多源数据融合方法
CN104932895A (zh) * 2015-06-26 2015-09-23 南京邮电大学 一种基于soa的中间件及其信息发布方法
CN107945086A (zh) * 2017-11-17 2018-04-20 广州葵翼信息科技有限公司 一种应用于智慧城市的大数据资源管理系统
CN110222918A (zh) * 2019-04-18 2019-09-10 重庆恢恢信息技术有限公司 基于云平台的智慧工地管理系统、服务器及存储介质

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102034151A (zh) * 2010-12-13 2011-04-27 东莞市高鑫机电科技服务有限公司 基于soa的企业协同管理系统业务流程设计方法及系统
CN102271156A (zh) * 2011-07-20 2011-12-07 武汉爱迪智能工程有限公司 基于物联网的数据共享服务系统
CN103902286A (zh) * 2014-03-12 2014-07-02 郑州轻工业学院 基于soa的层级式多源数据融合方法
CN104932895A (zh) * 2015-06-26 2015-09-23 南京邮电大学 一种基于soa的中间件及其信息发布方法
CN107945086A (zh) * 2017-11-17 2018-04-20 广州葵翼信息科技有限公司 一种应用于智慧城市的大数据资源管理系统
CN110222918A (zh) * 2019-04-18 2019-09-10 重庆恢恢信息技术有限公司 基于云平台的智慧工地管理系统、服务器及存储介质

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113965599A (zh) * 2021-09-24 2022-01-21 珠海许继芝电网自动化有限公司 基于通用管理业务模型的设备管理系统及方法
CN115617898A (zh) * 2022-12-21 2023-01-17 中国科学院长春光学精密机械与物理研究所 基于soa架构的靶场测控数据处理系统、方法及计算机设备

Similar Documents

Publication Publication Date Title
CN112600891B (zh) 一种基于信息物理融合的边云协同系统及工作方法
CN106774240B (zh) 一种面向服务的工业生产控制与监测方法及系统
CN109815254B (zh) 基于大数据的跨地域任务调度方法及系统
CN104898573A (zh) 一种基于云计算的数控系统数据采集及处理方法
CN105339941B (zh) 针对etl映射设计使用投影器和选择器组件类型
CN108718345A (zh) 一种数字化车间工业数据网络化传输系统
CN104036365A (zh) 一种企业级数据服务平台建设方法
CN115097788A (zh) 一种基于数字孪生工厂的智能管控平台
CN111915143B (zh) 一种基于智能合约的复杂产品装配管控系统
CN113392154A (zh) 基于soa构架与分布式部署的数据库的数据系统
CN114416855A (zh) 一种基于电力大数据的可视化平台及方法
Ali et al. Middleware for real-time event detection andpredictive analytics in smart manufacturing
CN112668841A (zh) 一种基于数据融合的综合交通监测系统及方法
CN111538720B (zh) 电力行业基础数据清理的方法及系统
CN115391444A (zh) 一种异构数据采集与交互方法、装置、设备及存储介质
CN112287275A (zh) 一种城市级数据中台
CN115858513A (zh) 数据治理方法、装置、计算机设备和存储介质
CN114706994A (zh) 一种基于知识库的运维管理系统和方法
CN111125450A (zh) 一种多层拓扑网络资源对象的管理方法
US20180157735A1 (en) Method and system for clustering engineering data in a multidisciplinary engineering system
CN113392155A (zh) 面向多类型产业集群互联网流式数据存储与计算系统
Prist et al. Cyber-physical manufacturing systems: An architecture for sensor integration, production line simulation and cloud services
CN115439015B (zh) 基于数据中台的局域电网数据管理方法、装置及设备
CN116629802A (zh) 一种用于铁路港口站的大数据平台系统
RU2016129564A (ru) Способ построения единого информационного пространства и система для его осуществления

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20210914

RJ01 Rejection of invention patent application after publication