CN111092901A - 一种工业互联网平台中设备接入及数据存储的方法 - Google Patents

一种工业互联网平台中设备接入及数据存储的方法 Download PDF

Info

Publication number
CN111092901A
CN111092901A CN201911354502.3A CN201911354502A CN111092901A CN 111092901 A CN111092901 A CN 111092901A CN 201911354502 A CN201911354502 A CN 201911354502A CN 111092901 A CN111092901 A CN 111092901A
Authority
CN
China
Prior art keywords
industrial
data
industrial internet
internet platform
equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201911354502.3A
Other languages
English (en)
Inventor
薛长青
高明
金长新
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shandong Inspur Artificial Intelligence Research Institute Co Ltd
Original Assignee
Shandong Inspur Artificial Intelligence Research Institute Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shandong Inspur Artificial Intelligence Research Institute Co Ltd filed Critical Shandong Inspur Artificial Intelligence Research Institute Co Ltd
Priority to CN201911354502.3A priority Critical patent/CN111092901A/zh
Publication of CN111092901A publication Critical patent/CN111092901A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/08Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/0823Network architectures or network communication protocols for network security for authentication of entities using certificates
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/12Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/20Network architectures or network communication protocols for network security for managing network security; network security policies in general
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1097Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]

Abstract

本发明公开一种工业互联网平台中设备接入及数据存储的方法,涉及工业互联网平台技术领域,其实现包括:搭建基于EMQ服务器集群的工业互联网平台;工业互联网平台为工业设备颁发数字证书,工业互联网平台支持工业设备使用MQTT协议进行快速接入,工业设备通过证书可以连接工业互联网平台进行合法认证;工业互联网平台基于流式处理框架以集群方式部署SPARK,配置工业互联网业务处理规则。本发明采用物联网标准协议MQTT便于工业设备的接入,通过证书的方式保证了设备连接的安全,能够对各种各样的工业设备完成海量方便快速接入,具有通用性强的特点,还通过流式计算框架集群模式部署实现高并发大容量数据的高效实时存储。

Description

一种工业互联网平台中设备接入及数据存储的方法
技术领域
本发明涉及工业互联网平台技术领域,具体的说是一种工业互联网平台中设备接入及数据存储的方法。
背景技术
人类社会已渡过全面供不应求的阶段,进入供给过剩与供给不足并存的阶段。当前,我国多数产品供过于求,主要矛盾已不是生产能力不足,而是供给与需求信息不对称。在产品的使用过程中,用户越来越注重个性化,但是现在的工厂很难保证生产的产品能满足人们的需求。
MQTT协议具有占用低带宽、保障低延时、保持长连接、实现消息双向传输的特点,已经成为物联网设备的通用协议。当大量物联网终端接入物联网平台后,会实时产生巨大的数据量,应用程序对数据采集和处理的实时性要求越来越高,使用常规的数据处理工具会有较大的延迟和高负载。物联网数据一般以键值对的形式采集和存储,而传统关系型数据库并不适用于海量数据高并发读写。
基于此,提出一种工业互联网平台中设备接入及数据存储的方法,以对各种各样的工业设备完成海量方便快速接入。
发明内容
本发明针对目前技术发展的需求和不足之处,提供一种工业互联网平台中设备接入及数据存储的方法,能够对各种各样的工业设备完成海量方便快速接入,具有通用性强的特点。
本发明的一种工业互联网平台中设备接入及数据存储的方法,解决上述技术问题采用的技术方案如下:
一种工业互联网平台中设备接入及数据存储的方法,其实现包括:
搭建基于EMQ服务器集群的工业互联网平台;
工业互联网平台为工业设备颁发数字证书,工业设备通过证书可以连接工业互联网平台进行合法认证;
工业互联网平台基于流式处理框架以集群方式部署SPARK,配置工业互联网业务处理规则。
可选的,所涉及工业互联网平台支持工业设备使用MQTT协议进行快速接入。
可选的,所涉及数字证书的安全认证包含主题使用权限,所述工业互联网平台通过数字证书控制主题的使用权限,完成工业设备的快速安全接入。
可选的,所涉及流式处理框架采用可视化的方式配置工业设备的业务处理规则及存储目的地。
进一步可选的,所涉及工业互联网平台基于SPARK STREAMING流式处理框架以集群方式部署SPARK,集群节点包括任务提交、数据源读取、流数据计算以及目标写入四项服务;
任务提交服务负责将数据提交到SPARK集群;
数据源读取服务负责获取工业设备报送的数据;
流数据计算服务根据业务处理规则对工业设备数据进行业务分析处理;
数据目标写入服务将业务分析处理的数据结果存储到时序数据库。
进一步可选的,所涉及工业设备连接MQTT服务器,并向指定的主题进行数据报送,数据源读取服务则从相应主题中获取工业设备数据。
可选的,配置工业互联网业务处理规则,包括:
工业设备和工业互联网平台连接认证安全规则,
工业设备上报到相应主题规则,
SPARK流数据计算依据的业务处理规则。
优选的,所涉及工业互联网平台提供一站式的智能物联网支撑,备设备管理、数据采集、数据解析、数据计算各项能力。在多个工业设备同时接入所述工业互联网平台时,所述工业互联网平台实时数据汇聚,并基于流式处理框架,采用集群模式分担实时并发大数据压力,配置工业互联网业务处理规则,实现数据的实时采集、实时计算和存储。
本发明的一种工业互联网平台中设备接入及数据存储的方法,与现有技术相比具有的有益效果是:
1)本发明采用物联网标准协议MQTT便于工业设备的接入,通过证书的方式保证了设备连接的安全,能够对各种各样的工业设备完成海量方便快速接入,具有通用性强的特点;
2)本发明通过流式计算框架集群模式部署实现高并发大容量数据的高效实时存储;
3)本发明的工业互联网平台通过可视化认证规则、主题规则、业务处理规则等让工业设备从接入、采集、存储方便简单;
4)本发明的工业互联网平台采用证书主题权限的方式易于对工业设备进行权限控制。
附图说明
附图1是本发明的方法流程图。
具体实施方式
为使本发明的技术方案、解决的技术问题和技术效果更加清楚明白,以下结合具体实施例,对本发明的技术方案进行清楚、完整的描述。
实施例一:
参考附图1,本实施例提出一种工业互联网平台中设备接入及数据存储的方法,其实现包括:
搭建基于EMQ服务器集群的工业互联网平台;
工业互联网平台为工业设备颁发数字证书,
工业互联网平台支持工业设备使用MQTT协议进行快速接入,
工业设备通过证书可以连接工业互联网平台进行合法认证;
工业互联网平台基于流式处理框架以集群方式部署SPARK,配置工业互联网业务处理规则。
在本实施例中,1个工业互联网平台可以同时接入N个工业设备,N是大于0的自然数。
在本实施例中,所涉及数字证书的安全认证包含主题使用权限,所述工业互联网平台通过数字证书控制主题的使用权限,完成工业设备的快速安全接入。
在本实施例中,所涉及流式处理框架采用可视化的方式配置工业设备的业务处理规则及存储目的地。具体实施时优选:
所涉及工业互联网平台基于SPARK STREAMING流式处理框架以集群方式部署SPARK,集群节点包括任务提交、数据源读取、流数据计算以及目标写入四项服务。
其中,
任务提交服务负责将数据提交到SPARK集群;
数据源读取服务负责获取工业设备报送的数据;
流数据计算服务根据业务处理规则对工业设备数据进行业务分析处理;
数据目标写入服务将业务分析处理的数据结果存储到时序数据库。
在本实施例中,所涉及工业设备连接MQTT服务器,并向指定的主题进行数据报送,数据源读取服务则从相应主题中获取工业设备数据。
在本实施例中,配置工业互联网业务处理规则,包括:
工业设备和工业互联网平台连接认证安全规则,
工业设备上报到相应主题规则,
SPARK流数据计算依据的业务处理规则。
在本实施例中,所涉及工业互联网平台提供一站式的智能物联网支撑,备设备管理、数据采集、数据解析、数据计算各项能力。
在多个工业设备同时接入所述工业互联网平台时,所述工业互联网平台实时数据汇聚,并基于流式处理框架,采用集群模式分担实时并发大数据压力,配置工业互联网业务处理规则,实现数据的实时采集、实时计算和存储。
综上可知,采用本发明的一种工业互联网平台中设备接入及数据存储的方法,采用物联网标准协议MQTT便于工业设备的接入,通过证书的方式保证了设备连接的安全,能够对各种各样的工业设备完成海量方便快速接入,具有通用性强的特点。
以上应用具体个例对本发明的原理及实施方式进行了详细阐述,这些实施例只是用于帮助理解本发明的核心技术内容。基于本发明的上述具体实施例,本技术领域的技术人员在不脱离本发明原理的前提下,对本发明所作出的任何改进和修饰,皆应落入本发明的专利保护范围。

Claims (8)

1.一种工业互联网平台中设备接入及数据存储的方法,其特征在于,其实现包括:
搭建基于EMQ服务器集群的工业互联网平台;
所述工业互联网平台为工业设备颁发数字证书,工业设备通过证书可以连接工业互联网平台进行合法认证;
所述工业互联网平台基于流式处理框架以集群方式部署SPARK,配置工业互联网业务处理规则。
2.根据权利要求1所述的一种工业互联网平台中设备接入及数据存储的方法,其特征在于,所述工业互联网平台支持工业设备使用MQTT协议进行快速接入。
3.根据权利要求1或2所述的一种工业互联网平台中设备接入及数据存储的方法,其特征在于,所述数字证书的安全认证包含主题使用权限,所述工业互联网平台通过数字证书控制主题的使用权限,完成工业设备的快速安全接入。
4.根据权利要求2所述的一种工业互联网平台中设备接入及数据存储的方法,其特征在于,流式处理框架采用可视化的方式配置工业设备的业务处理规则及存储目的地。
5.根据权利要求4所述的一种工业互联网平台中设备接入及数据存储的方法,其特征在于,所述工业互联网平台基于SPARK STREAMING流式处理框架以集群方式部署SPARK,集群节点包括任务提交、数据源读取、流数据计算以及目标写入四项服务;
任务提交服务负责将数据提交到SPARK集群;
数据源读取服务负责获取工业设备报送的数据;
流数据计算服务根据业务处理规则对工业设备数据进行业务分析处理;
数据目标写入服务将业务分析处理的数据结果存储到时序数据库。
6.根据权利要求5所述的一种工业互联网平台中设备接入及数据存储的方法,其特征在于,所述工业设备连接MQTT服务器,并向指定的主题进行数据报送,数据源读取服务则从相应主题中获取工业设备数据。
7.根据权利要求6所述的一种工业互联网平台中设备接入及数据存储的方法,其特征在于,配置工业互联网业务处理规则,包括:
工业设备和工业互联网平台连接认证安全规则,
工业设备上报到相应主题规则,
SPARK流数据计算依据的业务处理规则。
8.根据权利要求1所述的一种工业互联网平台中设备接入及数据存储的方法,其特征在于,所述工业互联网平台提供一站式的智能物联网支撑,备设备管理、数据采集、数据解析、数据计算各项能力;
在多个工业设备同时接入所述工业互联网平台时,所述工业互联网平台实时数据汇聚,并基于流式处理框架,采用集群模式分担实时并发大数据压力,配置工业互联网业务处理规则,实现数据的实时采集、实时计算和存储。
CN201911354502.3A 2019-12-25 2019-12-25 一种工业互联网平台中设备接入及数据存储的方法 Pending CN111092901A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911354502.3A CN111092901A (zh) 2019-12-25 2019-12-25 一种工业互联网平台中设备接入及数据存储的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911354502.3A CN111092901A (zh) 2019-12-25 2019-12-25 一种工业互联网平台中设备接入及数据存储的方法

Publications (1)

Publication Number Publication Date
CN111092901A true CN111092901A (zh) 2020-05-01

Family

ID=70397102

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911354502.3A Pending CN111092901A (zh) 2019-12-25 2019-12-25 一种工业互联网平台中设备接入及数据存储的方法

Country Status (1)

Country Link
CN (1) CN111092901A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111818079A (zh) * 2020-07-21 2020-10-23 上海鼎格信息科技有限公司 一种工业设备的连接方法及控制系统
CN112153163A (zh) * 2020-10-19 2020-12-29 爱瑟福信息科技(上海)有限公司 基于mqtt的安全通信方法及其系统
CN113315830A (zh) * 2021-05-26 2021-08-27 重庆高新技术产业研究院有限责任公司 一种用于工业互联网的数据工程机数据传输方法
CN113392155A (zh) * 2020-09-08 2021-09-14 重庆高新技术产业研究院有限责任公司 面向多类型产业集群互联网流式数据存储与计算系统
CN114816579A (zh) * 2022-05-13 2022-07-29 重庆忽米网络科技有限公司 一种基于工业互联网平台的SaaS化工业APP接入方法
CN116719876A (zh) * 2023-08-11 2023-09-08 国网信息通信产业集团有限公司 一种基于规则引擎的时序数据处理方法及终端

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108737539A (zh) * 2018-05-18 2018-11-02 济南浪潮高新科技投资发展有限公司 一种基于工业互联网平台IOT Hub服务的方法
US20190097962A1 (en) * 2017-09-26 2019-03-28 Amazon Technologies, Inc. Receiving a Data Object at a Device
CN109587228A (zh) * 2018-11-23 2019-04-05 济南浪潮高新科技投资发展有限公司 一种公有协议物联网平台及设备接入方法
CN109618308A (zh) * 2018-12-28 2019-04-12 济南浪潮高新科技投资发展有限公司 一种基于Spark Streaming处理物联网数据的方法
CN110113359A (zh) * 2019-05-28 2019-08-09 济南浪潮高新科技投资发展有限公司 一种物联网平台协议适配方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190097962A1 (en) * 2017-09-26 2019-03-28 Amazon Technologies, Inc. Receiving a Data Object at a Device
CN108737539A (zh) * 2018-05-18 2018-11-02 济南浪潮高新科技投资发展有限公司 一种基于工业互联网平台IOT Hub服务的方法
CN109587228A (zh) * 2018-11-23 2019-04-05 济南浪潮高新科技投资发展有限公司 一种公有协议物联网平台及设备接入方法
CN109618308A (zh) * 2018-12-28 2019-04-12 济南浪潮高新科技投资发展有限公司 一种基于Spark Streaming处理物联网数据的方法
CN110113359A (zh) * 2019-05-28 2019-08-09 济南浪潮高新科技投资发展有限公司 一种物联网平台协议适配方法

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111818079A (zh) * 2020-07-21 2020-10-23 上海鼎格信息科技有限公司 一种工业设备的连接方法及控制系统
CN111818079B (zh) * 2020-07-21 2023-04-18 上海鼎格信息科技有限公司 一种工业设备的连接方法及控制系统
CN113392155A (zh) * 2020-09-08 2021-09-14 重庆高新技术产业研究院有限责任公司 面向多类型产业集群互联网流式数据存储与计算系统
CN112153163A (zh) * 2020-10-19 2020-12-29 爱瑟福信息科技(上海)有限公司 基于mqtt的安全通信方法及其系统
CN113315830A (zh) * 2021-05-26 2021-08-27 重庆高新技术产业研究院有限责任公司 一种用于工业互联网的数据工程机数据传输方法
CN114816579A (zh) * 2022-05-13 2022-07-29 重庆忽米网络科技有限公司 一种基于工业互联网平台的SaaS化工业APP接入方法
CN114816579B (zh) * 2022-05-13 2023-10-27 重庆忽米网络科技有限公司 一种基于工业互联网平台的SaaS化工业APP接入方法
CN116719876A (zh) * 2023-08-11 2023-09-08 国网信息通信产业集团有限公司 一种基于规则引擎的时序数据处理方法及终端
CN116719876B (zh) * 2023-08-11 2023-10-20 国网信息通信产业集团有限公司 一种基于规则引擎的时序数据处理方法及终端

Similar Documents

Publication Publication Date Title
CN111092901A (zh) 一种工业互联网平台中设备接入及数据存储的方法
US10897504B2 (en) Computerized system for managing gas resource
CN101943734A (zh) 一种基于iec62056协议的批量自动检测终端的方法
CN108737519A (zh) 一种工业用物联网云服务平台智能采集方法
CN103457763B (zh) 基于策略的多通道信息分发方法和系统及自动化运维平台
CN107249121A (zh) 一种基于云平台的视频监控系统
CN104639619A (zh) 一种信息审核方法及装置
CN107895233A (zh) 面向电力通信的运维管理系统及富媒体交互系统、方法
CN104185018A (zh) 用于视频监控系统测试的网络摄像机模拟装置及测试方法
CN108268569A (zh) 基于大数据技术的水资源监测数据采集与分析系统及方法
CN102710024A (zh) 基于IPv6的输变电设备在线监测系统
CN103683506B (zh) 一种电力系统变电站综合一体化联动安全系统
CN108322509A (zh) 一种基于modbus通讯和因特网的远程监视和控制系统
CN101702540A (zh) 一种基于无线网状自组网的电能实时监控及线损分析系统
CN104301804B (zh) 一种经由数字电视实现互联网电子政务信息交互方法
CN206350107U (zh) 一种基于wifi的子母机认证的机顶盒
CN113705623A (zh) 一种轨道交通站点的分类方法及装置
CN113157475A (zh) 日志处理方法、装置、存储介质及电子设备
CN203086607U (zh) 一种远程监控系统
CN106488480A (zh) 一种工单引擎实现方法及装置
CN106027420A (zh) 一种资源模型创建方法和装置
CN111966312A (zh) 一种支持多运营商共同管理的物联网集群显示屏
CN112214859A (zh) 一种主配网模型一体化整合方法及系统
Miu et al. A Real-time Detection Framework for Abnormal Devices in the Power Internet of Things
CN114363926B (zh) 一种电网配用电无线通信测试系统、方法、无线接入终端及应用

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20200501

RJ01 Rejection of invention patent application after publication