CN109194731A - 一种基于组态软件的并发实时数据传输接口实现方法 - Google Patents

一种基于组态软件的并发实时数据传输接口实现方法 Download PDF

Info

Publication number
CN109194731A
CN109194731A CN201810974081.3A CN201810974081A CN109194731A CN 109194731 A CN109194731 A CN 109194731A CN 201810974081 A CN201810974081 A CN 201810974081A CN 109194731 A CN109194731 A CN 109194731A
Authority
CN
China
Prior art keywords
data
information
configuration
subscription end
publishing side
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810974081.3A
Other languages
English (en)
Inventor
陈瑞峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Electric Group Corp
Original Assignee
Shanghai Electric Group Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Electric Group Corp filed Critical Shanghai Electric Group Corp
Priority to CN201810974081.3A priority Critical patent/CN109194731A/zh
Publication of CN109194731A publication Critical patent/CN109194731A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/14—Session management
    • H04L67/141—Setup of application sessions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/14—Session management
    • H04L67/143—Termination or inactivation of sessions, e.g. event-controlled end of session
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/04—Protocols for data compression, e.g. ROHC

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer And Data Communications (AREA)

Abstract

本发明公开了一种基于组态软件的并发实时数据传输接口实现方法，采用安全的并发多线程队列模式以及建立键值对模式的对应关系进行数据发布端与数据订阅端的数据传输，有效提高多线程并发数据处理的传输效率问题，可以降低工业数据传输过程中对于带宽要求的压力；解决了通用组态软件使用高效率数据传输协议的接口对接问题，实现了大数据帧格式基于GEP协议传输过程和监控软件间的接口实现；解决的传统组态监控软件处理并发大量数据低效及精确度低等问题，提高组态软件针对大量实时数据传输的准确率。

Description

一种基于组态软件的并发实时数据传输接口实现方法
技术领域
本发明涉及数据处理技术领域，尤其涉及一种基于组态软件的并发实时数据传输接口实现方法。
背景技术
实时数据库(RTDB)是数据库系统发展的一个分支，是数据库技术结合实时处理技术产生的。实时数据库是电力、能源、化工等工业控制场所广泛采用的实时控制系统，数据采集与监控系统等系统的核心部分，主要用于采集并管理来自各种采集设备的过程数据，并提供统一的实时数据管理平台。
实时数据库的最重要特性即使实时性，实时性包含数据的实时性和事务的实时性。数据的实时性主要和现场采集装置，实时数据驱动采集模块的速度、效率有关。事务实时性是指数据库对事务处理的实时能力，包括响应客户端访问请求的速度，向客户端发布实时数据的速度等。其他性能包括支持访问客户端数量，即并发访问性能；对系统资源的占用，即通讯效率等方面。
发布/订阅(Pub/Sub)通信泛型与传统的通信范性(例如：消息传递、RPC/RMI和共享空间)相比，具有异步、多点通信的特点，是通信的参与者在空间、时间上可以耦合，很好地满足大型分布式系统松散的通讯需求。
现有技术多集中在如何通过调整网络数据采集硬件，物理层面结构以缓存模式来提高传输效率，并未从TCP/IP协议格式本身入手去提高处理大量并发、实时数据的效率。国外的相关文献已经提出了基于GEP(Gateway Exchange Protocol)的数据压缩传输方法，但是其并不能直接应用于国内的组态监控软件，需要进行定制化的开发。而本发明提供了一种。
因此，本领域的技术人员致力于开发一种可以与GEP衔接的通用方法，可将GEP与一般监控软件连接，进而提高并发、实时数据的传输效率。
发明内容
有鉴于现有技术的上述缺陷，本发明所要解决的技术问题是组态软件与现有网络通信GEP数据压缩传输协议衔接的问题，为此，本发明提供了一种基于组态软件的并发实时数据传输接口实现方法，以提高一般监控软件处理并发、实时数据的传输准确度与效率。
为了解决上述问题，本发明提供了一种基于组态软件的并发实时数据传输接口实现方法，包括如下步骤：
S1：配置发布端(Pub端)与订阅端(Sub端)设备信息，并建立对应关系，
并连接；
S2：发布端(Pub端)向订阅端(Sub端)设备发送数据，进行数据传输；
S3：根据发布端(Pub端)发送的数据格式及信息，订阅端(Sub端)设备按照匹配模式依次进行提取、解析所需数据信息，同时更新订阅端(Sub端)设备中对应的数据信息；
S4：数据传输完成后，断开连接，释放系统资源，传输过程完毕。
进一步地，基于GEP的通讯传输是双向传输，根据应用场景不同，组态软件分别作为数据发布端(Pub端)或数据订阅端(Sub端)。
进一步地，发布端(Pub端)建立设备信息表，确定元数据统一数据格式，该设备信息表包含元数据的所有信息，具体包括设备名、设备信息号、传输的数值、时间戳信息，以及自带产生的GUID(全球唯一标识符)。
进一步地，上述步骤S1前，需要配置数据发布端(Pub端)的提示信息，提示信息包括判断订阅端(Sub端)是否已经连接；是否可发送数据异常信息提示；是否发送状态信息配置信息提示。
进一步地，配置发布端(Pub端)传输过程中涉及配置信息包括：发布端(Pub端)的命名信息、设置是否包含时间补偿、设置是否允许负载数据压缩、设置是否开启多端数据同步接收、设置连接字符串(包括端口号信息)。
进一步地，订阅端(Sub端)设备设置寄存器列表，该寄存器列表与发布端(Pub端)的元数据格式匹配设置，并设置信息验证。
进一步地，订阅端(Sub端)的信息验证包括：连接是否成功建立、元数据是否接收成功、是否已经获取设备信息表信息、是否可发送订阅端(Sub端)异常信息状态信息。
进一步地，配置订阅端(Sub端)设备信息还包括确认订阅端(Sub端)接收对应的端口信号信息、配置订阅端(Sub端)运行模式以及选择订阅端(Sub端)的压缩方式。
进一步地，订阅端(Sub端)的运行模式可选为数据序列化或压缩元数据。
进一步地，选择数据序列化时，将一长串数据拆分成小的数据，对拆分后的数据进行信息标记。
进一步地，订阅端(Sub端)的压缩方式采用标准化成熟的压缩方式，例如Gzip。
进一步地，上述步骤S2中发布端(Pub端)发出数据的方式分为两种：(1)获悉订阅端(Sub端)设备配置信息时，发布端(Pub端)向指定的订阅端(Sub端)设备发送数据；(2)发布端(Pub端)向满足元数据格式匹配要求的订阅端(Sub端)设备发送数据。
通过实施上述本发明提供的基于组态软件的并发实时数据传输接口实现方法，具有如下技术效果：
(1)本发明采用安全的并发多线程队列模式以及建立键值对模式的对应关系，有效提高多线程并发数据处理的传输效率问题，可以降低工业数据传输过程中对于带宽要求的压力；
(2)本发明解决了通用组态软件使用高效率数据传输协议的接口对接问题，实现了大数据帧格式基于GEP协议传输过程和监控软件间的接口实现；
(3)本发明解决的传统组态监控软件处理并发大量数据低效及精确度低等问题，提高组态软件针对大量实时数据传输的准确率。
附图说明
以下将结合附图对本发明的构思、具体结构及产生的技术效果作进一步说明，以充分地了解本发明的目的、特征和效果。
图1是本发明具体实施方式中数据传输系统架构图远端的订阅端(Sub端)和中心服务器发布端(Pub端)的通信架构；
图2是本发明具体实施方式中并发数据信息传递流程图；
图3是本发明具体实施方式中数据序列化方法流程；
图4是组态软件数据显示部分界面。
具体实施方式
下面将结合本发明实施例，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
下面采用以下具体实施方式详细描述本发明的技术方案。
本发明提供一种基于组态软件的并发实时数据传输接口实现方法，如图1所示是本发明的数据传输系统框架通信架构，其中，以实时数据库作为中心服务器发布端(Pub端)，一般组态软件作为订阅端(Sub端)，该传输接口的实现方法包括如图2所示步骤：
首先：中心服务器建立模拟检测点，创建检测点信息表，确定元数据统一数据格式；该检测点信息表包含元数据的所有信息，具体包括设备名、设备信息号、传输的数值、时间戳信息，以及自带产生的GUID(全球唯一标识符)；
其次，组态软件设置与检测点对应数量的信息点，创建信息点的寄存器列表，该寄存器列表与中心服务器的元数据格式匹配设置，并设置信息验证。
再次，中心服务器与组态软件设备基于GEP的数据帧压缩方法建立键值对模式的一一对应的映射关系；
第四，采用，中央服务器根据匹配要求向组态软件设备发送数据，进行数据传输；根据中央服务器发送的数据格式及信息，组态软件设备按匹配模式依次进行提取、解析所需数据信息，同时更新组态软件设备中对应的数据信息；
最后，数据传输完成后，断开连接，释放系统资源，传输过程完毕，组态软件设备的数据信息反映到软件界面上，界面如图4所示。
进一步地，上述步骤中，还需要配置中央服务器的提示信息，提示信息包括判断组态软件是否已经连接；是否可发送数据异常信息提示；是否发送状态信息配置信息提示。
进一步地，配置中央服务器传输过程中涉及配置信息包括：中央服务器的命名信息、设置是否包含时间补偿、设置是否允许负载数据压缩、设置是否开启多端数据同步接收、设置连接字符串(包括端口号信息)。
进一步地，组态软件的信息验证包括：连接是否成功建立、元数据是否接收成功、是否已经获取设备信息表信息、是否可发送组态软件异常信息状态信息。
进一步地，配置组态软件设备信息还包括确认组态软件接收对应的端口信号信息、配置组态软件运行模式以及选择组态软件的压缩方式。
进一步地，组态软件的运行模式可选为数据序列化或压缩元数据。
进一步地，若选择数据序列化，如图3所示，将一长串数据拆分成小的数据，对拆分后的数据进行信息标记。
进一步地，组态软件的压缩方式采用标准化成熟的压缩方式，例如Gzip。
进一步地，在上述步骤中，中央服务器发出数据的方式分为两种：(1)获悉组态软件设备配置信息时，向中央服务器指定的组态软件设备发送数据；(2)中央服务器向满足元数据格式匹配要求的组态软件设备发送数据。
需要说明的是，基于GEP的通讯传输是双向传输，根据应用场景不同，组态软件分别作为数据发布端(Pub端)或数据订阅端(Sub端)。
以上详细描述了本发明的较佳具体实施例。应当理解，本领域的普通技术人员无需创造性劳动就可以根据本发明的构思作出诸多修改和变化。因此，凡本技术领域中技术人员依本发明的构思在现有技术的基础上通过逻辑分析、推理或者有限的得到的技术方案，皆应在由权利要求书所确定的保护范围内。

Claims (10)

1.一种基于组态软件的并发实时数据传输接口实现方法，包括如下步骤：
S1：配置发布端与订阅端设备信息，建立对应关系，并连接；
S2：发布端向订阅端设备发送数据，进行数据传输；
S3：根据发布端发送的数据格式及信息，订阅端设备按匹配模式依次提取、解析所需数据信息，同时更新订阅端设备中对应的数据信息；
S4：数据传输完成后，断开连接，释放系统资源，传输过程完毕。
2.如权利要求1所述的传输接口实现方法，其特征在于，发布端建立设备信息表，确定元数据统一数据格式，该设备信息表包含元数据的所有信息，具体包括设备名、设备信息号、传输的数值、时间戳信息，以及自带产生的GUID。
3.如权利要求1所述的传输接口实现方法，其特征在于，上述步骤S1前，配置订阅端设备信息，包括配置数据发布端的提示信息，提示信息包括判断订阅端是否已经连接；是否可发送数据异常信息提示；是否发送状态信息配置信息提示。
4.如权利要求1所述的传输接口实现方法，其特征在于，配置发布端传输过程中涉及配置信息包括：发布端的命名信息、设置是否包含时间补偿、设置是否允许负载数据压缩、设置是否开启多端数据同步接收、设置连接字符串，其中设置连接字符串包括端口号信息。
5.如权利要求2所述的传输接口实现方法，其特征在于，订阅端设备设置寄存器列表，该寄存器列表与发布端的元数据格式匹配设置，并设置信息验证。
6.如权利要求5所述的传输接口实现方法，其特征在于，订阅端的信息验证包括：连接是否成功建立、元数据是否接收成功、是否已经获取设备信息表信息、是否可发送订阅端异常信息状态信息。
7.如权利要求3所述的传输接口实现方法，其特征在于，配置订阅端设备信息还包括确认订阅端接收对应的端口信号信息、配置订阅端运行模式以及选择订阅端的压缩方式。
8.如权利要求7所述的传输接口实现方法，其特征在于，订阅端的运行模式可选为数据序列化或压缩元数据。
9.如权利要求8所述的传输接口实现方法，其特征在于，选择数据序列化时，将一长串数据拆分成小的数据，对拆分后的数据进行信息标记。
10.如权利要求1所述的传输接口实现方法，其特征在于，上述步骤S2中发布端发出数据的方式分为两种：(1)获悉订阅端设备配置信息时，向发布端指定的订阅端设备发送数据；(2)发布端向满足元数据格式匹配要求的订阅端设备发送数据。
CN201810974081.3A 2018-08-24 2018-08-24 一种基于组态软件的并发实时数据传输接口实现方法 Pending CN109194731A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810974081.3A CN109194731A (zh) 2018-08-24 2018-08-24 一种基于组态软件的并发实时数据传输接口实现方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810974081.3A CN109194731A (zh) 2018-08-24 2018-08-24 一种基于组态软件的并发实时数据传输接口实现方法

Publications (1)

Publication Number Publication Date
CN109194731A true CN109194731A (zh) 2019-01-11

Family

ID=64919771

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810974081.3A Pending CN109194731A (zh) 2018-08-24 2018-08-24 一种基于组态软件的并发实时数据传输接口实现方法

Country Status (1)

Country Link
CN (1) CN109194731A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113347245A (zh) * 2021-05-31 2021-09-03 广东轩辕网络科技股份有限公司 一种基于消息队列的文件分片断点传输方法及装置
CN113377726A (zh) * 2021-06-02 2021-09-10 浪潮软件股份有限公司 一种高可靠性分布式海量数据传输方法及工具

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103023927A (zh) * 2013-01-10 2013-04-03 西南大学 一种稀疏表达下的基于非负矩阵分解的入侵检测方法及系统
CN104601665A (zh) * 2014-12-22 2015-05-06 西安电子科技大学 一种对物联网感知设备进行云端实时仿真的系统和方法
CN104867510A (zh) * 2014-02-26 2015-08-26 船井电机株式会社 播放装置、外部设备以及内容播放方法
CN106411652A (zh) * 2016-11-02 2017-02-15 中国运载火箭技术研究院 一种面向空天通信的网关协议转换测试系统及方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103023927A (zh) * 2013-01-10 2013-04-03 西南大学 一种稀疏表达下的基于非负矩阵分解的入侵检测方法及系统
CN104867510A (zh) * 2014-02-26 2015-08-26 船井电机株式会社 播放装置、外部设备以及内容播放方法
CN104601665A (zh) * 2014-12-22 2015-05-06 西安电子科技大学 一种对物联网感知设备进行云端实时仿真的系统和方法
CN106411652A (zh) * 2016-11-02 2017-02-15 中国运载火箭技术研究院 一种面向空天通信的网关协议转换测试系统及方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
GRID PROTECTION ALLANCE: "Gateway Exchange Protocol Overview", 《GRID PROTECTION ALLANCE》 *
STEPHEN C.WILLS: "Gateway Exchange Protocol (GEP) Subscriber API", 《GETHUB》 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113347245A (zh) * 2021-05-31 2021-09-03 广东轩辕网络科技股份有限公司 一种基于消息队列的文件分片断点传输方法及装置
CN113347245B (zh) * 2021-05-31 2022-05-20 广东轩辕网络科技股份有限公司 一种基于消息队列的文件分片断点传输方法及装置
CN113377726A (zh) * 2021-06-02 2021-09-10 浪潮软件股份有限公司 一种高可靠性分布式海量数据传输方法及工具

Similar Documents

Publication Publication Date Title
CN100496015C (zh) 在多节点智能网络应用服务系统中实现剪贴板共享的方法
CN102377814B (zh) 针对嵌入式操作系统的远程协助服务方法
EP2978144A1 (en) Unified device management method and system
CN108390950A (zh) 一种消息推送方法、装置及设备
CN102932431B (zh) 一种基于消息路由的状态监测数据接口配置方法
CN101227470B (zh) 一种业务管理系统及业务管理方法
CN112637283B (zh) 基于聊天机器人的物联网智能家居管理系统及控制方法
CN110290185B (zh) 一种基于Agent的物联网设备集成系统及其应用方法
CN111885150B (zh) 一种泛在电力物联网多协议适配系统及其方法
CN109766201A (zh) 任务分发方法、服务器、客户端和系统
WO2018176244A1 (zh) 数据采集方法、装置和动环网管系统
CN108924228B (zh) 基于边缘计算的工业互联网优化系统
CN107248978A (zh) 一种消息监听处理方法及系统
CN110445697A (zh) 视频大数据云平台设备接入服务方法
CN109194731A (zh) 一种基于组态软件的并发实时数据传输接口实现方法
CN114401284A (zh) 固定污染源治理工况实时数据采集与传输系统及方法
CN109302578A (zh) 一种登录会议终端以及视频会议的方法和系统
CN105490849B (zh) 应用系统的自动部署方法及系统
CN107147663A (zh) 一种计算机集群系统的同步通讯方法和系统
CN202798801U (zh) 一种用于实现分布式数据交互的通用性通讯系统
CN101277247B (zh) 实时通信系统
CN107943541B (zh) 一种Windows本地组件的通讯方法
CN215494685U (zh) 工业数据远程调试采集平台
CN100547969C (zh) 用于瞬时消息通信的方法和数据处理系统及资源管理系统
CN114390033A (zh) 基于可扩展通信协议的回路状态巡检仪采集系统及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
EE01 Entry into force of recordation of patent licensing contract
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20190111

Assignee: Shanghai Electric Huicheng Intelligent System Co.,Ltd.

Assignor: Shanghai Electric Group Co.,Ltd.

Contract record no.: X2019310000022

Denomination of invention: Concurrence real-time data transmission interface implementation method based on configuration software

License type: Common License

Record date: 20191126

RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20190111