CN111614626A - 一种数据采集系统和数据采集方法 - Google Patents
一种数据采集系统和数据采集方法 Download PDFInfo
- Publication number
- CN111614626A CN111614626A CN202010340905.9A CN202010340905A CN111614626A CN 111614626 A CN111614626 A CN 111614626A CN 202010340905 A CN202010340905 A CN 202010340905A CN 111614626 A CN111614626 A CN 111614626A
- Authority
- CN
- China
- Prior art keywords
- data
- information
- server
- tcp
- stream
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 17
- 230000005540 biological transmission Effects 0.000 claims abstract description 122
- 230000002776 aggregation Effects 0.000 claims abstract description 34
- 238000004220 aggregation Methods 0.000 claims abstract description 34
- 238000013480 data collection Methods 0.000 claims abstract description 9
- 238000012544 monitoring process Methods 0.000 claims description 33
- 238000004891 communication Methods 0.000 claims description 16
- 238000007906 compression Methods 0.000 claims description 14
- 230000006835 compression Effects 0.000 claims description 14
- 238000013144 data compression Methods 0.000 claims description 13
- 238000007726 management method Methods 0.000 claims description 11
- 239000000872 buffer Substances 0.000 claims description 4
- 230000002159 abnormal effect Effects 0.000 claims description 3
- 238000012986 modification Methods 0.000 claims description 3
- 230000004048 modification Effects 0.000 claims description 3
- 230000008569 process Effects 0.000 claims description 2
- 238000004519 manufacturing process Methods 0.000 description 5
- 238000002955 isolation Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 238000010248 power generation Methods 0.000 description 3
- 238000009826 distribution Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000004931 aggregating effect Effects 0.000 description 1
- 238000013475 authorization Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/02—Network architectures or network communication protocols for network security for separating internal from external traffic, e.g. firewalls
- H04L63/0209—Architectural arrangements, e.g. perimeter networks or demilitarized zones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/06—Management of faults, events, alarms or notifications
- H04L41/0631—Management of faults, events, alarms or notifications using root cause analysis; using analysis of correlation between notifications, alarms or events based on decision criteria, e.g. hierarchy, tree or time analysis
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/06—Management of faults, events, alarms or notifications
- H04L41/0677—Localisation of faults
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/06—Management of faults, events, alarms or notifications
- H04L41/069—Management of faults, events, alarms or notifications using logs of notifications; Post-processing of notifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/04—Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks
- H04L63/0428—Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks wherein the data content is protected, e.g. by encrypting or encapsulating the payload
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/56—Provisioning of proxy services
- H04L67/565—Conversion or adaptation of application format or content
- H04L67/5651—Reducing the amount or size of exchanged application data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/56—Provisioning of proxy services
- H04L67/568—Storing data temporarily at an intermediate stage, e.g. caching
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/18—Multiprotocol handlers, e.g. single devices capable of handling multiple protocols
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computer Security & Cryptography (AREA)
- Computer Hardware Design (AREA)
- Computing Systems (AREA)
- General Engineering & Computer Science (AREA)
- Small-Scale Networks (AREA)
- Remote Monitoring And Control Of Power-Distribution Networks (AREA)
Abstract
本发明公开了一种数据采集系统和数据采集方法,属于新能源发电站的技术领域,其包括设置于不同电站内的多个站端侧采集设备和设置于电站外的中心端数据汇集设备;站端侧采集设备均包括数据汇聚服务器、正向网闸、反向网闸、数据传输服务器、交换机和防火墙;数据汇聚服务器设置于电站内的控制区,正向网闸设置于电站的控制区和非控制区之间,数据传输服务器设置于电站内的非控制区,反向网闸设置于电站的控制区和非控制区之间,中心端数据汇集设备包括中心数据服务器,本发明具有可实现多跨安全区的数据采集的效果。
Description
技术领域
本发明涉及新能源发电站的技术领域,尤其是涉及一种数据采集系统和数据采集方法。
背景技术
目前新能源产业近些年发展迅速,其生产方式决定了新能源电站存在以下特点:设备众多,新能源场站由几十甚至上百台发电设备和若干组输变电设备组成,设备之间采用的通讯方式复杂;设备分布广泛,新能源发电设备往往分布在位置偏僻,远离市区的地区,分布范围可达几十甚至上百公里。由于新能源电力生产自身的特点,针对新能源场站的数据采集面临的问题也非常突出,采集通讯协议复杂,由于设备数量类型众多,通讯方式众多,使的多方、多协议兼容成为数据采集必须要解决的问题。
现有技术可参考授权公告号为CN103953502B的中国发明专利,其公开了一种风力发电机组数据采集系统,其包括数据采集通讯系统、断面数据库系统及历史数据库系统,该数据采集通讯系统包括数据采集模块,数据采集模块通过通讯模块与风力发电机组主控PLC连接和通讯,该数据采集通讯系统与上层应用系统相互连接。该采集系统具有实时性提高,各个系统独立运行;平台扩展性强、系统效率提高;互操作便捷;实现方便,提高了这个系统平台的安全性四方面的优点。
上述中的现有技术方案存在以下缺陷:无法完成多安全区数据采集,因为在设计中没有考虑正向隔离的问题,只能在同一个安全区内完成数据采集和转发。
发明内容
本发明的目的是提供一种数据采集系统,具有可实现多跨安全区的数据采集的效果。
本发明的上述技术目的是通过以下技术方案得以实现的:
一种数据采集系统,包括设置于不同电站内的多个站端侧采集设备和设置于电站外的中心端数据汇集设备;
站端侧采集设备均包括数据汇聚服务器、正向网闸、反向网闸、数据传输服务器、交换机和防火墙;
所述数据汇聚服务器设置于电站内的控制区,数据汇聚服务器连接有设置于电站内控制区的数据采集设备并接受数据采集设备采集的数据,将接收的数据转化为TCP方式的数据流并发送给正向网闸;
所述正向网闸设置于电站的控制区和非控制区之间,正向网闸接收到TCP数据流后将TCP数据流传输给数据传输服务器;
所述数据传输服务器设置于电站内的非控制区,数据传输服务器接收TCP数据流后对TCP数据流进行处理,将处理后的TCP数据流发送给交换机;
所述交换机接收到TCP数据流后将TCP数据流经过防火墙发送给中心端数据汇集设备;
所述反向网闸设置于电站的控制区和非控制区之间,反向网闸接收数据传输服务器输出的信息并将信息发送给数据汇聚服务器;
中心端数据汇集设备包括中心数据服务器,中心数据服务器接收站端侧采集设备发送的TCP信息流。
通过采用上述方案,本系统可实现电站信息的多跨安全区的数据采集和传输,能够将多处电站内的设备或多个电站的信息发送给一个中心端数据汇集设备,因为设置了正向网闸用于正向隔离,保证了信息在由电站的控制区传输至非控制区的稳定性。反向网闸用于用户在电站控制区外控制电站内的设备。
本发明进一步设置为:数据汇聚服务器设置有数据采集模块,所述数据采集模块包括配置管理单元、协议选择单元和数据缓存单元;
所述配置管理单元接收反向网闸输出的信息,并根据信息调节数据采集设备的配置;
所述协议选择单元存储有多种协议信息,协议选择单元接收外界输入的信息,并根据信息选择数据汇聚服务器使用的协议信息;
所述数据缓存单元设置有本地缓存池,每当数据汇聚服务器接受到信息时,将信息暂存于本地缓存池内,并对信息标注ID和时间,数据汇聚服务器输出信息时,将信息从本地缓存池中取出并进行发送。
通过采用上述方案,配置管理单元能够为用户提供在电站的非控制区对数据采集设备的配置进行调节的功能。协议选择单元存储有多种协议信息,用户通过对协议信息进行选择即可使本系统兼容电站内设备的协议。数据缓存单元为数据汇聚服务器提供数据缓存功能,避免数据传输过程中意外中断导致数据出现错误的情况发生,保证输入数据库的生产过程信息的连续性和完整性。
本发明进一步设置为:数据传输服务器设置有数据传输模块,所述数据传输模块包括数据压缩单元和数据加密单元;
所述数据压缩单元对数据传输服务器接收的TCP信息流采用无损压缩算法进行压缩;
所述数据加密单元对数据传输服务器接收的TCP数据流进行实时加密,并将加密算法发送给中心数据服务器。
通过采用上述方案,数据传输服务器能够对TCP数据流进行压缩和加密,压缩采用了无损压缩算法,兼顾带宽和CPU占用率,加密的同时能够将加密算法发送给中心数据服务器,保证数据传输安全性和中心数据服务器对数据流的解密速度。
本发明进一步设置为:数据压缩单元接收外界输入的信息并根据信息对压缩算法进行配置修改。
通过采用上述方案,用户可直接在运行时对数据传输服务器的数据压缩方法进行配置修改,不影响其它节点的后续程序。
本发明进一步设置为:数据传输模块还包括断点续传单元,所述断点续传单元在数据传输服务器接收的TCP信息流时对TCP信息流进行缓存,当数据传输服务器发送信息流传输中断时,将缓存的TCP信息流存储至本地服务器;当数据传输服务器重新开始传输时,将存储的TCP信息流加载至缓存队列内。
通过采用上述方案,断点续传主要保证在数据传输过程中出现异常导致输出传输中断后,再次续传时能够使数据传输链完整,上述方案即避免所有数据写入磁盘的低效方式,又可不受内存大小限制。
本发明进一步设置为:数据传输模块还包括设备状态监测单元和数据质量监测单元;
所述设备状态监测单元实时采集数据传输服务器的设备状态信息,设备状态监测单元根据采集的信息生成日志,设备状态监测单元将采集的信息与预设范围进行对比,当采集的信息超过预设范围则将报警信息写入日志内,设备状态监测单元将日志与TCP数据流一同发送;
所述数据质量监测单元实时监测各传输节点通讯状态,当节点通讯状态发生异常时生成报警信息,并将报警信息传输给设备状态监测单元,设备状态监测单元将报警信息写入日志中。
通过采用上述方案,能够通过对数据传输服务器进行监控来对数据传输过程进行监控,保证当数据传输出现问题时能够及时发现和定位。
本发明的目的是提供一种数据采集方法,具有可实现多跨安全区的数据采集的效果。
本发明的上述技术目的是通过以下技术方案得以实现的:
一种数据采集方法,包括以下步骤:
一、数据采集设备实时采集电站数据并将数据发送给数据汇聚服务器;
二、数据汇聚服务器将接受到的数据转化为TCP数据流并发送给正向网闸;
三、正向网闸将TCP数据流由正向网闸的内网端口按照预设的通讯策略发送至外网端口,最终由外网端口发送给数据传输服务器;
四、数据传输服务器将接收到的TCP数据流进行压缩和加密处理,然后通过交换机和防火墙发送给中心端数据汇集设备。
通过采用上述方案,本方法可实现电站信息的多跨安全区的数据采集和传输,能够将多处电站内的设备或多个电站的信息发送给一个中心端数据汇集设备,因为设置了正向网闸用于正向隔离,保证了信息在由电站的控制区传输至非控制区的稳定性。
本发明进一步设置为:还包括以下步骤:
五、数据传输服务器对自身进行实时状态采集,并根据采集的状态信息判断是否出现故障,将状态信息和故障信息编辑成日志与TCP数据流一同进行发送。
通过采用上述方案,通过对数据传输服务器进行监控来对数据传输过程进行监控,保证当数据传输出现问题时能够及时发现和定位。
综上所述,本发明具有以下有益效果:
1. 配置管理单元能够为用户提供在电站的非控制区对数据采集设备的配置进行调节的功能。协议选择单元存储有多种协议信息,用户通过对协议信息进行选择即可使本系统兼容电站内设备的协议。数据缓存单元为数据汇聚服务器提供数据缓存功能,避免数据传输过程中意外中断导致数据出现错误的情况发生,保证输入数据库的生产过程信息的连续性和完整性;
2. 配置管理单元能够为用户提供在电站的非控制区对数据采集设备的配置进行调节的功能。协议选择单元存储有多种协议信息,用户通过对协议信息进行选择即可使本系统兼容电站内设备的协议。数据缓存单元为数据汇聚服务器提供数据缓存功能,避免数据传输过程中意外中断导致数据出现错误的情况发生,保证输入数据库的生产过程信息的连续性和完整性;
3. 数据传输服务器能够对TCP数据流进行压缩和加密,压缩采用了无损压缩算法,兼顾带宽和CPU占用率,加密的同时能够将加密算法发送给中心数据服务器,保证数据传输安全性和中心数据服务器对数据流的解密速度;
4. 能够通过对数据传输服务器进行监控来对数据传输过程进行监控,保证当数据传输出现问题时能够及时发现和定位。
附图说明
图1是实施例一的整体系统示意图;
图2是实施例一中突出数据采集模块的模块框图;
图3是实施例一中突出数据传输模块的模块框图。
图中,1、站端侧采集设备;11、数据汇聚服务器;111、数据采集设备;12、正向网闸;13、反向网闸;14、数据传输服务器;15、交换机;16、防火墙;2、中心端数据汇集设备;21、中心数据服务器;3、数据采集模块;31、配置管理单元;32、协议选择单元;33、数据缓存单元;4、数据传输单元;41、数据压缩单元;42、数据加密单元;43、断点续传单元;44、设备状态监测单元;45、数据质量监测单元。
具体实施方式
实施例一:一种数据采集系统,如图1所示,包括设置于不同电站内的多个站端侧采集设备1和设置于电站外的中心端数据汇集设备2。站端侧采集设备1均包括数据汇聚服务器11、正向网闸12、反向网闸13、数据传输服务器14、交换机15和防火墙16。中心端数据汇集设备2包括中心数据服务器21。正向网闸12可选用南瑞Syskeeper2000系列(正向)。反向网闸13可选用南瑞Syskeeper2000系列(反向)。交换机15需与正向网闸12和反向网闸13匹配。防火墙16需具备IPSec、SSLVPN拨号功能。
如图1所示,数据汇聚服务器11设置于电站内的控制区。数据汇聚服务器11连接有设置于电站内控制区的数据采集设备111,数据采集设备111包括但不限于测风塔、电能计量装置、升压站监控系统、振动监测系统、功率预测系统、光伏电站逆变器、风机SCADA等,能够实现风电场风电机组数据、升压站数据、测风塔数据、功率预测数据、电能表数据等全量数据传输。数据汇聚服务器11按照预设的周期接受数据采集设备111采集的数据,将接收的数据转化为TCP方式的数据流并发送给正向网闸12。
如图1所示,正向网闸12设置于电站的控制区和非控制区之间,正向网闸12的内网端口接收到TCP数据流后将TCP数据流传输给外网端口,最终由外网端口传输给数据传输服务器14。反向网闸13设置于电站的控制区和非控制区之间,反向网闸13接收数据传输服务器14输出的信息并将信息发送给数据汇聚服务器11。
如图1所示,数据传输服务器14设置于电站内的非控制区,数据传输服务器14接收TCP数据流后对TCP数据流进行压缩和加密处理,将处理后的TCP数据流发送给交换机15。交换机15接收到TCP数据流后将TCP数据流经过防火墙16发送给中心数据服务器21。
如图1所示,中心数据服务器21接收所有站端侧采集设备1发送的TCP信息流。本系统可实现电站信息的多跨安全区的数据采集和传输,能够将多处电站内的设备或多个电站的信息发送给一个中心端数据汇集设备2,因为设置了正向网闸12用于正向隔离,保证了信息在由电站的控制区传输至非控制区的稳定性。反向网闸13用于用户在电站控制区外控制电站内的设备。
如图1和图2所示,数据汇聚服务器11设置有数据采集模块3。数据采集模块3包括配置管理单元31、协议选择单元32和数据缓存单元33。配置管理单元31接收反向网闸13输出的信息,并根据信息调节数据采集设备111的配置。配置管理单元31能够为用户提供在电站的非控制区对数据采集设备111的配置进行调节的功能。协议选择单元32存储有ModbusTcp、ModusRTU、IEC101、IEC104、OPC、OPC-XML、OPC-UA、FTP、SFTP以及设备厂家私有协议(如PVI、ADS等)和Resful接口,协议选择单元32接收外界输入的信息,并根据信息选择数据汇聚服务器11使用的协议信息。用户通过对协议信息进行选择即可使本系统兼容电站内设备的协议。数据缓存单元33设置有本地缓存池。每当数据汇聚服务器11接受到信息时,将信息暂存于本地缓存池内,并对信息标注ID和时间,数据汇聚服务器11输出信息时,将信息从本地缓存池中取出并进行发送。数据缓存单元33为数据汇聚服务器11提供数据缓存功能,避免数据传输过程中意外中断导致数据出现错误的情况发生,保证输入数据库的生产过程信息的连续性和完整性。
如图1和图3所示,数据传输服务器14设置有数据传输模块。数据传输模块包括数据压缩单元41、数据加密单元42、断点续传单元43、设备状态监测单元44和数据质量监测单元45。
如图3所示,数据压缩单元41对数据传输服务器14接收的TCP信息流采用无损压缩算法进行压缩,保证在现有带宽的前提下风电场全量数据的上送,同时采用7Zlip、GZip等相关的开源压缩库,兼顾带宽和CPU占用率。数据压缩单元41接收外界输入的信息并根据信息对压缩算法进行配置修改。用户可直接在运行时对数据传输服务器14的数据压缩方法进行配置修改,可以在运行时动态切换压缩算法,或者关闭压缩功能,不影响其它节点的后续程序。同时可以在界面实时显示压缩率等指标。
如图3所示,数据加密单元42对数据传输服务器14接收的TCP数据流进行实时加密,并将加密算法发送给中心数据服务器21。数据加密单元42采用数据加密和网络通道安全认证的组合方式,确保数据安全。
如图3所示,断点续传单元43在数据传输服务器14接收的TCP信息流时对TCP信息流进行缓存。当数据传输服务器14发送信息流传输中断时,将缓存的TCP信息流存储至本地服务器。当数据传输服务器14重新开始传输时,将存储的TCP信息流加载至缓存队列内。断点续传主要保证在数据传输过程中出现异常导致输出传输中断后,再次续传时能够使数据传输链完整,上述方案即避免所有数据写入磁盘的低效方式,又可不受内存大小限制。
如图3所示,设备状态监测单元44实时采集数据传输服务器14的设备状态信息,设备状态监测单元44根据采集的信息生成日志。设备状态监测单元44将采集的信息与预设范围进行对比,当采集的信息超过预设范围则将报警信息写入日志内。设备状态监测单元44将日志与TCP数据流一同发送。数据质量监测单元45实时监测各传输节点通讯状态。当节点通讯状态发生异常时生成报警信息,并将报警信息传输给设备状态监测单元44,设备状态监测单元44将报警信息写入日志中。系统能够通过对数据传输服务器14进行监控来对数据传输过程进行监控,保证当数据传输出现问题时能够及时发现和定位。
系统具备数据发布功能模块,模块采用数据传输协议与传输平台分离的方式,从而实现数据采集驱动的插件化部署。
实施例二:一种数据采集方法,具体步骤如下:
第一步、数据采集设备111实时采集电站数据并将数据发送给数据汇聚服务器11。
第二步、数据汇聚服务器11将接受到的数据转化为TCP数据流并发送给正向网闸12。
第三步、正向网闸12将TCP数据流由正向网闸12的内网端口按照预设的通讯策略发送至外网端口,最终由外网端口发送给数据传输服务器14。
第四步、数据传输服务器14将接收到的TCP数据流进行压缩和加密处理,然后通过交换机15和防火墙16发送给中心端数据汇集设备2。
第五步、数据传输服务器14对自身进行实时状态采集,并根据采集的状态信息判断是否出现故障,将状态信息和故障信息编辑成日志与TCP数据流一同进行发送。
本方法可实现电站信息的多跨安全区的数据采集和传输,能够将多处电站内的设备或多个电站的信息发送给一个中心端数据汇集设备2,因为设置了正向网闸12用于正向隔离,保证了信息在由电站的控制区传输至非控制区的稳定性。同时通过对数据传输服务器14进行监控来对数据传输过程进行监控,保证当数据传输出现问题时能够及时发现和定位。
本具体实施方式的实施例均为本发明的较佳实施例,并非依此限制本发明的保护范围,故:凡依本发明的结构、形状、原理所做的等效变化,均应涵盖于本发明的保护范围之内。
Claims (8)
1.一种数据采集系统,其特征在于:包括设置于不同电站内的多个站端侧采集设备(1)和设置于电站外的中心端数据汇集设备(2);
站端侧采集设备(1)均包括数据汇聚服务器(11)、正向网闸(12)、反向网闸(13)、数据传输服务器(14)、交换机(15)和防火墙(16);
所述数据汇聚服务器(11)设置于电站内的控制区,数据汇聚服务器(11)连接有设置于电站内控制区的数据采集设备(111)并接受数据采集设备(111)采集的数据,将接收的数据转化为TCP方式的数据流并发送给正向网闸(12);
所述正向网闸(12)设置于电站的控制区和非控制区之间,正向网闸(12)接收到TCP数据流后将TCP数据流传输给数据传输服务器(14);
所述数据传输服务器(14)设置于电站内的非控制区,数据传输服务器(14)接收TCP数据流后对TCP数据流进行处理,将处理后的TCP数据流发送给交换机(15);
所述交换机(15)接收到TCP数据流后将TCP数据流经过防火墙(16)发送给中心端数据汇集设备(2);
所述反向网闸(13)设置于电站的控制区和非控制区之间,反向网闸(13)接收数据传输服务器(14)输出的信息并将信息发送给数据汇聚服务器(11);
中心端数据汇集设备(2)包括中心数据服务器(21),中心数据服务器(21)接收站端侧采集设备(1)发送的TCP信息流。
2.根据权利要求1所述的一种数据采集系统,其特征在于:数据汇聚服务器(11)设置有数据采集模块(3),所述数据采集模块(3)包括配置管理单元(31)、协议选择单元(32)和数据缓存单元(33);
所述配置管理单元(31)接收反向网闸(13)输出的信息,并根据信息调节数据采集设备(111)的配置;
所述协议选择单元(32)存储有多种协议信息,协议选择单元(32)接收外界输入的信息,并根据信息选择数据汇聚服务器(11)使用的协议信息;
所述数据缓存单元(33)设置有本地缓存池,每当数据汇聚服务器(11)接受到信息时,将信息暂存于本地缓存池内,并对信息标注ID和时间,数据汇聚服务器(11)输出信息时,将信息从本地缓存池中取出并进行发送。
3.根据权利要求1所述的一种数据采集系统,其特征在于:数据传输服务器(14)设置有数据传输模块,所述数据传输模块包括数据压缩单元(41)和数据加密单元(42);
所述数据压缩单元(41)对数据传输服务器(14)接收的TCP信息流采用无损压缩算法进行压缩;
所述数据加密单元(42)对数据传输服务器(14)接收的TCP数据流进行实时加密,并将加密算法发送给中心数据服务器(21)。
4.根据权利要求3所述的一种数据采集系统,其特征在于:数据压缩单元(41)接收外界输入的信息并根据信息对压缩算法进行配置修改。
5.根据权利要求3所述的一种数据采集系统,其特征在于:数据传输模块还包括断点续传单元(43),所述断点续传单元(43)在数据传输服务器(14)接收的TCP信息流时对TCP信息流进行缓存,当数据传输服务器(14)发送信息流传输中断时,将缓存的TCP信息流存储至本地服务器;当数据传输服务器(14)重新开始传输时,将存储的TCP信息流加载至缓存队列内。
6.根据权利要求3所述的一种数据采集系统,其特征在于:数据传输模块还包括设备状态监测单元(44)和数据质量监测单元(45);
所述设备状态监测单元(44)实时采集数据传输服务器(14)的设备状态信息,设备状态监测单元(44)根据采集的信息生成日志,设备状态监测单元(44)将采集的信息与预设范围进行对比,当采集的信息超过预设范围则将报警信息写入日志内,设备状态监测单元(44)将日志与TCP数据流一同发送;
所述数据质量监测单元(45)实时监测各传输节点通讯状态,当节点通讯状态发生异常时生成报警信息,并将报警信息传输给设备状态监测单元(44),设备状态监测单元(44)将报警信息写入日志中。
7.一种数据采集方法,其特征在于,包括以下步骤:
一、数据采集设备(111)实时采集电站数据并将数据发送给数据汇聚服务器(11);
二、数据汇聚服务器(11)将接受到的数据转化为TCP数据流并发送给正向网闸(12);
三、正向网闸(12)将TCP数据流由正向网闸(12)的内网端口按照预设的通讯策略发送至外网端口,最终由外网端口发送给数据传输服务器(14);
四、数据传输服务器(14)将接收到的TCP数据流进行压缩和加密处理,然后通过交换机(15)和防火墙(16)发送给中心端数据汇集设备(2)。
8.根据权利要求7所述的一种数据采集方法,其特征在于,还包括以下步骤:
五、数据传输服务器(14)对自身进行实时状态采集,并根据采集的状态信息判断是否出现故障,将状态信息和故障信息编辑成日志与TCP数据流一同进行发送。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010340905.9A CN111614626B (zh) | 2020-04-26 | 2020-04-26 | 一种数据采集系统和数据采集方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010340905.9A CN111614626B (zh) | 2020-04-26 | 2020-04-26 | 一种数据采集系统和数据采集方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111614626A true CN111614626A (zh) | 2020-09-01 |
CN111614626B CN111614626B (zh) | 2022-09-23 |
Family
ID=72197855
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010340905.9A Active CN111614626B (zh) | 2020-04-26 | 2020-04-26 | 一种数据采集系统和数据采集方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111614626B (zh) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112233408A (zh) * | 2020-09-28 | 2021-01-15 | 青海绿能数据有限公司 | 一种新能源大数据远程传输总线系统 |
CN112255942A (zh) * | 2020-10-14 | 2021-01-22 | 江苏新安电器股份有限公司 | 一种测试设备数据传输方法 |
CN112346134A (zh) * | 2020-10-30 | 2021-02-09 | 高军 | 一种富水破碎围岩注浆效果智能检测地质雷达方法 |
CN114666357A (zh) * | 2020-12-08 | 2022-06-24 | 中国石油天然气股份有限公司 | 一种交换油气管道数据的系统及方法 |
CN115086088A (zh) * | 2022-08-22 | 2022-09-20 | 南京华盾电力信息安全测评有限公司 | 安全运维接入装置及风机plc安全运维方法 |
CN115208612A (zh) * | 2022-05-10 | 2022-10-18 | 北京市遥感信息研究所 | 一种复杂组网安全体系架构 |
CN115776378A (zh) * | 2021-09-06 | 2023-03-10 | 中核武汉核电运行技术股份有限公司 | 一种核电工业互联网平台时序数据实时接入方法 |
CN115776415A (zh) * | 2023-02-13 | 2023-03-10 | 珠海市鸿瑞信息技术股份有限公司 | 一种基于工业协议的网闸设备智能管理系统及方法 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102778874A (zh) * | 2012-07-12 | 2012-11-14 | 贵州乌江水电开发有限责任公司 | 梯级水电站群联合优化调控系统 |
US20130132555A1 (en) * | 2010-08-12 | 2013-05-23 | Abb Research Ltd. | Communication method and apparatus of network management system |
CN106850573A (zh) * | 2016-12-30 | 2017-06-13 | 南京天谷电气科技有限公司 | 一种透传正反向隔离装置数据传输协议 |
CN107948100A (zh) * | 2017-12-28 | 2018-04-20 | 广西大学 | 云备用调度自动化主站系统及实现方法 |
CN108053630A (zh) * | 2017-11-28 | 2018-05-18 | 国电南瑞科技股份有限公司 | 一种跨安全区无线数据接入系统及方法 |
CN207817705U (zh) * | 2017-12-29 | 2018-09-04 | 国网山东省电力公司电力科学研究院 | 新能源并网电站涉网性能在线监测系统 |
CN110022325A (zh) * | 2019-04-18 | 2019-07-16 | 中国南方电网有限责任公司 | 电力通信网监控平台跨区数据安全高效交互系统及方法 |
-
2020
- 2020-04-26 CN CN202010340905.9A patent/CN111614626B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20130132555A1 (en) * | 2010-08-12 | 2013-05-23 | Abb Research Ltd. | Communication method and apparatus of network management system |
CN102778874A (zh) * | 2012-07-12 | 2012-11-14 | 贵州乌江水电开发有限责任公司 | 梯级水电站群联合优化调控系统 |
CN106850573A (zh) * | 2016-12-30 | 2017-06-13 | 南京天谷电气科技有限公司 | 一种透传正反向隔离装置数据传输协议 |
CN108053630A (zh) * | 2017-11-28 | 2018-05-18 | 国电南瑞科技股份有限公司 | 一种跨安全区无线数据接入系统及方法 |
CN107948100A (zh) * | 2017-12-28 | 2018-04-20 | 广西大学 | 云备用调度自动化主站系统及实现方法 |
CN207817705U (zh) * | 2017-12-29 | 2018-09-04 | 国网山东省电力公司电力科学研究院 | 新能源并网电站涉网性能在线监测系统 |
CN110022325A (zh) * | 2019-04-18 | 2019-07-16 | 中国南方电网有限责任公司 | 电力通信网监控平台跨区数据安全高效交互系统及方法 |
Non-Patent Citations (4)
Title |
---|
于桓飞等: "基于单向隔离网闸的水利工程标准化管理数据安全传输技术", 《浙江水利科技》 * |
潘路: "电力二次系统网络信息安全防护的设计与实现", 《中国优秀博硕士学位论文全文数据库(硕士)工程科技Ⅱ辑2015年第01期》 * |
王健: "基于SCADA系统的中间数据库系统在油气管道调控中心的应用", 《仪器仪表用户》 * |
胡捷: "电缆网运行监控系统整体安全防护方案的设计与实现", 《企业技术开发》 * |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112233408A (zh) * | 2020-09-28 | 2021-01-15 | 青海绿能数据有限公司 | 一种新能源大数据远程传输总线系统 |
CN112255942A (zh) * | 2020-10-14 | 2021-01-22 | 江苏新安电器股份有限公司 | 一种测试设备数据传输方法 |
CN112346134A (zh) * | 2020-10-30 | 2021-02-09 | 高军 | 一种富水破碎围岩注浆效果智能检测地质雷达方法 |
CN112346134B (zh) * | 2020-10-30 | 2022-08-02 | 高军 | 一种富水破碎围岩注浆效果智能检测地质雷达方法 |
CN114666357A (zh) * | 2020-12-08 | 2022-06-24 | 中国石油天然气股份有限公司 | 一种交换油气管道数据的系统及方法 |
CN114666357B (zh) * | 2020-12-08 | 2023-11-28 | 中国石油天然气股份有限公司 | 一种交换油气管道数据的系统及方法 |
CN115776378A (zh) * | 2021-09-06 | 2023-03-10 | 中核武汉核电运行技术股份有限公司 | 一种核电工业互联网平台时序数据实时接入方法 |
CN115776378B (zh) * | 2021-09-06 | 2024-02-09 | 中核武汉核电运行技术股份有限公司 | 一种核电工业互联网平台时序数据实时接入方法 |
CN115208612A (zh) * | 2022-05-10 | 2022-10-18 | 北京市遥感信息研究所 | 一种复杂组网安全体系架构 |
CN115208612B (zh) * | 2022-05-10 | 2023-10-13 | 北京市遥感信息研究所 | 一种复杂组网安全系统 |
CN115086088B (zh) * | 2022-08-22 | 2022-12-30 | 南京华盾电力信息安全测评有限公司 | 安全运维接入装置及风机plc安全运维方法 |
CN115086088A (zh) * | 2022-08-22 | 2022-09-20 | 南京华盾电力信息安全测评有限公司 | 安全运维接入装置及风机plc安全运维方法 |
CN115776415A (zh) * | 2023-02-13 | 2023-03-10 | 珠海市鸿瑞信息技术股份有限公司 | 一种基于工业协议的网闸设备智能管理系统及方法 |
Also Published As
Publication number | Publication date |
---|---|
CN111614626B (zh) | 2022-09-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111614626B (zh) | 一种数据采集系统和数据采集方法 | |
CN102287330A (zh) | 采用3g网络的风电场远程实时监控与智能视频遥视系统 | |
CN106444662A (zh) | 一种用于物联网的数据采集装置及方法 | |
CN106356999A (zh) | 一种配电网络具有抗干扰传输监控数据的通信监控系统 | |
CN206237204U (zh) | 用于电力系统中监测通讯状态的系统和电力通讯系统 | |
Das et al. | Process-to-bay level peer-to-peer network delay in IEC 61850 substation communication systems | |
CN104750076B (zh) | 基于ZigBee/TD‑LTE网关的光伏电站智能监控系统 | |
CN201174613Y (zh) | 变电站直流设备网络化监测管理系统 | |
CN202093379U (zh) | 风电场远程无线实时测量与控制系统 | |
KR102475542B1 (ko) | 이기종 필드버스용 게이트웨이 시스템 | |
US20150035681A1 (en) | Point-to-Multipoint Polling in a Monitoring System for an Electric Power Distribution System | |
Al-Rubaye et al. | Unleash narrowband technologies for industrial Internet of Things services | |
CN112947364B (zh) | 一种基于大数据预警配电站设备故障的系统及方法 | |
CN204231029U (zh) | 电力远动通讯在线监测及故障诊断分析装置 | |
CN107425998B (zh) | 一种基于工业wifi的通信链路保障方法 | |
CN115988357A (zh) | 一种电池包探测控制系统的通讯方法 | |
CN114221789A (zh) | 一种边缘计算终端可信接入物联边缘代理的方法及系统 | |
CN204536873U (zh) | 基于ZigBee/TD-LTE网关的光伏电站智能监控系统 | |
CN115118010A (zh) | 一种基于5g物联网的配电网监测系统 | |
CN115051467A (zh) | 一种海上风电场综合自动化系统 | |
CN101000712A (zh) | 供电现场作业指导书的方法 | |
CN202940849U (zh) | 基于数字微波网络的专网气象监控系统 | |
CN113473412A (zh) | 铁路动车运用所内数据可靠安全通信的方法 | |
CN204089345U (zh) | 一种环网监测终端 | |
CN216162467U (zh) | 分布式光伏电站数据采集装置及数据传输系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
PE01 | Entry into force of the registration of the contract for pledge of patent right |
Denomination of invention: A data collection system and data collection method Granted publication date: 20220923 Pledgee: Industrial Commercial Bank of China Ltd. Beijing Fengtai branch Pledgor: CGN WIND ENERGY Ltd. Registration number: Y2024110000119 |
|
PE01 | Entry into force of the registration of the contract for pledge of patent right |