CN102868552A - 数据发送方法 - Google Patents
数据发送方法 Download PDFInfo
- Publication number
- CN102868552A CN102868552A CN2012102994116A CN201210299411A CN102868552A CN 102868552 A CN102868552 A CN 102868552A CN 2012102994116 A CN2012102994116 A CN 2012102994116A CN 201210299411 A CN201210299411 A CN 201210299411A CN 102868552 A CN102868552 A CN 102868552A
- Authority
- CN
- China
- Prior art keywords
- real time
- time data
- file
- data
- memory mapping
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明提供一种数据发送方法，包括步骤：读取数据源的实时数据并写入内存映射文件中；将内存映射文件中的实时数据发送至接收端，当网络通信中断时则将所述实时数据缓存到内存映射文件中；当网络恢复通信后，读取所述缓存的实时数据并将其发送至接收端。通过本发明的技术，在网络不稳定时也能保证传输数据的连续性，使得信息系统运行更平稳、安全、高效。
Description
技术领域
本发明涉及数据传输技术，特别是涉及一种数据发送方法。
背景技术
安全隔离网闸是一种由带有多种控制功能专用硬件在电路上切断网络之间的链路层连接，并能够在网络间进行安全适度的应用数据交换的网络安全设备。
对于安全性要求较高的电力二次系统，用于监视和控制电网及电厂生产运行过程的、基于计算机及网络技术的业务处理系统及智能设备等。包括电力数据采集与监控系统、能量管理系统、变电站自动化系统、换流站计算机监控系统、发电厂计算机监控系统、配电自动化系统、微机继电保护和安全自动装置、广域相量测量系统、负荷控制系统、水调自动化系统和水电梯级调度自动化系统、电能量计量计费系统、实时电力市场的辅助控制系统等。其中发电厂计算机监控系统（SIS系统）的特殊性在于其跨越一区、二区和三区。网络安全一般都采用隔离器把网络分成不同级别的安全区域，不同区域之间只能有单向的数据流向。数据流只能从高安全性区域流向安全性低的区域，对于高安全性区域中的具体情况，在低安全性区域是不可知的不可访问的，从而确保了高安全性区域的安全。
如图1所示，电厂控制系统信息系统中，作为高安全性区域的生产区域，需要通过单向的隔离网闸与低安全性区域的管理区域进行隔离，电厂控制系统实时的电力系统数据只能单向流向管理区域，从而确保生产区域的安全。
电力二次系统的实时数据采集位于电力监控系统的最底层，数据海量且非常杂乱，由于实时数据只能单向传输，在网络由于安全网闸产生拥塞，阻断、宕机等故障时，前面的通信节点无法预测后续通信节点是否接受到数据，而且后续通信节点也由于通信中断而无法回应前面的节点重新发送实时数据，这样就会导致信息系统的实时数据丢失，数据传输稳定性、连续性差。
发明内容
基于此，有必要针对上述现有的传输技术导致数据传输稳定性低、连续性差的问题，提供一种数据发送方法。
一种数据发送方法，包括如下步骤：
读取数据源的实时数据并写入内存映射文件中；
将内存映射文件中的实时数据发送至接收端，当网络通信中断时则将所述实时数据缓存到内存映射文件中；
当网络恢复通信后，读取所述缓存的实时数据并将其发送至接收端。
上述数据发送方法，用于使用单向安全隔离网闸的信息系统中，对数据源的实时数据进行采集，当网络通信中断时将实时数据缓存到文件中，在网络恢复正常后，再将实时数据和缓存在文件中的数据发送，从而在网络不稳定时也能保证传输数据的连续性，使得信息系统运行更平稳、安全、高效。
附图说明
图1为电厂控制系统信息系统结构示意图；
图2为一个实施例的数据发送方法流程图；
图3为步骤S300实现过程的一个应用实例流程图。
具体实施方式
下面结合附图对本发明的数据发送方法的具体实施方式作详细描述。
图2示出了一个实施例的数据发送方法流程图，主要包括如下步骤：
S100、读取数据源的实时数据并写入内存映射文件中；
S200、将内存映射文件中的实时数据发送至接收端，当网络通信中断时则将所述实时数据缓存到内存映射文件中；
S300、当网络恢复通信后，读取所述缓存的实时数据并将其发送至接收端。
为了更清晰本发明的技术方案，下面阐本发明实现过程的较佳实施例。
对于步骤S100的过程，具体地，由接口程序采用同步读取的方式采集数据源实时数据包；然后根据数据包的类型对实时数据包进行解析，如果解析成功，则将解析获得的实时数据写入内存映射文件中，如果解析失败，则丢弃该实时数据包，并记录错误日志。
上述通过同步读取的方式，可以使软件流程相对简单，无需复杂的接口程序，加快了数据的读取速度，利用内存映射文件，可以实现实时数据的缓存。
对于步骤S200的过程，具体地，读取内存映射文件中的实时数据输入到发送结构中，对这些实时数据进行TCP打包后发送至接收端（接收程序或实时数据库）；当网络通信中断时，导致发送失败，则将实时数据缓存在内存映射文件中，同时写入发送失败日志；优选地，采用无压缩方式缓存这些实时数据。
上述无压缩的缓存方式，可以提高存取速度，提高缓存文件的通用性，可以通过其它工具读取数据。
对于步骤S200中的将实时数据缓存到内存映射文件过程，考虑到内存映射文件的长度有限，进一步地，判断缓存的实时数据大小是否大于内存映射文件的长度，若大于该长度，则在磁盘上新建与内存映射文件关联的缓存文件，然后将缓存的实时数据从内存映射文件转移到新建的缓存文件上；
在转移实时数据过程中，若写入缓存文件成功，则更新用于记录缓存文件信息的缓存文件名称列表，同时关闭缓存文件；若写入缓存文件失败，则写入转移失败日志信息。
作为一个实施例，内存映射文件的结构如下：
内存映射文件管理硬盘文件的存储400000点，每次缓存数据时都新建一个6MB的文件，把内存映射中的实时数据一次写入到新建的缓存文件中，可以减少硬盘写入频率；
上述步骤中，通过创建一个关联磁盘文件的缓存文件，用UnmapViewOfFile解除内存映射与文件的关联，再用将实时数据写入磁盘文件上。
对于步骤S300中读取所述缓存的实时数据并将其发送至接收端的过程，根据缓存文件名称列表顺序将所述缓存文件的实时数据读取到内存映射文件中；
若读取成功，将内存映射文件中的实时数据输入到发送结构中进行TCP打包后发送，若读取失败，则写入读取失败日志；
关闭缓存文件，删除在磁盘上对应的缓存文件，更新缓存文件名称列表，释放硬盘空间，重复上述步骤，直至发送完所有缓存文件。
参见图3所示，具体地，步骤S300包括如下步骤：
S301、获取磁盘的缓存文件名称列表；
S302、判断缓存文件名称列表上记录的文件个数是否为0，若是，结束，若否，进入步骤S303；
S303、根据缓存文件名称列表记录的文件顺序，打开列表中的第一个文件；
S304、把该文件内的全部实时数据读取到内存映射文件上；
S305、判断读取数据是否成功，若是，执行步骤S306，若否，执行S307；
S306、关闭该缓存文件，然后进行删除，更新缓存文件名称列表，释放硬盘空间；
S307、将读取失败信息写入错误日志。
以上所述实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此，本发明专利的保护范围应以所附权利要求为准。
Claims (6)
1.一种数据发送方法，其特征在于，包括如下步骤：
读取数据源的实时数据并写入内存映射文件中；
将内存映射文件中的实时数据发送至接收端，当网络通信中断时则将所述实时数据缓存到内存映射文件中；
当网络恢复通信后，读取所述缓存的实时数据并将其发送至接收端。
2.根据权利要求1所述的数据发送方法，其特征在于，所述将内存映射文件中的实时数据发送至接收端，当网络通信中断时则将所述实时数据缓存到内存映射文件中步骤包括：
接口程序采用同步读取的方式采集数据源实时数据包；
根据数据包的类型对所述实时数据包进行解析，若解析成功，则将解析获得的实时数据写入内存映射文件中，若解析失败，则丢弃该实时数据包，并记录错误日志。
3.根据权利要求1所述的数据发送方法，其特征在于，所述将所述实时数据缓存到内存映射文件中步骤包括：
读取内存映射文件中的实时数据输入到发送结构中，对所述实时数据进行TCP打包后发送；
当网络通信中断时，将实时数据缓存在内存映射文件中，同时写入发送失败日志。
4.根据权利要求1所述的数据发送方法，其特征在于，所述采用无压缩方式缓存所述实时数据。
5.根据权利要求3所述的数据发送方法，其特征在于，还包括：
判断缓存的实时数据大小是否大于内存映射文件的长度，若是，则在磁盘上新建与内存映射文件关联的缓存文件；
将缓存的实时数据从内存映射文件转移到所述缓存文件上；
若转移成功，则更新用于记录缓存文件信息的缓存文件名称列表，关闭缓存文件，若转移失败，则写入转移失败日志信息。
6.根据权利要求5所述的数据发送方法，其特征在于，所述读取所述缓存的实时数据并将其发送至接收端步骤包括：
根据缓存文件名称列表顺序将所述缓存文件的实时数据读取到内存映射文件中；
若读取成功，将内存映射文件中的实时数据输入到发送结构中进行TCP打包后发送，若读取失败，则写入读取失败日志；
关闭缓存文件，删除在磁盘上对应的缓存文件，释放硬盘空间。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201210299411.6A CN102868552B (zh) | 2012-08-21 | 2012-08-21 | 数据发送方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201210299411.6A CN102868552B (zh) | 2012-08-21 | 2012-08-21 | 数据发送方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN102868552A true CN102868552A (zh) | 2013-01-09 |
| CN102868552B CN102868552B (zh) | 2015-11-18 |
Family
ID=47447157
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201210299411.6A Active CN102868552B (zh) | 2012-08-21 | 2012-08-21 | 数据发送方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN102868552B (zh) |
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103905556A (zh) * | 2014-04-10 | 2014-07-02 | 中央电视台 | 一种以太网中多媒体数据的数字化存储方法、装置及系统 |
| CN107704196A (zh) * | 2017-03-09 | 2018-02-16 | 上海亿账通区块链科技有限公司 | 区块链数据存储系统和方法 |
| CN108111552A (zh) * | 2016-11-24 | 2018-06-01 | 北京大豪科技股份有限公司 | 数据的传输方法、装置和设备 |
| CN109712339A (zh) * | 2018-12-28 | 2019-05-03 | 江西科技学院 | 快递存放、取件方法及系统、服务器及快递柜 |
| CN110086673A (zh) * | 2019-04-30 | 2019-08-02 | 中国神华能源股份有限公司 | 数据获取方法及装置 |
| CN111200624A (zh) * | 2018-11-19 | 2020-05-26 | 浙江宇视科技有限公司 | 一种跨网闸数据传输方法及系统 |
| CN113141319A (zh) * | 2020-01-17 | 2021-07-20 | 阿里巴巴集团控股有限公司 | 消息处理方法、装置、电子设备及存储介质 |
| CN114285723A (zh) * | 2021-12-22 | 2022-04-05 | 卡斯柯信号有限公司 | 维护终端间信息传输的方法 |
| CN114846278A (zh) * | 2019-12-27 | 2022-08-02 | 大金工业株式会社 | 输出抑制控制状态的解除方法、程序及空调系统 |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101567002A (zh) * | 2009-05-25 | 2009-10-28 | 北京中企开源信息技术有限公司 | 一种实时数据存储的方法和系统 |
-
2012
- 2012-08-21 CN CN201210299411.6A patent/CN102868552B/zh active Active
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101567002A (zh) * | 2009-05-25 | 2009-10-28 | 北京中企开源信息技术有限公司 | 一种实时数据存储的方法和系统 |
Non-Patent Citations (1)
| Title |
|---|
| 钟毓凌: "半潜船监控系统仿真软件的设计与实现", 《中国优秀硕士学位论文全文数据库》 * |
Cited By (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103905556A (zh) * | 2014-04-10 | 2014-07-02 | 中央电视台 | 一种以太网中多媒体数据的数字化存储方法、装置及系统 |
| CN108111552A (zh) * | 2016-11-24 | 2018-06-01 | 北京大豪科技股份有限公司 | 数据的传输方法、装置和设备 |
| CN107704196A (zh) * | 2017-03-09 | 2018-02-16 | 上海亿账通区块链科技有限公司 | 区块链数据存储系统和方法 |
| CN107704196B (zh) * | 2017-03-09 | 2020-03-27 | 深圳壹账通智能科技有限公司 | 区块链数据存储系统和方法 |
| CN111200624A (zh) * | 2018-11-19 | 2020-05-26 | 浙江宇视科技有限公司 | 一种跨网闸数据传输方法及系统 |
| CN111200624B (zh) * | 2018-11-19 | 2023-05-23 | 浙江宇视科技有限公司 | 一种跨网闸数据传输方法及系统 |
| CN109712339A (zh) * | 2018-12-28 | 2019-05-03 | 江西科技学院 | 快递存放、取件方法及系统、服务器及快递柜 |
| CN110086673A (zh) * | 2019-04-30 | 2019-08-02 | 中国神华能源股份有限公司 | 数据获取方法及装置 |
| CN114846278A (zh) * | 2019-12-27 | 2022-08-02 | 大金工业株式会社 | 输出抑制控制状态的解除方法、程序及空调系统 |
| CN114846278B (zh) * | 2019-12-27 | 2023-12-12 | 大金工业株式会社 | 输出抑制控制状态的解除方法、程序及空调系统 |
| CN113141319A (zh) * | 2020-01-17 | 2021-07-20 | 阿里巴巴集团控股有限公司 | 消息处理方法、装置、电子设备及存储介质 |
| CN113141319B (zh) * | 2020-01-17 | 2024-05-03 | 阿里巴巴集团控股有限公司 | 消息处理方法、装置、电子设备及存储介质 |
| CN114285723A (zh) * | 2021-12-22 | 2022-04-05 | 卡斯柯信号有限公司 | 维护终端间信息传输的方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN102868552B (zh) | 2015-11-18 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN102868552B (zh) | 数据发送方法 | |
| CN101867620B (zh) | 一种跨安全区查看前置报文的方法 | |
| CN102647025B (zh) | 基于中心服务器方式实现保护装置即插即用的方法 | |
| CN102833119A (zh) | 双网冗余机制下实时数据接收同步处理的方法 | |
| CN102387040A (zh) | 一种前置机保持高速稳定运行的方法及系统 | |
| CN204103598U (zh) | 一种变电站的冗余保护系统 | |
| CN204833683U (zh) | 电能表数据远程采集系统 | |
| CN104350488A (zh) | 用于资源受限主机的选择性数据冗余消除的系统和方法 | |
| CN103259873A (zh) | 一种通过前置机对风电场设备采集数据和控制的方法及系统 | |
| CN111127250B (zh) | 一种电力数据监控事件分析系统及方法 | |
| CN110031699A (zh) | 一种用于测试继电保护装置远方操作功能的方法及系统 | |
| CN103441880A (zh) | 与iec61850智能装置数据接入系统在主备切换时不丢数据的方法 | |
| CN111490936B (zh) | 一种基于通讯链路管理的iec61850冗余设备接入方法和系统 | |
| CN110838760B (zh) | 一种电网故障数据收集方法及装置 | |
| CN102984739A (zh) | 故障信息处理方法及装置 | |
| CN111083203A (zh) | 一种基于阿里云的微电网监控系统 | |
| CN203101932U (zh) | 变电设备状态接入控制器 | |
| CN105704121A (zh) | 一种基于专有4g网络的电力数据安全传输系统及方法 | |
| CN106451376B (zh) | 一种goose报文发布的方法及装置 | |
| CN111314408B (zh) | 一种基于通信层多数据项缓存任务的本地边缘计算和物联管理方法 | |
| CN210469386U (zh) | 一种高性能录波主站架构 | |
| CN112615755B (zh) | 数据传输方法和系统 | |
| CN102843265A (zh) | 一种通讯规约的不复位无微扰的热备双连接方法 | |
| CN101282201B (zh) | 一种通讯设备中消息监控的方法和设备 | |
| CN113726840B (zh) | 一种调度一体化平台数据回流与增量同步的系统和方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| C56 | Change in the name or address of the patentee | ||
| CP01 | Change in the name or title of a patent holder |
Address after: 510080 Dongfeng East Road, Dongfeng, Guangdong, Guangzhou, Zhejiang Province, No. 8 Patentee after: ELECTRIC POWER RESEARCH INSTITUTE, GUANGDONG POWER GRID CO., LTD. Patentee after: Beijing Tongfang Electronic Technology Co., Ltd. Address before: 510080 Dongfeng East Road, Dongfeng, Guangdong, Guangzhou, Zhejiang Province, No. 8 Patentee before: Electrical Power Research Institute of Guangdong Power Grid Corporation Patentee before: Beijing Tongfang Electronic Technology Co., Ltd. |
|
| TR01 | Transfer of patent right |
Effective date of registration: 20200304 Address after: 510080 Dongfeng East Road, Dongfeng, Guangdong, Guangzhou, Zhejiang Province, No. 8 Patentee after: Electric Power Research Institute of Guangdong Power Grid Co.,Ltd. Address before: 510080 Dongfeng East Road, Dongfeng, Guangdong, Guangzhou, Zhejiang Province, No. 8 Co-patentee before: Beijing Tongfang Electronic Technology Co., Ltd. Patentee before: Electric Power Research Institute of Guangdong Power Grid Co.,Ltd. |
|
| TR01 | Transfer of patent right |