CN114793229A - 一种遥测数据的处理方法及装置 - Google Patents

Abstract

本发明公开了一种遥测数据的处理方法及装置，其方法包括：按照预先部署的时间节点，将前一天的通信报文数据统一保存至安全一区的报文分析服务器；所述报文分析服务器上部署有报文离线分析程序；响应于所保存的通信报文数据，利用所述报文离线分析程序翻译所述通信报文数据的报文内容，生成对应的数据文件；将所述数据文件传输至所述安全三区的web服务器；在所述web服务器对所述数据文件进行分析，得到分析后的数据文件；将所述分析后的数据文件同步至时序库中；所述时序库用于将所述分析后的数据文件同步至所述安全三区。克服现有的遥测数据在采集过程存在的存在采集精度不高的问题，从而满足日常应用对遥测数据的分析要求。

Description

一种遥测数据的处理方法及装置

技术领域

本发明涉及数据传输技术技域，尤其涉及一种遥测数据的处理方法及装置。

背景技术

根据电力二次系统的特点，一般将电力二次系统划分为生产控制大区和管理信息大区，其中生产大区分为控制区和非控制区即安全一区和安全二区；信息管理大区分为生产管理区和管理信息区，即安全三区和安全四区。

变电站每时每刻将越遥测变化死区的值上送到自动化主站，而主站为避免数据量过大造成存储空间不足，具体采用安全一区前置服务器将变电站遥测数据采集后，采用定时间间隔(一般为15分钟)的存储方式保存在关系型数据库中以定时向安全三区同步数据。可以看到，不管是安全一区保存在关系型数据库的存储方式，还是与安全三区间的数据同步方式，均存在采集精度不高的问题。

因此，迫切需要一种能获取高精度的遥测数据的处理方案，满足日常应用对遥测数据的分析要求。

发明内容

本发明提供了一种遥测数据的处理方法及装置，用于克服现有的遥测数据在采集过程存在的存在采集精度不高的问题。

第一方面，一种遥测数据的处理方法，包括：

按照预先部署的时间节点，将前一天的通信报文数据统一保存至安全一区的报文分析服务器；所述报文分析服务器上部署有报文离线分析程序；

响应于所保存的通信报文数据，利用所述报文离线分析程序翻译所述通信报文数据的报文内容，生成对应的数据文件；

将所述数据文件传输至所述安全三区的web服务器；

在所述web服务器对所述数据文件进行分析，得到分析后的数据文件；

将所述分析后的数据文件同步至时序库中；所述时序库用于将所述分析后的数据文件同步至所述安全三区。

可选地，所述安全一区应用于socket通信机制环境开发系统，且所述安全一区部署有适配所述开发系统的监听端口；响应于所保存的通信报文数据，利用所述报文离线分析程序翻译所述通信报文数据的报文内容，生成对应的数据文件，包括：

通过所述监听端口判断是否存在所述通信报文数据，在存在所述通信报文数据的情况下，利用所述报文离线分析程序翻译所述通信报文数据的报文内容，生成对应的数据文件。

可选地，所述安全三区安装有适配所述开发系统的接收端口；将所述数据文件传输至所述安全三区的web服务器，包括：

将所述数据文件按照预先设定的打包规则，将所述数据文件对应的文件头信息、文件大小信息及文件名信息一并打包，得到打包后的数据文件，并传输至所述web服务器；

通过所述接收端口接收所述打包后的数据文件，并按照所述打包规则解析所述打包后的数据文件，得到所述数据文件。

可选地，在所述web服务器对所述数据文件进行分析，得到分析后的数据文件，包括：

通过所述安全三区的多线程文件分析系统，将所述数据文件从所述Web服务器传输至多线程文件分析系统；

所述多线程文件分析系统对所述数据文件进行二次分析，得到分析后的数据文件。

可选地，将所述分析后的数据文件同步至时序库之后，还包括：

根据所述分析后的数据文件，绘制遥测波形图，并将所述遥测波形图展示于预先搭建的web网页。

第二方面，本发明还提供了一种遥测数据的处理装置，包括：

保存模块，用于按照预先部署的时间节点，将前一天的通信报文数据统一保存至安全一区的报文分析服务器；所述报文分析服务器上部署有报文离线分析程序；

响应模块，用于响应于所保存的通信报文数据，利用所述报文离线分析程序翻译所述通信报文数据的报文内容，生成对应的数据文件；

传输模块，用于将所述数据文件传输至所述安全三区的web服务器；

分析模块，用于在所述web服务器对所述数据文件进行分析，得到分析后的数据文件；

同步模块，用于将所述分析后的数据文件同步至时序库中；所述时序库用于将所述分析后的数据文件同步至所述安全三区。

可选地，所述安全一区应用于socket通信机制环境开发系统，且所述安全一区部署有适配所述开发系统的监听端口；所述响应模块具体用于：

通过所述监听端口判断是否存在所述通信报文数据，在存在所述通信报文数据的情况下，利用所述报文离线分析程序翻译所述通信报文数据的报文内容，生成对应的数据文件。

可选地，所述安全三区安装有适配所述开发系统的接收端口；所述传输模块包括：

打包子模块，用于将所述数据文件按照预先设定的打包规则，将所述数据文件对应的文件头信息、文件大小信息及文件名信息一并打包，得到打包后的数据文件，并传输至所述web服务器；

解析子模块，用于通过所述接收端口接收所述打包后的数据文件，并按照所述打包规则解析所述打包后的数据文件，得到所述数据文件。

可选地，所述分析模块包括：

第一分析子模块，用于通过所述安全三区的多线程文件分析系统，将所述数据文件从所述Web服务器传输至多线程文件分析系统；

第二分析子模块，用于所述多线程文件分析系统对所述数据文件进行二次分析，得到分析后的数据文件。

可选地，还包括：

展示模块，用于根据所述分析后的数据文件，绘制遥测波形图，并将所述遥测波形图展示于预先搭建的web网页。

本申请第三方面提供了一种电子设备，所述设备包括处理器以及存储器；

所述存储器用于存储程序代码，并将所述程序代码传输给所述处理器；

所述处理器用于根据所述程序代码中的指令执行第一方面所述的遥测数据的处理方法。

本申请第四方面提供了一种计算机可读存储介质，，所述计算机可读存储介质用于存储程序代码，所述程序代码用于执行第一方面所述的遥测数据的处理方法。

从以上技术方案可以看出，本发明具有以下优点：

本发明通过按照预先部署的时间节点，将前一天的通信报文数据统一保存至安全一区的报文分析服务器；所述报文分析服务器上部署有报文离线分析程序；响应于所保存的通信报文数据，利用所述报文离线分析程序翻译所述通信报文数据的报文内容，生成对应的数据文件；将所述数据文件传输至所述安全三区的web服务器；在所述web服务器对所述数据文件进行分析，得到分析后的数据文件；将所述分析后的数据文件同步至时序库中；所述时序库用于将所述分析后的数据文件同步至所述安全三区。克服现有的遥测数据在采集过程存在的存在采集精度不高的问题，从而满足日常应用对遥测数据的分析要求。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其它的附图；

图1为本发明的一种遥测数据的处理方法实施例一的步骤流程图；

图2为本发明的一种遥测数据的处理方法实施例二的步骤流程图；

图3为本发明的一种遥测数据的处理装置实施例的结构框图。

具体实施方式

本发明实施例提供了一种遥测数据的处理方法及装置，用于克服现有的遥测数据在采集过程存在的存在采集精度不高的问题；。

为使得本发明的发明目的、特征、优点能够更加的明显和易懂，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，下面所描述的实施例仅仅是本发明一部分实施例，而非全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。

请参阅图1，图1为本发明的一种遥测数据的处理方法实施例一的步骤流程图，具体可以包括如下步骤：

步骤S101，按照预先部署的时间节点，将前一天的通信报文数据统一保存至安全一区的报文分析服务器；所述报文分析服务器上部署有报文离线分析程序；

步骤S102，响应于所保存的通信报文数据，利用所述报文离线分析程序翻译所述通信报文数据的报文内容，生成对应的数据文件；

步骤S103，将所述数据文件传输至所述安全三区的web服务器；

步骤S104，在所述web服务器对所述数据文件进行分析，得到分析后的数据文件；

步骤S105，将所述分析后的数据文件同步至时序库中；所述时序库用于将所述分析后的数据文件同步至所述安全三区。

本发明实施例通过按照预先部署的时间节点，将前一天的通信报文数据统一保存至安全一区的报文分析服务器；所述报文分析服务器上部署有报文离线分析程序；响应于所保存的通信报文数据，利用所述报文离线分析程序翻译所述通信报文数据的报文内容，生成对应的数据文件；将所述数据文件传输至所述安全三区的web服务器；在所述web服务器对所述数据文件进行分析，得到分析后的数据文件；将所述分析后的数据文件同步至时序库中；所述时序库用于将所述分析后的数据文件同步至所述安全三区。克服现有的遥测数据在采集过程存在的存在采集精度不高的问题，从而满足日常应用对遥测数据的分析要求。

请参阅图2，为本发明的一种遥测数据的处理方法实施例二的步骤流程图，具体包括：

步骤S201，按照预先部署的时间节点，将前一天的通信报文数据统一保存至安全一区的报文分析服务器；所述报文分析服务器上部署有报文离线分析程序；所述安全一区应用于socket通信机制环境开发系统，且所述安全一区部署有适配所述开发系统的监听端口，安全三区安装有适配所述开发系统的接收端口；

在本发明实施例中，前置机将每日与变电站通信报文数据以压缩包形式缓存在本地硬盘，这些通信报文数据用以记录每时每刻的通信内容。监狱当前采集的通信报文数据精度高及数据量庞大的特点，为了提高数据的传输效率并提高安全一区的安全程度，在保持安全一区原有环境的前提下，应用于socket通信机制环境开发系统，采用socket机制进行大文件的数据传输，与此同时，安全一区和安全三区分别配置有适配于socket通信机制环境及开发系统的监听端口和接收端口。

在具体实现中，系统会按照每天由运维人员预先部署的时间节点，及每日启动定时任务的时间，将昨日的通信报文统一保存到安全一区的报文分析服务器当中。

步骤S202，通过所述监听端口判断是否存在所述通信报文数据，在存在所述通信报文数据的情况下，利用所述报文离线分析程序翻译所述通信报文数据的报文内容，生成对应的数据文件；

在本发明实施例中，安全一区的报文分析服务器上部署有报文离线分析程序，当监听端口上判断存在有相应的报文数据，即在预先部署的时间节点时，安全一区的报文分析服务器将前一天的通信报文数据统一保存在安全一区的报文分析服务器时，该报文离线分析程序将翻译通信报文数据的报文内容，生成用于导入安全三区数据库的数据文件。

步骤S203，将所述数据文件按照预先设定的打包规则，将所述数据文件对应的文件头信息、文件大小信息及文件名信息一并打包，得到打包后的数据文件，并传输至所述web服务器；

需要说明的是，安全一区与安全三区使用正向隔离装置进行隔离，因此数据流只能从安全一区单向传递至安全三区，因此安全三区无法直接获取安全一区的数据，只能接受由安全一区发送的数据文件。

在本发明实施例中，将数据文件按照系统所定义的数据打包规则进行打包，同时将文件头信息、文件大小信息及文件名信息一并打包，得到打包后的数据文件，传输至web服务器。

步骤S204，通过所述接收端口接收所述打包后的数据文件，并按照所述打包规则解析所述打包后的数据文件，得到所述数据文件；

在本发明实施例中，通过接受端口接受web服务器上的数据文件后，按照安全一区的打包规则，进行解释。

步骤S205，通过所述安全三区的多线程文件分析系统，将所述数据文件从所述web服务器传输至多线程文件分析系统；

步骤S206，所述多线程文件分析系统对所述数据文件进行二次分析，得到分析后的数据文件；

步骤S207，将所述分析后的数据文件同步至时序库中；所述时序库用于将所述分析后的数据文件同步至所述安全三区；

在本发明实施例中，通过安全三区的多线程文件分析系统，对数据进行二次分析，然后同步至时序数据库中。以时序库代替传统的关系数据库，既保证遥测采集精度又降低了硬盘的存储压力。报文分析采用离线分析方式，无需更改调度自动化系统程序

步骤S208，根据所述分析后的数据文件，绘制遥测波形图，并将所述遥测波形图展示于预先搭建的web网页。

在本发明实施例中，通过预先搭建的web网页，展示高精度的遥测数据，并绘制高精度的遥测波形图，以呈现于用户及运维人员。

本发明实施例所提供的一种遥测数据的处理方法，通过按照预先部署的时间节点，将前一天的通信报文数据统一保存至安全一区的报文分析服务器；所述报文分析服务器上部署有报文离线分析程序；响应于所保存的通信报文数据，利用所述报文离线分析程序翻译所述通信报文数据的报文内容，生成对应的数据文件；将所述数据文件传输至所述安全三区的web服务器；在所述web服务器对所述数据文件进行分析，得到分析后的数据文件；将所述分析后的数据文件同步至时序库中；所述时序库用于将所述分析后的数据文件同步至所述安全三区。克服现有的遥测数据在采集过程存在的存在采集精度不高的问题，从而满足日常应用对遥测数据的分析要求。

请参阅图3，示出了一种遥测数据的处理装置实施例的结构框图，包括如下模块：

保存模块401，用于按照预先部署的时间节点，将前一天的通信报文数据统一保存至安全一区的报文分析服务器；所述报文分析服务器上部署有报文离线分析程序；

响应模块402，用于响应于所保存的通信报文数据，利用所述报文离线分析程序翻译所述通信报文数据的报文内容，生成对应的数据文件；

传输模块403，用于将所述数据文件传输至所述安全三区的web服务器；

分析模块404，用于在所述web服务器对所述数据文件进行分析，得到分析后的数据文件；

同步模块405，用于将所述分析后的数据文件同步至时序库中；所述时序库用于将所述分析后的数据文件同步至所述安全三区。

在一个可选实施例中，所述安全一区应用于socket通信机制环境开发系统，且所述安全一区部署有适配所述开发系统的监听端口；所述响应模块402具体用于：

通过所述监听端口判断是否存在所述通信报文数据，在存在所述通信报文数据的情况下，利用所述报文离线分析程序翻译所述通信报文数据的报文内容，生成对应的数据文件。

在一个可选实施例中，所述安全三区安装有适配所述开发系统的接收端口；所述传输模块403包括：

打包子模块，用于将所述数据文件按照预先设定的打包规则，将所述数据文件对应的文件头信息、文件大小信息及文件名信息一并打包，得到打包后的数据文件，并传输至所述web服务器；

解析子模块，用于通过所述接收端口接收所述打包后的数据文件，并按照所述打包规则解析所述打包后的数据文件，得到所述数据文件。

在一个可选实施例中，所述分析模块404包括：

第一分析子模块，用于通过所述安全三区的多线程文件分析系统，将所述数据文件从所述Web服务器传输至多线程文件分析系统；

第二分析子模块，用于所述多线程文件分析系统对所述数据文件进行二次分析，得到分析后的数据文件。

在一个可选实施例中，还包括：

展示模块，用于根据所述分析后的数据文件，绘制遥测波形图，并将所述遥测波形图展示于预先搭建的web网页。

本申请还提供了一种电子设备，设备包括处理器以及存储器；

存储器用于存储程序代码，并将程序代码传输给处理器；

处理器用于根据程序代码中的指令执行上述方法实施例中的遥测数据的处理方法。

本申请还提供了一种计算机可读存储介质，计算机可读存储介质用于存储程序代码，程序代码用于执行上述方法实施例中的遥测数据的处理方法。

在本申请所提供的几个实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以通过一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(英文全称：Read-OnlyMemory，英文缩写：ROM)、随机存取存储器(英文全称：Random Access Memory，英文缩写：RAM)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述，以上实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (10)

1.一种遥测数据的处理方法，其特征在于，包括：

按照预先部署的时间节点，将前一天的通信报文数据统一保存至安全一区的报文分析服务器；所述报文分析服务器上部署有报文离线分析程序；

响应于所保存的通信报文数据，利用所述报文离线分析程序翻译所述通信报文数据的报文内容，生成对应的数据文件；

将所述数据文件传输至所述安全三区的web服务器；

在所述web服务器对所述数据文件进行分析，得到分析后的数据文件；

将所述分析后的数据文件同步至时序库中；所述时序库用于将所述分析后的数据文件同步至所述安全三区。

2.根据权利要求1所述的遥测数据的处理方法，其特征在于，所述安全一区应用于socket通信机制环境开发系统，且所述安全一区部署有适配所述开发系统的监听端口；响应于所保存的通信报文数据，利用所述报文离线分析程序翻译所述通信报文数据的报文内容，生成对应的数据文件，包括：

通过所述监听端口判断是否存在所述通信报文数据，在存在所述通信报文数据的情况下，利用所述报文离线分析程序翻译所述通信报文数据的报文内容，生成对应的数据文件。

3.根据权利要求2所述的遥测数据的处理方法，其特征在于，所述安全三区安装有适配所述开发系统的接收端口；将所述数据文件传输至所述安全三区的web服务器，包括：

将所述数据文件按照预先设定的打包规则，将所述数据文件对应的文件头信息、文件大小信息及文件名信息一并打包，得到打包后的数据文件，并传输至所述web服务器；

通过所述接收端口接收所述打包后的数据文件，并按照所述打包规则解析所述打包后的数据文件，得到所述数据文件。

4.根据权利要求2所述的遥测数据的处理方法，其特征在于，在所述web服务器对所述数据文件进行分析，得到分析后的数据文件，包括：

通过所述安全三区的多线程文件分析系统，将所述数据文件从所述Web服务器传输至多线程文件分析系统；

所述多线程文件分析系统对所述数据文件进行二次分析，得到分析后的数据文件。

5.根据权利要求2或4所述的遥测数据的处理方法，其特征在于，将所述分析后的数据文件同步至时序库之后，还包括：

根据所述分析后的数据文件，绘制遥测波形图，并将所述遥测波形图展示于预先搭建的web网页。

6.一种遥测数据的处理装置，其特征在于，包括：

保存模块，用于按照预先部署的时间节点，将前一天的通信报文数据统一保存至安全一区的报文分析服务器；所述报文分析服务器上部署有报文离线分析程序；

响应模块，用于响应于所保存的通信报文数据，利用所述报文离线分析程序翻译所述通信报文数据的报文内容，生成对应的数据文件；

传输模块，用于将所述数据文件传输至所述安全三区的web服务器；

分析模块，用于在所述web服务器对所述数据文件进行分析，得到分析后的数据文件；

同步模块，用于将所述分析后的数据文件同步至时序库中；所述时序库用于将所述分析后的数据文件同步至所述安全三区。

7.根据权利要求6所述的遥测数据的处理装置，其特征在于，所述安全一区应用于socket通信机制环境开发系统，且所述安全一区部署有适配所述开发系统的监听端口；所述响应模块具体用于：

通过所述监听端口判断是否存在所述通信报文数据，在存在所述通信报文数据的情况下，利用所述报文离线分析程序翻译所述通信报文数据的报文内容，生成对应的数据文件。

8.根据权利要求7所述的遥测数据的处理装置，其特征在于，所述安全三区安装有适配所述开发系统的接收端口；所述传输模块包括：

打包子模块，用于将所述数据文件按照预先设定的打包规则，将所述数据文件对应的文件头信息、文件大小信息及文件名信息一并打包，得到打包后的数据文件，并传输至所述web服务器；

解析子模块，用于通过所述接收端口接收所述打包后的数据文件，并按照所述打包规则解析所述打包后的数据文件，得到所述数据文件。

9.根据权利要求7所述的遥测数据的处理装置，其特征在于，所述分析模块包括：

第一分析子模块，用于通过所述安全三区的多线程文件分析系统，将所述数据文件从所述Web服务器传输至多线程文件分析系统；

第二分析子模块，用于所述多线程文件分析系统对所述数据文件进行二次分析，得到分析后的数据文件。

10.根据权利要求7或9所述的遥测数据的处理装置，其特征在于，还包括：

展示模块，用于根据所述分析后的数据文件，绘制遥测波形图，并将所述遥测波形图展示于预先搭建的web网页。

Images