CN115277738A - 数据管理系统、方法、装置、设备和存储介质 - Google Patents
数据管理系统、方法、装置、设备和存储介质 Download PDFInfo
- Publication number
- CN115277738A CN115277738A CN202110478950.5A CN202110478950A CN115277738A CN 115277738 A CN115277738 A CN 115277738A CN 202110478950 A CN202110478950 A CN 202110478950A CN 115277738 A CN115277738 A CN 115277738A
- Authority
- CN
- China
- Prior art keywords
- data
- request
- target
- node server
- target data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000013523 data management Methods 0.000 title claims abstract description 146
- 238000000034 method Methods 0.000 title claims abstract description 34
- 238000003860 storage Methods 0.000 title claims abstract description 14
- 230000005540 biological transmission Effects 0.000 claims abstract description 91
- 238000012550 audit Methods 0.000 claims description 10
- 238000012795 verification Methods 0.000 claims description 8
- 230000004044 response Effects 0.000 claims description 3
- 239000007789 gas Substances 0.000 description 63
- 238000012423 maintenance Methods 0.000 description 9
- 238000012545 processing Methods 0.000 description 8
- 238000013480 data collection Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 6
- 230000002457 bidirectional effect Effects 0.000 description 4
- 239000004215 Carbon black (E152) Substances 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 229930195733 hydrocarbon Natural products 0.000 description 2
- 150000002430 hydrocarbons Chemical class 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- VNWKTOKETHGBQD-UHFFFAOYSA-N methane Chemical compound C VNWKTOKETHGBQD-UHFFFAOYSA-N 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 238000012552 review Methods 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000010438 heat treatment Methods 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000003345 natural gas Substances 0.000 description 1
- 239000003209 petroleum derivative Substances 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
Abstract
本公开提供了一种数据管理系统、方法、装置、设备和存储介质，属于油气管道技术领域。所述数据管理系统包括数据管理服务器和与油气管道的多个区段一一对应的数据节点服务器，数据节点服务器用于获取并存储对应区段中数据采集设备采集到的管道数据。当数据管理服务器接收到数据请求时，根据数据请求向目标数据节点服务器发送数据传输请求，目标数据节点服务器根据接收到的数据传输请求，向数据请求的发送方发送目标数据。这样，多个数据请求的发送方可以从目标数据节点服务器获取目标数据，避免了重复向数据采集设备获取数据，提高了油气管道系统中数据采集设备运行的稳定性。
Description
技术领域
本公开涉及油气管道技术领域，特别涉及一种用于油气管道系统的数据管理系统、方法、装置、设备和存储介质。
背景技术
随着国民经济的快速发展，国家对油气管道建设的投入逐步加大，全国形成了纵横交错的输送石油、天然气的油气管道。为了保障油气管道的长期运行，需要获取油气管道各站场、阀室内的各类数据，来监控油气管道的运行情况。
相关技术中，每个外部应用系统从油气管道系统的数据采集设备中获取管道数据。当多个外部数据应用系统需要获取管道数据时，会重复向数据采集设备问询数据，影响了数据采集设备的稳定运行。
发明内容
本公开实施例提供了一种用于油气管道系统的数据管理系统、方法、设备和存储介质，能够提高油气管道系统中数据采集设备运行的稳定性。所述技术方案如下：
第一方面，提供了一种用于油气管道系统的数据管理系统，所述油气管道系统包括沿所述油气管道依次布置的多个区段，每个区段分布有多个所述数据采集设备；
所述数据管理系统包括：数据管理服务器和多个数据节点服务器；
所述多个数据节点服务器与所述多个区段一一对应，所述数据节点服务器用于获取并存储对应区段中的数据采集设备采集到的管道数据；
所述数据管理服务器用于接收数据请求，所述数据请求用于请求目标数据；根据所述数据请求向目标数据节点服务器发送数据传输请求，所述目标数据节点服务器为所述目标数据所在的数据节点服务器；
所述目标数据节点服务器用于根据接收到的所述数据传输请求，向所述数据请求的发送方发送所述目标数据。
可选地，所述目标数据节点服务器与对应的数据采集设备之间的数据传输连接为单向数据传输连接，所述目标数据节点服务器用于通过所述单向数据传输连接定期获取并保存所述管道数据；根据所述数据传输请求从保存的所述管道数据中获取所述目标数据发送给所述数据请求的发送方。
可选地，所述数据管理服务器还用于在根据所述数据请求向目标数据节点服务器发送数据传输请求之前，对所述数据请求进行权限审核；根据审核通过的数据请求向目标数据节点服务器发送数据传输请求。
可选地，所述目标数据节点服务器还用于在接收到所述数据传输请求后，对所述数据管理服务器进行身份认证；响应于确定所述数据管理服务器通过身份认证，向所述发送方发送所述目标数据。
可选地，所述目标数据节点服务器还用于将所述目标数据转换为目标数据格式，所述目标数据格式为所述发送方支持的数据格式；将所述目标数据格式的目标数据，发送给所述发送方。
第二方面，提供了一种用于油气管道系统的数据管理方法，所述方法包括：
数据管理服务器接收数据请求，所述数据请求用于请求目标数据；
所述数据管理服务器根据所述数据请求向目标数据节点服务器发送数据传输请求，所述目标数据节点服务器为所述目标数据所在的数据节点服务器，所述数据传输请求用于指示所述目标数据节点服务器将所述目标数据发送给所述数据请求的发送方。
可选地，所述数据管理方法还包括：
所述数据管理服务器在根据所述数据请求向目标数据节点服务器发送数据传输请求之前，对所述数据请求进行权限审核；
根据审核通过的数据请求向目标数据节点服务器发送数据传输请求。
第三方面，提供了另一种用于油气管道系统的数据管理装置，所述数据管理装置包括：
接收模块，用于接收数据请求，所述数据请求用于请求目标数据；
发送模块，用于根据所述数据请求向目标数据节点服务器发送数据传输请求，所述目标数据节点服务器为所述目标数据所在的数据节点服务器，所述数据传输请求用于指示所述目标数据节点服务器将所述目标数据发送给所述数据请求的发送方。
可选地，所述数据管理装置还包括：
权限审核模块，用于在根据所述数据请求向目标数据节点服务器发送数据传输请求之前，对所述数据请求进行权限审核；
所述发送模块还用于根据审核通过的数据请求向目标数据节点服务器发送数据传输请求。
第四方面，提供了一种计算机设备，包括：处理器；用于存储处理器可执行指令的存储器；其中，所述处理器被配置为执行前述第二方面所述的方法。
第五方面，提供了一种计算机可读存储介质，当计算机可读存储介质中的指令由计算机设备的处理器执行时，使得计算机设备能够执行前述第二方面所述的方法。
本公开实施例提供的技术方案带来的有益效果是：
本公开实施例中，数据管理系统包括数据管理服务器和与油气管道的多个区段一一对应的数据节点服务器，数据节点服务器用于获取并存储对应区段中数据采集设备采集到的管道数据。当数据管理服务器接收到数据请求时，根据数据请求向目标数据节点服务器发送数据传输请求，目标数据节点服务器根据接收到的数据传输请求，向数据请求的发送方发送目标数据。这样，多个数据请求的发送方可以从目标数据节点服务器获取目标数据，避免了重复向数据采集设备获取数据，提高了油气管道系统中数据采集设备运行的稳定性。
附图说明
为了更清楚地说明本公开实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本公开实施例提供的一种油气管道系统的结构示意图；
图2是本公开实施例提供的一种用于油气管道系统的数据管理系统的结构示意图；
图3是本公开实施例提供的一种用于油气管道系统的数据管理方法的流程图；
图4是本公开实施例提供的另一种用于油气管道系统的数据管理方法的流程图；
图5是本公开实施例提供的一种用于油气管道系统的数据管理装置的结构框图；
图6是本公开实施例提供的一种计算机设备的结构框图。
具体实施方式
为使本公开的目的、技术方案和优点更加清楚，下面将结合附图对本公开实施方式作进一步地详细描述。
为了便于理解本公开实施例，下面先对油气管道系统进行简单介绍。
图1是本公开实施例提供的一种油气管道系统。参见图1，该油气管道系统包括油气管道10以及沿油气管道10分布的多个站场或阀室11，每个站场或阀室11内分布有多个油气管道设备111和多个数据采集设备112。
油气管道设备111包括输油泵、加热炉、储油罐、计量设备、压缩机等。
数据采集设备112用于采集管道运行数据以及油气管道设备111的相关数据。数据采集设备112包括多种传感器、控制器和数据服务器。其中，传感器的类型包括温度传感器、压力传感器、电压传感器、电流传感器、流量传感器等等，这些传感器根据需要设置在管道和油气管道设备的需要检测的位置。控制器可以包括单片机、PLC(Programmable LogicController，可编程逻辑控制器)等。数据服务器可以是SCADA(Supervisory Control AndData Acquisition，数据监视控制与数据采集)系统、UPS(Uninterruptible PowerSupply，不间断电源)系统、流量计系统、设备台账系统、安防系统等系统对应的服务器。数据服务器通过网络与数据采集设备112中的控制器连接。数据服务器用于获取并存储所属的数据采集设备112采集的管道数据。控制器通过传感器获取油气管道系统中管道运行数据，例如压力、温度等，以及各油气管道设备111的相关数据，以便根据这些数据分析油气管道系统的运行情况，进而保障油气管道系统的长期运行。
不同的数据采集设备112用于获取不同类别的管道数据。这里，管道数据的类别包括但不限于与生产调度有关的数据(即SCADA系统对应的数据)、环境数据(即与安防系统对应的数据)、电源数据(即与UPS系统对应的数据)、流量数据(即与流量计系统对应的数据)、设备运行数据(即与设备台账系统对应的数据)等。
在本公开实施例中，油气管道被划分为沿油气管道依次布置的多个区段11，每个区段11分布有多个数据采集设备112。其中，每个区段11可以对应一个站场或阀室，也可以对应多个站场或阀室。例如，可以将相邻且距离较近的多个站场或阀室划分为一个区段。
图2是本公开实施例提供的一种用于油气管道系统的数据管理系统。参见图2，数据管理系统包括数据管理服务器21和多个数据节点服务器22。多个数据节点服务器22与油气管道的多个区段11一一对应，即每个区段11均对应一个数据节点服务器22。数据节点服务器22用于获取并存储对应区段11中的数据采集设备112采集到的数据。数据管理服务器21用于接收数据请求，然后根据接收到的数据请求向目标数据节点服务器发送数据传输请求。数据传输请求用于指示目标数据节点服务器向数据请求的发送方31发送目标数据。目标数据节点服务器为目标数据所在的数据节点服务器22。
其中，数据请求用于请求目标数据，目标数据为数据请求的发送方31想要获取的管道数据。该数据请求由数据请求的发送方31发送至数据管理服务器21。
数据请求的发送方31可以是外部数据应用系统。可选地，外部数据应用系统可以是电子调度系统、流量计远维系统、自动化远维系统、泵远维系统、压缩机远维系统、集中监控系统、泄漏检测系统、数据中心等。
其中，电子调度系统、流量计远维系统、自动化远维系统、泵远维系统和压缩机远维系统需要获取SCADA系统对应的管道数据；流量计远维系统和泄漏检测系统需要获取流量计系统对应的数据；集中监控系统和数据中心均需要获取SCADA系统、UPS系统、流量计系统、设备台账系统以及安防系统对应的数据。
数据请求中包括数据请求的发送方信息以及目标数据的指示信息。
示例性地，数据请求的发送方信息可以是外部数据应用系统的账户信息、位置信息等。
在一些示例中，目标数据的指示信息可以包括目标数据节点服务器的标识，以及目标数据的标识信息。
数据管理服务器21在接收到数据请求的发送方31发送的数据请求后，根据数据请求中的目标数据节点服务器的标识，确定目标数据节点服务器，然后向目标数据节点服务器发送数据传输请求。
在另一些示例中，目标数据的指示信息可以仅包括目标数据的标识信息。
数据管理服务器21中预先存储有管道数据与数据节点服务器22之间的对应关系。数据管理服务器21在接收到数据请求的发送方31发送的数据请求后，根据数据请求所要请求的目标数据以及该对应关系，确定目标数据节点服务器。然后，数据管理服务器21向目标数据节点服务器发送数据传输请求。
在本申请实施例中，数据传输请求包括目标数据的标识信息，用于指示目标数据节点服务器根据目标数据的标识信息，确定目标数据。目标数据节点服务器根据接收到的数据管理服务器21发送的数据传输请求，向数据请求的发送方31发送目标数据。
在一些示例中，各个数据节点服务器22定期从对应的多个数据采集设备112中获取并存储数据。在这种情况下，目标数据节点服务器在接收到数据管理服务器21发送的数据传输请求后，根据数据传输请求中的目标数据的标识信息，将本地存储的与目标数据的标识信息对应的目标数据发送至数据请求的发送方31。
示例性地，数据管理服务器21为普通的X86内核的服务器，可实现对1024个数据节点服务器22进行管理。
本公开实施例中，数据管理系统包括数据管理服务器和与油气管道的多个区段一一对应的数据节点服务器，数据节点服务器用于获取并存储对应区段中数据采集设备采集到的管道数据。当数据管理服务器接收到数据请求时，根据数据请求向目标数据节点服务器发送数据传输请求，目标数据节点服务器根据接收到的数据传输请求，向数据请求的发送方发送目标数据。这样，多个数据请求的发送方可以从目标数据节点服务器获取目标数据，避免了重复向数据采集设备获取数据，提高了油气管道系统中数据采集设备运行的稳定性。
可选地，目标数据节点服务器与对应的数据采集设备之间的数据传输连接为单向数据传输连接，目标数据节点服务器用于通过单向数据传输连接定期获取并保存管道数据；根据数据传输请求从保存的管道数据中获取目标数据发送给数据请求的发送方31。
单向数据传输连接指的是目标数据节点服务器只能读取对应的数据采集设备112采集的数据，不能向数据服务器发送数据。这样，可以避免数据节点服务器22发送的数据修改或者删除数据采集设备112采集的数据，从而可以保证数据采集设备112采集的数据是真实的数据。
单向数据传输连接可以通过数据采集设备112中的数据服务器中包括的单向网闸来实现。
可选地，数据节点服务器22与数据采集设备112对应的数据传输连接可以是双向数据传输连接。双向数据传输连接可以不用安装网闸，直接通过数据节点服务器22与数据采集设备112之间的网络连接实现。
可选地，数据管理服务器21还用于在根据数据请求向目标数据节点服务器发送数据传输请求之前，对数据请求进行权限审核；根据审核通过的数据请求向目标数据节点服务器发送数据传输请求。
在本公开实施例中，数据节点服务器21与数据请求的发送方31之间可以通过企业局域网划定的网段以及公网进行数据传输连接。数据采集设备112与油气管道设备111通过站内内网连接。
数据管理服务器21中预先存储有权限审核规则。权限审核规则由各区段11管道数据的主人制定，不同类型的管道数据可以分别对应不同的权限审核规则。
示例性地，权限审核规则可以包括：数据管理服务器中预先存储有用户信息与管道数据类型的对应关系，用户信息包括用户账号和数据请求密码等。数据请求的发送方31向数据管理服务器21发送的数据请求中需要包括与目标数据的数据类型对应的用户账号信息和数据请求密码。若数据管理服务器21审核数据请求中的用户账号信息与存储的用户账号信息一致，且数据请求密码与存储的数据请求密码一致，则认为通过权限审核。数据请求密码由各区段的管道数据的主人进行设置，然后通知数据请求的发送方31。
在一些示例中，油气管道的数据主人可以通过客户端向数据管理服务器21发送权限审核规则设置指令，该设置指令用于指示增加、删除或修改用户信息与管道数据类型的对应关系。数据管理服务器21根据收到的设置指令修改权限审核规则。
当数据请求审核通过时，数据管理服务器21才向目标数据节点服务器发送数据传输请求，这样，没有获得授权的数据请求的发送方无法获取管道数据，保障了管道数据的安全。
可选地，目标数据节点服务器还用于在收到数据传输请求后，对数据管理服务器21进行身份认证；响应于确定数据管理服务器21通过身份认证，向数据请求的发送方31发送目标数据。
每个数据节点服务器22中存储有管理该数据节点服务器22的数据管理服务器的身份信息。当目标数据节点服务器接收到数据管理服务器21发送的数据传输请求时，根据存储的数据管理服务器21的身份信息，对该数据管理服务器21进行身份信息认证。如果该身份信息与存储的数据管理服务器21的身份信息一致，则确定该数据管理服务器21通过身份认证，并且，将目标数据发送给数据请求的发送方31。
示例性地，数据管理服务器21的身份信息可以为服务器的IP(InternetProtocol，英特网协议)地址、设备型号等。
通过对数据管理服务器21进行身份认证，可以使数据请求的发送方31不能通过没有管理权限的数据管理服务器21获取管道数据。可以降低管道数据外泄的风险，进一步地保障管道数据的安全。
可选地，目标数据节点服务器还用于将目标数据转换为目标数据格式，目标数据格式为数据请求的发送方支持的数据格式；将目标数据格式的目标数据，发送给数据请求的发送方。
在本申请实施例中，目标数据节点服务器接收到的数据传输请求中还包括格式信息，该格式信息用于指示数据请求的发送方支持的数据格式。目标数据节点服务器根据数据传输请求中的格式信息来确定目标数据格式。
在一种可能的实施方式中，数据请求包括该格式信息，数据管理服务器21从该数据请求中获取该格式信息，并将获取到的格式信息携带在数据传输请求中发送给目标数据节点服务器。
在另一些示例中，数据管理服务器21中存储有各个应用系统所支持的数据格式的格式信息。数据管理服务器21根据数据请求中的发送方的信息，确定对应的格式信息，并将该格式信息携带在数据传输请求中发送给目标数据节点服务器。
通过数据格式转换，使数据请求的发送方31能够更好地兼容油气管道不同种类的数据。并且，能够便于数据管理服务器21对数据进行分析、管理和运用。
在另一些实施方式中，目标数据节点服务器直接将获取的目标数据发送给数据请求的发送方31，由数据请求的发送方31自行对目标数据进行格式转换、处理。
图3是本公开实施例提供的一种用于油气管道系统的数据管理方法。该方法应用于图2所述的数据管理服务器21。参见图3，该方法包括以下步骤：
在步骤311中，接收数据请求。
数据请求用于请求目标数据。目标数据为数据请求的发送方想要获取的数据。数据请求的相关内容参见图2对应的实施例，在此省略详细描述。
在步骤312中，根据数据请求，向目标数据节点服务器发送数据传输请求。
目标数据节点服务器为目标数据所在的数据节点服务器。数据传输请求用于指示目标数据节点服务器将目标数据发送给数据请求的发送方。数据传输请求的相关内容参见图2所示的实施例，在此省略详细描述。
本公开实施例中，数据管理系统包括数据管理服务器和与油气管道的多个区段一一对应的数据节点服务器，数据节点服务器用于获取并存储对应区段中数据采集设备采集到的管道数据。当数据管理服务器接收到数据请求时，根据数据请求向目标数据节点服务器发送数据传输请求，目标数据节点服务器根据接收到的数据传输请求，向数据请求的发送方发送目标数据。这样，多个数据请求的发送方可以从目标数据节点服务器获取目标数据，避免了重复向数据采集设备获取数据，提高了油气管道系统中数据采集设备运行的稳定性。
图4是本公开实施例提供的另一种用于油气管道系统的数据管理方法。该方法由图2中的数据节点服务器22和数据管理服务器21共同执行。参见图4，该方法包括如下步骤：
在步骤401中，数据请求的发送方向数据管理服务器发送数据请求。
其中，数据请求用于请求目标数据。目标数据为数据请求的发送方想要获取的油气管道系统的数据。
在一些示例中，数据请求的发送方通过数据适配器向数据管理服务器发送数据请求。
相应地，数据管理服务器接收发送方的数据请求。
在步骤402中，数据管理服务器对数据请求进行权限审核。
数据管理服务器接收到数据请求的发送方发送的数据请求后，根据预先存储的权限审核规则对数据请求进行审核，以确定数据请求的发送方是否有数据获取权限。
若数据请求权限审核通过，则数据管理服务器确定该数据请求的发送方有权限获取数据，执行步骤403。若数据请求权限审核未通过，则数据管理服务器确定该数据请求发送方没有权限获取数据，不执行步骤403及后续步骤，且数据管理服务器将该未通过权限审核的数据请求的相关信息记入系统日志，便于后续相关技术人员查看。
在步骤403中，数据管理服务器根据数据请求，确定目标数据节点服务器。
其中，目标数据节点服务器为目标数据所在的数据节点服务器。
数据请求中包括数据请求的发送方的信息以及目标数据的指示信息。
在一些示例中，目标数据的指示信息可以包括目标数据节点服务器的标识，以及目标数据的标识信息。
数据管理服务器在接收到数据请求的发送方发送的数据请求后，根据数据请求中的目标数据节点服务器的标识，确定目标数据节点服务器，然后向目标数据节点服务器发送数据传输请求。
在另一些实施例中，目标数据的指示信息可以仅包括目标数据的标识信息。
数据管理服务器中预先存储有管道数据与数据节点服务器之间的对应关系。数据管理服务器在接收到数据请求的发送方发送的数据请求后，根据数据请求所要请求的目标数据以及该对应关系，确定目标数据节点服务器。然后，数据管理服务器向目标数据节点服务器发送数据传输请求。
示例性地，目标数据的标识信息可以包括油气管道设备的标识信息或者管道运行数据的标识信息。油气管道设备的标识信息可以是油气管道设备的序列号、设备类型等。管道运行数据的标识信息可以是压力数据、温度数据等。
在步骤404中，数据管理服务器判断目标数据节点服务器是否在线。
若目标数据节点服务器不在线，则可能是目标数据节点服务器出现网络故障或者目标数据节点服务器本身出现故障。此时，数据管理服务器将目标数据节点服务器不在线的信息记录系统日志，便于后续相关技术人员根据该系统日志分析数据请求的发送方不能获取数据的原因。
可选地，数据节点服务器还可以将目标数据节点服务器不在线的信息反馈给数据请求的发送方，或者有其他的数据请求的发送方也想通过该目标数据节点服务器获取目标数据时，告知数据请求的发送方不能通过该目标数据节点服务器获取目标数据。
若目标数据节点服务器在线，则执行步骤405。
在步骤405中，数据管理服务器向目标节点服务器发送数据传输请求。
相应地，目标数据节点服务器接收数据传输请求。数据传输请求的相关内容参见图2所示的实施例，在此省略详细描述。
在步骤406中，目标数据节点服务器根据数据传输请求，获取目标数据。
在一些示例中，各个数据节点服务器定期从对应的多个数据采集设备中获取并存储数据。在这种情况下，目标数据节点服务器在接收到数据管理服务器发送的数据传输请求后，根据数据传输请求中的目标数据的标识信息，将本地存储的与目标数据的标识信息对应的目标数据发送至数据请求的发送方。
可选地，目标数据节点服务器与数据采集设备之间的数据传输连接可以是单向数据传输连接或者双向数据传输连接。单向数据传输连接和双向数据传输连接的相关内容参见图2所述的实施例，在此省略详细描述。
可选地，在目标数据节点服务器获取目标数据之前，还包括对发送数据传输请求的数据管理服务器进行身份认证。
目标数据节点服务器可以根据预先存储的数据管理服务器的身份信息对数据管理服务器进行身份认证。若身份认证失败，则表示有其他的数据请求的发送方想要通过没有授权的数据管理服务器，从目标数据节点服务器中获取管道数据。此时，目标数据节点服务器发送目标数据至数据请求的发送方，并将数据管理服务器身份认证失败的信息记录系统日志，便于后续相关技术人员查看。
通过对数据管理服务器进行身份认证，可以进一步避免管道数据泄露，保障管道数据的安全性。
在步骤407中，目标数据节点服务器向数据请求的发送方发送目标数据。
可选地，目标数据节点服务器在向数据请求的发送方发送目标数据之前，该方法还包括目标数据节点服务器判断与数据请求的发送方之间的网络连接是否成功。
若目标数据节点服务器与数据请求的发送方之间的网络连接成功，则向数据请求的发送方发送目标数据。
若目标数据节点服务器与数据请求方连接失败，则目标数据节点服务器向数据管理服务器返回连接失败提示，数据管理服务器将此次连接失败的信息记入系统日志，便于后续相关技术人员根据该系统日志分析数据请求发送方不能获取数据的原因。或者数据管理服务器将此次连接失败的信息反馈给数据请求的发送方，便于数据请求的发送方检查是否自身出现网络故障。
可选地，在目标数据节点服务器向数据请求的发送方发送目标数据之前，该方法还包括：目标数据节点服务器将目标数据转换为数据请求的发送方支持的数据格式，然后将格式转换后的目标数据发送给数据请求的发送方。相应地，数据请求的发送方接收目标数据。
本公开实施例中，通过设置数据管理服务器和油气管道的多个区段对应的多个数据节点服务器，可以对油气管道所有管道数据进行分散管理和存储。当某一个数据节点服务器出现故障时，不会影响数据请求的发送方向其他数据节点服务器获取数据。通过对数据请求的发送方发送的数据请求以及数据管理服务器的身份信息进行权限审核，可以避免管道数据被非授权的数据请求的发送方获取，进一步提高了管道数据传输的安全性。
本公开实施例中，数据管理服务器用于接收数据请求的发送方发送的数据请求并对数据请求进行权限审核，然后确定目标数据所在的数据节点服务器。即，数据管理服务器本身并不存储管道数据，数据请求的发送方不能从数据管理服务器获取管道数据。这样，其他未知的外部应用无法从数据管理服务器中获取管道数据，保障了管道数据的安全性。
本公开实施例中，由于数据中心需要获取整个油气管道系统的所有管道数据，可以实现对油气管道系统的所有管道数据进行备份。一方面，其他的数据请求的发送方可以直接从数据中心中获取管道数据，一定程度上提高了管道数据传输的效率。另一方面，由于数据中心对油气管道系统的所有管道数据进行了备份，数据节点服务器出现故障、或者数据采集设备出现故障或者油气管道设备出现故障，导致数据请求的发送方无法从数据节点服务器中获取目标数据时，可以直接从数据中心中获取目标数据，提高了管道数据传输的可靠性。
图5是本公开实施例提供的一种用于油气管道系统的数据管理装置500的结构框图。该装置包括：接收模块501和发送模块502。
接收模块501用于接收数据请求，所述数据请求用于请求目标数据。发送模块502用于根据所述数据请求向目标数据节点服务器发送数据传输请求，所述目标数据节点服务器为所述目标数据所在的数据节点服务器，所述数据传输请求用于指示所述目标数据节点服务器将所述目标数据发送给所述数据请求的发送方。
可选地，该装置还包括权限审核模块503，用于在根据所述数据请求向目标数据节点服务器发送数据传输请求之前，对所述数据请求进行权限审核。
发送模块502用于根据审核通过的数据请求向目标数据节点服务器发送数据传输请求。
需要说明的是：上述实施例提供的用于油气管道系统的数据管理装置在进行数据管理时，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将设备的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。另外，上述实施例提供的用于油气管道系统的数据管理装置与用于油气管道系统的数据管理方法实施例属于同一构思，其具体实现过程详见方法实施例，这里不再赘述。
图6是本公开实施例提供的计算机设备结构框图。如图6所示，该计算机设备包括：处理器601和存储器602。
处理器601可以包括一个或多个处理核心，比如4核心处理器、8核心处理器等。处理器601可以采用DSP(Digital Signal Processing，数字信号处理)、FPGA(Field－Programmable Gate Array，现场可编程门阵列)、PLA(Programmable Logic Array，可编程逻辑阵列)中的至少一种硬件形式来实现。处理器601也可以包括主处理器和协处理器，主处理器是用于对在唤醒状态下的数据进行处理的处理器，也称CPU(Central ProcessingUnit，中央处理器)；协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中，处理器601可以在集成有GPU(Graphics Processing Unit，图像处理器)，GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中，处理器601还可以包括AI(Artificial Intelligence，人工智能)处理器，该AI处理器用于处理有关机器学习的计算操作。
存储器602可以包括一个或多个计算机可读存储介质，该计算机可读存储介质可以是非暂态的。存储器602还可包括高速随机存取存储器，以及非易失性存储器，比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中，存储器602中的非暂态的计算机可读存储介质用于存储至少一个指令，该至少一个指令用于被处理器601所执行以实现本申请实施例中提供的油气管道系统的数据管理方法中由数据管理服务器执行的步骤。
本领域技术人员可以理解，图6中示出的结构并不构成对计算机设备的限定，可以包括比图示更多或更少的组件，或者组合某些组件，或者采用不同的组件布置。
本发明实施例还提供了一种非临时性计算机可读存储介质，当所述存储介质中的指令由计算机设备的处理器执行时，使得计算机设备能够执行图3实施例提供的油气管道系统的数据管理方法，或者，执行图4实施例提供的数据管理方法中由数据管理服务器执行的步骤。
一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行图3所示实施例提供的油气管道系统的数据管理方法，或者，执行图4实施例提供的数据管理方法中由数据管理服务器执行的步骤。
以上所述仅为本公开的可选实施例，并不用以限制本公开，凡在本公开的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本公开的保护范围之内。
Claims (10)
1.一种用于油气管道系统的数据管理系统，其特征在于，所述油气管道系统包括沿所述油气管道依次布置的多个区段，每个区段分布有多个数据采集设备；
所述数据管理系统包括：数据管理服务器和多个数据节点服务器；
所述多个数据节点服务器与所述多个区段一一对应，所述数据节点服务器用于获取并存储对应区段中的数据采集设备采集到的管道数据；
所述数据管理服务器用于接收数据请求，所述数据请求用于请求目标数据；以及根据所述数据请求向目标数据节点服务器发送数据传输请求，所述目标数据节点服务器为所述目标数据所在的数据节点服务器；
所述目标数据节点服务器用于根据接收到的所述数据传输请求，向所述数据请求的发送方发送所述目标数据。
2.根据权利要求1所述的数据管理系统，其特征在于，所述目标数据节点服务器与对应的数据采集设备之间的数据传输连接为单向数据传输连接，所述目标数据节点服务器用于通过所述单向数据传输连接定期获取并保存所述管道数据；根据所述数据传输请求从保存的所述管道数据中获取所述目标数据发送给所述数据请求的发送方。
3.根据权利要求1所述的数据管理系统，其特征在于，所述数据管理服务器还用于在根据所述数据请求向目标数据节点服务器发送数据传输请求之前，对所述数据请求进行权限审核；根据审核通过的数据请求向目标数据节点服务器发送数据传输请求。
4.根据权利要求1至3任一项所述的数据管理系统，其特征在于，所述目标数据节点服务器还用于在接收到所述数据传输请求后，对所述数据管理服务器进行身份认证；响应于确定所述数据管理服务器通过身份认证，向所述发送方发送所述目标数据。
5.根据权利要求1至3任一项所述的数据管理系统，其特征在于，所述目标数据节点服务器还用于将所述目标数据转换为目标数据格式，所述目标数据格式为所述发送方支持的数据格式；将所述目标数据格式的目标数据，发送给所述发送方。
6.一种用于油气管道系统的数据管理方法，其特征在于，应用于上述权利要求1至5任一项所述的数据管理系统，所述数据管理方法包括：
数据管理服务器接收数据请求，所述数据请求用于请求目标数据；
所述数据管理服务器根据所述数据请求向目标数据节点服务器发送数据传输请求，所述目标数据节点服务器为所述目标数据所在的数据节点服务器，所述数据传输请求用于指示所述目标数据节点服务器将所述目标数据发送给所述数据请求的发送方。
7.根据权利要求6所述的数据管理方法，其特征在于，所述数据管理方法还包括：
所述数据管理服务器在根据所述数据请求向目标数据节点服务器发送数据传输请求之前，对所述数据请求进行权限审核；
根据审核通过的数据请求向目标数据节点服务器发送数据传输请求。
8.一种用于油气管道系统的数据管理装置，其特征在于，所述数据管理装置包括：
接收模块，用于接收数据请求，所述数据请求用于请求目标数据；
发送模块，用于根据所述数据请求向目标数据节点服务器发送数据传输请求，所述目标数据节点服务器为所述目标数据所在的数据节点服务器，所述数据传输请求用于指示所述目标数据节点服务器将所述目标数据发送给所述数据请求的发送方。
9.一种计算机设备，其特征在于，包括：
处理器；
用于存储处理器可执行指令的存储器；
其中，所述处理器被配置为执行如权利要求6或7所述的方法。
10.一种计算机可读存储介质，其特征在于，当计算机可读存储介质中的指令由计算机设备的处理器执行时，使得计算机设备能够执行如权利要求6或7所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110478950.5A CN115277738A (zh) | 2021-04-30 | 2021-04-30 | 数据管理系统、方法、装置、设备和存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110478950.5A CN115277738A (zh) | 2021-04-30 | 2021-04-30 | 数据管理系统、方法、装置、设备和存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN115277738A true CN115277738A (zh) | 2022-11-01 |
Family
ID=83744990
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110478950.5A Pending CN115277738A (zh) | 2021-04-30 | 2021-04-30 | 数据管理系统、方法、装置、设备和存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115277738A (zh) |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101555991A (zh) * | 2009-05-21 | 2009-10-14 | 北京航空航天大学 | 一种天然气管网安全监测的无线传感器网络节点装置 |
| CN102801773A (zh) * | 2012-03-09 | 2012-11-28 | 无锡互惠信息技术有限公司 | 物联网系统和物品信息获取及监控方法 |
| US20160356665A1 (en) * | 2015-06-02 | 2016-12-08 | Umm Al-Qura University | Pipeline monitoring systems and methods |
| CN106567997A (zh) * | 2016-04-24 | 2017-04-19 | 内蒙古科技大学 | 基于物联网的油气管道远程实时健康监测系统 |
| CN111435923A (zh) * | 2019-01-13 | 2020-07-21 | 强力物联网投资组合2016有限公司 | 用于监测和管理工业环境的方法、系统、套件及设备 |
-
2021
- 2021-04-30 CN CN202110478950.5A patent/CN115277738A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101555991A (zh) * | 2009-05-21 | 2009-10-14 | 北京航空航天大学 | 一种天然气管网安全监测的无线传感器网络节点装置 |
| CN102801773A (zh) * | 2012-03-09 | 2012-11-28 | 无锡互惠信息技术有限公司 | 物联网系统和物品信息获取及监控方法 |
| US20160356665A1 (en) * | 2015-06-02 | 2016-12-08 | Umm Al-Qura University | Pipeline monitoring systems and methods |
| CN106567997A (zh) * | 2016-04-24 | 2017-04-19 | 内蒙古科技大学 | 基于物联网的油气管道远程实时健康监测系统 |
| CN111435923A (zh) * | 2019-01-13 | 2020-07-21 | 强力物联网投资组合2016有限公司 | 用于监测和管理工业环境的方法、系统、套件及设备 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20240104672A1 (en) | Supply system and method of operating a supply system | |
| US20180274943A1 (en) | Control System of an Entity | |
| WO2018147901A1 (en) | Building management system with declarative views of timeseries data | |
| JP2019501612A (ja) | 供給システムのメータおよび供給システム | |
| US20050240545A1 (en) | Methods and systems for monitoring and diagnosing machinery | |
| CN105160724A (zh) | 一种基于手机app的危险化学品企业关键设备巡检系统 | |
| CN104965481A (zh) | 一种基于云计算的水处理监控平台 | |
| CN112995327B (zh) | 一种云平台系统、工厂端、工业云平台及服务对接系统 | |
| CN107610267A (zh) | 站点巡检方法 | |
| CN104199405A (zh) | 液化天然气站监控系统 | |
| CN113177730A (zh) | 一种水资源溯源管理系统 | |
| WO2013040851A1 (zh) | 基于云计算的发电机组管理控制系统及方法 | |
| CN112949798B (zh) | 基于rfid技术的实验室设备管理方法及其系统 | |
| CN103678423A (zh) | 数据文件导入系统、装置及方法 | |
| CN101800739B (zh) | 面向服务的松耦合信息交换系统及方法 | |
| Zuo et al. | A blockchain-based IoT framework for oil field remote monitoring and control | |
| CN107256466A (zh) | 一种燃气工程施工管理系统及管理方法 | |
| US20240114340A1 (en) | Systems and methods for security of a hydrocarbon system | |
| CN204883299U (zh) | 一种lng加注站远程测控调度scada系统 | |
| CN114357473A (zh) | 一种基于区块链的虚拟电厂聚合与分布式调控系统及方法 | |
| CN115277738A (zh) | 数据管理系统、方法、装置、设备和存储介质 | |
| GB2536948A (en) | System and method for monitoring maintenance of appliances | |
| CN112541194B (zh) | 工程建设实测实量数据上链方法及其工程检测管理方法 | |
| US10353365B2 (en) | Electric power facilities identification number generation apparatus and method | |
| CN111199391B (zh) | 燃气调压设备维保信息处理方法、系统、装置及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |