CN111830913A - 一种数据获取方法及装置 - Google Patents

一种数据获取方法及装置 Download PDF

Info

Publication number
CN111830913A
CN111830913A CN201910323241.2A CN201910323241A CN111830913A CN 111830913 A CN111830913 A CN 111830913A CN 201910323241 A CN201910323241 A CN 201910323241A CN 111830913 A CN111830913 A CN 111830913A
Authority
CN
China
Prior art keywords
data
time period
dpu
dcs
sub
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910323241.2A
Other languages
English (en)
Inventor
李昊夫
吕大军
李文
邢聪聪
王朝辉
苏玉琰
安平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Guodian Zhishen Control Technology Co ltd
Original Assignee
Beijing Guodian Zhishen Control Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Guodian Zhishen Control Technology Co ltd filed Critical Beijing Guodian Zhishen Control Technology Co ltd
Priority to CN201910323241.2A priority Critical patent/CN111830913A/zh
Publication of CN111830913A publication Critical patent/CN111830913A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00—Programme-control systems
    • G05B19/02—Programme-control systems electric
    • G05B19/418—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS], computer integrated manufacturing [CIM]
    • G05B19/4183—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS], computer integrated manufacturing [CIM] characterised by data acquisition, e.g. workpiece identification
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00—Programme-control systems
    • G05B19/02—Programme-control systems electric
    • G05B19/418—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS], computer integrated manufacturing [CIM]
    • G05B19/41845—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS], computer integrated manufacturing [CIM] characterised by system universality, reconfigurability, modularity
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/30—Nc systems
    • G05B2219/33—Director till display
    • G05B2219/33273—DCS distributed, decentralised controlsystem, multiprocessor
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Abstract

本发明实施例公开了一种数据获取方法及装置，包括：分散控制系统(DCS)历史站获取相邻两次接收的分散处理单元(DPU)的数据的两个时间信息；当获得的两个时间的时间差大于预设时间差，向DPU请求获取两个时间形成的时间段的数据，以使DPU在自身预先存储的数据中获取相应的数据，存储来自DPU的数据。本申请使得DCS历史站在DPU离线、历史站故障、网络异常等情况下实现了数据获取，从而避免了数据的永久性丢失。

Description

一种数据获取方法及装置
技术领域
本发明实施例涉及计算机技术领域，尤其涉及一种数据获取方法及装置。
背景技术
分散控制系统(Distributed Control System，DCS)是工业领域中常见的一种控制系统，该系统除了完成对工业生产过程的监视和控制以外，还会通过其中包括的历史站(专门用于存储历史数据的计算机)和分散处理单元(Distributed Processing Unit，DPU)将工业生产过程中产生的实时数据收集起来形成历史数据，以满足数据查询和检索的需求。
相关技术中，历史站通过DCS网络从若干个DPU中获取实时数据并存入自身的数据库中，实现了数据的收集。
然而，由于这种方法是实时获取数据的，因此往往由于DPU离线、历史站故障、网络异常等原因无法获取到实时数据，从而造成数据的永久性丢失。
发明内容
为了解决上述技术问题，本发明实施例提供一种数据获取方法及装置，能够使DCS历史站在DPU离线、历史站故障、网络异常等情况下实现数据获取，从而避免数据的永久性丢失。
为了达到本发明实施例目的，本发明实施例提供了一种数据获取方法，包括：
DCS历史站获取相邻两次接收的DPU的数据的两个时间信息；
当获得的两个时间的时间差大于预设时间差，向所述DPU请求获取所述两个时间形成的时间段的数据，以使所述DPU在自身预先存储的数据中获取相应的数据；
存储来自所述DPU的数据。
所述向DPU请求获取两个时间形成的时间段的数据，包括：
当所述形成的时间段大于第一预设时间段，将所述形成的时间段划分成若干个小于所述第一预设时间段的子时间段；
按照所述子时间段的先后顺序向所述DPU请求获取每一个所述子时间段的数据。
所述按照子时间段的先后顺序向DPU请求获取每一个子时间段的数据，包括：
按照所述子时间段的先后顺序向所述DPU请求获取每一个子时间段的数据，同时每隔第二预设时间段获取自身所在网络的负载；
当获得的网络的负载大于预设阈值，停止请求获取所述子时间段的数据；
当获得的网络的负载小于预设阈值，继续请求获取所述子时间段的数据。
所述获取并存储来自DPU的数据之前或之后，还包括：
获取来自交互终端的携带有第一DPU标识的获取第一目标时间段的数据的请求；
向与所述第一DPU标识对应的DPU请求获取所述第一目标时间段的数据；
获取并存储来自所述与第一DPU标识对应的DPU的所述第一目标时间段的数据。
所述获取并存储来自DPU的数据之前或之后，还包括：
获取来自交互终端的携带有第二DPU标识的查询第二目标时间段的数据的请求；
当所述第二目标时间段与DPU数据存储时间段之间存在重合的时间段，向与所述第二DPU标识对应的DPU发送查询第三目标时间段的数据的请求；其中，所述第三目标时间段包含在所述重合的时间段内；
获取来自与第二DPU标识对应的DPU的所述第三目标时间段的数据；
在自身中查找与所述第二DPU标识对应的DPU的、所述第二目标时间段中除所述第三目标时间段外剩余时间段的数据；
合并接收得到的第三目标时间段的数据和查找得到的第二目标时间段中除所述第三目标时间段外剩余时间段的数据，得到所述第二目标时间段的数据并返回给所述交互终端。
本发明实施例还提供了一种数据获取方法，包括：
DPU接收来自DCS历史站的获取由相邻两次数据接收时间形成的时间段的数据的请求；
在自身存储的数据中查找所述形成的时间段的数据；
向所述DCS历史站发送查找到的数据。
所述接收来自DCS历史站的获取由相邻两次数据接收时间形成的时间段的数据的请求之前，还包括：
采集与自身相连的装置所产生的数据并将所采集得到的数据进行存储。
所述接收来自DCS历史站的获取由相邻两次数据接收时间形成的时间段的数据的请求，包括：
接收来自所述DCS历史站的按照子时间段的先后顺序的获取每一个所述子时间段的数据的请求；其中，所述每一个子时间段为所述DCS历史站将所述形成的时间段划分成的若干个小于第一预设时间段的时间段。
所述向DCS历史站发送查找到的数据，包括：
当所述第一时间段大于第三预设时间段，将所述第一时间段的数据划分成若干个时间段小于所述第三预设时间段的子时间段的数据；
按照所述子时间段的先后顺序向所述DCS历史站发送每一个所述子时间段的数据。
所述接收来自DCS历史站的获取由相邻两次数据接收时间形成的时间段的数据之前或之后，还包括：
接收来自所述DCS历史站发送的查询第三目标时间段的数据的请求；
在自身存储的数据中查找所述第三目标时间段的数据；
向所述DCS历史站发送所述第三目标时间段的数据。
本发明实施例还提供了一种分散控制系统DCS历史站，包括：
第一获取模块，用于获取相邻两次接收的来自分散处理单元DPU的数据的两个时间信息；
第一发送模块，用于当获得的两个时间的时间差大于预设时间差，向所述DPU请求获取所述两个时间形成的时间段的数据，以使所述DPU在自身预先存储的数据中获取相应的数据；
第一处理模块，用于存储来自所述DPU的数据。
本发明实施例还提供了一种分散处理单元DPU，包括：
第二获取模块，用于接收来自DCS历史站的获取由相邻两次数据接收时间形成的时间段的数据的请求；
第二处理模块，用于在自身存储的数据中查找所述形成的时间段的数据；
第二发送模块，用于向所述DCS历史站发送查找到的数据。
本发明实施例还提供了一种分散控制系统DCS，包括一个如上所述的DCS历史站和若干个如上所述的DPU。
本发明实施例至少包括：DCS历史站获取相邻两次接收的DPU的数据的两个时间信息；当获得的两个时间的时间差大于预设时间差，向DPU请求获取两个时间形成的时间段的数据，以使DPU在自身预先存储的数据中获取相应的数据；存储来自DPU的数据。由于当相邻两次数据接收时间的时间差大于预设时间差时，DCS历史站会向存储有数据的DPU发送数据获取请求用于获取这两次接收时间之间时间段的数据，因此实现了DCS历史站在DPU离线、历史站故障、网络异常等情况下的数据获取，从而避免了数据的永久性丢失。
本发明实施例的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明实施例而了解。本发明实施例的目的和其他优点可通过在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。
附图说明
附图用来提供对本发明实施例技术方案的进一步理解，并且构成说明书的一部分，与本申请的实施例一起用于解释本发明实施例的技术方案，并不构成对本发明实施例技术方案的限制。
图1为本发明实施例提供的一种数据获取方法的流程示意图；
图2为本发明实施例提供的另一种数据获取方法的流程示意图；
图3为本发明实施例提供的一种DCS历史站的结构示意图；
图4为本发明实施例提供的一种DPU的结构示意图；
图5为本发明实施例提供的一种DCS的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚明白，下文中将结合附图对本发明实施例的实施例进行详细说明。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互任意组合。
本发明实施例提供一种数据获取方法，如图1所示，该方法包括：
步骤101、DCS历史站获取相邻两次接收的来自DPU的数据的两个时间信息。
在一种示例性实例中，DPU一旦采集到数据就会向DCS历史站实时发送，DCS历史站接收发送过来的数据，并获取相邻两次接收的来自DPU的数据的两个时间信息。
步骤102、当获得的两个时间的时间差大于预设时间差，向DPU请求获取两个时间形成的时间段的数据，以使DPU在自身预先存储的数据中获取相应的数据。
在一种示例性实例中，预设时间差是根据具体应用场景预先设置的，预设时间差可以设置为0.5S，当相邻两次接收的来自DPU的数据的两个时间的时间差大于0.5S，则说明在两个时间形成的时间段存在数据丢失的现象，因此需要向DPU请求获取这段时间段的数据。
在一种示例性实例中，两个时间形成的时间段指的是由两个时间中较早的时间至较晚的时间形成的时间段，举例来说，假设两个时间分别是9:55和9:58，那么形成的时间段是9:55-9:58。
步骤103、获取并存储来自DPU的数据。
本发明实施例所提供的数据获取方法，DCS历史站获取相邻两次接收的DPU的数据的两个时间信息；当获得的两个时间的时间差大于预设时间差，向DPU请求获取两个时间形成的时间段的数据，以使DPU在自身预先存储的数据中获取相应的数据；存储来自DPU的数据。由于当相邻两次数据接收时间的时间差大于预设时间差时，DCS历史站会向存储有数据的DPU发送数据获取请求用于获取这两次接收时间之间时间段的数据，因此使得DCS历史站在DPU离线、历史站故障、网络异常等情况下实现了数据获取，从而避免了数据的永久性丢失。
在一种示例性实例中，向DPU请求获取两个时间形成的时间段的数据，包括：
步骤102a、当形成的时间段大于第一预设时间段，将形成的时间段划分成若干个小于第一预设时间段的子时间段。
在一种实施例实例中，假设所形成的时间段是9:55-9:58，第一预设时间段是40s，那么可以将所形成的时间段划分为若干个小于40s的子时间段，例如9:55:01-9:55:30、9:55:31-9:56:00、9:56:01-9:56:30、9:56:31-9:57:00、9:57:01-9:57:30、9:57:31-9:58:00。
步骤102b、按照子时间段的先后顺序向DPU请求获取每一个子时间段的数据。
在一种实施例实例中，假设子时间段为9:55:01-9:55:30、9:55:31-9:56:00、9:56:01-9:56:30、9:56:31-9:57:00、9:57:01-9:57:30、9:57:31-9:58:00，那么按照子时间段的先后顺序向DPU请求获取子时间段9:55:01-9:55:30的数据，然后向DPU请求获取子时间段9:55:31-9:56:00的数据，接着向DPU请求获取子时间段9:56:01-9:56:30的数据，接着向DPU请求获取子时间段9:56:31-9:57:00的数据，接着向DPU请求获取子时间段9:57:01-9:57:30的数据，最后向DPU请求获取子时间段30、9:57:31-9:58:00的数据。
在一种示例性实例中，按照子时间段的先后顺序向DPU请求获取每一个子时间段的数据，包括：
步骤102b1、按照子时间段的先后顺序向DPU请求获取每一个子时间段的数据，同时每隔第二预设时间段获取自身所在网络的负载。
在一种示例性实例中，第二预设时间段是根据具体应用场景预先设置的。
步骤102b2、当获得的网络的负载大于预设阈值，停止请求获取子时间段的数据。
步骤102b3、当获得的网络的负载小于预设阈值，继续请求获取子时间段的数据。
在一种示例性实例中，获取并存储来自DPU的数据之前或之后，还包括：
步骤104、获取来自交互终端的携带有第一DPU标识的获取第一目标时间段的数据的请求。
在一种示例性实例中，用户利用交互终端发现DCS历史站中某个DPU的某一时间段(可以记为第一目标时间段)的数据存在缺失，可以主动进行该DPU的第一目标时间段的数据获取。
步骤105、向与第一DPU标识对应的DPU请求获取第一目标时间段的数据。
在一种示例性实例中，在向与第一DPU标识对应的DPU请求获取第一目标时间段的数据之前，可以先判断第一目标时间段是否包含在DPU数据存储时间段中，如果确定第一目标时间段包含在DPU数据存储时间段中，向与第一DPU标识对应的DPU请求获取第一目标时间段的数据，从而确保第一目标时间段的数据存储在DPU中能够被获取得到。
步骤106、获取并存储来自与第一DPU标识对应的DPU的第一目标时间段的数据。
在一种示例性实例中，获取并存储来自DPU的数据之前或之后，还包括：
步骤107、获取来自交互终端的携带有第二DPU标识的查询第二目标时间段的数据的请求。
在一种示例性实例中，用户利用交互终端可以对DCS历史站进行某个时间段(可以记为第二目标时间段)的数据查询。
步骤108、当第二目标时间段与DPU数据存储时间段之间存在重合的时间段，向与第二DPU标识对应的DPU发送查询第三目标时间段的数据的请求。
其中，第三目标时间段包含在重合的时间段内。
在一种示例性实例中，由于DPU的存储空间有限，无法无限期地存储所采集到的数据，只能存储一段时间的数据，因此需要确定所查询的时间段是否与DPU数据存储时间段之间存在重合。
在一种示例性实例中，如果第二目标时间段与DPU数据存储时间段之间存在重合的时间段，那么可以向与第二DPU标识对应的DPU发送查询包含在重合的时间段内的第三目标时间段的数据的请求，使得DCS历史站能够将一部分查询任务分给DPU，从而减轻自身的查询压力。
步骤109、获取来自与第二DPU标识对应的DPU的第三目标时间段的数据。
步骤110、在自身中查找与第二DPU标识对应的DPU的、第二目标时间段中除第三目标时间段外剩余时间段的数据。
步骤111、合并接收得到的第三目标时间段的数据和查找得到的第二目标时间段中除第三目标时间段外剩余时间段的数据，得到第二目标时间段的数据并返回给交互终端。
本发明实施例提供一种数据获取，如图2所示，该方法包括：
步骤201、DPU接收来自DCS历史站的获取由相邻两次数据接收时间形成的时间段的数据的请求。
在一种示例性实例中，由相邻两次数据接收时间形成的时间段是DCS历史站获取相邻两次接收的来自DPU的数据的两个时间信息，并当获得的两个时间的时间差大于预设时间差由两个时间形成。
步骤202、在自身存储的数据中查找形成的时间段的数据。
步骤203、向DCS历史站发送查找到的数据。
本发明实施例所提供的数据获取方法，DPU接收来自DCS历史站的获取由相邻两次数据接收时间形成的时间段的数据的请求；在自身存储的数据中查找形成的时间段的数据；向DCS历史站发送查找到的数据。由于DPU在自身存储的数据中查找DCS历史站所请求的时间段的数据，并向DCS历史站发送查找到的数据，因此使得DCS历史站在DPU离线、历史站故障、网络异常等情况下实现了数据获取，从而避免了数据的永久性丢失。
在一种示例性实例中，接收来自DCS历史站的获取由相邻两次数据接收时间形成的时间段的数据的请求之前，还包括：
步骤204、采集与自身相连的装置所产生的数据并将所采集得到的数据进行存储。
在一种示例性实例中，接收来自DCS历史站的获取由相邻两次数据接收时间形成的时间段的数据的请求，包括：
步骤201a、接收来自DCS历史站的按照子时间段的先后顺序的获取每一个子时间段的数据的请求。
其中，每一个子时间段为DCS历史站将形成的时间段划分成的若干个小于第一预设时间段的时间段。
在一种示例性实例中，向DCS历史站发送查找到的数据，包括：
步骤203a、当第一时间段大于第三预设时间段，将第一时间段的数据划分成若干个时间段小于第三预设时间段的子时间段的数据。
步骤203b、按照子时间段的先后顺序向DCS历史站发送每一个子时间段的数据。
在一种示例性实例中，查找到的数据容量比较大，直接传输容易造成网络拥塞，因此可以将查找到的数据按照所属时间段进行划分，然后分段传输。举例来说，假设查找到的数据是时间段9:30-9:35的数据，可以将时间段9:30-9:35的数据进行划分，划分为子时间段9:30-9:31的数据、子时间段9:31-9:32的数据、子时间段9:32-9:33的数据、子时间段9:33-9:34的数据、子时间段9:34-9:35的数据，然后按照子时间段的先后顺序发送这些子时间段的数据。
在一种示例性实例中，按照子时间段的先后顺序向DCS历史站发送每一个子时间段的数据同时，还可以每隔预设时间段获取DPU自身所在网络的负载，当负载大于某一阈值，停止发送子时间段的数据，当负载小于某一阈值，继续发送子时间段的数据。
在一种示例性实例中，接收来自DCS历史站的获取由相邻两次数据接收时间形成的时间段的数据之前或之后，还包括：
步骤205、接收来自DCS历史站发送的查询第三目标时间段的数据的请求。
步骤206、在自身存储的数据中查找第三目标时间段的数据。
步骤207、向DCS历史站发送第三目标时间段的数据。
本发明实施例提供一种DCS历史站，如图3所示，该DCS历史站3包括：
第一获取模块31，用于获取相邻两次接收的来自分散处理单元DPU的数据的两个时间信息。
第一发送模块32，当获得的两个时间的时间差大于预设时间差，向DPU请求获取两个时间形成的时间段的数据，以使DPU在自身预先存储的数据中获取相应的数据。
第一处理模块33，用于存储来自DPU的数据。
在一种示例性实例中，第一发送模块32具体用于：
当形成的时间段大于第一预设时间段，将形成的时间段划分成若干个小于第一预设时间段的子时间段。
按照子时间段的先后顺序向DPU请求获取每一个子时间段的数据。
在一种示例性实例中，第一发送模块32具体用于：
按照子时间段的先后顺序向DPU请求获取每一个子时间段的数据，同时每隔第二预设时间段获取自身所在网络的负载。
当获得的网络的负载大于预设阈值，停止请求获取子时间段的数据。
当获得的网络的负载小于预设阈值，继续请求获取子时间段的数据。
在一种示例性实例中，第一获取模块31，还用于获取来自交互终端的携带有第一DPU标识的获取第一目标时间段的数据的请求。
第一发送模块32，还用于向与第一DPU标识对应的DPU请求获取第一目标时间段的数据。
第一处理模块33，还用于获取并存储来自与第一DPU标识对应的DPU的第一目标时间段的数据。
在一种示例性实例中，第一获取模块31，还用于获取来自交互终端的携带有第二DPU标识的查询第二目标时间段的数据的请求。
第一发送模块32，还用于当第二目标时间段与DPU数据存储时间段之间存在重合的时间段，向与第二DPU标识对应的DPU发送查询第三目标时间段的数据的请求；其中，第三目标时间段包含在重合的时间段内。
第一获取模块31，还用于获取来自与第二DPU标识对应的DPU的第三目标时间段的数据。
第一处理模块33，还用于在DCS历史站中查找与第二DPU标识对应的DPU的、第二目标时间段中除第三目标时间段外剩余时间段的数据。
第一处理模块33，还用于合并接收得到的第三目标时间段的数据和查找得到的第二目标时间段中除第三目标时间段外剩余时间段的数据，得到第二目标时间段的数据并返回给交互终端。
本发明实施例所提供的DCS历史站，DCS历史站获取相邻两次接收的DPU的数据的两个时间信息；当获得的两个时间的时间差大于预设时间差，向DPU请求获取两个时间形成的时间段的数据，以使DPU在自身预先存储的数据中获取相应的数据；存储来自DPU的数据。由于当相邻两次数据接收时间的时间差大于预设时间差时，DCS历史站会向存储有数据的DPU发送数据获取请求用于获取这两次接收时间之间时间段的数据，因此使得DCS历史站在DPU离线、历史站故障、网络异常等情况下实现了数据获取，从而避免了数据的永久性丢失。
在实际应用中，所述第一获取模块31、第一发送模块32和第一处理模块33位于DCS历史站中的中央处理器(Central Processing Unit，CPU)、微处理器(Micro ProcessorUnit，MPU)、数字信号处理器(Digital Signal Processor，DSP)或现场可编程门阵列(Field Programmable Gate Array，FPGA)等实现。
本发明实施例提供一种DPU，如图4所示，该DPU 4包括：
第二获取模块41，用于接收来自DCS历史站的获取由相邻两次数据接收时间形成的时间段的数据的请求。
第二处理模块42，用于在DPU存储的数据中查找形成的时间段的数据。
第二发送模块43，用于向DCS历史站发送查找到的数据。
在一种示例性实例中，第二处理模块42，还用于采集与自身相连的装置所产生的数据并将所采集得到的数据进行存储。
在一种示例性实例中，第二获取模块41，具体用于接收来自DCS历史站的按照子时间段的先后顺序的获取每一个子时间段的数据的请求；其中，每一个子时间段为DCS历史站将形成的时间段划分成的若干个小于第一预设时间段的时间段。
在一种示例性实例中，第二发送模块43具体用于：
当第一时间段大于第三预设时间段，将第一时间段的数据划分成若干个时间段小于第三预设时间段的子时间段的数据。
按照子时间段的先后顺序向DCS历史站发送每一个子时间段的数据。
在一种示例性实例中，第二获取模块41，还用于接收来自DCS历史站发送的查询第三目标时间段的数据的请求。
第二处理模块42，还用于在DPU存储的数据中查找第三目标时间段的数据。
第二发送模块43，还用于向DCS历史站发送第三目标时间段的数据。
本发明实施例所提供的DPU，接收来自DCS历史站的获取由相邻两次数据接收时间形成的时间段的数据的请求；在自身存储的数据中查找形成的时间段的数据；向DCS历史站发送查找到的数据。由于DPU在自身存储的数据中查找DCS历史站所请求的时间段的数据，并向DCS历史站发送查找到的数据，因此使得DCS历史站在DPU离线、历史站故障、网络异常等情况下实现了数据获取，从而避免了数据的永久性丢失。
在实际应用中，所述第二获取模块41、第二处理模块42和第二发送模块43位于DPU中的CPU、MPU、DSP或FPGA等实现。
本发明实施例还提供一种数据获取装置，包括存储器，处理器及存储在存储器上并可在处理器运行的计算机程序，处理器执行计算机程序时实现上述实施例中任意一种数据获取方法。
本发明实施例一种计算机可读存储介质，存储介质上存储有计算机可执行命令，计算机可执行命令用于执行如上述实施例中任意一种数据获取方法。
本发明实施例还提供一种DCS，包括一个上述的DCS历史站和若干个上述的DPU。
本发明实时还提供一种DCS，如图5所示，该DCS包括一个历史站和若干个DPU，其中，历史站中包括历史存储模块和历史服务管理模块，DPU中包括DPU历史模块，该模块包含一个小型历史数据库，用于将当前DPU产生的实时数据保存为历史数据。
DPU历史模块从本DPU的内存中获取实时数据，并存入数据库中。
DPU历史模块可以响应历史服务管理模块的历史数据查询请求，返回查询结果。
历史存储模块从DCS网络获取实时数据，并存入数据库中。
历史存储模块可以响应历史服务管理模块的历史数据查询请求，返回查询结果。
历史存储模块可以接收历史服务管理模块发来的补充历史数据，并将其补写入数据库中。
历史服务管理模块为每个DPU记录最新数据包的接收时间(t1)，并将其保存在硬盘中。在写入接收时间之前，会将t1与前次写入的接收时间(t1’)做对比。如果两者差值大于某一阈值(记为T，DCS系统对实时数据刷新间隔的最大允许时间)，则说明该DPU与历史站之间的实时数据通讯发生异常，历史服务管理模块向该DPU请求t1’至t1时间段内的历史数据，收到历史数据后，将其送至历史存储模块。
历史服务管理模块提供人机接口，可人工指定时间跨度和目标DPU，向目标DPU发送该时间跨度的历史数据查询请求，收到历史数据后，将其送至历史存储模块。
为避免大量历史数据的传输造成DCS网络负荷过高，对发送至DPU历史模块的查询请求设置最大时间跨度(t0)。当历史数据查询的时间跨度>t0时，将该时间跨度切分为若干时间长度小于等于t0的时间段，按顺序向DPU历史模块发送历史数据查询请求。(从性能角度考虑，要求t0至少大于10x T)。
历史服务管理模块监视DCS的网络负载，当网络负载大于阈值(事先设定)时，停止向DPU发送历史数据查询请求。
历史服务管理模块负责处理用户提出的历史数据的检索请求。
当历史服务管理模块接收到用户的查询请求后，会将查询请求分解为多个请求，分别发送给历史存储模块和DPU历史模块并行执行，将返回的结果组合后发送给用户。
虽然本发明实施例所揭露的实施方式如上，但所述的内容仅为便于理解本发明实施例而采用的实施方式，并非用以限定本发明实施例。任何本发明实施例所属领域内的技术人员，在不脱离本发明实施例所揭露的精神和范围的前提下，可以在实施的形式及细节上进行任何的修改与变化，但本发明实施例的专利保护范围，仍须以所附的权利要求书所界定的范围为准。

Claims (13)

1.一种数据获取方法，其特征在于，包括：
分散控制系统DCS历史站获取相邻两次接收的来自分散处理单元DPU的数据的两个时间信息；
当获得的两个时间的时间差大于预设时间差，向所述DPU请求获取所述两个时间形成的时间段的数据，以使所述DPU在自身预先存储的数据中获取相应的数据；
存储来自所述DPU的数据。
2.根据权利要求1所述的数据获取方法，其特征在于，所述向DPU请求获取两个时间形成的时间段的数据，包括：
当所述形成的时间段大于第一预设时间段，将所述形成的时间段划分成若干个小于所述第一预设时间段的子时间段；
按照所述子时间段的先后顺序向所述DPU请求获取每一个所述子时间段的数据。
3.根据权利要求2所述的数据获取方法，其特征在于，所述按照子时间段的先后顺序向DPU请求获取每一个子时间段的数据，包括：
按照所述子时间段的先后顺序向所述DPU请求获取每一个子时间段的数据，同时每隔第二预设时间段获取自身所在网络的负载；
当获得的网络的负载大于预设阈值，停止请求获取所述子时间段的数据；
当获得的网络的负载小于预设阈值，继续请求获取所述子时间段的数据。
4.根据权利要求1所述的数据获取方法，其特征在于，所述获取并存储来自DPU的数据之前或之后，还包括：
获取来自交互终端的携带有第一DPU标识的获取第一目标时间段的数据的请求；
向与所述第一DPU标识对应的DPU请求获取所述第一目标时间段的数据；
获取并存储来自所述与第一DPU标识对应的DPU的所述第一目标时间段的数据。
5.根据权利要求1所述的数据获取方法，其特征在于，所述获取并存储来自DPU的数据之前或之后，还包括：
获取来自交互终端的携带有第二DPU标识的查询第二目标时间段的数据的请求；
当所述第二目标时间段与DPU数据存储时间段之间存在重合的时间段，向与所述第二DPU标识对应的DPU发送查询第三目标时间段的数据的请求；其中，所述第三目标时间段包含在所述重合的时间段内；
获取来自与第二DPU标识对应的DPU的所述第三目标时间段的数据；
在自身中查找与所述第二DPU标识对应的DPU的、所述第二目标时间段中除所述第三目标时间段外剩余时间段的数据；
合并接收得到的第三目标时间段的数据和查找得到的第二目标时间段中除所述第三目标时间段外剩余时间段的数据，得到所述第二目标时间段的数据并返回给所述交互终端。
6.一种数据获取方法，其特征在于，包括：
DPU接收来自DCS历史站的获取由相邻两次数据接收时间形成的时间段的数据的请求；
在自身存储的数据中查找所述形成的时间段的数据；
向所述DCS历史站发送查找到的数据。
7.根据权利要求6所述的数据获取方法，其特征在于，所述接收来自DCS历史站的获取由相邻两次数据接收时间形成的时间段的数据的请求之前，还包括：
采集与自身相连的装置所产生的数据并将所采集得到的数据进行存储。
8.根据权利要求6所述的数据获取方法，其特征在于，所述接收来自DCS历史站的获取由相邻两次数据接收时间形成的时间段的数据的请求，包括：
接收来自所述DCS历史站的按照子时间段的先后顺序的获取每一个所述子时间段的数据的请求；其中，所述每一个子时间段为所述DCS历史站将所述形成的时间段划分成的若干个小于第一预设时间段的时间段。
9.根据权利要求6所述的数据获取方法，其特征在于，所述向DCS历史站发送查找到的数据，包括：
当所述第一时间段大于第三预设时间段，将所述第一时间段的数据划分成若干个时间段小于所述第三预设时间段的子时间段的数据；
按照所述子时间段的先后顺序向所述DCS历史站发送每一个所述子时间段的数据。
10.根据权利要求6所述的数据获取方法，其特征在于，所述接收来自DCS历史站的获取由相邻两次数据接收时间形成的时间段的数据之前或之后，还包括：
接收来自所述DCS历史站发送的查询第三目标时间段的数据的请求；
在自身存储的数据中查找所述第三目标时间段的数据；
向所述DCS历史站发送所述第三目标时间段的数据。
11.一种分散控制系统DCS历史站，其特征在于，包括：
第一获取模块，用于获取相邻两次接收的来自分散处理单元DPU的数据的两个时间信息；
第一发送模块，用于当获得的两个时间的时间差大于预设时间差，向所述DPU请求获取所述两个时间形成的时间段的数据，以使所述DPU在自身预先存储的数据中获取相应的数据；
第一处理模块，用于存储来自所述DPU的数据。
12.一种分散处理单元DPU，其特征在于，包括：
第二获取模块，用于接收来自DCS历史站的获取由相邻两次数据接收时间形成的时间段的数据的请求；
第二处理模块，用于在自身存储的数据中查找所述形成的时间段的数据；
第二发送模块，用于向所述DCS历史站发送查找到的数据。
13.一种分散控制系统DCS，其特征在于，包括一个如权利要求11所述的DCS历史站和若干个如权利要求12所述的DPU。
CN201910323241.2A 2019-04-22 2019-04-22 一种数据获取方法及装置 Pending CN111830913A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910323241.2A CN111830913A (zh) 2019-04-22 2019-04-22 一种数据获取方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910323241.2A CN111830913A (zh) 2019-04-22 2019-04-22 一种数据获取方法及装置

Publications (1)

Publication Number Publication Date
CN111830913A true CN111830913A (zh) 2020-10-27

Family

ID=72911816

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910323241.2A Pending CN111830913A (zh) 2019-04-22 2019-04-22 一种数据获取方法及装置

Country Status (1)

Country Link
CN (1) CN111830913A (zh)

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7020642B2 (en) * 2002-01-18 2006-03-28 Pavilion Technologies, Inc. System and method for pre-processing input data to a support vector machine
US20110242992A1 (en) * 2010-04-02 2011-10-06 Fujitsu Limited Failure-section determining device and failure-section determining method
CN202058147U (zh) * 2011-05-23 2011-11-30 北京六所和瑞科技发展有限公司 分布式实时数据库管理系统
CN102664893A (zh) * 2012-04-23 2012-09-12 重庆理工大学 自适应重传与分段嵌入签名的数据传输方法
CN103001885A (zh) * 2012-12-25 2013-03-27 中国科学院深圳先进技术研究院 数据报文传输方法和系统
CN103580760A (zh) * 2012-07-26 2014-02-12 深圳市加力尔电子科技有限公司 胎压监测系统及其rf通讯效率测试方法
CN104243172A (zh) * 2013-06-07 2014-12-24 国家电网公司 一种分散控制系统的扩展输入输出装置和方法
CN106649358A (zh) * 2015-10-30 2017-05-10 北京国双科技有限公司 数据获取方法及装置
CN106656431A (zh) * 2015-09-21 2017-05-10 华为技术有限公司 一种报文传输方法及用户设备
CN106708992A (zh) * 2016-12-16 2017-05-24 浙江中控技术股份有限公司 一种数据查询方法、装置及系统
CN106937241A (zh) * 2015-12-31 2017-07-07 华为技术有限公司 时序数据检测方法及装置
CN107403005A (zh) * 2017-07-24 2017-11-28 浙江极赢信息技术有限公司 一种网站监控方法及装置
CN107979449A (zh) * 2016-10-25 2018-05-01 杭州海康威视数字技术股份有限公司 一种数据传输方法及装置
CN108921229A (zh) * 2018-07-17 2018-11-30 成都西加云杉科技有限公司 数据恢复方法及装置

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7020642B2 (en) * 2002-01-18 2006-03-28 Pavilion Technologies, Inc. System and method for pre-processing input data to a support vector machine
US20110242992A1 (en) * 2010-04-02 2011-10-06 Fujitsu Limited Failure-section determining device and failure-section determining method
CN202058147U (zh) * 2011-05-23 2011-11-30 北京六所和瑞科技发展有限公司 分布式实时数据库管理系统
CN102664893A (zh) * 2012-04-23 2012-09-12 重庆理工大学 自适应重传与分段嵌入签名的数据传输方法
CN103580760A (zh) * 2012-07-26 2014-02-12 深圳市加力尔电子科技有限公司 胎压监测系统及其rf通讯效率测试方法
CN103001885A (zh) * 2012-12-25 2013-03-27 中国科学院深圳先进技术研究院 数据报文传输方法和系统
CN104243172A (zh) * 2013-06-07 2014-12-24 国家电网公司 一种分散控制系统的扩展输入输出装置和方法
CN106656431A (zh) * 2015-09-21 2017-05-10 华为技术有限公司 一种报文传输方法及用户设备
CN106649358A (zh) * 2015-10-30 2017-05-10 北京国双科技有限公司 数据获取方法及装置
CN106937241A (zh) * 2015-12-31 2017-07-07 华为技术有限公司 时序数据检测方法及装置
CN107979449A (zh) * 2016-10-25 2018-05-01 杭州海康威视数字技术股份有限公司 一种数据传输方法及装置
CN106708992A (zh) * 2016-12-16 2017-05-24 浙江中控技术股份有限公司 一种数据查询方法、装置及系统
CN107403005A (zh) * 2017-07-24 2017-11-28 浙江极赢信息技术有限公司 一种网站监控方法及装置
CN108921229A (zh) * 2018-07-17 2018-11-30 成都西加云杉科技有限公司 数据恢复方法及装置

Similar Documents

Publication Publication Date Title
CN101958838B (zh) 数据访问方法及装置
CN202058147U (zh) 分布式实时数据库管理系统
US7631034B1 (en) Optimizing node selection when handling client requests for a distributed file system (DFS) based on a dynamically determined performance index
CN105338027A (zh) 进行视频数据云存储的方法、系统及装置
CN103517405B (zh) 一种网络定位的方法及系统、移动终端和网络侧设备
US20110055219A1 (en) Database management device and method
CN103544285A (zh) 一种数据加载方法及装置
CN108228322B (zh) 一种分布式链路跟踪、分析方法及服务器、全局调度器
CN105357584A (zh) 一种基于智能电视的用户行为日志分类上传方法及系统
US20180337840A1 (en) System and method for testing filters for data streams in publisher-subscriber networks
US20190028501A1 (en) Anomaly detection on live data streams with extremely low latencies
WO2015172497A1 (zh) 消息推送、获取方法、装置和计算机可读存储介质
CN111858722A (zh) 一种基于物联网的大数据应用系统及方法
CN112732756B (zh) 数据查询方法、装置、设备及存储介质
CN114281524A (zh) 一种智能电缆业务处理系统管理方法及装置
CN106713512B (zh) 动态平衡物联网网络带宽的高效数据传输方法及系统
CN111159131A (zh) 性能优化方法、装置、设备及计算机可读存储介质
CN111830913A (zh) 一种数据获取方法及装置
CN111935310A (zh) 应用于物联网终端的数据上报系统及数据上报方法
CN114338725B (zh) 一种提升大规模集群渲染上限的分布式存储调度方法
CN109831467B (zh) 数据传输方法、设备及系统
CN105794289B (zh) 用于缓解无线干扰的系统及方法
CN113791733A (zh) 信息的存储方法、装置、设备及存储介质
CN103312816A (zh) 一种消息分发方法和设备
CN110515955B (zh) 数据的存储、查询方法、系统、电子设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination