CN105630725A - 一种用于分布式采集系统的数据同步方法 - Google Patents

一种用于分布式采集系统的数据同步方法 Download PDF

Info

Publication number
CN105630725A
CN105630725A CN201510967346.3A CN201510967346A CN105630725A CN 105630725 A CN105630725 A CN 105630725A CN 201510967346 A CN201510967346 A CN 201510967346A CN 105630725 A CN105630725 A CN 105630725A
Authority
CN
China
Prior art keywords
data
class
acquisition system
time
main control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510967346.3A
Other languages
English (en)
Other versions
CN105630725B (zh
Inventor
师伟
陈冕
刘文双
尹骥
叶燕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
AECC Sichuan Gas Turbine Research Institute
Original Assignee
China Gas Turbine Research Institute
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Gas Turbine Research Institute filed Critical China Gas Turbine Research Institute
Priority to CN201510967346.3A priority Critical patent/CN105630725B/zh
Publication of CN105630725A publication Critical patent/CN105630725A/zh
Application granted granted Critical
Publication of CN105630725B publication Critical patent/CN105630725B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/38—Information transfer, e.g. on bus
    • G06F13/42—Bus transfer protocol, e.g. handshake; Synchronisation

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Synchronisation In Digital Transmission Systems (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明属于数据采集技术，涉及一种用于分布式采集系统的数据同步方法。其特征在于，数据同步的步骤如下：采集装置分类；确定时间基准信号；A类采集系统数据同步方法；B类采集系统数据同步方法；C类采集系统数据同步方法；D类采集系统数据同步方法。本发明提出了一种用于分布式采集系统的数据同步方法，保证了分布式采集系统的时间同步，避免了数据采集速率差异对数据分析带来的麻烦，减少了工作量，提高了工作效率。

Description

一种用于分布式采集系统的数据同步方法
技术领域
本发明属于数据采集技术，涉及一种用于分布式采集系统的数据同步方法。
背景技术
现阶段，试验测试系统越来越偏向多系统协同工作，在各种性能试验，功能试验以及故障分析时需全面考虑各系统的工作状态。为了能够准确高效的分析数据，各系统数据应具有统一的时间序列，并且各系统数据能够联合比对。目前的分布式采集系统中有以下A、B、C、D四种类型的采集装置：A类采集装置带有硬件触发功能及时间标签功能；B类采集装置不带有硬件触发功能、带有时间标签功能；C类采集装置带有硬件触发功能、不带有时间标签功能；D类采集装置不带有硬件触发功能及时间标签功能；带有硬件触发功能的采集装置收到一个硬件触发信号后进行一次数据采集，A、B、C、D四种类型的采集装置收到主控计算机发出的一个采集命令后进行一次数据采集；带有时间标签功能是指采集的数据带有时间标签。目前各系统数据都独立采集并且单独存储，时间不同步、数据采集速率差异对数据分析都带来巨大的麻烦，增大了工作量，降低了工作效率。
发明内容
本发明的目的是：提出一种用于分布式采集系统的数据同步方法，以便保证分布式采集系统的时间同步，避免数据采集速率差异对数据分析带来的麻烦，减少工作量，提高工作效率。
本发明的技术方案是：一种用于分布式采集系统的数据同步方法，分布式采集系统中有以下A、B、C、D四种类型的采集装置：A类采集装置带有硬件触发功能及时间标签功能；B类采集装置不带有硬件触发功能、带有时间标签功能；C类采集装置带有硬件触发功能、不带有时间标签功能；D类采集装置不带有硬件触发功能及时间标签功能；带有硬件触发功能的采集装置收到一个硬件触发信号后进行一次数据采集，A、B、C、D四种类型的采集装置收到主控计算机发出的一个采集命令后进行一次数据采集；带有时间标签功能是指采集的数据带有时间标签；其特征在于，数据同步的步骤如下：
1、采集装置分类：主控计算机将分步式采集系统中的采集装置按A、B、C、D四种类型分类；
2、确定时间基准信号：主控计算机选择一个时间信号作为时间基准信号，所选择的时间信号是：GPS时钟信号、北斗时钟时钟信号、原子钟时钟信号或者主控计算机时钟信号；
3、A类采集系统数据同步方法：
3.1、主控计算机将时间基准信号向A类采集系统连续发送；
3.2、A类采集系统接收到时间基准信号后，通过自身时间标签功能，对采集的数据打上时间标签；
3.3、A类采集系统将打上时间标签的数据发送给主控计算机；
4、B类采集系统数据同步方法：
4.1、主控计算机将时间基准信号向B类采集系统连续发送；
4.2、B类采集系统接收到时间基准信号后，通过自身时间标签功能，对采集的数据打上时间标签；
4.3、B类采集系统将打上时间标签的数据发送给主控计算机；
5、C类采集系统数据同步方法：
5.1、A类采集系统接收主控计算机的命令后，向C类采集系统发出硬件触发信号，并实时记录硬件触发信号的个数及产生的时间；
5.2、C类采集系统每接收到一次A类采集系统的硬件触发信号，就采集一次数据，并且对硬件触发信号的总数量进行统计，将硬件触发信号和对应的采集数据发送至主控计算机；
5.3、主控计算机将C类采集系统发送的硬件触发信号和对应的采集数据与A类采集系统发送的硬件触发信号进行比对，比对以后将对应的时间标签打在C类采集系统的采集数据中；
6、D类采集系统数据同步方法：
6.1、D类采集系统收到主控计算机发出的一个采集命令后进行一次数据采集，并且对采集命令的总数量进行统计，将采集命令和对应的数据发给主控计算机，主控计算机根据将收到的采集命令与发出采集命令比对，得到每个采集命令的发出时间，将发出时间作为对应数据的时间标签。
本发明的优点是：提出了一种用于分布式采集系统的数据同步方法，保证了分布式采集系统的时间同步，避免了数据采集速率差异对数据分析带来的麻烦，减少了工作量，提高了工作效率。
具体实施方式
下面对本发明做进一步详细说明。一种用于分布式采集系统的数据同步方法，分布式采集系统中有以下A、B、C、D四种类型的采集装置：A类采集装置带有硬件触发功能及时间标签功能；B类采集装置不带有硬件触发功能、带有时间标签功能；C类采集装置带有硬件触发功能、不带有时间标签功能；D类采集装置不带有硬件触发功能及时间标签功能；带有硬件触发功能的采集装置收到一个硬件触发信号后进行一次数据采集，A、B、C、D四种类型的采集装置收到主控计算机发出的一个采集命令后进行一次数据采集；带有时间标签功能是指采集的数据带有时间标签；其特征在于，数据同步的步骤如下：
1、采集装置分类：主控计算机将分步式采集系统中的采集装置按A、B、C、D四种类型分类；
2、确定时间基准信号：主控计算机选择一个时间信号作为时间基准信号，所选择的时间信号是：GPS时钟信号、北斗时钟时钟信号、原子钟时钟信号或者主控计算机时钟信号；
3、A类采集系统数据同步方法：
3.1、主控计算机将时间基准信号向A类采集系统连续发送；
3.2、A类采集系统接收到时间基准信号后，通过自身时间标签功能，对采集的数据打上时间标签；
3.3、A类采集系统将打上时间标签的数据发送给主控计算机；
4、B类采集系统数据同步方法：
4.1、主控计算机将时间基准信号向B类采集系统连续发送；
4.2、B类采集系统接收到时间基准信号后，通过自身时间标签功能，对采集的数据打上时间标签；
4.3、B类采集系统将打上时间标签的数据发送给主控计算机；
5、C类采集系统数据同步方法：
5.1、A类采集系统接收主控计算机的命令后，向C类采集系统发出硬件触发信号，并实时记录硬件触发信号的个数及产生的时间；
5.2、C类采集系统每接收到一次A类采集系统的硬件触发信号，就采集一次数据，并且对硬件触发信号的总数量进行统计，将硬件触发信号和对应的采集数据发送至主控计算机；
5.3、主控计算机将C类采集系统发送的硬件触发信号和对应的采集数据与A类采集系统发送的硬件触发信号进行比对，比对以后将对应的时间标签打在C类采集系统的采集数据中；
6、D类采集系统数据同步方法：
6.1、D类采集系统收到主控计算机发出的一个采集命令后进行一次数据采集，并且对采集命令的总数量进行统计，将采集命令和对应的数据发给主控计算机，主控计算机根据将收到的采集命令与发出采集命令比对，得到每个采集命令的发出时间，将发出时间作为对应数据的时间标签。
本发明的一个实施例，成功地应用于对某型航空发动机试车的监测，数据分析工作由以前七天减少到不到一天，工作效率提高了六倍以上。

Claims (1)

1.一种用于分布式采集系统的数据同步方法，分布式采集系统中有以下A、B、C、D四种类型的采集装置：A类采集装置带有硬件触发功能及时间标签功能；B类采集装置不带有硬件触发功能、带有时间标签功能；C类采集装置带有硬件触发功能、不带有时间标签功能；D类采集装置不带有硬件触发功能及时间标签功能；带有硬件触发功能的采集装置收到一个硬件触发信号后进行一次数据采集，A、B、C、D四种类型的采集装置收到主控计算机发出的一个采集命令后进行一次数据采集；带有时间标签功能是指采集的数据带有时间标签；其特征在于，数据同步的步骤如下：
1.1、采集装置分类：主控计算机将分步式采集系统中的采集装置按A、B、C、D四种类型分类；
1.2、确定时间基准信号：主控计算机选择一个时间信号作为时间基准信号，所选择的时间信号是：GPS时钟信号、北斗时钟时钟信号、原子钟时钟信号或者主控计算机时钟信号；
1.3、A类采集系统数据同步方法：
1.3.1、主控计算机将时间基准信号向A类采集系统连续发送；
1.3.2、A类采集系统接收到时间基准信号后，通过自身时间标签功能，对采集的数据打上时间标签；
1.3.3、A类采集系统将打上时间标签的数据发送给主控计算机；
1.4、B类采集系统数据同步方法：
1.4.1、主控计算机将时间基准信号向B类采集系统连续发送；
1.4.2、B类采集系统接收到时间基准信号后，通过自身时间标签功能，对采集的数据打上时间标签；
1.4.3、B类采集系统将打上时间标签的数据发送给主控计算机；
1.5、C类采集系统数据同步方法：
1.5.1、A类采集系统接收主控计算机的命令后，向C类采集系统发出硬件触发信号，并实时记录硬件触发信号的个数及产生的时间；
1.5.2、C类采集系统每接收到一次A类采集系统的硬件触发信号，就采集一次数据，并且对硬件触发信号的总数量进行统计，将硬件触发信号和对应的采集数据发送至主控计算机；
1.5.3、主控计算机将C类采集系统发送的硬件触发信号和对应的采集数据与A类采集系统发送的硬件触发信号进行比对，比对以后将对应的时间标签打在C类采集系统的采集数据中；
1.6、D类采集系统数据同步方法：
1.6.1、D类采集系统收到主控计算机发出的一个采集命令后进行一次数据采集，并且对采集命令的总数量进行统计，将采集命令和对应的数据发给主控计算机，主控计算机根据将收到的采集命令与发出采集命令比对，得到每个采集命令的发出时间，将发出时间作为对应数据的时间标签。
CN201510967346.3A 2015-12-21 2015-12-21 一种用于分布式采集系统的数据同步方法 Active CN105630725B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510967346.3A CN105630725B (zh) 2015-12-21 2015-12-21 一种用于分布式采集系统的数据同步方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510967346.3A CN105630725B (zh) 2015-12-21 2015-12-21 一种用于分布式采集系统的数据同步方法

Publications (2)

Publication Number Publication Date
CN105630725A true CN105630725A (zh) 2016-06-01
CN105630725B CN105630725B (zh) 2018-04-03

Family

ID=56045690

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510967346.3A Active CN105630725B (zh) 2015-12-21 2015-12-21 一种用于分布式采集系统的数据同步方法

Country Status (1)

Country Link
CN (1) CN105630725B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109521712A (zh) * 2018-11-16 2019-03-26 北京遥感设备研究所 用于不同采集周期设备的数据采集系统
CN110736877A (zh) * 2019-09-26 2020-01-31 山东信通电子股份有限公司 一种时域反射信号的高速采集方法及装置
CN111258210A (zh) * 2020-02-28 2020-06-09 中国民用航空总局第二研究所 一种自完备的分布式定位系统时钟同步与校正方法及装置
CN113129474A (zh) * 2020-01-16 2021-07-16 浙江吉利汽车研究院有限公司 一种时间信息的使用方法、装置、设备及存储介质
CN114415560A (zh) * 2021-12-24 2022-04-29 浙江清华柔性电子技术研究院 数据同步采集与处理方法、装置和存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN2775675Y (zh) * 2005-02-25 2006-04-26 唐山学院 采用gps卫星信号触发的多点同步数据采集装置
US20070161385A1 (en) * 2005-12-29 2007-07-12 Anderson Robert J GPS synchronization for wireless communications stations
CN101183244A (zh) * 2007-11-29 2008-05-21 中国人民解放军国防科学技术大学 精确触发信号产生方法及产生电路

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN2775675Y (zh) * 2005-02-25 2006-04-26 唐山学院 采用gps卫星信号触发的多点同步数据采集装置
US20070161385A1 (en) * 2005-12-29 2007-07-12 Anderson Robert J GPS synchronization for wireless communications stations
CN101183244A (zh) * 2007-11-29 2008-05-21 中国人民解放军国防科学技术大学 精确触发信号产生方法及产生电路

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109521712A (zh) * 2018-11-16 2019-03-26 北京遥感设备研究所 用于不同采集周期设备的数据采集系统
CN110736877A (zh) * 2019-09-26 2020-01-31 山东信通电子股份有限公司 一种时域反射信号的高速采集方法及装置
CN113129474A (zh) * 2020-01-16 2021-07-16 浙江吉利汽车研究院有限公司 一种时间信息的使用方法、装置、设备及存储介质
CN111258210A (zh) * 2020-02-28 2020-06-09 中国民用航空总局第二研究所 一种自完备的分布式定位系统时钟同步与校正方法及装置
CN111258210B (zh) * 2020-02-28 2021-07-27 中国民用航空总局第二研究所 一种自完备的分布式定位系统时钟同步与校正方法及装置
CN114415560A (zh) * 2021-12-24 2022-04-29 浙江清华柔性电子技术研究院 数据同步采集与处理方法、装置和存储介质

Also Published As

Publication number Publication date
CN105630725B (zh) 2018-04-03

Similar Documents

Publication Publication Date Title
CN105630725A (zh) 一种用于分布式采集系统的数据同步方法
CN101854270A (zh) 多系统运行状态监控方法及系统
CN105338061A (zh) 一种轻量级消息中间件的实现方法与系统
CN105635279A (zh) 一种分布式监控系统及数据采集方法
CN106470123B (zh) 日志收集方法、客户端、服务器和电子设备
WO2015041741A3 (en) Systems and methods for utility usage monitoring and management
CN105357061A (zh) 一种基于大数据流处理技术的运维监控分析系统
CN103200046A (zh) 监控网元设备性能的方法及系统
CN111221831B (zh) 一种对广告效果数据实时处理的计算系统
CN102479113A (zh) 异常自适应处理方法及系统
CN102231673A (zh) 用于监控业务服务器的系统和方法
CN102769533A (zh) 数据处理方法和数据处理装置
CN111953551B (zh) 日志数据的传输方法、装置、电子设备及存储介质
CN103117878A (zh) 一种基于Nagios的分布式监控系统的设计方法
CN112260883A (zh) 一种卫星测试报告生成方法、装置、设备和存储介质
CN108847921B (zh) 分布式振动同步连续监测系统
CN202735418U (zh) 一种电能质量监测系统
CN103401722A (zh) 一种软件资源监控系统和方法
JP2017510230A5 (zh)
US11556120B2 (en) Systems and methods for monitoring performance of a building management system via log streams
EP2667021B2 (en) Timestamping in wind turbines
CN103152424A (zh) 一种在云端自动控制解决方案的方法
CN108280015B (zh) 基于大数据的集群服务器日志实时处理方法及计算机设备
RU2010106462A (ru) Автоматизированная система оперативного управления деятельностью предприятия
CN113055126B (zh) 一种飞行数据译码方法、装置及终端设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP03 Change of name, title or address

Address after: 610500 Xindu Xuefu Road, Xindu District, Chengdu, Sichuan

Patentee after: AECC SICHUAN GAS TURBINE Research Institute

Address before: 621703 P.O. Box 305, Jiangyou City, Mianyang City, Sichuan Province

Patentee before: CHINA GAS TURBINE EST

CP03 Change of name, title or address