CN115396490A - 一种基于数据中台的车辆健康数据中心系统 - Google Patents

一种基于数据中台的车辆健康数据中心系统 Download PDF

Info

Publication number
CN115396490A
CN115396490A CN202211051822.3A CN202211051822A CN115396490A CN 115396490 A CN115396490 A CN 115396490A CN 202211051822 A CN202211051822 A CN 202211051822A CN 115396490 A CN115396490 A CN 115396490A
Authority
CN
China
Prior art keywords
configuration
edge machine
data
data center
message
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211051822.3A
Other languages
English (en)
Inventor
彭星辉
翁元
沈亮
徐云龙
石立国
徐锦山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Mission Informtion Technologies Co ltd
Original Assignee
Shanghai Mission Informtion Technologies Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Mission Informtion Technologies Co ltd filed Critical Shanghai Mission Informtion Technologies Co ltd
Priority to CN202211051822.3A priority Critical patent/CN115396490A/zh
Publication of CN115396490A publication Critical patent/CN115396490A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/2866—Architectures; Arrangements
    • H04L67/30—Profiles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Small-Scale Networks (AREA)

Abstract

本发明涉及一种基于数据中台的车辆健康数据中心系统，包括统一中台配置模块、通讯模块、边缘机和分布式消息队列，所述通讯模块设有多个，每一所述通讯模块对应连接多个所述边缘机，所述通讯模块分别连接统一中台配置模块和分布式消息队列，其中：所述统一中台配置模块用于获取配置数据，生成并存储对应的配置文件，产生配置推送消息；所述通讯模块用于将接收的配置推送消息或控制消息传送给对应的边缘机，以及将对应的边缘机采集解析的车载数据传送至分布式消息队列。与现有技术相比，本发明具有减少干扰，水平扩展能力强等优点。

Description

一种基于数据中台的车辆健康数据中心系统
技术领域
本发明涉及轨道交通数据处理技术领域，尤其是涉及一种基于数据中台的车辆健康数据中心系统。
背景技术
随着轨道交通行业的快速发展，原本的工作方式也发生明显的变化，最初始的模式中全部操作都在车上，数据也只能在车上进行观看，司机工作也需要在车上工作，但是现阶段这种模式已经满足不了当前需求。所以，轨道交通的数据上地已经成为现阶段的重要组成部分。在列车数据上地领域中，现阶段每个项目都是需要进行单独开发的，开发人员和业务人员对业务有不同的理解，使得开发难度较大，开发过程是和数据解析是处于紧密依赖的关系，在解决问题的过程中不仅需要关注程序的问题，还需要关注数据解析的正确；最关键的就是无法将开发人员和业务人员分离，也无法做到数据解析结果的实时更新。
发明内容
本发明的目的就是为了克服上述现有技术存在的缺陷而提供一种减少干扰，水平扩展能力强的基于数据中台的车辆健康数据中心系统。
本发明的目的可以通过以下技术方案来实现：
一种基于数据中台的车辆健康数据中心系统，包括统一中台配置模块、通讯模块、边缘机和分布式消息队列，所述通讯模块设有多个，每一所述通讯模块对应连接多个所述边缘机，所述通讯模块分别连接统一中台配置模块和分布式消息队列，其中：
所述统一中台配置模块用于获取配置数据，生成并存储对应的配置文件，产生配置推送消息；
所述通讯模块用于将接收的配置推送消息或控制消息传送给对应的边缘机，以及将对应的边缘机采集解析的车载数据传送至分布式消息队列。
进一步地，所述统一中台配置模块基于中台浏览器实现。
进一步地，所述配置数据包括项目配置数据、端口配置数据和边缘机配置数据。
进一步地，所述统一中台配置模块还连接有用于所述配置文件的FTP服务器。
进一步地，所述边缘机接收到配置推送消息时，根据该配置推送消息中带有的配置路径，获取对应的配置文件，生效配置。
进一步地，所述边缘机接收到控制消息时，对所述控制消息进行内容解析，依据解析获得的消息内容执行相应动作，所述消息内容包括边缘机重启、边缘机程序重启或边缘机程序更新。
进一步地，所述边缘机利用所述配置文件对采集的车载数据进行解析。
进一步地，该系统还包括多个消费服务器和分布式数据库，各所述消费服务器分别对所述分布式消息队列存储的车载数据进行消费处理后，将处理数据存储至分布式数据库。
进一步地，所述边缘机包括：
状态反馈单元，用于定时发送边缘机活动信息至对应的通讯模块。
进一步地，所述边缘机活动信息包括心跳及边缘机实时状态数据。
与现有技术相比，本发明具有以下有益效果：
(1)本发明采用通讯模块来处理配置推送、指令下发及数据上传，可以实现多条线路控制的横向扩展；
(2)本发明采用通讯模块来接收单条线路的配置和数据，每一通讯模块对应连接多个边缘机，可以对多线路场景实现线路级分离，降低多线路之间的干扰；
(3)本发明采用分布式消息队列和分布式数据库，可以实现消息队列和数据库的横向扩容以及跨服务器访问，水平扩展能力强，根据业务需求自行增加服务器数量，提升处理能力；
(4)本发明采用业务中台对数据信息统一配置，可以实现配置信息的统一管理，且统一中台配置模块基于中台浏览器实现，方便使用者操作。
附图说明
图1为本发明的配置推送流程图；
图2为本发明的数据上地流程图：
图3为本发明的数据消费流程图。
具体实施方式
下面结合附图和具体实施例对本发明进行详细说明。本实施例以本发明技术方案为前提进行实施，给出了详细的实施方式和具体的操作过程，但本发明的保护范围不限于下述的实施例。
实施例1
本实施例提供一种基于数据中台的车辆健康数据中心系统，包括统一中台配置模块、通讯模块、边缘机和分布式消息队列，通讯模块设有多个，每一通讯模块对应连接多个边缘机，形成不同的线路，通讯模块分别连接统一中台配置模块和分布式消息队列，其中：统一中台配置模块用于获取配置数据，生成并存储对应的配置文件，产生配置推送消息；通讯模块用于将接收的配置推送消息或控制消息传送给对应的边缘机，以及将对应的边缘机采集解析的车载数据传送至分布式消息队列。该系统采用单机模式接收同一条线路的数据，采用不同的通讯程序接收不同线路的数据，然后汇总到分布式消息队列中，该系统能够将程序开发和数据处理进行分割，将数据处理逻辑部分工作从程序开发中独立出去，减少干扰，水平扩展能力强。
上述统一中台配置模块集成于业务中台中，基于中台浏览器实现，工作人员通过浏览器访问业务中台就可进行配置的编辑、修改、删除、推送等。配置数据包括项目配置数据、端口配置数据和边缘机配置数据等。本系统采用统一的中心管理数据配置并且可以进行配置推送，处理方便。
统一中台配置模块还连接有FTP服务器，生成的配置文件可上传存储于该FTP服务器中。
如图1所示，该系统中配置数据推送的过程包括以下步骤：
在步骤4.1.1中，统一中台配置模块接收对线路的相关配置数据，数据内容包括项目、线路、数据解析规则等，然后执行步骤4.1.2；
在步骤4.1.2中，进行规则文件生成，包括配置文件的生成、配置文件的FTP上传，然后执行步骤4.1.3；
在步骤4.1.3中，进行配置文件下发，包括发送配置文件规则目录到通讯模块，后续自动触发步骤4.1.4；
在步骤4.1.4中，通讯模块接收业务中台下发的消息，将接收到的消息内容分发给列车上的边缘机，后续自动触发步骤4.1.5；
在步骤4.1.5中，边缘机接收通讯模块转发的消息，对消息进行解析，根据消息内容进行不同的处理，如果消息内容为边缘机重启、边缘机程序重启、边缘机程序更新等，则边缘机程序根据消息内容执行命令；如果消息内容为配置推送，边缘机程序根据推送的配置路径，从FTP上获取对应的配置文件，进行配置生效。
边缘机利用配置文件对采集的车载数据进行解析。配置生效后，边缘机执行数据上地流程，如图2所示，包括：
在步骤4.2.1中，边缘机程序使用4.1.5接收到的配置信息解析列车数据，将结果发送到通讯模块，触发步骤4.2.2；
在步骤4.2.2中，通讯模块将接收到的数据写入分布式消息队列中。
在另一实施例中，该系统还包括多个消费服务器和分布式数据库，各消费服务器分别对分布式消息队列存储的车载数据进行消费处理后，将处理数据存储至分布式数据库。
如图3所示，消息队列到数据库的数据流程包括：
在步骤4.3.1中，多个消费服务器消费消息队列中的数据，触发步骤4.3.2；
在步骤4.3.2中，消费服务器根据数据的内容，将数据存储到分布式数据库中，供后续使用。
实施例2
本实施例提供的基于数据中台的车辆健康数据中心系统中，边缘机还包括状态反馈单元，用于定时发送边缘机活动信息至对应的通讯模块。边缘机活动信息包括心跳及边缘机实时状态数据，以提高边缘机工作可靠性。其余同实施例1。
以上详细描述了本发明的较佳具体实施例。应当理解，本领域的普通技术人员无需创造性劳动就可以根据本发明的构思作出诸多修改和变化。因此，凡本技术领域中技术人员依本发明的构思在现有技术的基础上通过逻辑分析、推理或者有限的实验可以得到的技术方案，皆应在由权利要求书所确定的保护范围内。

Claims (10)

1.一种基于数据中台的车辆健康数据中心系统，其特征在于，包括统一中台配置模块、通讯模块、边缘机和分布式消息队列，所述通讯模块设有多个，每一所述通讯模块对应连接多个所述边缘机，所述通讯模块分别连接统一中台配置模块和分布式消息队列，其中：
所述统一中台配置模块用于获取配置数据，生成并存储对应的配置文件，产生配置推送消息；
所述通讯模块用于将接收的配置推送消息或控制消息传送给对应的边缘机，以及将对应的边缘机采集解析的车载数据传送至分布式消息队列。
2.根据权利要求1所述的基于数据中台的车辆健康数据中心系统，其特征在于，所述统一中台配置模块基于中台浏览器实现。
3.根据权利要求1所述的基于数据中台的车辆健康数据中心系统，其特征在于，所述配置数据包括项目配置数据、端口配置数据和边缘机配置数据。
4.根据权利要求1所述的基于数据中台的车辆健康数据中心系统，其特征在于，所述统一中台配置模块还连接有用于所述配置文件的FTP服务器。
5.根据权利要求1所述的基于数据中台的车辆健康数据中心系统，其特征在于，所述边缘机接收到配置推送消息时，根据该配置推送消息中带有的配置路径，获取对应的配置文件，生效配置。
6.根据权利要求1所述的基于数据中台的车辆健康数据中心系统，其特征在于，所述边缘机接收到控制消息时，对所述控制消息进行内容解析，依据解析获得的消息内容执行相应动作，所述消息内容包括边缘机重启、边缘机程序重启或边缘机程序更新。
7.根据权利要求1所述的基于数据中台的车辆健康数据中心系统，其特征在于，所述边缘机利用所述配置文件对采集的车载数据进行解析。
8.根据权利要求1所述的基于数据中台的车辆健康数据中心系统，其特征在于，该系统还包括多个消费服务器和分布式数据库，各所述消费服务器分别对所述分布式消息队列存储的车载数据进行消费处理后，将处理数据存储至分布式数据库。
9.根据权利要求1所述的基于数据中台的车辆健康数据中心系统，其特征在于，所述边缘机包括：
状态反馈单元，用于定时发送边缘机活动信息至对应的通讯模块。
10.根据权利要求9所述的基于数据中台的车辆健康数据中心系统，其特征在于，所述边缘机活动信息包括心跳及边缘机实时状态数据。
CN202211051822.3A 2022-08-30 2022-08-30 一种基于数据中台的车辆健康数据中心系统 Pending CN115396490A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211051822.3A CN115396490A (zh) 2022-08-30 2022-08-30 一种基于数据中台的车辆健康数据中心系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211051822.3A CN115396490A (zh) 2022-08-30 2022-08-30 一种基于数据中台的车辆健康数据中心系统

Publications (1)

Publication Number Publication Date
CN115396490A true CN115396490A (zh) 2022-11-25

Family

ID=84125392

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211051822.3A Pending CN115396490A (zh) 2022-08-30 2022-08-30 一种基于数据中台的车辆健康数据中心系统

Country Status (1)

Country Link
CN (1) CN115396490A (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109218040A (zh) * 2017-06-29 2019-01-15 普天信息技术有限公司 基于lte技术的轨道交通行业数据传输通信系统与方法
CN110196850A (zh) * 2019-04-22 2019-09-03 上海蔚来汽车有限公司 车辆数据处理平台
CN111157245A (zh) * 2020-02-10 2020-05-15 上海电气集团股份有限公司 一种轨道交通走行部轴承的监管方法及系统
US20200287971A1 (en) * 2018-03-12 2020-09-10 Railnova Sa A device for processing data of rolling stock

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109218040A (zh) * 2017-06-29 2019-01-15 普天信息技术有限公司 基于lte技术的轨道交通行业数据传输通信系统与方法
US20200287971A1 (en) * 2018-03-12 2020-09-10 Railnova Sa A device for processing data of rolling stock
CN110196850A (zh) * 2019-04-22 2019-09-03 上海蔚来汽车有限公司 车辆数据处理平台
CN111157245A (zh) * 2020-02-10 2020-05-15 上海电气集团股份有限公司 一种轨道交通走行部轴承的监管方法及系统

Similar Documents

Publication Publication Date Title
CN110457176B (zh) 用于分布式系统的监控方法、装置、存储介质及电子设备
CN112000350B (zh) 一种动态规则更新方法、装置及存储介质
CN111143167B (zh) 用于多平台的告警归并方法及装置、设备、存储介质
CN115373835A (zh) Flink集群的任务资源调整方法、装置及电子设备
CN113159145A (zh) 一种特征工程编排方法及装置
CN112052082B (zh) 任务属性优化方法、装置、服务器及存储介质
CN107463490B (zh) 一种应用于平台开发中的集群日志集中收集方法
CN111782473A (zh) 分布式日志数据处理方法、装置及系统
CN115150471A (zh) 数据处理方法、装置、设备、存储介质及程序产品
CN111970151A (zh) 虚拟及容器网络的流量故障定位方法及系统
CN114691407A (zh) 一种车辆日志的获取方法、装置、电子设备及存储介质
CN102591993A (zh) 一种用于热表数据更新的异步处理方法及装置
CN115396490A (zh) 一种基于数据中台的车辆健康数据中心系统
CN110780945B (zh) 一种异构区块链可插拔的跨链桥接方法、设备和存储介质
CN113760242A (zh) 一种数据处理方法、装置、服务器和介质
CN112633850A (zh) 通过管理调用及监控rpa机器人实现业务流程自动化的方法
CN112749062A (zh) 服务端程序监控方法、装置、计算机设备及存储介质
CN116074183A (zh) 一种基于规则引擎的c3超时分析方法、装置及设备
CN115509850A (zh) 日志处理方法、装置、设备、储存介质及计算机程序
CN104580498B (zh) 一种自适应云管理平台
CN111159237B (zh) 系统数据分发方法、装置、存储介质及电子设备
CN114826849A (zh) 一种面向通信信号识别处理的dsp局部重构方法及系统
CN112883110A (zh) 一种基于nifi的终端大数据分发方法、存储介质及系统
CN111767318A (zh) 一种数据统计方法、装置、电子设备及介质
CN115982501B (zh) 一种轻量级高性能的PHPWeb系统框架及工作方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination