CN108734433A - 车辆日志数据分析系统 - Google Patents

车辆日志数据分析系统 Download PDF

Info

Publication number
CN108734433A
CN108734433A CN201810535270.0A CN201810535270A CN108734433A CN 108734433 A CN108734433 A CN 108734433A CN 201810535270 A CN201810535270 A CN 201810535270A CN 108734433 A CN108734433 A CN 108734433A
Authority
CN
China
Prior art keywords
analysis
data
module
log data
car log
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810535270.0A
Other languages
English (en)
Inventor
张云锋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Yi Cheng Traffic Information Group Co Ltd
Original Assignee
Guangzhou Yi Cheng Traffic Information Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Yi Cheng Traffic Information Group Co Ltd filed Critical Guangzhou Yi Cheng Traffic Information Group Co Ltd
Priority to CN201810535270.0A priority Critical patent/CN108734433A/zh
Publication of CN108734433A publication Critical patent/CN108734433A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
    • G06Q10/083—Shipping
    • G06Q10/0838—Historical data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
    • G06Q10/083—Shipping
    • G06Q10/0833—Tracking
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00—Registering or indicating the working of vehicles
    • G07C5/008—Registering or indicating the working of vehicles communicating information to a remotely located station

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Economics (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Marketing (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Human Resources & Organizations (AREA)
  • Development Economics (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Strategic Management (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本申请公开了一种车辆日志数据分析系统包括基础数据加载模块、日志数据传输模块和分析代理模块；基础数据加载模块获取多个分析设置，并根据分析设置建立分析进程交分析代理模块，分析代理模块获取各个分析进程的分析逻辑并加载到各个进程中，形成相应的分析器，来自日志数据传输模块的车辆日志数据，被根据分析设置分配到各个分析器中。本方案通过统一的软件框架来输入和处理，简化处理逻辑，根据分析数据源和分析逻辑分别形成分析器，进而利用并发的进程对大量的车辆日志数据进行分析，从而提高了数据的处理效率，相互独立，提高了系统的鲁棒性。

Description

车辆日志数据分析系统
技术领域
本专利涉及数据分析领域，具体涉及一种车辆日志数据分析系统。
背景技术
随着车联网技术的发展，越来越多的人开始研究从OBD接口获取车辆日志数据的方法，然后将数据传输到服务器端进行分析和处理。这一做法可以将车辆情况及时反馈到服务商并获得支持，还可以为拥有这些车辆的运输企业提供宝贵的车辆数据信息，以进行车辆监控，还可以进行公司业务开展、经营与运行所需要的大数据分析。
运输企业随着业务的扩大和发展，需要监控的车辆会越来越多，车辆信息也越来越丰富，大量的信息逐渐变得难于及时处理、提取、分析和汇总。现有系统在大量的车辆日志数据同时进行较多分析逻辑的处理时，无法保证分析的实时性、有效性，只能放弃业务逻辑所需的详细数据，满足于获取一些概要的统计信息。
发明内容
本发明意在提供一种车辆日志数据分析系统，可同时进行较多车辆日志数据的分析处理，以保证分析的实时性和有效性。
本发明中的车辆日志数据分析系统包括，基础数据加载模块、日志数据传输模块和分析代理模块；
基础数据加载模块获取多个分析设置，并根据分析设置建立分析进程交分析代理模块，
分析代理模块获取各个分析进程的分析逻辑并加载到各个进程中，形成相应的分析器，来自日志数据传输模块的车辆日志数据，被根据分析设置分配到各个分析器中。
本方案，将大量的原始数据分而治之，通过统一的软件框架来输入和处理，简化处理逻辑，根据分析数据源和分析逻辑分别形成分析器，进而利用并发的进程对大量的车辆日志数据进行分析，从而提高了数据的处理效率，相互独立的分析器，不会相互影响，提高了系统的鲁棒性。
进一步，所述车辆日志数据具有统一的数据格式。
方便分析器可以按照固定的逻辑进行分析。
进一步，还包括，分析管理模块，该模块从基础数据加载模块获取所述分析设置，并根据该分析设置对各个分析器进行管理。
根据分析设置，分析管理模块可以获知当前运行的所有分析器，从而对所有分析可以进行全局的管理。
进一步，还包括，实时输出模块，与分析管理模块相连，用于实时的输出分析结果。
方便分析结果的实施输出。
进一步，还包括，报表输出模块；与分析管理模块相连，用于根据分析结果生成报表。
适合于需要报表的使用场景。
进一步，所述分析设置包括某个分析进程所对应的车辆编号，分析类型，所需数据字段和数据采样频率中的一个或多个。
通过多个设置，更为灵活多样的生成进程，扩展系统。
进一步，所述分析进程分布式的运行在多个服务器上。
可以加大处理能力，并增加可扩展性。
附图说明
图1为本发明实施例的示意性框图。
具体实施方式
下面通过具体实施方式进一步详细说明：
实施例基本如附图1所示：
具体实施过程如下：
本实施例中的车辆日志数据分析系统，部署在服务器上，包括，基础数据加载模块、日志数据传输模块、分析代理模块、分析管理模块、实时输出模块和报表输出模块；
基础数据加载模块获取多个分析设置，并根据分析设置建立分析进程交分析代理模块，
分析代理模块获取各个分析进程的分析逻辑并加载到各个进程中，形成相应的分析器，来自日志数据传输模块的车辆日志数据，被根据分析设置分配到各个分析器中。所述车辆日志数据具有统一的数据格式。
分析管理模块从基础数据加载模块获取所述分析设置，并根据该分析设置对各个分析器进行管理。对所有分析可以进行全局的管理。
实时输出模块，与分析管理模块相连，用于实时的输出分析结果；方便分析结果的实施输出，报表输出模块；与分析管理模块相连，用于根据分析结果生成报表；适合于需要报表的使用场景。所述分析设置包括了某个分析进程所对应的车辆编号，分析类型，所需数据字段设置和数据采样频率。更为灵活的生成进程，扩展系统。所述进程分布式的运行在多个服务器上。可以加大处理能力和处理进程，并增加可扩展性。而具体服务器/进程的分配也会预先设置在分析设置中。
车辆上的数据采集终端将采集到的各种数据生成带有车辆编号的日志，通过互联网发送到服务器，这些日志都有统一的格式，统一的字段；
基础数据加载模块载入事先制定好的分析设置，按照每个设置上的分析类型的不同，会有多个分析进程被建立起来，此外如果需要分析的车辆数较多，也可分为多个并行的进程进行同样类型的分析。
车辆日志数据可以包括车辆燃油系统状态数据、车速数据、发动机转速数据、油门位置数据、短期油耗修正数据、长期油耗修正数据、空气进气流量数据、进气歧管压力数据、氧传感器数据、油箱存量数据、进气温度数据、燃油类型数据、发动机扭力数据、发动机载荷数据和故障码数据、车辆燃油系统状态数据。除此之外，使用者还可根据自身需要，在车辆上增加其他的功能性外设以获取额外的数据；如增加定位装置以获取车辆的定位数据；增加温度传感器以采集环境温度数据，这些数据都可以被称为车辆日志数据，各个分析器利用这些数据进行交叉分析和应用。
根据使用者的实际情况的不同，分析设置与分析逻辑也会不同；分析设置和分析逻辑都通过计算机程序代码进行表达；常见的分析逻辑如求各类数据的平均值、中值、和值等，还包括以其他数值相关的分析，如果是统计类的分析，则可以是一次性的或周期性的分析当前数据；例如时间走势曲线，某些数据间的关系曲线等，则会是持续进行的累计分析，分析的类型是多种多样的，但都可以被归纳为不同的数据间的数学关系。
这些数据间的数学关系以及分析结果的呈现形式都被统称为分析逻辑，分析逻辑通过相应的代码进行表达，并送至分析进程中运行，最常见的形式是采用一配置文件来保存分析设置和分析逻辑，同样也通过更新配置文件来改变分析设置和分析逻辑。
分析设置中规定好具体具有哪些车辆编号的数据被放到哪一个分析器中，采样频率则规定了每隔多少时间或每隔多少个车辆日志数据取一个进行分析；这样就形成了一个完整的分析器，本实施例中的进程执行统一的数据框架，所以对于分析进程而言，分析设置和分析逻辑均为一个单独函数或模块，可以灵活的变换和调用。
将大量的原始数据分而治之，通过统一的软件框架来输入和处理，简化处理逻辑，根据分析数据源和分析逻辑分别形成分析器，进而利用并发的进程对大量的车辆日志数据进行分析，从而提高了数据的处理效率，相互独立的分析进程也提高了系统的鲁棒性。
由于有多个分析器在同时进行分析，一个统一的分析管理模块十分重要，众多的分析器当前的运行状况是否正常的监督，以及每个分析器的结果的调取都由该模块执行；
本系统的分析结果是多样化的，所以呈现方式也是多样化的；
结果输出时，通过实时输出模块，则可以在相应的显示设备上实时的查看到正在运行的分析器的实时分析结果，适合于走势图一类的分析结果。
而如果统计类的分析结果，则适合通过报表输出模块，按照既定的报表格式输出为报表文件，方便分析结果在根据需要进行传递。
本实施例中，各个分析器，还可用于结合车辆日志信息以外的其他信息进行交叉分析和应用。
本实施例应用于某石化企业，该企业要求其车队在指定的时间内须按照规定的路线行驶，某危险品运输企业不允许在红绿灯之外的地方停车，某单位要求计算路途中的各类费用，等等。这些需求在本实施例中都体现为独立的分析设置和逻辑，并被实现为独立的分析器。
本实施例中提供一针对物流企业的分析器；对物流企业来说，执行运输的车辆以及物流路线相对固定，该跟分析器从业务数据库获取各车辆的型号、任务起始点、任务起始时间和运输载重，并根据车辆的定位信息获取执行该任务过程中的实际行驶路线，同时该分析器同时还通过任务起始时间内各个车辆油箱存量数据的变化，计算所有车辆的油耗信息；
由于执行运输的车辆以及物流路线相对固定，使得有着较多的相同任务起始点、车辆型号以及基本相同的运输载重的数据样本可供分析(任务起始时间可以不同)；分析器筛选出这些数据样本，并进行任务起始时间内的耗油量排序，于是就可以找出相同任务起始点、车辆型号以及基本相同的运输载重(偏差在一定范围内，如10公斤)的最小任务耗油量以及其所对应的车辆编号和产生该最小任务油耗量的任务起始时间；此处
通过一驾驶方案生成模块，调取该车辆在该任务起始时间内的所有车辆日志信息以及实际行驶路线，进而生成此类车型、此任务起始点以及此运输载重所对应的最佳行驶方案，该方案包括了，行驶路线，任务时间内分时段的行驶车速参考值，油门位置参考值，发动机转速参考值，这些参考值根据车辆日志中的记录进行实时还原，于是司机在驾驶此类车型执行此任务起始点此运输载重的任务时，可参考该最佳行驶方案进行驾驶，以求使得自己的驾驶油耗有望再现最小耗油量，从而减少车辆的油耗。
本实施例中，一些本领域技术人员所熟知的技术手段没有做过多的赘述。
以上所述的仅是本发明的实施例，方案中公知的具体结构及特性等常识在此未作过多描述，所属领域普通技术人员知晓申请日或者优先权日之前发明所属技术领域所有的普通技术知识，能够获知该领域中所有的现有技术，并且具有应用该日期之前常规实验手段的能力，所属领域普通技术人员可以在本申请给出的启示下，结合自身能力完善并实施本方案，一些典型的公知结构或者公知方法不应当成为所属领域普通技术人员实施本申请的障碍。应当指出，对于本领域的技术人员来说，在不脱离本发明结构的前提下，还可以作出若干变形和改进，这些也应该视为本发明的保护范围，这些都不会影响本发明实施的效果和专利的实用性。本申请要求的保护范围应当以其权利要求的内容为准，说明书中的具体实施方式等记载可以用于解释权利要求的内容。

Claims (6)

1.车辆日志数据分析系统，其特征在于：包括，基础数据加载模块、日志数据传输模块和分析代理模块；
基础数据加载模块获取多个分析设置，并根据分析设置建立分析进程交分析代理模块，
分析代理模块获取各个分析进程的分析逻辑并加载到各个进程中，形成相应的分析器，来自日志数据传输模块的车辆日志数据被根据分析设置被分配到各个分析器中。
2.根据权利要求1所述的车辆日志数据分析系统，所述车辆日志数据具有统一的数据格式。
3.根据权利要求1所述的车辆日志数据分析系统，其特征在于：还包括，分析管理模块，该模块从基础数据加载模块获取所述分析设置，并根据该分析设置对各个分析器进行管理。
4.根据权利要求1所述的车辆日志数据分析系统，其特征在于：还包括，实时输出模块，与分析管理模块相连，用于实时的输出分析结果。
5.根据权利要求1所述的车辆日志数据分析系统，其特征在于：还包括，报表输出模块；与分析管理模块相连，用于根据分析结果生成报表。
6.根据权利要求1所述的车辆日志数据分析系统，其特征在于：所述分析进程分布式的运行在多个服务器上。
CN201810535270.0A 2018-05-29 2018-05-29 车辆日志数据分析系统 Pending CN108734433A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810535270.0A CN108734433A (zh) 2018-05-29 2018-05-29 车辆日志数据分析系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810535270.0A CN108734433A (zh) 2018-05-29 2018-05-29 车辆日志数据分析系统

Publications (1)

Publication Number Publication Date
CN108734433A true CN108734433A (zh) 2018-11-02

Family

ID=63936632

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810535270.0A Pending CN108734433A (zh) 2018-05-29 2018-05-29 车辆日志数据分析系统

Country Status (1)

Country Link
CN (1) CN108734433A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021217626A1 (zh) * 2020-04-30 2021-11-04 上海华东汽车信息技术有限公司 车辆数据处理方法、装置、计算机设备和存储介质
CN113703665A (zh) * 2021-07-12 2021-11-26 深圳市有为信息技术发展有限公司 控制终端数据在网关崩溃后减少丢失的方法、装置及电子设备

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102567401A (zh) * 2010-12-31 2012-07-11 中国科学院沈阳自动化研究所 一种载人潜水器数据分析系统
CN103863220A (zh) * 2014-03-27 2014-06-18 北京车云通科技有限公司 机动车数据的监测方法和系统
CN104573326A (zh) * 2014-12-16 2015-04-29 北京中交兴路车联网科技有限公司 一种车辆行驶数据统计分析系统
CN105045788A (zh) * 2014-05-02 2015-11-11 国民大学校产学协力团 用于处理和分析车辆驾驶大数据的方法及其系统
CN105574205A (zh) * 2016-01-18 2016-05-11 国家电网公司 分布式计算环境的日志动态分析系统
CN105868075A (zh) * 2016-03-31 2016-08-17 浪潮通信信息系统有限公司 一种实时监控分析大量日志的系统及方法
CN106302577A (zh) * 2015-05-19 2017-01-04 广州四三九九信息科技有限公司 日志处理方法
CN107256219A (zh) * 2017-04-24 2017-10-17 卡斯柯信号有限公司 应用于自动列车控制系统海量日志的大数据融合分析方法
CN107577588A (zh) * 2017-09-26 2018-01-12 北京中安智达科技有限公司 一种海量日志数据智能运维系统
CN107729404A (zh) * 2017-09-25 2018-02-23 安徽畅通行交通信息服务有限公司 一种区域车辆统计分析管理系统
CN107766448A (zh) * 2017-09-25 2018-03-06 上海卫星工程研究所 基于规则的卫星遥测数据分析系统

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102567401A (zh) * 2010-12-31 2012-07-11 中国科学院沈阳自动化研究所 一种载人潜水器数据分析系统
CN103863220A (zh) * 2014-03-27 2014-06-18 北京车云通科技有限公司 机动车数据的监测方法和系统
CN105045788A (zh) * 2014-05-02 2015-11-11 国民大学校产学协力团 用于处理和分析车辆驾驶大数据的方法及其系统
CN104573326A (zh) * 2014-12-16 2015-04-29 北京中交兴路车联网科技有限公司 一种车辆行驶数据统计分析系统
CN106302577A (zh) * 2015-05-19 2017-01-04 广州四三九九信息科技有限公司 日志处理方法
CN105574205A (zh) * 2016-01-18 2016-05-11 国家电网公司 分布式计算环境的日志动态分析系统
CN105868075A (zh) * 2016-03-31 2016-08-17 浪潮通信信息系统有限公司 一种实时监控分析大量日志的系统及方法
CN107256219A (zh) * 2017-04-24 2017-10-17 卡斯柯信号有限公司 应用于自动列车控制系统海量日志的大数据融合分析方法
CN107729404A (zh) * 2017-09-25 2018-02-23 安徽畅通行交通信息服务有限公司 一种区域车辆统计分析管理系统
CN107766448A (zh) * 2017-09-25 2018-03-06 上海卫星工程研究所 基于规则的卫星遥测数据分析系统
CN107577588A (zh) * 2017-09-26 2018-01-12 北京中安智达科技有限公司 一种海量日志数据智能运维系统

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021217626A1 (zh) * 2020-04-30 2021-11-04 上海华东汽车信息技术有限公司 车辆数据处理方法、装置、计算机设备和存储介质
CN113703665A (zh) * 2021-07-12 2021-11-26 深圳市有为信息技术发展有限公司 控制终端数据在网关崩溃后减少丢失的方法、装置及电子设备

Similar Documents

Publication Publication Date Title
Amarasinghe et al. Cloud-based driver monitoring and vehicle diagnostic with OBD2 telematics
US11403087B2 (en) Over-the-air (OTA) mobility services platform
EP2480871B1 (en) System, method and computer program for simulating vehicle energy use
US7984146B2 (en) Aircraft health and usage monitoring system with comparative fleet statistics
CN110044639A (zh) 一种基于实车运行大数据平台的细分市场商用车md-vtd系统
CN103863220A (zh) 机动车数据的监测方法和系统
CN108734433A (zh) 车辆日志数据分析系统
JP7278054B2 (ja) 製品ベンチマーキング
DE102012217911A1 (de) Beschaffung von Daten von Sensoren im Fahrzeug und Vorlegen vereinigter gemittelter Leistungsindikatoren
CN108694448A (zh) Phm平台
US20050027574A1 (en) Real-time activity intelligence system and method
Krysmon et al. Real driving Emissions—Conception of a data-driven calibration methodology for hybrid powertrains combining statistical analysis and virtual calibration platforms
Guensler et al. MOVES-Matrix: Setup, implementation, and application
Schweppe et al. Flexible on-board stream processing for automotive sensor data
DE102014114202A1 (de) Verfahren zum Prognostizieren einer Panne und/oder eines Reparatur- und/oder Wartungsbedarfs
Gürdür et al. Visual analytics to support the service design for sustainable mobility
DE112006002896T5 (de) System und Verfahren zur Weiterleitung von Informationen
CN110826827B (zh) 基于能源互联网的企业在线能源审计系统及方法
Yu et al. A short-term prediction model for taxi speed based on XGBoost
DE102010005742A1 (de) Integriertes Diagnose- und Prognosesystem als Teil der Unternehmenswertschöpfungskette
CN111290847A (zh) 去中心化的分布式多节点协同任务调度平台及方法
DE102020123228A1 (de) Verfahren zum Betreiben einer Gerätefunktion, insbesondere eines Kraftfahrzeugss
Pozueco et al. Data analytics to support a smart fleet management strategy
Simon et al. Online Data Exploration Enabling Optimal Fleet Testing
Fernandes et al. Big data analytics for vehicle multisensory anomalies detection

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20181102