CN111131231A - 一种将车载终端数据接入车联网监控平台的方法和设备 - Google Patents

一种将车载终端数据接入车联网监控平台的方法和设备 Download PDF

Info

Publication number
CN111131231A
CN111131231A CN201911334129.5A CN201911334129A CN111131231A CN 111131231 A CN111131231 A CN 111131231A CN 201911334129 A CN201911334129 A CN 201911334129A CN 111131231 A CN111131231 A CN 111131231A
Authority
CN
China
Prior art keywords
data
platform
terminal
terminal data
vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201911334129.5A
Other languages
English (en)
Inventor
卢浩雷
张鹏
孟德超
王让
顾伟伟
张雷
武震宇
金鑫
于清源
张敏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Fengyun Kechuang Information Technology Co ltd
Original Assignee
Beijing Fengyun Kechuang Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Fengyun Kechuang Information Technology Co ltd filed Critical Beijing Fengyun Kechuang Information Technology Co ltd
Priority to CN201911334129.5A priority Critical patent/CN111131231A/zh
Publication of CN111131231A publication Critical patent/CN111131231A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/12—Applying verification of the received information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/06—Management of faults, events, alarms or notifications
    • H04L41/0631—Management of faults, events, alarms or notifications using root cause analysis; using analysis of correlation between notifications, alarms or events based on decision criteria, e.g. hierarchy, tree or time analysis
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/06—Management of faults, events, alarms or notifications
    • H04L41/069—Management of faults, events, alarms or notifications using logs of notifications; Post-processing of notifications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/12—Applying verification of the received information
    • H04L63/123—Applying verification of the received information received data contents, e.g. message integrity
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/20—Network architectures or network communication protocols for network security for managing network security; network security policies in general
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

本发明公开了一种将车载终端数据接入车联网监控平台的方法和设备，该方法包括：根据标准协议数据对从车载终端发送的终端数据进行有效性校验，所述标准协议数据为与所述平台兼容的协议数据；基于所述平台的键值数据库对所述终端数据进行合法性校验；当所述终端数据通过所述有效性校验和所述合法性校验后，根据预设映射关系将所述终端数据转换为平台协议数据，所述映射关系为平台协议与所述标准协议数据的映射关系；将所述平台协议数据推送到待处理消息队列，以使所述终端数据接入所述平台，从而实现海量终端数据的快速准确的接入车联网监控平台。

Description

一种将车载终端数据接入车联网监控平台的方法和设备
技术领域
本申请涉及车联网领域，更具体地，涉及一种将车载终端数据接入车联网监控平台的方法和设备。
背景技术
车联网主要指：车辆上的车载设备通过无线通信技术，对信息网络平台中的所有车辆动态信息进行有效利用，在车辆运行中提供不同的功能服务。车联网能够为车与车之间的间距提供保障，降低车辆发生碰撞事故的几率；车联网可以帮助车主实时导航，并通过与其它车辆和网络系统的通信，提高交通运行的效率。
随着车联网技术的发展，车联网平台支持的终端数量巨大，协议支持多种多样，由于车载终端的厂家不同、出厂时间不同、所处地市不同等原因，会造成车载终端与车联网网关间的数据通信协议不同，比如常见的车联网JTT808协议、JTT809协议、千里眼协议、以及一些诸如工程车、环保车等所用的其他协议，甚至包括今后新增的新型协议等，可能需要对多种车载终端、人员定位终端、手机终端传输协议进行支持，对车联网系统建设中的可扩展性，以及跨终端数据接入能力有很高的要求。然而现有技术中单一数据接入的方法，存在着支持协议少，可扩展性较差的问题。
因此，如何针对这些多样化的协议实现海量终端数据的快速准确的接入车联网监控平台是本领域亟待解决的技术问题。
发明内容
本发明提供一种将车载终端数据接入车联网监控平台的方法，用以解决现有技术中车辆网监控平台接入终端数据时支持协议少，可扩展性较差的技术问题，该方法包括：
根据标准协议数据对从车载终端发送的终端数据进行有效性校验，所述标准协议数据为与所述平台兼容的协议数据；
基于所述平台的键值数据库对所述终端数据进行合法性校验；
当所述终端数据通过所述有效性校验和所述合法性校验后，根据预设映射关系将所述终端数据转换为平台协议数据，所述映射关系为平台协议与所述标准协议数据的映射关系；
将所述平台协议数据推送到待处理消息队列，以使所述终端数据接入所述平台。
优选的，根据标准协议数据对从车载终端发送的终端数据进行有效性校验，具体为：
解析获取所述终端数据的数据包的结构，所述结构由起始符、命令单元、数据加密方式、数据单元长度、数据单元和校验码组成；
基于异或校验法判断所述命令单元是否与所述标准协议数据匹配；
若是，确定所述终端数据通过所述有效性校验，并基于日志开关输出日志到日志文件；
若否，确定所述终端数据未通过所述有效性校验并丢弃。
优选的，在确定所述终端数据通过所述有效性校验之后，还包括：
确定所述终端数据所属主题，所述主题与所述标准协议数据的协议类型对应；
将所述终端数据直接推送到与所述主题对应的原始数据消息队列；
基于日志收集系统Flume采集与所述原始数据消息队列对应的日志数据；
将所述日志数据存储到分布式文件系统HDFS并映射到数据仓库工具HIVE。
优选的，基于所述平台的键值数据库对所述终端数据进行合法性校验，具体为：
根据所述终端数据确定车辆识别号码；
判断所述车辆识别号码是否存在于所述平台的键值数据库中；
若是，确定所述终端数据通过所述合法性校验；
若否，基于所述日志开关输出错误日志到所述日志文件，更新车辆的联网状态。
优选的，在确定所述终端数据通过所述合法性校验之后，还包括：
步骤a，判断所述终端数据是否加密，若是，执行步骤b，若否，执行步骤c；
步骤b，对所述终端数据进行解密，执行步骤c；
步骤c，判断所述终端数据是否签名，若是，执行步骤d，若否，执行步骤e；
步骤d，验证所述终端数据的签名，若验证通过，执行所述步骤e，若验证不通过，执行步骤f；
步骤e，更新所述联网状态；
步骤f，输出错误日志到所述日志文件。
优选的，更新所述联网状态，具体为：
判断所述平台中是否存在所述车辆；
若是，则不更新所述联网状态；
若否，将所述车辆识别号码实时更新至所述键值数据库中。
优选的，所述待处理消息队列和所述原始数据消息队列基于Kafka技术，所述键值数据库为Redis数据库。
相应地，本发明还提出了一种将车载终端数据接入车联网监控平台的设备，所述设备包括：
第一校验模块，用于根据标准协议数据对从车载终端发送的终端数据进行有效性校验，所述标准协议数据为与所述平台兼容的协议数据；
第二校验模块，用于基于所述平台的键值数据库对所述终端数据进行合法性校验；
转换模块，用于当所述终端数据通过所述有效性校验和所述合法性校验后，根据预设映射关系将所述终端数据转换为平台协议数据，所述映射关系为平台协议与所述标准协议数据的映射关系；
推送模块，用于将所述平台协议数据推送到待处理消息队列，以使所述终端数据接入所述平台。
相应地，本发明还提出了一种计算机可读存储介质，所述计算机可读存储介质中存储有指令，当所述指令在终端设备上运行时，使得所述终端设备执行如上所述的将车载终端数据接入车联网监控平台的方法。
相应地，本发明还提出了一种计算机程序产品，所述计算机程序产品在终端设备上运行时，使得所述终端设备执行如上所述的将车载终端数据接入车联网监控平台的方法。
与现有技术对比，本发明具备以下有益效果：
本发明公开了一种将车载终端数据接入车联网监控平台的方法和设备，该方法包括：根据标准协议数据对从车载终端发送的终端数据进行有效性校验，所述标准协议数据为与所述平台兼容的协议数据；基于所述平台的键值数据库对所述终端数据进行合法性校验；当所述终端数据通过所述有效性校验和所述合法性校验后，根据预设映射关系将所述终端数据转换为平台协议数据，所述映射关系为平台协议与所述标准协议数据的映射关系；将所述平台协议数据推送到待处理消息队列，以使所述终端数据接入所述平台，从而实现海量终端数据的快速准确的接入车联网监控平台，提高了数据接入效率。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例提出的一种将车载终端数据接入车联网监控平台的方法的流程示意图；
图2为本发明另一实施例提出的一种将车载终端数据接入车联网监控平台的方法的流程示意图；
图3为为本发明实施例提出的一种将车载终端数据接入车联网监控平台的设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
如背景技术所述，现有技术中车辆网监控平台接入终端数据时支持协议少，可扩展性较差。
为解决上述问题，本申请实施例提出了一种将车载终端数据接入车联网监控平台的方法，通过对终端数据进行有效性和合法性检验，并根据映射关系进行协议数据转换，从而实现海量终端数据的快速准确的接入。
如图1所示本发明实施例提出的一种将车载终端数据接入车联网监控平台的方法的流程示意图，该方法包括以下步骤：
步骤S101，根据标准协议数据对从车载终端发送的终端数据进行有效性校验，所述标准协议数据为与所述平台兼容的协议数据。
具体的，标准协议数据即与平台兼容的标准协议数据，如JTT808协议、JTT809协议、千里眼协议等，根据标准协议数据校验接收到的终端数据，判断其是否遵循标准协议数据的格式，从而校验其有效性。
为获得准确的校验结果，在本申请的优选实施例中，根据标准协议数据对从车载终端发送的终端数据进行有效性校验，具体为：
解析获取所述终端数据的数据包的结构，所述结构由起始符、命令单元、数据加密方式、数据单元长度、数据单元和校验码组成；
基于异或校验法判断所述命令单元是否与所述标准协议数据匹配；
若是，确定所述终端数据通过所述有效性校验，并基于日志开关输出日志到日志文件；
若否，确定所述终端数据未通过所述有效性校验并丢弃。
如上所述，首先解析接收到的终端数据，确定其数据包的结构，该结构由起始符、命令单元、数据加密方式、数据单元长度、数据单元和校验码组成，再基于异或校验法判断该命令单元是否与标准协议数据匹配，当匹配时，确定终端数据通过有效性校验，并基于日志开关输出日志到日志文件，当不匹配时，则确定所述终端数据未通过所述有效性校验，将其作为无效数据丢弃。
需要说明的是，以上优选实施例的方案仅为本申请所提出的一种具体实现方案，其他根据标准协议数据对从车载终端发送的终端数据进行有效性校验的方式均属于本申请的保护范围。
为保证接收到的数据的完整性，在本申请的优选实施例中，在确定所述终端数据通过所述有效性校验之后，还包括：
确定所述终端数据所属主题，所述主题与所述标准协议数据的协议类型对应；
将所述终端数据直接推送到与所述主题对应的原始数据消息队列；
基于日志收集系统Flume采集与所述原始数据消息队列对应的日志数据；
将所述日志数据存储到分布式文件系统HDFS并映射到数据仓库工具HIVE。
如上所述，在确定终端数据的有效性之后，根据终端数据所属的与标准协议对应的主题将终端数据直接推送到对应主题的原始数据消息队列，消息队列是对平台协议数据进行队列化，从而保证了进一步处理时的时序性，在通过日志收集系统Flume采集对应的日志数据，将日志数据存储到分布式文件系统HDFS并映射到数据仓库工具HIVE，从而保证了接收到的数据的完整性。
需要说明的是，以上优选实施例的方案仅为本申请所提出的一种具体实现方案，其他对通过有效性检验的终端数据进行直接存储的方式均属于本申请的保护范围。
步骤S102，基于所述平台的键值数据库对所述终端数据进行合法性校验。
具体的，键值数据库就类似传统语言中使用的哈希表。可以通过key来添加、查询或者删除数据库，因为使用key主键访问，所以会获得很高的性能及扩展性。键值数据库主要使用一个哈希表，这个表中有一个特定的键和一个指针指向特定的数据。Key/value模型对于IT系统来说的优势在于简单、易部署、高并发。典型产品有Memcached和Redis，通过查询键值数据库判断终端数据是否为合法的数据。
为准确判断终端数据的合法性，在本申请的优选实施例中，基于所述平台的键值数据库对所述终端数据进行合法性校验，具体为：
根据所述终端数据确定车辆识别号码；
判断所述车辆识别号码是否存在于所述平台的键值数据库中；
若是，确定所述终端数据通过所述合法性校验；
若否，基于所述日志开关输出错误日志到所述日志文件，更新车辆的联网状态。
具体的，终端数据中会带有车辆识别号码，车辆识别号码(VehicleIdentification Number，车架号码)，简称VIN，是一组由十七个英数组成，用于汽车上的一组独一无二的号码，可以识别汽车的生产商、引擎、底盘序号及其他性能等资料。通过判断车辆识别号码是否存在与键值数据库进行合法性校验，当未通过合法性校验时，基于日志开关输出错误日志到日志文件，更新车辆的联网状态。
需要说明的是，以上优选实施例的方案仅为本申请所提出的一种具体实现方案，本领域技术人员还选用除车辆识别号码以外的方式进行合法性校验，如校准标识(CALID)和校准验证号(CVN)，其他基于所述平台的键值数据库对所述终端数据进行合法性校验的方式均属于本申请的保护范围。
为提高数据的安全性，部分标准协议可能加密或有签名，为顺利获得终端数据中所携带的数据，在本申请的优选实施例中，在确定所述终端数据通过所述合法性校验之后，还包括：
步骤a，判断所述终端数据是否加密，若是，执行步骤b，若否，执行步骤c；
步骤b，对所述终端数据进行解密，执行步骤c；
步骤c，判断所述终端数据是否签名，若是，执行步骤d，若否，执行步骤e；
步骤d，验证所述终端数据的签名，若验证通过，执行所述步骤e，若验证不通过，执行步骤f；
步骤e，更新所述联网状态；
步骤f，输出错误日志到所述日志文件。
如上所述，通过对终端数据进行解密和或验证签名，可顺利获得终端数据中携带的数据，同时更新车辆的联网状态，并在验证签名不通过时输出错误日志到日志文件。
需要说明的是，以上优选实施例的方案仅为本申请所提出的一种具体实现方案，本领域技术人员可根据实际需要灵活选择解密和验签的方式，不同的方式并不影响本申请的保护范围。
为正确更新车辆的联网状态，在本申请的优选实施例中，更新所述联网状态，具体为：
判断所述平台中是否存在所述车辆；
若是，则不更新所述联网状态；
若否，将所述车辆识别号码实时更新至所述键值数据库中。
如上所述，通过判断平台中是否存在该车辆，当存在时，则不更新所述联网状态，当不存在时，将车辆识别号码实时更新至所述键值数据库中。
需要说明的是，以上优选实施例的方案仅为本申请所提出的一种具体实现方案，本领域技术人员还选用除车辆识别号码以外的方式更新联网状态，如CALID和CVN，这并不影响本申请的保护范围。
S103，当所述终端数据通过所述有效性校验和所述合法性校验后，根据预设映射关系将所述终端数据转换为平台协议数据，所述映射关系为平台协议与标准协议数据的映射关系。
如上所述，预设平台协议与标准协议数据之间的映射关系，根据该映射关系将终端数据转换为平台协议数据。
S104，将所述平台协议数据推送到待处理消息队列，以使所述终端数据接入所述平台。
如上所述，将平台协议数据推送到待处理消息队列，完成终端数据的接入。
为保证数据接入的效率，在本申请的优选实施例中，所述待处理消息队列和所述原始数据消息队列基于Kafka技术，所述键值数据库为Redis数据库。
具体的，Kafka是一种高吞吐量的分布式发布订阅消息系统，它可以处理消费者在网站中的所有动作流数据，Redis数据来自于系统管理服务，Redis数据库是一个高性能的键值key-value数据库，主要用来存储近期的计算结果数据，具有较高的实时性，从而保证了数据接入的效率。
本领域技术人员可根据实际需要灵活选用其他的消息队列技术和键值数据库，这并不影响本申请的保护范围。
通过应用以上技术方案，根据标准协议数据对从车载终端发送的终端数据进行有效性校验，所述标准协议数据为与所述平台兼容的协议数据；基于所述平台的键值数据库对所述终端数据进行合法性校验；当所述终端数据通过所述有效性校验和所述合法性校验后，根据预设映射关系将所述终端数据转换为平台协议数据，所述映射关系为平台协议与所述标准协议数据的映射关系；将所述平台协议数据推送到待处理消息队列，以使所述终端数据接入所述平台，从而实现海量终端数据的快速准确的接入车联网监控平台，提高了数据接入效率。
为了进一步阐述本发明的技术思想，现结合具体的应用场景，对本发明的技术方案进行说明。
本发明实施例提出了一种将车载终端数据接入车联网监控平台的方法，通过对接收的终端数据进行有效性校验和合法性校验，并将通过校验的终端数据转换为平台协议数据，最后将平台协议数据推动到Kafka消息队列完成终端数据的接入，从而实现海量终端数据的快速准确的接入车联网监控平台。
如图2所示为上述一种将车载终端数据接入车联网监控平台的方法的流程示意图，具体步骤如下：
步骤S201，接收终端数据。
车联网监控平台接收从安装在车辆上的终端发送的终端数据，平台和终端之间可采用GSM(Global System for Mobile Communications，全球移动通信系统)，3G、4G、WiFi等通信方式传输协议数据。
步骤S202，解析数据包结构。
一个完整的协议数据包应由起始符、命令单元、数据加密方式、数据单元长度、数据单元和校验码组成。通过对接收到达终端数据进行解析，确定其数据包结构。
步骤S203，判断是否通过有效性校验，若是，执行步骤S204、步骤S208和步骤S213，若否，执行步骤S212。
基于标准协议数据如JTT808协议、JTT809协议等对步骤S202中解析出的数据包结构进行有效性校验，采用BCC(异或校验)法，校验范围从命令单元的第一个字节开始，同后一字节异或，直到校验码前一字节为止，校验码占用一个字节，并判断是否通过校验。
步骤S204，判断是否通过合法性校验，若是，执行步骤S205，若否，执行步骤S214。
当终端数据通过有效性校验后，还对其进行合法性校验，基于Redis数据库判断终端数据所属VIN是否存在于平台，Redis数据来自于系统管理服务，Redis数据库是一个高性能的键值key-value数据库，主要用来存储近期的计算结果数据，具有较高的实时性，可定时查询Redis数据库进行合法性校验，如五分钟一次。
另外，针对部分标准协议还可能加密，还判断终端数据是否加密，将加密数据需要解密，其中，“0x01”表示数据不加密；“0x02”表示数据经过RSA算法加密；“0x03”表示数据经过AES128位算法加密；“0xFE”表示异常，“0xFF”表示无效，其他预留；
针对部分标准协议还可能有签名，验证终端数据是否有签名，将有签名的数据进行验签，其中，签名R值：16进制ASCII编码R值，长度1字节；签名S值：16进制ASCII编码S值，长度1字节。
步骤S205，更新车辆联网状态。
如存在此车辆联网状态，则不更新；无此车辆联网状态，则更新到redis数据库里，更新车辆联网状态是实时刷新的。
步骤S206，协议数据转换。
通过校验的终端数据中所遵循的标准协议数据与车联网监控平台的平台协议存在预设映射关系，通过该映射关系可以将终端数据转换为平台协议数据。
步骤S207，推送到待处理消息队列。
将步骤S206转换得到的平台协议数据推送到待处理消息队列，消息队列是利用高吞吐量的分布式发布订阅消息系统Kalfa对平台协议数据进行队列化，从而保证了进一步处理时的时序性。
步骤S208，推送到原始数据消息队列。
根据标准协议数据的类型将原始数据消息队列分为不同的主题，当终端数据通过合法性校验后，不做任何处理，将其直接推送到相应主题下的原始数据消息队列，保证了数据的完整性，便于后续查询历史记录。
步骤S209，采集日志数据(原始数据)。
通过日志收集系统Flume从原始消息队列中采集日志数据，Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统，Flume支持在日志系统中定制各类数据发送方，用于收集数据；同时，Flume提供对数据进行简单处理，并写到各种数据接受方(可定制)的能力。
步骤S210，存储日志数据到HDFS。
将步骤S209采集的日志数据无时间限制地存储到HDFS(Hadoop DistributedFile System，分布式文件系统)，HDFS有高容错性的特点，并且设计用来部署在低廉的硬件上；而且它提供高吞吐量来访问应用程序的数据，适合那些有着超大数据集的应用程序，并可以以流的形式访问(文件系统中的数据。
步骤S211，映射到HIVE。
将存储到HDFS的原始日志数据映射到数据仓库工具HIVE，HIVE可以将结构化的数据文件映射为数据库表，提供简单的SQL查询，将SQL语句转换为MapReduce任务运行，web端可通过接口服务提供的接口从HIVE中查询数据。
步骤S212，无效数据直接丢弃。
当终端数据未通过有效性校验后，将其作为无效数据直接丢弃。
步骤S213，输出所有日志到日志文件。
当终端数据通过有效性校验后，通过日志开关将对应的所有日志输出到日志文件。
步骤S214，输出错误日志到日志文件。
当终端数据未通过合法性校验后，通过日志开关将对应的错误日志输出到日志文件，可以在每天的固定时间将错误日志发送到指定的邮箱地址，便于查找错误原因。
步骤S215，更新车辆联网状态。
如存在此车辆联网状态，则不更新；无此车辆联网状态，则更新到redis数据库里。
通过应用以上技术方案，对接收的终端数据进行有效性校验和合法性校验，并将通过校验的终端数据转换为平台协议数据，最后将平台协议数据推动到Kafka消息队列完成终端数据的接入，从而实现海量终端数据的快速准确的接入车联网监控平台，提高了数据接入效率。
为了达到以上技术目的，本申请实施例还提出了一种将车载终端数据接入车联网监控平台的设备，如图3所示，所述设备包括：
第一校验模块301，用于根据标准协议数据对从车载终端发送的终端数据进行有效性校验，所述标准协议数据为与所述平台兼容的协议数据；
第二校验模块302，用于基于所述平台的键值数据库对所述终端数据进行合法性校验；
转换模块303，用于当所述终端数据通过所述有效性校验和所述合法性校验后，根据预设映射关系将所述终端数据转换为平台协议数据，所述映射关系为平台协议与所述标准协议数据的映射关系；
推送模块304，用于将所述平台协议数据推送到待处理消息队列，以使所述终端数据接入所述平台。
最后应说明的是：以上实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不驱使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (10)

1.一种将车载终端数据接入车联网监控平台的方法，其特征在于，所述方法包括：
根据标准协议数据对从车载终端发送的终端数据进行有效性校验，所述标准协议数据为与所述平台兼容的协议数据；
基于所述平台的键值数据库对所述终端数据进行合法性校验；
当所述终端数据通过所述有效性校验和所述合法性校验后，根据预设映射关系将所述终端数据转换为平台协议数据，所述映射关系为平台协议与所述标准协议数据的映射关系；
将所述平台协议数据推送到待处理消息队列，以使所述终端数据接入所述平台。
2.如权利要求1所述的方法，其特征在于，根据标准协议数据对从车载终端发送的终端数据进行有效性校验，具体为：
解析获取所述终端数据的数据包的结构，所述结构由起始符、命令单元、数据加密方式、数据单元长度、数据单元和校验码组成；
基于异或校验法判断所述命令单元是否与所述标准协议数据匹配；
若是，确定所述终端数据通过所述有效性校验，并基于日志开关输出日志到日志文件；
若否，确定所述终端数据未通过所述有效性校验并丢弃。
3.如权利要求2所述的方法，其特征在于，在确定所述终端数据通过所述有效性校验之后，还包括：
确定所述终端数据所属主题，所述主题与所述标准协议数据的协议类型对应；
将所述终端数据直接推送到与所述主题对应的原始数据消息队列；
基于日志收集系统Flume采集与所述原始数据消息队列对应的日志数据；
将所述日志数据存储到分布式文件系统HDFS并映射到数据仓库工具HIVE。
4.如权利要求2所述的方法，其特征在于，基于所述平台的键值数据库对所述终端数据进行合法性校验，具体为：
根据所述终端数据确定车辆识别号码；
判断所述车辆识别号码是否存在于所述平台的键值数据库中；
若是，确定所述终端数据通过所述合法性校验；
若否，基于所述日志开关输出错误日志到所述日志文件，更新车辆的联网状态。
5.如权利要求4所述的方法，其特征在于，在确定所述终端数据通过所述合法性校验之后，还包括：
步骤a，判断所述终端数据是否加密，若是，执行步骤b，若否，执行步骤c；
步骤b，对所述终端数据进行解密，执行步骤c；
步骤c，判断所述终端数据是否签名，若是，执行步骤d，若否，执行步骤e；
步骤d，验证所述终端数据的签名，若验证通过，执行所述步骤e，若验证不通过，执行步骤f；
步骤e，更新所述联网状态；
步骤f，输出错误日志到所述日志文件。
6.如权利要求5所述的方法，其特征在于，更新所述联网状态，具体为：
判断所述平台中是否存在所述车辆；
若是，则不更新所述联网状态；
若否，将所述车辆识别号码实时更新至所述键值数据库中。
7.如权利要求3所述的方法，其特征在于，所述待处理消息队列和所述原始数据消息队列基于Kafka技术，所述键值数据库为Redis数据库。
8.一种将车载终端数据接入车联网监控平台的设备，其特征在于，所述设备包括：
第一校验模块，用于根据标准协议数据对从车载终端发送的终端数据进行有效性校验，所述标准协议数据为与所述平台兼容的协议数据；
第二校验模块，用于基于所述平台的键值数据库对所述终端数据进行合法性校验；
转换模块，用于当所述终端数据通过所述有效性校验和所述合法性校验后，根据预设映射关系将所述终端数据转换为平台协议数据，所述映射关系为平台协议与所述标准协议数据的映射关系；
推送模块，用于将所述平台协议数据推送到待处理消息队列，以使所述终端数据接入所述平台。
9.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有指令，当所述指令在终端设备上运行时，使得所述终端设备执行如权利要求1-7任一项所述的将车载终端数据接入车联网监控平台的方法。
10.一种计算机程序产品，其特征在于，所述计算机程序产品在终端设备上运行时，使得所述终端设备执行如权利要求1-7任一项所述的将车载终端数据接入车联网监控平台的方法。
CN201911334129.5A 2019-12-23 2019-12-23 一种将车载终端数据接入车联网监控平台的方法和设备 Pending CN111131231A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911334129.5A CN111131231A (zh) 2019-12-23 2019-12-23 一种将车载终端数据接入车联网监控平台的方法和设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911334129.5A CN111131231A (zh) 2019-12-23 2019-12-23 一种将车载终端数据接入车联网监控平台的方法和设备

Publications (1)

Publication Number Publication Date
CN111131231A true CN111131231A (zh) 2020-05-08

Family

ID=70501161

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911334129.5A Pending CN111131231A (zh) 2019-12-23 2019-12-23 一种将车载终端数据接入车联网监控平台的方法和设备

Country Status (1)

Country Link
CN (1) CN111131231A (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113239048A (zh) * 2021-05-26 2021-08-10 五八有限公司 一种数据管理方法、装置、电子设备及存储介质
CN113672990A (zh) * 2021-07-31 2021-11-19 深圳鼎然信息科技有限公司 车联网数据校验方法、装置、设备及存储介质
CN113783831A (zh) * 2021-01-19 2021-12-10 北京沃东天骏信息技术有限公司 一种物联网信息处理方法、装置和系统
CN114499999A (zh) * 2021-12-31 2022-05-13 北京罗克维尔斯科技有限公司 身份认证方法、装置、平台、车辆、设备及介质
CN114697365A (zh) * 2020-12-28 2022-07-01 北京达佳互联信息技术有限公司 门结构状态监控方法、系统、监测设备及网关设备
WO2022140881A1 (zh) * 2020-12-28 2022-07-07 深圳元戎启行科技有限公司 无人驾驶车辆车底盘控制方法、装置和计算机设备
CN115062012A (zh) * 2022-05-24 2022-09-16 中汽创智科技有限公司 数据处理方法、装置、存储介质和电子设备
CN115664691A (zh) * 2022-08-05 2023-01-31 中电车联信安科技有限公司 一种通信安全车联网系统

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060075442A1 (en) * 2004-08-31 2006-04-06 Real Data Center, Inc. Apparatus and method for producing video drive-by data corresponding to a geographic location
CN107483553A (zh) * 2017-07-24 2017-12-15 北汽福田汽车股份有限公司 车联网系统和车辆信息上传方法
CN107566197A (zh) * 2017-10-26 2018-01-09 苏州市伏泰信息科技股份有限公司 环卫终端传感数据统一接入平台
CN107948193A (zh) * 2017-12-22 2018-04-20 大陆汽车投资（上海）有限公司 适于多终端类型接入的车辆共享服务器通讯方法
CN108063775A (zh) * 2018-02-13 2018-05-22 广州云湾信息技术有限公司 通信协议兼容方法、装置及系统
CN108284805A (zh) * 2017-12-18 2018-07-17 航天新长征大道科技有限公司 一种车载终端异常登录处理方法、服务器、车载终端
CN108769165A (zh) * 2018-05-17 2018-11-06 深圳市信锐网科技术有限公司 一种物联网中数据处理方法、物联网接入系统
CN109889551A (zh) * 2019-04-16 2019-06-14 湖南树华环保科技有限公司 一种智能硬件接入的物联网云平台的方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060075442A1 (en) * 2004-08-31 2006-04-06 Real Data Center, Inc. Apparatus and method for producing video drive-by data corresponding to a geographic location
CN107483553A (zh) * 2017-07-24 2017-12-15 北汽福田汽车股份有限公司 车联网系统和车辆信息上传方法
CN107566197A (zh) * 2017-10-26 2018-01-09 苏州市伏泰信息科技股份有限公司 环卫终端传感数据统一接入平台
CN108284805A (zh) * 2017-12-18 2018-07-17 航天新长征大道科技有限公司 一种车载终端异常登录处理方法、服务器、车载终端
CN107948193A (zh) * 2017-12-22 2018-04-20 大陆汽车投资（上海）有限公司 适于多终端类型接入的车辆共享服务器通讯方法
CN108063775A (zh) * 2018-02-13 2018-05-22 广州云湾信息技术有限公司 通信协议兼容方法、装置及系统
CN108769165A (zh) * 2018-05-17 2018-11-06 深圳市信锐网科技术有限公司 一种物联网中数据处理方法、物联网接入系统
CN109889551A (zh) * 2019-04-16 2019-06-14 湖南树华环保科技有限公司 一种智能硬件接入的物联网云平台的方法

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114697365A (zh) * 2020-12-28 2022-07-01 北京达佳互联信息技术有限公司 门结构状态监控方法、系统、监测设备及网关设备
WO2022140881A1 (zh) * 2020-12-28 2022-07-07 深圳元戎启行科技有限公司 无人驾驶车辆车底盘控制方法、装置和计算机设备
CN113783831A (zh) * 2021-01-19 2021-12-10 北京沃东天骏信息技术有限公司 一种物联网信息处理方法、装置和系统
CN113783831B (zh) * 2021-01-19 2024-01-16 北京沃东天骏信息技术有限公司 一种物联网信息处理方法、装置和系统
CN113239048A (zh) * 2021-05-26 2021-08-10 五八有限公司 一种数据管理方法、装置、电子设备及存储介质
CN113672990A (zh) * 2021-07-31 2021-11-19 深圳鼎然信息科技有限公司 车联网数据校验方法、装置、设备及存储介质
CN114499999A (zh) * 2021-12-31 2022-05-13 北京罗克维尔斯科技有限公司 身份认证方法、装置、平台、车辆、设备及介质
CN114499999B (zh) * 2021-12-31 2024-02-20 北京罗克维尔斯科技有限公司 身份认证方法、装置、平台、车辆、设备及介质
CN115062012A (zh) * 2022-05-24 2022-09-16 中汽创智科技有限公司 数据处理方法、装置、存储介质和电子设备
CN115664691A (zh) * 2022-08-05 2023-01-31 中电车联信安科技有限公司 一种通信安全车联网系统
CN115664691B (zh) * 2022-08-05 2023-04-11 中电车联信安科技有限公司 一种通信安全车联网系统

Similar Documents

Publication Publication Date Title
CN111131231A (zh) 一种将车载终端数据接入车联网监控平台的方法和设备
US20200050782A1 (en) Method and apparatus for operating database
US10447773B2 (en) Aggregating vehicle-related big data
CN107636602A (zh) 一种数据处理方法及数据处理设备
CN113015165A (zh) 物联网平台设备接入方法、设备及系统
CN111740868B (zh) 告警数据的处理方法和装置及存储介质
CN109818962B (zh) 业务数据处理方法及装置、电子设备、存储介质
CN113225339B (zh) 网络安全监测方法、装置、计算机设备及存储介质
CN110830491A (zh) 车联网信息获取方法及装置
CN112632129A (zh) 一种码流数据管理方法、装置及存储介质
CN114647698A (zh) 数据同步方法、装置及计算机存储介质
CN115827928A (zh) 车辆数据处理方法、装置、设备、介质及产品
CN111355817B (zh) 域名解析方法、装置、安全服务器及介质
CN112087475A (zh) 一种云平台组件应用的消息推送方法、装置及消息服务器
CN112803950A (zh) 一种数据压缩方法、装置、设备及计算机存储介质
CN107529191B (zh) 一种基于radius和portal协议记录用户终端下线时间的方法
CN111641684A (zh) 一种车辆运行信号和远程控制信号数据的适配方法及系统
CN115622963A (zh) 基于工业交换机的报文检测方法、装置、设备与介质
CN112003867B (zh) 车载t-box与云服务器的通信方法及相关设备
JP2019029921A (ja) 送信装置、受信装置、及び通信方法
CN1300977C (zh) 一种开放式的超远距离工业监控信息集成方法及系统
CN111083701A (zh) 一种软件定义无线传感器网络中的硬件身份认证方法
CN115134097B (zh) 终端设备的核查方法及装置、存储介质、电子设备
CN118041993B (zh) 一种基于会计数据的多端设备传输方法及系统
CN115391293B (zh) 文件获取方法、装置、服务器及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20200508

RJ01 Rejection of invention patent application after publication