CN105491531B - 基于Hadoop的车主行车轨迹获取系统及方法 - Google Patents

基于Hadoop的车主行车轨迹获取系统及方法 Download PDF

Info

Publication number
CN105491531B
CN105491531B CN201410472582.3A CN201410472582A CN105491531B CN 105491531 B CN105491531 B CN 105491531B CN 201410472582 A CN201410472582 A CN 201410472582A CN 105491531 B CN105491531 B CN 105491531B
Authority
CN
China
Prior art keywords
information
hbase
wheelpath
vehicle
server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410472582.3A
Other languages
English (en)
Other versions
CN105491531A (zh
Inventor
秦勇
姚振
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Taima Information Network Technology Co Ltd
Original Assignee
Taima Information Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Taima Information Network Technology Co Ltd filed Critical Taima Information Network Technology Co Ltd
Priority to CN201410472582.3A priority Critical patent/CN105491531B/zh
Publication of CN105491531A publication Critical patent/CN105491531A/zh
Application granted granted Critical
Publication of CN105491531B publication Critical patent/CN105491531B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Traffic Control Systems (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明揭示了一种基于Hadoop的车主行车轨迹获取系统及方法,所述系统包括服务器、终端设备;服务器用以将行车轨迹记录至Hbase中的对应表中,并供终端设备查询;终端设备用以从Hbase中的对应表中获取对应车辆的行车轨迹信息;服务器包括有效性验证模块、信息写入模块、信息返回模块、Hadoop/Hbase集群模块、入口网关模块。终端设备用以接收从服务器发送的GPS序列数据,并根据设定规则在地图上绘制GPS点。本发明提出的基于Hadoop的车主行车轨迹获取系统及方法,通过本身的Hadoop/Hbase大数据平台进行信息获取、记录、分析、处理车辆行车轨迹,能够有效解决超大数据量带来的分析与存储相关瓶颈问题,能够对众多车辆的GPS等信息进行平台级大数据处理,保证数据的完整可靠。

Description

基于Hadoop的车主行车轨迹获取系统及方法
技术领域
本发明属于行车轨迹获取技术领域,涉及一种车主行车轨迹获取系统,尤其涉及一种基于Hadoop的车主行车轨迹获取系统;同时,本发明还涉及一种基于Hadoop的车主行车轨迹获取方法。
背景技术
行车轨迹对每位驾驶人员来说都有很重要的意义,通过行车轨迹可以了解车辆行驶的具体路线,在有争议的交通事故中也可进行有力的证明。
目前现有的行车轨迹记录的产品很多,大多是通过终端软件获取GPS信息进行数据存储与GPS数据拼凑成像,完成轨迹回放。也有用平台来定位多个车辆,并对车辆进行的GPS信息处理并成像,但这种平台级的后台架构大多是基于普通的关系型数据库加传统的硬件存储进行数据分析与存储,对车辆相关数据量较大时的处理与存储能力让人堪忧。
有鉴于此,如今迫切需要设计一种新的车主行车轨迹获取方式,以便克服现有方式的上述缺陷。
发明内容
本发明所要解决的技术问题是:提供一种基于Hadoop的车主行车轨迹获取系统,能够有效解决超大数据量带来的分析与存储相关瓶颈问题,能够对众多车辆的GPS等信息进行平台级大数据处理,保证数据的完整可靠。
此外,本发明还提供一种基于Hadoop的车主行车轨迹获取方法,能够有效解决超大数据量带来的分析与存储相关瓶颈问题,能够对众多车辆的GPS等信息进行平台级大数据处理,保证数据的完整可靠。
为解决上述技术问题,本发明采用如下技术方案:
一种基于Hadoop的车主行车轨迹获取系统,所述系统包括:服务器、终端设备;
所述服务器用以将行车轨迹记录至Hbase中的对应表中,并供终端设备查询;所述终端设备用以从Hbase中的对应表中获取对应车辆的行车轨迹信息;
所述服务器包括:
-有效性验证模块,用以在服务器接收到GPS信息后首先验证用户令牌token的有效性,token中包含车机的标识号、车机类型信息;取出车机的token信息,和用户平台车机信息进行比对判断,确定token有效后调取车机相关信息,根据车机信息读取对应车辆信息,之后判断是否有对应的车辆,如果没有对应的车辆信息,后台会抛出没有找到车辆信息的异常;
-信息写入模块,用以将经过所述有效性验证模块验证有效的车辆轨迹信息写入Hbase中的对应表;
-信息返回模块,用以在有用户发起查看行车轨迹的请求后,按终端设备操作流程将Hbase数据返回给客户端成像;Hbase数据为根据设定规则计算后生成的GPS序列数据;
-Hadoop/Hbase集群模块,用以通过分布式系统架构对大量数据进行分析处理,仅使用普通硬件配置就能完成成千上万的行和列组成的大数据;用多台普通配置PC服务器组成集群,当有众多请求时,请求会送入集群计算节点进行计算处理,将计算结果进行反馈到数据库中供使用;
-入口网关模块,服务容器SP将多个应用集成到里面,接受接入服务器AP传入的数据进行处理;
所述终端设备用以接收从服务器发送的GPS序列数据,并根据设定规则在地图上绘制GPS点。
作为本发明的一种优选方案,所述终端设备包括车载终端设备、手机、笔记本、PC机、平板电脑中的一种或多种。
一种基于Hadoop的车主行车轨迹获取方法,所述方法包括:服务器将行车轨迹记录至Hbase中的对应表中,并供终端设备查询;终端设备从Hbase中的对应表中获取对应车辆的行车轨迹信息;
所述方法具体包括如下步骤:
步骤S1、有效性验证步骤,在服务器接收到GPS信息后首先验证用户令牌token的有效性,token中包含车机的标识号、车机类型信息;取出车机的token信息,和用户平台车机信息进行比对判断,确定token有效后调取车机相关信息,根据车机信息读取对应车辆信息,之后判断是否有对应的车辆,如果没有对应的车辆信息,后台会抛出没有找到车辆信息的异常;
步骤S2、信息写入步骤,将经过所述有效性验证模块验证有效的车辆轨迹信息写入Hbase中的对应表;
步骤S3、大数据处理步骤,Hadoop/Hbase集群模块通过分布式系统架构对大量数据进行分析处理,仅使用普通硬件配置就能完成成千上万的行和列组成的大数据;
步骤S4、入口网关设置步骤,服务容器SP将多个应用集成到里面,接受接入服务器AP传入的数据进行处理;
步骤S5、信息返回步骤,在有用户发起查看行车轨迹的请求后,按终端设备操作流程将Hbase数据返回给客户端成像;Hbase数据为根据设定规则计算后生成的GPS序列数据;
步骤S6、终端设备接收从服务器发送的GPS序列数据,并根据设定规则在地图上绘制GPS点。
本发明的有益效果在于:本发明提出的基于Hadoop的车主行车轨迹获取系统及方法,通过本身的Hadoop/Hbase大数据平台进行信息获取、记录、分析、处理车辆行车轨迹,能够有效解决超大数据量带来的分析与存储相关瓶颈问题,能够对众多车辆的GPS等信息进行平台级大数据处理,保证数据的完整可靠。在终端车辆数量巨大的情况下,能够按车辆请求给出轨迹路线,相比传统实现方案,数据量不再是瓶颈。
附图说明
图1为本发明系统的平台整体架构图。
图2为本发明系统服务端信息处理示意图。
图3为本发明系统终端信息处理示意图。
具体实施方式
下面结合附图详细说明本发明的优选实施例。
实施例一
请参阅图1,本发明揭示了一种基于Hadoop的车主行车轨迹获取系统,所述系统包括:服务器、终端设备。所述服务器用以将行车轨迹记录至Hbase中的对应表中,并供终端设备查询;所述终端设备用以从Hbase中的对应表中获取对应车辆的行车轨迹信息。
所述服务器包括:有效性验证模块、信息写入模块、信息返回模块、Hadoop/Hbase集群模块、入口网关模块。
有效性验证模块用以在服务器接收到GPS信息后首先验证用户令牌token的有效性,token中包含车机的标识号、车机类型信息;取出车机的token信息,和用户平台车机信息进行比对判断,确定token有效后调取车机相关信息,根据车机信息读取对应车辆信息,之后判断是否有对应的车辆,如果没有对应的车辆信息,后台会抛出没有找到车辆信息的异常。
信息写入模块用以将经过所述有效性验证模块验证有效的车辆轨迹信息写入Hbase中的对应表。
信息返回模块用以在有用户发起查看行车轨迹的请求后,按终端设备操作流程将Hbase数据返回给客户端成像;Hbase数据为根据设定规则计算后生成的GPS序列数据。
Hadoop/Hbase集群模块用以通过分布式系统架构对大量数据进行分析处理,仅使用普通硬件配置就能完成成千上万的行和列组成的大数据。用多台普通配置PC服务器组成集群,当有众多请求时,请求会送入集群计算节点进行计算处理,将计算结果进行反馈到数据库中供使用。
入口网关模块中,服务容器SP将多个应用集成到里面,接受接入服务器AP传入的数据进行处理。
所述终端设备用以接收从服务器发送的GPS序列数据,并根据设定规则在地图上绘制GPS点。所述终端设备可以为车载终端设备、手机、笔记本、PC机、平板电脑中的一种或多种。
本发明还揭示一种基于Hadoop的车主行车轨迹获取方法,所述方法包括:服务器将行车轨迹记录至Hbase中的对应表中,并供终端设备查询;终端设备从Hbase中的对应表中获取对应车辆的行车轨迹信息。
所述方法具体包括如下步骤:
步骤S1、有效性验证步骤,在服务器接收到GPS信息后首先验证用户token的有效性,token中包含车机的标识号、车机类型信息;取出车机的token信息,和用户平台车机信息进行比对判断,确定token有效后调取车机相关信息,根据车机信息读取对应车辆信息,之后判断是否有对应的车辆,如果没有对应的车辆信息,后台会抛出没有找到车辆信息的异常;
步骤S2、信息写入步骤,将经过所述有效性验证模块验证有效的车辆轨迹信息写入Hbase中的对应表;
步骤S3、大数据处理步骤,Hadoop/Hbase集群模块通过分布式系统架构对大量数据进行分析处理,仅使用普通硬件配置就能完成成千上万的行和列组成的大数据;
步骤S4、入口网关设置步骤,SP将多个应用集成到里面,接受AP传入的数据进行处理;
步骤S5、信息返回步骤,在有用户发起查看行车轨迹的请求后,按终端设备操作流程(可参阅图3)将Hbase数据返回给客户端成像;Hbase数据为根据设定规则计算后生成的GPS序列数据;
步骤S6、终端设备接收从服务器发送的GPS序列数据,并根据设定规则在地图上绘制GPS点。
实施例二
行车轨迹功能在Hadoop/Hbase的大数据分析平台实现首先是车辆GPS信息获取,将得到的GPS信息进行识别、分析、业务功能转换,将结果存入Hbase,通过前端调取Hbase中相关信息进行轨迹成像,返送给驾驶人员。
整体的架构如图1所示,平台对客户端GPS信息通过一定频率进行采集,车辆自带的sim卡通过移动网络将GPS信息上传,信息通过负载均衡设备进行分流后到达平台前端AP,AP作为网关角色将搜集到的GPS信息送给SP,通过Zookper进行调度后,集群对GPS信息进行处理,如将GPS数据转换,关联等等操作后,送入Hbase进行存储。终端软件调取Hbase中存储的处理后的数据,并根据当前用户读取对应用户的GPS处理信息到终端成像呈现轨迹信息。
请参阅图2,服务端信息处理图,服务端的处理平台包括一套Hadoop/Hbase集群,全部运行在物理机上,根据实际的数据处理需求可平行扩展集群节点。物理机采用普通pcserver,有效降低成本,但又不降低数据处理的能力等平台相关性能。
服务端接收到GPS信息后首先验证用户token的有效性,token中包含车机的id,车机类型等信息,取出车机的token信息,和用户平台车机信息进行比对判断,token有效后调取车机相关信息,根据车机信息读取对应车辆信息,之后判断是否有对应的车辆,如果没有对应的车辆信息,后台会抛出没有找到车辆信息的异常,如有则将对应的车辆轨迹信息写入Hbase中的对应表。服务端对信息处理的写操作完成,当有用户发起查看行车轨迹的请求后,按客户端操作流程将Hbase数据返回给客户端成像。
Hadoop/Hbase集群:Hadoop是一个分布式系统架构,它能够对大量数据进行分析处理,该集群架构能有效解决大量数据计算处理的瓶颈。Hbase是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,它能够仅使用普通硬件配置就能完成成千上万的行和列组成的大数据。
AP/SP:AP作为应用请求的入口网关,SP将多个应用集成到里面,接受AP传入的数据进行处理,AP/SP是钛马自主研发的架构平台。
如图3所示,图3为终端信息处理图,终端设备包括车载终端,以及手机端APP,在手机端APP有开启和关闭行车轨迹功能,当设置为开启时,车机端通过从服务器端读取相应的配置信息如获取频率等信息,按配置信息上传GPS数据,手机端点击轨迹回放,并选择历史查询区间后,服务端将返回GPS序列数据给手机端,手机端APP将根据收到的GPS序列数据,在地图上绘制GPS点,即可完成轨迹回放。
车辆轨迹实现方式与hadoop结合点;车辆轨迹相关的数据如车机的ID,车辆的GPS信息等等都存放于Hbase中,Hbase作为一个高性能、高可靠的存储系统运行于Hadoop分布式文件系统之上.数据量较大时,系统可平行扩展满足请求。
综上所述,本发明提出的基于Hadoop的车主行车轨迹获取系统及方法,通过本身的Hadoop/Hbase大数据平台进行信息获取、记录、分析、处理车辆行车轨迹,能够有效解决超大数据量带来的分析与存储相关瓶颈问题,能够对众多车辆的GPS等信息进行平台级大数据处理,保证数据的完整可靠。在终端车辆数量巨大的情况下,能够按车辆请求给出轨迹路线,相比传统实现方案,数据量不再是瓶颈。
这里本发明的描述和应用是说明性的,并非想将本发明的范围限制在上述实施例中。这里所披露的实施例的变形和改变是可能的,对于那些本领域的普通技术人员来说实施例的替换和等效的各种部件是公知的。本领域技术人员应该清楚的是,在不脱离本发明的精神或本质特征的情况下,本发明可以以其它形式、结构、布置、比例,以及用其它组件、材料和部件来实现。在不脱离本发明范围和精神的情况下,可以对这里所披露的实施例进行其它变形和改变。

Claims (3)

1.一种基于Hadoop的车主行车轨迹获取系统,其特征在于,所述系统包括:服务器、终端设备;
所述服务器用以将行车轨迹记录至Hbase中的对应表中,并供终端设备查询;所述终端设备用以从Hbase中的对应表中获取对应车辆的行车轨迹信息;
所述服务器包括:
-有效性验证模块,用以在服务器接收到GPS信息后首先验证用户令牌token的有效性,token中包含车机的标识号、车机类型信息;取出车机的token信息,和用户平台车机信息进行比对判断,确定token有效后调取车机相关信息,根据车机信息读取对应车辆信息,之后判断是否有对应的车辆,如果没有对应的车辆信息,后台会抛出没有找到车辆信息的异常;
-信息写入模块,用以将经过所述有效性验证模块验证有效的车辆轨迹信息写入Hbase中的对应表;
-信息返回模块,用以在有用户发起查看行车轨迹的请求后,按终端设备操作流程将Hbase数据返回给客户端成像;Hbase数据为根据设定规则计算后生成的GPS序列数据;
-Hadoop/Hbase集群模块,用以通过分布式系统架构对大量数据进行分析处理,仅使用普通硬件配置就能完成成千上万的行和列组成的大数据处理;用多台普通配置PC服务器组成集群,当有众多请求时,请求会送入集群计算节点进行计算处理,将计算结果进行反馈到数据库中供使用;
-入口网关模块,服务容器SP将多个应用集成到里面,接收接入服务器AP传入的数据进行处理;
所述终端设备用以接收从服务器发送的GPS序列数据,并根据设定规则在地图上绘制GPS点。
2.根据权利要求1所述的基于Hadoop的车主行车轨迹获取系统,其特征在于:
所述终端设备包括车载终端设备、手机、笔记本、PC机、平板电脑中的一种或多种。
3.一种基于Hadoop的车主行车轨迹获取方法,其特征在于,所述方法包括:服务器将行车轨迹记录至Hbase中的对应表中,并供终端设备查询;终端设备从Hbase中的对应表中获取对应车辆的行车轨迹信息;
所述方法具体包括如下步骤:
步骤S1、有效性验证步骤,在服务器接收到GPS信息后首先验证用户令牌token的有效性,token中包含车机的标识号、车机类型信息;取出车机的token信息,和用户平台车机信息进行比对判断,确定token有效后调取车机相关信息,根据车机信息读取对应车辆信息,之后判断是否有对应的车辆,如果没有对应的车辆信息,后台会抛出没有找到车辆信息的异常;
步骤S2、信息写入步骤,将经过所述有效性验证步骤验证有效的车辆轨迹信息写入Hbase中的对应表;
步骤S3、大数据处理步骤,Hadoop/Hbase集群模块通过分布式系统架构对大量数据进行分析处理,仅使用普通硬件配置就能完成成千上万的行和列组成的大数据;
步骤S4、入口网关设置步骤,服务容器SP将多个应用集成到里面,接收接入服务器AP传入的数据进行处理;
步骤S5、信息返回步骤,在有用户发起查看行车轨迹的请求后,按终端设备操作流程将Hbase数据返回给客户端成像;Hbase数据为根据设定规则计算后生成的GPS序列数据;
步骤S6、终端设备接收从服务器发送的GPS序列数据,并根据设定规则在地图上绘制GPS点。
CN201410472582.3A 2014-09-16 2014-09-16 基于Hadoop的车主行车轨迹获取系统及方法 Active CN105491531B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410472582.3A CN105491531B (zh) 2014-09-16 2014-09-16 基于Hadoop的车主行车轨迹获取系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410472582.3A CN105491531B (zh) 2014-09-16 2014-09-16 基于Hadoop的车主行车轨迹获取系统及方法

Publications (2)

Publication Number Publication Date
CN105491531A CN105491531A (zh) 2016-04-13
CN105491531B true CN105491531B (zh) 2019-04-12

Family

ID=55678176

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410472582.3A Active CN105491531B (zh) 2014-09-16 2014-09-16 基于Hadoop的车主行车轨迹获取系统及方法

Country Status (1)

Country Link
CN (1) CN105491531B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110348092B (zh) * 2019-06-28 2023-12-08 浙江吉利控股集团有限公司 一种轨迹数据模拟方法及装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102486876A (zh) * 2010-12-06 2012-06-06 群丰科技股份有限公司 行车记录装置以及影像记录方法
CN102486378A (zh) * 2010-12-03 2012-06-06 国基电子(上海)有限公司 一种行车轨迹警示方法与导航装置
CN102831673A (zh) * 2012-09-06 2012-12-19 中兴通讯股份有限公司 行车记录处理方法、装置及设备
CN103824346A (zh) * 2014-02-17 2014-05-28 深圳市宇恒互动科技开发有限公司 行车记录及重现方法和系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102486378A (zh) * 2010-12-03 2012-06-06 国基电子(上海)有限公司 一种行车轨迹警示方法与导航装置
CN102486876A (zh) * 2010-12-06 2012-06-06 群丰科技股份有限公司 行车记录装置以及影像记录方法
CN102831673A (zh) * 2012-09-06 2012-12-19 中兴通讯股份有限公司 行车记录处理方法、装置及设备
CN103824346A (zh) * 2014-02-17 2014-05-28 深圳市宇恒互动科技开发有限公司 行车记录及重现方法和系统

Also Published As

Publication number Publication date
CN105491531A (zh) 2016-04-13

Similar Documents

Publication Publication Date Title
CN110198432B (zh) 视频数据的处理方法、装置、计算机可读介质及电子设备
CN103813267B (zh) 签到方法及系统
CN110535660A (zh) 一种基于区块链的取证服务系统
CN109271810A (zh) 一种基于区块链的考试信息记录系统及考试信息记录方法
CN104836859B (zh) 基于车载诊断系统的云端数据整合的方法和系统
CN108805595B (zh) 提供定向问题数据的方法、装置及计算机存储介质
DE112018007131T5 (de) Näherungsbasierte reservierungen für gemeinsam genutzten transport
US10579887B2 (en) Identification using mobile device signatures and cameras
CN111798354A (zh) 一种公共交通的乘车人员信息管理方法及装置
CN106779673B (zh) 一种电子支付方法及系统
WO2018232994A1 (zh) 一种停车收费方法及系统
CN105491531B (zh) 基于Hadoop的车主行车轨迹获取系统及方法
CN106898052A (zh) 一种车辆收费方法及系统
Hu et al. Towards mobility-as-a-service to promote smart transportation
CN106452816B (zh) 一种信息处理方法、服务器及客户端
CN103344237B (zh) 行人、车辆导航路线自动匹配终端、系统及方法
CN109410572A (zh) 一种交通事故全过程还原方法与系统
WO2023142421A1 (zh) 一种交易处理方法、装置、设备及存储介质
KR20210065764A (ko) 공유경제플랫폼의 인공지능 비대면 차량가용유무 관리 서비스 제공 시스템
US20140304109A1 (en) Method with an event management device
CN109040781A (zh) 视频认证方法、装置、系统、电子设备及可读介质
CN108121288A (zh) 车联网大数据系统、对接系统和方法
CN101662651B (zh) 播放媒体信息的方法、终端及系统
Barbosa et al. An architecture proposal for the creation of a database to open data related to ITS in smart cities
CN107005814A (zh) 用于控制从车辆的控制设备的至少一个数据检索的方法和装置以及用于从车辆的控制设备检索数据的方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
PE01 Entry into force of the registration of the contract for pledge of patent right
PE01 Entry into force of the registration of the contract for pledge of patent right

Denomination of invention: Hadoop based vehicle owner track acquisition system and method

Effective date of registration: 20221021

Granted publication date: 20190412

Pledgee: Industrial Bank Co.,Ltd. Shanghai West sub branch

Pledgor: TAIMA INFORMATION NETWORK TECHNOLOGY Co.,Ltd.

Registration number: Y2022310000291

PC01 Cancellation of the registration of the contract for pledge of patent right
PC01 Cancellation of the registration of the contract for pledge of patent right

Date of cancellation: 20230926

Granted publication date: 20190412

Pledgee: Industrial Bank Co.,Ltd. Shanghai West sub branch

Pledgor: TAIMA INFORMATION NETWORK TECHNOLOGY Co.,Ltd.

Registration number: Y2022310000291

PE01 Entry into force of the registration of the contract for pledge of patent right
PE01 Entry into force of the registration of the contract for pledge of patent right

Denomination of invention: Hadoop based system and method for obtaining vehicle owner's driving trajectory

Effective date of registration: 20231016

Granted publication date: 20190412

Pledgee: Industrial Bank Co.,Ltd. Shanghai West sub branch

Pledgor: TAIMA INFORMATION NETWORK TECHNOLOGY Co.,Ltd.

Registration number: Y2023310000647