CN105912271A - 一种车载快速数据储存方法 - Google Patents

一种车载快速数据储存方法 Download PDF

Info

Publication number
CN105912271A
CN105912271A CN201610231555.6A CN201610231555A CN105912271A CN 105912271 A CN105912271 A CN 105912271A CN 201610231555 A CN201610231555 A CN 201610231555A CN 105912271 A CN105912271 A CN 105912271A
Authority
CN
China
Prior art keywords
data
harvester
data storage
storage
data volume
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610231555.6A
Other languages
English (en)
Inventor
张森
申法山
黄学涛
杨龙杰
翟建勋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tunnel Tang Technology Co Ltd
Original Assignee
Tunnel Tang Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tunnel Tang Technology Co Ltd filed Critical Tunnel Tang Technology Co Ltd
Priority to CN201610231555.6A priority Critical patent/CN105912271A/zh
Publication of CN105912271A publication Critical patent/CN105912271A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/061Improving I/O performance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0668Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]

Abstract

本发明公开了一种车载快速数据储存方法,解决了现有技术中数据存储效率低、易堵塞、错误率高等问题。该车载快速数据储存方法包括以下步骤:(1)检测:检测采集器的采集数据量大小,区分出采集数据量较大的采集器和采集数据量较小的采集器;(2)数据分流:通过网络分配为采集数据量较大的采集器单独分配一个数据储存单元以及储存过程,采集数据量较小的采集器集中分配一个数据储存单元以及储存过程;(3)数据分流存储;(4)监视:存储完毕后,从数据存储单元中读取新写入的数据的缩略数据,通过监视器显示。本发明提高了数据采集的效率,减少了后期数据处理中数据的错误率,提高了效率,并节约了人工。

Description

一种车载快速数据储存方法
技术领域
本发明涉及一种数据存储方法,具体的说,是涉及一种车载快速数据储存方法。
背景技术
现有技术中,车载传感器能采集的数据量少,车载数据储存设备单位时间内能储存的数据量小,上述技术方案存在以下弊端:
(1)单位时间内大量的数据涌入会导致数据阻塞,使数据无法储存,同时,导致后续操作出现异常。
(2)无法实时监控数据储存状态,数据储存错误无法得知,数据采集完毕,进行后续处理时才能发现数据错误,返工时消耗大量的人力物力。
发明内容
本发明的目的在于克服上述缺陷,提供一种实现方便、存储高速、数据采集效率高的车载快速数据储存方法。
为了实现上述目的,本发明采用以下技术方案:
一种车载快速数据储存方法,包括以下步骤:
(1)检测:检测采集器的采集数据量大小,区分出采集数据量较大的采集器和采集数据量较小的采集器;其中,对于采集数据量大小的基准判断,通过工作人员进行人为设定。
(2)数据分流:通过网络分配为采集数据量较大的采集器单独分配一个数据储存单元以及储存过程,采集数据量较小的采集器集中分配一个数据储存单元以及储存过程;
(3)数据分流存储;
(4)监视:存储完毕后,从数据存储单元中读取新写入的数据的缩略数据,通过监视器显示。
进一步的,若包含多个采集数据量较大的采集器,则每一个采集数据量较大的采集器均单独对应一个数据储存单元以及储存过程,且所有采集数据量较大的采集器链接到同一个局域网。
进一步的,所述步骤(3)的具体方法如下:采集数据量较大的采集器通过单独与其对应的数据存储单元和存储过程进行数据存储;采集数据量较小的采集器通过集中分配的数据储存单元和储存过程进行数据存储。
进一步的,所述步骤(4)中,监视器为两台,其中一台与采集数据量较大的采集器的数据储存单元对应,另一个与采集数据量较小的采集器的数据储存单元对应。
与现有技术相比,本发明具有以下有益效果:
本发明通过网络分配将数据进行分流处理,使数据在采集过程中能满足高速数据存储,提高了数据采集的效率。同时,采用监视方案,对数据采集进行实时监控,保证了数据采集的正确性,减少了后期数据处理中数据的错误率,由此,提高了效率,节约了人工。
附图说明
图1为本发明-实施例的流程示意图。
其中,附图标记对应名称如下:1-第一中央处理器,2-第二中央处理器,3-路由器,4-第一采集器,5-第二采集器,6-第三采集器,7-第四采集器,8-第五采集器,9-第一硬盘,10-第二硬盘,11-第三硬盘,12-第四硬盘,13-第一监视器,14-第二监视器。
具体实施方式
下面结合附图和实施例对本发明作进一步说明,本发明的实施方式包括但不限于下列实施例。
实施例
本实施例提供了一种车载快速数据储存方法,本方法主要包括两方面,一方面是数据的存储,另一方面是数据的实时监视。本方法的设计原理如下:将数据量较大的存储过程及存储单元与数据量较小的存储过程和存储单元划分开,分别对应不同的存储通道,由此避免所有数据集中存储,导致数据阻塞,使数据无法储存,同时导致后续操作出现异常的弊端;同时,结合监视器对存储完毕的数据进行显示,实现实时监控,避免数据储存错误无法得知的弊端。
本实施例中,车载快速数据储存方法具体包括以下步骤:
一、检测
检测采集器的采集数据量大小,区分出采集数据量较大的采集器和采集数据量较小的采集器;
二、数据分流
通过网络分配为采集数据量较大的采集器单独分配一个数据储存单元以及储存过程,采集数据量较小的采集器集中分配一个数据储存单元以及储存过程;
三、数据分流存储
采集数据量较大的采集器通过单独与其对应的数据存储单元和存储过程进行数据存储;采集数据量较小的采集器通过集中分配的数据储存单元和储存过程进行数据存储。
四、监视
存储完毕后,从数据存储单元中读取新写入的数据的缩略数据,通过监视器显示。进一步的,监视器为两台,其中一台与采集数据量较大的采集器的数据储存单元对应,另一个与采集数据量较小的采集器的数据储存单元对应。
案例:
如图1所示,实现车载快速数据储存方法的硬件包括有:两个中央处理器(第一中央处理器1、第二中央处理器2)、采集数据量较大的采集器(第一采集器4、第二采集器5、第三采集器6)、采集数据量较小的采集器(第四采集器7、第五采集器8)、路由器3、数据存储单元(第一硬盘9、第二硬盘10、第三硬盘11、第四硬盘12,其中,第一硬盘9、第二硬盘10、第三硬盘11分别与第一采集器4、第二采集器5、第三采集器6一一对应),第四硬盘12与第四采集器7、第五采集器8对应;第一监视器13和第二监视器14。通过路由器建立一个局域网,第一采集器4、第二采集器5、第三采集器6均链接到该局域网。
基于上述硬件架构的车载快速数据储存方法的流程如下:
(1)中央处理器1向第一采集器4、第二采集器5、第三采集器6以及第四采集器7、第五采集器8发出数据采集指令。其中,第一采集器4、第二采集器5、第三采集器6采集的数据量级较大,因此,第一采集器4、第二采集器5、第三采集器6的指令通过路由器所建立的局域网进行传达。第四采集器7、第五采集器8直接与第一中央处理器1集成在一起的。
(2)采集器采集完数据后分别把数据储存在硬盘中,其中,第一采集器4、第二采集器5、第三采集器6的数据单独储存在第一硬盘9、第二硬盘10、第三硬盘11中,第四采集器7、第五采集器8的数据量小,统一存储在第四硬盘12中。
(3)第二中央处理器2等待数据存储完毕,存储完毕后,读取新写入的数据的缩略数据,分别通过第一监视器13以及第二监视器14显示。其中,第一中央处理器1和第二中央处理器2可以是同一个中央处理器,由此以减少硬件数量,从而减少用电量以及成本。
按照上述实施例,便可很好地实现本发明。值得说明的是,基于上述设计原理的前提下,为解决同样的技术问题,即使在本发明所公开的结构或方法的基础上做出的一些无实质性的改动或润色,所采用的技术方案的实质仍然与本发明一样,故其也应当在本发明的保护范围内。

Claims (4)

1. 一种车载快速数据储存方法,其特征在于,包括以下步骤:
(1)检测:检测采集器的采集数据量大小,区分出采集数据量较大的采集器和采集数据量较小的采集器;
(2)数据分流:通过网络分配为采集数据量较大的采集器单独分配一个数据储存单元以及储存过程,采集数据量较小的采集器集中分配一个数据储存单元以及储存过程;
(3)数据分流存储;
(4)监视:存储完毕后,从数据存储单元中读取新写入的数据的缩略数据,通过监视器显示。
2.根据权利要求1所述的车载快速数据储存方法,其特征在于,若包含多个采集数据量较大的采集器,则每一个采集数据量较大的采集器均单独对应一个数据储存单元以及储存过程,且所有采集数据量较大的采集器链接到同一个局域网。
3.根据权利要求2所述的车载快速数据储存方法,其特征在于,所述步骤(3)的具体方法如下:采集数据量较大的采集器通过单独与其对应的数据存储单元和存储过程进行数据存储;采集数据量较小的采集器通过集中分配的数据储存单元和储存过程进行数据存储。
4.根据权利要求3所述的车载快速数据储存方法,其特征在于,所述步骤(4)中,监视器为两台,其中一台与采集数据量较大的采集器的数据储存单元对应,另一个与采集数据量较小的采集器的数据储存单元对应。
CN201610231555.6A 2016-04-14 2016-04-14 一种车载快速数据储存方法 Pending CN105912271A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610231555.6A CN105912271A (zh) 2016-04-14 2016-04-14 一种车载快速数据储存方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610231555.6A CN105912271A (zh) 2016-04-14 2016-04-14 一种车载快速数据储存方法

Publications (1)

Publication Number Publication Date
CN105912271A true CN105912271A (zh) 2016-08-31

Family

ID=56747140

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610231555.6A Pending CN105912271A (zh) 2016-04-14 2016-04-14 一种车载快速数据储存方法

Country Status (1)

Country Link
CN (1) CN105912271A (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN2894164Y (zh) * 2006-01-20 2007-04-25 浙江海康集团有限公司 一种车载数字移动通信多路捆绑视频传输系统
CN103973407A (zh) * 2014-05-28 2014-08-06 北京经纬恒润科技有限公司 远程数据传输系统的数据传输速率匹配方法及装置
CN104050100A (zh) * 2014-05-27 2014-09-17 重庆大学 一种适用于大数据环境的数据流存储管理方法及系统
CN105426123A (zh) * 2015-11-06 2016-03-23 安徽容知日新信息技术有限公司 数据管理方法、采集站及设备监测系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN2894164Y (zh) * 2006-01-20 2007-04-25 浙江海康集团有限公司 一种车载数字移动通信多路捆绑视频传输系统
CN104050100A (zh) * 2014-05-27 2014-09-17 重庆大学 一种适用于大数据环境的数据流存储管理方法及系统
CN103973407A (zh) * 2014-05-28 2014-08-06 北京经纬恒润科技有限公司 远程数据传输系统的数据传输速率匹配方法及装置
CN105426123A (zh) * 2015-11-06 2016-03-23 安徽容知日新信息技术有限公司 数据管理方法、采集站及设备监测系统

Similar Documents

Publication Publication Date Title
CN108491861A (zh) 基于多源多参量融合的输变电设备状态异常模式识别方法及装置
CN104020510B (zh) 气象分析方法和装置
CN108062555A (zh) 基于Spark流式聚类的监测数据预警系统
CN104680612A (zh) It设备自动巡检的方法
CN103064974A (zh) 基于时空分析的交通流数据清洗方法
CN107070897A (zh) 入侵检测系统中基于多属性哈希去重的网络日志存储方法
CN203799241U (zh) 一种基于云平台的楼宇监控系统
CN104022913A (zh) 用于数据集群的测试方法和装置
CN105182835A (zh) 一种医疗净化设备的远程数据诊断系统
CN104950082A (zh) 一种病虫害预测系统
CN105912271A (zh) 一种车载快速数据储存方法
CN105021221A (zh) 一种分布式多终端同期数据采集分析系统
CN205721967U (zh) 一种区域建筑能耗平台数据采集处理装置
CN205388780U (zh) 一种机载数据记录仪
CN204882764U (zh) 电网线损监测报警系统
CN206023813U (zh) 网络式现场总线数据监测装置
CN108967146A (zh) 一种用于景观园林的浇灌控制系统及其控制方法
CN204649576U (zh) 一种颗粒图像实时处理系统
CN103983349B (zh) 一种用于低速重载机械的便携式故障诊断仪
CN109300024A (zh) 一种基于大数据的房地产市场监测和分析系统及其使用方法
CN2874577Y (zh) 事故顺序记录装置
CN204465596U (zh) 基于Zigbee技术的厂区设备智能管理系统
CN205015246U (zh) 一种空气环境监测网络
CN202632360U (zh) 一种财务监控管理系统
CN105785829A (zh) 地铁车辆地面试验在线监测系统信息处理模块

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20160831

RJ01 Rejection of invention patent application after publication