CN102254013A - 一种数据处理方法及数据处理装置 - Google Patents
一种数据处理方法及数据处理装置 Download PDFInfo
- Publication number
- CN102254013A CN102254013A CN2011102049748A CN201110204974A CN102254013A CN 102254013 A CN102254013 A CN 102254013A CN 2011102049748 A CN2011102049748 A CN 2011102049748A CN 201110204974 A CN201110204974 A CN 201110204974A CN 102254013 A CN102254013 A CN 102254013A
- Authority
- CN
- China
- Prior art keywords
- sampling time
- sampled data
- data
- time value
- sampled
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Read Only Memory (AREA)
Abstract
本发明实施例公开了一种数据处理方法及数据处理装置,用于节约闪存中的数据存储空间。本发明实施例方法包括:建立采样点与闪存中的存储位置的信息对应关系表,将从采样点获取的采样数据的采样时间值,转换为存储位置信息,查询该信息对应关系表,将转换后的采样数据写入闪存中对应的存储位置。
Description
技术领域
本发明涉及本发明涉及数据处理领域,特别涉及一种数据处理方法以及数据处理装置。
背景技术
地铁的钢轨、电气设备以及地铁附近的埋地管线经常遭受地铁杂散电流的电化学腐蚀,杂散电流监测系统,用以监测直流牵引供电系统中钢轨对地的电压,能够有效评估杂散电流的情况,在早期能监测到地铁的钢轨绝缘水平的下降,防止杂散电流引起的电化学腐蚀,因此,杂散电流采集系统则需要采集并存储大量的采样数据,通过长期观察记录的采样数据来分析地铁系统中杂散电流的情况。
现有技术中,采用嵌入式存储系统对采集系统所采集的大量采样数据进行存储,由于嵌入式存储系统的存储量一般都较小,因此将采集到的大量采样数据通过485网络发送到后台系统,存储到硬盘等大容量的存储设备中,即由后台系统存储采样数据。
但在上述现有技术中,由于要通过485网络将采样数据发送到后台系统,因此要与485网进行连接,造成系统结构复杂,且不能独立完成杂散电流监控。
发明内容
本发明实施例提供了一种数据处理方法以及数据处理装置,用于节约闪存中的数据存储空间。
本发明实施例提供的数据处理方法,包括:建立采样点与闪存中的存储位置的信息对应关系表;将从所述采样点获取的采样数据的采样时间值,转换为存储位置信息;查询所述信息对应关系表,将转换后的采样数据写入闪存中对应的存储位置。
本发明实施例提供的数据处理装置,包括:建立模块,用于建立采样点与闪存中的存储位置的信息对应关系表;转换模块,用于将从所述采样点获取的采样数据的采样时间值,转换为存储位置信息;查询模块,用于查询所述信息对应关系表;写入模块,用于将转换后的采样数据写入闪存中对应的存储位置。
从以上技术方案可以看出,本发明实施例具有以下优点:建立采样通道与闪存中的存储地址的信息对应关系表,将从采样通道获取的采样数据的采样时间值,转换为存储地址信息,查询信息对应关系表,将转换后的采样数据写入闪存中对应的存储位置,不必存储采样时间,而是将采样时间包含在存储地址中,节省大量存储空间存储采样数据,采样数据可以存储在闪存中,而不需将数据发送给后台监控系统进行存储,使得采样数据系统结构简单,不会因网络中通信中断而采集不到数据,设备成本低,采集系统可不依靠后台系统而独立完成杂散电流监控。
附图说明
图1为现有技术中杂散电流监控系统结构示意图;
图2为本发明实施例中的数据处理方法的一个实施例示意图;
图3为本发明实施例中的数据处理方法的另一个实施例示意图;
图4为本发明实施例中的数据处理装置的一个实施例示意图。
具体实施方式
本发明实施例提供了一种数据处理方法及装置,用于节约闪存中的数据存储空间,可以在闪存中存入更多数据,从而使得嵌入式小系统可以独立完成杂散电流的监控。下面分别进行详细的描述。
为便于理解,首先简要介绍现有技术中的杂散电流监控系统,请参阅图1,杂散电流监控系统包括监控中心101和杂散电流采集系统102,其中,监控中心101包括后台监控系统和存储器(硬盘、闪存),杂散电流采集系统102包括杂散电流采集装置,当杂散电流采集装置从计划电压采集点采集到数据并进行数据统计后,通过485网络发送给后台监控系统存储在存储器中,采集系统无法独立进行杂散电流监控。
请参阅图2,本发明实施中的数据处理方法的一个实施例包括:
201、建立采样点与闪存中的存储位置的信息对应关系表;
本发明实施例中,在原有的嵌入式系统中,扩展一块存储空间较小(例如8兆字节)的闪存,用于存储采样数据,对杂散电流的检测是长期、不间断的过程,在进行数据采样时,一般的,每隔30分钟便将采样数据存储在闪存中。
为节省闪存的存储空间,首先建立采样点与闪存中的存储位置的信息对应关系表,假设闪存分为20个扇区,分别可以存储20个采样点的数据,那么采样点与闪存中的存储位置的信息对应关系为,第1个扇区存储第1个采样点的数据,第2个扇区存储第2个采样点的数据,以此类推,第20个扇区存储第20个采样点的数据。
202、将从采样点获取的采样数据的采样时间值,转换为存储位置信息;
由于采样点间隔时间一定与时间密切相关,为节省闪存的存储空间,不需存储进行数据采样的时间,将从采样点获取的采样数据的采样时间值,转换为存储位置信息。
203、查询对应关系表,将转换后的采样数据写入闪存中对应的存储位置。
查询步骤201中建立的采样点与闪存中的存储位置的信息对应关系表,将转换后的采样数据按照相应的存储位置写入闪存。
本发明实施例中,建立采样通道与闪存中的存储地址的信息对应关系表,将从采样通道获取的采样数据的采样时间值,转换为存储地址信息,这样不必存储采样时间,而是将采样时间包含在存储地址中,因此节省大量存储空间存储采样数据,采样数据可以存储在闪存中,而不需将数据发送给后台监控系统进行存储,使得采样数据系统结构简单,不会因网络中通信中断而采集不到数据,设备成本低,采集系统可独立完成杂散电流监控。
为便于理解,下面以另一个实施例描述本发明实施中的数据处理方法,请参阅图3,本发明实施例中的数据处理方法的另一个实施例包括:
301、建立采样点与闪存中的存储位置的信息对应关系表;
本实施例中的步骤301的具体内容,与前述图2所示实施例中的步骤201内容相同,此处不再赘述。
302、判断闪存的缓冲区内采样数据是否存储满,若是,则获得写资源权;
当到达预置时长,例如30分钟,则将获取的采样数据存储到与当前时间对应的闪存的缓冲区内,该缓冲区地址是根据当前采样时间转换得到的,判断该缓冲区内存储满采样数据,若是,则获得在闪存中写入采样数据的权限。
303、获取所采集的采样数据的采样时间值;
304、将采样时间值通过函数转换为存储的扇区信息;
闪存可以划分为多个扇区,将采样时间值通过函数转换为所要存储的扇区。
具体的,通过函数Temp=GetTotalDay(year,mon,day),可得到当前采样时间所在年中的当天日期;
通过函数Temp(扇区号)=(((Temp-1)×48+hour×2)+(min/30))/9,可得到要存储的扇区号,其中,Temp为当前的日期值、hour为当前采样时间的小时值、min为当前采样时间的分钟值。
假设,从第6个采样点获取数据,第6个采样点对应的闪存分为30个扇区,根据采样时间分别对应30个扇区号,将采样数据存入,若采样的时间是2011年10月2日8点30分,则将此时获取的采样数据进行相应扇区号的转换,根据上述公式可得到Temp(扇区号)=((2-1)×48+8×2+30/30)/9=7.2,因此采样数据要存储扇区号为8。
需要说明的是,以上只是为便于描述所举的一个例子,也可以按其他采样时间与存储地址的对应方式进行转换,与实际应用过程相关,此处不作具体限定。
这样处理后,当获取某一个存储地址的数据,可以根据转化关系获知此数据对应的采集点(采集通道)与存储时间,同理,若得知某个30分钟采集的某个采集点(采集通道)的数据,则可获知存储地址信息。
305、查询所述信息对应关系表,将转换后的采样数据写入闪存中对应的存储地址;
查询步骤3201中建立的采样点与闪存中的存储位置的信息对应关系表,将转换后的采样数据按照相应的存储位置写入闪存。
306、释放写资源权。
释放写资源权,继续将采集的数据存储在缓存区。
本发明实施例中,建立采样点与闪存中的存储位置的信息对应关系表,判断闪存的缓冲区内采样数据是否存储满,若是,则获得写资源权,将采样时间值通过函数转换为存储的扇区号,查询该信息对应关系表,将转换后的采样数据写入闪存中对应的存储地址,释放写资源权,可将采样的时间转换为闪存的扇区号,当获取某一个扇区号的采样数据后,则可根据该转换关系获知采样数据对应的采集点以及存储时间,反之亦然,因此,在保证采样点时间信息完整的前提下,不需存储采样点时间,而将采集时间信息包含在存储地址中,节省大量存储空间存储采样数据。
下面介绍本发明实施例中的数据处理装置,请参阅图4,本发明实施例中的数据处理装置的一个实施例包括:
建立模块401,用于建立采样点与闪存中的存储位置的信息对应关系表;
转换模块402,用于将从采样点获取的采样数据的采样时间值,转换为存储位置信息,通过将采样时间值通过函数转换为存储位置信息的方式,将从采样点获取的采样数据的采样时间值,转换为存储位置信息;
查询模块403,用于查询该信息对应关系表;
写入模块404,用于将转换后的采样数据写入闪存中对应的存储位置。
需要说明的是,本发明实施例中的数据处理装置还可以进一步包括:
获取模块405,用于获取采样数据的采样时间值;
存储模块406,用于将采样数据存储在与采样时间值对应的缓冲区内;
判断模块407,用于判断缓冲区内采样数据是否存储满,若是,则获得写资源权;
释放单元408,用于释放写资源权。
本发明实施例中,建立模块401建立采样点与闪存中的存储位置的信息对应关系表,存储模块406,用于将采样数据存储在与采样时间值对应的缓冲区,判断模块407判断闪存的缓冲区内采样数据是否存储满,若是,则获得写资源权,获取模块405获取所采集的采样数据的采样时间值,转换模块402将从采样点获取的采样数据的采样时间值,转换为存储位置信息,具体的,获取模块405通过将采样时间值通过函数转换为存储位置信息的方式,将获取模块405从采样点获取的采样数据的采样时间值,由转换模块402转换为存储位置信息,查询模块403,查询该信息对应关系表,写入模块404将转换后的采样数据写入闪存中对应的存储地址,释放单元408释放写资源权,这样不必存储采样时间,而是将采样时间包含在存储地址中,节省大量存储空间存储采样数据,采样数据可以存储在闪存中,而不需将数据发送给后台监控系统进行存储,使得采样数据系统结构简单,不会因网络中通信中断而采集不到数据,设备成本低,采集系统可独立完成杂散电流监控。
本实施中各模块完成各自功能的具体过程,与前述图2及图3所示实施例中的相应步骤中所描述的内容相同,此处不再赘述。
本领域技术人员可以理解实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上对本发明所提供的一种数据处理方法及数据处理装置进行了详细介绍,对于本领域的技术人员,依据本发明实施例的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
Claims (8)
1.一种数据处理方法,其特征在于,包括:
建立采样点与闪存中的存储位置的信息对应关系表;
将从所述采样点获取的采样数据的采样时间值,转换为存储位置信息;
查询所述信息对应关系表,将转换后的采样数据写入闪存中对应的存储位置。
2.根据权利要求1所述的方法,其特征在于,所述将从采样点获取的采样数据的采样时间值,转换为存储位置信息包括:
获取所述采样数据的采样时间值;
将所述采样时间值通过函数转换为存储位置信息。
3.根据权利要求1或2所述的方法,其特征在于,所述将从采样点获取的采样数据的采样时间值,转换为存储位置信息之前包括:
将采样数据存储在与采样时间值对应的缓冲区内;
判断所述缓冲区内采样数据是否存储满,若是,则获得写资源权。
4.根据权利要求3所述的方法,其特征在于,所述查询信息对应关系表,将转换后的采样数据写入闪存中对应的存储位置之后包括:
释放写资源权。
5.一种数据处理装置,其特征在于,包括:
建立模块,用于建立采样点与闪存中的存储位置的信息对应关系表;
转换模块,用于将从所述采样点获取的采样数据的采样时间值,转换为存储位置信息;
查询模块,用于查询所述信息对应关系表;
写入模块,用于将转换后的采样数据写入闪存中对应的存储位置。
6.根据权利要求5所述的装置,其特征在于,
所述装置还包括:
获取模块,用于获取所述采样数据的采样时间值;
所述转换模块,用于通过将所述采样时间值通过函数转换为存储位置信息的方式,将从所述采样点获取的采样数据的采样时间值,转换为存储位置信息。
7.根据权利要求5或6所述的装置,其特征在于,所述装置还包括:
存储模块,用于将采样数据存储在与采样时间值对应的缓冲区内;
判断模块,用于判断缓冲区内采样数据是否存储满,若是,则获得写资源权。
8.根据权利要求7所述的装置,其特征在于,所述装置还包括:
释放单元,用于释放写资源权。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2011102049748A CN102254013A (zh) | 2011-07-21 | 2011-07-21 | 一种数据处理方法及数据处理装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2011102049748A CN102254013A (zh) | 2011-07-21 | 2011-07-21 | 一种数据处理方法及数据处理装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN102254013A true CN102254013A (zh) | 2011-11-23 |
Family
ID=44981277
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2011102049748A Pending CN102254013A (zh) | 2011-07-21 | 2011-07-21 | 一种数据处理方法及数据处理装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102254013A (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102663145A (zh) * | 2012-04-27 | 2012-09-12 | 蔡远文 | 试验数据变频率采样与存储的方法 |
CN103995549A (zh) * | 2013-01-14 | 2014-08-20 | 湖北大学 | 基于集中温控系统的温度数据采集方法 |
CN104281416A (zh) * | 2014-10-17 | 2015-01-14 | 北京海思敏医疗技术有限公司 | 数据采集、读取方法及装置 |
CN104572812A (zh) * | 2014-11-26 | 2015-04-29 | 利尔达科技集团股份有限公司 | 一种历史数据存储及索引方法 |
CN106407153A (zh) * | 2016-11-23 | 2017-02-15 | 诺仪器(中国)有限公司 | 一种高分辨率数据采集方法及装置 |
CN114070333A (zh) * | 2020-07-29 | 2022-02-18 | 广州海格通信集团股份有限公司 | 波形头的采样点的存取方法、装置、存取设备和通信系统 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050144172A1 (en) * | 2003-12-09 | 2005-06-30 | Michael Kilian | Methods and apparatus for generating a content address to indicate data units written to a storage system proximate in time |
CN101290621A (zh) * | 2007-04-17 | 2008-10-22 | 上海申瑞电力科技股份有限公司 | 安全数字卡的存储检索方法 |
CN102073697A (zh) * | 2010-12-28 | 2011-05-25 | 中兴通讯股份有限公司 | 一种数据处理方法及装置 |
-
2011
- 2011-07-21 CN CN2011102049748A patent/CN102254013A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050144172A1 (en) * | 2003-12-09 | 2005-06-30 | Michael Kilian | Methods and apparatus for generating a content address to indicate data units written to a storage system proximate in time |
CN101290621A (zh) * | 2007-04-17 | 2008-10-22 | 上海申瑞电力科技股份有限公司 | 安全数字卡的存储检索方法 |
CN102073697A (zh) * | 2010-12-28 | 2011-05-25 | 中兴通讯股份有限公司 | 一种数据处理方法及装置 |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102663145A (zh) * | 2012-04-27 | 2012-09-12 | 蔡远文 | 试验数据变频率采样与存储的方法 |
CN103995549A (zh) * | 2013-01-14 | 2014-08-20 | 湖北大学 | 基于集中温控系统的温度数据采集方法 |
CN103995549B (zh) * | 2013-01-14 | 2017-12-01 | 湖北大学 | 基于集中温控系统的温度数据采集方法 |
CN104281416A (zh) * | 2014-10-17 | 2015-01-14 | 北京海思敏医疗技术有限公司 | 数据采集、读取方法及装置 |
CN104281416B (zh) * | 2014-10-17 | 2017-09-01 | 北京海思敏医疗技术有限公司 | 数据采集、读取方法及装置 |
CN104572812A (zh) * | 2014-11-26 | 2015-04-29 | 利尔达科技集团股份有限公司 | 一种历史数据存储及索引方法 |
CN104572812B (zh) * | 2014-11-26 | 2018-02-16 | 利尔达科技集团股份有限公司 | 一种历史数据存储及索引方法 |
CN106407153A (zh) * | 2016-11-23 | 2017-02-15 | 诺仪器(中国)有限公司 | 一种高分辨率数据采集方法及装置 |
CN106407153B (zh) * | 2016-11-23 | 2019-08-23 | 一诺仪器(中国)有限公司 | 一种高分辨率数据采集方法及装置 |
CN114070333A (zh) * | 2020-07-29 | 2022-02-18 | 广州海格通信集团股份有限公司 | 波形头的采样点的存取方法、装置、存取设备和通信系统 |
CN114070333B (zh) * | 2020-07-29 | 2023-03-24 | 广州海格通信集团股份有限公司 | 波形头的采样点的存取方法、装置、存取设备和通信系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102254013A (zh) | 一种数据处理方法及数据处理装置 | |
CN101534213B (zh) | 一种日志的获取方法及日志服务器 | |
US20210150445A1 (en) | Roadway maintenance condition detection and analysis | |
CN107391520B (zh) | 一种基于大数据的智能配电网规划设计辅助决策平台 | |
CN105049814A (zh) | 一种监测分析人员运动轨迹的方法及系统 | |
CN105319482A (zh) | 基于多源信息融合的配电网故障诊断系统及方法 | |
CN104284162A (zh) | 一种视频检索方法和系统 | |
CN101950477A (zh) | 一种交通信息处理方法及装置 | |
CN103592363B (zh) | 监测埋地金属管道防腐涂层破损的方法及装置 | |
CN101807343A (zh) | 一种基于浮动车交通信息的处理方法及处理系统 | |
CN201859537U (zh) | 一种多功能宽带电力载波集中器 | |
CN102508932A (zh) | 一种遥测、遥信数据处理方法及装置 | |
CN103957065A (zh) | 全时频谱监测方法 | |
CN201695090U (zh) | 阴极保护测试桩及阴极保护监测系统 | |
CN203942601U (zh) | 驾考监控装置 | |
CN101515297B (zh) | 历史数据查询方法、路由服务器和查询终端和系统 | |
CN105911379A (zh) | 一种智能电网分布式电力故障录波系统 | |
CN106557550B (zh) | 一种配电终端自描述定点记录的快速存储、检索及补全的实现方法及装置 | |
CN102774401A (zh) | 机车出入库自动测试系统 | |
CN110687590A (zh) | 一种用于微震监测的无线智能数据传输系统及方法 | |
CN103576673A (zh) | 一种机载可替换单元检测系统及检测方法 | |
CN201686746U (zh) | 阴极保护测试桩 | |
CN213519242U (zh) | 一种林间简易便携的鸟声识别系统 | |
CN115695496A (zh) | 一种鱼类标记自动化信息采集系统 | |
CN106447823A (zh) | 车联网行车信息记录系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C12 | Rejection of a patent application after its publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20111123 |